CN103024767A - 移动通信业务端到端性能评估方法及系统 - Google Patents

Abstract

本发明公开一种移动通信业务端到端性能评估方法及系统，该方法包括以下步骤：采集移动通信网络端口的数据；将所采集的数据进行预处理，获得端到端性能评估指标统计所需的关键字段信息库；分别从测量报告MR系统及呼叫跟踪CT系统获取MR数据、CT数据，并根据MR数据、CT数据和关键字段信息库的信息，按照移动通信业务端到端性能评估指标体系进行指标统计；根据统计的移动通信业务端到端性能评估指标，进行业务性能评估。本发明是以用户感知为基础、业务为分析对象的，在移动通信业务的性能评估方法上进行了创新，使得运营商可以评估体现用户感知的移动通信业务端到端的性能。

Description

移动通信业务端到端性能评估方法及系统

技术领域

本发明涉及移动通信领域，尤其涉及一种移动通信业务端到端性能评估方法及系统。

背景技术

随着通信技术的发展，移动通信网络可以为用户提供越来越丰富的移动业务和应用，如彩信、网页浏览、WAP(Wireless Application Protocol，无线应用协议)、流媒体、网络游戏等，这些业务为移动运营商提供了持续增长的收入来源。移动通信服务已经从传统的单一语音业务快速向多元化的数据业务转变，传统的网络管理模式已经无法为用户提供高品质的服务。

首先，传统的2G网络优化手段一般只注重提升KPI(Key PerformanceIndicators，关键性能指标)，并且主要是话音业务的KPI，难以评估和提升数据业务的用户感知，尤其对于种类繁多的数据业务缺乏评估和优化手段。

其次，由于3G、4G时代，应用业务越来越复杂，好的网络KPI并不代表着用户感知的良好。如果用户在业务应用的过程中存在影响感知的任何问题，运营商往往是用户投诉的对象。

因此，运营商面临着严峻的考验，如何高效地在资源和用户体验之间做出最优化的平衡已经成为全世界运营商越来越难实现的目标。

发明内容

本发明的主要目的是提供一种移动通信业务端到端性能评估方法，旨在使得运营商可以评估体现用户感知的移动通信业务端到端的性能。

本发明提供了一种移动通信业务端到端性能评估方法，包括以下步骤：

采集移动通信网络端口的数据；

将所采集的数据进行预处理，获得端到端性能评估指标统计所需的关键字段信息库；

分别从测量报告MR(Measurement Report，测量报告)系统及呼叫跟踪CT(Call Trace，呼叫跟踪)系统获取MR数据、CT数据，并根据MR数据、CT数据和关键字段信息库的信息，按照移动通信业务端到端性能评估指标体系进行指标统计；

根据统计的移动通信业务端到端性能评估指标，进行业务性能评估。

优选地，所述将所采集的数据进行预处理，获得端到端性能评估指标统计所需的关键字段信息库的步骤包括：

将所采集的数据进行协议解码，并按时间进行信息排序；

将经过解码、排序处理的数据，进行单用户信息串联。

从进行信息串联的数据中抽取关键字段信息，建立关键字段信息库。

优选地，所述移动通信业务端到端性能评估指标体系包括预先设置的需要进行性能评估的指标组合；

所述根据MR数据、CT数据和关键字段信息库的信息，按照移动通信业务端到端性能评估指标体系进行指标统计的步骤具体为：

根据MR数据、CT数据及关键字段信息库信息，按照以下任一方式或其任意组合方式统计预先设置的需要进行性能评估的指标：业务类型、用户、网元覆盖范围。

优选地，所述根据统计的移动通信业务端到端性能评估指标，进行业务性能评估的具体为：

从以下任一或任意组合的维度，将统计的移动通信业务端到端性能评估指标进行等级划分，获得性能评估结果：

协议层维度、用户维度、网元维度、端口维度。

优选地，所述端口为无线接入网与核心网之间的接口，或者无线接入网与核心网之间的接口与以下任一或多个接口的任意组合：

核心网的内部网元之间的接口、无线接入网内部网元之间的接口、核心网与外部互操作网之间的接口、移动通信网内的其他网元之间的接口。

本发明还提供了一种移动通信业务端到端性能评估系统，包括：

数据采集服务器，用于采集移动通信网络端口的数据；还用于从MR系统及CT系统获取MR数据、CT数据；

数据处理服务器，包括：

数据预处理模块，用于将所采集的数据进行预处理，获得端到端性能评估指标统计所需的关键字段信息库；

指标统计模块，用于根据MR数据、CT数据和关键字段信息库信息，按照移动通信业务端到端性能评估指标体系进行指标统计；

业务性能评估模块，用于根据统计的移动通信业务端到端性能评估指标，进行业务性能评估。

优选地，所述数据预处理模块包括：

信息排序单元，用于将所采集的数据进行协议解码，并按时间进行信息排序；

信息串联单元，用于将经过解码、排序处理的数据，进行单用户信息串联；

信息库建立单元，用于从进行信息串联的数据中抽取关键字段信息，建立关键字段信息库。

优选地，所述移动通信业务端到端性能评估指标体系包括预先设置的需要进行性能评估的指标组合；

所述指标统计模块具体用于：

根据MR数据、CT数据及关键字段信息库的信息，按照以下任一方式或其任意组合方式统计预先设置的需要进行性能评估的指标：业务类型、用户、网元覆盖范围。

优选地，所述业务性能评估模块具体用于：

从以下任一或任意组合的维度，将统计的移动通信业务端到端性能评估指标进行等级划分，获得性能评估结果：

协议层维度、用户维度、网元维度、端口维度。

优选地，所述系统还包括数据存储服务器，其包括：

原始数据存储模块，用于存储数据采集服务器所采集网络端口的数据、从MR系统获取的MR数据和从CT系统获取的CT数据；

评估体系存储模块，用于存储移动通信业务端到端性能评估指标的评估体系；

指标统计结果存储模块，用于存储移动通信业务端到端性能评估指标统计结果；

业务评估结果存储模块，用于存储移动通信业务端到端性能评估结果；

客户端显示模块，用于各种数据的界面化显示以及操作控制界面的显示。

本发明是以用户感知为基础、业务为分析对象的，在移动通信业务的性能评估方法上进行了创新，与传统的网络性能评估方法相比，具有以下优势：

(1)移动通信业务端到端性能评估系统可通过网络侧镜像端口进行数据采集，不对现网网元进行修改或变更，也不会对现网设备增加负荷。同时，无需通过路测或定点拨测等方式获取数据，这样就使得数据获取更加便捷，也不会引入路测或定点拨测方式获取的数据具有的片面性问题。

(2)以业务为分析对象，直接面向终端用户，能够体现终端用户应用业务过程中的实际感受。

(3)移动通信业务端到端性能评估涉及了物理层到应用层的各层接口协议的工作状态，以及承载业务的无线网、核心网、业务网等端到端设备链全程。

(4)通过多端口的数据采集分析，可实现对端到端链路中每个网元的性能对业务性能的影响评估，并对问题进行定位。

(5)从用户维度评估业务的端到端性能，从而可以制定出有效的用户关怀策略。

附图说明

图1是本发明移动通信业务端到端性能评估方法一实施例的流程示意图；

图2是本发明移动通信业务端到端性能评估方法一实施例中采集网络端口数据的预处理流程示意图；

图3是本发明移动通信业务端到端性能评估方法一实施例中数据采集端口的结构示意图；

图4是本发明移动通信业务端到端性能评估方法一实施例中FTP下载业务的关键字段信息的结构示意图；

图5是本发明移动通信业务端到端性能评估方法一实施例中FTP下载业务的端到端性能评估结果示意图；

图6是本发明移动通信业务端到端性能评估系统一实施例的结构示意图；

图7是本发明移动通信业务端到端性能评估系统一实施例中数据预处理模块的结构示意图；

图8是本发明移动通信业务端到端性能评估系统一实施例中数据存储服务器的结构示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

以下结合说明书附图及具体实施例进一步说明本发明的技术方案。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

图1是本发明移动通信业务端到端性能评估方法一实施例的流程示意图。

参照图1，本发明移动通信业务端到端性能评估方法包括以下步骤：

步骤S110、采集移动通信网络端口的数据；

该端口为无线接入网与核心网之间的接口，或者无线接入网与核心网之间的接口与以下任一或多个接口的任意组合：

核心网的内部网元之间的接口、无线接入网内部网元之间的接口，核心网与外部互操作网(interworked network)之间的接口、移动通信网内的其他网元之间的接口。

步骤S120、将所采集的数据进行预处理，获得端到端性能评估指标统计所需的关键字段信息库；

参照图2，步骤S120进一步包括：

步骤S121、将所采集的数据进行协议解码，并按时间进行信息排序；

由于需要对业务的进行多维度(协议层维度、用户维度、网元维度、端口维度等)的分析，所以必须先对所采集的数据进行协议解码，形成统一的数据，再对解码后的数据按照时间进行信息排序。

步骤S122、将经过解码、排序处理的数据，进行单用户信息串联；

将经过解码、排序处理的数据，进行单用户信息串联，生成以单用户的消息交互过程为个体的信息流组。

步骤S123、从进行信息串联的数据中抽取关键字段信息，建立关键字段信息库。

对信息串联的数据进行过滤，仅保留关键字段信息，建立关键字段信息库。该关键字段信息库中的信息以组为单位，每一组信息代表一个用户的单次业务流程，每一组信息应包含以下字段：

(1)数据采集端口标识字段；

(2)业务类型字段，该业务类型以应用层协议、TCP(Transmission ControlProtocol，传输控制协议)端口号、UDP(User Datagram Protocol，用户数据包协议)端口号及其他特殊字段作为特征字符；

(3)用户标识字段，该用户标识以IMSI(International MobileSubscriber-Identification Number，国际移动用户识别码)、TMSI(TemporaryMobile Subscriber Identity，临时移动用户识别码)或P-TMSI(Packet-Temporary Mobile Subscriber Identity，分组临时移动用户识别码)为特征字符；

(4)网元覆盖标识字段，该网元覆盖标识字段以LAC(Location AreaCode位置区码)、CELLID等标识为特征字符；

(5)移动通信网的非接入层的各种请求、释放消息字段，及其响应消息字段；

(6)TCP等传输层的连接请求、释放消息字段，及其响应消息字段；

(7)应用层的业务请求、释放消息字段，及其响应消息字段；

(8)以上每条消息的绝对时间标识字段。

步骤S130、从MR(Measurement Report，测量报告)系统及CT(CallTrace，呼叫跟踪)系统获取MR数据、数据，并根据MR数据、CT数据和关键字段信息库的信息，按照移动通信业务端到端性能评估指标体系进行指标统计；

在这里需要说明的是，本实施例中的移动通信网络已经部署了MR和CT系统，能正常获取网络面覆盖情况和面向用户的无线接入层连接建立和释放信息的指标，包括连接建立成功率和时延。因此通过分别访问MR系统及CT系统的存储器，即可获得MR数据和CT数据。

所述端到端性能评估指标体系可以根据具体情况而定义，包括预先设置的需要进行性能评估的指标组合，该指标组合既能有效反映用户感知，又能反映整个网络及其构成单元的性能。该端到端性能评估体系还包括各指标统计所采用的计算公式等等。

每个数据采集端口均对应一组移动通信业务端到端性能评估指标。在本实施例中可以定义该端到端性能评估指标包括以下类型：

(1)信号覆盖指标

(2)移动通信网的无线接入层指标

(3)移动通信网的非接入层指标

(4)TCP传输层指标

(5)应用层指标

(6)端到端业务质量指标

上述端到端性能评估指标可以按照以下任一方式或其任意组合进行统计：

●业务类型

●用户

●网元覆盖范围

步骤S140、根据统计的移动通信业务端到端性能评估指标，进行业务性能评估。

步骤S140具体为：以业务为对象，将统计的移动通信业务端到端性能评估指标进行等级划分，获得性能评估结果。以本实施例定义的移动通信业务端到端性能评估体系中包括的评估指标为例：

首先，对每类业务的端到端业务质量指标进行等级划分；

其次，对每类业务的应用层指标、TCP传输层指标、移动通信网的非接入层指标、移动通信网的无线接入层指标和信号覆盖指标分别进行等级划分。

指标等级可以根据需要进行自定义划分。例如，可以按照优秀、良好、一般、较差、很差五个等级划分，也可以按照从好到差分别为一等至十等进行划分为十个等级，还可以按照百分制进行划分，或者其他的等级划分方式。

上述性能评估可以从以下四个维度进行评估：

(1)协议层维度

通过分析步骤S130统计后的移动通信业务端到端性能评估指标中各协议层的指标，可对业务承载的各协议层性能进行评估。

(2)用户维度

将步骤S130统计后的移动通信业务端到端性能评估指标根据用户划分，可对每个用户所使用的每类业务进行性能评估。

(3)网元维度

将步骤S130统计后的移动通信业务端到端性能评估指标根据区域划分，可对小区级或任意小区组合的区域进行每类业务的性能评估。

(4)端口维度

将步骤S130统计后的移动通信业务端到端性能评估指标根据端口划分，可对各采集端口的指标进行对比分析，从而实现对端到端链路中每个网元的性能对业务性能的影响评估，并对问题进行定位。

针对不同的评估要求，可以仅对四个维度中的其中一个或同时对多个维度进行评估。

本发明是以用户感知为基础、业务为分析对象的，在移动通信业务的性能评估方法上进行了创新，与传统的网络性能评估方法相比，具有以下优势：

(1)移动通信业务端到端性能评估系统可通过网络侧镜像端口进行数据采集，不对现网网元进行修改或变更，也不会对现网设备增加负荷。同时，无需通过路测或定点拨测等方式获取数据，这样就使得数据获取更加便捷，也不会引入路测或定点拨测方式获取的数据具有的片面性问题。

(2)以业务为分析对象，直接面向终端用户，能够体现终端用户应用业务过程中的实际感受。

(3)移动通信业务端到端性能评估涉及了物理层到应用层的各层接口协议的工作状态，以及承载业务的无线网、核心网、业务网等端到端设备链全程。

(4)通过多端口的数据采集分析，可实现对端到端链路中每个网元的性能对业务性能的影响评估，并对问题进行定位。

(5)从用户维度评估业务的端到端性能，从而可以制定出有效的用户关怀策略。

下面以某市FTP(File Transfer Protocol，文件传输协议)下载业务为实施例，对本发明移动通信业务端到端性能评估方法进行详细说明。

步骤A1、如图3所示，在UMTS(Universal Mobile TelecommunicationsSystem，通用移动通信系统)网络的IUPS端口进行数据采集；

步骤A2、将所采集数据进行预处理，获得FTP下载业务端到端性能评估指标统计所需的关键字段信息库；

该FTP下载业务的每一组信息包含以下字段：

1.数据采集端口标识字段：IUPS

2.业务类型字段：FTP服务器端TCP端口号为21，应用层协议为FTP协议

3.用户标识字段：IMSI或P-TMSI

4.网元覆盖标识字段：LAC、CELLID

以下第5至第8项字段信息如图4所示

5.移动通信网的非接入层的各种请求、释放消息字段，及其响应消息字段

6.TCP传输层的连接请求、释放消息字段，及其响应消息字段

7.应用层的业务请求、释放消息字段，及其响应消息字段

8.以上每条消息的绝对时间标识字段

步骤A3、根据MR数据、CT数据和关键字段信息库信息，统计FTP下载业务的端到端性能评估指标；

1.根据MR数据，可统计得到信号覆盖指标。

2.根据CT数据，可统计得到RRC(Radio Resource Control，无线资源控制协议)连接成功率和RRC连接时延。

3.根据GPRS(General Packet Radio Service，通用分组无线业务)附着或服务请求过程和PDP(Packet Data Protocol，分组数据协议)上下文激活过程的关键消息字段，统计得到非接入层指标，包括GPRS附着或服务请求成功率、GPRS附着或服务请求时延、PDP激活成功率、PDP激活时延。

4.根据TCP连接过程的关键消息字段，统计得到TCP传输层指标，包括FTP(File Transfer Protocol，文件传输协议)服务器TCP连接成功率、FTP服务器TCP连接时延。

5.根据FTP服务器登陆过程和FTP下载过程的关键消息字段，统计得到应用层指标，包括FTP服务器登陆成功率、FTP服务器登录时延、FTP业务异常中断率、FTP下载速率、FTP下载速率稳定度。

6.端到端业务质量指标，包括FTP服务器端到端连接成功率、FTP服务器端到端连接时延、FTP业务异常中断率、FTP下载速率、FTP下载速率稳定度。

步骤A4、根据步骤A3统计得到的FTP下载业务端到端性能评估指标，进行FTP下载业务的性能评估。本实施例中，指标等级按照从好到差划分为“一等”至“十等”共十个等级。

如图5所示，为FTP下载业务的端到端性能评估指标的全网统计与评估结果。

根据协议层维度，将FPT下载业务的端到端性能评估指标进行统计，获得评估结果。从FTP下载业务的端到端业务质量指标等级评估结果，可以看出：

FTP服务器端到端连接成功率仅为“六等”，质量很差，需要重点关注。其他指标良好。

从FTP下载业务的应用层指标、TCP传输层指标、移动通信网的非接入层指标、移动通信网的无线接入层指标和信号覆盖指标等级评估结果，可以看出：

与FTP服务器端到端连接成功率关联的FTP服务器登陆成功率仅为“六等”，质量很差，是导致端到端业务质量指标差的主要原因，需要重点关注，通过对响应消息关键字段响应码的分析，得到大量的连接失败为FTP服务器拒绝导致，从而可以判断问题所在为FTP服务器，其他指标良好。

图6是本发明移动通信业务端到端性能评估系统一实施例的结构示意图。

参照图6，本发明移动通信业务端到端性能评估系统包括：

数据采集服务器110，用于采集移动通信网络端口的数据；还用于从MR系统及CT系统获取MR数据、CT数据；

数据处理服务器120，包括：

数据预处理模块121，用于将所采集的数据进行预处理，获得端到端性能评估指标统计所需的关键字段信息库；

指标统计模块122，用于根据MR数据、CT数据和关键字段信息库的信息，按照移动通信业务端到端性能评估指标体系进行指标统计；

业务性能评估模块123，用于根据统计的移动通信业务端到端性能评估指标，进行业务性能评估。

参照图7，上述数据预处理模块121包括：

信息排序单元1211，用于将所采集的数据进行协议解码，并按时间进行信息排序；

信息串联单元1212，用于将经过解码、排序处理的数据，进行单用户信息串联。

信息库建立单元1213，用于从进行信息串联的数据中抽取关键字段信息，建立关键字段信息库。

上述指标统计模块122具体用于：

根据MR数据、CT数据及关键字段信息库的信息，按照以下任一方式或其任意组合方式统计预先设置的需要进行性能评估的指标：业务类型、用户、网元覆盖范围。

上述业务性能评估模块123具体用于：

从以下任一或任意组合的维度，将统计的移动通信业务端到端性能评估指标进行等级划分，获得性能评估结果：

协议层维度、用户维度、网元维度、端口维度。

上述数据采集服务器110采集的端口为无线接入网与核心网之间的接口，或者无线接入网与核心网之间的接口与以下任一或多个端口的任意组合：

核心网的内部网元之间的接口、无线接入网内部网元之间的接口、核心网与外部互操作网(interworked network)之间的接口、移动通信网内的其他网元之间的接口。

参照图8，上述系统还包括数据存储服务器130，其包括：

原始数据存储模块131，用于存储数据采集服务器110所采集网络端口的数据、从MR系统获取的MR数据和从CT系统获取的CT数据；

评估体系存储模块132，用于存储移动通信业务端到端性能评估指标的评估体系；

指标统计结果存储模块133，用于存储移动通信业务端到端性能评估指标统计的结果；

业务评估结果存储模块134，用于存储移动通信业务端到端性能评估结果；

客户端显示模块135，用于各种数据的界面化显示以及操作控制界面的显示。

本发明是以用户感知为基础、业务为分析对象的，在移动通信业务的性能评估方法上进行了创新，与传统的网络性能评估方法相比，具有以下优势：

(1)移动通信业务端到端性能评估系统可通过网络侧镜像端口进行数据采集，不对现网网元进行修改或变更，也不会对现网设备增加负荷。同时，无需通过路测或定点拨测等方式获取数据，这样就使得数据获取更加便捷，也不会引入路测或定点拨测方式获取的数据具有的片面性问题。

(2)以业务为分析对象，直接面向终端用户，能够体现终端用户应用业务过程中的实际感受。

(3)移动通信业务端到端性能评估涉及了物理层到应用层的各层接口协议的工作状态，以及承载业务的无线网、核心网、业务网等端到端设备链全程。

(4)通过多端口的数据采集分析，可实现对端到端链路中每个网元的性能对业务性能的影响评估，并对问题进行定位。

(5)从用户维度评估业务的端到端性能，从而可以制定出有效的用户关怀测策略。

以上所述仅为本发明的优选实施例，并非因此限制其专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种移动通信业务端到端性能评估方法，其特征在于，包括以下步骤：

采集移动通信网络端口的数据；

将所采集的数据进行预处理，获得端到端性能评估指标统计所需的关键字段信息库；

分别从测量报告MR系统及呼叫跟踪CT系统获取MR数据、CT数据，并根据MR数据、CT数据和关键字段信息库的信息，按照移动通信业务端到端性能评估指标体系进行指标统计；

根据统计的移动通信业务端到端性能评估指标，进行业务性能评估。

2.根据权利要求1所述的方法，其特征在于，所述将所采集的数据进行预处理，获得端到端性能评估指标统计所需的关键字段信息库的步骤包括：

将所采集的数据进行协议解码，并按时间进行信息排序；

将经过解码、排序处理的数据，进行单用户信息串联。

从进行信息串联的数据中抽取关键字段信息，建立关键字段信息库。

3.根据权利要求2所述的方法，其特征在于，所述移动通信业务端到端性能评估指标体系包括预先设置的需要进行性能评估的指标组合；

所述根据MR数据、CT数据和关键字段信息库的信息，按照移动通信业务端到端性能评估指标体系进行指标统计的步骤具体为：

根据MR数据、CT数据及关键字段信息库信息，按照以下任一方式或其任意组合方式统计预先设置的需要进行性能评估的指标：业务类型、用户、网元覆盖范围。

4.根据权利要求3所述的方法，其特征在于，所述根据统计的移动通信业务端到端性能评估指标，进行业务性能评估的具体为：

从以下任一或任意组合的维度，将统计的移动通信业务端到端性能评估指标进行等级划分，获得性能评估结果：

协议层维度、用户维度、网元维度、端口维度。

5.根据权利要求1所述的方法，其特征在于，所述端口为无线接入网与核心网之间的接口，或者无线接入网与核心网之间的接口与以下任一或多个接口的任意组合：

核心网的内部网元之间的接口、无线接入网内部网元之间的接口、核心网与外部互操作网之间的接口、移动通信网内的其他网元之间的接口。

6.一种移动通信业务端到端性能评估系统，其特征在于，包括：

数据采集服务器，用于采集移动通信网络端口的数据；还用于从MR系统及CT系统获取MR数据、CT数据；

数据处理服务器，包括：

数据预处理模块，用于将所采集的数据进行预处理，获得端到端性能评估指标统计所需的关键字段信息库；

指标统计模块，用于根据MR数据、CT数据和关键字段信息库的信息，按照移动通信业务端到端性能评估指标体系进行指标统计；

业务性能评估模块，用于根据统计的移动通信业务端到端性能评估指标，进行业务性能评估。

7.根据权利要求6所述的系统，其特征在于，所述数据预处理模块包括：

信息排序单元，用于将所采集的数据进行协议解码，并按时间进行信息排序；

信息串联单元，用于将经过解码、排序处理的数据，进行单用户信息串联；

信息库建立单元，用于从进行信息串联的数据中抽取关键字段信息，建立关键字段信息库。

8.根据权利要求7所述的系统，其特征在于，所述移动通信业务端到端性能评估指标体系包括预先设置的需要进行性能评估的指标组合；

所述指标统计模块具体用于：

根据MR数据、CT数据及关键字段信息库的信息，按照以下任一方式或其任意组合方式统计预先设置的需要进行性能评估的指标：业务类型、用户、网元覆盖范围。

9.根据权利要求8所述的系统，其特征在于，所述业务性能评估模块具体用于：

从以下任一或任意组合的维度，将统计的移动通信业务端到端性能评估指标进行等级划分，获得性能评估结果：

协议层维度、用户维度、网元维度、端口维度。

10.根据权利要求9所述的系统，其特征在于，还包括数据存储服务器，其包括：

原始数据存储模块，用于存储数据采集服务器所采集网络端口的数据、从MR系统获取的MR数据和从CT系统获取的CT数据；

评估体系存储模块，用于存储移动通信业务端到端性能评估指标的评估体系；

指标统计结果存储模块，用于存储移动通信业务端到端性能评估指标统计结果；

业务评估结果存储模块，用于存储移动通信业务端到端性能评估结果；

客户端显示模块，用于各种数据的界面化显示以及操作控制界面的显示。

Images