CN104468259A - 一种通讯业务资费自动化测试方法 - Google Patents

Abstract

本发明公开了一种通讯业务资费自动化测试方法，包括如下步骤：a)选定通讯业务中需要测试的业务及其资费信息，同时获取通讯业务用户的信息；b)根据所选通讯业务用户的用户类型和套餐类型设计测试用例脚本，并预先计算出资费数据作为比对数据；c)执行测试用例脚本，获取测试环境或者生产环境上的资费数据进行比对，确认资费的正确性；d)执行所有测试用例脚本后，统计显示测试通过率和回归完成时间。本发明根据所选用户类型和套餐类型设计测试用例脚本，预先计算出资费数据作为比对数据，从而实现资费自动化测试，并能够适应快速更新的套餐业务的资费测试，同时对重复测试易于做到自动回归执行，大大降低测试人工和成本。

Description

一种通讯业务资费自动化测试方法

技术领域

本发明涉及一种资费测试方法，尤其涉及一种通讯业务资费自动化测试方法。 

背景技术

目前BOSS系统(Business&Operation Support System，业务运营支撑系统)计费测试主要有以下方法： 

1、传统的手工测试：业务支撑系统软件测试行业最常用的测试方法，通过手工拨测进行业务消费的执行，获取计费账单，然后人工对账，计费出账。需要测试人员对涉及计费的所有业务都手工执行，才能获取完整的计费账单，对照账单，确认系统是否出现问题。 

2、业务消费自动化执行，计费账单人工对账：利用目前市面上存在的模拟用户软件，执行涉及计费的业务，然后获取计费账单，人工对账，确认系统是否存在计费问题。 

上述的资费测试方法，都是手工或者半自动化测试策略，测试效率低下，同时对账也是依靠人来进行，难免出现错误。对于时间紧迫，测试量大的套餐资费测试，以上测试方法已经严重的落后，并且在成本控制和竞争力方面显得束手无策，只能通过成本的增加换取时间的竞争优势。基于资费自动化测试的方法既可以降低测试成本，同时可以充分利用晚上时间进行测试，提高产品在市场上的时间竞争力度。 

目前移动通信市场有如下特点：业务种类繁多，新业务增长迅速，计费系统需实时变动、升级，以适应业务的需求，从而使系统的风险增加，这就给计费系统的准确性、稳定性、高效性提出了更高的要求，面对软件系统的变化，前期的测试验证也要求更高的效率及精确度。 

由上可见，传统的测试方法存在如下缺点： 

1)、时间成本高，无法快速完成测试。测试任务繁重，时间紧迫的情况下，很难快速完成测试任务，保证计费的基准度，因此大多情况下采用部分测试策略，导致软件上线后错漏百出。 

2)、手工准备用户数据。资费测试都是手工准备用户数据及修改话单文件，手工计算费率和折扣率，测试结果手工逐一比对，对测试人员的细心程度依赖性强，同时测试效率也很低。 

3)、测试不具备重复性。手工测试不具备重复性测试，维护性差，导致测试效 率低。资费测试本身而言是一个重复执行的过程，因此数据的重复利用对提高测试效率具有很好的推动作用。 

4)、无法进行完整的回归测试。在人员流动率较大的情况下，很难对现有的套餐进行完整的回归测试，同时对于新增套餐，很难做到自动验证。无法做到需求和用例的直接跟踪关系，测试覆盖性差。 

发明内容

本发明所要解决的技术问题是提供一种通讯业务资费自动化测试方法，能够适应快速更新的套餐业务的资费测试，同时对重复测试易于做到自动回归执行，具有很好的灵活性和可重复性，大大降低测试人工和成本。 

本发明为解决上述技术问题而采用的技术方案是提供一种通讯业务资费自动化测试方法，包括如下步骤：a)选定通讯业务中需要测试的业务及其资费信息，同时获取通讯业务用户的信息；b)根据所选通讯业务用户的用户类型和套餐类型设计测试用例脚本，并预先计算出资费数据作为比对数据；c)执行测试用例脚本，获取测试环境或者生产环境上的资费数据进行比对，确认资费的正确性；d)执行所有测试用例脚本后，统计显示测试通过率和回归完成时间。 

上述的通讯业务资费自动化测试方法，其中，所述资费信息包括免费资源、套餐资费和超出套餐使用部分资费，所述步骤b)将每种套餐内和套餐外的所有业务和相应的话单类型相关联，所述话单包括短信话单、语音话单和数据话单，所述测试用例脚本覆盖套餐内和套餐外的所有业务，并根据相关联的话单类型预先计算出资费数据。 

上述的通讯业务资费自动化测试方法，其中，所述步骤c)还包括在测试环境中根据配置的套餐类型初始化MDB数据，准备好测试数据，然后将初始化好的MDB数据和目前的套餐配置数据进行备份，每次执行所有测试用例脚本前，将所述MDB数据和套餐配置数据恢复进行回归测试。 

上述的通讯业务资费自动化测试方法，其中，所述初始化MDB数据包括输入主被叫号码初始化用户及其计费MDB，启动计费相应进程，清空资费验证的输入输出目录。 

上述的通讯业务资费自动化测试方法，其中，每次执行所有测试用例脚本完成后，通过逐一比对资费数据是否正确计算总共多少个测试用例脚本通过，然后将通过的测试用例脚本除以测试用例脚本总数得出测试通过率；每个测试用例执行都记录有开始时间和结束时间，当所有的测试用例脚本执行完成后，自动统计第一个测 试用例开始执行的时间和最后一个用例执行完成的时间，从而得出回归完成时间。 

上述的通讯业务资费自动化测试方法，其中，对每个测试用例，如果测试通话时长与预设测试通话时长不一致，则将测试通话时长统一转换后再进行逐一比对资费数据是否正确。 

本发明对比现有技术有如下的有益效果：本发明提供的通讯业务资费自动化测试方法，通过选定通讯业务中需要测试的业务及其资费信息，并根据所选通讯业务用户的用户类型和套餐类型设计测试用例脚本，预先计算出资费数据作为比对数据，从而实现资费自动化测试，并能够适应快速更新的套餐业务的资费测试，同时对重复测试易于做到自动回归执行，具有很好的灵活性和可重复性，大大降低测试人工和成本。 

附图说明

图1为本发明通讯业务资费自动化测试主流程示意图； 

图2为本发明通讯业务资费自动化测试详细流程示意图； 

图3为本发明通讯业务资费自动化测试平台架构示意图； 

图4为本发明通讯业务资费自动化测试环境拓扑结构示意图； 

图5为本发明通讯业务资费自动化生产环境拓扑结构示意图。 

具体实施方式

下面结合附图和实施例对本发明作进一步的描述。 

图1为本发明通讯业务资费自动化测试主流程示意图。 

请参见图1，本发明提供的通讯业务资费自动化测试方法包括如下步骤： 

步骤S1：选定通讯业务中需要测试的业务及其资费信息，同时获取通讯业务用户的信息；所述资费信息包括免费资源、套餐资费和超出套餐使用部分资费。 

步骤S2：根据所选通讯业务用户的用户类型和套餐类型设计测试用例脚本，并预先计算出资费数据作为比对数据；具体包括将每种套餐内和套餐外的所有业务和相应的话单类型相关联，所述话单包括短信话单、语音话单和数据话单，所述测试用例脚本覆盖套餐内和套餐外的所有业务，并根据相关联的话单类型预先计算出资费数据。 

步骤S3：执行测试用例脚本，获取测试环境或者生产环境上的资费数据进行比对，确认资费的正确性；为了便于进行回归测试，在测试环境中可根据配置的套餐类型初始化MDB数据(MDB：Access数据库文件)，包括输入主被叫号码初始化用户 及其计费MDB，启动计费相应进程，清空资费验证的输入输出目录，准备好测试数据，然后将初始化好的MDB数据和目前的套餐配置数据进行备份，每次执行所有测试用例脚本前，将所述MDB数据和套餐配置数据恢复进行回归测试。 

本发明提供的通讯业务资费自动化测试方法，通过资费测试的需求，获取系统中需要测试的资费种类和计费方式，同时获取用户的信息等。然后通过资费测试流程的梳理，确认测试执行过程中需要的用户类型、套餐类型，明确资费的计算方式，自动计算出资费数据，形成用例脚本的比对数据，然后执行测试脚本，获取测试环境或者生产环境上的资费数据进行比对，确认资费的正确性。所有脚本执行结束后，可以清晰的展示测试通过率、回归完成时间等测试指标。如果测试用例脚本总数有100个，每个测试用例脚本执行都有执行结果的状态，当所有测试用例脚本执行完成后，系统会自动计算总共多少个测试用例脚本通过，然后将通过的测试用例脚本除以测试用例脚本总数得出测试通过率。每个测试用例执行都有开始时间和结束时间，当所有的测试用例脚本执行完成后，都知道每个用例的开始时间和结束时间，系统自动化统计该次总测试用例开始执行的时间和最后一个用例执行完成的时间，从而得出回归完成时间。各主要步骤如下： 

1、资费测试需求获取 

资费测试需求的获取，是梳理资费测试流程的过程，明确测试过程中所需要的输入、输出数据等，按照资费的计费方式整理出对比数据，明确测试步骤和执行顺序，按照过程设计测试平台的管理模块。通过对BOSS系统的分析，可以得知资费测试管理平台需要实现以下功能，来完成测试管理： 

套餐资费信息管理：包括套餐基础信息及对应的资费参数； 

用户资料管理：测试用户资料可按照测试需求配置和更改，用户mdb数据保存及恢复； 

测试需求、案例管理：包括测试需求及案例的新增，删除，查询，修改，统计等) 

计费话单生成：根据案例的要求，自动生成计费系统实现计费的各类话单文件，用于后续数据比对； 

计费账单计算：测试案例计费数据结果自动计算； 

测试执行：备份数据恢复，测试环境上的已有套餐的回归测试及新增套餐的资费验证，生产环境上的套餐资费自动拨测验证； 

结果比对：系统账单与测试案例预期结果自动比对，完成测试判断； 

测试结果展示：清晰的展示测试通过率、回归完成时间等测试指标； 

通过以上的需求分析，就可以清晰的获取整个平台的功能，建立测试平台的雏形，为后续的平台建立打下基础。 

2、资费测试的实施流程梳理 

在需求明确的基础上，分析确定资费测试的开展方案，梳理出测试流程，详细的实施流程如图2所示，按照测试流程完成数据和测试用例的编写，然后依托测试平台，就可以建立起重复利用，24小时无人值守的资费测试系统。 

2.1确定测试范围，整理资费信息 

根据新的业务需求和现网用户的套餐使用信息，选定需要测试的业务及其套餐信息，用户套餐分为基本套餐和促销产品，比如流量加油包等。 

针对测试的套餐，整理出其对应的免费资源及资费信息，资费信息包括套餐资费和超出套餐使用部分资费。基本套餐资费信息展示如下： 

对于套餐使用超出部分短信0.1元/条，其他资费信息如下： 

2.2套餐关联话单类型整理 

把每种套餐对应哪些话单类型关联出来，比如基础套餐：15元基本套餐(动感地带音乐套餐普通)对应着三种基础服务：短信、通话、数据，则其对应的话单测试也关联着三种：短信话单、语音话单、数据话单，整理出相应的话单类型。 

2.3场景与案例设计 

根据选择的套餐特点，设定测试场景，测试场景包括套餐内使用情况和超出套餐后的使用计费情况，然后根据业务的场景，设计具体的测试用例。如下所示： 

测试用例如下所示： 

2.4数据准备与信息录入 

测试数据需要准备以下数据： 

测试环境中话单模板准备：根据测试的话单类型，固化话单模板； 

测试数据准备：根据测试案例的要求，录入相应的主叫号码及被叫号码，供测试时使用，在测试环境中需初始化MDB数据，配置对应的套餐使用情况，准备好测试数据，需要将初始化好的MDB数据库和目前的套餐配置数据进行备份，每次执行自动化前，将MDB数据库和套餐配置数据恢复，保证自动化测试的数据准备性和用例的覆盖率。 

在生产环境中测试数据需订购相应套餐； 

把上面整理好的信息录入资费测试管理平台中，并根据测试需求定制测试任务，在测试环境生成脚本用例或在生产环境调用拨测设备，进行相应测试并收集测试结果，自动校验计费结果，形成测试报告。 

3、测试管理平台的实现 

明确了资费自动化测试的实施流程之后，本发明就可以根据整个过程中的步骤，按照需求搭建管理平台，对整个测试过程的流程和数据进行统一管理调配，同时对任务的分发和定时操作等做相应的管理，就可以实现无人值守测试，如图3所示。 

3.1模块说明 

当BOSS系统变更程序或配置文件、参数变更后，可使用资费测试管理平台根据测试需求覆盖各种话单类型和所有套餐，对已有套餐进行自动回归测试，新增套餐进行资费验证，最终生成测试报告反映系统的情况。为了满足测试管理和变更的需求，就需要灵活的进行配置和操作，因此我们在平台设置以下模块，来实现整个平 台的管理和运作： 

用户管理：配置使用资费平台的用户账号信息。 

权限管理：配置各用户访问资费平台功能权限。 

项目管理：支持对多个项目进行管理，一个项目指一个省份的资费测试。支持用户对项目间的切换。 

测试终端管理：配置执行测试的测试终端。 

测试工具管理：配置执行测试的自动化测试工具。 

拨测设备管理：配置sim卡池和远程拨测设备信息。 

套餐、资费信息管理：分为套餐信息管理及资费信息管理，主要是管理现有套餐的基本信息、免费资源及资费信息，制定相应模板，根据市场部发布的套餐资费信息整理导入系统进行管理，可在此界面进行脚本案例自动生成。 

用户资料管理：对测试数据(包括主叫、被叫)进行相应管理，可修改、保存用户mdb文件，上传到指定目录，可进行增加、修改、删除操作 

话单模板管理：可导入各种类型的话单模板，并进行管理，对各种套餐话单进行封装管理 

测试需求管理：包括测试需求的新增，删除，查询，修改，统计等方面的操作功能，测试需求也是回归验证和资费验证的切入点，测试需求可以是各种用户套餐和产品的集合，也可以是计费系统功能需求的集合，也可以是各类话单的集合 

测试案例管理：不仅提供了对测试案例的新增、删除、修改、查询、统计等方面的操作，同时支持根据用户的需求进行筛选、生成自动测试平台需要的测试案例信息 

脚本用例管理：根据测试案例需求，输入相应的测试数据，并选定话单模板，生成可执行的计费话单文件，也可以对自动生成的脚本用例进行修改调整 

测试任务管理：根据测试计划选定测试案例及脚本，测试任务支持立刻执行和周期性计划执行。 

资费测试初始化：实现MDB的初始化，启动计费相应进程，清空资费验证的输入输出目录 

测试报告管理：统计输出测试结果，进行相应展示 

脚本用例监控：实时监控脚本用例的生成、下发到脚本用例执行的情况。 

任务监控：实时监控各个任务的生成、下发到任务执行情况。 

任务工程生成：根据测试任务生成对应的任务工程。 

脚本用例结果收集：平台实时收集脚本用例运行情况，将用例脚本的结果保存 到数据中。 

任务结果收集：平台实时收集脚本用例执行情况，将实时结果保存到数据库中。 

任务调度管理：将任务工程分发到不同的测试终端，根据任务的优先级级别进行并发执行，同时实现负载均衡。 

3.2测试环境资费测试 

测试环境测试是生产测试前的一个很重要的环节，从经验来看，如果测试环境测试通过，那么在生产环境出现问题的概率非常的低，所以说测试环境的测试是一个很重要的环节。 

测试环境的测试基于平台展开，直接利用平台进行测试脚本的执行分发和测试结果的收集分析比对，然后出具相应的测试报告，测试拓扑图如图4所示。 

3.3生产环境资费测试 

生产环境的资费自动化测试相对而言比较复杂一些，因为套餐消费需要有真实的拨测设备去执行，然后获取话单进行比对，因此比较难以搭建较大数量用户的测试系统。其测试流程和网络拓扑如图5所示。测试执行过程中，首先由拨测设备发起消费，然后自动化平台获取资费清单进行数据比对，判断计费系统的正确性。 

4、案例效果 

4.1测试数据准备及录入 

某电信运营商拟推出15元动感地带品牌套餐，根据套餐的内容和资费信息，可以得到套餐内和套餐外费用收取明细，套餐信息如下表所示： 

套餐外费用明细如下表所示： 

资费和套餐信息录入：在资费和套餐管理模块中，录入对应的信息。把录入的资费信息分别导入语音资费、短信资费、彩信资费、GPRS资费等模块中，导入成功 后可选自动生成案例，则根据导入的资费信息自动生成脚本用例供测试。 

用户资料的录入：在用户资料管理模块，新增测试用户数据，输入对应的测试号码及订购套餐信息。 

a)主叫号码配置如下所示： 

主叫号码	品牌	套餐名称	套餐标识	归属地
					13828389567	动感地带	15基本套餐(动感地带音乐套餐普通)	90001212	拉萨

b)被叫号码配置如下所示： 

被叫号码	用途	基本主叫	归属地	备注
					00886226522123	语音、短信、WLAN	台湾	00886

1、话单模板的录入：导入对应的语音、短信和GPRS数据的话单模板 

话单模板名称	话单模板内容
		语音	语音.xml
短信	短信.xml
		GPRS	GPRS.xml

导入上述的数据后，数据准备和录入工作完成，只需要后续执行测试用例，然后进行测试结果的比对，就可以完成资费的测试。 

4.2测试实现及其结果对比展示 

资费信息和测试数据录入后，就可以从测试需求出发，创建测试用例，执行测试，获取测试结果。 

创建测试需求：在测试需求管理模块，创建新的测试需求，如：15基本套餐(动感地带音乐套餐普通) 

测试用例生成：在测试案例管理模块，新增测试案例，选择对应的测试需求名称，然后配置测试类型(语音、短信、数据流量)、消费类型(套餐内、套餐外、跨国、漫游等)、消耗时长等数据，资费自动化测试平台会自动计算测试案例的资费情况，生成测试案例，展示如下： 

测试案例与话单的关联：将前面生成的测试用例与对应的话单模板相关联，生成对应的比对话单文件，对应关联关系如下： 

脚本用例编号	测试案例编号	话单文件
			Script_case_001	Test_case_001	Script_case_001.txt
Script_case_002	Test_case_002	Script_case_002.txt

资费数据初始化：在资费测试初始化模块对测试环境进行清理，初始化用户及其计费MDB，启动计费相应进程，清空资费验证的输入输出目录。 

测试任务的定制：在测试任务管理模块创建测试任务，选定相应脚本和执行类型(可以定时或者立即执行)，创建完成后开始执行测试。 

测试结果输出及报告生成：测试任务完成后，就可以在测试报告管理模块查看对应的任务的执行结果，并根据脚本执行的Log文件，查看错误原因，分析测试结果等。 

利用以上资费自动化测试平台，借助自动化测试的原理，就可以顺利完成资费的自动化测试执行，实现24小时无人值守测试，并可以提高测试效率，保证上线后资费的正确性。 

综上所述，本发明提供的通讯业务资费自动化测试方法，获取资费测试需求，利用资费话单自动比对方式测试资费，给资费自动化测试提供了实现的可能性；通过对资费数据的初始化，保证系统能够重复执行资费测试任务。具体优点如下：1、资费测试过程明确：在测试实现的整个过程中，测试流程明确，对于每一步的操作目标明确，易于理解，符合一般人的思维模式。2、平台化测试设计：平台化的测试 设计，使得测试用例的编写和执行操作简单，对测试人员的素质要求降低，可以减少人为原因导致的错误，保证了测试的质量。3、测试环境和生产环境测试全覆盖：能够通过平台驱动完成测试环境和生产环境的测试，利用一套脚本完成全部测试，避免了重复脚本开发。4、维护方便：平台维护简单，只需要调整参数和配置就可以完成新的测试任务。同时对于多次重复的测试，可以保证测试的一致性，避免任务不确定因素的引入，保证测试质量。5、历史测试数据查询方便：可以方便查询测试的历史数据，便于寻根朔源。6、执行过程记录完整：完整记录测试执行过程中的问题，便于查找定位问题。 

虽然本发明已以较佳实施例揭示如上，然其并非用以限定本发明，任何本领域技术人员，在不脱离本发明的精神和范围内，当可作些许的修改和完善，因此本发明的保护范围当以权利要求书所界定的为准。 

Claims (6)

1.一种通讯业务资费自动化测试方法，其特征在于，包括如下步骤：

a)选定通讯业务中需要测试的业务及其资费信息，同时获取通讯业务用户的信息；

b)根据所选通讯业务用户的用户类型和套餐类型设计测试用例脚本，并预先计算出资费数据作为比对数据；

c)执行测试用例脚本，获取测试环境或者生产环境上的资费数据进行比对，确认资费的正确性；

d)执行所有测试用例脚本后，统计显示测试通过率和回归完成时间。

2.如权利要求1所述的通讯业务资费自动化测试方法，其特征在于，所述资费信息包括免费资源、套餐资费和超出套餐使用部分资费，所述步骤b)将每种套餐内和套餐外的所有业务和相应的话单类型相关联，所述话单包括短信话单、语音话单和数据话单，所述测试用例脚本覆盖套餐内和套餐外的所有业务，并根据相关联的话单类型预先计算出资费数据。

3.如权利要求2所述的通讯业务资费自动化测试方法，其特征在于，所述步骤c)还包括在测试环境中根据配置的套餐类型初始化MDB数据，准备好测试数据，然后将初始化好的MDB数据和目前的套餐配置数据进行备份，每次执行所有测试用例脚本前，将所述MDB数据和套餐配置数据恢复进行回归测试。

4.如权利要求3所述的通讯业务资费自动化测试方法，其特征在于，所述初始化MDB数据包括输入主被叫号码初始化用户及其计费MDB，启动计费相应进程，清空资费验证的输入输出目录。

5.如权利要求3所述的通讯业务资费自动化测试方法，其特征在于，每次执行所有测试用例脚本完成后，通过逐一比对资费数据是否正确计算总共多少个测试用例脚本通过，然后将通过的测试用例脚本除以测试用例脚本总数得出测试通过率；每个测试用例执行都记录有开始时间和结束时间，当所有的测试用例脚本执行完成后，自动统计第一个测试用例开始执行的时间和最后一个用例执行完成的时间，从而得出回归完成时间。

6.如权利要求5所述的通讯业务资费自动化测试方法，其特征在于，对每个测试用例，如果测试通话时长与预设测试通话时长不一致，则将测试通话时长统一转换后再进行逐一比对资费数据是否正确。