CN111400147A - 一种业务质量测试方法、装置和系统 - Google Patents

一种业务质量测试方法、装置和系统 Download PDF

Info

Publication number
CN111400147A
CN111400147A CN201910002535.5A CN201910002535A CN111400147A CN 111400147 A CN111400147 A CN 111400147A CN 201910002535 A CN201910002535 A CN 201910002535A CN 111400147 A CN111400147 A CN 111400147A
Authority
CN
China
Prior art keywords
data
test
service
environment
management
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910002535.5A
Other languages
English (en)
Other versions
CN111400147B (zh
Inventor
刘越
段宣翡
金凌
史玉良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Communications Ltd Research Institute
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Communications Ltd Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Communications Ltd Research Institute filed Critical China Mobile Communications Group Co Ltd
Priority to CN201910002535.5A priority Critical patent/CN111400147B/zh
Publication of CN111400147A publication Critical patent/CN111400147A/zh
Application granted granted Critical
Publication of CN111400147B publication Critical patent/CN111400147B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G06F11/3414Workload generation, e.g. scripts, playback
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Testing Resistance To Weather, Investigating Materials By Mechanical Methods (AREA)
  • Testing Electric Properties And Detecting Electric Faults (AREA)

Abstract

本发明实施例公开了一种业务质量测试方法、装置和系统。所述方法包括:获得基础测试数据和管理需求数据,所述基础测试数据包括测试环境数据和业务质量数据;根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备;所述决策规则基于历史数据确定。

Description

一种业务质量测试方法、装置和系统
技术领域
本发明涉及业务测试领域,具体涉及一种业务质量测试方法、装置和系统。
背景技术
在通信网络快速发展的时代,运营商对业务质量的重视程度与日俱增,开展业务质量测试有助于发现、定位问题,提升业务质量。目前业务质量的测试方法主要是对业务端到端指标进行专门测试。在指定的测试点,采用专用的测试工具测试业务质量指标。分析人员对收测试数据进行分析。并且,业务测试和网络测试同时进行,在一次测试任务中,同时对业务质量和网络质量进行测试,测试完成后对获得的两类测试数据进行关联分析。
然而这种业务端到端指标测试,获取的数据较为单一,不利于重点定位质差问题;且测试成本较高。另外,同时执行业务测试和网络测试,一方面,测试内容统一,缺乏针对性,不利于问题的定位且会造成一定程度上资源的浪费;另一方面,目前业务质量测试大多采用友好用户方式进行,为了避免用户失去耐心而强制退出测试,因此在测试过程中,不能对所有的测试点都执行业务和网络的全量测试,仅能针对质差点或重点关注点进行有针对性的测试。
发明内容
为解决现有存在的技术问题,本发明实施例提供一种业务质量测试方法、装置和系统。
为达到上述目的,本发明实施例的技术方案是这样实现的:
本发明实施例提供了一种业务质量测试方法,所述方法包括:
获得基础测试数据和管理需求数据,所述基础测试数据包括测试环境数据和业务质量数据;
根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备;所述决策规则基于历史数据确定。
上述方案中,所述根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,包括:
根据所述测试环境数据和环境决策规则获得环境影响因子;所述环境影响因子表征所述测试化境数据所处的环境对测试结果的影响程度;
根据所述业务质量数据和业务决策规则获得业务影响因子;所述业务影响因子表征所述业务质量数据的质量;
根据所述管理需求数据获得管理影响因子;
根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务。
上述方案中,所述根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务,包括:
根据所述环境影响因子、所述业务影响因子和所述管理影响因子以及预设决策模型从预设测试任务集合中确定增强测试任务。
上述方案中,所述根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务之前,所述方法还包括:
判断所述基础测试数据是否有效;
当确定所述基础测试数据有效时,根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务。
上述方案中,所述方法还包括:基于所述基础测试数据更新所述历史数据。
本发明实施例还提供了一种业务质量测试装置,所述装置包括:数据获取单元和决策单元;其中,
所述数据获取单元,用于获得基础测试数据和管理需求数据,所述基础测试数据包括测试环境数据和业务质量数据;
所述决策单元,用于根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备;所述决策规则基于历史数据确定。
上述方案中,所述决策单元,用于根据所述测试环境数据和环境决策规则获得环境影响因子;所述环境影响因子表征所述测试化境数据所处的环境对测试结果的影响程度;根据所述业务质量数据和业务决策规则获得业务影响因子;所述业务影响因子表征所述业务质量数据的质量;根据所述管理需求数据获得管理影响因子;根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务。
上述方案中,所述决策单元,用于根据所述环境影响因子、所述业务影响因子和所述管理影响因子以及预设决策模型从预设测试任务集合中确定增强测试任务。
上述方案中,所述装置还包括判断单元,用于判断所述基础测试数据是否有效;
所述决策单元,用于在所述判断单元判定所述基础测试数据有效时,根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务。
上述方案中,所述装置还包括更新单元,用于基于所述基础测试数据更新所述历史数据。
本发明实施例还提供了一种业务质量测试系统,所述系统包括测试设备和测试平台;其中,
所述测试设备,用于采集基础测试数据,发送所述基础测试数据至所述测试平台;所述基础测试数据包括测试环境数据和业务质量数据;
所述测试平台,用于获得基础测试数据和管理需求数据,根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备;所述决策规则基于历史数据确定。
本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本发明实施例所述方法的步骤。
本发明实施例还提供了一种业务质量测试装置,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现本发明实施例所述方法的步骤。
本发明实施例提供的业务质量测试方法、装置和系统,所述方法包括:获得基础测试数据和管理需求数据,所述基础测试数据包括测试环境数据和业务质量数据;根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备;所述决策规则基于历史数据确定。采用本发明实施例的技术方案,根据测试环境数据、业务质量数据和管理需求数据共同决策增强测试任务,一方面增强了测试的灵活性,便于根据管理需求针对质差点或重点关注点进行有针对性的测试;另一方面无需采用人工方式分析质差问题以及定位质差,大大缩短了问题查找和复现的时间,也减轻了人力资源的消耗。
附图说明
图1为本发明实施例的业务质量测试方法的一种流程示意图;
图2为本发明实施例的业务质量测试方法的另一种流程示意图;
图3为本发明实施例的业务质量测试装置的一种组成结构示意图;
图4为本发明实施例的业务质量测试装置的另一种组成结构示意图;
图5为本发明实施例的业务质量测试装置的又一种组成结构示意图;
图6为本发明实施例的业务质量测试装置的具体应用架构示意图;
图7为本发明实施例的业务质量测试装置的硬件结构示意图;
图8为本发明实施例的业务质量测试系统的组成结构示意图。
具体实施方式
下面结合附图及具体实施例对本发明作进一步详细的说明。
本发明实施例提供了一种业务质量测试方法。图1为本发明实施例的业务质量测试方法的一种流程示意图;如图1所示,所述方法包括:
步骤101:获得基础测试数据和管理需求数据,所述基础测试数据包括测试环境数据和业务质量数据。
步骤102:根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备;所述决策规则基于历史数据确定。
本实施例的业务质量测试方法应用于业务质量测试装置,所述业务质量测试装置可位于测量平台,作为一种施例,所述测量平台可通过服务器或电脑主机实现。
在本发明的一种可选实施例中,所述获得基础测试数据之前,所述方法还包括:发送基础测试任务至测试设备,以使所述测试设备根据所述基础测试任务进行测试,获得基础测试数据。相应的,所述获得基础测试数据为:获得来自测试设备的基础测试数据。
本实施例中,测试设备为可用于进行业务质量测量和网络环境测量的设备。作为一种示例,测试设备可通过终端设备实现,如移动终端(例如手机)。实际应用中,测试设备中可安装有用于进行业务质量测量和网络环境测量的软件,例如应用程序(APP),可通过该软件进行业务质量测量和网络环境测量。
本实施例中,所述基础测试数据包括测试环境数据和业务质量数据。所述业务质量数据包括但不限于:速率(如下载速率)、成功率(如访问成功率)、时延(如视频加载时延、卡顿情况等)等等。所述测试环境数据包括但不限于:测试时间、测试区域、测试场景(例如家、工作地点、商场等环境)、信号强度等等。
本实施例中,所述管理需求数据表示重点关注的对象,例如重点关注的区域、重点关注的业务类型、重点关注的场景等等。
在本发明的一种可选实施例中,所述根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,包括:根据所述测试环境数据和环境决策规则获得环境影响因子;所述环境影响因子表征所述测试化境数据所处的环境对测试结果的影响程度;根据所述业务质量数据和业务决策规则获得业务影响因子;所述业务影响因子表征所述业务质量数据的质量;根据所述管理需求数据获得管理影响因子;根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务。
本实施例中,决策规则至少包括环境决策规则和业务决策规则;其中,环境决策规则基于历史数据获得;所述业务决策规则基于历史数据获得。实际应用中,可基于每一次的测试获得的测试数据作为历史数据,例如,历史基础测试中获得的基础测试数据可作为历史数据;本次获得的基础测试数据也可用于更新历史数据。则在一实施例中,所述方法还包括:基于所述基础测试数据更新所述历史数据。
本实施例中,环境决策规则用于指示根据测试环境数据获得环境影响因子,所述环境影响因子表征所述测试化境数据所处的环境(包括但不限于以下至少之一:信号强度、忙闲时、地理位置、干扰情况、不同的终端等)对测试结果的影响程度,所确定出的环境影响因子对测试结果的影响最大。业务决策规则用于指示根据业务质量数据获得业务影响因子,所述业务影响因子表征所述业务质量数据(包括但不限于以下至少之一:时延、成功率、速率等)的质量,所确定出的业务影响因子对测试结果的影响最大。管理影响因子基于管理需求数据获得,包括但不限于以下至少之一:是否是重点关注区域、是否是重点关注业务、是否是重点关注场景等等。管理影响因子的引入大大增加了测试的灵活性。
实际应用中,环境影响因子、业务影响因子和管理影响因子可通过多维度的向量表示,向量中的每个值可表示一个维度的数值。例如环境影响因子可以是表示四个维度的向量,向量中的第一个维度表示信号强度(例如信号强度可选取对测试结果影响最大的最差的信号强度),第二个维度表示忙闲时,第三个维度可以表示终端,第四个维度可以表示地理位置等。
在本发明的一种可选实施例中,所述根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务,包括:根据所述环境影响因子、所述业务影响因子和所述管理影响因子以及预设决策模型从预设测试任务集合中确定增强测试任务。
本实施例中,预先根据样本数据以及预设的测试任务按照预设的网络模型进行学习训练,获得决策模型。则获得环境影响因子、业务影响因子和管理影响因子后,将环境影响因子、业务影响因子和管理影响因子输入预设决策模型,获得至少一个增强测试任务,其中,获得的至少一个增强测试任务来自于预设测试任务集合,该测试任务集合也是训练决策模型中使用的测试任务集合。
采用本发明实施例的技术方案,根据测试环境数据、业务质量数据和管理需求数据共同决策增强测试任务,一方面增强了测试的灵活性,便于根据管理需求针对质差点或重点关注点进行有针对性的测试;另一方面无需采用人工方式分析质差问题以及定位质差,大大缩短了问题查找和复现的时间,也减轻了人力资源的消耗。
本发明实施例还提供了一种业务质量测试方法。图2为本发明实施例的业务质量测试方法的另一种流程示意图;如图2所示,所述方法包括:
步骤201:测试设备采集基础测试数据,发送所述基础测试数据至所述测试平台;所述基础测试数据包括测试环境数据和业务质量数据。
本实施例中,作为一种实施方式,测试设备可基于预先配置的任务进行基础测试,获得基础测试数据。作为另一种实施方式,测试设备也可获得测试平台下发的基础测试任务,基于该基础测试任务进行基础测试,获得基础测试数据。
这里,测试设备执行基础测试获得的基础测试数据可表示为:P(X1,X2,…,Xn,Y1,…,Ym);其中,{Xi}表示测试环境数据,{Yj}为业务质量数据。
步骤202:测试平台获得基础测试数据,判断基础测试数据是否有效;若基础测试数据无效,则结束流程;若基础测试数据有效,则进一步执行步骤203。
本实施例中,所述根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务之前,所述方法还包括:判断所述基础测试数据是否有效;当确定所述基础测试数据有效时,根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务。
本实施例中,测试平台判断基础测试数据是否有效,可包括以下至少之一:判断获得的基础测试数据是否完整、判断获得的基础测试数据的数据范围是否超过阈值范围;若获得的基础测试数据完整,可表明基础测试数据有效;相应的,若基础测试数据不完整,可表明基础测试数据无效;若获得的基础测试数据的数据范围未超过阈值范围,则可表明基础测试数据有效;若获得的基础测试数据的数据范围超过阈值范围,则可表明基础测试数据无效。其中,作为一种施例,判断基础测试数据完整,可判断获得的基础测试数据的维度是否完整,例如获得的基础测试数据是否包括业务质量数据和测试环境数据两个类型的数据;若获得的基础测试数据仅包括业务质量数据或测试环境数据,则可表明该基础测试数据不完整;若获得的基础测试数据仅包括业务质量数据和测试环境数据,则可表明该基础测试数据完整。
步骤203:测试平台根据测试环境数据、业务质量数据和管理需求数据以及决策规则判断是否执行增强测试任务;若判定不需要执行增强测试任务,则结束流程;若需要执行增强测试任务,则进一步执行步骤204。
本实施例中,第一方面,测试平台根据所述测试环境数据和环境决策规则获得环境影响因子;所述环境影响因子表征所述测试化境数据所处的环境对测试结果的影响程度。作为一种示例,测试平台根据获得的测试环境数据{Xi}、以及根据历史数据确定的环境决策规则获得环境影响因子。所述环境影响因子表征所述测试化境数据所处的环境(包括但不限于以下至少之一:信号强度、忙闲时、地理位置、干扰情况、不同的终端等)对测试结果的影响程度,所确定出的环境影响因子对测试结果的影响最大。
第二方面,测试平台根据所述业务质量数据和业务决策规则获得业务影响因子;所述业务影响因子表征所述业务质量数据的质量;作为一种示例,测试平台根据获得的业务质量数据{Yj}、以及根据历史数据确定的业务决策规则获得业务影响因子。所述业务影响因子表征所述业务质量数据(包括但不限于以下至少之一:时延、成功率、速率等)的质量,所确定出的业务影响因子对测试结果的影响最大。
第三方面,测试平台根据所述管理需求数据获得管理影响因子;管理影响因子基于管理需求数据获得,包括但不限于以下至少之一:是否是重点关注区域、是否是重点关注业务、是否是重点关注场景等等。最后,测试平台根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务。
步骤204:确定增强测试任务,发送所述增强测试任务至测试设备。
步骤205:测试设备根据增强测试任务执行增强测试,获得增强测试数据,发送所述增强测试数据至测试平台。
采用本发明实施例的技术方案,根据测试环境数据、业务质量数据和管理需求数据共同决策增强测试任务,一方面增强了测试的灵活性,便于根据管理需求针对质差点或重点关注点进行有针对性的测试;另一方面无需采用人工方式分析质差问题以及定位质差,大大缩短了问题查找和复现的时间,也减轻了人力资源的消耗。
本发明实施例还提供了一种业务质量测试装置,图3为本发明实施例的业务质量测试装置的一种组成结构示意图;如图3所示,所述装置包括:数据获取单元31和决策单元32;其中,
所述数据获取单元31,用于获得基础测试数据和管理需求数据,所述基础测试数据包括测试环境数据和业务质量数据;
所述决策单元32,用于根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备;所述决策规则基于历史数据确定。
在本发明的一种可选实施例中,所述决策单元32,用于根据所述测试环境数据和环境决策规则获得环境影响因子;所述环境影响因子表征所述测试化境数据所处的环境对测试结果的影响程度;根据所述业务质量数据和业务决策规则获得业务影响因子;所述业务影响因子表征所述业务质量数据的质量;根据所述管理需求数据获得管理影响因子;根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务。
在本发明的一种可选实施例中,所述决策单元32,用于根据所述环境影响因子、所述业务影响因子和所述管理影响因子以及预设决策模型从预设测试任务集合中确定增强测试任务。
在本发明的一种可选实施例中,如图4所示,所述装置还包括判断单元33,用于判断所述基础测试数据是否有效;
所述决策单元32,用于在所述判断单元33判定所述基础测试数据有效时,根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务。
在本发明的一种可选实施例中,如图5所示,所述装置还包括更新单元34,用于基于所述基础测试数据更新所述历史数据。
本发明实施例中,所述终端中的决策单元32、判断单元33和更新单元34,在实际应用中均可由所述终端中的中央处理器(CPU,Central Processing Unit)、数字信号处理器(DSP,Digital Signal Processor)、微控制单元(MCU,Microcontroller Unit)或可编程门阵列(FPGA,Field-Programmable Gate Array)实现;所述装置中的数据获取单元31,在实际应用中可通过CPU、DSP、MCU或FPGA结合通信模组(包含:基础通信套件、操作系统、通信模块、标准化接口和协议等)及收发天线实现。
需要说明的是:上述实施例提供的业务质量测试装置在进行业务质量测试时,仅以上述各程序模块的划分进行举例说明,实际应用中,可以根据需要而将上述处理分配由不同的程序模块完成,即将装置的内部结构划分成不同的程序模块,以完成以上描述的全部或者部分处理。另外,上述实施例提供的业务质量测试装置与业务质量测试方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图6为本发明实施例的业务质量测试装置的具体应用架构示意图;如图6所示,业务质量测试装置中可包括历史数据库、环境决策规则库、业务决策规则库和测试任务库;其中,环境决策规则库和业务决策规则库可基于历史数据库中的历史数据获得。
本实施例中,决策单元中可包括环境因子评估单元、业务因子评估单元和管理需求评估单元;其中,环境因子评估单元根据获得的测试环境数据(即{Xi})以及环境决策规则库中确定的环境决策规则获得环境影响因子;业务因子评估单元根据获得的业务质量数据(即{Yj})以及业务决策规则库中确定的业务决策规则获得业务影响因子;管理需求评估单元根据管理需求数据获得管理影响因子。决策单元中还可包括综合决策单元,用于基于环境影响因子、业务影响因子和管理影响因子以及测试任务集确定增强测试任务集。
本实施例中,获得的基础测试数据还可用于更新历史数据库中的历史数据。
本发明实施例还提供了一种业务质量测试装置,图7为本发明实施例的业务质量测试装置的硬件结构示意图;如图7所示,所述装置包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现本发明实施例所述方法的步骤。
可以理解,业务质量测试装置中还包括通信接口53;业务质量测试装置中的各个组件可通过总线系统54耦合在一起。可理解,总线系统54用于实现这些组件之间的连接通信。总线系统54除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图7中将各种总线都标为总线系统54。
可以理解,存储器52可以是易失性存储器或非易失性存储器,也可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(ROM,Read Only Memory)、可编程只读存储器(PROM,Programmable Read-Only Memory)、可擦除可编程只读存储器(EPROM,Erasable Programmable Read-Only Memory)、电可擦除可编程只读存储器(EEPROM,Electrically Erasable Programmable Read-Only Memory)、磁性随机存取存储器(FRAM,ferromagnetic random access memory)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CD-ROM,Compact Disc Read-Only Memory);磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(RAM,Random AccessMemory),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(SRAM,Static Random Access Memory)、同步静态随机存取存储器(SSRAM,Synchronous Static Random Access Memory)、动态随机存取存储器(DRAM,Dynamic Random Access Memory)、同步动态随机存取存储器(SDRAM,SynchronousDynamic Random Access Memory)、双倍数据速率同步动态随机存取存储器(DDRSDRAM,Double Data Rate Synchronous Dynamic Random Access Memory)、增强型同步动态随机存取存储器(ESDRAM,Enhanced Synchronous Dynamic Random Access Memory)、同步连接动态随机存取存储器(SLDRAM,SyncLink Dynamic Random Access Memory)、直接内存总线随机存取存储器(DRRAM,Direct Rambus Random Access Memory)。本发明实施例描述的存储器52旨在包括但不限于这些和任意其它适合类型的存储器。
上述本发明实施例揭示的方法可以应用于处理器51中,或者由处理器51实现。处理器51可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器51中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器51可以是通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。处理器51可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本发明实施例所公开的方法的步骤,可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于存储介质中,该存储介质位于存储器52,处理器51读取存储器52中的信息,结合其硬件完成前述方法的步骤。
本发明实施例还提供了一种业务质量测试系统。图8为本发明实施例的业务质量测试系统的组成结构示意图;如图8所示,所述系统包括测试设备41和测试平台42;其中,
所述测试设备41,用于采集基础测试数据,发送所述基础测试数据至所述测试平台42;所述基础测试数据包括测试环境数据和业务质量数据;
所述测试平台42,用于获得基础测试数据和管理需求数据,根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备41;所述决策规则基于历史数据确定。
在本发明的一种可选实施例中,所述测试平台42,还用于向所述测试设备41发送基础测试任务;
所述测试设备41,还用于基于所述基础测试任务进行基础测试,获得基础测试数据,向所述测试平台42发送所述基础测试数据。
在本发明的一种可选实施例中,所述测试设备41,还用于接收所述增强测试任务,根据所述增强测试任务执行增强测试,获得增强测试数据,发送所述增强测试数据至所述测试平台42。
在本发明的一种可选实施例中,所述测试平台42,用于根据所述测试环境数据和环境决策规则获得环境影响因子;所述环境影响因子表征所述测试化境数据所处的环境对测试结果的影响程度;根据所述业务质量数据和业务决策规则获得业务影响因子;所述业务影响因子表征所述业务质量数据的质量;根据所述管理需求数据获得管理影响因子;根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务。
在本发明的一种可选实施例中,所述测试平台42,用于根据所述环境影响因子、所述业务影响因子和所述管理影响因子以及预设决策模型从预设测试任务集合中确定增强测试任务。
在本发明的一种可选实施例中,所述测试平台42,还用于判断所述基础测试数据是否有效;当确定所述基础测试数据有效时,根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务。
在本发明的一种可选实施例中,所述测试平台42,还用于基于所述基础测试数据更新所述历史数据。
本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本发明实施例所述方法的步骤。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元,即可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (13)

1.一种业务质量测试方法,其特征在于,所述方法包括:
获得基础测试数据和管理需求数据,所述基础测试数据包括测试环境数据和业务质量数据;
根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备;所述决策规则基于历史数据确定。
2.根据权利要求1所述的方法,其特征在于,所述根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,包括:
根据所述测试环境数据和环境决策规则获得环境影响因子;所述环境影响因子表征所述测试化境数据所处的环境对测试结果的影响程度;
根据所述业务质量数据和业务决策规则获得业务影响因子;所述业务影响因子表征所述业务质量数据的质量;
根据所述管理需求数据获得管理影响因子;
根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务。
3.根据权利要求2所述的方法,其特征在于,所述根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务,包括:
根据所述环境影响因子、所述业务影响因子和所述管理影响因子以及预设决策模型从预设测试任务集合中确定增强测试任务。
4.根据权利要求1所述的方法,其特征在于,所述根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务之前,所述方法还包括:
判断所述基础测试数据是否有效;
当确定所述基础测试数据有效时,根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
基于所述基础测试数据更新所述历史数据。
6.一种业务质量测试装置,其特征在于,所述装置包括:数据获取单元和决策单元;其中,
所述数据获取单元,用于获得基础测试数据和管理需求数据,所述基础测试数据包括测试环境数据和业务质量数据;
所述决策单元,用于根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备;所述决策规则基于历史数据确定。
7.根据权利要求6所述的装置,其特征在于,所述决策单元,用于根据所述测试环境数据和环境决策规则获得环境影响因子;所述环境影响因子表征所述测试化境数据所处的环境对测试结果的影响程度;根据所述业务质量数据和业务决策规则获得业务影响因子;所述业务影响因子表征所述业务质量数据的质量;根据所述管理需求数据获得管理影响因子;根据所述环境影响因子、所述业务影响因子和所述管理影响因子确定增强测试任务。
8.根据权利要求7所述的装置,其特征在于,所述决策单元,用于根据所述环境影响因子、所述业务影响因子和所述管理影响因子以及预设决策模型从预设测试任务集合中确定增强测试任务。
9.根据权利要求6所述的装置,其特征在于,所述装置还包括判断单元,用于判断所述基础测试数据是否有效;
所述决策单元,用于在所述判断单元判定所述基础测试数据有效时,根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务。
10.根据权利要求6所述的装置,其特征在于,所述装置还包括更新单元,用于基于所述基础测试数据更新所述历史数据。
11.一种业务质量测试系统,其特征在于,所述系统包括测试设备和测试平台;其中,
所述测试设备,用于采集基础测试数据,发送所述基础测试数据至所述测试平台;所述基础测试数据包括测试环境数据和业务质量数据;
所述测试平台,用于获得基础测试数据和管理需求数据,根据所述测试环境数据、所述业务质量数据和所述管理需求数据以及决策规则确定增强测试任务,发送所述增强测试任务至测试设备;所述决策规则基于历史数据确定。
12.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1至5任一项所述方法的步骤。
13.一种业务质量测试装置,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至5任一项所述方法的步骤。
CN201910002535.5A 2019-01-02 2019-01-02 一种业务质量测试方法、装置和系统 Active CN111400147B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910002535.5A CN111400147B (zh) 2019-01-02 2019-01-02 一种业务质量测试方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910002535.5A CN111400147B (zh) 2019-01-02 2019-01-02 一种业务质量测试方法、装置和系统

Publications (2)

Publication Number Publication Date
CN111400147A true CN111400147A (zh) 2020-07-10
CN111400147B CN111400147B (zh) 2023-05-05

Family

ID=71436065

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910002535.5A Active CN111400147B (zh) 2019-01-02 2019-01-02 一种业务质量测试方法、装置和系统

Country Status (1)

Country Link
CN (1) CN111400147B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020155628A1 (en) * 2001-04-20 2002-10-24 International Business Machines Corporation Method for test optimization using historical and actual fabrication test data
CN104427547A (zh) * 2013-08-29 2015-03-18 中国移动通信集团公司 业务和网络关联测试方法、装置及系统
CN104468277A (zh) * 2014-12-18 2015-03-25 国家电网公司 变电站网络与通讯协议的一致性测试的方法及装置
CN104468259A (zh) * 2014-11-11 2015-03-25 上海新炬网络信息技术有限公司 一种通讯业务资费自动化测试方法
WO2017045472A1 (zh) * 2015-09-16 2017-03-23 华为技术有限公司 资源预测方法、系统和容量管理装
US20170277626A1 (en) * 2016-03-23 2017-09-28 Wipro Limited Method and a system for automating test environment operational activities
US20180129760A1 (en) * 2016-11-09 2018-05-10 Adobe Systems Incorporated Sequential Hypothesis Testing in a Digital Medium Environment using Continuous Data

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020155628A1 (en) * 2001-04-20 2002-10-24 International Business Machines Corporation Method for test optimization using historical and actual fabrication test data
CN104427547A (zh) * 2013-08-29 2015-03-18 中国移动通信集团公司 业务和网络关联测试方法、装置及系统
CN104468259A (zh) * 2014-11-11 2015-03-25 上海新炬网络信息技术有限公司 一种通讯业务资费自动化测试方法
CN104468277A (zh) * 2014-12-18 2015-03-25 国家电网公司 变电站网络与通讯协议的一致性测试的方法及装置
WO2017045472A1 (zh) * 2015-09-16 2017-03-23 华为技术有限公司 资源预测方法、系统和容量管理装
US20170277626A1 (en) * 2016-03-23 2017-09-28 Wipro Limited Method and a system for automating test environment operational activities
US20180129760A1 (en) * 2016-11-09 2018-05-10 Adobe Systems Incorporated Sequential Hypothesis Testing in a Digital Medium Environment using Continuous Data

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
周亮;王亚玲;苏志勇;: "电力系统业务规划分析决策平台的设计与实现" *
张瑞平;陈雅娟;王小猛;胡庆平;: "一种基于云计算的新型移动增值业务测试平台设计与实现" *

Also Published As

Publication number Publication date
CN111400147B (zh) 2023-05-05

Similar Documents

Publication Publication Date Title
KR101108805B1 (ko) 맵 상에서 통신 이벤트들의 표시들을 제공하고 나타내는 장치 및 방법
CN109309596B (zh) 一种压力测试方法、装置及服务器
CN107947968B (zh) 网络质量投诉信息的处理方法和装置
CN104869019A (zh) 用于定位故障的反馈方法、装置及服务器
CN111294730B (zh) 一种网络问题投诉信息处理的方法及装置
CN110798380A (zh) 一种数据获取方法、系统、装置、测试设备及测试服务器
CN106604362A (zh) 一种无线保真Wi‑Fi扫描方法及移动终端
CN110348717B (zh) 基于栅格粒度的基站价值评分方法和装置
CN113485931B (zh) 测试方法、装置、电子设备及计算机可读存储介质
CN112241362A (zh) 一种测试方法、装置、服务器及存储介质
CN113052308B (zh) 训练目标小区识别模型的方法及目标小区识别方法
CN112910699A (zh) 电力物联网的智能故障检测方法及装置
CN106484601B (zh) 客户端的用户数据分析方法及系统
CN111400147A (zh) 一种业务质量测试方法、装置和系统
CN115022201B (zh) 一种数据处理功能测试方法、装置、设备及存储介质
CN112799956B (zh) 资产识别能力测试方法、装置及系统装置
CN110839257B (zh) 网络质量评估方法、设备和存储介质
CN114116480A (zh) 应用程序测试覆盖率的确定方法、装置、介质及设备
CN112948262A (zh) 一种系统测试方法、装置、计算机设备和存储介质
CN113452533A (zh) 计费自巡检、自愈合方法、装置、计算机设备和存储介质
CN112714457B (zh) 覆盖质量评价方法、装置、设备及计算机可读存储介质
CN112737804B (zh) 一种网络性能测试方法、装置及服务器
CN112148549A (zh) 一种提供软件的方法及软件运行性能信息处理方法
CN117792930A (zh) 基于镜像流量的批量api性能分析方法、装置、设备及介质
CN117725420A (zh) 数据集生成方法、装置、可读介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant