CN101199194A - 用于在无线通信装置上监视语音质量的方法和设备 - Google Patents

用于在无线通信装置上监视语音质量的方法和设备 Download PDF

Info

Publication number
CN101199194A
CN101199194A CNA2006800211627A CN200680021162A CN101199194A CN 101199194 A CN101199194 A CN 101199194A CN A2006800211627 A CNA2006800211627 A CN A2006800211627A CN 200680021162 A CN200680021162 A CN 200680021162A CN 101199194 A CN101199194 A CN 101199194A
Authority
CN
China
Prior art keywords
data
voice
voice quality
quality score
diagnostic data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006800211627A
Other languages
English (en)
Other versions
CN101199194B (zh
Inventor
肯尼·福克
蒂亚·曼宁·卡塞特
埃里克·奇·庄·叶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN101199194A publication Critical patent/CN101199194A/zh
Application granted granted Critical
Publication of CN101199194B publication Critical patent/CN101199194B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B17/00—Monitoring; Testing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/22—Arrangements for supervision, monitoring or testing
    • H04M3/2236—Quality of speech transmission monitoring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W24/00—Supervisory, monitoring or testing arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/18—Comparators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2207/00—Type of exchange or network, i.e. telephonic medium, in which the telephonic communication takes place
    • H04M2207/18—Type of exchange or network, i.e. telephonic medium, in which the telephonic communication takes place wireless networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephonic Communication Services (AREA)
  • Monitoring And Testing Of Transmission In General (AREA)

Abstract

本发明揭示用于提供在无线装置上对语音质量和与语音质量有关的诊断数据的监视的方法和设备。可实施允许额外的预防措施和/或在经历阈值等级的语音质量性能的情况下发生进一步监视的监视阈值。可将所述语音和诊断监视的结果传送到服务提供商，所述服务提供商接着可收集、分析并产生报告，以估计和确定通信网络所经历的与质量有关的问题。

Description

用于在无线通信装置上监视语音质量的方法和设备
在35 U.S.C.§119下主张优先权
本专利申请案主张2005年4月21日申请的题为“Methods an Apparatus for MonitoringVoice Quality in a Wireless Device”的第60/674,165号临时申请案的优先权，所述临时申请案转让给本文受让人，且因此以引用方式明确并入本文中。
技术领域
所描述的方面大体上涉及无线通信装置和网络通信。更明确地说，所描述的方面涉及连同对来自无线装置的与语音/数据处理有关的数据的收集、报告和分析一起在无线通信装置上监视语音质量。
背景技术
无线连网在不需要直接电连接(例如铜线或光缆)的情况下，将一个或一个以上无线装置连接到其它计算机装置。无线装置通常以包的形式经由无线或部分无线的计算机网络传送数据，并在网络上开启“数据”或“通信”信道，使得装置可发送和接收数据包。无线装置通常具有无线装置资源(例如程序和硬件组件)，其独立且协作地操作以根据其设计和特定协议或配置来使用和产生数据，例如使用开放式通信连接来在网络上发射和接收数据。
无线通信装置(例如移动电话、寻呼机、手持式计算机等)对于商业和个人使用都变得越来越普及。此类装置的一个优势是它们的“无线”方面，允许用户随时随地使用它们。随着无线装置使用的增长，且随着相关联无线通信网络的增长，用户对高质量无线通信的期望日益增加。因此，用户在使用无线装置时的满意度的一个方面涉及所述无线装置所发射和接收的语音的质量。
无线装置上所经历的语音质量受许多不同网络条件的影响。举例来说，语音质量可能受射频(RF)条件、地理区域中的基站(即，小区站点)数目、移动无线装置所经历的小区站点移交数目等影响。在许多例子中通常是这样的情况，当用户经历持续的与语音质量有关的问题时，感到失望的用户可能选择更换服务提供商，希望替代的服务提供商会提供更好的语音质量服务。从服务提供商的立场来看，感到失望的用户选择更换服务提供商会导致客户流失，即收入损失。
目前，存在许多不同方式来测量无线通信网络中的语音质量。举例来说，在语音电话学中，尤其在使用编解码器来压缩数字化语音连接的带宽需求时，平均意见得分(MOS)提供经由所述连接接收到的人类通话的感知质量的数值指示。通常通过执行相关联的MOS算法或例行程序来导出MOS。MOS可表达为在1到5范围内的单个数字，其中1是最低感知质量，且5是最高感知质量。还可实施许多不同算法来提供语音质量得分或测量。举例来说，单侧通话质量测量(“3SQM”)、E-模型、语音质量监视(VQmon)、通话质量感知评估(PESQ)、感知通话质量测量(PSQM)；所有这些都由国际电信联盟(ITU)公布和标准化。然而，前面提及的语音质量测量测试在实施方面限于现场测试(其中现场技师遍历整个网络以测定网络的有效性)或作为对新近制造或修理的无线装置的质量控制测试。
因此，需要开发用于监视“使用中”无线装置或正由最终客户或用户使用的装置的语音质量的装置、设备和方法。此类对“使用中”无线装置的语音质量的监视将向服务提供商提供关于网络性能的实时数据。通过向服务提供商提供实时网络性能数据，服务提供商可有效且高效地查明与网络有关和/或与装置有关的问题，进而向用户/客户提供前摄支持。在这点上，服务提供商可洞察现存或潜在的与网络有关和/或与装置有关的关注和/或不足，并前摄地纠正所述问题。另外，服务提供商经常向用户提供服务等级承诺作为服务等级协议(SLA)的一部分。目前，没有一种方式能够准确且有效地测量和监视这些承诺的执行。因此，额外需要以语音质量监视的形式，提供对网络性能的实时监视，以使得服务提供商能够高效地兑现他们的SLA。
发明内容
本方法、设备、装置、处理器和计算机程序模块提供用于在无线装置上连续监视语音质量和与语音质量有关的诊断数据。所述监视的结果可实时传送给服务提供商，服务提供商接着可基于语音质量数据和诊断数据来收集、分析和/或产生报告。所产生的报告提供用于估计通信网络所经历的与质量有关的问题的基础。在这点上，服务提供商可有效且高效地解决网络问题和/或装置问题，进而向用户/客户提供前摄支持。可实施监视阈值，其允许额外的预防措施，和/或在经历语音质量性能的阈值等级的情况下，进行进一步监视。
在一个方面，界定一种用于在无线通信装置上监视语音质量性能的方法。所述在无线装置处执行的方法包含：监视语音数据和相关诊断数据；基于所述语音数据而确定语音质量得分；以及将语音质量得分或语音数据中的至少一者和诊断数据传送到网络装置。根据一些方面，确定语音质量得分涉及执行语音质量算法，例如平均意见得分(MOS)算法、单侧通话质量测量(3SQM)算法、E模型算法、语音质量监视(VQmon)算法、通话质量感知评估(PESQ)算法、感知通话质量测量(PSQM)算法或类似算法。在替代方面，所述方法可包含将语音质量得分与阈值进行比较，且如果满足阈值，那么采取适当行动。适当行动可包含以增加的时间间隔监视语音质量数据，或基于预定事件的发生来进行监视。在满足阈值时要采取的其它适当行动可包含监视额外的诊断数据(例如装置的地理位置、射频(RF)条件等)，和/或将报警通知发送给无线装置用户和/或服务提供商。
在另一方面，界定一种用于在无线通信装置上测量语音质量的计算机可读媒体。所述计算机可读媒体包含至少一个指令序列，所述指令可由无线装置处理器执行，以致使处理器执行以下步骤：监视语音数据和相关诊断数据；基于语音数据而确定语音质量得分；以及将语音质量得分和相关诊断数据传送到网络装置。
在另一替代方面，界定一种在无线通信装置中实施的处理器装置。所述处理器经配置以执行以下操作：监视语音数据和相关诊断数据；基于语音数据而确定语音质量得分；以及将语音质量得分和诊断数据传送到网络装置。
一种用于监视语音质量的无线通信装置也界定本方面。所述装置包含：存储单元，其可操作以用于存储语音数据和诊断数据；以及语音监视模块，其与存储单元通信，所述语音监视模块可操作以用于基于语音数据而确定语音质量得分，并将语音质量得分和相关诊断数据传送到网络装置。语音监视模块可进一步包含语音质量例行程序，执行所述语音质量例行程序以确定语音质量得分。另外，语音监视模块可进一步可操作以用于将语音质量得分与一个或一个以上预定语音质量得分阈值进行比较，且如果满足阈值，那么增加语音质量得分确定速率；将语音质量数据传送到网络装置；监视额外的诊断数据；且/或将报警通知发送给装置用户和/或服务提供商。
在又一方面，界定一种用于分析无线通信中的语音质量性能的方法。所述方法包含：在网络装置处从一个或一个以上无线通信装置接收语音质量得分和相关诊断数据；分析语音质量得分和诊断数据；以及基于语音质量得分和相关诊断数据而产生一个或一个以上语音质量报告。所产生的语音质量报告提供使诊断数据与一个或一个以上无线通信装置上所经历的语音问题相关的信息。由网络装置产生的语音质量报告可包含(但不限于)基站语音质量报告、地理区域语音质量报告、无线通信装置类型语音质量报告和无线通信装置语音质量报告。
一种用于配置无线装置上的语音质量监视的方法界定另一方面。所述方法包含：在网络装置处配置与语音监视有关的语音监视参数和诊断监视参数；以及将语音监视参数和诊断监视参数传送到一个或一个以上无线通信装置，所述无线通信装置可操作以根据语音监视参数和诊断监视参数来监视语音数据和诊断数据。语音质量参数可包含语音数据、监视时间间隔、监视进度、监视触发事件、语音得分算法、阈值条件和阈值限制。诊断监视参数可包含位置监视参数、功率监视参数、硬件监视参数、应用程序监视参数和网络装置监视参数数据。
一种用于分析无线通信中的语音质量性能的计算机可读媒体界定又一方面。所述计算机可读媒体包含指令序列，且所述指令由处理器执行会导致处理器执行以下步骤：从多个无线通信装置接收语音质量得分和诊断数据；分析语音质量得分和诊断数据；以及基于语音质量得分和相关诊断数据而产生一个或一个以上语音质量报告。
另外，将一方面描述为至少一种在网络装置中实施的处理器装置，其经配置以执行以下操作：从一个或一个以上无线通信装置接收语音质量得分和相关诊断数据；分析语音质量得分和诊断数据；以及基于语音质量得分和相关诊断数据而产生一个或一个以上语音质量报告。
在替代方面，界定一种用于管理无线通信装置语音质量的网络装置。所述网络装置包含语音质量参数产生模块，其可操作以从无线通信装置接收语音质量得分和相关诊断数据。所述网络装置还包含：存储模块，其可操作以用于存储语音质量得分和相关诊断数据；以及语音质量报告产生模块，其与所述存储模块通信，其中所述语音质量报告产生模块可操作以用于基于语音质量得分和相关诊断数据而产生语音质量报告。
因此，本文所描述的方面提供用于在无线装置上连续监视语音质量和相关诊断数据。可将监视结果传送给服务提供商，服务提供商接着可基于语音质量得分和相关诊断数据来收集、分析和/或产生报告，以估计通信网络所经历的与质量有关的问题。在这点上，服务提供商可有效且高效地解决网络问题，进而向用户/客户提供前摄支持。可实施监视阈值，其允许额外的预防措施，和/或在经历语音质量性能的阈值等级的情况下，发生进一步监视。
附图说明
下文将结合附图来描述所揭示的方面，提供附图是为了说明而不是为了限制所揭示的方法，其中相同标记表示相同元件，且在附图中：
图1是根据一个方面的用于在无线装置上提供语音质量监视的系统的示意图；
图2是根据一个方面的可操作以监视语音质量的无线通信装置的方框图；
图3是根据一个方面的可操作以提供语音质量监视参数并产生语音质量报告的网络装置的方框图；
图4是用于在无线通信装置级别处实施语音质量监视的蜂窝式电话网络的一个方面的示意图；
图5是根据一方面的在无线通信装置处提供语音质量监视的方法的消息流程图；
图6是根据又一方面的用于在无线通信装置处监视语音质量的方法的流程图；
图7是根据另一方面的用于在网络装置处产生语音质量监视参数的方法的流程图；
图8是根据又一方面的用于在网络装置处产生语音质量报告的方法的流程图。
具体实施方式
现在下文将参看展示本发明各方面的附图来更全面地描述本装置、设备、方法、计算机可读媒体和处理器。然而，所述装置、设备、方法、计算机可读媒体和处理器可用许多不同形式来实施，且不应被解释为限于本文所陈述的方面；相反，提供这些方面以使得本揭示案将为详尽且完整的，并向所属领域的技术人员全面传达本发明的范围。相同编号始终指代相同元件。
根据一个方面，图1提供用于在无线装置处监视语音质量的系统的示意图表示。所述系统包含一个或一个以上无线装置10，其经由无线网络12与网络装置14(例如用户管理器服务器14)进行无线通信。所述无线装置包含处理引擎16，其可操作以执行语音监视模块18。语音监视模块可最初从服务提供商20(例如客户服务代表20)下载到无线装置(由箭头A表示)。或者，语音监视模块可由无线装置制造商预安装到无线装置上，或以其它方式加载到无线装置上。
语音监视模块18可操作以用于以预定时间间隔或在发生预定事件时，监视并记录语音数据22。所记录的语音数据22由语音监视模块18用来确定语音质量得分24。另外，语音监视模块监视并记录(或以其它方式俘获)与无线装置的语音性能有关的诊断数据25。将语音质量得分24和/或语音数据22以及相关诊断数据25以无线方式传送到网络装置14(由箭头B表示)。网络装置14包含处理引擎26，其可操作以执行语音质量报告产生器模块28。语音质量报告产生器模块28可操作以通过分析从一个或一个以上无线装置传送的语音质量得分和相关诊断数据来产生一个或一个以上语音质量报告30。语音质量报告提供语音质量与诊断数据之间的相关性，使得所述报告帮助确定一个或一个以上无线装置上的语音性能降级的原因。又，可将语音质量报告30传送给服务提供商20(由箭头C表示)或传送给其它任一感兴趣方，以便管理无线网络或监视网络中所部署的无线装置的语音质量性能。
参看图2，根据一个方面，描绘可操作以监视语音质量的无线通信装置的方框图表示。无线装置10可包含任何类型的计算机化无线装置，例如蜂窝式电话、个人数字助理(PDA)、双向文本寻呼机、便携式计算机以及甚至单独的计算机平台，所述计算机平台具有无线通信端口且还可具有到达网络或因特网的有线连接。无线装置可以是远程从动装置，或不具有其终端用户而是仅仅经由无线网络12传送数据的其它装置，例如远程传感器、诊断工具、数据中继器等。因此，本设备和方法可在任何形式的无线装置或计算机模块上执行，包含有线或无线通信端口，其包含(但不限于)无线调制解调器、PCMCIA卡、接入端子、个人计算机、电话或者其任何组合或子组合。
无线装置10包含计算机平台40，其可经由无线网络12发射数据，且可接收并执行例行程序和应用程序，并视情况显示从网络装置14传输的数据，所述网络装置14例如是用户管理器服务器14或连接到无线网络12的另一计算机装置。计算机平台40包含存储器/数据登记簿42，其可包括易失性和非易失性存储器，例如只读和/或随机存取存储器(RAM和ROM)、EPROM、EEPROM、快闪卡或对计算机平台来说常见的任何存储器。另外，数据登记簿42可包含一个或一个以上快闪存储器单元，或可以是任何二级或三级存储装置，例如磁性媒体、光学媒体、磁带或者软盘或硬盘。
另外，计算机平台40还包含处理引擎16，其可以是专用集成电路(“ASIC”)或其它芯片组、处理器、逻辑电路或其它数据处理装置。处理引擎16或其它处理器(例如ASIC)可执行应用程序编程接口(“API”)层44，其与存储在无线装置10的数据登记簿42中的任何驻存程序(例如语音监视模块18)介接。API 44通常是在各自无线装置上执行的运行时环境。一种此类运行时环境是由加利福尼亚州圣地亚哥市的Qualcomm公司开发的无线二进制运行时环境(BREW)软件。可利用其它运行时环境，其(例如)操作以控制无线计算装置上的应用程序的执行。
处理引擎16包含以硬件、固件、软件和其组合的形式实施的各种处理子系统46，其实现无线装置10的功能性和无线装置对无线网络12的可操作性。举例来说，处理子系统46允许起始并维持与其它连网装置的通信，并与其交换数据。在语音监视模块18依靠子系统来产生例如语音数据、地理位置数据、射频(RF)数据等数据的本方面，所述子系统可包含(但不限于)声码器监视子系统48、定位子系统50、诊断监视子系统52等。在将无线装置界定为蜂窝式电话的方面，通信处理引擎16可另外包含例如以下各项的处理子系统46中的一者或组合：声音、非易失性存储器、文件系统、发射、接收、搜索器、层1、层2、层3、主控制、远程程序、手持机、功率管理、数字信号处理器、消息传递、呼叫管理器、蓝牙系统、蓝牙LPOS、位置引擎、用户界面、休眠、数据服务、安全性、验证、USIM/SIM、语音服务、图形、USB、例如MPEG、GPRS等的多媒体(为了清楚起见，所有这些都没有在图2中描绘)。对于所揭示的方面来说，处理引擎16的处理子系统46可包含任何与在计算机平台40上执行的应用程序相互作用的子系统组件。举例来说，处理子系统46可包含任何代表语音监视模块18从API 44接收数据读取和数据写入的子系统组件。
计算机平台40的数据登记簿42包含语音监视模块18，其可操作以用于执行语音质量逻辑54。语音质量逻辑与记录语音数据22的语音数据数据库56通信。语音质量逻辑依靠界定监视特征的可配置语音监视参数57。举例来说，语音监视参数57可经配置以使得语音质量逻辑以预定时间间隔、在预定时间范围内和/或在发生预定事件时监视(即，记录)语音数据。另外，语音监视参数可经配置以界定所监视的语音数据。在一些方面，可将所监视的语音数据界定为使用API层44从声码器监视子系统48记录的语音样本。
在一些方面，语音质量逻辑54与诊断数据库64通信，诊断数据库64记录或另外方面存储与无线装置10的语音性能有关的诊断数据。诊断数据将通常被界定为对语音质量性能具有负面或正面影响的数据。诊断数据随后被传送到网络装置14，并用于产生语音质量报告，所述语音质量报告使诊断数据与语音得分数据相关，以便确定无线装置上的语音降级的原因。在这点上，诊断数据库64可经配置以存储无线装置专用数据且/或可以是与无线装置和无线网络之间的相互作用有关的数据。在一些方面，诊断数据可包含地理位置数据、射频(RF)数据和与无线装置通信的网络装置等。举例来说，诊断数据库64可包含地理位置数据66、RF环境数据68、网络实体数据70(例如与无线装置通信的网络节点(即，IP基站、移动交换中心等)的识别)或任何其它预定额外数据72，例如无线装置硬件性能数据、应用程序/软件性能数据等。
地理位置数据66可从包含适当的全球定位系统(GPS)机构的GPS监视子系统50中检索到。RF数据提供(例如)无线装置信号功率数据，且可从诊断监视子系统52中检索到。可从诊断监视子系统52检索到的相关RF数据可包含(但不限于)针对采用码分多址(CDMA)协议通信的无线装置的“搜索器和指针”信息，以及针对采用全球移动电信系统(UMTS)协议通信的装置的终端适配器(TA)的宽带码分多址“指针”信息。
语音质量逻辑基于所监视的语音数据22来确定语音质量得分24。在许多方面，语音质量逻辑54将执行一个或一个以上语音质量算法或例行程序，以确定一个或一个以上语音质量得分24。在一些方面，将语音质量得分界定为平均意见得分(MOS)，其可通过使用任何已知或将来的MOS算法来计算。已知MOS算法的实例包含：单侧通话质量测量(“3SQM”)，其由国际电信联盟(ITU)标准P.563界定；感知通话质量测量(“PSQM”)，其由ITU标准P.861界定；通话质量感知评估(“PESQ”)，其由ITU标准P.862界定；E模型，其由ITU标准G.107界定；语音质量监视(“VQmon”)，其为尚未被ITU标准化的E模型扩展；以及类似算法。应注意，所描述方面中的任何一个语音质量算法或MOS算法的实施不应被视为限制性的，可使用任何目前已知的算法或任何将来开发的算法来实施本文所描述的方面。可将语音质量得分24记录在语音质量得分日志58中，所述日志存储在语音数据数据库56中。
在一些方面，语音监视模块18可包含阈值逻辑60，其用于确定所确定的语音质量得分24是否满足预定语音质量得分阈值。阈值参数62通常由出现在网络装置14或某其它网络装置处的配置来界定，且包含阈值和条件。所述阈值可以是数值，例如界定与可接受或不可接受语音质量得分相关联的限制的值。举例来说，MOS得分的范围是从1到5，且因此可考虑用以识别可接受MOS得分的阈值可以是约3到约4.5。阈值条件可包含“小于”、“大于”、“等于”、“小于和等于”、“大于或等于”等。为了清楚起见，本文使用术语“满足”阈值来定义所测量的值超过、等于或未达到预定值的情况。
在语音质量得分24满足预定阈值62的情况下，可发生某些预定动作。这些预定动作由阈值参数62界定，且可经配置以在满足阈值一次时发生，或者阈值逻辑60可经配置以规定在满足阈值预定次数时发生预定动作。预定动作可包含(但不限于)增加监视语音数据和确定语音质量得分的速率、监视额外的与无线装置有关的数据和/或将阈值通知传送到适当的关注方。
在一些方面，如果满足阈值62，那么可在发生预定事件时或在发生另外的预定事件(即，在满足阈值之前不会触发监视的事件)时，以增加的速率(即，以较短时间间隔、在较短时间范围上)发生对语音数据22的监视和对相关联语音质量得分24的确定。举例来说，如果在满足阈值之前，对语音数据的监视和对相关联语音质量得分的确定每2秒发生一次，那么在已经满足阈值之后，对语音数据的监视和对相关联语音质量得分的确定可每5毫秒发生一次。
在其它方面，如果满足阈值62，那么阈值逻辑60可能可操作以用于监视诊断数据或额外诊断数据，并将其存储在诊断数据库64中。阈值逻辑60可经配置以使得满足阈值的发生触发对诊断数据的初始监视和存储(即，在满足阈值之前不会发生诊断数据的监视)。在满足阈值之前发生对诊断数据的监视和存储的其它方面，可监视先前未被监视和存储的额外诊断数据，且/或可以小于初始时间间隔的第二时间间隔来监视和存储先前被监视的诊断数据。
在其它方面，可在语音监视模块18的阈值逻辑60内配置预定阈值参数62，其规定如果满足预定报警阈值，那么产生阈值通知并传送所述阈值通知。如果满足阈值，那么实施阈值报警/通知逻辑74以产生报警通知。随后，可经由通信模块76将报警通知传送给适当方，例如内部传送给无线装置的用户和/或经由网络装置(例如用户管理器服务器等)外部传送给服务提供商。在一些方面，阈值将是针对执行语音监视模块的所有无线装置实施的全网络阈值，而在其它方面，提供给用户/客户的服务等级将指示报警通知阈值。举例来说，基于例如装置或用户识别、装置类型或型号、装置硬件或软件版本、预订等级和/或客户服务代码等装置特征，不同装置可具有不同阈值。报警通知可采取电子邮件通信、短消息业务(SMS)通信等形式。
另外，在语音监视模块配置有阈值逻辑60(其可操作以使得满足阈值导致增加的监视和质量得分确定和/或对诊断数据或额外诊断数据的监视)的方面，所述逻辑可经配置以规定在预定时间周期之后或在已达到预定质量得分或将其维持预定时间周期之后，监视返回到“可接受状态”。本文将“可接受状态”定义为如在语音监视参数57内配置的可接受质量得分。
如先前所述，计算机平台40可进一步包含以硬件、固件、软件和其组合的形式实施的通信模块76，其实现无线装置10的各个组件之间以及无线装置10与无线网络12之间的通信。通信模块可包含用于建立无线通信连接的必要硬件、固件、软件和/或其组合。通信模块76可操作以用于将语音质量得分24和/或语音数据22和/或诊断数据传送到网络装置14。语音监视模块可经配置以用于以预定时间间隔、在发生预定事件时、在授权方(例如服务提供商/网络装置)的请求下或在如由语音监视模块界定的其它任何时间点处，传送语音质量得分、语音数据和/或诊断数据。在利用语音质量得分阈值的方面，语音监视模块可经配置以使得语音数据、语音质量得分和/或诊断数据仅在满足阈值发生之后被传送。或者，可在满足阈值发生之前和在满足阈值发生之后，传送语音数据、语音质量得分和诊断数据。还应注意，语音数据、语音质量得分和/或诊断数据可经配置以单独地或共同地被传送。
另外，无线装置10具有用于产生到达无线装置中的输入的输入机构78和用于产生供无线装置的用户消费的信息的输出机构80。举例来说，输入机构78可包含例如以下各项的机构：按键或键盘、鼠标、触摸屏显示器、与语音识别模块联合的麦克风等。在某些方面，输入机构78提供用户输入以激活无线装置上的应用程序。另外，举例来说，输出机构80可包含显示器、音频扬声器、触觉反馈机构等。
参看图3，根据另一方面，说明网络装置14(例如用户管理器服务器)的方框图。网络装置可包括任何类型的硬件、服务器、个人计算机、小型计算机、大型计算机或任何计算装置(专用或通用计算装置)中的至少一者。另外，本文描述为在网络装置14上操作或由网络装置14执行的模块和应用程序可完全在网络装置14上执行，或者在其它方面，单独的服务器或计算机装置可协调地工作以用可用格式将数据提供给若干方，且/或在无线装置10与由网络装置14执行的模块和应用程序之间的数据流中提供单独的控制层。
网络装置14具有计算机平台130，其可经由无线网络14发送和接收数据，且可执行例行程序和应用程序。计算机平台130包含数据存储装置132，其可包括易失性和非易失性存储器，例如只读和/或随机存取存储器(RAM和ROM)、EPROM、EEPROM、快闪卡或计算机平台常用的任何存储器。另外，数据存储装置132可包含一个或一个以上快闪存储器单元，或可以是任何二级或三级存储装置，例如磁性媒体、光学媒体、磁带或者软盘或硬盘。另外，计算机平台130还包含处理引擎26，其可以是专用集成电路(“ASIC”)或其它芯片组、处理器、逻辑电路或其它数据处理装置。计算机平台130可进一步包含以硬件、固件、软件和其组合的形式实施的通信模块134，其实现网络装置14的各个组件之间以及网络装置14与无线网络12之间的通信。举例来说，在所描述的方面，通信模块经配置以将语音监视模块18和相关联的语音质量监视参数57及阈值参数62传送到无线装置。另外，通信模块经配置以接收语音质量数据(例如语音质量得分日志58、语音数据日志22)，并将此类数据存储在语音数据库136中。通信模块还经配置以接收诊断数据(例如位置数据66、RF数据68、网络实体数据70和额外诊断数据72)，并将此类数据存储在诊断数据库138中。通信模块可包含用于建立无线通信连接的必要硬件、固件、软件和/或其组合。
网络装置的数据存储装置132包含语音质量监视配置模块140，其可操作以将语音质量监视模块18传送到无线装置，且将可配置的语音质量监视参数57和/或可配置的阈值参数62传送到无线装置。可配置的语音质量监视参数包含(但不限于)语音数据监视时间间隔、语音数据监视范围和/或触发语音数据监视的事件。另外，语音质量监视参数可包含关于要监视与语音有关的什么子系统的详细说明，例如声码器监视子系统的取样。语音质量监视参数可另外界定语音质量例行程序或算法，其经执行以确定语音质量得分。另外，语音质量监视参数可界定将监视和记录什么诊断数据，以及关于如何监视和记录所述诊断数据的详细说明，即诊断数据监视时间间隔、范围、触发事件等。在那些实施语音质量得分阈值的方面，语音质量监视配置模块将界定阈值以及围绕所述阈值的条件。另外，阈值参数可界定在满足阈值时将发生什么情况。举例来说，减小语音数据和/或诊断数据的监视时间间隔、监视诊断数据、监视额外诊断数据、发送报警通知等。一旦已经界定了语音质量监视参数和/或语音质量得分阈值，便经由通信模块134将所述参数和/或所述阈值传送到无线装置。
网络装置14的数据存储装置132包含语音质量报告产生模块28，其可操作以基于语音质量得分日志和诊断数据而产生语音质量报告。另外，语音质量报告产生模块28可依靠从其它网络装置传送的额外诊断数据日志，例如从位于各自网络节点处的网络装置传送的基站数据或移动交换中心数据。语音质量报告产生器模块包含数据分析逻辑142，其用于将所接收的语音得分日志58数据和诊断数据(例如位置数据66、RF数据68、网络实体数据70、额外诊断数据72)处理成可由语音质量报告产生器模块28操纵的数据。语音质量报告模块28另外包含语音质量报告产生逻辑144，其用于将经分析的日志数据转换成语音质量报告。语音质量报告将提供语音得分与诊断数据之间的相关性，以便洞察语音性能降级的原因。在这点上，语音质量报告可包含对请求或需要报告功能的那方有意义的任何与语音有关的数据。语音质量报告的实例包含(但不限于)基站语音质量报告、地理区域语音质量报告、无线通信装置类型语音质量报告和无线通信装置语音质量报告。
无线网络12包含任何可操作或至少部分可操作以用于实现无线装置10与连接到无线网络12的任何装置之间的无线通信的通信网络。另外，无线网络12可包含所有网络组件，以及所有形成所述网络的所连接的装置。举例来说，无线网络12可包含以下网络中的至少一者或任何组合：蜂窝式电话网络；多播网络，例如仅前向链路(FLO)网络，例如可从加利福尼亚州圣地亚哥市的Qualcomm公司购得的MEDIAFLO系统；数字视频广播(DVB)网络，例如针对卫星的DVB-S、针对缆线的DVB-C、针对地面电视的DVB-T、针对用以手持机的地面电视的DVB-H；地面电话网络；卫星电话网络；红外网络，例如基于红外数据协会(IrDA)的网络；短程无线网络；蓝牙技术网络；ZIGBEE协议网络；超宽带(UWB)协议网络；家用射频(HomeRF)网络；共享无线访问协议(SWAP)网络；宽带网络，例如无线以太网兼容性联盟(WECA)网络、无线保真联盟(“Wi-Fi联盟”)网络和802.11网络；公共交换电话网络；公共异质通信网络，例如因特网；专用通信网络；以及地面移动无线电网络。
电话网络的合适实例包含模拟和数字网络/技术中的至少一者或任何组合，所述模拟和数字网络/技术例如是：码分多址(CDMA)、宽带码分多址(WCDMA)、通用移动电信系统(UMTS)、高级移动电话业务(AMPS)、时分多址(TDMA)、频分多址(FDMA)、正交频分多址(OFDMA)、全球移动通信系统(GSM)、单载波(1X)无线电传输技术(RTT)、仅演进数据(EV-DO)技术、通用分组无线电业务(GPRS)、增强型数据GSM环境(EDGE)、高速下行链路数据包存取(HSPDA)、模拟和数字卫星系统以及可在无线通信网络和数据通信网络的至少一者中使用的任何其它技术/协议。
参看图4，在一个方面，用于监视语音质量的无线装置10包括蜂窝式电话。蜂窝式电话系统100可包含经由运营商网络104连接到有线网络102的无线网络12。无线装置10正被制造得具有越来越多的计算能力，且经常可通过无线网络12传送包含语音和数据的包。如早先描述的，这些“智能”无线装置10具有驻留在其本地计算机平台40上的API 44，所述API 44允许软件开发者创建在蜂窝式电话10上操作的软件应用程序，并控制所述装置上的特定功能性。图3是更全面地说明蜂窝式无线网络的组件以及本系统的一个方面的元件的相互关系的代表图。蜂窝式无线网络12仅仅是示范性的，且可包含任何这样的系统，远程模块(例如无线装置10)可借助于所述系统在彼此之间和/或在无线网络12的多个组件(包含但不限于无线网络运营商和/或服务器)之间以空中方式进行通信。
在系统100中，网络装置14可通过有线网络102(例如，局域网(LAN))与单独的数据储存库106通信，所述数据储存库106用于存储语音质量报告产生模块28、语音质量得分、语音数据或额外诊断数据。另外，数据管理服务器108可与网络装置14通信，以提供后处理能力、数据流控制等。网络装置14、数据储存库106和数据管理服务器108可与用以提供蜂窝式电信服务所需的任何其它网络组件一起存在于蜂窝式电话系统100上。网络装置14和/或数据管理服务器108通过数据链路110和112与运营商网络106通信，数据链路110和112可以是例如因特网、安全LAN、WAN或其它网络的数据链路。运营商网络104控制发送到移动交换中心(“MSC”)114的消息(通常是数据包)。另外，运营商网络104通过网络112(例如因特网和/或POTS(“普通老式电话业务”))与MSC114通信。通常，在网络112中，网络或因特网部分传送数据，且POTS部分传送语音信息。MSC 114可通过另一网络118(例如用于数据传送的数据网络和/或因特网部分和用于语音信息的POTS部分)连接到多个基站(“BTS”)116。BTS 118最终通过短消息业务(“SMS”)或其它空中方法将消息无线广播到无线装置(例如无线装置10)。
图5是详细描述根据一方面的用于在无线装置处监视语音质量并在网络装置处产生语音质量报告的方法的消息流程图。在事件200处，网络装置(14)的语音质量监视配置模块(140)配置语音监视和阈值参数(57和62)，以用于语音质量监视。这些参数可包含语音数据监视时间间隔、语音数据监视范围、触发语音数据监视的事件、待监视的数据、阈值、阈值条件、待监视的诊断数据、诊断数据监视时间间隔等。另外，如果阈值参数被配置，那么可界定在满足阈值时的动作条件，例如减小语音数据监视时间间隔、减小语音数据监视范围、触发语音数据监视的额外事件、诊断数据监视、诊断数据的额外监视、报警通知等。
在事件210处，网络装置(14)通过将引导命令发送到无线装置的语音监视模块(18)来起始与无线装置(10)的通信。可使用短消息业务(SMS)通信、自动回叫(ACB)通信或任何其它合适的通信机制来发送引导命令。在事件220处，语音监视模块(18)剖析引导命令，且在事件230处，语音监视模块调用通信模块(76)以起始与网络装置的通信。在一个方面，实施超文本传送协议/传送控制协议(HTTP/TCP)作为通信协议。在事件240处，语音质量监视配置模块(140)调用通信模块(134)以将可配置的语音监视和阈值参数从网络装置下载到无线装置。在事件250处，语音质量监视配置模块将确认消息发送到无线装置，以通知语音质量监视模块配置参数的下载已完成。
在事件260处，无线装置的语音监视模块(18)开始监视语音数据(22)和(视情况)诊断数据(64)，并针对所监视的语音数据确定语音质量得分(24)。在事件270处，语音质量模块(18)确定语音质量得分满足所界定的阈值，从而(例如)指示语音质量下降，且语音监视模块通过减小语音数据监视时间间隔并监视诊断数据或额外诊断数据(例如位置数据、RF数据等)来作出响应。
在事件280处，语音监视模块希望将语音质量得分和所记录的诊断数据传送到网络装置，并调用通信模块(76)以起始与网络装置的通信。在一个方面，实施超文本传送协议/传送控制协议(HTTP/TCP)作为通信协议。在事件290处，语音监视模块(18)调用通信模块(76)，以将所记录的语音质量得分和诊断数据从无线装置下载到网络装置。在事件300处，语音监视模块将确认消息发送到网络装置，以通知网络装置所记录数据的下载已完成。
在事件310处，网络装置(14)的语音质量报告产生模块(28)分析语音质量得分数据和诊断数据，并产生所记录数据的综合报告。在事件320处，将语音质量报告从网络装置传送给服务提供商/客户服务代表(20)，且在事件330处，服务提供商分析所述报告，并采取适当的网络或无线装置行动来调整网络或装置内的关注区域。
参看图6，根据一个方面，描绘详细说明用于在无线装置上进行语音质量监视的方法的流程图。在事件400处，无线装置的语音监视模块经配置以用第一预定时间间隔监视和记录语音数据和诊断数据。在替代方面，语音监视模块可经配置以仅最初监视和记录语音数据。通常，通过对来自声码器或记录语音样本的某其它装置的语音数据进行取样来监视语音数据。在语音监视模块的配置内界定监视语音和诊断数据的时间间隔。服务提供商、装置制造商、语音监视模块的供应商或能够访问语音监视模块的配置参数的任何其它实体可对预定时间间隔进行配置。除了以预定时间间隔进行监视之外，语音监视模块可经配置以在预定时间范围内进行监视和/或在发生预定事件时进行监视。
在事件410处，语音监视模块针对所监视的语音数据确定语音质量得分。将使用语音质量例行程序或算法来确定语音质量得分。在一些算法中，语音监视模块使用已知平均意见得分(MOS)算法来确定MOS，所述已知MOS算法例如是：单侧通话质量测量(“3SQM”)，其由国际电信联盟(ITU)标准P.563界定；感知通话质量测量(“PSQM”)，其由ITU标准P.861界定；通话质量感知评估(“PESQ”)，其由ITU标准P.862界定；E模型，其由ITU标准G.107界定；语音质量监视(“VQmon”)，其是尚未被ITU标准化的E模型扩展；以及类似算法。在许多方面，一定已经确定了语音质量得分，便将把所述得分记录在无线装置内的相关联语音质量得分日志中。
在事件420处，无线装置将语音质量得分和诊断数据传送到网络装置。语音质量得分和诊断数据的传送可另外包含语音数据的传送。应注意，将语音质量得分传送到网络装置可发生在任何时间点处，且在大多数方面，可在语音监视模块内进行配置。在一些方面，可在已经确定了得分之后，单独地传送语音质量得分，在其它方面，记录语音质量得分，且以预定时间间隔、在发生预定事件时或在服务提供商/网络装置管理员的请求下将累积的记录得分传送到网络装置。在实施语音质量得分阈值的某些方面，语音质量得分和相关诊断数据的传送仅在已经满足阈值之后才发生。
在决策430处，语音监视模块确定语音质量得分是否满足预定阈值。如先前提到的，阈值由值和条件来界定。可在语音监视模块内配置阈值，所述阈值触发以下动作：以减小的时间间隔(即，增加的速率)进行监视；监视诊断数据；监视额外诊断数据；和/或将报警通知传送到适当的感兴趣方。另外，阈值可经配置以规定在触发事件(例如减小监视时间间隔、增加所监视的数据和/或传送报警通知)发生之前应当满足阈值预定次数(大于一次)。如果质量得分不满足所述阈值，那么语音监视模块返回到事件400，且以最初的第一预定时间间隔继续进行监视。
如果质量得分确实满足所界定的阈值，那么在决策440处，语音监视模块确定满足所述阈值是否许可报警通知。语音质量监视模块可经配置以使得满足所有阈值才许可报警通知，或语音质量监视模块可经配置以使得仅满足某些预定阈值就许可报警通知。通常，如果语音监视模块经配置以发送报警通知，或如果语音质量得分大大超过或低于所规定的阈值，那么将把报警通知发送给适当方，例如服务提供商等。在一些方面，提供给无线装置用户的服务等级将指示语音监视模块是否经配置以在满足阈值时传送报警通知。如果确定满足阈值会许可报警通知，那么在事件450处，将报警通知传送给适当方。
如果确定满足阈值不会许可报警通知，或在发送报警通知之后，那么在事件460处，语音监视模块将开始以小于最初第一预定时间间隔的第二预定时间间隔进行监视。举例来说，如果最初每1秒进行一次监视，那么一旦满足阈值，就可每5毫秒(ms)发生一次监视。
除了增加监视语音数据的速率之外，语音监视模块可经配置以使得满足阈值会触发(在事件470处)对诊断数据的监视，或在诊断数据在满足阈值之前就被监视的情况下，触发对额外诊断数据的监视。另外，语音监视模块可经配置以使得发生满足阈值规定以减小的时间间隔来监视诊断数据。在事件480处，将语音质量得分、诊断数据以及(视情况)语音数据传送到网络装置。如先前提到的，将语音质量得分、语音数据和/或额外诊断数据传送到网络装置可发生在任何时间点处，且在大多数方面，可在语音监视模块内配置。
在事件490处，语音监视模块针对第二时间间隔所监视的语音数据确定语音质量得分，且在事件500处，确定语音质量得分是否继续满足阈值。如果不再满足阈值，那么过程返回到事件400，且以第一时间间隔进行语音数据监视，且可暂停对诊断数据和/或额外诊断数据的监视。或者，语音监视模块可经配置以仅在不再满足阈值发生指定次数(大于一次)之后才返回到第一预定时间间隔。如果仍满足阈值，那么过程返回到事件460，且以第二时间间隔进行语音数据监视，并继续进行对诊断数据或额外诊断数据的监视。或者，在其它方面，语音监视模块可经配置以暂停以第二预定时间间隔进行的语音数据监视和对诊断数据或额外诊断数据的监视，并在预定时间周期之后或在发生其它预定事件之后，返回到第一预定时间间隔。
参看图7，根据又一方面，呈现描绘用于配置语音质量监视模块的方法的流程图。在事件600处，网络装置(14)产生语音监视参数和阈值参数，其用于对在无线装置上执行的语音监视模块进行配置。通常，服务提供商代表将与网络装置通信，以针对个别无线装置或多个无线装置来配置语音监视参数。如先前提到的，语音监视参数可包含(但不限于)监视语音数据的速率或时间间隔、触发监视语音数据的事件、关于对什么进行监视的详细说明、用于计算质量得分的例行程序或算法、诊断监视标准等。阈值参数可包含(但不限于)阈值限制、满足阈值时发生的阈值条件，例如减小监视时间间隔、监视诊断数据、监视额外诊断数据、产生并传送报警通知等。可在开始在无线装置处实施语音质量监视模块时配置语音监视参数和阈值参数，或可在无线装置执行语音监视模块时的任何时间点重新配置语音监视参数。在事件610处，网络装置将所产生的语音监视参数传送到一个或一个以上无线装置。通常，网络装置将起始与无线装置的无线通信，并继续将语音监视和阈值参数无线下载到无线装置。可在产生语音监视和阈值参数时将所述参数传送到无线装置，或者可存储所产生的参数，并随后在预定时间处将其传送到无线装置。
参看图8，根据又一方面，呈现描绘用于产生语音质量报告的方法的流程图。在事件700处，网络装置从一个或一个以上无线装置接收语音质量得分数据和诊断数据。诊断数据可包含(但不限于)位置数据、RF数据、网络实体数据、其它诊断数据等。如先前所论述，监视和随后传送诊断数据的需要是基于无线装置上所实施的语音质量监视模块的配置。诊断数据的监视可经配置以在整个语音数据监视中发生，或诊断数据的监视可限于仅在已经满足语音质量得分阈值时才发生。诊断数据有助于提供对无线装置为何会在无线通信网络内经历与语音质量有关的问题的洞察。
在事件710处，网络装置分析并处理从无线装置接收到的语音质量得分数据和诊断数据。在一些方面，网络装置将以所记录的格式接收数据，且由此，在产生语音质量报告之前，将需要对所述数据进行适当的处理和分析。在事件720处，实施所处理和分析的语音质量得分数据和诊断数据，以产生语音质量报告。语音质量报告将使诊断数据与语音质量得分相关，以洞察所述无线装置、多个无线装置或网络中的语音质量降级的原因。如先前提到的，语音质量报告可专门针对个别无线装置，或语音质量报告可基于整个无线网络上的多个无线装置。语音质量报告可基于从实施语音质量模块的无线装置、不实施语音质量模块的其它无线装置、其它网络装置接收到的任何语音质量数据，或任何其它与语音质量有关的数据。语音质量报告可基于任何网络或装置属性。举例来说，语音质量报告可基于基站或其它网络节点相互作用、语音质量得分、功率(即，RF)数据、位置数据、基于指定地理区域内的无线装置或指定地理区域内的语音质量得分的此类报告等。
在事件730处，网络装置将把语音质量报告传送给服务提供商。通信可通过无线网络或通过有线网络发生。可使用任何可接受形式的通信，例如可经由电子邮件(e-mail)、文件传送等来传送报告。一旦传送给服务提供商，服务提供商代表便可分析所述报告，以识别与网络或特定无线装置有关的问题，并采取适当行动以调整网络内或装置等级处的问题。
结合本文所揭示的方面而描述的各种说明性逻辑、逻辑块、模块和电路可用以下装置来实施或执行：通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或其它可编程逻辑装置、离散门或晶体管逻辑、离散硬件组件或其经设计以执行本文所描述的功能的任何组合。通用处理器可以是微处理器，但在替代方案中，所述处理器可以是任何常规处理器、控制器、微控制器或状态机。处理器还可实施为计算装置的组合，例如DSP与微处理器的组合、多个微处理器、结合DSP核心的一个或一个以上微处理器或任何其它此类配置。
另外，结合本文所揭示的方面而描述的方法或算法的步骤可直接以硬件、由处理器执行的软件模块或以上述两者的组合的形式来实施。软件模块可驻存在RAM存储器、快闪存储器、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移除盘、CD-ROM或此项技术中已知的任何其它形式的存储媒体中。示范性存储媒体耦合到处理器，使得处理器可从存储媒体读取信息和将信息写入到存储媒体。在替代方案中，存储媒体可与处理器成一体式。处理器和存储媒体可驻留在ASIC中。ASIC可驻留在用户终端中。在替代方案中，处理器和存储媒体可作为离散组件驻留在用户终端中。
尽管前述揭示内容展示说明性方面，但应注意，在不脱离所描述方面的由所附权利要求书界定的范围的情况下，可对本文作出各种改变和修改。此外，虽然可以单数形式来描述或主张所描述方面的元件，但复数形式也是可能的，除非明确规定仅限于单数形式。另外，任何方面的全部或一部分都可与任何其它方面的全部或一部分一起使用，除非另有陈述。
因此，所描述的方面提供用于在无线装置上连续监视语音质量。可将监视结果传送给服务提供商，服务提供商可接着收集、分析且/或产生报告，以估计通信网络所经历的与质量有关的问题。在这点上，服务提供商可有效且高效地解决网络问题，进而向用户/客户提供前摄支持。可实施监视阈值，其允许额外的预防措施，和/或在经历阈值等级的语音质量性能时发生进一步监视。
得益于前面描述内容和相关联附图中所呈现的教示，本发明所属领域的技术人员将想到本发明的许多修改和其它方面。因此，应了解，本发明并非限于所揭示的特定方面，且希望修改和其它方面包含在所附权利要求书的范围内。尽管本文采用特定术语，但仅在一般且描述性意义上而不是出于限制目的来使用所述术语。

Claims (46)

1.一种用于在无线通信装置上监视语音质量性能的方法，所述方法包括：
在无线通信装置处监视语音数据和诊断数据；
在所述无线通信装置处基于所述语音数据确定语音质量得分；以及
将所述语音质量得分和所述语音质量数据中的至少一者与所述诊断数据传送到网络装置。
2.根据权利要求1所述的方法，其中在无线通信装置处监视语音数据进一步包括记录语音数据。
3.根据权利要求1所述的方法，其中在无线装置处监视诊断数据进一步包括记录位置数据、功率数据、来自状态管理器的与硬件有关的数据、与应用程序有关的数据和网络装置数据中的至少一者。
4.根据权利要求1所述的方法，其中在所述无线通信装置处基于所述语音数据确定语音质量得分进一步包括执行语音质量算法。
5.根据权利要求4所述的方法，其中执行语音质量算法进一步包括执行从由以下算法组成的群组中选出的语音质量算法：平均意见得分(MOS)、单侧通话质量测量(3SQM)、E模型、通话质量感知评估(PESQ)和感知通话质量测量(PSQM)。
6.根据权利要求1所述的方法，其中将所述语音质量得分和所述语音质量数据中的至少一者与所述诊断数据传送到网络装置进一步包括将所述诊断数据、所述语音数据和所述语音质量得分传送到所述网络装置。
7.根据权利要求1所述的方法，其进一步包括将所述语音质量得分与一个或一个以上预定语音质量得分阈值进行比较。
8.根据权利要求7所述的方法，其中将所述语音质量得分和所述语音质量数据中的至少一者与所述诊断数据传送到网络装置进一步包括在所述语音质量得分满足所述一个或一个以上预定语音质量得分阈值中的一者或一者以上的情况下，将所述语音质量得分和所述语音质量数据中的至少一者与所述诊断数据传送到网络装置。
9.根据权利要求7所述的方法，其中在所述无线通信装置处监视语音数据和诊断数据进一步包括在所述无线通信装置处以第一预定时间间隔监视语音数据和诊断数据，且进一步包括在所述比较确定所述语音质量得分满足所述语音质量得分阈值中的一者的情况下，在所述无线通信装置处以第二预定时间间隔监视语音质量数据和诊断数据，其中所述第二预定时间间隔小于所述第一预定时间间隔。
10.根据权利要求7所述的方法，其进一步包括将以所述第二预定时间间隔监视的所述语音质量数据和诊断数据传送到所述网络装置。
11.根据权利要求7所述的方法，其进一步包括在所述比较确定所述语音质量得分满足所述语音质量得分阈值中的一者的情况下，在所述无线通信装置处监视额外诊断数据。
12.根据权利要求11所述的方法，其中在所述比较确定所述语音质量得分满足所述语音质量得分阈值中的一者的情况下在所述无线通信装置处监视额外诊断数据进一步界定额外的与无线通信装置有关的数据，所述数据选自由以下数据组成的群组：位置数据、功率数据、来自状态管理器的与硬件有关的数据、与应用程序有关的数据和网络装置数据。
13.根据权利要求11所述的方法，其进一步包括将所述额外诊断数据传送到所述网络装置。
14.根据权利要求7所述的方法，其中在所述无线通信装置处监视语音数据和诊断数据进一步包括在所述无线装置处以第一预定时间间隔来监视语音数据和诊断数据，且进一步包括在多次比较得出所述语音质量得分满足所述语音质量得分阈值中的一者预定次数的情况下，在所述无线通信装置处以第二预定时间间隔监视语音质量数据和诊断数据，其中所述第二预定时间间隔小于所述第一预定时间间隔。
15.根据权利要求14所述的方法，其进一步包括将以第二预定时间间隔监视的所述语音质量数据和诊断数据传送到所述网络装置。
16.根据权利要求7所述的方法，其进一步包括在多次比较得出所述语音质量得分满足所述语音质量得分阈值中的一者预定次数的情况下，在所述无线通信装置处监视额外诊断数据。
17.根据权利要求7所述的方法，其中在多次比较得出所述语音质量得分满足所述语音质量得分阈值中的一者预定次数的情况下在所述无线通信装置处监视额外诊断数据进一步界定额外诊断数据，所述额外诊断数据选自由以下数据组成的群组：位置数据、功率数据、来自状态管理器的与硬件有关的数据、与应用程序有关的数据和网络装置数据。
18.根据权利要求17所述的方法，其进一步包括将所述额外诊断数据传送到所述网络装置。
19.根据权利要求7所述的方法，其进一步包括在所述比较确定所述语音质量得分满足所述语音质量得分阈值中的一者的情况下将报警消息传送到所述网络装置。
20.一种用于在无线通信装置上测量语音质量的计算机可读媒体，其包括至少一个指令序列，其中处理器对所述指令的执行致使所述处理器执行以下步骤：
在无线通信装置处监视语音数据和诊断数据；
在所述无线通信装置处基于所述语音数据确定语音质量得分；以及
将所述语音质量得分和诊断数据传送到网络装置。
21.至少一种处理器装置，其在无线通信装置中实施，所述处理器装置经配置以执行以下操作：
监视语音数据和诊断数据；
基于所述语音数据确定语音质量得分；以及
将所述语音质量得分和诊断数据传送到网络装置。
22.一种用于监视语音质量的无线通信装置，所述装置包括：
存储单元，其可操作以用于存储语音数据和诊断数据；以及
语音监视模块，其与所述存储单元通信，所述语音监视模块可操作以用于基于所述语音数据确定语音质量得分，且可操作以用于将所述语音质量得分和所述语音数据中的至少一者与所述诊断数据传送到网络装置。
23.根据权利要求22所述的无线通信装置，其进一步包括声码器，所述声码器与所述存储单元通信且可操作以用于产生语音数据。
24.根据权利要求22所述的无线通信装置，其进一步包括位置感测装置、功率感测装置、硬件监视装置和应用程序监视装置中的至少一者，其中所述装置与所述存储单元通信且可操作以用于产生诊断数据。
25.根据权利要求22所述的无线通信装置，其中所述语音监视模块进一步包括经执行以确定所述语音质量得分的语音质量算法。
26.根据权利要求22所述的无线通信装置，其中所述语音质量算法选自由以下算法组成的群组：平均意见得分(MOS)、单侧通话质量测量(3SQM)、E模型、通话质量感知评估(PESQ)和感知通话质量测量(PSQM)。
27.根据权利要求22所述的无线通信装置，其中所述语音监视模块进一步可操作以用于将所述诊断数据、语音质量得分和所述语音数据传送到所述网络装置。
28.根据权利要求22所述的无线通信装置，其中所述语音监视模块进一步可操作以用于将所述语音质量得分与一个或一个以上预定语音质量得分阈值进行比较。
29.根据权利要求28所述的无线通信装置，其中所述语音监视模块进一步可操作以用于在所述语音质量得分满足所述一个或一个以上预定语音质量得分阈值中的一者或一者以上的情况下将所述语音质量得分和所述诊断数据传送到所述网络装置。
30.根据权利要求28所述的无线通信装置，其中所述语音监视模块进一步可操作以用于在所述比较确定所述语音质量得分满足所述语音质量得分阈值中的一者的情况下增加语音质量得分确定的速率。
31.根据权利要求30所述的无线通信装置，其中所述语音监视模块进一步可操作以用于在所述比较确定所述语音质量得分满足所述语音质量得分阈值中的一者的情况下监视额外诊断数据。
32.根据权利要求31所述的无线通信装置，其中所述额外诊断数据进一步包括从由以下数据组成的群组中选出的数据：位置数据、功率数据、来自状态管理器的与硬件有关的数据、与应用程序有关的数据和网络装置数据。
33.根据权利要求31所述的无线通信装置，其中所述语音监视模块进一步可操作以用于将所述额外诊断数据传送到所述网络装置。
34.根据权利要求28所述的无线通信装置，其中所述语音监视模块进一步可操作以用于在所述比较确定所述语音质量得分满足所述语音质量得分阈值中的一者的情况下将报警消息传送到所述网络装置。
35.根据权利要求23所述的无线通信装置，其中以预定时间间隔存储所述语音数据和诊断数据。
36.一种无线通信装置，所述装置包括：
用于监视语音数据和诊断数据的装置；
用于基于所述语音数据确定语音质量得分的装置；以及
用于将所述语音质量得分和所述诊断数据无线传送到网络装置的装置。
37.一种用于分析无线通信装置中的语音质量性能的方法，所述方法包括：
在网络装置处从一个或一个以上无线通信装置接收语音质量得分和诊断数据；
分析所述语音质量得分和诊断数据；以及
基于所述语音质量得分和所述诊断数据产生一个或一个以上语音质量报告，其中所述语音质量报告使语音质量性能与所述诊断数据相关。
38.根据权利要求37所述的方法，其中在网络装置处从一个或一个以上无线通信装置接收语音质量得分和诊断数据进一步界定所述诊断数据，所述诊断数据选自由以下数据组成的群组：位置数据、功率数据、来自状态管理器的与硬件有关的数据、与应用程序有关的数据和网络装置数据。
39.根据权利要求37所述的方法，其进一步包括将所述语音质量报告传送给服务提供商以用于语音质量分析。
40.一种用于对无线装置上的语音质量监视进行配置的方法，所述方法包括：
在网络装置处配置与语音监视有关的语音监视参数和诊断监视参数；以及
将所述语音监视参数和诊断监视参数传送到一个或一个以上无线通信装置，所述无线通信装置可操作以用于根据所述语音监视参数和诊断监视参数监视语音数据和诊断数据。
41.根据权利要求40所述的方法，其中在网络装置处配置与语音监视有关的语音监视参数和诊断监视参数进一步界定所述语音监视参数，所述语音监视参数选自由以下各项组成的群组：语音数据、监视时间间隔、监视进度、监视触发事件、语音得分算法、阈值条件和阈值限制。
42.根据权利要求40所述的方法，其中在网络装置处配置与语音监视有关的语音监视参数和诊断监视参数进一步界定所述诊断监视参数，所述诊断监视参数选自由以下各项组成的群组：位置监视参数、功率监视参数、硬件监视参数、应用程序监视参数和网络装置监视参数数据。
43.一种用于分析无线通信装置中的语音质量性能的计算机可读媒体，其包括至少一个指令序列，其中处理器对所述指令的执行致使所述处理器执行以下步骤：
在网络装置处从一个或一个以上无线通信装置接收语音质量得分和诊断数据；
分析所述语音质量得分和诊断数据；以及
基于所述语音质量得分和所述诊断数据产生一个或一个以上语音质量报告，其中所述语音质量报告使语音质量性能与所述诊断数据相关。
44.至少一种处理器装置，其在网络装置中实施，所述处理器装置经配置以执行以下操作：
从一个或一个以上无线通信装置接收语音质量得分和诊断数据；
分析所述语音质量得分和诊断数据；以及
基于所述语音质量得分和所述诊断数据产生一个或一个以上语音质量报告，其中所述语音质量报告使语音质量性能与所述诊断数据相关。
45.一种用于分析无线通信装置中的语音质量性能的网络装置，所述网络装置包括：
通信模块，其可操作以用于从所述一个或一个以上无线通信装置接收语音质量得分和诊断数据；
存储模块，其可操作以用于存储所述语音质量得分和所述诊断数据；以及
语音质量报告产生模块，其与所述存储模块通信，其中所述语音质量报告产生模块可操作以用于基于所述语音质量得分和所述诊断数据产生一个或一个以上语音质量报告，其中所述语音质量报告使语音质量性能与所述诊断数据相关。
46.一种用于管理无线通信装置语音质量的网络装置，所述装置包括：
用于从多个无线通信装置接收语音质量得分和诊断数据的装置；
用于存储所述语音质量得分和所述诊断数据的装置；以及
用于基于所述语音质量得分和所述诊断数据产生语音质量报告的装置，其中所述语音质量报告使语音质量性能与所述诊断数据相关。
CN200680021162.7A 2005-04-21 2006-04-21 用于在无线通信装置上监视语音质量的方法和设备 Expired - Fee Related CN101199194B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US67416505P 2005-04-21 2005-04-21
US60/674,165 2005-04-21
PCT/US2006/014995 WO2006116027A1 (en) 2005-04-21 2006-04-21 Methods and apparatus for monitoring voice quality on a wireless communication device

Publications (2)

Publication Number Publication Date
CN101199194A true CN101199194A (zh) 2008-06-11
CN101199194B CN101199194B (zh) 2014-11-19

Family

ID=36928638

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200680021162.7A Expired - Fee Related CN101199194B (zh) 2005-04-21 2006-04-21 用于在无线通信装置上监视语音质量的方法和设备

Country Status (7)

Country Link
US (2) US7843991B2 (zh)
EP (1) EP1875728B1 (zh)
JP (1) JP5265344B2 (zh)
KR (1) KR100935070B1 (zh)
CN (1) CN101199194B (zh)
TW (1) TW200708054A (zh)
WO (1) WO2006116027A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104125346A (zh) * 2013-04-27 2014-10-29 中国移动通信集团广东有限公司 语音质量的告警方法和装置
CN104662823A (zh) * 2012-07-13 2015-05-27 安立公司 使用平均意见得分(mos)来估计多个用户装置的上行链路或下行链路质量的测试系统
CN104980337A (zh) * 2015-05-12 2015-10-14 腾讯科技（深圳）有限公司 一种音频处理的性能提升方法及装置
CN105703977A (zh) * 2016-04-29 2016-06-22 腾讯科技（深圳）有限公司 一种音视频质量监控方法、装置及系统
CN110505352A (zh) * 2018-05-17 2019-11-26 腾讯科技（深圳）有限公司 通话质量测试方法、系统、计算机设备和计算机存储介质

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7660715B1 (en) 2004-01-12 2010-02-09 Avaya Inc. Transparent monitoring and intervention to improve automatic adaptation of speech models
US8370132B1 (en) * 2005-11-21 2013-02-05 Verizon Services Corp. Distributed apparatus and method for a perceptual quality measurement service
US7843865B2 (en) * 2005-12-08 2010-11-30 Intel Corporation System and method for controlling home network devices using multicast enabled remote controls
US8804575B2 (en) * 2005-12-13 2014-08-12 Cisco Technology, Inc. Central entity to adjust redundancy and error correction on RTP sessions
US7653543B1 (en) * 2006-03-24 2010-01-26 Avaya Inc. Automatic signal adjustment based on intelligibility
US9135913B2 (en) * 2006-05-26 2015-09-15 Nec Corporation Voice input system, interactive-type robot, voice input method, and voice input program
US8055201B1 (en) * 2006-07-21 2011-11-08 Nextel Communications Inc. System and method for providing integrated voice quality measurements for wireless networks
US7925508B1 (en) 2006-08-22 2011-04-12 Avaya Inc. Detection of extreme hypoglycemia or hyperglycemia based on automatic analysis of speech patterns
US7962342B1 (en) 2006-08-22 2011-06-14 Avaya Inc. Dynamic user interface for the temporarily impaired based on automatic analysis for speech patterns
US7742762B1 (en) * 2006-11-03 2010-06-22 Sprint Communications Company L.P. Systems and methods for remote notification, diagnostics and remedy management
US8180027B1 (en) * 2006-11-22 2012-05-15 Securus Technologies, Inc. Score-driven management of recordings
WO2008091943A2 (en) * 2007-01-23 2008-07-31 Telchemy, Incorporated Method and system for estimating modem fax performance over packet networks
US8041344B1 (en) 2007-06-26 2011-10-18 Avaya Inc. Cooling off period prior to sending dependent on user's state
US7747740B2 (en) * 2007-10-30 2010-06-29 Cisco Technology, Inc. Troubleshooting of Wireless Client Connectivity Problems in Wireless Networks
US9066316B2 (en) 2007-11-19 2015-06-23 Qualcomm Incorporated Diagnostic monitoring by a wireless device
US7839859B2 (en) * 2007-12-03 2010-11-23 Nec Laboratories America, Inc. Voice adaptive gateway pacing methods and systems for wireless multi-hop networks
US8713440B2 (en) * 2008-02-13 2014-04-29 Microsoft Corporation Techniques to manage communications resources for a multimedia conference event
US7974212B2 (en) * 2008-03-19 2011-07-05 Microsoft Corporation Determining quality monitoring alerts in unified communication systems
US8244186B1 (en) * 2008-10-24 2012-08-14 Sprint Communications Company L.P. Audio-based power control for a wireless communication device
US8693958B2 (en) * 2008-12-17 2014-04-08 Telefonaktiebolaget L M Ericsson (Publ) Monitoring media services in telecommunications networks
US8068410B2 (en) * 2009-02-27 2011-11-29 Ibasis, Inc. Bias correction for scrubbing providers
US8934866B2 (en) * 2009-04-20 2015-01-13 Aetherpal Inc. System to assist a mobile device subscriber to perform self-diagnosis of the mobile device
JP5397010B2 (ja) * 2009-05-18 2014-01-22 富士通株式会社 端末装置
US8614731B2 (en) * 2010-04-21 2013-12-24 Spirent Communications, Inc. System and method for testing the reception and play of media on mobile devices
CN103053193B (zh) 2010-08-13 2016-03-16 诺基亚技术有限公司 用于在移动网络中评估语音质量的装置和方法
US9294946B2 (en) * 2010-08-27 2016-03-22 Qualcomm Incorporated Adaptive automatic detail diagnostic log collection in a wireless communication system
US20120108264A1 (en) * 2010-10-29 2012-05-03 Martz Kevin S Monitoring And Apparatus For Monitoring Cellular Network Coverage Using Mobile Units
JP2014509467A (ja) 2011-01-11 2014-04-17 イナ インダストリー パートナーシップ インスティテュート モバイルデバイスにおけるオーディオ信号の品質測定
US8717151B2 (en) * 2011-05-13 2014-05-06 Qualcomm Incorporated Devices and methods for presenting information to a user on a tactile output surface of a mobile device
US10541926B2 (en) * 2012-06-06 2020-01-21 The Trustees Of Columbia University In The City Of New York Unified networking system and device for heterogeneous mobile environments
JP6363999B2 (ja) 2012-06-06 2018-07-25 ザ・トラスティーズ・オブ・コロンビア・ユニバーシティ・イン・ザ・シティ・オブ・ニューヨーク 統一ネットワーキングシステム及び異種モバイル環境用デバイス
US9419735B2 (en) * 2012-09-07 2016-08-16 Comcast Cable Communcations, LLC Data usage monitoring
CN102932181B (zh) * 2012-11-01 2016-06-22 华为技术有限公司 一种检测网络故障的方法、节点及监控中心
US9419866B2 (en) 2012-11-01 2016-08-16 Huawei Technologies Co., Ltd. Method, node, and monitoring center detecting network fault
CN103686833A (zh) * 2013-12-17 2014-03-26 中国联合网络通信集团有限公司 移动网络语音质量评估方法和装置
KR101697399B1 (ko) * 2014-05-08 2017-01-17 엘지전자 주식회사 이동단말기
CN105224558A (zh) * 2014-06-16 2016-01-06 华为技术有限公司 语音业务的评价处理方法及装置
CN113630391B (zh) * 2015-06-02 2023-07-11 杜比实验室特许公司 具有智能重传和插值的服务中质量监视系统
US10298472B2 (en) 2015-10-08 2019-05-21 Microsoft Technology Licensing, Llc Media connection channel quality testing system
US10447570B2 (en) * 2015-12-30 2019-10-15 Hitachi, Ltd. Method and apparatus to manage insufficient data in distributed analytics system
CN109076396B (zh) 2016-05-20 2021-03-02 华为技术有限公司 分组域语音业务调度的方法和装置
KR102293996B1 (ko) * 2016-06-01 2021-08-27 삼성전자 주식회사 무선 통신 시스템에서 통화 품질 정보 생성 방법 및 장치
US10158753B2 (en) * 2016-06-01 2018-12-18 Samsung Electronics Co., Ltd. Method and apparatus for generating voice call quality information in wireless communication system
WO2019177889A1 (en) * 2018-03-12 2019-09-19 Privilege Wireless Llc Method of measuring the quality of service in a wireless communications network
WO2019177481A1 (en) 2018-03-12 2019-09-19 Ringcentral, Inc., (A Delaware Corporation) System and method for evaluating the quality of a communication session
US12010469B2 (en) * 2018-07-31 2024-06-11 Abb Schweiz Ag Method and device for remote monitoring and diagnosis of field equipment
WO2021007615A1 (en) * 2019-07-12 2021-01-21 Saluda Medical Pty Ltd Monitoring a quality of neural recordings

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW417094B (en) * 1997-11-28 2001-01-01 Sony Corp Tape cassette and tape recording and/or reproducing apparatus
US6985559B2 (en) 1998-12-24 2006-01-10 Mci, Inc. Method and apparatus for estimating quality in a telephonic voice connection
US6446123B1 (en) * 1999-03-31 2002-09-03 Nortel Networks Limited Tool for monitoring health of networks
US6651207B1 (en) * 1999-08-20 2003-11-18 Siemens Information & Communication Mobile, Llc Method and system for improving voice quality in cordless communications
US6728228B1 (en) 1999-09-20 2004-04-27 Telefonaktiebolaget Lm Ericsson (Publ) Method and system for measuring and reporting received signal strength
US6512752B1 (en) * 1999-12-30 2003-01-28 Ericsson Inc. Adaptive carrier assignment in multiple reuse patterns for packet data systems based on service type and user location
US6700953B1 (en) * 2000-09-02 2004-03-02 Metatron Technologies, Inc. System, apparatus, method and article of manufacture for evaluating the quality of a transmission channel using voice recognition technology
US7099280B1 (en) * 2001-03-28 2006-08-29 Cisco Technology, Inc. Method and system for logging voice quality issues for communication connections
US7010621B2 (en) * 2002-02-14 2006-03-07 The Boeing Company System having a spread-spectrum clock for further suppression of electromagnetic emissions in network devices communicating via a network bus
US7746797B2 (en) * 2002-10-09 2010-06-29 Nortel Networks Limited Non-intrusive monitoring of quality levels for voice communications over a packet-based network
JP2004208103A (ja) * 2002-12-26 2004-07-22 Kowa Co ネットワーク通話の品質評価設備
JP2004297473A (ja) * 2003-03-27 2004-10-21 Kowa Co ネットワーク通話の品質評価設備
US7502337B2 (en) * 2005-04-01 2009-03-10 Texas Instruments Incorporated Intelligent voice network monitoring using echo cancellation statistics

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104662823A (zh) * 2012-07-13 2015-05-27 安立公司 使用平均意见得分(mos)来估计多个用户装置的上行链路或下行链路质量的测试系统
CN104125346A (zh) * 2013-04-27 2014-10-29 中国移动通信集团广东有限公司 语音质量的告警方法和装置
CN104980337A (zh) * 2015-05-12 2015-10-14 腾讯科技（深圳）有限公司 一种音频处理的性能提升方法及装置
CN105703977A (zh) * 2016-04-29 2016-06-22 腾讯科技（深圳）有限公司 一种音视频质量监控方法、装置及系统
CN105703977B (zh) * 2016-04-29 2020-07-24 腾讯科技（深圳）有限公司 一种音视频质量监控方法、装置及系统
CN110505352A (zh) * 2018-05-17 2019-11-26 腾讯科技（深圳）有限公司 通话质量测试方法、系统、计算机设备和计算机存储介质

Also Published As

Publication number Publication date
EP1875728B1 (en) 2016-07-20
US20060252376A1 (en) 2006-11-09
EP1875728A1 (en) 2008-01-09
US20100062724A1 (en) 2010-03-11
CN101199194B (zh) 2014-11-19
KR100935070B1 (ko) 2009-12-31
KR20080005284A (ko) 2008-01-10
TW200708054A (en) 2007-02-16
US7843991B2 (en) 2010-11-30
US8311087B2 (en) 2012-11-13
JP5265344B2 (ja) 2013-08-14
WO2006116027A1 (en) 2006-11-02
JP2008538685A (ja) 2008-10-30

Similar Documents

Publication Publication Date Title
CN101199194B (zh) 用于在无线通信装置上监视语音质量的方法和设备
US7873321B2 (en) Apparatus and methods for determining network access performance of a wireless device
US8532610B2 (en) Method and apparatus for monitoring usage patterns of a wireless device
US7551922B2 (en) Rule based data collection and management in a wireless communications network
US8135395B2 (en) Methods and apparatus for monitoring configurable performance levels in a wireless device
KR100948217B1 (ko) 무선 장치상에서 프로덕트 승인을 테스트하기 위한 장치 및방법
US20060023642A1 (en) Data collection associated with components and services of a wireless communication network
US20060007870A1 (en) Collection of data at target wireless devices using data collection profiles
US10404525B2 (en) Classification of detected network anomalies using additional data
US20060259629A1 (en) Methods and apparatus for determining aspects of multimedia performance of a wireless device
MX2007010846A (es) Aparatos y metodos para determinar el desempeno del procesamiento de voz y/o datos de un dispositivo inalambrico.
CN102150450A (zh) 用于自动监测和管理无线网络性能的系统和方法
EP1803230A2 (en) Rule based data collection and management in a wireless communications network
WO2007005030A2 (en) Rule based data collection and management in a wireless communications network
CN102457892B (zh) 一种测试方法和设备
CN101834749A (zh) 获取数据的方法及装置、业务服务质量监控方法及装置
WO2013088453A2 (en) Analytic tool for customer experience evaluation and network optimization

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20141119

Termination date: 20210421

CF01 Termination of patent right due to non-payment of annual fee