CN104662823A - 使用平均意见得分(mos)来估计多个用户装置的上行链路或下行链路质量的测试系统 - Google Patents
使用平均意见得分(mos)来估计多个用户装置的上行链路或下行链路质量的测试系统 Download PDFInfo
- Publication number
- CN104662823A CN104662823A CN201380037276.0A CN201380037276A CN104662823A CN 104662823 A CN104662823 A CN 104662823A CN 201380037276 A CN201380037276 A CN 201380037276A CN 104662823 A CN104662823 A CN 104662823A
- Authority
- CN
- China
- Prior art keywords
- dut
- link
- sample
- reference sample
- uplink
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 122
- 239000012634 fragment Substances 0.000 claims abstract description 31
- 239000000523 sample Substances 0.000 claims description 94
- 239000013074 reference sample Substances 0.000 claims description 45
- 238000000034 method Methods 0.000 claims description 39
- 230000006866 deterioration Effects 0.000 claims description 19
- 238000004891 communication Methods 0.000 claims description 16
- 230000000977 initiatory effect Effects 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 5
- 230000002349 favourable effect Effects 0.000 claims description 4
- 230000004044 response Effects 0.000 claims 4
- 238000012986 modification Methods 0.000 description 11
- 230000004048 modification Effects 0.000 description 11
- 238000011156 evaluation Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000013441 quality evaluation Methods 0.000 description 5
- 230000006735 deficit Effects 0.000 description 4
- 230000008447 perception Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 239000000654 additive Substances 0.000 description 2
- 230000000996 additive effect Effects 0.000 description 2
- 230000002301 combined effect Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 210000003127 knee Anatomy 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000003999 initiator Substances 0.000 description 1
- 210000002414 leg Anatomy 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
- 238000012956 testing procedure Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/06—Testing, supervising or monitoring using simulated traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/22—Arrangements for supervision, monitoring or testing
- H04M3/2236—Quality of speech transmission monitoring
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/22—Arrangements for supervision, monitoring or testing
- H04M3/26—Arrangements for supervision, monitoring or testing with means for applying test signals or for measuring
- H04M3/28—Automatic routine testing ; Fault testing; Installation testing; Test methods, test equipment or test arrangements therefor
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Mobile Radio Communication Systems (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Monitoring And Testing Of Exchanges (AREA)
- Telephonic Communication Services (AREA)
Abstract
提供了一种测试系统，以从中心位置测试大量的移动电话、平板型计算机、膝上型计算机或其他用户发送/接收装置的连接的语音和视频质量两者。质量可以被表达为平均意见得分(MOS)，并可以分开地估计上行链路和下行链路连接质量。系统允许使用作为终端用户的特性的媒体片段，并允许在用户通常打电话的时间和位置测量视频数据。
Description
技术领域
本发明涉及评价网络无线通信信号中的减损(impairment)(包括损失、错误、噪声和抖动)以使得能够估计语音或视频质量的劣化的测试系统的配置。
背景技术
存在几种测试系统配置以估计网络装置的上行链路和下行链路媒体连接、或上行链路和下行链路媒体链路的质量，所述网络装置包括固定、游动和移动电话、平板电脑、笔记本、膝上型计算机和计算机。系统提供对话音和/或视频的估计。测试的连接可以是专用电路交换连接，或可以是IP电话(VoIP)。现有的测试方法可以使对质量的估计基于有关连接特性(诸如延迟、分组丢失和抖动)的信息。使用这种类型的估计的系统的一个示例是用于固定和移动网络的AnritsuCMA 3000一体化现场测试仪。
这些传统的方法使估计基于对在媒体从发送用户通过测试系统到达接收用户之前和之后的话音或视频媒体的比较。使用这种类型的估计的系统的一个示例是Anritsu ME7834移动装置测试平台。此平台模仿无线网络和空中接口来提供对高级的移动用户设备(UE)的逼真测试。
在图1所示出的传统测试系统中，被测装置(DUT)直接连接到测试系统(TS)。在这样的系统中，可以估计下行链路媒体链路或下行链路连接(从TS向DUT)和上行链路媒体链路或上行链路连接(从DUT到TS)的组合的媒体质量。例如，为估计媒体质量，测试系统2获取参考媒体样本或“参考”媒体文件1，并在真实的或模仿的无线系统4上播放该样本。参考媒体样本1可能遭受很多不同的减损，诸如通过编解码器的编码与解码、动态范围的损失、衰减、延迟、抖动、分组丢失、错误的比特、去随机化缓冲区中的损失、以及输入和输出的噪声的增加。所有这些减损共同作用，降低了接收到的媒体的质量。为了估计影响，在DUT UE 6处捕获媒体，并放置在传统上叫做“劣化”媒体样本或“劣化文件”8中。传统测试系统可以访问参考媒体样本1和劣化样本8，并将它们进行比较，以估计减损的影响。
为了进行比较，通常由听话音或看视频的一组人估计话音或视频劣化，以形成他们的关于质量的意见。人们按1到5的范围对质量进行打分，并且计算分数的平均值以获得平均意见得分(MOS)。当前，有标准化的软件和算法用来导出MOS。示例软件工具是PESQ——代表“Perceptual Evaluation of Speech Quality(对话音质量的感知评价)”(由ITU-T建议P.862标准化)；POLQA——代表“Perceptual Objective Listening Quality Analysis(客观感知听质量分析)”(由ITU-T建议P.863标准化)；PEVQ——代表“Perceptual Evaluation of Video Quality(对视频质量的感知评价)”，峰值信噪比(Peak-Signal-to-Noise-Ratio，PSNR)算法；以及结构相似性(SSIM)算法。
除在实验室中测试话音和视频质量之外，操作员和设备供应商也希望在现场测试媒体质量，优选地使用各种位置处的大量的UE。现场的媒体质量测试难得多，因为在单一位置访问参考媒体和劣化媒体两者是非平凡的。使用了多种拓扑，下面给出了几个示例。
图2示出了如何布置测试系统以评价现场的UE的MOS。在图2的系统连接中，UE 6被编程为回送(loop-back)它在下行链路上接收到的任何音频。如此，测试系统2可以播放参考媒体样本1，将它传输到UE 6，并捕获对应的劣化媒体样本8。此方法的一个缺点是，媒体在被捕获之前在下行链路和上行链路两者上传递，MOS评价只反映两者的组合影响。另一缺点是，该方法打扰操作UE 6的终端用户，因为终端用户不能在媒体质量测试在进行中时从UE 6打电话。为了方便起见，图1中的保留到图2的部件以及在随后的附图中保留的部件具有相似的附图标记。
图3示出了如何设置测试系统配置以评价现场的UE的MOS的另一示例。在此示例中，测试系统2是拴系到一个或多个UE 61-62的膝上型计算机。为了测试现场的UE 61-62，膝上型测试系统2也需要在现场。膝上型TS 2命令拴系的UE中的第一UE 61呼叫第二拴系的UE 62。一旦建立了呼叫，TS 2使第一UE 61通过无线系统4向第二UE 62播放参考媒体样本1，并从第二UE 62获得对应的劣化媒体样本8。然后，TS 2可以计算MOS。此测试系统具有相同缺点，即MOS只反映下行链路和上行链路的组合影响，并且当媒体质量测试在进行中时不能使用UE。此外，在此拓扑中，单一测试系统只能测试数量有限的UE连接，并且由于每一个测试系统都需要用于媒体质量评价软件的单独的许可证，所以此测试系统方法是昂贵的。
已知由具有不同的方言或话音模式的主体所提供的参考媒体文件会产生相当不同的MOS值。显然，MOS取决于用于生成参考文件的主体的细微的性质。从而，始终会有这样的可能性：对于一个用户测量的MOS与对于具有稍微不同的话音模式、方言或语调的用户测量的MOS不对应。
发明内容
本发明的各实施例提供测试系统以从中心位置测试大量的移动电话或膝上型计算机的语音和视频连接的质量。质量可以被表达为MOS，并可以分开地估计上行链路和下行链路连接或链路。系统允许作为终端用户的特性的音频话音音素和作为终端用户的特性的视频数据在用户通常打电话的时间被测量。
具体而言，本发明的各实施例提供下列特征中的一个或多个：
(1)测试系统提供对下行链路媒体链路和上行链路媒体链路的质量的独立测量。
(2)由测试系统确定的MOS值是在对于用户通常打电话的时间和位置有代表性的时间和位置确定的。
(3)具有用于媒体质量评价的单一许可证的测试系统可以评价大量的UE的媒体质量。
(4)为其测量链路质量的用户设备(UE)，包括终端用户自己的手机、平板型计算机、或其他发送/接收装置，只需要最小量的修改，并保持对终端用户完全可用。
(5)系统利用最小量的时间执行评价，以减少对终端用户的影响。
(6)由系统所提供的MOS值可以根据各种参考文件确定，所述参考文件可以代表终端用户以及终端用户与其进行通信的人的语言和话音模式。
附图说明
将借助于附图说明本发明的进一步的细节，其中：
图1示出了测量无线系统中的语音质量的经典测试系统；
图2示出了使用回送估计现场的UE的MOS的方法；
图3示出了使用拴系的UE估计现场的UE的MOS的方法；
图4提供了用于收集大量现场的UE的MOS值的测试系统配置总览；
图5提供了将被参考用于评价下行链路和上行链路媒体链路质量(作为呼叫的一部分)的本发明的实施例的连接性图示；
图6是示出了最小化对终端用户的影响的实施例的连接性图示；
图7示出了作为会话的一部分，对下行链路和上行链路媒体链路质量的评价；以及
图8示出了获得并使用用户特定的媒体样本。
具体实施方式
系统概述
图4提供了根据本发明的实施例的使用用于收集大量现场的DUT UE 61–6n的MOS值的测试系统(TS)2的测试系统配置总览。测试系统耦接到无线系统4或类似的固定通信网络的固定部分。无线系统4可以是包括3G或4G系统的多种类型中的一种，诸如可以支持语音呼叫、分组数据和可选视频呼叫的UMTS、CDMA或LTE系统。
TS 2和无线系统4之间的耦接可以非常紧密，如在TS直接与诸如分组数据网关(PDG)和策略和计费规则功能(PCRF)之类的基础设施元件进行通信的解决方案中那样。PDG提供对UE的分组数据访问，该UE进而允许对于呼叫以及对于数据文件的下载和上传建立数据载体。到PCRF的连接允许TS为这些数据载体获得所需的服务质量(QoS)。
TS 2和无线系统4之间的耦接也可以相当宽松。例如，TS可以是IMS系统中的应用服务器，并通过服务-呼叫会话控制功能(CSCF)和代理-CSCF(Proxy-CSCF)与无线系统4进行通信。在此情况下，TS 2仍可以通过经由P-CSCF与PCRF进行通信来获得所需的QoS。呼叫和分组数据连接的建立可以使用会话发起协议(SIP)，但是还可以使用其他方法。
注意，图4示出了无线系统4。然而，本发明的各实施例可以用于支持语音或视频呼叫的任何类型的有线和无线通信系统中。在下文中可以清楚地看出，很多实施例不依赖于通信系统的详细操作，只要TS 2和DUT或UE 61–6n可以建立呼叫并进行分组数据连接即可。UE可以是使用公用电话系统、蜂窝系统或基于因特网的服务(诸如Skype)打电话的蜂窝电话(诸如iPhone、安卓电话或黑莓电话)、Wi-Fi连接的装置、SIP电话、膝上型计算机或PC、或计算机。
用于上行链路链路质量评价的测试-呼叫实施例
图5提供了将被参考用于评价下行链路和上行链路媒体链路质量(作为呼叫的一部分)的本发明的实施例的连接性图示。对于图5，给测试台(TS)2提供至少一个媒体样本。媒体样本可以是高质量语音样本、高质量视频样本或包含语音和视频的组合的样本。有用的媒体样本可以持续几秒到几分钟。在本发明的上下文中，视频还可以包括一个或多个静止图像的序列，每一个静止图像都被编码为例如jpeg数据。通常给TS 2提供很多这样的样本，TS 2将使用很多不同的样本来测试DUT UE 6的媒体质量。这通过对若干个不同的样本的质量评价进行平均来完成，以去掉对单个样本的性质的依赖。媒体样本通常作为文件存储在硬盘驱动器上或存储在非易失性RAM中，但是还可以保持在普通随机存取存储器中。
对于图5，我们假设UE DUT 6被编程为实现实施例。可以给予DUT 6的终端用户7对于参与媒体链路质量测试的小补偿。对于终端用户7的最后的奖励将是，系统质量将被更好地理解，这将导致更好的总体连接性。
对于图5，独立于下行链路的链路质量、或下行链路质量(从TS 2到DUT 6)，测量上行链路的媒体链路质量、或上行链路质量(从DUT 6到TS 2)。事实上，某些实施方式可以只测量上行链路链路质量或只测量下行链路链路质量。这适用于本公开中的所有实施例，但是为方便起见，图5示出了上行链路和下行链路MOS的组合的测量，因为这将是最有可能的实施方式。
进一步对于图5以及随后的附图，示出了(图4的)无线系统4的某些内部软件部件。无线系统部件包括网关50、服务质量(QoS)确定模块52、以及无线系统收发器54。随后将描述使用这些无线系统部件的上行链路和下行链路连接。
为了测量图5中的DUT 6的上行链路的媒体质量，选择一个或多个媒体样本，并在TS 2和DUT 6之间传输。具体而言，对于存在于此附图中的实施例，TS 2选择一个或多个媒体样本，并将它们下载到DUT 6，如线55所示。在本公开中，术语“下载”和“上传”是指在下行链路或上行链路上可靠地传输数据以便可以由发送方确定无错误的接收的下载和上传过程。接收到的数据将是发送的数据的准确的副本，并且不受减损的影响。这可以使用已知的过程(诸如传输控制协议(TCP)、文件传输协议(FTP)、以及安全FTP(SFTP))来进行。TS 2保留它下载到DUT 6的每一个文件的副本。注意，任何上传和下载可以利用低服务质量QoS(例如，“BestEffort(尽力而为)”)进行，从而是便宜的，并且不会显著地干扰终端用户7的活动。
DUT 6被编程为以以后可以检索的方式存储每一个下载的文件。当下载多个文件时，文件被索引或命名，使得以后可以指定和选择特定的文件。下载的样本被称为“U_R”，因为它们将被TS 2和DUT6用作上行链路参考样本。框58示出了在DUT中存储样本U_Ri。
为了开始测试会话，测试系统2发起对DUT 6的呼叫，如线56所示。呼叫建立可以是完全传统的，为建立呼叫在通信系统中不需要特别准备。作为传统呼叫建立的一部分，通信系统将为呼叫建立上行链路和下行链路连接或载体，它们具有支持语音和/或视频的传输所需的服务质量，视正在建立的呼叫的情况而定。建立QoS由线57所示出。通常，QoS是作为呼叫建立过程的一部分自动地建立的。例如，网关50或代理-CSCF可以通过PCRF 52请求呼叫的QoS。
DUT 6被编程为将呼叫识别为属于测试会话。DUT 6可以通过将呼叫的呼叫者-ID识别为TS 2的ID来这么做。替代地，如果SIP用于呼叫建立，则可以在呼叫建立消息中的一个中有测试会话标识信息，例如在SIP消息标头中或在SIP消息正文中。当DUT 6将呼叫识别为属于测试会话时，DUT 6优选地自动应答呼叫。它抑制了给终端用户的所有通知；即，当测试呼叫来到时，DUT 6不会响铃或振动。如此，可以在不打扰终端用户7的情况下进行测试会话(如图5中的“不响铃”标签所示)。
注意，在替换实施例中，测试呼叫也可以由DUT 6发起。对于此变型，TS 2的电话号码或统一资源标识符被编程到DUT 6中。然后，DUT 6可以在任何方便的时间发起对TS 2的呼叫。TS 2被编程为将来自DUT 6的任何呼叫解释为测试呼叫的发起。
DUT 6存储一个或多个样本，并且测试会话建立可以例如通过将样本文件名包括在SIP消息标头中或包括在消息正文中来显式地指定样本中的一个。会话建立也可以例如通过使用媒体样本将以它们被下载的顺序被使用的约定来隐式地指定媒体样本。在此情况下，DUT 6将使用跟随在前一测试会话中所使用的媒体样本后面的媒体样本，在使用了最后一个样本之后，从第一个样本重新开始。如果DUT 6只下载了单一媒体样本，如图5中的线55所示，则会话建立隐式地指定该单一样本。我们将把指定的一个或多个样本称为U_Ri。
当DUT 6将呼叫识别为属于测试会话时，它将通过对应的上行链路连接或上行链路载体播放指定的上行链路参考样本U_Ri作为上行链路媒体，如线60所示。从而，由TS 2建立呼叫56并指定样本将使得DUT 6通过上行链路连接播放与指定的上行链路参考样本对应的上行链路媒体。在样本包含语音和视频两者的情况下，DUT 6可以通过单一上行链路多媒体载体来播放样本，或通过两个上行链路载体来播放它；一个载体用于语音媒体，一个载体用于视频媒体。
通信系统将自动地将上行链路媒体路由到TS 2，因为TS 2是呼叫中的另一方。媒体可能会在DUT 6处或在通信系统链路中遭受减损，这些减损可能会影响媒体质量。在任何情况下，TS 2将捕获上行链路媒体流，并将它存储为劣化上行链路媒体样本或上行链路劣化样本U_Di，如图5中的框62所示。TS 2可以将样本U_Di存储在易失性RAM、非易失性RAM或盘上。
如果测试系统下载并指定了要播放的多个上行链路参考样本，则DUT按照它们被指定的顺序播放指定的样本中的每一个。TS 2将捕获每一个样本作为劣化上行链路媒体样本U_Di。在图5中，这与线60以及捕获62的一次或多次重复对应。
当播放了用于测试会话的媒体时，TS 2或DUT 6以传统方式结束呼叫，如线68所示。TS 2将捕获到的样本U_Di与参考样本U_Ri进行比较，以估计上行链路的媒体质量，如框72所示。TS 2可以使用符合标准的软件用于估计，诸如PEQ、POLQA或PEVQ，并可以将比较的结果表达为平均意见得分(MOS)。
用于下行链路链路质量评价的测试-呼叫实施例
同样如图5所示出的，TS 2还可以发起测试呼叫以估计下行链路的媒体质量。它建立呼叫56，如上文所描述的，DUT UE 6将该呼叫标识为属于测试会话。TS 2进行到通过下行链路连接或下行链路载体递送或播放参考媒体样本，以将它递送到DUT 6。我们将此样本称为D_Rj，如线64所示。媒体可能会在TS 2处，在通信系统链路中，或在DUT 6处被减损。DUT 6被编程为记录或捕获它在测试会话期间接收到的任何下行链路媒体，并将它存储为下行链路劣化样本D_Dj。在一个变型中，TS 2可以播放多个下行链路参考样本D_Rj。DUT 6将捕获每一个样本，作为劣化下行链路媒体样本D_Dj。在图5中，这与线64以及捕获66的一次或多次重复对应。DUT 6进一步被编程为使用与TS 2的可靠数据连接，将记录的下行链路劣化样本D_Dj上传到TS 2，如线70所示。DUT 6可以在呼叫结束之前或之后这么做。可以在其他样本正在被播放的同时上传记录的样本D_Dj。TS 2、DUT UE 6和系统54中的QoS机制应该确保媒体载体获得相对于正在进行的上传或下载的充分高的优先级，这通常是利用“尽力而为”的QoS执行的。
TS 2可以在单一测试会话过程中播放和递送多个下行链路样本，DUT 6可以被编程为记录所有样本，并按照它们以前被下载55的顺序上传它们或使用其他机制来指定个体样本。
测试系统2将接收到的样本D_Dj与参考样本D_Rj进行比较，以估计下行链路的媒体质量，如框72所示。TS 2可以使用软件进行该估计，诸如PEQ、POLQA或PEVQ，并可以将比较的结果表达为平均意见得分(MOS)。链路质量估计可以在呼叫结束之前或之后进行。例如，TS 2可以推迟呼叫的结束，直到已经估计了上行链路质量和/或下行链路质量。
测试系统变型
如图5所示，通常在同一呼叫期间测试上行链路和下行链路。事实上，DUT 6和TS 2可以同时播放/递送上行链路参考样本和下行链路参考样本。在图5中，上行链路样本播放60和下行链路样本播放64将在时间上重叠。
进一步地，虽然图5没有具体地示出TS可以执行与大量的DUT的测试会话，但是可以实现这样的系统配置。TS可以依次呼叫DUT中的每一个，或可以根据其他规则呼叫DUT，如下面所说明的。当与第一DUT的测试会话在进行中时，TS可以呼叫第二DUT，并与第二DUT建立第二测试会话；为第二测试会话建立第二上行链路连接，并使得第二DUT通过第二上行链路连接，播放与参考样本对应的媒体。从而，与不同的DUT的测试会话可以完全或部分地重叠。TS可以对于所有DUT使用同一媒体样本的集合，或可以对于不同的DUT使用不同的样本。
最小化用户影响
测试呼叫要短，因为可以只花10或15秒来播放或递送媒体样本。为了以一种方式最小化终端用户影响，可以通过同时播放并递送上行链路和下行链路样本来限制呼叫持续时间。这会限制对终端用户7的影响。然而，仍有这样的可能性：当测试呼叫在进行中时，终端用户7发起或接收呼叫，如图6所示。
由于在测试呼叫开始时DUT不会通知用户，所以终端用户通常不会感知测试呼叫在进行中。结果，终端用户可能当DUT忙于测试呼叫时想要开始非测试呼叫。在此情况下，非测试呼叫将失败。当发起非测试呼叫时最小化用户影响的步骤如图6所示。图6提供了示出终端用户7在测试呼叫期间发起用户呼叫的情况的连接性图示。为了示出测试呼叫的建立，图6从图5保留连接性线56、60和68。为了在图6的图示中进一步进行，当DUT 6检测到用户在测试呼叫过程中发起用户呼叫时，如线80所示，DUT 6例如通过挂断与TS 2的呼叫，或通过发送SIP BYE(如线68所示)，中断正在进行的测试呼叫。类似地，当DUT 6检测到当测试呼叫在进行中时有进来的呼叫时——例如通过观察从诸如第三方82之类的对等装置接收到SIPINVITE——DUT 6可以立即中断68测试呼叫。在介入的用户呼叫完成之后，DUT 6可以稍后例如通过向测试系统发送INVITE，与TS 2重新建立测试呼叫。替代地，在计时器期满之后，TS 6可以重试测试呼叫。DUT 2还可以被编程为拒绝当用户和第三方之间的呼叫在进行中时发生的来自TS 6的任何测试呼叫发起。
一旦第三方呼叫中断了测试呼叫，在测试呼叫终止之后，如图6所示，DUT和第三方之间的连接性继续。如线85所示，对于由DUT 6的终端用户7发起的呼叫，由DUT建立第三方用户呼叫。然后，第三方82和DUT 6进行如由线86所指示的用户呼叫。最后，在第三方82和DUT 6之间的呼叫完成之后，发送结束呼叫信号87。
作为质量评价会话的实施例
图7示出了用于评价上行链路和下行链路两者上的媒体质量或QoS的实施例。图7中所示出的此测试系统功能建立92通用测试会话，该会话包括QoS测试，并包括从图5保留的步骤。注意，此通用会话不同于呼叫，不会使用传统的呼叫建立过程和消息。这暗示例如当会话在进行中时可以建立并进行电话呼叫。这将导致两个重叠的会话，通用会话和与呼叫相关联的会话。如在前面的各实施例中，在TS和DUT之间传输或下载55一个或多个参考媒体样本(U_Ri)，用于上行链路测试。然后，TS 2或DUT 6建立或发起92通用测试会话。TS或DUT例如可以发送SIP MESSAGE以通知DUT或TS测试会话即将开始。会话发起方还可以使用其他方法，诸如文本消息。或者，发起方可以使用SIP INVITE建立除呼叫之外的应用级会话。TS甚至可以使用多播来同时测试多个DUT的下行链路媒体质量。会话建立将通常向DUT指定它应该在上行链路上播放哪个或哪些样本U_Ri。它不会导致任何响铃并且不会通知终端用户。
在图7中所示出的实施例中，需要特殊的处理以建立具有正确的QoS(即，对于语音和视频呼叫典型的QoS)的上行链路和/或下行链路载体。TS可以通过与通信网络中控制QoS的网络元件(诸如UMTS或LTE无线系统中的PCRF)进行通信来建立这样的QoS。这由线90示出。取决于TS如何紧密地耦接到通信系统，它可以直接与QoS实体进行通信，或者它可以通过代理来进行通信。例如，TS可以通过Rx接口直接与PCRF进行通信，或可以通过代理-CSCF与PCRF进行通信。P-CSCF可以基于SIP MESSAGE或SIPINVITE中的信息请求QoS。
一旦建立了具有正确的QoS的载体，DUT播放60指定的上行链路参考样本U_Ri，它们由TS记录作为上行链路劣化样本(U_Di)62，并且/或者TS播放或递送64下行链路参考样本U_Di，它们由DUT记录作为对应的下行链路劣化媒体样本D_Dj 66。DUT上传70记录的样本D_Dj。这可以隐式地结束会话，或者可以由TS或DUT通过发送消息或BYE 68显式地结束会话。TS必须留心载体被释放，或者也可以在计时器期满时自动地释放载体。如前所述，TS比较72参考和劣化样本以估计上行链路和/或下行链路的媒体质量。
注意，上述描述假设TS做了估计MOS值(即，比较样本)的所有工作。作出此假设是因为由外部服务所提供的估计软件是昂贵的。然而，如果DUT包括MOS估计软件，则还可以让DUT做某些或全部比较。TS将需要下载相关参考和/或劣化样本。然后，DUT可以将MOS结果传送到TS(例如在SIP MESSAGE或文本消息中)。
具有用户特定的样本的实施例
图8示出了使用用户特定的样本来进行测试的本发明的实施例。在图8之前所描述的各实施例被视为使用通用参考样本，诸如在ITUT建议P.501中指定的用于语音测试的参考样本。然而，由TS确定的MOS值强烈地取决于样本选择。因此，使用对DUT的终端用户特定的媒体样本是有利的。例如，话音样本应该采用用户的语言或方言。
相应地，对于图8中所示出的实施例，DUT被编程为收集终端用户说的或拍摄的媒体片段(话音或视频)。在用户呼叫期间，DUT可以例如收集整个话音区(talk spurt)、整个句子、或整个单词。然而，出于隐私考虑，DUT可以被编程为收集部分单词或个体音素。此目的是使用这些媒体片段来构建作为终端用户的特性的一个或多个参考样本。DUT本身可以构建所述一个或多个媒体样本，并在TS和DUT之间传输它们，例如通过向TS上传样本供以后在测试呼叫或测试会话中使用来传输。DUT还可以向TS上传媒体片段，并让TS构建媒体样本。
图8示出了用户呼叫建立以收集媒体片段。在用户的DUT以及第三方的对等装置之间建立用户呼叫(非测试呼叫)，如线102所示。如线104所示，利用如框105所示收集的用户特定的媒体片段或话音片段进行用户呼叫。注意，此处的用户特定的媒体片段是由用户说的或发送的片段。一旦如线106所示结束用户呼叫，TS 2上传用户特定的话音片段，如线108所示。如框112所示使用话音片段来构建或创建用户特定的参考文件。TS 2将使用DUT的用户说的或发送的片段来构建参考样本，以测试上行链路(U_Ri)。在某些实施例中，如线110所示可以在DUT 6中从TS 2收集样本，以使得DUT 6能够执行测试步骤。
用于链路质量测试的媒体样本需要具有高信噪比(SNR)。因此，DUT 6可以被编程为只有当它测量到媒体片段的好的SNR时才收集媒体片段，例如当用户在相对安静的环境中相对大声地说话时，或当用户在好的照明条件下并且手稳定的情况下拍摄视频时。
TS 2可以使用所述创建的用户特定的参考样本U_Ri来测试用户的DUT 6的上行链路。这是有意义的，因为此用户特定的话音可能将出现在上行链路上。在进一步的变型中，TS 2得知用户常常与其进行通信的第三方的UE 82的标识(例如URI或电话号码)。TS可以从服务提供商的记录了解此信息，或者例如如果DUT被编程为例如在SIP MESSAGE中向TS 2发送这样的信息，则TS可以直接从DUT获得这样的信息。在此变型中，TS检查它是否从第三方UE 82中的任何一个收集了用户特定的上行链路样本U_Rx，并使用这样的用户特定的上行链路样本来构建或创建下行链路参考样本D_Rj，以测试DUT 6的下行链路质量(反之亦然)。使用第三方的用户特定的上行链路样本U_Rx具有这样的优点：这些样本是在它们在呼叫连接104上传输之前由第三方对等装置收集的，从而应该具有好的保真度或质量。
在另一变型中，DUT被编程为收集105由第三方在呼叫中说的或拍摄的媒体片段(话音或视频)，并通过呼叫104的下行链路连接从第三方82向DUT 6传输。如上所述，DUT 6或TS使用112这些片段来构建媒体参考样本。然后，TS可以使用这些样本(D_Rj)来测试DUT的下行链路。DUT优选地在与对等装置的下行链路连接上有高SNR时并且在呼叫中几乎没有背景噪声时收集媒体片段。从而，DUT可以在对于用户呼叫有好的下行链路连接时，并且在下行链路载体使用提供好质量媒体的具有高比特率的编解码器时收集片段。
具有用户指定的测试会话定时的实施例
虽然上述变型提供与DUT 6更为相关的测试媒体，但是在发生测试会话的时间和DUT 6的用户通常打电话的时间之间没有关联。
从而，在一个实施例中，提供了其中DUT被编程为在用户呼叫结束时发起与TS的测试呼叫的变型。当DUT中的应用观察到用户挂断时，或者当它观察到SIP BYE时，DUT向TS发起测试呼叫，以交换测试媒体样本，如上文所描述的。如此，可以在用户进行或接收呼叫的时间、与估计MOS值的时间之间建立紧密的关联。这还将自动地关联呼叫位置。(在此实施例的变型中，DUT可以监视用户打电话的位置，以后当DUT返回到那些位置时，发起与TS的测试呼叫。)
此用户指定的测试会话定时的变型可能会引入轻微的偏差。即，用户有时可能因为连接变得非常差而结束用户呼叫。在不太有利的条件下，此偏差将增大MOS估计的数量。有些人可能认为，这是所希望的偏差；其他人可能认为它有害。
在本发明的一个实施例中，可以去除上文所提及的偏差。在此变型中，DUT被编程为观察用户是否发起或接收用户呼叫。当DUT注意到用户呼叫的开始时，它与TS建立92通用测试会话。测试会话和用户呼叫在时间上重叠，由此在时间方面和在位置方面都建立完美的关联。
普通技术人员将理解，对于上述各实施例中的每一个，本发明的系统将包括传统部件以使得任务能够被完成。例如，TS和DUT两者都可包括通信发送/接收接口、用于控制通信接口的处理器、以及用于存储控制处理器的软件的存储器、完成在本发明中执行的步骤所需的接口和编程。
虽然上文详细描述了本发明，但是这只教导了本领域普通技术人员如何作出并使用本发明。很多额外的修改将落在本发明的范围内，因为该范围由下列权利要求定义。
Claims (29)
1.一种估计被测装置(DUT)的媒体链路质量的方法，所述方法包括：
在测试台(TS)和所述DUT之间传输上行链路参考样本；
在所述DUT和所述TS之间建立上行链路连接；
由所述DUT，通过所述上行链路连接，播放对应于所述上行链路参考样本的上行链路媒体；
在所述TS处捕获所述上行链路媒体，作为上行链路劣化样本；以及
将所述上行链路参考样本与所述上行链路劣化样本进行比较，以估计上行链路质量。
2.如权利要求1所述的方法，进一步包括：
在所述DUT和所述TS之间建立下行链路连接；
由所述TS，通过所述下行链路连接，递送对应于下行链路参考样本的下行链路媒体；
在所述DUT处，记录所述下行链路媒体，作为下行链路劣化样本；
从所述DUT上传所述下行链路劣化样本；以及
将所述下行链路参考样本与所述下行链路劣化样本进行比较，以估计下行链路质量。
3.如权利要求1所述的方法，其中，所述在所述TS和所述DUT之间传输上行链路参考样本包括从所述TS将所述上行链路参考样本下载到所述DUT。
4.如权利要求1所述的方法，其中，所述上行链路参考样本包括音频、视频或音频和视频两者。
5.如权利要求1所述的方法，还包括在所述DUT和所述测试台(TS)之间建立会话，以使得在所述DUT和所述TS之间建立所述上行链路连接，其中，在不通知所述DUT的用户的情况下完成建立所述会话。
6.如权利要求5所述的方法，其中，建立所述会话包括建立语音呼叫。
7.如权利要求1所述的方法，其中，比较以估计所述上行链路质量包括将所述上行链路质量表达为平均意见得分。
8.如权利要求5所述的方法，其中，传输所述上行链路参考样本的步骤包括传输至少一个另外的上行链路参考样本；并且
其中，建立所述会话包括指定上行链路参考样本作为要播放的样本。
9.如权利要求5所述的方法，其中，建立所述会话包括重新建立响应于在先前会话期间检测到用户呼叫的发起而被中断的所述先前会话。
10.如权利要求1所述的方法，还包括：
收集与所述DUT相关联的多个媒体片段；
构建所述上行链路参考样本，以包含所述多个媒体片段。
11.如权利要求10所述的方法，其中，在所述DUT处收集所述多个媒体片段。
12.如权利要求10所述的方法，其中，收集所述多个媒体片段包括当所述DUT测量到所述媒体片段的有利的信噪比时收集所述多个媒体片段。
13.如权利要求2所述的方法，还包括：
收集与所述DUT相关联的多个媒体片段；
构建所述下行链路参考样本，以包含所述多个媒体片段。
14.如权利要求13所述的方法，其中，从所述DUT的对等装置中收集所述多个媒体片段。
15.如权利要求13所述的方法，其中，由所述DUT在与对等装置的呼叫过程中收集所述多个媒体片段。
16.如权利要求15所述的方法，其中，从所述对等装置收集所述多个媒体片段包括当所述DUT测量到与所述对等装置的下行链路连接的有利的信噪比时收集所述多个媒体片段。
17.如权利要求15所述的方法，其中，收集所述多个媒体片段包括当所述DUT确定所述多个媒体片段是利用高性能编解码器编码的时候，选择所述多个媒体片段。
18.如权利要求1所述的方法，还包括：
响应于检测到用户呼叫的终止，建立所述上行链路连接。
19.如权利要求2所述的方法，还包括：
响应于检测到用户呼叫的发起，建立所述上行链路连接；以及
在所述用户呼叫期间，建立所述上行链路连接以及所述下行链路连接的服务质量；以及
其中，播放上行链路媒体和递送下行链路媒体与所述用户呼叫是并发的。
20.如权利要求5所述的方法，其中，响应于检测到用户呼叫的终止，建立所述会话。
21.如权利要求1所述的方法，其中，所述TS包括移动电话、平板型计算机、个人计算机和膝上型计算机中的至少一个。
22.一种估计被测装置(DUT)的链路质量的方法，所述方法包括：
在所述DUT和测试台(TS)之间建立下行链路连接；
由所述TS通过所述下行链路连接，递送与下行链路参考样本对应的下行链路媒体；
在所述DUT处记录所述下行链路媒体，作为下行链路劣化样本；
从所述DUT上传所述下行链路劣化样本；以及
将所述下行链路参考样本与所述下行链路劣化样本进行比较，以估计下行链路质量。
23.如权利要求22所述的方法，其中，在TS和所述DUT之间传输上行链路参考样本包括从所述DUT将所述上行链路参考样本上传到所述TS。
24.一种估计被测装置(DUT)的链路质量的测试设备，包括：
测试台(TS)，所述测试台包括处理器、存储器和通信接口，所述TS的处理器控制所述通信接口以：
在所述TS和所述DUT之间传输上行链路参考样本；
在所述DUT和所述TS之间建立上行链路连接；
使得所述DUT通过所述上行链路连接来播放与所述上行链路参考样本对应的上行链路媒体；
所述TS的所述处理器还：
在所述TS的存储器中捕获所述上行链路媒体，作为上行链路劣化样本；以及
将所述上行链路参考样本与所述上行链路劣化样本进行比较，以估计上行链路链路质量。
25.如权利要求24所述的测试设备，所述TS的所述处理器还：
在所述DUT和所述TS之间建立下行链路连接；
通过所述下行链路连接，向所述DUT递送与下行链路参考样本对应的下行链路媒体；
从所述DUT上传下行链路劣化样本；以及
将所述下行链路参考样本与所述下行链路劣化样本进行比较，以估计下行链路质量。
26.如权利要求24所述的测试设备，其中，所述TS包括用于与所述DUT进行通信的应用服务器。
27.如权利要求24所述的测试设备，其中，所述处理器和通信接口还组合起来：
上传与所述DUT相关联的多个媒体片段；以及
构建所述上行链路参考样本和所述下行链路参考样本中的至少一个，以包含所述多个媒体片段。
28.如权利要求24所述的测试设备，其中，为所述TS提供至少一个上行链路参考样本，用于将所述上行链路参考样本传送到所述DUT，其中，所述上行链路参考样本可以是语音样本、视频样本、或包含语音和视频的组合的样本。
29.如权利要求24所述的测试设备，其中，所述处理器和通信接口还组合起来：
建立与所述DUT的测试会话；
建立所述上行链路连接，作为用于与所述DUT的所述测试会话的上行链路连接；
当与所述DUT的所述测试会话在进行中时，建立与另一个DUT的另一个测试会话；
建立另一个上行链路连接，作为用于与所述另一个DUT的所述另一个测试会话的上行链路连接；以及
使得所述另一个DUT通过所述另一个上行链路连接来播放与参考样本对应的上行链路媒体。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US13/549,266 US20140016487A1 (en) | 2012-07-13 | 2012-07-13 | Test system to estimate the uplink or downlink quality of multiple user devices using a mean opinion score (mos) |
| US13/549,266 | 2012-07-13 | ||
| PCT/US2013/046874 WO2014011377A1 (en) | 2012-07-13 | 2013-06-20 | Test system to estimate the uplink or downlink quality of multiple user devices using a mean opinion score (mos) |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104662823A true CN104662823A (zh) | 2015-05-27 |
Family
ID=49913914
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201380037276.0A Pending CN104662823A (zh) | 2012-07-13 | 2013-06-20 | 使用平均意见得分(mos)来估计多个用户装置的上行链路或下行链路质量的测试系统 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US20140016487A1 (zh) |
| JP (1) | JP6353444B2 (zh) |
| CN (1) | CN104662823A (zh) |
| WO (1) | WO2014011377A1 (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108574840A (zh) * | 2017-03-10 | 2018-09-25 | 华为技术有限公司 | 一种评估视频体验质量的方法及装置 |
| CN109785860A (zh) * | 2019-01-08 | 2019-05-21 | 北京中创信测科技股份有限公司 | 一种2g3g4g语音质量故障四域六维智能定界的方法 |
| CN110235425A (zh) * | 2017-01-23 | 2019-09-13 | 阿尔卡特朗讯企业通信国际公司 | 利用终端分集的会议系统 |
| CN118474249A (zh) * | 2024-07-11 | 2024-08-09 | 中国电信股份有限公司 | 语音质量评估方法、装置、计算机设备、可读存储介质和程序产品 |
Families Citing this family (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9544841B2 (en) | 2012-12-06 | 2017-01-10 | At&T Intellectual Property I, L.P. | Hybrid network-based and device-based intelligent radio access control |
| US10129822B2 (en) | 2012-12-06 | 2018-11-13 | At&T Intellectual Property I, L.P. | Device-based idle mode load balancing |
| US9998983B2 (en) * | 2012-12-06 | 2018-06-12 | At&T Intellectual Property I, L.P. | Network-assisted device-based intelligent radio access control |
| CN103974057B (zh) * | 2013-01-24 | 2016-09-28 | 华为技术有限公司 | 一种视频质量用户体验值测评方法、设备及系统 |
| US9491219B2 (en) * | 2013-06-25 | 2016-11-08 | Cellco Partnership | Mobile device perceptive audio and video quality analysis using onboard test signals |
| US9226197B2 (en) | 2013-10-21 | 2015-12-29 | At&T Intellectual Property I, L.P. | Network based speed dependent load balancing |
| US9241305B2 (en) | 2013-10-28 | 2016-01-19 | At&T Intellectual Property I, L.P. | Access network discovery and selection function enhancement with cell-type management object |
| US10419606B2 (en) * | 2014-09-09 | 2019-09-17 | Cyara Solutions Pty Ltd | Call recording test suite |
| US9398518B2 (en) | 2014-10-21 | 2016-07-19 | At&T Intellectual Property I, L.P. | Cell broadcast for signaling resource load from radio access networks |
| US11102273B2 (en) | 2015-05-13 | 2021-08-24 | Cisco Technology, Inc. | Uplink performance management |
| EP3277016B1 (en) * | 2016-07-29 | 2019-09-11 | Rohde & Schwarz GmbH & Co. KG | Measurement system and a method |
| US9674722B1 (en) * | 2016-09-01 | 2017-06-06 | Litepoint Corporation | Method for testing a GSM (global system for mobile communications) handset with reduced signaling requirements |
| US9667776B1 (en) * | 2016-12-06 | 2017-05-30 | Cyara Solutions Pty Ltd | Bi-directional audio generation device for speech quality assessment of telephony networks and speech codecs |
| US20220060963A1 (en) * | 2018-12-11 | 2022-02-24 | Telefonaktiebolaget Lm Ericsson (Publ) | Technique for user plane traffic quality analysis |
| CN111277697B (zh) * | 2020-03-05 | 2021-08-31 | Oppo（重庆）智能科技有限公司 | 音频处理方法、装置、存储介质及电子设备 |
| CN114301555B (zh) * | 2022-01-04 | 2023-06-16 | 烽火通信科技股份有限公司 | 信道切换方法、装置、设备及可读存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6330428B1 (en) * | 1998-12-23 | 2001-12-11 | Nortel Networks Limited | Voice quality performance evaluator and method of operation in conjunction with a communication network |
| CN1780332A (zh) * | 2004-11-23 | 2006-05-31 | 华为技术有限公司 | 测试语音质量的方法及装置 |
| US20060128373A1 (en) * | 2004-12-15 | 2006-06-15 | John Cochrane | Controlling a test instrument from a wireless device under test |
| US20070091814A1 (en) * | 2005-10-21 | 2007-04-26 | Leung Hung F | Testing system and method for testing functions of wireless devices |
| CN101199194A (zh) * | 2005-04-21 | 2008-06-11 | 高通股份有限公司 | 用于在无线通信装置上监视语音质量的方法和设备 |
| US7756484B2 (en) * | 2006-07-14 | 2010-07-13 | Metrico Wireless, Inc. | Monitoring voice quality in communication networks |
Family Cites Families (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| IT1121496B (it) * | 1979-12-14 | 1986-04-02 | Cselt Centro Studi Lab Telecom | Procedimento e dispositivo per l effettuazione di misure oggettive di qualita su apparecchiature di trasmissione di segnali fonici |
| JPH0771038B2 (ja) * | 1990-02-21 | 1995-07-31 | 岩崎通信機株式会社 | 移動体通信における保守監視システム |
| JP2800718B2 (ja) * | 1995-06-05 | 1998-09-21 | 日本電気株式会社 | 無線ポート試験方法 |
| JP3338598B2 (ja) * | 1995-11-24 | 2002-10-28 | 松下電工株式会社 | 集合住宅監視通話システム |
| JP3057549U (ja) * | 1998-09-07 | 1999-06-02 | 新興通信建設株式会社 | 通線確認装置 |
| US6477492B1 (en) * | 1999-06-15 | 2002-11-05 | Cisco Technology, Inc. | System for automated testing of perceptual distortion of prompts from voice response systems |
| EP1137218A1 (de) * | 2000-03-24 | 2001-09-26 | Tektronix, Inc. | Verfahren und System zum Testen von Telekommunikationseinrichtungen |
| JP2001298428A (ja) * | 2000-04-14 | 2001-10-26 | Genista Corp | 通信・放送ネットワークを介した信号伝送の品質評価システム、端末、端末の制御方法、ならびに、情報記録媒体 |
| US7130273B2 (en) * | 2001-04-05 | 2006-10-31 | Level 3 Communications, Inc. | QOS testing of a hardware device or a software client |
| US7173910B2 (en) * | 2001-05-14 | 2007-02-06 | Level 3 Communications, Inc. | Service level agreements based on objective voice quality testing for voice over IP (VOIP) networks |
| US6976085B1 (en) * | 2001-11-20 | 2005-12-13 | Cisco Technology, Inc. | Methods and apparatus for inserting data into a communications session |
| US20040193974A1 (en) * | 2003-03-26 | 2004-09-30 | Quan James P. | Systems and methods for voice quality testing in a packet-switched network |
| US7525952B1 (en) * | 2004-01-07 | 2009-04-28 | Cisco Technology, Inc. | Method and apparatus for determining the source of user-perceived voice quality degradation in a network telephony environment |
| JP2006157223A (ja) * | 2004-11-26 | 2006-06-15 | Nippon Telegr & Teleph Corp <Ntt> | ユーザ体感品質推定システムおよび方法、ユーザ体感品質推定装置、受信状況情報送信装置、送信端末、受信端末 |
| US20060245364A1 (en) * | 2005-03-29 | 2006-11-02 | Xing Zhu | Bi-directional continuous voice and video quality testing system with TTMF tones |
| US7680655B2 (en) * | 2005-05-20 | 2010-03-16 | Alcatel-Lucent Usa Inc. | Method and apparatus for measuring the quality of speech transmissions that use speech compression |
| US20070263668A1 (en) * | 2006-05-11 | 2007-11-15 | Lau David K W | System, method and computer program for evaluating the audio quality of a received audio record |
| EP1937010B1 (en) * | 2006-12-22 | 2010-04-14 | Telefonaktiebolaget LM Ericsson (publ) | Test apparatus |
| US20080205619A1 (en) * | 2007-02-22 | 2008-08-28 | Yahoo! Inc. | Caller initiated communications interruption |
| US8837298B2 (en) * | 2010-04-16 | 2014-09-16 | Empirix, Inc. | Voice quality probe for communication networks |
| KR101746178B1 (ko) * | 2010-12-23 | 2017-06-27 | 한국전자통신연구원 | 광대역 음성 코덱을 사용하는 인터넷 프로토콜 기반 음성 전화 단말의 품질 측정 장치 및 방법 |
-
2012
- 2012-07-13 US US13/549,266 patent/US20140016487A1/en not_active Abandoned
-
2013
- 2013-06-20 WO PCT/US2013/046874 patent/WO2014011377A1/en active Application Filing
- 2013-06-20 JP JP2015521632A patent/JP6353444B2/ja not_active Expired - Fee Related
- 2013-06-20 CN CN201380037276.0A patent/CN104662823A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6330428B1 (en) * | 1998-12-23 | 2001-12-11 | Nortel Networks Limited | Voice quality performance evaluator and method of operation in conjunction with a communication network |
| CN1780332A (zh) * | 2004-11-23 | 2006-05-31 | 华为技术有限公司 | 测试语音质量的方法及装置 |
| US20060128373A1 (en) * | 2004-12-15 | 2006-06-15 | John Cochrane | Controlling a test instrument from a wireless device under test |
| CN101199194A (zh) * | 2005-04-21 | 2008-06-11 | 高通股份有限公司 | 用于在无线通信装置上监视语音质量的方法和设备 |
| US20070091814A1 (en) * | 2005-10-21 | 2007-04-26 | Leung Hung F | Testing system and method for testing functions of wireless devices |
| US7756484B2 (en) * | 2006-07-14 | 2010-07-13 | Metrico Wireless, Inc. | Monitoring voice quality in communication networks |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110235425A (zh) * | 2017-01-23 | 2019-09-13 | 阿尔卡特朗讯企业通信国际公司 | 利用终端分集的会议系统 |
| CN110235425B (zh) * | 2017-01-23 | 2021-12-31 | 阿尔卡特朗讯企业通信国际公司 | 利用终端分集的会议系统 |
| CN108574840A (zh) * | 2017-03-10 | 2018-09-25 | 华为技术有限公司 | 一种评估视频体验质量的方法及装置 |
| CN109785860A (zh) * | 2019-01-08 | 2019-05-21 | 北京中创信测科技股份有限公司 | 一种2g3g4g语音质量故障四域六维智能定界的方法 |
| CN118474249A (zh) * | 2024-07-11 | 2024-08-09 | 中国电信股份有限公司 | 语音质量评估方法、装置、计算机设备、可读存储介质和程序产品 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2014011377A1 (en) | 2014-01-16 |
| US20140016487A1 (en) | 2014-01-16 |
| JP2015534735A (ja) | 2015-12-03 |
| JP6353444B2 (ja) | 2018-07-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104662823A (zh) | 使用平均意见得分(mos)来估计多个用户装置的上行链路或下行链路质量的测试系统 | |
| JP2015534735A6 (ja) | 平均オピニオン評点（ｍｏｓ）を使用して複数のユーザデバイスのアップリンク又はダウンリンク品質を評価するテストシステム | |
| Jelassi et al. | Quality of experience of VoIP service: A survey of assessment approaches and open issues | |
| EP1826985B1 (en) | System and method for implementing multimedia calling line identification presentation service | |
| JP2015534735A5 (zh) | ||
| US8493876B2 (en) | Method and apparatus for realizing a test | |
| CN110401965B (zh) | VoLTE语音质量拨测分析方法及系统 | |
| US20100255831A1 (en) | Determining delay in a communications system | |
| CN101547193B (zh) | 一种在不同域中处理早期媒体业务的方法和装置 | |
| CN101141519A (zh) | 用于决定主叫放音的方法和装置 | |
| JP2020053835A (ja) | 中継装置および音声通信のモニタ方法 | |
| US9485352B2 (en) | Method for measuring processing delays of voice-over IP devices | |
| WO2020192435A1 (zh) | 一种播放多媒体彩振、彩铃的方法、应用服务器 | |
| Rankin et al. | Validating VoLTE: A Definitive Guide to Successful Deployments | |
| CA2828554C (en) | Systems and methods of routing ip telephony data packet communications | |
| US8737575B1 (en) | Method and apparatus for transparently recording media communications between endpoint devices | |
| Majed | Measuring and improving the quality of experience of mobile voice over IP | |
| KR20200034295A (ko) | 이동통신망에서의 콜 테스트 자동화 시스템 및 방법 | |
| JP2019161342A (ja) | Ｒｔｐ変換装置及びｒｔｐ変換方法 | |
| JP2012134694A (ja) | Ｉｐ電話キャリア判定装置及びプログラム並びに記録媒体 | |
| CN108737671A (zh) | 一种voip通信方法、装置、设备及家庭网关系统 | |
| JP2008085808A (ja) | 呼設定サーバの発呼方法 | |
| Lemberg | Integrating Web-Based Multimedia Technologies with Operator Multimedia Services Core | |
| CN105656863B (zh) | 一种语音呼叫方法及装置 | |
| JP5638398B2 (ja) | Ｉｐ電話キャリア判定装置及びプログラム並びに記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| EXSB | Decision made by sipo to initiate substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20150527 |
|
| WD01 | Invention patent application deemed withdrawn after publication |