CN103578463A - 自动化测试方法及测试装置 - Google Patents

Abstract

本发明提出一种自动化测试方法及测试装置，用于对语音识别系统进行自动化测试，其方法包括：从预存的文本文件中读取待测试的文本文件；将所述待测试的文本文件转换成待测试的语音文件；向所述语音识别系统输出所述待测试的语音文件，以进行识别，并接收所述语音识别系统返回的语音识别结果。本发明特别适用于大量语音识别的测试，具有节省人力资源、测试效率高的优点。

Description

自动化测试方法及测试装置

技术领域

本发明涉及一种测试技术，特别涉及一种对语音识别系统进行自动化测试的装置及方法。

背景技术

近年来，语音识别系统由于具有使用方便，提高效率及节省成本的几项优势，因此广泛地被应用在各行各业。例如，客服中心所接到的客户电话中，大部分的电话都是来询问一些经常会被问到的问题，而许多人力资源也因此被浪费在机械性的回答当中。但是，通过语音识别系统，则可套用预先录制的语音，来答复这些标准化的问题，因此也提高了客户服务中心的人力资源利用效率，进而减低企业的人事成本。又如，现有的许多手机都具有语音识别功能，当使用者不方便用手操作时（如开车），就可以利用语音识别功能将其语音转换成文字，从而完成发短信、拨打手机等操作，因此可以大大提高手机使用的方便性。

对于语音识别系统，其对语音识别的准确性是最主要的指标之一，因此在语音识别系统投入使用前，一般都会对其语音识别的准确性进行测试。目前，对语音识别系统的测试都是通过人工完成的，即由人进行语音录音，然后通过系统识别，再根据识别结果与录音的内容是否一致来判断该语音识别系统的准确性。

但是，为了提高测试的准确性，就需要人工进行大量的语音录音，不仅要耗费大量的人力来进行枯燥的语音录入工作，而且这种逐个单词或语句的录入方式效率也非常低，甚至当需要大规模语音识别率测试时，将无法开展。

发明内容

本发明的目的是提供一种自动化测试方法及测试装置，以解决现有的对语音识别系统的测试人力资源浪费大、效率低的问题。

本发明提出一种自动化测试方法，用于对语音识别系统进行自动化测试，所述自动化测试方法包括：从预存的文本文件中读取待测试的文本文件；将所述待测试的文本文件转换成待测试的语音文件；向所述语音识别系统输出所述待测试的语音文件，以进行识别，并接收所述语音识别系统返回的语音识别结果。

依照本发明较佳实施例所述的自动化测试方法，所述待测试的文本文件通过TTS技术而转换成所述待测试的语音文件。

依照本发明较佳实施例所述的自动化测试方法，进一步包括：将所述语音识别系统返回的所述语音识别结果与所述待测试的语音文件进行比对，以产生相应的测试结果。

依照本发明较佳实施例所述的自动化测试方法，进一步包括：对所述测试结果进行统计，以判断所述语音识别系统进行语音识别的准确性。

依照本发明较佳实施例所述的自动化测试方法，在向所述语音识别系统输出所述待测试的语音文件之前，进一步包括：向所述语音识别系统发起语音识别请求，以使所述语音识别系统准备好接收所述待测试的语音文件。

本发明另提出自动化测试装置，用于对语音识别系统进行自动化测试，所述自动化测试装置包括读取模块、转换模块、语音输出模块及语音接收模块。读取模块用于从预存的文本文件中读取待测试的文本文件；转换模块用于将所述待测试的文本文件转换成待测试的语音文件；语音输出模块用于向所述语音识别系统输出所述待测试的语音文件以使所述语音识别系统进行识别；语音接收模块用于接收所述语音识别系统返回的语音识别结果。

依照本发明较佳实施例所述的自动化测试装置，所述转换模块通过TTS技术而将所述待测试的文本文件转换成所述待测试的语音文件。

依照本发明较佳实施例所述的自动化测试装置，所述自动化测试装置进一步包括：比对模块，用于将所述语音识别系统返回的所述语音识别结果与所述待测试的语音文件进行比对，以产生相应的测试结果。

依照本发明较佳实施例所述的自动化测试装置，所述自动化测试装置进一步包括：统计模块，用于对所述测试结果进行统计，以判断所述语音识别系统进行语音识别的准确性。

依照本发明较佳实施例所述的自动化测试装置，所述语音输出模块在向所述语音识别系统输出所述待测试的语音文件之前，向所述语音识别系统发起语音识别请求，以使所述语音识别系统准备好接收所述待测试的语音文件。

依照本发明较佳实施例所述的自动化测试装置，所述自动化测试装置进一步包括：存储模块，用于预先存放文本文件。

相对于现有技术，本发明的有益效果是：本发明通过文本到语音的自动化转换，实现了对语音识别系统准确性的自动化测试，并且可以突破性地将TTS技术应用到语音识别系统的测试上，利用TTS技术将文本快速高效地转换为语音，并输出给语音识别系统进行识别，避免了现有技术中人工语音录入的资源浪费，特别适用于大量语音识别的测试。

当然，实施本发明的任一产品并不一定需要同时达到以上所述的所有优点。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其他目的、特征和优点能够更明显易懂，以下特举较佳实施例，并配合附图，详细说明如下。

附图说明

图1为本发明实施例自动化测试方法的一种流程图；

图2为本发明实施例自动化测试方法的另一种流程图；

图3为本发明实施例自动化测试装置的一种结构图；

图4为本发明实施例自动化测试装置的另一种结构图。

具体实施方式

为更进一步阐述本发明达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例，对依据本发明提出的自动化测试方法及测试装置其具体实施方式、方法、步骤及功效，详细说明如后。

有关本发明的前述及其他技术内容、特点及功效，在以下配合参考图式的较佳实施例详细说明中将可清楚的呈现。通过具体实施方式的说明，当可对本发明为达成预定目的所采取的技术手段及功效得以更加深入且具体的了解，然而所附图式仅是提供参考与说明之用，并非用来对本发明加以限制。

本发明的主要思想是实现语音识别的自动化测试，以达到对语音识别系统高效测试的目的。

本发明提出一种自动化测试方法，用于对语音识别系统进行自动化测试，如图1所示，其包括以下步骤：

S11，从预存的文本文件中读取待测试的文本文件。文本文件可以预存在一个存储器中，待测试的文本文件可以是各种语言的词语、短语、句子。

S12，将待测试的文本文件转换成待测试的语音文件。本发明优选通过TTS（Text to Speech，文本转语音）技术来将文本文件转换成语音文件，TTS技术可以实现120-150个汉字/秒的快速语音合成，转换时间之短可以秒计算，其目前的应用领域尚在帮助有视觉障碍的人阅读计算机上的信息，或者只是简单的用来增加文本文档的可读性，而本申请将TTS技术应用在语音识别系统的测试上，是一种突破性的应用，由于TTS技术是目前较为成熟的一种技术，因此文本到语音的具体转换过程在此不再赘述。

S13，向语音识别系统输出待测试的语音文件。如可以使用麦克风将待测试的语音文件自动转换成语音，并输出给语音识别系统进行识别。

S14，接收语音识别系统返回的语音识别结果。根据语音识别结果的准确性，从而产生测试结果。

为进一步理解本发明，现揭示较为详尽的另一测试流程，请参见图2，其为本发明实施例自动化测试方法的另一种流程图，其包括以下步骤：

S21，从预存的文本文件中读取待测试的文本文件。文本文件可以预存在一个存储器中，待测试的文本文件可以是各种语言的词语、短语、句子。

S22，将待测试的文本文件转换成待测试的语音文件。优选通过TTS技术来将文本文件转换成语音文件，TTS技术可以实现待测试的文本文件到待测试的语音文件的高效、快速转换。

S23，向语音识别系统发起语音识别请求。以使语音识别系统准备好接收待测试的语音文件。

S24，向语音识别系统输出待测试的语音文件。如可以使用麦克风将待测试的语音文件自动转换成语音，并输出给语音识别系统进行识别。

S25，接收语音识别系统返回的语音识别结果。

S26，将语音识别系统返回的语音识别结果与待测试的语音文件进行比对，以产生相应的测试结果。

在具体比对时，当语音识别系统输出的识别结果是与待测试文本文件相同的文字时，只要将对应的文字进行比对，这是最简单直接的情况。而有些时候语音识别系统输出的识别结果不是与待测试文本文件相同的文字，例如待测试的文本文件为“中国的首都在哪里”，而语音识别系统输出的识别结果是“北京”时，可以预先对待测试文本文件以及相应的识别结果进行编号，这样只要比对两者的编号就可以判断语音识别系统是否识别正确。如将“中国的首都在哪里”的编号设为“1”，将“北京”的编号也设为“1”，这样根据对两者编号的比对就会输出识别正确的结果。

S27，对测试结果进行统计，并计算语音识别系统对语音识别的准确性。

为了尽可能地提高测试准确性，势必要进行大量的语音识别测试，为了可以直观地了解语音识别系统识别准确的概率，也使本发明装置的设计更为人性化，因而可以对测试结果进行统计，统计结果可以显示为一个百分数。

相应于前述自动化测试方法，本发明还提出了一种自动化测试装置，用于对语音识别系统进行自动化测试，请参见图3，其包括读取模块2、转换模块3、语音输出模块4以及语音接收模块7，读取模块2分别与转换模块3及语音接收模块7相连，语音输出模块4与转换模块3相连。

当开始对一个语音识别系统8进行测试时，读取模块2会从预存的文本文件中读取待测试的文本文件，然后交给转换模块3将待测试的文本文件转换成待测试的语音文件，并由语音输出模块4将待测试的语音文件输出给语音识别系统8。语音识别系统8会对待测试的语音文件进行识别，然后由语音接收模块7接收语音识别系统8返回的语音识别结果，从而根据语音识别的准确性，产生测试结果。

本发明通过文本到语音的自动化转换，实现了对语音识别系统准确性的自动化测试，可以进行大批量的语音测试，有效解决现有的语音识别系统测试时人力资源浪费大、效率低的问题。

其中，转换模块3优选采用TTS技术将待测试的文本文件转换成待测试的语音文件。TTS技术是一种将文本文件转换为语音文件的技术，其可以实现120-150个汉字/秒的快速语音合成，转换时间之短可以秒计算，其目前的应用领域尚在帮助有视觉障碍的人阅读计算机上的信息，或者只是简单的用来增加文本文档的可读性，而本申请将其应用在语音识别系统的测试上，是一种突破性的应用，由于TTS技术是目前较为成熟的一种技术，因此其对文本到语音的具体转换过程在此不再赘述。

请参见图4，其为本发明实施例自动化测试装置的另一种结构图，其包括存储器1、读取模块2、转换模块3、语音输出模块4、比对模块5、统计模块6以及语音接收模块7，读取模块2与转换模块3相连，语音输出模块4与转换模块3相连，比对模块5分别与语音接收模块7及读取模块2相连，统计模块6与比对模块5相连。存储器1分别与读取模块2、转换模块3、语音输出模块4、比对模块5、统计模块6以及语音接收模块7相连（由于存储器1与各个模块之间的连线过于繁琐，为使图示清晰地显示各个模块之间的连接，故图中未绘示存储器1与各个模块之间的连线）。

存储器1中存放的是文本文件，该文本文件可以是各种语言的词语、短语、句子，用来向读取模块2提供待测试的文本文件。除此之外，存储器1还可以保存各个模块的输出数据，即如转换模块3转换的语音文件、语音接收模块7接收的语音识别结果、比对模块5输出的比对结果等，以使技术人员可以调取查看各个过程的明细，以增进对整个测试的了解和掌控。

当开始对一个语音识别系统8进行测试时，读取模块2会从存储器1中读取待测试的文本文件，读取的方式可以是预先通过程序设计好的，也可以随机或按顺序从存储器1中读取文本文件。读取模块2读取的待测试的文本文件会传送给转换模块3进行转换。

转换模块3是本发明的一个重要部件，它的工作是优选利用TTS技术将待测试的文本文件转换成待测试的语音文件，以实现文本到语音的快速、高效转换。

转换模块3将待测试的文本文件转换成语音文件之后，会传输给语音输出模块4。语音输出模块4实质上是一个发声设备，如麦克风。其会将待测试的语音文件转换成语音，并输出给语音识别系统8进行识别。

语音识别系统8对待测试的文本文件识别完毕后，会向语音接收模块7返回语音识别结果，然后由比对模块5从读取模块2处提取相应的待测试的文本文件，并将语音接收模块7接收到的这个识别结果与相应的待测试文本文件进行比对，以根据比对输出测试结果。在具体比对时，当语音识别系统8输出的识别结果是与待测试文本文件相同的文字时，比对模块5只要将对应的文字进行比对，这是最简单直接的情况。而有些时候语音识别系统输出的识别结果不是与待测试文本文件相同的文字，例如待测试的文本文件为“中国的首都在哪里”，而语音识别系统输出的识别结果是“北京”时，比对模块5可以对待测试文本文件以及相应的识别结果预设的编号进行比对（编号也可以预存在存储器1中），这样只要比对两者的编号就可以判断语音识别系统是否识别正确。如将“中国的首都在哪里”的编号设为“1”，将“北京”的编号也设为“1”，这样比对模块5根据对两者编号的比对就会输出识别正确的结果。

统计模块6会将比对模块5输出的大量测试结果进行统计，并计算语音识别系统对语音识别的准确性。统计模块6输出的可以是一个百分数，可以直观地了解语音识别系统识别准确的概率，也使本发明装置的设计更为人性化。

本发明可以利用TTS技术进行文本到语音的转换，来自动化地对语音识别系统进行测试，由于TTS技术具有转换快、效率高的优点，所以特别适用于大量语音识别的测试。

以上所述，仅是本发明的较佳实施例而已，并非对本发明作任何形式上的限制，虽然本发明已以较佳实施例揭露如上，然而并非用以限定本发明，任何熟悉本专业的技术人员，在不脱离本发明技术方案范围内，当可利用上述揭示的技术内容作出些许更动或修饰为等同变化的等效实施例，但凡是未脱离本发明技术方案内容，依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰，均仍属于本发明技术方案的范围内。

Claims (11)

1.一种自动化测试方法，用于对语音识别系统进行自动化测试，其特征在于，所述自动化测试方法包括：

从预存的文本文件中读取待测试的文本文件；

将所述待测试的文本文件转换成待测试的语音文件；

向所述语音识别系统输出所述待测试的语音文件，以进行识别，并接收所述语音识别系统返回的语音识别结果。

2.根据权利要求1所述的自动化测试方法，其特征在于，所述待测试的文本文件通过TTS技术而转换成所述待测试的语音文件。

3.根据权利要求1所述的自动化测试方法，其特征在于，进一步包括：

将所述语音识别系统返回的所述语音识别结果与所述待测试的语音文件进行比对，以产生相应的测试结果。

4.根据权利要求3所述的自动化测试方法，其特征在于，进一步包括：

对所述测试结果进行统计，以判断所述语音识别系统进行语音识别的准确性。

5.根据权利要求1所述的自动化测试方法，其特征在于，在向所述语音识别系统输出所述待测试的语音文件之前，进一步包括：

向所述语音识别系统发起语音识别请求，以使所述语音识别系统准备好接收所述待测试的语音文件。

6.一种自动化测试装置，用于对语音识别系统进行自动化测试，其特征在于，所述自动化测试装置包括：

读取模块，用于从预存的文本文件中读取待测试的文本文件；

转换模块，用于将所述待测试的文本文件转换成待测试的语音文件；

语音输出模块，用于向所述语音识别系统输出所述待测试的语音文件以使所述语音识别系统进行识别；

语音接收模块，用于接收所述语音识别系统返回的语音识别结果。

7.根据权利要求6所述的自动化测试装置，其特征在于，所述转换模块通过TTS技术而将所述待测试的文本文件转换成所述待测试的语音文件。

8.根据权利要求6所述的自动化测试装置，其特征在于，所述自动化测试装置进一步包括：

比对模块，用于将所述语音识别系统返回的所述语音识别结果与所述待测试的语音文件进行比对，以产生相应的测试结果。

9.根据权利要求8所述的自动化测试装置，其特征在于，所述自动化测试装置进一步包括：

统计模块，用于对所述测试结果进行统计，以判断所述语音识别系统进行语音识别的准确性。

10.根据权利要求6所述的自动化测试装置，其特征在于，所述语音输出模块在向所述语音识别系统输出所述待测试的语音文件之前，向所述语音识别系统发起语音识别请求，以使所述语音识别系统准备好接收所述待测试的语音文件。

11.根据权利要求6所述的自动化测试装置，其特征在于，所述自动化测试装置进一步包括：

存储模块，用于预先存放文本文件。

Images