CN107492379B - 一种声纹创建与注册方法及装置 - Google Patents

Abstract

本申请提供一种声纹创建与注册方法及装置，包括：提示用户注册声纹ID；采用文本相关的训练方法，为未注册用户建立声纹模型；生成用户ID，提示用户输入用户ID相关数据；将用户ID和声纹模型对应存储到声纹注册数据库。能够避免现有技术中声纹创建与注册方法技术学习成本较高，较为打扰用户的问题。使得声纹的建立过程能够覆盖各种场景，声纹建立可以在各个阶段引导用户，或者通过频次将声纹建立与注册分离，对用户的打扰最小化，引导用户注册声纹而后使得语音交互产品可以基于声纹对用户提供个性化服务。

Description

一种声纹创建与注册方法及装置

【技术领域】

本申请涉及人工智能应用领域，尤其涉及一种声纹创建与注册方法及装置。

【背景技术】

人工智能(Artificial Intelligence；AI)，是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学。人工智能是计算机科学的一个分支，它企图了解智能的实质，并生产出一种新的能以人类智能相似的方式做出反应的智能机器，该领域的研究包括机器人、语言识别、图像识别、自然语言处理和专家系统等。其中，人工智能很重要的一个方面就是声纹识别技术。

近年来，人工智能技术有了深远的发展，并逐步实现产品化。特别是智能语音对话产品，随着国外的亚马逊Echo智能音响及Google Home智能音响的兴起，掀起了以对话为主要交互方式的智能家居产品特别是智能音响产品的流行热潮。

包括智能音箱在内的智能语音对话产品的典型使用场景是在家庭之中，在家庭中用户用语音与机器进行交互十分自然，而家庭中往往是多用户，每个用户必然会有不同的需求，但目前产品的服务都很粗糙，对所有的用户提供的是一套相同的服务，产品对用户请求的应答使用的都是同一套通用标准，造成了用户个性化需求无法得到满足。

语音对话的优势就是能收录用户的声音，每个人都有自己的声音，就像指纹一样，所以我们又称每个人的声音为声纹，通过说话人的声纹，判断出说话人是哪位用户，并提取该用户的数据，以提供个性化的服务。目前业界的声纹技术都不成熟，难以达到产品化的要求。

现有技术中存在声纹创建与注册方法技术学习成本较高，较为打扰用户的问题。

【发明内容】

本申请的多个方面提供一种声纹创建与注册方法及装置，用以为用户提供个性化服务，降低学习成本。

本申请的一方面，提供一种声纹创建与注册方法，包括：

当设备首次启用，提示创建声纹并注册；

采用文本相关的训练方法，为用户建立声纹模型；

生成用户ID；

将用户ID和声纹模型对应存储到声纹注册数据库。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述采用文本相关的训练方法，为用户建立声纹模型包括以下子步骤：

将注册字符串提供给用户；

接收用户阅读注册字符串的语音信息；

根据性别分类器和语音确定用户的性别标签；

根据性别标签和语音生成用户的声纹模型。

本申请的另一方面，提供一种声纹创建与注册方法，包括：

获取用户发送的语音请求；

根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID；

若未识别到用户ID，则提示创建声纹并注册；

生成用户ID；

将用户ID和声纹模型对应存储到声纹注册数据库。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述获取用户发送的语音请求进一步包括：

判断是否需要向云端发送所述语音请求，如果是，则根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述获取用户发送的语音请求进一步包括：

判断所述语音请求是否需要识别用户ID，如果是，则根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述提示创建声纹并注册包括：

将未识别到用户ID的声纹模型打上ID号；

判断所述打上ID号的声纹模型的出现频率；

如果低于阈值，则删除该ID号；

如果高于阈值，则生成用户ID；将用户ID和声纹模型对应存储到声纹注册数据库。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述提示创建声纹并注册包括：

采用文本相关的训练方法，为未识别到用户ID的用户建立声纹模型。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述采用文本相关的训练方法，为未识别到用户ID的用户建立声纹模型包括：

将注册字符串提供给用户；

接收用户阅读注册字符串的语音信息；

根据性别分类器和语音确定用户的性别标签；

根据性别标签和语音生成用户的声纹模型。

本发明的另一方面，提供一种声纹创建与注册装置，包括：

提示模块、声纹建立模块、输入模块、注册模块；其中，

所述提示模块，用于当设备首次启用，提示创建声纹并注册；

所述声纹建立模块，用于采用文本相关的训练方法，为用户建立声纹模型；

所述输入模块，用于生成用户ID；

所述注册模块，用于将用户ID和声纹模型对应存储到声纹注册数据库。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述声纹建立模块，具体包括以下子模块：

提供子模块，用于将注册字符串提供给用户；

接收子模块，用于接收用户阅读注册字符串的语音信息；

确定子模块，用于根据性别分类器和语音确定用户的性别标签；

生成子模块，用于根据性别标签和语音生成用户的声纹模型。

本发明的另一方面，提供一种声纹创建与注册装置，包括：

获取模块、声纹识别模块、提示模块、输入模块和注册模块；其中，

所述获取模块，用于获取用户发送的语音请求；

所述声纹识别模块，用于根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID；

所述提示模块，用于提示未注册用户创建声纹并注册；

所述输入模块，用于生成用户ID；

所述注册模块，用于将用户ID和声纹模型对应存储到声纹注册数据库。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述获取模块具体执行：

判断是否需要向云端发送所述语音请求，如果是，则根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述提示模块具体执行：

判断所述语音请求是否需要识别用户ID，如果是，则根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述提示模块具体执行：

将未识别到用户ID的声纹模型打上ID号；

判断所述打上ID号的声纹模型的出现频率；

如果低于阈值，则删除该ID号；

如果高于阈值，则生成用户ID；将用户ID和声纹模型对应存储到声纹注册数据库。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述提示模块具体执行：

采用文本相关的训练方法，为未注册用户建立声纹模型。

如上所述的方面和任一可能的实现方式，进一步提供一种实现方式，所述提示模块包括以下子模块：

提供子模块，用于将注册字符串提供给用户；

接收子模块，用于接收用户阅读注册字符串的语音信息；

确定子模块，用于根据性别分类器和语音确定用户的性别标签；

生成子模块，用于根据性别标签和语音生成用户的声纹模型。

本申请的另一方面，提供一种设备，其特征在于，所述设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现任一上述的方法。

本申请的另一方面，提供一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现任一上述的方法。

由所述技术方案可知，本申请实施例能够避免现有技术中声纹识别方法技术依赖性极强、使用策略单一、产品化程度低的问题。具有较高的技术容错率，加快产品化速度，为用户提供个性化服务。

【附图说明】

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本申请一实施例提供的声纹创建与注册方法的流程示意图；

图2为本申请一实施例提供的声纹创建与注册方法中采用文本相关的训练方法，为未注册用户建立声纹模型的流程示意图；

图3为本申请另一实施例提供的声纹创建与注册方法的流程示意图

图4为本申请另一实施例提供的声纹创建与注册方法中根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID的流程示意图；

图5为本申请另一实施例提供的声纹创建与注册方法中提示未注册用户创建声纹并注册的流程示意图；

图6为本申请另一实施例提供的声纹创建与注册装置的结构示意图；

图7为本申请一实施例提供的声纹创建与注册装置的声纹建立模块的结构示意图；

图8为本申请另一实施例提供的声纹创建与注册装置的结构示意图；

图9为本申请另一实施例提供的声纹创建与注册装置的提示模块的结构示意图；

图10为适于用来实现本发明实施例的示例性计算机系统/服务器的框图。

【具体实施方式】

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的全部其他实施例，都属于本申请保护的范围。

另外，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。

对于一个智能语音交互设备，存在一个MateAPP在手机端与智能语音交互设备配合，完成一系列任务。为了建立声纹，在MateAPP上创建有一个“声纹管理”功能模块，在其中用户可以创建、删除和修改账号下的声纹。

图1为本申请一实施例提供的声纹创建与注册方法的流程示意图，如图1所示，包括以下步骤：

在101中，当设备首次启用，提示创建声纹并注册；

当设备第一次启动上电，提示用户通过MateAPP注册至少一个声纹ID，并确认相关身份信息，如姓名、年龄、性别等信息。

用户通过MateAPP或通过语音表达要创建声纹的意愿从而进行声纹创建。

在102中，采用文本相关的训练方法，为用户建立声纹模型；具体的，如图2所示，包括以下子步骤：

在201中，将注册字符串提供给用户。

可以理解，该注册字符串的形式可以有很多种：

作为一种示例，该注册字符串可为随机生成的数字串。此外，为了能够覆盖更大的样本空间，注册字符串中的数字只出现一次。

作为另一种示例，该注册字符串可为随机生成的汉字字符串。

在202中，接收用户阅读注册字符串的语音信息。

具体地，在将该注册字符串提供给用户之后，用户可按照提供的注册字符串进行多次朗读以生成多条语音进行注册。在用户阅读该注册字符串的过程中，或者在用户完成阅读该注册字符串时，可接收用户按照提供的注册字符串进行朗读而生成的语音信息。

在203中，根据性别分类器和语音确定用户的性别标签。

在本发明的实施例中，可根据性别分类器对语音进行性别分类，得到该用户的性别标签。其中，该性别标签包括男性或女性。具体而言，提取所获取到的语音的第一特征信息，并将第一特征信息发送给预先生成的性别分类器。性别分类器对第一特征信息进行分析，获取所述第一特征信息的性别标签，也就是用户的性别标签。

举例而言，以性别分类模型为高斯混合模型为例，可先对该语音提取基频特征以及梅尔频率倒谱系数MFCC特征，之后，可基于高斯混合模型对基频特征以及MFCC特征进行后验概率值计算，根据计算结果确定该用户的性别，例如，假设该高斯混合模型为男性高斯混合模型，则当计算结果为后验概率值很高，如大于一定阈值时，可确定该用户的性别为男性，当计算结果为后验概率值很小，如小于一定阈值时，可确定该用户的性别为女性。

在204中，根据性别标签和语音生成用户的声纹模型。

根据与所述性别标签对应的DNN模型获取每条语音的后验概率。

根据与所述性别标签对应的统一背景模型和特征向量提取模型，分别提取每条语音的第二特征向量。

根据与所述多条语音对应的多个第二特征向量获取所述用户的声纹模型。

具体地，根据性别分类器返回的与语音对应的性别标签，将用户输入的多条语音发送到对应性别的DNN模型中。也就是说，如果语音对应的是男性语音，将语音发送到男性DNN模型中。如果语音对应的是女性语音，将语音发送到女性DNN模型中。

根据与性别标签对应的DNN模型获取每条语音对应的多个后验概率。

根据与性别标签对应的统一背景模型对每个后验概率进行归一化处理，应用预先训练的特征向量提取模型根据每条语音，以及对应的归一化的后验概率，分别提取每条语音的第二特征向量。

根据与所述多条语音对应的多个第二特征向量获取所述用户的声纹模型，获取的方式很多，可以根据不同的应用需要进行选择，例如：

获取多个第二特征向量的平均特征向量作为所述用户的声纹模型。

在103中，生成用户ID，提示用户输入姓名、性别、年龄、爱好、家庭住址、工作地址等用户ID相关数据。

在104中，将用户ID和声纹模型对应存储到声纹注册数据库的某一账号之下，以便后续根据该声纹模型进行声纹识别，并对账号下任意智能语音设备进行语音控制。

其中，所述预存的声纹模型关联在同一账号，例如百度账号，之下，该账号下所有的声纹形成一个集合。各个智能语音交互设备与账号是唯一绑定的，通过账号将智能语音交互设备与声纹联系起来，声纹可以通过账号下的任意设备注册，一旦注册，可以在账号下任意智能语音设备中使用。当某一账号下的设备采集声纹后，就在该同一账号下的家庭声纹集合中进行匹配，识别声纹ID，达到了三者的统一，实现了从端到端的声纹集合识别解决方案。

图3为本申请另一实施例提供的声纹创建与注册方法的流程示意图，如图3所示，包括以下步骤：

在301中，获取用户发送的语音请求；

在本实施例的一种实现方式中，在智能语音交互设备联网后，用户与智能语音交互设备进行语音交互，判断是否需要向云端发送语音请求；如果是，则进一步识别发出语音请求的用户ID。

在本实施例的另一种实现方式中，首先对语音请求进行语音识别，得到命令语音所描述的命令，确定所述命令对应垂类；如果所述垂类不需要确定用户ID以提供个性化推荐，则直接响应语音请求；如果所述垂类需要确定用户ID以提供个性化推荐，则进一步识别发出语音请求的用户ID。

在302中，根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID；具体的，如图4所示，包括以下子步骤：

在401中，根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户性别标签。

由于不同性别的用户群，具有特殊的声纹特征，因此，可以根据用户群的声音特点，进行模型训练，以实现面向不同性别的用户群的声纹分析。当用户发起语音请求时，根据用户发出的语音请求，采用声纹识别方式，识别出发出语音请求的用户性信息。

在声纹识别之前，需要先对说话人的声纹进行建模，即“训练”或“学习”。具体的，通过应用深度神经网络DNN声纹基线系统，提取训练集中每条语音的第一特征向量；根据所述每条语音的第一特征向量以及预先标注的性别标签训练性别分类器。从而建立了区分性别的声纹处理模型。

根据所获取到的命令语音，提取所述命令语音的第一特征信息，并将第一特征信息发送给预先生成的性别分类器。性别分类器对第一特征信息进行分析，获取所述第一特征信息的性别标签，也就是命令语音的性别标签。

举例而言，以性别分类器为高斯混合模型为例，可先对所述语音请求提取基频特征以及梅尔频率倒谱系数MFCC特征，之后，可基于高斯混合模型对基频特征以及MFCC特征进行后验概率值计算，根据计算结果确定该用户的性别，例如，假设该高斯混合模型为男性高斯混合模型，则当计算结果为后验概率值很高，如大于一定阈值时，可确定该用户的性别为男性，当计算结果为后验概率值很小，如小于一定阈值时，可确定该用户的性别为女性。

在402中，识别出发出语音请求的用户性别标签后，进一步识别发出命令语音的用户声纹ID。

每个用户的声音会有一个唯一的声纹ID，该ID记录有该用户姓名、性别、年龄、爱好等个人数据。

具体地，根据性别分类器返回的与语音请求对应的性别标签，将用户输入的语音发送到对应性别的DNN模型中。也就是说，如果语音请求对应的是男性语音，将语音发送到男性DNN模型中。如果语音请求对应的是女性语音，将语音发送到女性DNN模型中。

根据与性别标签对应的DNN模型获取语音请求对应的多个后验概率。

根据与性别标签对应的统一背景模型对每个后验概率进行归一化处理，应用预先训练的特征向量提取模型根据每条语音，以及对应的归一化的后验概率，分别提取每条语音的第二特征向量。

根据与所述多条语音对应的多个第二特征向量获取所述用户的声纹模型，获取的方式很多，可以根据不同的应用需要进行选择，例如：

获取多个第二特征向量的平均特征向量作为所述用户的声纹模型。

通过将获取到的所述用户的声纹模型，与预存的声纹模型进行匹配，如果所述匹配值小于预先设定的阈值，则确定所述用户未进行注册，为首次使用智能设备，执行步骤303。

在303中，若未识别到用户ID，则提示创建声纹并注册；

在本实施例的一种实现方式中，若未识别到用户ID，则采用非文本相关的训练方法，为未注册用户建立声纹模型并注册。

具体的，将获取到的未进行注册的用户的声纹模型打上ID号；

生成用户ID，提示用户输入姓名、性别、年龄、爱好、家庭住址、工作地址等用户ID相关数据并注册该声纹。

将用户ID和声纹模型对应存储到声纹注册数据库的某一账号之下，以便后续根据该声纹模型进行声纹识别，并对账号下任意智能语音设备进行语音控制。

在本实施例的另一种实现方式中，为对用户的打扰可以达到最小化，可以只给经常使用的家庭用户引导创建声纹，具体的：

将未识别到用户ID的声纹模型打上ID号；但不生成用户ID提示用户输入姓名、性别、年龄、爱好、家庭住址、工作地址等用户ID相关数据；仅在后台记录该ID号所属用户的行为。

判断打上ID号的声纹模型的出现频率；

如果该声纹出现频次低，则自动删除该ID号；

如果该声纹出现频次较高或连续多天出现，则生成用户ID，提示用户输入姓名、性别、年龄、爱好、家庭住址、工作地址等用户ID相关数据并注册该声纹。将用户ID和声纹模型对应存储到声纹注册数据库的某一账号之下，以便后续根据该声纹模型进行声纹识别，并对账号下任意智能语音设备进行语音控制。

在本实施例的一种实现方式中，采用文本相关的训练方法，为未识别到用户ID的用户建立声纹模型；在声纹技术尚不完善的情况下，可以使用文本相关的训练方法提高识别率。

具体的，如图5所示，采用文本相关的训练方法，为未识别到用户ID的用户建立声纹模型包括以下子步骤：

在501中，将注册字符串提供给用户。

可以理解，该注册字符串的形式可以有很多种：

作为一种示例，该注册字符串可为随机生成的数字串。此外，为了能够覆盖更大的样本空间，注册字符串中的数字只出现一次。

作为另一种示例，该注册字符串可为随机生成的汉字字符串。

在502中，接收用户阅读注册字符串的语音信息。

具体地，在将该注册字符串提供给用户之后，用户可按照提供的注册字符串进行多次朗读以进行注册。在用户阅读该注册字符串的过程中，或者在用户完成阅读该注册字符串时，可接收用户按照提供的注册字符串进行朗读而生成的语音信息。

在503中，根据性别分类器和语音确定用户的性别标签。

在本发明的实施例中，可根据性别分类器对语音进行性别分类，得到该用户的性别标签。其中，该性别标签包括男性或女性。具体而言，提取所获取到的语音的第一特征信息，并将第一特征信息发送给预先生成的性别分类器。性别分类器对第一特征信息进行分析，获取所述第一特征信息的性别标签，也就是用户的性别标签。

举例而言，以性别分类模型为高斯混合模型为例，可先对该语音提取基频特征以及梅尔频率倒谱系数MFCC特征，之后，可基于高斯混合模型对基频特征以及MFCC特征进行后验概率值计算，根据计算结果确定该用户的性别，例如，假设该高斯混合模型为男性高斯混合模型，则当计算结果为后验概率值很高，如大于一定阈值时，可确定该用户的性别为男性，当计算结果为后验概率值很小，如小于一定阈值时，可确定该用户的性别为女性。

在504中，根据性别标签和语音生成用户的声纹模型。

根据与所述性别标签对应的DNN模型获取每条语音的后验概率。

根据与所述性别标签对应的统一背景模型和特征向量提取模型，分别提取每条语音的第二特征向量。

根据与所述多条语音对应的多个第二特征向量获取所述用户的声纹模型。

具体地，根据性别分类器返回的与语音对应的性别标签，将用户输入的多条语音发送到对应性别的DNN模型中。也就是说，如果语音对应的是男性语音，将语音发送到男性DNN模型中。如果语音对应的是女性语音，将语音发送到女性DNN模型中。

根据与性别标签对应的DNN模型获取每条语音对应的多个后验概率。

根据与性别标签对应的统一背景模型对每个后验概率进行归一化处理，应用预先训练的特征向量提取模型根据每条语音，以及对应的归一化的后验概率，分别提取每条语音的第二特征向量。

根据与所述多条语音对应的多个第二特征向量获取所述用户的声纹模型，获取的方式很多，可以根据不同的应用需要进行选择，例如：

获取多个第二特征向量的平均特征向量作为所述用户的声纹模型。

在304中，生成用户ID，提示用户输入姓名、性别、年龄、爱好、家庭住址、工作地址等用户ID相关数据。

在305中，将用户ID和声纹模型对应存储到声纹注册数据库的某一账号之下，以便后续根据该声纹模型进行声纹识别，并对账号下任意智能语音设备进行语音控制。

其中，所述预存的声纹模型关联在同一账号，例如百度账号，之下，该账号下所有的声纹形成一个集合。各个智能语音交互设备与账号是唯一绑定的，通过账号将智能语音交互设备与声纹联系起来，声纹可以通过账号下的任意设备注册，一旦注册，可以在账号下任意智能语音设备中使用。当某一账号下的设备采集声纹后，就在该同一账号下的家庭声纹集合中进行匹配，识别声纹ID，达到了三者的统一，实现了从端到端的声纹集合识别解决方案。

优选的，用户可以通过MateAPP以语音登录，对用户ID、声纹模型进行修改。

本实施例所述方法能够避免现有技术中声纹创建与注册方法技术学习成本较高，较为打扰用户的问题。实现了区分性别的声纹注册过程，以便应用区分性别的声纹认证处理模型提高了声纹认证的效率和准确性；使得声纹的建立过程能够覆盖各种场景，声纹建立可以在各个阶段引导用户，或者通过频次将声纹建立与注册分离，对用户的打扰最小化，引导用户注册声纹而后使得语音交互产品可以基于声纹对用户提供个性化服务。

需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描述的动作顺序的限制，因为依据本申请，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本申请所必须的。

在所述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

图6为本申请另一实施例提供的声纹创建与注册装置的结构示意图，如6所示，包括提示模块61、声纹建立模块62、输入模块63、注册模块64；其中，

所述提示模块61，用于当设备首次启用，提示创建声纹并注册；

当设备第一次启动上电，引导用户通过MateAPP注册至少一个声纹ID，并确认相关身份信息，如姓名、年龄、性别等信息。

用户通过MateAPP或通过语音表达要创建声纹的意愿从而进行声纹创建。

所述声纹建立模块62，用于采用文本相关的训练方法，为用户建立声纹模型；具体的，如图7所示，包括以下子模块：

提供子模块71，用于将注册字符串提供给用户。

可以理解，该注册字符串的形式可以有很多种：

作为一种示例，该注册字符串可为随机生成的数字串。此外，为了能够覆盖更大的样本空间，注册字符串中的数字只出现一次。

作为另一种示例，该注册字符串可为随机生成的汉字字符串。

接收子模块72，用于接收用户阅读注册字符串的语音信息。

具体地，在将该注册字符串提供给用户之后，用户可按照提供的注册字符串进行多次朗读以生成多条语音进行注册。在用户阅读该注册字符串的过程中，或者在用户完成阅读该注册字符串时，可接收用户按照提供的注册字符串进行朗读而生成的语音信息。

确定子模块73，用于根据性别分类器和语音确定用户的性别标签。

在本发明的实施例中，可根据性别分类器对语音进行性别分类，得到该用户的性别标签。其中，该性别标签包括男性或女性。具体而言，提取所获取到的语音的第一特征信息，并将第一特征信息发送给预先生成的性别分类器。性别分类器对第一特征信息进行分析，获取所述第一特征信息的性别标签，也就是用户的性别标签。

举例而言，以性别分类模型为高斯混合模型为例，可先对该语音提取基频特征以及梅尔频率倒谱系数MFCC特征，之后，可基于高斯混合模型对基频特征以及MFCC特征进行后验概率值计算，根据计算结果确定该用户的性别，例如，假设该高斯混合模型为男性高斯混合模型，则当计算结果为后验概率值很高，如大于一定阈值时，可确定该用户的性别为男性，当计算结果为后验概率值很小，如小于一定阈值时，可确定该用户的性别为女性。

生成子模块74，用于根据性别标签和语音生成用户的声纹模型。

根据与所述性别标签对应的DNN模型获取每条语音的后验概率。

根据与所述性别标签对应的统一背景模型和特征向量提取模型，分别提取每条语音的第二特征向量。

根据与所述多条语音对应的多个第二特征向量获取所述用户的声纹模型。

具体地，根据性别分类器返回的与语音对应的性别标签，将用户输入的多条语音发送到对应性别的DNN模型中。也就是说，如果语音对应的是男性语音，将语音发送到男性DNN模型中。如果语音对应的是女性语音，将语音发送到女性DNN模型中。

根据与性别标签对应的DNN模型获取每条语音对应的多个后验概率。

根据与性别标签对应的统一背景模型对每个后验概率进行归一化处理，应用预先训练的特征向量提取模型根据每条语音，以及对应的归一化的后验概率，分别提取每条语音的第二特征向量。

根据与所述多条语音对应的多个第二特征向量获取所述用户的声纹模型，获取的方式很多，可以根据不同的应用需要进行选择，例如：

获取多个第二特征向量的平均特征向量作为所述用户的声纹模型。

输入模块63，用于生成用户ID，提示用户输入姓名、性别、年龄、爱好、家庭住址、工作地址等用户ID相关数据。

注册模块64，用于将用户ID和声纹模型对应存储到声纹注册数据库的某一账号之下，以便后续根据该声纹模型进行声纹识别，并对账号下任意智能语音设备进行语音控制。

其中，所述预存的声纹模型关联在同一账号，例如百度账号，之下，该账号下所有的声纹形成一个集合。各个智能语音交互设备与账号是唯一绑定的，通过账号将智能语音交互设备与声纹联系起来，声纹可以通过账号下的任意设备注册，一旦注册，可以在账号下任意智能语音设备中使用。当某一账号下的设备采集声纹后，就在该同一账号下的家庭声纹集合中进行匹配，识别声纹ID，达到了三者的统一，实现了从端到端的声纹集合识别解决方案。

图8为本申请另一实施例提供的声纹创建与注册装置的结构示意图，如图8所示，包括以下步骤：

获取模块81，用于获取用户发送的语音请求；

在本实施例的一种实现方式中，在智能语音交互设备联网后，用户与智能语音交互设备进行语音交互，判断是否需要向云端发送语音请求；如果是，则进一步识别发出语音请求的用户ID。

在本实施例的另一种实现方式中，首先对语音请求进行语音识别，得到命令语音所描述的命令，确定所述命令对应垂类；如果所述垂类不需要确定用户ID以提供个性化推荐，则直接响应语音请求；如果所述垂类需要确定用户ID以提供个性化推荐，则进一步识别发出语音请求的用户ID。

声纹识别模块82，用于根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID；具体的，包括以下子模块：

用户性别识别子模块，用于根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户性别标签。

由于不同性别的用户群，具有特殊的声纹特征，因此，可以根据用户群的声音特点，进行模型训练，以实现面向不同性别的用户群的声纹分析。当用户发起语音请求时，根据用户发出的语音请求，采用声纹识别方式，识别出发出语音请求的用户性信息。

在声纹识别之前，需要先对说话人的声纹进行建模，即“训练”或“学习”。具体的，通过应用深度神经网络DNN声纹基线系统，提取训练集中每条语音的第一特征向量；根据所述每条语音的第一特征向量以及预先标注的性别标签训练性别分类器。从而建立了区分性别的声纹处理模型。

根据所获取到的命令语音，提取所述命令语音的第一特征信息，并将第一特征信息发送给预先生成的性别分类器。性别分类器对第一特征信息进行分析，获取所述第一特征信息的性别标签，也就是命令语音的性别标签。

举例而言，以性别分类器为高斯混合模型为例，可先对所述语音请求提取基频特征以及梅尔频率倒谱系数MFCC特征，之后，可基于高斯混合模型对基频特征以及MFCC特征进行后验概率值计算，根据计算结果确定该用户的性别，例如，假设该高斯混合模型为男性高斯混合模型，则当计算结果为后验概率值很高，如大于一定阈值时，可确定该用户的性别为男性，当计算结果为后验概率值很小，如小于一定阈值时，可确定该用户的性别为女性。

用户声纹ID识别子模块，用于识别出发出语音请求的用户性别标签后，进一步识别发出命令语音的用户声纹ID。

每个用户的声音会有一个唯一的声纹ID，该ID记录有该用户姓名、性别、年龄、爱好等个人数据。

具体地，根据性别分类器返回的与语音请求对应的性别标签，将用户输入的语音发送到对应性别的DNN模型中。也就是说，如果语音请求对应的是男性语音，将语音发送到男性DNN模型中。如果语音请求对应的是女性语音，将语音发送到女性DNN模型中。

根据与性别标签对应的DNN模型获取语音请求对应的多个后验概率。

根据与性别标签对应的统一背景模型对每个后验概率进行归一化处理，应用预先训练的特征向量提取模型根据每条语音，以及对应的归一化的后验概率，分别提取每条语音的第二特征向量。

根据与所述多条语音对应的多个第二特征向量获取所述用户的声纹模型，获取的方式很多，可以根据不同的应用需要进行选择，例如：

获取多个第二特征向量的平均特征向量作为所述用户的声纹模型。

通过将获取到的所述用户的声纹模型，与预存的声纹模型进行匹配，如果所述匹配值小于预先设定的阈值，则确定所述用户未进行注册，为首次使用智能设备。

提示模块83，用于若未识别到用户ID，则提示创建声纹并注册；

在本实施例的一种实现方式中，若未识别到用户ID，为首次使用智能设备，则提示模块83采用非文本相关的训练方法，为用户建立声纹模型。

具体的，

将未识别到用户ID的声纹模型打上ID号；

生成用户ID；提示用户输入姓名、性别、年龄、爱好、家庭住址、工作地址等用户ID相关数据并注册该声纹。

将用户ID和声纹模型对应存储到声纹注册数据库的某一账号之下，以便后续根据该声纹模型进行声纹识别，并对账号下任意智能语音设备进行语音控制。

在本实施例的另一种实现方式中，为对用户的打扰可以达到最小化，可以只给经常使用的家庭用户引导创建声纹，具体的：

将未识别到用户ID的声纹模型打上ID号；但不生成用户ID提示用户输入姓名、性别、年龄、爱好、家庭住址、工作地址等用户ID相关数据；仅在后台记录该ID号所属用户的行为。

判断打上ID号的声纹模型的出现频率；

如果该声纹出现频次低，则自动删除该ID号；

如果该声纹出现频次较高或连续多天出现，则生成用户ID，提示用户输入姓名、性别、年龄、爱好、家庭住址、工作地址等用户ID相关数据并注册该声纹。将用户ID和声纹模型对应存储到声纹注册数据库的某一账号之下，以便后续根据该声纹模型进行声纹识别，并对账号下任意智能语音设备进行语音控制。

在本实施例的一种实现方式中，提示模块83采用文本相关的训练方法，为未识别到用户ID的建立声纹模型并注册；在声纹技术尚不完善的情况下，可以使用文本相关的训练方法提高识别率。具体的，如图9所示，包括以下子模块：

提供子模块91，用于将注册字符串提供给用户。

可以理解，该注册字符串的形式可以有很多种：

作为一种示例，该注册字符串可为随机生成的数字串。此外，为了能够覆盖更大的样本空间，注册字符串中的数字只出现一次。

作为另一种示例，该注册字符串可为随机生成的汉字字符串。

接收子模块92，用于接收用户阅读注册字符串的语音信息。

具体地，在将该注册字符串提供给用户之后，用户可按照提供的注册字符串进行多次朗读以进行注册。在用户阅读该注册字符串的过程中，或者在用户完成阅读该注册字符串时，可接收用户按照提供的注册字符串进行朗读而生成的语音信息。

确定子模块93，用于根据性别分类器和语音确定用户的性别标签。

在本发明的实施例中，可根据性别分类器对语音进行性别分类，得到该用户的性别标签。其中，该性别标签包括男性或女性。具体而言，提取所获取到的语音的第一特征信息，并将第一特征信息发送给预先生成的性别分类器。性别分类器对第一特征信息进行分析，获取所述第一特征信息的性别标签，也就是用户的性别标签。

举例而言，以性别分类模型为高斯混合模型为例，可先对该语音提取基频特征以及梅尔频率倒谱系数MFCC特征，之后，可基于高斯混合模型对基频特征以及MFCC特征进行后验概率值计算，根据计算结果确定该用户的性别，例如，假设该高斯混合模型为男性高斯混合模型，则当计算结果为后验概率值很高，如大于一定阈值时，可确定该用户的性别为男性，当计算结果为后验概率值很小，如小于一定阈值时，可确定该用户的性别为女性。

生成子模块94，用于根据性别标签和语音生成用户的声纹模型。

根据与所述性别标签对应的DNN模型获取每条语音的后验概率。

根据与所述性别标签对应的统一背景模型和特征向量提取模型，分别提取每条语音的第二特征向量。

根据与所述多条语音对应的多个第二特征向量获取所述用户的声纹模型。

具体地，根据性别分类器返回的与语音对应的性别标签，将用户输入的多条语音发送到对应性别的DNN模型中。也就是说，如果语音对应的是男性语音，将语音发送到男性DNN模型中。如果语音对应的是女性语音，将语音发送到女性DNN模型中。

根据与性别标签对应的DNN模型获取每条语音对应的多个后验概率。

根据与性别标签对应的统一背景模型对每个后验概率进行归一化处理，应用预先训练的特征向量提取模型根据每条语音，以及对应的归一化的后验概率，分别提取每条语音的第二特征向量。

根据与所述多条语音对应的多个第二特征向量获取所述用户的声纹模型，获取的方式很多，可以根据不同的应用需要进行选择，例如：

获取多个第二特征向量的平均特征向量作为所述用户的声纹模型。

输入模块84，用于生成用户ID，提示用户输入姓名、性别、年龄、爱好、家庭住址、工作地址等用户ID相关数据。

注册模块85，用于将用户ID和声纹模型对应存储到声纹注册数据库的某一账号之下，以便后续根据该声纹模型进行声纹识别，并对账号下任意智能语音设备进行语音控制。

其中，所述预存的声纹模型关联在同一账号，例如百度账号，之下，该账号下所有的声纹形成一个集合。各个智能语音交互设备与账号是唯一绑定的，通过账号将智能语音交互设备与声纹联系起来，声纹可以通过账号下的任意设备注册，一旦注册，可以在账号下任意智能语音设备中使用。当某一账号下的设备采集声纹后，就在该同一账号下的家庭声纹集合中进行匹配，识别声纹ID，达到了三者的统一，实现了从端到端的声纹集合识别解决方案。

优选的，用户可以通过MateAPP以语音登录，对用户ID、声纹模型进行修改。

本实施例所述方法能够避免现有技术中声纹创建与注册方法技术学习成本较高，较为打扰用户的问题。实现了区分性别的声纹注册过程，以便应用区分性别的声纹认证处理模型提高了声纹认证的效率和准确性；使得声纹的建立过程能够覆盖各种场景，声纹建立可以在各个阶段引导用户，或者通过频次将声纹建立与注册分离，对用户的打扰最小化，引导用户注册声纹而后使得语音交互产品可以基于声纹对用户提供个性化服务。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，所述描述的终端和服务器的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

本实施例所述装置能够避免现有技术中声纹创建与注册方法技术学习成本较高，较为打扰用户的问题。使得声纹的建立过程能够覆盖各种场景，声纹建立可以在各个阶段引导用户，或者通过频次将声纹建立与注册分离，对用户的打扰最小化，引导用户注册声纹而后使得语音交互产品可以基于声纹对用户提供个性化服务。

在本申请所提供的几个实施例中，应该理解到，所揭露的方法和装置，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。所述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

图10示出了适于用来实现本发明实施方式的示例性计算机系统/服务器012的框图。图10显示的计算机系统/服务器012仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图10所示，计算机系统/服务器012以通用计算设备的形式表现。计算机系统/服务器012的组件可以包括但不限于：一个或者多个处理器或者处理单元016，系统存储器028，连接不同系统组件(包括系统存储器028和处理单元016)的总线018。

总线018表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。

计算机系统/服务器012典型地包括多种计算机系统可读介质。这些介质可以是任何能够被计算机系统/服务器012访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。

系统存储器028可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)030和/或高速缓存存储器032。计算机系统/服务器012可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统034可以用于读写不可移动的、非易失性磁介质(图10未显示，通常称为“硬盘驱动器”)。尽管图9中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线018相连。存储器028可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块042的程序/实用工具040，可以存储在例如存储器028中，这样的程序模块042包括——但不限于——操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块042通常执行本发明所描述的实施例中的功能和/或方法。

计算机系统/服务器012也可以与一个或多个外部设备014(例如键盘、指向设备、显示器024等)通信，在本发明中，计算机系统/服务器012与外部雷达设备进行通信，还可与一个或者多个使得用户能与该计算机系统/服务器012交互的设备通信，和/或与使得该计算机系统/服务器012能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口022进行。并且，计算机系统/服务器012还可以通过网络适配器020与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图10所示，网络适配器020通过总线018与计算机系统/服务器012的其它模块通信。应当明白，尽管图10中未示出，可以结合计算机系统/服务器012使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

处理单元016通过运行存储在系统存储器028中的程序，从而执行本发明所描述的实施例中的功能和/或方法。

上述的计算机程序可以设置于计算机存储介质中，即该计算机存储介质被编码有计算机程序，该程序在被一个或多个计算机执行时，使得一个或多个计算机执行本发明上述实施例中所示的方法流程和/或装置操作。

随着时间、技术的发展，介质含义越来越广泛，计算机程序的传播途径不再受限于有形介质，还可以直接从网络下载等。可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括——但不限于——电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于——无线、电线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (12)

1.一种声纹创建与注册方法，其特征在于，包括：

获取用户发送的语音请求；

根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID；

若未识别到用户ID，则将未识别到用户ID的声纹模型打上ID号；

如果打上ID号的声纹模型的出现频率低于阈值，则删除所述ID号；

如果所述打上ID号的声纹模型的出现频率高于阈值，则提示创建声纹并注册，生成用户ID，将用户ID和声纹模型对应存储到声纹注册数据库。

2.根据权利要求1所述的声纹创建与注册方法，其特征在于，所述获取用户发送的语音请求进一步包括：

判断是否需要向云端发送所述语音请求，如果是，则根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID。

3.根据权利要求1所述的声纹创建与注册方法，其特征在于，所述获取用户发送的语音请求进一步包括：

判断所述语音请求是否需要识别用户ID，如果是，则根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID。

4.根据权利要求1所述的声纹创建与注册方法，其特征在于，所述提示创建声纹并注册包括：

采用文本相关的训练方法，为未识别到用户ID的用户建立声纹模型。

5.根据权利要求4所述的声纹创建与注册方法，其特征在于，所述采用文本相关的训练方法，为未识别到用户ID的用户建立声纹模型包括：

将注册字符串提供给用户；

接收用户阅读注册字符串的语音信息；

根据性别分类器和语音确定用户的性别标签；

根据性别标签和语音生成用户的声纹模型。

6.一种声纹创建与注册装置，其特征在于，包括：

获取模块、声纹识别模块、提示模块、输入模块和注册模块；其中，

所述获取模块，用于获取用户发送的语音请求；

所述声纹识别模块，用于根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID；

所述提示模块，用于将未识别到用户ID的声纹模型打上ID号；如果打上ID号的声纹模型的出现频率低于阈值，则删除所述ID号；如果所述打上ID号的声纹模型的出现频率高于阈值，则提示未注册用户创建声纹并注册；

所述输入模块，用于生成用户ID；

所述注册模块，用于将用户ID和声纹模型对应存储到声纹注册数据库。

7.根据权利要求6所述的声纹创建与注册装置，其特征在于，所述获取模块具体执行：

判断是否需要向云端发送所述语音请求，如果是，则根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID。

8.根据权利要求6所述的声纹创建与注册装置，其特征在于，所述提示模块具体执行：

判断所述语音请求是否需要识别用户ID，如果是，则根据所述语音请求，采用声纹识别方式，识别发出语音请求的用户ID。

9.根据权利要求6所述的声纹创建与注册装置，其特征在于，所述提示模块具体执行：

采用文本相关的训练方法，为未注册用户建立声纹模型。

10.根据权利要求9所述的声纹创建与注册装置，其特征在于，所述提示模块包括以下子模块：

提供子模块，用于将注册字符串提供给用户；

接收子模块，用于接收用户阅读注册字符串的语音信息；

确定子模块，用于根据性别分类器和语音确定用户的性别标签；

生成子模块，用于根据性别标签和语音生成用户的声纹模型。

11.一种声纹创建与注册设备，其特征在于，所述设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-5中任一所述的方法。

12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-5中任一所述的方法。

Images