CN106128466B - 身份向量处理方法和装置 - Google Patents

身份向量处理方法和装置 Download PDF

Info

Publication number
CN106128466B
CN106128466B CN201610560347.0A CN201610560347A CN106128466B CN 106128466 B CN106128466 B CN 106128466B CN 201610560347 A CN201610560347 A CN 201610560347A CN 106128466 B CN106128466 B CN 106128466B
Authority
CN
China
Prior art keywords
sample
class
speaker
distance
classification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610560347.0A
Other languages
English (en)
Other versions
CN106128466A (zh
Inventor
李为
黄飞跃
吴永坚
吴富章
李科
金星明
钱柄桦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201610560347.0A priority Critical patent/CN106128466B/zh
Publication of CN106128466A publication Critical patent/CN106128466A/zh
Priority to PCT/CN2017/092530 priority patent/WO2018010646A1/zh
Priority to EP17826982.5A priority patent/EP3486902A4/en
Priority to US15/954,416 priority patent/US10650830B2/en
Application granted granted Critical
Publication of CN106128466B publication Critical patent/CN106128466B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/02—Preprocessing operations, e.g. segment selection; Pattern representation or modelling, e.g. based on linear discriminant analysis [LDA] or principal components; Feature selection or extraction
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/20—Pattern transformations or operations aimed at increasing system robustness, e.g. against channel noise or different working conditions
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/06—Decision making techniques; Pattern matching strategies
    • G10L17/08—Use of distortion metrics or a particular distance between probe pattern and reference templates
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/06—Decision making techniques; Pattern matching strategies
    • G10L17/14—Use of phonemic categorisation or speech recognition prior to speaker recognition or verification

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Business, Economics & Management (AREA)
  • Game Theory and Decision Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及一种身份向量处理方法和装置，所述方法包括：获取样本集合，所述样本集合包括多个说话人类别的身份向量的样本；获取所述样本集合中每个样本所对应的类间近邻样本；获取所述样本集合中每个样本所对应的类内近邻样本；根据所述样本集合中各样本和相应类间近邻样本确定类间差异量；根据所述样本集合中各样本和相应类内近邻样本确定类内差异量；获取基向量组，所述类间差异量投影到所述基向量组中各基向量的值最大化，且所述类内差异量投影到所述基向量组中各基向量的值最小化；根据所述基向量组对待处理的身份向量进行特征变换。本发明提供的身份向量处理方法和装置，经过特征变换后的身份向量具有很好的类间区分性和类内聚集性。

Description

身份向量处理方法和装置
技术领域
本发明涉及计算机技术领域，特别是涉及一种身份向量处理方法和装置。
背景技术
说话人身份识别是一种重要的身份识别手段，用户说出一段语音，终端采集该语音，并将采集的语音进行预处理、特征提取、建模和参数估计等一系列操作后，将语音映射为一段定长的可以表达说话人语音特征的向量，该向量称为身份向量。身份向量可以良好地表达相应语音中包括的说话人身份信息。将说话人的身份向量与目标用户的身份向量进行比较，根据两者相似程度可以判断出说话人是否为目标用户，从而实现说话人身份验证。
然而，身份向量容易受到信道易变性和环境易变性的干扰，从而影响说话人身份识别的准确性。其中信道易变性是指由于采集终端的差异性和/或传输差异性对语音造成的畸变，采集终端的差异性比如手机、平板电脑等终端类型的差异性，传输差异性比如采用有线传输或者无线传输等传输信道的差异性。环境易变性是指说话人所处的环境因素对语音造成的畸变，环境因素比如室内或者室外，还比如环境噪声。
发明内容
基于此，有必要针对目前身份向量易受干扰技术问题，提供一种身份向量处理方法和装置。
一种身份向量处理方法，包括：
获取样本集合，所述样本集合包括多个说话人类别的身份向量的样本；
获取所述样本集合中每个样本所对应的类间近邻样本；
获取所述样本集合中每个样本所对应的类内近邻样本；
根据所述样本集合中各样本和相应类间近邻样本确定类间差异量；
根据所述样本集合中各样本和相应类内近邻样本确定类内差异量；
获取基向量组，所述类间差异量投影到所述基向量组中各基向量的值最大化，且所述类内差异量投影到所述基向量组中各基向量的值最小化；
根据所述基向量组对待处理的身份向量进行特征变换。
一种身份向量处理装置，包括：
类间差异量确定模块，用于获取样本集合，所述样本集合包括多个说话人类别的身份向量的样本；获取所述样本集合中每个样本所对应的类间近邻样本；根据所述样本集合中各样本和相应类间近邻样本确定类间差异量；
类内差异量确定模块，用于获取所述样本集合中每个样本所对应的类内近邻样本；根据所述样本集合中各样本和相应类内近邻样本确定类内差异量；
基向量组获取模块，用于获取基向量组，所述类间差异量投影到所述基向量组中各基向量的值最大化，且所述类内差异量投影到所述基向量组中各基向量的值最小化；
特征变换模块，用于根据所述基向量组对待处理的身份向量进行特征变换。
上述身份向量处理方法和装置，类间近邻样本可以反映出样本集合中不同说话人类别的近邻样本的局部分布，类内近邻样本则可以反映出样本集合中相同说话人类别的近邻样本的局部分布，可以更准确地反映出样本集合中类内和类间之间的差异。根据样本集合中各样本和相应类间近邻样本确定的类间差异量可以准确地反映出样本集合中不同说话人类别之间的差异性，而根据样本集合中各样本和相应类内近邻样本确定的类内差异量可以准确地反映出样本集合中相同说话人类别之间的差异性。根据基向量组对待处理的身份向量进行特征变换后，经过特征变换后的身份向量具有很好的类间区分性和类内聚集性，可减少因受干扰而导致身份向量识别性能下降的情况。
附图说明
图1为一个实施例中说话人身份识别系统的应用环境图；
图2A为一个实施例中服务器的内部结构示意图；
图2B为一个实施例中终端的内部结构示意图；
图3为一个实施例中身份向量处理方法的流程示意图；
图4为一个实施例中获取样本集合中每个样本所对应的类间近邻样本的步骤的流程示意图；
图5为一个实施例中获取样本集合中每个样本所对应的类内近邻样本的步骤的流程示意图；
图6为一个实施例中根据样本集合中各样本和相应类间近邻样本确定类间差异量的步骤的流程示意图；
图7为一个实施例中计算在加权求和时所需的权重的步骤的流程示意图；
图8为一个实施例中根据样本集合中各样本和相应类内近邻样本确定类内差异量的步骤的流程示意图；
图9为一个实施例中说话人身份识别方法的流程示意图；
图10为一个实施例中身份向量处理装置的结构框图；
图11为另一个实施例中身份向量处理装置的结构框图；
图12为再一个实施例中身份向量处理装置的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
可以理解，本发明所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本发明的范围的情况下，可以将第一协方差称为第二协方差，且类似地，可将第二协方差称为第一协方差。第一协方差和第二协方差两者都是协方差，但其不是同一协方差。
图1为一个实施例中说话人身份识别系统的应用环境图。如图1所示，该系统包括通过网络连接的终端110和服务器120。终端110可用于采集语音并从采集的语音中提取身份向量(i-vector)，将身份向量发送到服务器120，接收服务器120反馈的身份识别结果。服务器120可用于根据基向量组对目标说话人类别的已知身份向量和待验证身份向量分别进行特征变换；计算经过特征变换的所述已知身份向量和经过特征变换的待验证身份向量之间的相似度；根据所述相似度进行说话人身份验证；根据验证通过时相应的目标说话人类别确定身份识别结果。
服务器120可用于获取样本集合，样本集合包括多个说话人类别的身份向量的样本；获取样本集合中每个样本所对应的类间近邻样本；获取样本集合中每个样本所对应的类内近邻样本；根据样本集合中各样本和相应类间近邻样本确定类间差异量；根据样本集合中各样本和相应类内近邻样本确定类内差异量；获取基向量组，类间差异量投影到基向量组中各基向量的值最大化，且类内差异量投影到基向量组中各基向量的值最小化。
图2A为一个实施例中服务器的内部结构示意图。如图2A所示，该服务器包括通过系统总线连接的处理器、非易失性存储介质、内存储器和网络接口。其中，该服务器的非易失性存储介质存储有操作系统、数据库和身份向量处理装置，数据库中可存储有样本集合，该身份向量处理装置可用于实现一种身份向量处理方法。该服务器的处理器用于提供计算和控制能力，支撑整个服务器的运行。该服务器的内存储器为非易失性存储介质中的身份向量处理装置的运行提供环境，该内存储器中可存储有计算机可读指令，该计算机可读指令被处理器执行时，可使得处理器执行一种身份向量处理方法。该服务器的网络接口用于与终端连接通信。服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。本领域技术人员可以理解，图2A中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的服务器的限定，具体的服务器可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
图2B为一个实施例中终端的内部结构示意图。如图2B所示，该终端包括通过系统总线连接的处理器、非易失性存储介质、内存储器、网络接口和声音采集装置。其中，终端的非易失性存储介质存储有操作系统，还包括一种说话人身份识别装置，该说话人身份识别装置用于实现一种说话人身份识别方法。该处理器用于提供计算和控制能力，支撑整个终端的运行。终端中的内存储器为非易失性存储介质中的说话人身份识别装置的运行提供环境，该内存储器中可储存有计算机可读指令，该计算机可读指令被处理器执行时，可使得处理器执行一种说话人身份识别方法。网络接口用于与服务器进行网络通信。该终端可以是手机、平板电脑或者个人数字助理或穿戴式设备等。本领域技术人员可以理解，图2B中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的终端的限定，具体的终端可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
图3为一个实施例中身份向量处理方法的流程示意图。本实施例以该方法应用于服务器来举例说明，该方法也可以应用于终端。该方法具体包括如下步骤：
S302，获取样本集合，样本集合包括多个说话人类别的身份向量的样本。
具体地，样本集合包括若干样本，每个样本包括一个身份向量，且每个样本标记了所包括的身份向量所属的一个说话人类别，且样本集合共存在指定数量的多个说话人类别，每个说话人类别可包括多个样本。一个说话人类别表示一个说话人，相同说话人类别的样本从源自于相同说话人的语音中提取出，不同说话人类别的样本则分别从源自于不同说话人的语音中提取出。样本集合中任一说话人类别的样本为多个。身份向量是将语音进行预处理、特征提取、建模和参数估计等一系列操作后映射出的固定长度的、可以区分说话人身份的向量。样本集合可存储在文件、数据库或者缓存中，在需要时从文件、数据库或者缓存中获取。
S304，获取样本集合中每个样本所对应的类间近邻样本。
其中，每个样本所对应的类间近邻样本是指与该每个样本非同属说话人类别的近邻样本，一个样本的非同属说话人类别是指与该样本属于不同说话人类别。每个样本的近邻样本是指样本集合中与该每个样本之间的距离满足距离接近条件的其它样本。进一步地，距离接近条件是指样本集合中每个样本与样本集合中其它样本之间判定为接近时彼此之间应满足的条件。满足距离接近条件的样本可以是距离小于预设距离阈值的样本，也可以是按距离升序排序后排在前面的预设数量的样本。
S306，获取样本集合中每个样本所对应的类内近邻样本。
其中，每个样本所对应的类内近邻样本是指与该每个样本同属说话人类别的近邻样本，一个样本的同属说话人类别是指与该样本属于相同说话人类别。每个样本的近邻样本是指样本集合中与该每个样本之间的距离满足距离接近条件的其它样本。S304和S306的执行顺序可互换，也可以同时执行，S306也可以在S308之后执行。
S308，根据样本集合中各样本和相应类间近邻样本确定类间差异量。
其中，类间差异量是指反映样本集合中不同说话人类别的样本之间差异的衡量量。在一个实施例中，服务器可以遍历样本集合中的每个样本，该遍历的样本对应多个非同属说话人类别的类间近邻样本，计算该样本与相应的每个类间近邻样本的差异，进而综合样本集合中所有样本与相应类间近邻样本之间的差异得到样本集合的类间差异量。
在一个实施例中，服务器还可以遍历样本集合中的每个样本，该遍历的样本对应多个非同属说话人类别的类间近邻样本，将对应的类间近邻样本按照所属的说话人类别分别计算中心，从而计算遍历的样本与每个非同属说话人类别的中心之间的差异，进而综合样本集合中所有样本与其各非同属说话人类别的中心之间的差异得到样本集合的类间差异量。其中的中心可以是均值或者加权平均值。
S310，根据样本集合中各样本和相应类内近邻样本确定类内差异量。
其中，类内差异量是指反映样本集合中相同说话人类别的样本之间差异的衡量量。在一个实施例中，服务器可以遍历样本集合中的每个样本，该遍历的样本对应同属说话人类别的非自身的类内近邻样本，计算该样本与相应的每个类内近邻样本的差异，进而综合样本集合中所有样本与相应类内近邻样本之间的差异得到样本集合的类内差异量。
在一个实施例中，服务器还可以遍历样本集合中的每个样本，该遍历的样本对应同属说话人类别的非自身的类内近邻样本，计算对应的所有类内近邻样本的中心，计算遍历的样本与该中心的差异，进而综合计算出的差异得到样本集合的类内差异量。其中的中心可以是均值或者加权平均值。
S312，获取基向量组，类间差异量投影到基向量组中各基向量的值最大化，且类内差异量投影到基向量组中各基向量的值最小化。
其中，基向量组包括多个长度相等的基向量。基向量组中的基向量可以是彼此正交的，便于矩阵运算。基向量组中基向量的数量可以少于样本集合中说话人类别总数。服务器可寻找一系列的基向量，使得类间差异量投影到基向量上的投影值最大化，类内差异量投影到基向量上的投影值最小化，并将寻找到的基向量组成基向量组。
S314，根据基向量组对待处理的身份向量进行特征变换。
其中，特征变换是指将特征从原本的特征空间变换到新的特征空间以增强特征的区分性的处理过程，身份向量是语音的一种特征。待处理的身份向量是指需要进行特征变换的身份向量，可以是待验证身份向量、样本集合中的样本或者其它身份向量。根据基向量组对待处理的身份向量进行特征变换，使得经过特征变换的身份向量投影到基向量组构成的多维空间中，形成类间区分性强且类内聚集性强的身份向量。基向量组中基向量的数量可以少于样本集合中说话人类别总数，将待处理的身份向量经过特征变换后可得到降维的身份向量。
上述身份向量处理方法，类间近邻样本可以反映出样本集合中不同说话人类别的近邻样本的局部分布，类内近邻样本则可以反映出样本集合中相同说话人类别的近邻样本的局部分布，可以更准确地反映出样本集合中类内和类间之间的差异。根据样本集合中各样本和相应类间近邻样本确定的类间差异量可以准确地反映出样本集合中不同说话人类别之间的差异性，而根据样本集合中各样本和相应类内近邻样本确定的类内差异量可以准确地反映出样本集合中相同说话人类别之间的差异性。根据基向量组对待处理的身份向量进行特征变换后，经过特征变换后的身份向量具有很好的类间区分性和类内聚集性，可减少因受干扰而导致身份向量识别性能下降的情况，可提高说话人身份识别的准确性。
图4为一个实施例中步骤S304即获取样本集合中每个样本所对应的类间近邻样本的步骤的流程示意图。如图4所示，S304具体包括以下步骤：
S402，遍历样本集合中的样本。
具体地，服务器可按照任意顺序遍历样本集合中的样本，从而针对遍历的样本分别获取相应的类间近邻样本。
更具体地，假设样本集合中的样本表示为其中i为说话人类别序号，l为第i个说话人类别中的样本序号；样本集合中说话人类别总数为C；样本集合中第i个说话人类别中样本总数为Ni，服务器对从到构成的样本集合进行遍历。可以是p×1大小的向量。
S404，确定与遍历的样本非同属说话人类别的样本。
具体地，对于遍历的样本其说话人类别序号为i，其非同属说话人类别序号为j，且i≠j。说话人类别序号为j的样本便是与遍历的样本非同属说话人类别的样本。
S406，计算遍历的样本与非同属说话人类别的样本之间的距离。
具体地，对于遍历的样本属于第j个说话人类别的所有样本都可以与遍历的样本计算距离。距离可采用欧氏距离、曼哈顿距离或者马氏距离等用于衡量样本间相似性的距离。
S408，将非同属说话人类别的样本中每个说话人类别的样本按照相应距离升序排序后，从首位依次选取预设数量的样本作为遍历的样本所对应的相应非同属说话人类别的类间近邻样本。
具体地，非同属说话人类别的样本是样本集合中不属于第i个说话人类别的样本，其中的每个说话人类别便是上述的第j个说话人类别。将第j个说话人类别的所有样本按照与遍历的样本的距离从小到大的顺序排序后，从排序的样本的首位起选取K个样本构成类间近邻样本为其中K为预设数量。
本实施例中，可精确确定样本集合中每个样本所对应的类间近邻样本，从而便于精确计算基向量组，从而提高利用基向量组将待处理的身份向量特征变换后的识别性能。
图5为一个实施例中步骤S306即获取样本集合中每个样本所对应的类内近邻样本的步骤的流程示意图。如图5所示，步骤S306具体包括如下步骤：
S502，遍历样本集合中的样本。
具体地，假设样本集合中的样本表示为其中i为说话人类别序号，l为第i个说话人类别中的样本序号；样本集合中说话人类别总数为C；样本集合中第i个说话人类别中样本总数为Ni，服务器对从到构成的样本集合进行遍历。
S504，确定与遍历的样本同属说话人类别的样本。
具体地，对于遍历的样本其同属说话人类别序号为i，说话人类别序号为i的非的样本便是与遍历的样本同属说话人类别的样本。
S506，计算遍历的样本与同属说话人类别的样本之间的距离。
具体地，对于遍历的样本属于第i个说话人类别且除去的所有样本都可以与遍历的样本计算距离。距离可采用欧氏距离、曼哈顿距离或者马氏距离等用于衡量样本间相似性的距离。
S508，将同属说话人类别的样本按照相应距离升序排序后，从首位依次选取预设数量的样本作为遍历的样本所对应的类内近邻样本。
具体地，将第i个说话人类别中除去遍历的样本后，按照与遍历的样本的距离从小到大的顺序排序，从排序的样本的首位起选取K个样本构成类内近邻样本为其中K为预设数量。
本实施例中，可精确确定样本集合中每个样本所对应的类内近邻样本，从而便于精确计算基向量组，从而提高利用基向量组将待处理的身份向量特征变换后的识别性能。
图6为一个实施例中步骤S308即根据样本集合中各样本和相应类间近邻样本确定类间差异量的步骤的流程示意图。如图6所示，步骤S308具体包括如下步骤：
S602，计算样本集合中每个样本对应的每个非同属说话人类别的类间近邻样本的第一样本均值。
具体地，可根据以下公式(1)计算第一样本均值：
其中，为样本的第j个说话人类别的类间近邻样本的第一样本均值。
S604，根据样本集合中每个样本和相应每个非同属说话人类别的类间近邻样本的第一样本均值计算第一协方差。
具体地，可根据以下公式(2)计算第一协方差：
其中，t表示转置；表示样本集合中第i个说话人类别中第l个样本；表示样本的第j个说话人类别的类间近邻样本的第一样本均值。
上述公式(2)中，将样本集合中的每个样本与第j个说话人类别的类间近邻样本的第一样本均值作差后乘以该差的转置得到第一协方差。
S606，将第一协方差加权求和，获得类间差异量。
具体地，可采用如下公式(3)计算类间差异量：
其中，是类间差异量，在公式(3)中具体是类间方差；C表示样本集合中说话人类别总数；i和j是样本集合中不同说话人类别的序号；l是第i个说话人类别样本的序号；Ni表示第i个说话人类别的样本总数；t表示转置；表示样本与第j个说话人类别的类间近邻样本的第一样本均值；表示样本对应于第j个说话人类别的第一协方差在加权求和时的权重。
本实施例中，根据样本集合中的每个样本以及相应的第一样本均值计算出第一协方差，将第一协方差进行加权求和得到类间差异量，该类间差异量可以更加准确地衡量样本集合中不同说话人类别的样本之间的差异，从而便于精确计算基向量组，从而提高利用基向量组将待处理的身份向量特征变换后的识别性能。
图7为一个实施例中计算在加权求和时所需的权重的步骤的流程示意图，该步骤在步骤S606之前的任意时序执行。参照图7，该步骤具体包括如下步骤：
S702，对于样本集合中的每个样本，获取与非同属说话人类别的类间近邻样本之间的第一距离，并获取与相应类内近邻样本的第二距离。
具体地，对于样本集合中的每个样本可计算与第j个说话人类别的各个类间近邻样本之间的第一距离并计算与相应类内近邻样本之间的第二距离
S704，取第一距离和第二距离中的最小距离。
具体地，取第一距离和第二距离中的最小距离可用如下公式(4)表示：
其中，min表示求取一个集合中的最小值；d表示求取距离。距离可采用欧氏距离、曼哈顿距离或者马氏距离等用于衡量样本间相似性的距离。
S706，计算第一距离和第二距离的和。
具体地，可根据如下公式(5)计算第一距离和第二距离的和：
S708，将最小距离除以计算出的和，得到对应每个非同属说话人类别的第一协方差在计算加权和时的权重。
具体地，可根据如下公式(6)计算最小距离与计算出的和之间的商，得到对应每个非同属说话人类别的第一协方差在计算加权和时的权重：
本实施例中，计算权重时考虑第一距离和第二距离中的最小距离所占比重，使得权重能够准确反映不同的第一协方差对应类间差异量的影响，求得的类间差异量可以更加准确地衡量样本集合中样本之间的差异，从而便于精确计算基向量组，从而提高利用基向量组将待处理的身份向量特征变换后的识别性能。
在一个实施例中，在步骤S704和步骤S706之前，该身份向量处理方法还包括：根据可调参数分别对第一距离和第二距离进行同步缩放处理。
其中，可调参数是指可在可调参数的取值范围内进行调整的参数。可通过将可调参数作为第一距离和第二距离的常数项或者幂次来对第一距离和第二距离进行同步缩放处理。
具体地，可根据如下公式(6)来计算对应每个非同属说话人类别的第一协方差在计算加权和时的权重：
其中，α表示可调参数，取值范围可以是(0，1)。α可以取0.5。
本实施例中，通过调整可调参数，可以对第一距离和第二距离进行同步缩放，从而缩小或者加大各权重之间的差异，便于针对不同环境进行调整，增加鲁棒性。
图8为一个实施例中步骤S310即根据样本集合中各样本和相应类内近邻样本确定类内差异量的步骤的流程示意图。参照图8，步骤S310具体包括如下步骤：
S802，计算样本集合中每个样本对应的类内近邻样本的第二样本均值。
具体地，可根据如下公式(7)计算第二样本均值：
其中，表示样本集合中的样本对应的类内近邻样本的均值，即第二样本均值；K表示类内近邻样本的样本数，即上述的预设数量；k表示类内近邻样本中样本的序号。
S804，根据样本集合中每个样本和相应类内近邻样本的第二样本均值计算第二协方差。
具体地，可根据如下公式(8)计算第二协方差：
其中，t表示转置；表示样本集合中第i个说话人类别中第l个样本；表示样本的类内近邻样本的第二样本均值。
S806，将第二协方差加权求和，获得类内差异量。
具体地，可采用如下公式(9)计算类内差异量：
其中，是类内差异量，在公式(9)中具体是类内方差；C表示样本集合中说话人类别总数；i是样本集合中说话人类别的序号；l是第i个说话人类别样本的序号；Ni表示第i个说话人类别的样本总数；t表示转置；表示样本的类内近邻样本的第二样本均值。
本实施例中，根据样本集合中的每个样本以及相应的第二样本均值计算出第二协方差，将第二协方差求和得到类内差异量，该类内差异量可以更加准确地衡量样本集合中相同说话人类别的样本之间的聚集程度，从而便于精确计算基向量组，从而提高利用基向量组将待处理的身份向量特征变换后的识别性能。
在一个实施例中，步骤S312包括：寻找使得目标函数最大化的正交基向量，将正交基向量组合形成基向量组。
具体地，目标函数可以是：
其中，J(vi)表示目标函数；vi是一个正交基向量；t表示转置。根据目标函数J(vi)进行优化，使得目标函数最大化，获得一系列的正交基向量v1,v2…vn。将正交基向量依次组合形成正交基向量组A＝[v1,v2…vn]。在步骤S314中进行特征变化时，可以将正交基向量组A的转置乘以待处理的身份向量得到经过特征变换的身份向量。假设待处理的身份向量为W，则AtW便是经过特征变换的身份向量。
在一个实施例中，步骤S314包括：根据基向量组将目标说话人类别的已知身份向量和待验证身份向量分别进行特征变换。该身份向量处理方法还包括：计算经过特征变换的已知身份向量和经过特征变换的待验证身份向量之间的相似度；根据相似度进行说话人身份验证。
具体地，参照图9，说话人身份识别可以应用于多种需要认证未知用户身份的场景。说话人身份识别分为线下(off-line)和线上(on-line)两个阶段：线下阶段需要收集大量的非目标说话人类别的语音用于训练说话人身份识别系统，说话人身份识别系统包括身份向量提取模块与身份向量规整模块。
线上阶段又分为两个阶段：注册阶段与识别阶段。在注册阶段中，需要获取目标说话人的语音，将该语音进行前端预处理、特征提取与模型训练后，映射为一段定长的已知身份向量，该已知身份向量即是表征目标说话人身份的一个模型。而在识别阶段中，获取一段身份未知的待验证语音，将该待验证语音同样经过前端预处理、特征提取与模型训练后，映射为一段待验证身份向量。
目标说话人的已知身份向量与识别阶段的待验证身份向量接下来都经过后端规整器，进行包括特征变换的规整与优化操作后，最后在相似度计算模块中计算相似度，相似度会与预先人工设定的一个门限值进行比较，若相似度大于等于门限值，则可判定待验证语音对应的身份与目标说话人身份匹配，身份验证通过。若相似度小于门限值，则可判定待验证语音对应的身份与目标说话人身份不匹配，身份验证未通过。相似度可采用余弦相似度、皮尔森相关系数或者欧氏距离等。
本实施例中，利用得到的基向量组对目标说话人类别的已知身份向量和待验证身份向量分别进行特征变换，使得经过特征变换的已知身份向量和待验证身份向量均具有很好的区分性，提高身份验证的准确率。
在NIST SRE 2008数据集的标准测试中，以等错概率(Equal Error Rate,EER)作为衡量指标，对于不做任何优化的原始身份向量进行身份识别，EER为5.48％。采用本实施例的身份向量处理方法将原始身份向量进行特征变换后进行身份识别，EER可以降低到5.19％，身份识别性能提升明显。其中NIST是National Insitute of Standerds andTechnology的缩写，译为美国国家标准与技术研究院；SRE是Speaker RecognitionEvaluation的缩写，译为说话人识别评价。
如图10所示，在一个实施例中，提供了一种身份向量处理装置1000，包括类间差异量确定模块1001、类内差异量确定模块1002、基向量组获取模块1003和特征变换模块1004。
类间差异量确定模块1001，用于获取样本集合，样本集合包括多个说话人类别的身份向量的样本。获取样本集合中每个样本所对应的类间近邻样本。根据样本集合中各样本和相应类间近邻样本确定类间差异量。
类内差异量确定模块1002，用于获取样本集合中每个样本所对应的类内近邻样本。根据样本集合中各样本和相应类内近邻样本确定类内差异量。
基向量组获取模块1003，用于获取基向量组，类间差异量投影到基向量组中各基向量的值最大化，且类内差异量投影到基向量组中各基向量的值最小化。
特征变换模块1004，用于根据基向量组对待处理的身份向量进行特征变换。
上述身份向量处理装置1000，类间近邻样本可以反映出样本集合中不同说话人类别的近邻样本的局部分布，类内近邻样本则可以反映出样本集合中相同说话人类别的近邻样本的局部分布，可以更准确地反映出样本集合中类内和类间之间的差异。根据样本集合中各样本和相应类间近邻样本确定的类间差异量可以准确地反映出样本集合中不同说话人类别之间的差异性，而根据样本集合中各样本和相应类内近邻样本确定的类内差异量可以准确地反映出样本集合中相同说话人类别之间的差异性。根据基向量组对待处理的身份向量进行特征变换后，经过特征变换后的身份向量具有很好的类间区分性和类内聚集性，可减少因受干扰而导致身份向量识别性能下降的情况，可提高说话人身份识别的准确性。
在一个实施例中，类间差异量确定模块1001还用于遍历样本集合中的样本；确定与遍历的样本非同属说话人类别的样本；计算遍历的样本与非同属说话人类别的样本之间的距离；将非同属说话人类别的样本中每个说话人类别的样本按照相应距离升序排序后，从首位依次选取预设数量的样本作为遍历的样本所对应的相应非同属说话人类别的类间近邻样本。
本实施例中，可精确确定样本集合中每个样本所对应的类间近邻样本，从而便于精确计算基向量组，从而提高利用基向量组将待处理的身份向量特征变换后的识别性能。
在一个实施例中，类内差异量确定模块1002还用于遍历样本集合中的样本；确定与遍历的样本同属说话人类别的样本；计算遍历的样本与同属说话人类别的样本之间的距离；将同属说话人类别的样本按照相应距离升序排序后，从首位依次选取预设数量的样本作为遍历的样本所对应的类内近邻样本。
本实施例中，可精确确定样本集合中每个样本所对应的类内近邻样本，从而便于精确计算基向量组，从而提高利用基向量组将待处理的身份向量特征变换后的识别性能。
在一个实施例中，类间差异量确定模块1001还用于计算样本集合中每个样本对应的每个非同属说话人类别的类间近邻样本的第一样本均值；根据样本集合中每个样本和相应每个非同属说话人类别的类间近邻样本的第一样本均值计算第一协方差；将第一协方差加权求和，获得类间差异量。
本实施例中，根据样本集合中的每个样本以及相应的第一样本均值计算出第一协方差，将第一协方差进行加权求和得到类间差异量，该类间差异量可以更加准确地衡量样本集合中不同说话人类别的样本之间的差异，从而便于精确计算基向量组，从而提高利用基向量组将待处理的身份向量特征变换后的识别性能。
如图11所示，在一个实施例中，身份向量处理装置1000还包括：权重计算模块1005，用于对于样本集合中的每个样本，获取与非同属说话人类别的类间近邻样本之间的第一距离，并获取与相应类内近邻样本的第二距离；取第一距离和第二距离中的最小距离；计算第一距离和第二距离的和；将最小距离除以计算出的和，得到对应每个非同属说话人类别的第一协方差在计算加权和时的权重。
本实施例中，计算权重时考虑第一距离和第二距离中的最小距离所占比重，使得权重能够准确反映不同的第一协方差对应类间差异量的影响，求得的类间差异量可以更加准确地衡量样本集合中样本之间的差异，从而便于精确计算基向量组，从而提高利用基向量组将待处理的身份向量特征变换后的识别性能。
在一个实施例中，权重计算模块1005还用于根据可调参数分别对第一距离和第二距离进行同步缩放处理。
本实施例中，通过调整可调参数，可以对第一距离和第二距离进行同步缩放，从而缩小或者加大各权重之间的差异，便于针对不同环境进行调整，增加鲁棒性。
在一个实施例中，类内差异量确定模块1002还用于计算样本集合中每个样本对应的类内近邻样本的第二样本均值；根据样本集合中每个样本和相应类内近邻样本的第二样本均值计算第二协方差；将第二协方差加权求和，获得类内差异量。
本实施例中，根据样本集合中的每个样本以及相应的第二样本均值计算出第二协方差，将第二协方差求和得到类内差异量，该类内差异量可以更加准确地衡量样本集合中相同说话人类别的样本之间的聚集程度，从而便于精确计算基向量组，从而提高利用基向量组将待处理的身份向量特征变换后的识别性能。
在一个实施例中，特征变换模块1004还用于根据基向量组将目标说话人类别的已知身份向量和待验证身份向量分别进行特征变换。如图12所示，在一个实施例中，身份向量处理装置1000还包括：身份验证模块1006，用于计算经过特征变换的已知身份向量和经过特征变换的待验证身份向量之间的相似度；根据相似度进行说话人身份验证。
本实施例中，利用得到的基向量组对目标说话人类别的已知身份向量和待验证身份向量分别进行特征变换，使得经过特征变换的已知身份向量和待验证身份向量均具有很好的区分性，提高身份验证的准确率。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，该存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (16)

1.一种身份向量处理方法，包括：
获取样本集合，所述样本集合包括从多个说话人类别的语音中提取的身份向量的样本；
获取所述样本集合中与每个样本的距离满足距离接近条件的类间近邻样本；
获取所述样本集合中与每个样本的距离满足距离接近条件的类内近邻样本；
根据所述样本集合中各样本和相应类间近邻样本的第一样本均值确定所述样本集合的类间差异量；
计算所述样本集合中每个样本对应的类内近邻样本的第二样本均值；根据所述样本集合中每个样本和相应的第二样本均值计算第二协方差；将所述样本集合中所有样本对应的第二协方差加权求和，获得所述样本集合的类内差异量；
获取基向量组，所述类间差异量投影到所述基向量组中各基向量的值最大化，且所述类内差异量投影到所述基向量组中各基向量的值最小化；
根据所述基向量组对待处理的身份向量进行特征变换。
2.根据权利要求1所述的方法，其特征在于，所述获取所述样本集合中与每个样本的距离满足距离接近条件的类间近邻样本包括：
遍历所述样本集合中的样本；
确定与遍历的样本非同属说话人类别的样本；
计算遍历的样本与所述非同属说话人类别的样本之间的距离；
将所述非同属说话人类别的样本中每个说话人类别的样本按照相应距离升序排序后，从首位依次选取预设数量的样本作为遍历的样本所对应的相应非同属说话人类别的类间近邻样本。
3.根据权利要求1所述的方法，其特征在于，所述获取所述样本集合中与每个样本的距离满足距离接近条件的类内近邻样本包括：
遍历所述样本集合中的样本；
确定与遍历的样本同属说话人类别的样本；
计算遍历的样本与所述同属说话人类别的样本之间的距离；
将所述同属说话人类别的样本按照相应距离升序排序后，从首位依次选取预设数量的样本作为遍历的样本所对应的类内近邻样本。
4.根据权利要求1所述的方法，其特征在于，所述根据所述样本集合中各样本和相应类间近邻样本的第一样本均值确定所述样本集合的类间差异量包括：
计算所述样本集合中每个样本对应的每个非同属说话人类别的类间近邻样本的第一样本均值；
根据所述样本集合中每个样本和相应每个非同属说话人类别的类间近邻样本的第一样本均值计算第一协方差；
将所述第一协方差加权求和，获得类间差异量。
5.根据权利要求4所述的方法，其特征在于，还包括：
对于所述样本集合中的每个样本，获取与所述非同属说话人类别的类间近邻样本之间的第一距离，并获取与相应类内近邻样本的第二距离；
取所述第一距离和所述第二距离中的最小距离；
计算所述第一距离和所述第二距离的和；
将所述最小距离除以计算出的和，得到对应每个非同属说话人类别的第一协方差在计算所述加权和时的权重。
6.根据权利要求5所述的方法，其特征在于，所述取所述第一距离和所述第二距离中的最小距离的步骤以及计算所述第一距离和所述第二距离的和的步骤之前，所述方法还包括：
根据可调参数分别对所述第一距离和所述第二距离进行同步缩放处理。
7.根据权利要求1所述的方法，其特征在于，所述根据所述基向量组对待处理的身份向量进行特征变换包括：
根据所述基向量组将目标说话人类别的已知身份向量和待验证身份向量分别进行特征变换；
所述方法还包括：
计算经过特征变换的所述已知身份向量和经过特征变换的待验证身份向量之间的相似度；
根据所述相似度进行说话人身份验证。
8.一种身份向量处理装置，其特征在于，包括：
类间差异量确定模块，用于获取样本集合，所述样本集合包括从多个说话人类别的语音中提取的身份向量的样本；获取所述样本集合中与每个样本的距离满足距离接近条件的类间近邻样本；根据所述样本集合中各样本和相应类间近邻样本的第一样本均值确定所述样本集合的类间差异量；
类内差异量确定模块，用于获取所述样本集合中与每个样本的距离满足距离接近条件的类内近邻样本；计算所述样本集合中每个样本对应的类内近邻样本的第二样本均值；根据所述样本集合中每个样本和相应的第二样本均值计算第二协方差；将所述样本集合中所有样本对应的第二协方差加权求和，获得所述样本集合的类内差异量；
基向量组获取模块，用于获取基向量组，所述类间差异量投影到所述基向量组中各基向量的值最大化，且所述类内差异量投影到所述基向量组中各基向量的值最小化；
特征变换模块，用于根据所述基向量组对待处理的身份向量进行特征变换。
9.根据权利要求8所述的装置，其特征在于，所述类间差异量确定模块还用于遍历所述样本集合中的样本；确定与遍历的样本非同属说话人类别的样本；计算遍历的样本与所述非同属说话人类别的样本之间的距离；将所述非同属说话人类别的样本中每个说话人类别的样本按照相应距离升序排序后，从首位依次选取预设数量的样本作为遍历的样本所对应的相应非同属说话人类别的类间近邻样本。
10.根据权利要求8所述的装置，其特征在于，所述类内差异量确定模块还用于遍历所述样本集合中的样本；确定与遍历的样本同属说话人类别的样本；计算遍历的样本与所述同属说话人类别的样本之间的距离；将所述同属说话人类别的样本按照相应距离升序排序后，从首位依次选取预设数量的样本作为遍历的样本所对应的类内近邻样本。
11.根据权利要求8所述的装置，其特征在于，所述类间差异量确定模块还用于计算所述样本集合中每个样本对应的每个非同属说话人类别的类间近邻样本的第一样本均值；根据所述样本集合中每个样本和相应每个非同属说话人类别的类间近邻样本的第一样本均值计算第一协方差；将所述第一协方差加权求和，获得类间差异量。
12.根据权利要求11所述的装置，其特征在于，还包括：
权重计算模块，用于对于所述样本集合中的每个样本，获取与所述非同属说话人类别的类间近邻样本之间的第一距离，并获取与相应类内近邻样本的第二距离；取所述第一距离和所述第二距离中的最小距离；计算所述第一距离和所述第二距离的和；将所述最小距离除以计算出的和，得到对应每个非同属说话人类别的第一协方差在计算所述加权和时的权重。
13.根据权利要求12所述的装置，其特征在于，所述权重计算模块还用于根据可调参数分别对所述第一距离和所述第二距离进行同步缩放处理。
14.根据权利要求8所述的装置，其特征在于，所述特征变换模块还用于根据所述基向量组将目标说话人类别的已知身份向量和待验证身份向量分别进行特征变换；
所述装置还包括：
身份验证模块，用于计算经过特征变换的所述已知身份向量和经过特征变换的待验证身份向量之间的相似度；根据所述相似度进行说话人身份验证。
15.一种计算机可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述方法的步骤。
16.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述方法的步骤。
CN201610560347.0A 2016-07-15 2016-07-15 身份向量处理方法和装置 Active CN106128466B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201610560347.0A CN106128466B (zh) 2016-07-15 2016-07-15 身份向量处理方法和装置
PCT/CN2017/092530 WO2018010646A1 (zh) 2016-07-15 2017-07-11 身份向量处理方法和计算机设备
EP17826982.5A EP3486902A4 (en) 2016-07-15 2017-07-11 METHOD FOR PROCESSING IDENTITY VECTORS AND COMPUTER DEVICE
US15/954,416 US10650830B2 (en) 2016-07-15 2018-04-16 Identity vector processing method and computer device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610560347.0A CN106128466B (zh) 2016-07-15 2016-07-15 身份向量处理方法和装置

Publications (2)

Publication Number Publication Date
CN106128466A CN106128466A (zh) 2016-11-16
CN106128466B true CN106128466B (zh) 2019-07-05

Family

ID=57284147

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610560347.0A Active CN106128466B (zh) 2016-07-15 2016-07-15 身份向量处理方法和装置

Country Status (4)

Country Link
US (1) US10650830B2 (zh)
EP (1) EP3486902A4 (zh)
CN (1) CN106128466B (zh)
WO (1) WO2018010646A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105869645B (zh) * 2016-03-25 2019-04-12 腾讯科技（深圳）有限公司 语音数据处理方法和装置
CN106128466B (zh) 2016-07-15 2019-07-05 腾讯科技（深圳）有限公司 身份向量处理方法和装置
US11487791B2 (en) * 2019-03-29 2022-11-01 Microsoft Technology Licensing, Llc Latent feature extraction from a network graph
CN113408556B (zh) * 2020-03-16 2023-08-22 杭州海康威视数字技术股份有限公司 身份识别方法及装置
CN113763968B (zh) * 2021-09-08 2024-05-07 北京百度网讯科技有限公司 用于识别语音的方法、装置、设备、介质和产品

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101650944A (zh) * 2009-09-17 2010-02-17 浙江工业大学 基于保类内核Fisher判别法的说话人辨别实现方法
CN104167208A (zh) * 2014-08-08 2014-11-26 中国科学院深圳先进技术研究院 一种说话人识别方法和装置
CN104538035A (zh) * 2014-12-19 2015-04-22 深圳先进技术研究院 一种基于Fisher超向量的说话人识别方法及系统
CN104573714A (zh) * 2014-12-31 2015-04-29 南京理工大学 自适应无参数的特征提取方法
CN105261367A (zh) * 2014-07-14 2016-01-20 中国科学院声学研究所 一种说话人识别方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0744514A (ja) * 1993-07-27 1995-02-14 Matsushita Electric Ind Co Ltd ニューラルネットの学習用データ縮約化方法
US6499012B1 (en) * 1999-12-23 2002-12-24 Nortel Networks Limited Method and apparatus for hierarchical training of speech models for use in speaker verification
DE50312046D1 (de) * 2002-09-23 2009-12-03 Infineon Technologies Ag Verfahren zur rechnergestützten Spracherkennung, Spracherkennungssystem und Steuereinrichtung zum Steuern eines technischen Systems und Telekommunikationsgerät
FR2848715B1 (fr) * 2002-12-11 2005-02-18 France Telecom Procede et systeme de correction multi-references des deformations spectrales de la voix introduites par un reseau de communication
US8218880B2 (en) * 2008-05-29 2012-07-10 Microsoft Corporation Linear laplacian discrimination for feature extraction
US7961956B1 (en) * 2009-09-03 2011-06-14 Thomas Cecil Minter Adaptive fisher's linear discriminant
US20140250523A1 (en) * 2012-10-11 2014-09-04 Carnegie Mellon University Continuous Authentication, and Methods, Systems, and Software Therefor
US9471886B2 (en) * 2013-10-29 2016-10-18 Raytheon Bbn Technologies Corp. Class discriminative feature transformation
CN105160303A (zh) * 2015-08-10 2015-12-16 上海闻泰电子科技有限公司 基于混合匹配的指纹识别方法
CN106128466B (zh) * 2016-07-15 2019-07-05 腾讯科技（深圳）有限公司 身份向量处理方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101650944A (zh) * 2009-09-17 2010-02-17 浙江工业大学 基于保类内核Fisher判别法的说话人辨别实现方法
CN105261367A (zh) * 2014-07-14 2016-01-20 中国科学院声学研究所 一种说话人识别方法
CN104167208A (zh) * 2014-08-08 2014-11-26 中国科学院深圳先进技术研究院 一种说话人识别方法和装置
CN104538035A (zh) * 2014-12-19 2015-04-22 深圳先进技术研究院 一种基于Fisher超向量的说话人识别方法及系统
CN104573714A (zh) * 2014-12-31 2015-04-29 南京理工大学 自适应无参数的特征提取方法

Also Published As

Publication number Publication date
EP3486902A4 (en) 2019-06-12
WO2018010646A1 (zh) 2018-01-18
CN106128466A (zh) 2016-11-16
EP3486902A1 (en) 2019-05-22
US10650830B2 (en) 2020-05-12
US20180233151A1 (en) 2018-08-16

Similar Documents

Publication Publication Date Title
CN106128466B (zh) 身份向量处理方法和装置
Zhou et al. Resnext and res2net structures for speaker verification
CN110222170B (zh) 一种识别敏感数据的方法、装置、存储介质及计算机设备
CN106169295B (zh) 身份向量生成方法和装置
CN110289003B (zh) 一种声纹识别的方法、模型训练的方法以及服务器
Leng et al. MBNet: MOS prediction for synthesized speech with mean-bias network
JP6429945B2 (ja) 音声データを処理するための方法及び装置
CN105261367B (zh) 一种说话人识别方法
CN109360572B (zh) 通话分离方法、装置、计算机设备及存储介质
WO2020024396A1 (zh) 音乐风格识别方法、装置、计算机设备及存储介质
CN108766459A (zh) 一种多人语音混合中目标说话人估计方法及系统
CN112700794B (zh) 一种音频场景分类方法、装置、电子设备和存储介质
CN113515988B (zh) 掌纹识别方法、特征提取模型训练方法、设备及介质
CN108922544A (zh) 通用向量训练方法、语音聚类方法、装置、设备及介质
KR100792016B1 (ko) 오디오 및 비디오 정보를 이용한 등장인물 기반 비디오요약 장치 및 그 방법
CN110088835A (zh) 使用相似性测度的盲源分离
CN111312286A (zh) 年龄识别方法、装置、设备及计算机可读存储介质
CN110147843A (zh) 基于度量学习的语音时序数据相似性度量方法
CN108770002B (zh) 基站流量分析方法、装置、设备及存储介质
CN111062440B (zh) 一种样本选择方法、装置、设备及存储介质
CN111666996A (zh) 一种基于attention机制的高精度设备源识别方法
CN114168788A (zh) 音频审核的处理方法、装置、设备及存储介质
Zhang et al. Speaker verification system based on deformable cnn and time-frequency attention
Bui et al. A non-linear GMM KL and GUMI kernel for SVM using GMM-UBM supervector in home acoustic event classification
Schulze et al. Performance of PSO and GWO algorithms applied in text-independent speaker identification

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant