CN108074561A - 语音处理方法及装置 - Google Patents
语音处理方法及装置 Download PDFInfo
- Publication number
- CN108074561A CN108074561A CN201711334122.4A CN201711334122A CN108074561A CN 108074561 A CN108074561 A CN 108074561A CN 201711334122 A CN201711334122 A CN 201711334122A CN 108074561 A CN108074561 A CN 108074561A
- Authority
- CN
- China
- Prior art keywords
- voice
- phonetic order
- testing result
- processing
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 101
- 238000000034 method Methods 0.000 title claims abstract description 60
- 238000012360 testing method Methods 0.000 claims abstract description 57
- 238000001514 detection method Methods 0.000 claims description 27
- 230000009471 action Effects 0.000 claims description 23
- 238000004891 communication Methods 0.000 claims description 15
- 238000000605 extraction Methods 0.000 claims description 11
- 235000013399 edible fruits Nutrition 0.000 claims description 5
- 230000008569 process Effects 0.000 abstract description 26
- 238000005516 engineering process Methods 0.000 abstract description 9
- 238000012795 verification Methods 0.000 description 27
- 241000220317 Rosa Species 0.000 description 14
- 238000013528 artificial neural network Methods 0.000 description 8
- 238000013527 convolutional neural network Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000000306 recurrent effect Effects 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000007935 neutral effect Effects 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 230000004888 barrier function Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及计算机技术领域,提供了一种语音处理方法及装置,该语音处理方法包括:对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息;根据预设的语音唤醒模块对所述语音特征信息进行检测,得到检测结果,所述检测结果中包含有与语音特征信息匹配的目标语音特征信息;基于包含该目标语音特征信息的检测结果进行对应的处理。本发明中,实现了基于语音指令的对应处理,并且通过语音指令的控制,实现了无需人为操作即可实现对应操作的处理过程,降低了人为劳动力,提升了处理效率,也通过这种免去人为操作过程的处理,并且提升了用户的使用感受。
Description
技术领域
本发明涉及计算机技术领域,特别是涉及一种语音处理方法及装置。
背景技术
随着消费类电子产品快速的发展,电子产品的功能性也越发强大。语音作为人类最基本的方式,将语音识别技术应用到消费类电子产品中,实现通过自然语音来控制此类产品的功能是未来发展的趋势。
随着科技发展,尤其手机终端与多媒体终端设备的科技、智能化发展,人们在使用这些设备时,也不再仅仅是局限于其最初的基本操作功能,而是在追求越发智能化、人性化、便捷化的功能需求。
如何能通过语音识别技术实现满足上述功能需求的技术方案,成为了当前亟待解决的技术问题。
发明内容
本发明提供语音处理方法及装置,以实现基于语音指令的对应处理,提升处理效率,并且提升用户的使用感受。
本发明提供了一种语音处理方法,包括:
对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息;
根据预设的语音唤醒模块对所述语音特征信息中进行检测,得到检测结果,所述检测结果中包含有与语音特征信息匹配的目标语音特征信息;
基于包含该目标语音特征信息的检测结果进行对应的处理。
优选地,所述对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息,包括:
对所述语音指令进行声学特征提取,得到该语音指令对应的梅尔频率倒谱系数MFCC特征信息。
优选地,所述根据预设的语音唤醒模块对所述语音特征信息进行检测,包括:
根据所述语音唤醒模块对语音特征信息进行匹配,确定所述语音唤醒模块中是否存储有与语音特征信息匹配的目标语音特征信息;
并在匹配成功时,得到该匹配的目标语音特征信息。
优选地,还包括:
根据预设的语义识别模块对所述语音特征信息进行检测,得到检测结果。
优选地,所述语音特征信息包括语义特征,所述根据预设的语义识别模块对所述语音特征信息进行检测,得到检测结果,包括:
根据预设的语义识别模块对所述语义特征进行识别,得到多个语义识别结果;
并在得到的多个语义识别结果中确认语义匹配度最高的语义识别结果。
优选地,还包括:
获取当前用户触发的动作和/或人脸;
对当前用户触发的动作和/或人脸进行识别检测,得到识别结果;
其中,所述基于包含该目标语音特征信息的检测结果进行对应的处理,包括:
基于包含该目标语音特征信息的检测结果,并结合基于动作和/或人脸识别结果,进行对应的处理。
优选地,所述基于包含该目标语音特征信息的检测结果进行对应的处理,包括:
基于所述包含该目标语音特征信息的检测结果按照所述语音指令进行对应的处理;或,
基于所述包含该目标语音特征信息的检测结果不做任何处理。
优选地,所述基于所述包含该目标语音特征信息的检测结果按照所述语音指令进行对应的处理,包括:
确定所述语音指令对应的指示信息;
根据所述指示信息做相应的处理。
优选地,所述指示信息包括如下任一项:
基于网络直播平台和/或多媒体采集设备中的拍照和/或摄像指令;
基于多媒体设备中的播放和/或暂停指令。
本发明还提供了一种语音处理装置,包括:
解析单元,用于对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息;
第一处理单元,用于根据预设的语音唤醒模块对所述语音特征信息进行检测,得到检测结果,所述检测结果中包含有与语音特征信息匹配的目标语音特征信息;基于包含该目标语音特征信息的检测结果进行对应的处理。
优选地,所述解析单元,具体用于对所述语音指令进行声学特征提取,得到该语音指令对应的梅尔频率倒谱系数MFCC特征信息。
优选地,
所述第一处理单元,用于根据所述语音唤醒模块对所述语音特征信息进行匹配,确定所述语音唤醒模块中是否存储有与所述语音特征信息匹配的目标语音特征信息;并在匹配成功时,得到该匹配的目标语音特征信息。
优选地,
所述第一处理单元,还用于根据预设的语义识别模块对所述语音特征信息进行检测,得到检测结果。
优选地,所述语音特征信息包括语义特征,
所述第一处理单元,还用于根据预设的语义识别模块对所述语义特征进行识别,得到多个语义识别结果;并在得到的多个语义识别结果中确认语义匹配度最高的语义识别结果。
优选地,还包括:
获取单元,用于获取当前用户触发的动作和/或人脸;
第二处理单元,用于对当前用户触发的动作和/或人脸进行识别检测,得到识别结果;
所述第一处理单元,还用于基于包含该目标语音特征信息的检测结果,并结合基于动作和/或人脸识别结果,进行对应的处理。
优选地,
所述第一处理单元,用于基于所述包含该目标语音特征信息的检测结果按照所述语音指令进行对应的处理;或,基于所述包含该目标语音特征信息的检测结果不做任何处理。
优选地,所述第一处理单元,具体用于确定所述语音指令对应的指示信息;根据所述指示信息做相应的处理。
优选地,所述指示信息包括如下任一项:
基于网络直播平台和/或多媒体采集设备中的拍照和/或摄像指令;
基于多媒体设备中的播放和/或暂停指令。
本发明还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现上述的方法。
本发明还提供了一种计算设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行上述方法对应的操作。
与现有技术相比,本发明至少具有以下优点:
通过对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息的处理,实现了对所需求语音指令的特征提取,为后续对于该提取的特征的检测处理提供了保障;并且通过预设的语音唤醒模块对该提取出的语音特征信息的检测,再根据得到的包含有与语音特征信息匹配的目标语音特征信息的检测结果来进行对应的处理,实现了基于语音指令的对应处理,并且通过语音指令的控制,实现了无需人为操作即可实现对应操作的处理过程,降低了人为劳动力,提升了处理效率,也通过这种免去人为操作过程的处理,并且提升了用户的使用感受。
附图说明
图1是本发明提供的语音处理方法的流程示意图;
图2是本发明提供的语音处理装置的结构图。
具体实施方式
本发明提出一种语音处理方法及装置,下面结合附图,对本发明具体实施方式进行详细说明。
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时,它可以直接连接或耦接到其他元件,或者也可以存在中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
本技术领域技术人员可以理解,除非另外定义,这里使用的所有术语(包括技术术语和科学术语),具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。
本发明提供了一种语音处理方法,如图1所示,包括:
步骤101,对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息。
本步骤中,所述对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息,包括:
对所述语音指令进行声学特征提取,得到该语音指令对应的梅尔频率倒谱系数MFCC(Mel Frequency Cepstrum Coefficient)特征信息。
具体的,对所述语音指令经过预滤波、预加重、分帧、加窗后可以得到每帧语音的时域信号,对每一帧时频信号做离散傅里叶变换(DFT)得到频域信号,完成时域转换成频域,求频域信号的平方,即能量谱;通过使用M个Mel带通滤波器对其进行滤波,计算第m个滤波器输出的能量对数叠加,再经离散余弦变换(DCT)即可得到Mel倒谱系数MFCC。
其中,本发明还包括:
获取当前用户触发的动作和/或人脸;
对当前用户触发的动作和/或人脸进行识别检测,得到识别结果。
针对上述的动作验证过程,可以是手势验证过程,具体的,通过对当前用户触发的手势动作进行识别检测,得到对应的检测结果,进而实现根据检测结果进行对应的指令处理,如双手环抱构成心形,则在检测成功后在当前界面显示心形图案。
当然,该手势验证过程还可以作为解锁验证,具体的,在显示界面向用户显示手势验证请求,请求当前用户输入预定的手势动作,并在当前显示界面的指定区域内随机生成多个不重合的采集点,然后采集用户触发各采集点生成的连线图,构成手势验证码,并对该构成的手势验证码与预先存储的解锁手势动作进行对比分析验证,得到验证结果;若验证结果为手势验证码与预先存储的解锁手势动作匹配,则确定验证成功,解锁当前界面,以待后续随时采集该用户的语音指令;若验证结果为手势验证码与预先存储的解锁手势动作不匹配,则确定验证失败,无法解锁当前界面,并在该界面显示“验证失败”的指示信息。
其中,上述所提及的手势验证过程仅是为了说明本发明的动作验证过程所列举的一个实施例,对于其他能够达到本发明的动作验证过程相同技术效果的动作验证过程均在本发明的保护范围之内。
对于基于人脸的验证过程,具体的,通过对当前用户触发的人脸进行识别检测,得到对应的检测结果,进而实现根据检测结果进行对应的指令处理,如当前用户露出笑脸,则在检测成功后在当前界面中笑脸的对应位置处分别显示小酒窝。
当然,该人脸验证过程也同样可以作为解锁验证,具体的,在显示界面向用户显示人脸验证请求,请求当前用户触发人脸验证,并在当前显示界面提供指定的输入区域,然后采集用户提供的人脸信息,构成人脸验证码,并对该构成的人脸验证码与预先存储的解锁人脸信息进行对比分析验证,得到验证结果;若验证结果为人脸验证码与预先存储的解锁人脸信息匹配,则确定验证成功,解锁当前界面,以待后续随时采集该用户的语音指令;若验证结果为人脸验证码与预先存储的解锁人脸信息不匹配,则确定验证失败,无法解锁当前界面,并在该界面显示“验证失败”的指示信息。
通过该验证作为指令输入的一种,增加了指令的处理方式,将指令并不仅局限于语音指令,故而提升了用户的使用感受;通过该验证作为解锁过程的添加,保障了设备的安全,提升了其安全性。
当然,在实际处理过程中,上述的解锁验证过程可以根据当前用户的使用需要由用户自行设定,并不限定一定要在获取语音指令之前进行上述的解锁验证过程。
其中,上述动作和/或人脸的验证过程,可以发生在语音唤醒模块对语音特征信息的识别检测之前或之后,也可以和语音唤醒模块对语音特征信息的识别检测同时进行处理。由于语音唤醒模块对语音的识别检测速度高于动作和/或人脸的验证速度,故优选地,可先进行语音唤醒模块对语音特征信息的识别检测,再对动作和/或人脸进行验证。例如,在相机开启之后,先接收到用户触发的动作“手摆出‘V’的姿势”,对其进行识别,得到识别结果;之后再接收到用户发送的语音指令“拍照”,经语音唤醒模块的识别检测,确认需要进行拍照处理,从而实现了快速“拍照”操作。当然,上述实施例仅是为了说明本发明方案所列举的一个优选实施例,对于其他任意能够实现上述本发明的方案都在本发明的保护范围之内。
步骤102,根据预设的语音唤醒模块对所述语音特征信息进行检测,得到检测结果。
其中,该检测结果中包含有与语音特征信息匹配的目标语音特征信息。
优选地,所述根据预设的语音唤醒模块对所述语音特征信息进行检测,包括:
根据所述语音唤醒模块对语音特征信息进行匹配,确定所述语音唤醒模块中是否存储有与语音特征信息匹配的目标语音特征信息;
并在匹配成功时,得到该匹配的目标语音特征信息。
具体的,该语音唤醒模块可以是基于表征语音指令的各预设词汇的MFCC特征信息的语音特征信息的数据训练生成。
对于其训练过程,可以包括:选取特定的唤醒词样本(如拍照、录像、下玫瑰雨等),进行特征抽取得到各MFCC特征信息;对各MFCC特征信息进行神经网络的深度学习过程处理,从而构建语音唤醒模块。其中,该神经网络可以为CNN(Convolutional NeuralNetwork,卷积神经网络)、DNN(Deep Neural Network,深层神经网络)或RNN(Recurrentneural Network、循环神经网络)。
若基于上述语音唤醒模块处理得到的处理结果为匹配成功时,得到该匹配的目标语音特征信息;从而实现了对该语音指令的有效识别。
若基于上述语音唤醒模块处理得到的处理结果为匹配失败,则无法得到该匹配的目标语音特征信息,流程结束。
进一步地,在对所提取的语音特征信息进行检测时,还可以通过预设的语义识别模块来进行该检测,得到对应的检测结果,以通过该语义识别模块的搭配检测,实现了对语音指令的精确检测匹配,提高了对语音指令处理的精准度。
其中,在利用预设的语义识别模块进行检测时,所述语音特征信息包括语义特征;所述根据预设的语义识别模块对所述语音特征信息进行检测,得到检测结果,包括:
根据预设的语义识别模块对所述语义特征进行识别,得到多个语义识别结果;
并在得到的多个语义识别结果中确认语义匹配度最高的语义识别结果。
具体的,预先根据大量具有语义的语料训练该语义识别模块,从而根据该预先训练的语义识别模块对该语义特征进行分析,以根据分析结果找到与该语义特征的语义匹配度最高目标语义特征。
对于其训练过程,可以包括:选取大量的样本,进行特征抽取,得到各样本数据的语义特征;对语义特征进行神经网络的深度学习过程处理,从而构建语义识别模块。其中,该神经网络可以为CNN(Convolutional Neural Network,卷积神经网络)、DNN(DeepNeural Network,深层神经网络)或RNN(Recurrent neural Network、循环神经网络)。
对于上述语义识别模块的构建,根据处理的需要,可以构建所需的模块,即选取的样本数据决定了构建的模块所能检测的数据。
具体的,通过语义识别模块对该语义特征进行语义识别,得到多个不同的语义识别结果,并通过该语义识别模块来对得到的多个语义识别结果进行确认,从该多个语义识别结果中筛选出语义匹配度最高的语义识别结果。通过该语义识别模块的配合处理,进而实现了对该语音指令的进一步验证,提高了对语音指令处理的精准度。
步骤103,基于包含该目标语音特征信息的检测结果进行对应的处理。
其中,所述基于包含该目标语音特征信息的检测结果进行对应的处理,包括:
基于包含该目标语音特征信息的检测结果,并结合基于动作和/或人脸识别结果,进行对应的处理。
进一步地,该基于包含该目标语音特征信息的检测结果进行对应的处理,包括两种方式,即处理与不处理:
(1)基于所述包含该目标语音特征信息的检测结果按照所述语音指令进行对应的处理。
具体的,该基于所述包含该目标语音特征信息的检测结果按照所述语音指令进行对应的处理,包括:
确定所述语音指令对应的指示信息;
根据所述指示信息做相应的处理。
更进一步地,所述指示信息包括如下任一项:
基于网络直播平台和/或多媒体采集设备中的拍照和/或摄像指令;
基于多媒体设备中的播放和/或暂停指令。
(2)基于所述包含该目标语音特征信息的检测结果不做任何处理。
顾名思义,也即检测结果为未匹配上,所以不再做任何的处理,直接结束流程。当然,还可以不结束该流程,而选择发送提示消息,告知当前用户无法识别该语音指令或者未匹配到该语音指令,以使当前用户可以尝试调整该语音指令或者重新发送该语音指令。
基于上述本发明所提供的语音处理方法,下面以三个具体的优选实施例对该方法做具体阐述,当然,该三个优选实施例仅是为了说明本发明方案所优选的实施方式,并不能代表本发明技术方案的全部。其中,上述本发明的语音处理方法可以应用于网络直播平台(可以是手机上的直播平台,也可以是电脑上的直播平台)中,也可以应用于多媒体采集设备(如手机终端的照相功能、摄像功能)中,还可以应用于多媒体设备(如电视)中。
实施例一
在用户打开手机的相机后,根据用户输入的手势动作进行对应的验证处理,并在对当前用户提供的手势动作验证的同时,采集到用户发送的语音指令“拍照”后,对该语音指令“拍照”进行解析,提取特征后得到该语音指令对应的MFCC特征信息,根据预先训练好的语音唤醒模块对该MFCC特征信息进行匹配检测,确定出与该MFCC特征信息匹配的目标语音的目标特征信息,得到该目标语音的目标语音特征;并通过对其进行转换,得到可识别的目标语音“拍照”。进而基于该解析得到的目标语音“拍照”,实现在该手机上执行“拍照”处理。通过上述实施例,实现了基于语音的处理,并且通过语音指令的控制,实现了无需人为操作即可实现拍照的过程,降低了人为劳动力,提升了处理效率,也通过这种免去人为操作过程的处理,进一步提升了用户的使用感受。
实施例二
在用户使用手机的直播平台时,展示该直播平台对应的操作显示界面;当在任意时刻采集到用户发送的语音指令“下玫瑰雨”时,对该语音指令“下玫瑰雨”进行解析,提取特征后得到该语音指令对应的MFCC特征信息,根据预先训练好的语音唤醒模块对该MFCC特征信息进行匹配检测,确定出与该MFCC特征信息匹配的目标语音的目标特征信息,得到该目标语音的目标语音特征“下玫瑰雨”;同时,在解析时还得到了该语音指令的语义特征,通过预先训练好的语义识别模块对该解析得到的语义特征进行识别检测,得到对应的多个语义识别结果“下”、“玫瑰”、“玫瑰雨”、“下玫瑰雨”、“下玫瑰”等,通过对得到的各语义识别结果进行识别,确认出语义匹配度最高的语义识别结果“下玫瑰雨”;并结合上述语音唤醒模块的检测结果对该得到的语义匹配度最高的语义识别结果进行进一步地验证,确认该语义匹配度最高的语义识别结果“下玫瑰雨”与经语音唤醒模块匹配检测得到的结果一致,均为“下玫瑰雨”,进而对该特征“下玫瑰雨”进行转换得到可识别的目标语音“下玫瑰雨”,基于该确认的目标语音“下玫瑰雨”,在该直播平台中进行对应的下玫瑰雨处理。通过上述实施例,实现了基于语音的处理,并且通过语音指令的控制,实现了无需人为操作即可实现拍照的过程,降低了人为劳动力,提升了拍照效率,同时通过语音唤醒模块与语义识别模块的结合处理,提升了语音识别的准确度,也进一步提升了处理效率,并通过这种免去人为操作过程的处理,进一步提升了用户的使用感受。
当然,在上述直播平台的实施例中,该语音指令还可以是“我要拍照”,通过对应的识别检测处理,实现在该直播平台中调用摄像头进行对应的拍照处理。
实施例三
当前用户打开电视,使电视处于打开状态,当用户准备去厨房做饭时,发送语音指令“暂停”,电视采集到用户所发送的该语音指令“暂停”,对该语音指令“暂停”进行解析,提取特征后得到对应的MFCC特征信息,根据预先训练好的语音唤醒模块对该MFCC特征信息进行匹配检测,确定出与该MFCC特征信息匹配的目标语音的目标特征信息,得到该目标语音的目标语音特征;并通过对其进行转换,得到可识别的目标语音“暂停”。进而基于该解析得到的目标语音“暂停”,实现在该电视上执行对应的暂停播放当前节目的处理。通过上述实施例,实现了基于语音的处理,以及根据语音指令的控制,实现了无需人为操作即可实现拍照的过程,降低了人为劳动力,提升了处理效率,也通过这种免去人为操作过程的处理,进一步提升了用户的使用感受。
基于上述本发明所提供的语音处理方法,本发明还提供了一种语音处理装置,如图2所示,包括:
解析单元21,用于对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息;
第一处理单元22,用于根据预设的语音唤醒模块对所述语音特征信息进行检测,得到检测结果,所述检测结果中包含有与语音特征信息匹配的目标语音特征信息;基于包含该目标语音特征信息的检测结果进行对应的处理。
优选地,所述解析单元21,具体用于对所述语音指令进行声学特征提取,得到该语音指令对应的梅尔频率倒谱系数MFCC特征信息。
优选地,
所述第一处理单元22,用于根据所述语音唤醒模块对所述语音特征信息进行匹配,确定所述语音唤醒模块中是否存储有与所述语音特征信息匹配的目标语音特征信息;并在匹配成功时,得到该匹配的目标语音特征信息。
优选地,
所述第一处理单元22,还用于根据预设的语义识别模块对所述语音特征信息进行检测,得到检测结果。
优选地,所述语音特征信息包括语义特征,
所述第一处理单元22,还用于根据预设的语义识别模块对所述语义特征进行识别,得到多个语义识别结果;并在得到的多个语义识别结果中确认语义匹配度最高的语义识别结果。
优选地,还包括:
获取单元23,用于获取当前用户触发的动作和/或人脸;
第二处理单元24,用于对当前用户触发的动作和/或人脸进行检测,得到识别结果;
所述第一处理单元22,还用于基于包含该目标语音特征信息的检测结果,并结合基于动作和/或人脸识别结果,进行对应的处理。
优选地,
所述第一处理单元22,用于基于所述包含该目标语音特征信息的检测结果按照所述语音指令进行对应的处理;或,基于所述包含该目标语音特征信息的检测结果不做任何处理。
优选地,所述第一处理单元22,具体用于确定所述语音指令对应的指示信息;根据所述指示信息做相应的处理。
优选地,所述指示信息包括如下任一项:
基于网络直播平台和/或多媒体采集设备中的拍照和/或摄像指令;
基于多媒体设备中的播放和/或暂停指令。
本发明还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现上述的方法。
本发明还提供了一种计算设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行上述方法对应的操作。
与现有技术相比,本发明至少具有以下优点:
通过对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息的处理,实现了对所需求语音指令的特征提取,为后续对于该提取的特征的检测处理提供了保障;并且通过预设的语音唤醒模块对该提取出的语音特征信息的检测,再根据得到的包含有与语音特征信息匹配的目标语音特征信息的检测,再根据检测结果来进行对应的处理,实现了基于语音指令的对应处理,并且通过语音指令的控制,实现了无需人为操作即可实现对应操作的处理过程,降低了人为劳动力,提升了处理效率,同时通过语音唤醒模块与语义识别模块的结合处理,提升了语音识别的准确度,也进一步提升了处理效率,并通过这种免去人为操作过程的处理,进一步提升了用户的使用感受。
本技术领域技术人员可以理解,可以用计算机程序指令来实现这些结构图和/或框图和/或流图中的每个框以及这些结构图和/或框图和/或流图中的框的组合。本技术领域技术人员可以理解,可以将这些计算机程序指令提供给通用计算机、专业计算机或其他可编程数据处理方法的处理器来实现,从而通过计算机或其他可编程数据处理方法的处理器来执行本发明公开的结构图和/或框图和/或流图的框或多个框中指定的方案。
其中,本发明装置的各个模块可以集成于一体,也可以分离部署。上述模块可以合并为一个模块,也可以进一步拆分成多个子模块。
本领域技术人员可以理解附图只是一个优选实施例的示意图,附图中的模块或流程并不一定是实施本发明所必须的。
本领域技术人员可以理解实施例中的装置中的模块可以按照实施例描述进行分布于实施例的装置中,也可以进行相应变化位于不同于本实施例的一个或多个装置中。上述实施例的模块可以合并为一个模块,也可以进一步拆分成多个子模块。
上述本发明序号仅仅为了描述,不代表实施例的优劣。
以上公开的仅为本发明的几个具体实施例,但是,本发明并非局限于此,任何本领域的技术人员能思之的变化都应落入本发明的保护范围。
Claims (10)
1.一种语音处理方法,其特征在于,包括:
对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息;
根据预设的语音唤醒模块对所述语音特征信息进行检测,得到检测结果,所述检测结果中包含有与语音特征信息匹配的目标语音特征信息;
基于包含该目标语音特征信息的检测结果进行对应的处理。
2.如权利要求1所述的方法,其特征在于,所述对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息,包括:
对所述语音指令进行声学特征提取,得到该语音指令对应的梅尔频率倒谱系数MFCC特征信息。
3.如权利要求1或2所述的方法,其特征在于,所述根据预设的语音唤醒模块对所述语音特征信息进行检测,包括:
根据所述语音唤醒模块对语音特征信息进行匹配,确定所述语音唤醒模块中是否存储有与语音特征信息匹配的目标语音特征信息;
并在匹配成功时,得到该匹配的目标语音特征信息。
4.如权利要求1-3中任一项所述的方法,其特征在于,还包括:
根据预设的语义识别模块对所述语音特征信息进行检测,得到检测结果。
5.如权利要求4所述的方法,其特征在于,所述语音特征信息包括语义特征,所述根据预设的语义识别模块对所述语音特征信息进行检测,得到检测结果,包括:
根据预设的语义识别模块对所述语义特征进行识别,得到多个语义识别结果;
并在得到的多个语义识别结果中确认语义匹配度最高的语义识别结果。
6.如权利要求1-5中任一项所述的方法,其特征在于,还包括:
获取当前用户触发的动作和/或人脸;
对当前用户触发的动作和/或人脸进行识别检测,得到识别结果;
其中,所述基于包含该目标语音特征信息的检测结果进行对应的处理,包括:
基于包含该目标语音特征信息的检测结果,并结合基于动作和/或人脸识别结果,进行对应的处理。
7.如权利要求1-6中任一项所述的方法,其特征在于,所述基于包含该目标语音特征信息的检测结果进行对应的处理,包括:
基于所述包含该目标语音特征信息的检测结果按照所述语音指令进行对应的处理;或,
基于所述包含该目标语音特征信息的检测结果不做任何处理。
8.一种语音处理装置,其特征在于,包括:
解析单元,用于对获取到的语音指令进行解析,得到所述语音指令对应的语音特征信息;
第一处理单元,用于根据预设的语音唤醒模块对所述语音特征信息进行检测,得到检测结果,所述检测结果中包含有与语音特征信息匹配的目标语音特征信息;基于包含该目标语音特征信息的检测结果进行对应的处理。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现权利要求1-7中任一项所述的方法。
10.一种计算设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行如权利要求1-7中任一项所述的语音处理方法对应的操作。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711334122.4A CN108074561A (zh) | 2017-12-08 | 2017-12-08 | 语音处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711334122.4A CN108074561A (zh) | 2017-12-08 | 2017-12-08 | 语音处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108074561A true CN108074561A (zh) | 2018-05-25 |
Family
ID=62158345
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711334122.4A Pending CN108074561A (zh) | 2017-12-08 | 2017-12-08 | 语音处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108074561A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108986809A (zh) * | 2018-08-30 | 2018-12-11 | 广东小天才科技有限公司 | 一种便携式设备及其唤醒方法和装置 |
CN109243446A (zh) * | 2018-10-01 | 2019-01-18 | 厦门快商通信息技术有限公司 | 一种基于rnn网络的语音唤醒方法 |
CN109672821A (zh) * | 2018-12-29 | 2019-04-23 | 苏州思必驰信息科技有限公司 | 基于语音控制的摄影方法、装置及系统 |
CN110349577A (zh) * | 2019-06-19 | 2019-10-18 | 深圳前海达闼云端智能科技有限公司 | 人机交互方法、装置、存储介质及电子设备 |
CN110610699A (zh) * | 2019-09-03 | 2019-12-24 | 北京达佳互联信息技术有限公司 | 语音信号处理方法、装置、终端、服务器及存储介质 |
CN116026004A (zh) * | 2023-02-01 | 2023-04-28 | 青岛海尔空调器有限总公司 | 空调器的唤醒方法、唤醒装置及空调器 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103021409A (zh) * | 2012-11-13 | 2013-04-03 | 安徽科大讯飞信息科技股份有限公司 | 一种语音启动拍照系统 |
CN103456299A (zh) * | 2013-08-01 | 2013-12-18 | 百度在线网络技术(北京)有限公司 | 一种控制语音识别的方法和装置 |
CN105425648A (zh) * | 2016-01-11 | 2016-03-23 | 北京光年无限科技有限公司 | 便携机器人及其数据处理方法和系统 |
CN105931637A (zh) * | 2016-04-01 | 2016-09-07 | 金陵科技学院 | 一种可自定义指令识别的语音拍照系统 |
CN106157956A (zh) * | 2015-03-24 | 2016-11-23 | 中兴通讯股份有限公司 | 语音识别的方法及装置 |
CN106791370A (zh) * | 2016-11-29 | 2017-05-31 | 北京小米移动软件有限公司 | 一种拍摄照片的方法和装置 |
-
2017
- 2017-12-08 CN CN201711334122.4A patent/CN108074561A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103021409A (zh) * | 2012-11-13 | 2013-04-03 | 安徽科大讯飞信息科技股份有限公司 | 一种语音启动拍照系统 |
CN103456299A (zh) * | 2013-08-01 | 2013-12-18 | 百度在线网络技术(北京)有限公司 | 一种控制语音识别的方法和装置 |
CN106157956A (zh) * | 2015-03-24 | 2016-11-23 | 中兴通讯股份有限公司 | 语音识别的方法及装置 |
CN105425648A (zh) * | 2016-01-11 | 2016-03-23 | 北京光年无限科技有限公司 | 便携机器人及其数据处理方法和系统 |
CN105931637A (zh) * | 2016-04-01 | 2016-09-07 | 金陵科技学院 | 一种可自定义指令识别的语音拍照系统 |
CN106791370A (zh) * | 2016-11-29 | 2017-05-31 | 北京小米移动软件有限公司 | 一种拍摄照片的方法和装置 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108986809A (zh) * | 2018-08-30 | 2018-12-11 | 广东小天才科技有限公司 | 一种便携式设备及其唤醒方法和装置 |
CN109243446A (zh) * | 2018-10-01 | 2019-01-18 | 厦门快商通信息技术有限公司 | 一种基于rnn网络的语音唤醒方法 |
CN109672821A (zh) * | 2018-12-29 | 2019-04-23 | 苏州思必驰信息科技有限公司 | 基于语音控制的摄影方法、装置及系统 |
CN110349577A (zh) * | 2019-06-19 | 2019-10-18 | 深圳前海达闼云端智能科技有限公司 | 人机交互方法、装置、存储介质及电子设备 |
CN110610699A (zh) * | 2019-09-03 | 2019-12-24 | 北京达佳互联信息技术有限公司 | 语音信号处理方法、装置、终端、服务器及存储介质 |
CN110610699B (zh) * | 2019-09-03 | 2023-03-24 | 北京达佳互联信息技术有限公司 | 语音信号处理方法、装置、终端、服务器及存储介质 |
CN116026004A (zh) * | 2023-02-01 | 2023-04-28 | 青岛海尔空调器有限总公司 | 空调器的唤醒方法、唤醒装置及空调器 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108074561A (zh) | 语音处理方法及装置 | |
CN108010526A (zh) | 语音处理方法及装置 | |
CN105389549B (zh) | 基于人体动作特征的对象识别方法及装置 | |
CN108428446A (zh) | 语音识别方法和装置 | |
US20160104045A1 (en) | Method and apparatus for providing combined-summary in imaging apparatus | |
CN114627863B (zh) | 一种基于人工智能的语音识别方法和装置 | |
CN111241883B (zh) | 防止远程被测人员作弊的方法和装置 | |
RU2016116893A (ru) | Способ диалога между машиной, такой как гуманоидный робот, и собеседником-человеком, компьютерный программный продукт и гуманоидный робот для осуществления такого способа | |
EP3001343B1 (en) | System and method of enhanced identity recognition incorporating random actions | |
CN107038784A (zh) | 安全验证方法和装置 | |
CN105741841B (zh) | 语音控制方法及电子设备 | |
US11238289B1 (en) | Automatic lie detection method and apparatus for interactive scenarios, device and medium | |
CN111739558A (zh) | 监控系统、方法、装置、服务器及存储介质 | |
CN108969980A (zh) | 一种跑步机及其步数统计的方法、装置及存储介质 | |
CN109841221A (zh) | 基于语音识别的参数调节方法、装置及健身设备 | |
CN109740020A (zh) | 数据处理方法、装置、存储介质和处理器 | |
Markitantov et al. | Biometric Russian Audio-Visual Extended MASKS (BRAVE-MASKS) Corpus: Multimodal Mask Type Recognition Task. | |
CN114492579A (zh) | 情绪识别方法、摄像装置、情绪识别装置及存储装置 | |
KR20190126552A (ko) | 반려동물의 감정상태에 대한 정보 제공 시스템 및 방법 | |
CN110688470B (zh) | 用于发送信息的方法和装置 | |
CN107819807A (zh) | 一种信息验证方法、装置和设备 | |
CN115905977A (zh) | 家庭同胞互动过程中负面情绪的监督系统及方法 | |
CN106101824B (zh) | 信息处理方法、电子设备及服务器 | |
KR20100086398A (ko) | 다중 감정 센싱 기반으로 사용자의 감정정보를 제공하는 장치 | |
CN111785280B (zh) | 身份认证方法和装置、存储介质和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180525 |