CN109040471B - 情绪提示方法、装置、移动终端以及存储介质 - Google Patents

Abstract

本申请公开了一种情绪提示方法、装置、移动终端以及存储介质，涉及移动终端技术领域。该方法应用于移动终端，所述方法包括：移动终端采集用户输入的第一语音信息，从第一语音信息中提取第一语音特征信息，基于该第一语音特征信息获得用户的第一情绪状态，确定该第一情绪状态对应的第一提示信息，在该移动终端输出第一提示信息。本申请实施例提供的情绪提示方法、装置、移动终端以及存储介质根据移动终端用户输入的语音信息获取用户的情绪状态，并根据该情绪状态输出与该情绪状态对应的提示信息，提升移动终端的趣味性和用户体验。

Description

情绪提示方法、装置、移动终端以及存储介质

技术领域

本申请涉及移动终端技术领域，更具体地，涉及一种情绪提示方法、装置、移动终端以及存储介质。

背景技术

随着科学技术的发展，智能终端已经成为人们日常生活中最常用的电子产品之一。并且，用户经常会通过智能终端进行通话，但是目前智能终端在通话过程中的形式固定且单一，缺乏趣味性，用户体验不佳。

发明内容

鉴于上述问题，本申请提出了一种情绪提示方法、装置、移动终端以及存储介质，以解决上述问题。

第一方面，本申请实施例提供了一种情绪提示方法，应用于移动终端，所述方法包括：所述移动终端采集用户输入的第一语音信息；从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态；确定所述第一情绪状态对应的第一提示信息，在所述移动终端输出所述第一提示信息。

第二方面，本申请实施例提供了一种情绪提示装置，应用于移动终端，所述装置包括：语音信息采集模块，用于所述移动终端采集用户输入的第一语音信息；语音特征信息提取模块，用于从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态；提示信息确定模块，用于确定所述第一情绪状态对应的第一提示信息，在所述移动终端输出所述第一提示信息。

第三方面，本申请实施例提供了一种移动终端，包括：存储器；一个或多个处理器，与所述存储器耦接；一个或多个程序，其中，所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行上述方法。

第四方面，本申请实施例提供了一种计算机可读取存储介质，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行上述方法。

相对于现有技术，本申请提供的方案，移动终端采集用户输入的第一语音信息，从第一语音信息中提取第一语音特征信息，基于该第一语音特征信息获得用户的第一情绪状态，确定该第一情绪状态对应的第一提示信息，在该移动终端输出第一提示信息，从而根据移动终端用户输入的语音信息获取用户的情绪状态，并根据该情绪状态输出与该情绪状态对应的提示信息，提升移动终端的趣味性和用户体验。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1示出了本申请一个实施例提供的情绪提示方法的流程示意图；

图2示出了本申请又一个实施例提供的情绪提示方法的流程示意图；

图3示出了本申请再一个实施例提供的情绪提示方法的流程示意图；

图4示出了本申请另一个实施例提供的情绪提示方法的流程示意图；

图5示出了本申请一个实施例提供的情绪提示装置的模块框图；

图6示出了本申请又一个实施例提供的情绪提示装置的模块框图；

图7示出了本申请再一个实施例提供的情绪提示装置的模块框图；

图8示出了本申请实施例用于执行根据本申请实施例的情绪提示方法的电子设备的框图；

图9示出了本申请实施例的用于保存或者携带实现根据本申请实施例的情绪提示方法的程序代码的存储单元。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。

随着移动终端的推广和普及，人们已经习惯使用移动终端进行工作、娱乐、学习、交流等。其中，用户在使用移动终端的过程中，往往会在移动终端输入语音信息，用于通话或控制移动终端执行对应的操作，但是，目前的移动终端，除了传输用户的语音信息或执行用户的语音信息所指示的操作之外，没有更多的反馈，缺乏趣味性，用户体验不佳。例如，当用户在使用移动终端进行通话的过程中，可能会有不同的情绪状态，但是移动终端不会根据用户的情绪状态做出对应的反馈，从而造成缺乏趣味性以及用户体验不佳的问题。

针对上述问题，发明人经过长期的研究发现，并提出了本申请实施例提供的情绪提示方法、装置、移动终端以及存储介质，根据移动终端用户输入的语音信息获取用户的情绪状态，并根据该情绪状态输出与该情绪状态对应的提示信息，提升移动终端的趣味性和用户体验。其中，具体的情绪提示方法在后续的实施例中进行详细的说明。

实施例

请参阅图1，图1示出了本申请一个实施例提供的情绪提示方法的流程示意图。所述情绪提示方法用于根据移动终端用户输入的语音信息获取用户的情绪状态，并根据该情绪状态输出与该情绪状态对应的提示信息，提升移动终端的趣味性和用户体验。在具体的实施例中，所述情绪提示方法应用于如图5所示的情绪提示装置200以及配置有所述情绪提示装置200的移动终端100(图8)，下面将以移动终端为例，说明本实施例的具体流程，当然，可以理解的，本实施例所应用的移动终端可以为智能手机、平板电脑、穿戴式电子设备等，在此不做具体的限定。下面将针对图1所示的流程进行详细的阐述，所述情绪提示方法具体可以包括以下步骤：

步骤S110：所述移动终端采集用户输入的第一语音信息。

在本实施例中，移动终端可以包括终端本体和设置于终端本体内的收音装置，该收音装置用于在移动终端采集语音信息的过程中，实时接收用户输入的语音信息，并将该语音信息传输至移动终端的处理器进行分析处理，以获取所述语音信息中所携带的语音内容。其中，该收音装置可以为设置于终端本体上的麦克风、话筒等，在本实施例中，移动终端至少可以包括语音通话麦克风，其中，语音通话麦克风主要用于接收输入移动终端的语音信息，比如录音的时候，把输入移动终端的语音信息录进去，将语音信息实时转化为电信号，以分析该语音信息从而获取所述该语音信息的语音内容。在本实施例中，将移动终端采集到的用户的语音信息作为第一语音信息，其中，该第一语音信息可以用于该移动终端用户与其他用户之间的交流，也可以用于作为移动终端的指令，在此不做限定。

作为一种方式，所述移动终端预先设置并存储有预设条件，其中，该预设条件用于作为该语音信息的判断依据。在本实施例中，该预设条件至少包括该移动终端对应的真实用户的声纹信息，因此，可以对语音信息的声纹信息进行提取，将提取的声纹信息与真实用户的声纹信息进行匹配，以判断该声纹信息是否满足预设条件，可以理解的，若该声纹信息与真实用户的声纹信息匹配，表征该声纹信息满足预设条件，若该声纹信息与真实用户的声纹信息不匹配，表征该声纹信息不满足预设条件。

具体地，对采集的语音信息进行识别，提取语音信息的声纹信息，其中，所述声纹是可以用电声学仪器显示的携带言语信息的声波频谱，可以理解的，人类语言的产生是人体语言中枢与发声器官之间一个复杂的生理物理过程，人在讲话时使用的发声器官-舌、牙齿、喉头、肺、鼻腔在尺寸和形态方面每个人的差异很大，所以任何两个人的声纹图谱都有差异。每个人的语音声学特征既有相对稳定性，又有变异性，不是绝对的、一成不变的。这种变异可来自生理、病理、心理、模拟、伪装，也与环境干扰有关。尽管如此，由于每个人的发音器官都不尽相同，因此在一般情况下，人们仍能区别不同的人的声音或判断是否是同一人的声音。

在本实施例中，所述移动终端预先采集所述移动终端对应的真实用户的声纹信息，将该真实用户的声纹信息作为预设声纹信息，该预设声纹信息用于作为声纹信息的判断依据，其中，该预设声纹信息至少包括一个，也就是说，该移动终端的真实用户可以设置为一个人，也可以设置为多个人。可以理解的，当获取声纹信息后，将该声纹信息与预设声纹信息进行比较，以判断该声纹信息与预设声纹信息是否一致，当该声纹信息与预设声纹信息一致时，表征该声纹信息对应的用户为该移动终端的真实用户，当该声纹信息与预设声纹信息不一致时，表征该声纹信息对应的用户不是该移动终端的真实用户。进一步地，可以在确定输入语音信息的用户为移动终端的真实用户时，再执行后续操作。

步骤S120：从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态。

在本实施例中，该第一语音特征信息可以包括一个，也可以包括多个，其中，当第一语音特征信息包括一个时，该第一语音特征信息至少可以包括音调、响度、语速或者关键词中的一个；当第一语音特征信息包括多个时，该第一语音特征信息可以包括音调、响度、语速以及关键词中至少两种的组合，在此不做具体的限定。

其中，音调的高低往往可以反映出用户的情绪状态，例如，音调较高时的情绪状态较为激昂或愤怒，音调较低时的情绪状态较为平静或理智等；响度的大小往往可以反映出用户的情绪状态，例如，响度较大时的情绪状态较为激昂或愤怒，响度较低时的情绪状态较为舒适或乐观等；语速快慢往往可以反映出用户的积极程度，例如，语速较快时的情绪状态较为着急或热情，语速较慢时的情绪状态较为平静或难过等。因此，可以对语音信息的音调、响度、语速进行提取判断，作为一种方式，因为情绪状态是一个时间较长的过程中，因此，可以以句子为单位来提取上述语音特征信息，或者可以以段落为单位来提取上述语音特征信息，在此不做限定。

另外，关键词往往也可以反映出用户的情绪状态，例如，中文下的“呵”、“哈”、“哼”、“唉”等关键词，英文下的“nice”、“opps”、“yeah”等，均可以用于判断用户情绪状态的依据。具体地，作为一种方式，可以对所述语音信息进行转文字操作，将所述语音信息转换为文字信息，然后对该文字信息进行分词，对分词后的文字信息进行特征提取，以判断该语音信息中是否包括表征用户情绪的关键字。可以理解的，关键词可以与音调、响度以及语速一起共同获得用户的情绪状态，也可以单独获得用户的情绪状态，在本实施例中，不做限定。

可以理解的，在获取所述用户的第一语音特征信息后，可以基于语音特征信息和情绪状态之间的对应关系，获得所述第一语音特征信息所对应的第一情绪状态，作为用户的情绪状态。作为一种方式，在获取所述第一语音特征信息后，可以经过人工智能分析，得到该第一语音特征信息所对应的第一情绪状态，如平静、愤怒、快乐、悲哀等。具体地，在本实施例中，可以将该第一语音特征信息输入预设神经网络，以输出该用户的第一情绪状态，其中，该预设神经网络可以基于卷积神经网络构架并通过多个语音特征信息和多个情绪状态进行训练获得，该多个语音特征信息和多个情绪状态一一对应。

步骤S130：确定所述第一情绪状态对应的第一提示信息，在所述移动终端输出所述第一提示信息。

进一步地，在确定用户的第一情绪状态后，可以基于该第一情绪状态获得第一提示信息，其中，作为第一种方式，该第一提示信息可以通过人工智能分析获得，具体地，在获取所述第一情绪状态后，将该第一情绪状态输入预先设置的神经网络，以输出该第一提示信息，其中，该预先设置的神经网络可以基于卷积神经网络架构并通过多个情绪状态和多个提示信息进行训练获得，该多个情绪状态和多个提示信息一一对应。作为第二种方式，该第一提示信息可以通过预设算法获得，具体地，在获取所述第一情绪状态后，将该第一情绪状态输入预设算法，经该预设算法计算后，得到该第一提示信息。作为第三种方式，该第一提示信息还可以通过查找情绪状态和提示信息之间的映射关系表获得，具体地，在获取所述第一情绪状态后，在映射关系表中查找与该第一情绪状态一致的情绪状态，然后查找该情绪状态对应的提示信息作为所述第一提示信息。

在本实施例中，第一提示信息通过该移动终端输出，可以理解的，所述第一提示信息可以包括光效、声音、文字、图片、振动等，在此不做限定。

本申请一个实施例提供的情绪提示方法，移动终端采集用户输入的第一语音信息，从第一语音信息中提取第一语音特征信息，基于该第一语音特征信息获得用户的第一情绪状态，确定该第一情绪状态对应的第一提示信息，在该移动终端输出第一提示信息，从而根据移动终端用户输入的语音信息获取用户的情绪状态，并根据该情绪状态输出与该情绪状态对应的提示信息，提升移动终端的趣味性和用户体验。

请参阅图2，图2示出了本申请又一个实施例提供的情绪提示方法的流程示意图。所述情绪提示方法应用于上述移动终端，在本实施例中，所述第一语音特征信息为多个，且所述提示信息包括多个不同颜色的提示光效。下面将针对图2所示的流程进行详细的阐述，所述情绪提示方法具体可以包括以下步骤：

步骤S210：所述移动终端采集用户输入的第一语音信息。

其中，步骤S210的具体描述请参阅步骤S110，在此不再赘述。

步骤S220：从所述第一语音信息中提取多个第一语音特征信息，分别获取多个第一语音特征信息对应的权重值。

在本实施例中，从所述第一语音信息中提取的第一语音特征信息为多个，且多个第一语音特征信息中的每个语音特征信息均预先设置有权重值，因此，在确定该第一语音特征信息后，可以进一步地获取该第一语音特征信息所对应的权重值。例如，当所述第一语音特征信息包括语速和响度时，可以分别获取预先设置的语速对应的权重值和预先设置的响度对应的权重值。

步骤S230：根据所述多个第一语音特征信息和每个第一语音特征信息对应的权重值，获得语音特征信息分数值。

作为一种方式，可以首先获取每个第一语音特征信息和该语音特征信息对应的权重值的乘积，再将每个第一语音特征信息和对应的权重值的乘积相加，获得语音特征信息的分数值。作为一种方式，假设所述第一语音特征信息为音调、响度以及语速，且预先设置的音调的权重值为40％、响度的权重值为30％、语速的权重值30％，那么，可以首先获取音调与40％的乘积、响度与30％的乘积以及语速与30％的乘积，然后将音调与40％的乘积、响度与30％的乘积以及语速与30％的乘积相加，获得一个分数值，则该分数值为包含有音调、响度以及语速的语音特征信息的分数值。

步骤S240：基于所述语音特征信息分数值获得所述用户的第一情绪状态。

作为一种方式，在获取所述语音特征信息分数值后，可以基于语音特征信息分数值和情绪状态之间的对应关系，获得所述第一情绪状态，也可以通过人工智能分析获取所述第一情绪状态，在此不再赘述。

步骤S250：根据预设映射关系表，确定所述第一情绪状态对应的提示信息为所述第一提示信息，其中，所述预设映射关系表中包括情绪状态和提示信息之间的对应关系。

在本实施例中，移动终端预先设置有映射关系表，并将所述映射关系表存储作为预设映射关系表，其中，该预设映射关系表包括情绪状态和提示信息之间的对应关系。进一步地，所述提示信息包括多个不同颜色的提示光效，也就是说，在确定用户的情绪状态后，该移动终端可以显示与所述情绪状态对应的提示光效，同时，由于该提示光效包括多种不同的颜色，因此，在本实施例中，可以根据用户不同的情绪状态，显示不同颜色的提示光效。

作为一种方式，所述预设映射关系表可以包括情绪状态和颜色的对应关系，如表1所示。在确定用户当前为第一情绪状态时，在所述预设映射关系表中查找与该第一情绪状态一致的情绪状态，然后查找该映射关系表中与所述情绪状态对应的颜色，将所述颜色确定为所述第一情绪状态对应的提示光效的颜色。例如：当确定用户当前为第一情绪状态时，在所述预设映射关系表中查找与该第一情绪状态一致的情绪状态，当所述预设映射关系表中的“平静”与所述第一情绪状态一致时，查找该平静所对应的颜色，即“蓝色”，然后将蓝色确定为第一情绪状态对应的提示光效的颜色。

表1

颜色	情绪状态
		蓝色	平静、理智
红色	愤怒、热情
		橙色	轻快、温馨
绿色	快乐、舒适、乐观
		紫色	嫉妒
白色	纯真
		灰色	无奈、悲哀、压抑、厌恶

步骤S260：在所述移动终端显示所述第一提示光效，其中，所述第一提示光效的颜色与所述第一情绪状态存在对应关系。

进一步地，在移动终端显示与第一情绪状态对应的颜色的第一提示光效，例如，当所述第一情绪状态为平静时，在所述移动终端显示蓝色提示光效；当所述第一情绪状态为愤怒时，在所述移动终端显示红色提示光效；当所述第一情绪状态为轻快时，在所述移动终端显示橙色提示光效；当所述第一情绪状态为快乐时，在所述移动终端显示绿色提示光效；当所述第一情绪状态为嫉妒时，在所述移动终端显示紫色提示光效；当所述第一情绪状态为纯真时，在所述移动终端显示白色提示光效；当所述第一情绪状态为无奈时，在所述移动终端显示灰色提示光效。

其中，所述提示光效可以包括呼吸灯光效、平面全景光效以及曲面全景光效中的至少一种。

本申请又一个实施例提供的情绪提示方法，移动终端采集用户输入的第一语音信息，从该第一语音信息中提取多个第一语音特征信息，分别获取多个第一语音特征信息对应的权重值，根据多个第一语音特征信息和每个第一语音特征信息对应的权重值，获得语音特征信息分数值，基于该语音特征信息分数值获得用户的第一情绪状态，根据预设映射关系表，确定该第一情绪状态对应的提示信息为第一提示信息，其中，该预设映射关系表中包括情绪状态和提示信息之间的对应关系，在移动终端显示第一提示光效，该第一提示光效的颜色与第一情绪状态存在对应关系。相较于图1所示的情绪提示方法，本实施例通过在语音特征信息为多个时，利用权重值获得语音特征信息分数值，提高获取的用户情绪状态的准确性，并且通过根据不同的情绪状态显示不同颜色的提示光效，进一步提升趣味性和用户体验。

请参阅图3，图3示出了本申请再一个实施例提供的情绪提示方法的流程示意图。下面将针对图3所示的流程进行详细的阐述，所述方法具体可以包括以下步骤：

步骤S310：所述移动终端采集用户输入的第一语音信息。

步骤S320：从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态。

其中，步骤S310-步骤S320的具体描述请参阅步骤S110-步骤S120，在此不再赘述。

步骤S330：所述移动终端采集用户的脸部图像信息。

在本实施例中，移动终端还可以包括图像采集装置，该图像采集装置设置于所述终端本体上，用于采集移动终端周围的图像信息，该图像采集装置可以包括前置摄像头或后置摄像头，可选的，在本实施例中，该图像采集状态为前置摄像头。其中，由于移动终端采集的用户的脸部图像信息随时间的改变会发生改变，例如，用户的表情随时间发生变化时，该脸部图像信息也随之改变，因此，作为一种方式，可以采用实时获取所述脸部图像信息的方式，避免获取的脸部图像信息不准确的问题。

步骤S340：基于所述脸部图像信息获得所述用户的第三情绪状态。

进一步地，作为一种方式，对获取的脸部图像信息的图像特征信息进行提取，例如，提取所述脸部图像信息中的眼神、表情等，然后基于提取的图像特征信息获得用户的第三情绪状态。其中，作为一种方式，该第三情绪状态可以通过人工智能分析，得到该脸部图像信息所对应的第三情绪状态。具体地，可以将所述脸部图像信息或从所述脸部图像信息中提取的图像特征信息输入预设神经网络，以输出第三情绪状态，其中，该预设神经网络可以基于卷积神经网络构架并通过多个脸部图像信息或多个图像特征信息和多个情绪状态进行训练获得，其中，多个脸部图像信息和多个情绪状态一一对应，或多个图像特征信息和多个情绪状态一一对应。

步骤S350：判断所述第一情绪状态与所述第三情绪状态是否一致。

在本实施例中，在分别获取所述第一情绪状态和所述第三情绪状态后，将所述第一情绪状态和所述第三情绪状态进行比较，以判断该第一情绪状态和第三情绪状态是否一致。例如，当所述第一情绪状态为平静，且第三情绪状态为愤怒时，表征所述第一情绪状态和第三情绪状态不一致；当所述第一情绪状态为平静，且第三情绪状态为平静时，表征所述第一情绪状态和所述第三情绪状态一致。

当然，作为一种方式，所述第一情绪状态和所述第三情绪状态的一致并不限定为完全一致，当所述第一情绪状态和第三情绪状态的类型一致时，也可以认为所述第一情绪状态和第三情绪状态一致。例如，当所述第一情绪状态为平静，且第三情绪状态为理智时，可以认为所述第一情绪状态和第三情绪状态一致。

步骤S360：当所述第一情绪状态与所述第三情绪状态一致时，确定所述第一情绪状态对应的第一提示信息，在所述移动终端输出所述第一提示信息。

进一步地，当通过用户的语音信息获得的第一情绪状态和通过用户的脸部图像信息获得的第三情绪状态一致时，表征从两个不同的方向得到的用户的情绪状态一致，可以确定获得的情绪状态正确，因此，可以确定用户当前的情绪状态为第一情绪状态，可以控制移动终端输出第一提示信息。

本申请再一个实施例提供的情绪提示方法，移动终端采集用户输入的第一语音信息，从第一语音信息中提取第一语音特征信息，基于该第一语音特征信息获得用户的第一情绪状态，移动终端采集用户的脸部图像信息，基于该脸部图像信息获得该用户的第三情绪状态，判断第一情绪状态与第三情绪状态是否一致，当第一情绪状态与第三情绪状态一致时，确定第一情绪状态对应的第一提示信息，在移动终端输出第一提示信息。相较于图1所示的情绪提示方法，本实施例还通过用户的脸部图像信息获得用户的情绪状态，并在通过脸部图像信息获得的用户的情绪状态和通过语音信息获得的用户的情绪状态一致时，确定获得的用户的情绪状态无误，提升情绪状态获取的准确性。

请参阅图4，图4示出了本申请另一个实施例提供的情绪提示方法的流程示意图。所述情绪提示方法应用于上述移动终端，下面将针对图4所示的流程进行详细的阐述，所述方法具体可以包括以下步骤：

步骤S410：所述移动终端采集用户输入的第一语音信息。

步骤S420：从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态。

其中，步骤S410-步骤S420的具体描述请参阅步骤S110-步骤S120，在此不再赘述。

步骤S430：当所述移动终端处于通话模式时，接收对方用户的第二语音信息。

其中，在本实施例中，移动终端处于通话模式表示所述移动终端会将己方用户输入的第一语音信息传输至对方用户对应的移动终端，并接收对方用户通过其对应的移动终端传输的第二语音信息。作为一种方式，所述处于通话模式可以包括移动终端处于电话通话模式、处于语音聊天模块或处于视频聊天模式等，在此不做限定。

进一步地，对方用户的第二语音信息可以包括一个语音信息、两个语音信息或多个语音信息等，也就是说，对方用户可能为单一用户，也可能为多个用户。作为一种方式，当所述用户为单一用户时，可以直接接收该单一用户的语音信息作为第二语音信息；当所述用户为多个用户时，对接收到的多个语音信息进行分析，从多个语音信息中提取其中一个语音信息作为第二语音信息，例如，提取多个语音信息中最清楚的语音信息作为第二语音信息。

步骤S440：从所述第二语音信息中提取第二语音特征信息，基于所述第二语音特征信息获得所述对方用户的第二情绪状态。

其中，从所述第二语音信息中提取第二语音特征信息的方式请参阅从所述第一语音信息中提取第一语音特征信息，在此不再赘述。

基于第二语音特征信息获得对方用户的第二情绪状态的方式请参阅基于第一语音特征信息获得用户的第一情绪状态，在此不再赘述。

步骤S450：判断所述第一情绪状态与所述第二情绪状态是否一致。

在本实施例中，在分别获取所述第一情绪状态和所述第二情绪状态后，将所述第一情绪状态和所述第二情绪状态进行比较，以判断该第一情绪状态和第二情绪状态是否一致。例如，当所述第一情绪状态为平静，且第二情绪状态为愤怒时，表征所述第一情绪状态和第二情绪状态不一致；当所述第一情绪状态为平静，且第二情绪状态为平静时，表征所述第一情绪状态和所述第二情绪状态一致。

当然，作为一种方式，所述第一情绪状态和所述第二情绪状态的一致并不限定为完全一致，当所述第一情绪状态和第二情绪状态的类型一致时，也可以认为所述第一情绪状态和第二情绪状态一致。例如，当所述第一情绪状态为平静，且第二情绪状态为理智时，可以认为所述第一情绪状态和第二情绪状态一致。

步骤S460：当所述第一情绪状态与所述第二情绪状态一致时，在所述移动终端输出第二提示信息，其中，所述第二提示信息与所述第一提示信息不同。

其中，第一情绪状态用于表征己方用户的情绪状态，第二情绪状态用于表征对方用户的情绪状态，当第一情绪状态和第二情绪状态一致时，表征己方用户的情绪状态和对方用户的情绪状态一致，可以在移动终端输出第二提示信息，以提升移动终端趣味性的同时，也提升己方用户和对方用户之间的互动，提升用户体验。

在本实施例中，所述第二提示信息也可以包括光效、声音、文字、图片、振动等，在此不做限定。同时，所述第二提示信息和第一提示信息不同，例如，当所述第一提示信息为光效时，所述第二提示信息为声音；当所述第一提示信息为声音时，所述第二提示信息为光效等，用于区分所述第一提示信息和所述第二提示信息。

本申请另一个实施例提供的情绪提示方法，移动终端采集用户输入的第一语音信息，从第一语音信息中提取第一语音特征信息，基于该第一语音特征信息获得用户的第一情绪状态，当移动终端处于通话模式时，接收对方用户的第二语音信息，从第二语音信息中提取第二语音特征信息，基于该第二语音特征信息获得对方用户的第二情绪状态，判断该第一情绪状态与第二情绪状态是否一致，当第一情绪状态与第二情绪状态一致时，在第一终端输出第二提示信息，其中，第二提示信息与第一提示信息不同。相较于图4所示的情绪提示方法，本实施例在己方用户和通话对方用户的情绪一致时，发出提示信息，增加移动终端的趣味性。

请参阅图5，图5示出了本申请一个实施例提供的情绪提示装置200的模块框图，所述情绪提示装置200应用于上述移动终端，下面将针对图5所示的框图进行阐述，所述情绪提示装置200包括：语音信息采集模块210、语音特征信息提取模块220以及提示信息确定模块230，其中：

语音信息采集模块210，用于所述移动终端采集用户输入的第一语音信息。

语音特征信息提取模块220，用于从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态。进一步地，所述语音特征信息提取模块220包括：权重值获取子模块、分数值获取子模块以及情绪状态获得子模块，其中：

权重值获取子模块，用于分别获取多个第一语音特征信息对应的权重值。

分数值获取子模块，用于根据所述多个第一语音特征信息和每个第一语音特征信息对应的权重值，获得语音特征信息分数值。

情绪状态获得子模块，用于基于所述语音特征信息分数值获得所述用户的第一情绪状态。

所述情绪状态获得子模块，还用于将所述第一语音特征信息输入预设神经网络，获得所述用户的第一情绪状态，其中，所述预设神经网络基于卷积神经网络构架并通过多个语音特征信息和多个情绪状态进行训练获得，所述多个语音特征信息和所述多个情绪状态一一对应。

提示信息确定模块230，用于确定所述第一情绪状态对应的第一提示信息，在所述移动终端输出所述第一提示信息。进一步地，所述提示信息包括多个不同颜色的提示光效，所述提示信息确定模块230包括：第一提示信息确定子模块、提示光效显示子模块以及提示光效显示子模块，其中：

第一提示信息确定子模块，用于根据预设映射关系表，确定所述第一情绪状态对应的提示信息为所述第一提示信息，其中，所述预设映射关系表中包括情绪状态和提示信息之间的对应关系。

提示光效显示子模块，用于在所述移动终端显示所述第一提示光效，其中，所述第一提示光效的颜色与所述第一情绪状态存在对应关系。

本申请一个实施例提供的情绪提示装置包括语音信息采集模块、语音特征信息提取模块以及提示信息确定模块，其中，语音信息采集模块用于所述移动终端采集用户输入的第一语音信息，语音特征信息提取模块用于从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态，提示信息确定模块用于确定所述第一情绪状态对应的第一提示信息，在所述移动终端输出所述第一提示信息，从而根据移动终端用户输入的语音信息获取用户的情绪状态，并根据该情绪状态输出与该情绪状态对应的提示信息，提升移动终端的趣味性和用户体验。

请参阅图6，图6示出了本申请又一个实施例提供的情绪提示装置300的模块框图，所述情绪提示装置300应用于上述移动终端，下面将针对图6所示的框图进行阐述，所述情绪提示装置300包括：语音信息采集模块310、语音特征信息提取模块320、脸部图像信息采集模块330、情绪状态获得模块340、情绪状态判断模块350、情绪状态确定模块360以及提示信息确定模块370，其中：

语音信息采集模块310，用于所述移动终端采集用户输入的第一语音信息。

语音特征信息提取模块320，用于从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态。

脸部图像信息采集模块330，用于所述移动终端采集用户的脸部图像信息。

情绪状态获得模块340，用于基于所述脸部图像信息获得所述用户的第三情绪状态。

情绪状态判断模块350，用于判断所述第一情绪状态与所述第三情绪状态是否一致。

情绪状态确定模块360，用于当所述第一情绪状态与所述第三情绪状态一致时，执行确定所述第一情绪状态对应的第一提示信息。

提示信息确定模块370，用于确定所述第一情绪状态对应的第一提示信息，在所述移动终端输出所述第一提示信息。

请参阅图7，图7示出了本申请再一个实施例提供的情绪提示装置400的模块框图，所述情绪提示装置400应用于上述移动终端，下面将针对图7所示的框图进行阐述，所述情绪提示装置400包括：语音信息采集模块410、语音特征信息提取模块420、语音信息接收模块430、情绪状态判断模块440以及提示信息输出模块450，其中：

语音信息采集模块410，用于所述移动终端采集用户输入的第一语音信息。

语音特征信息提取模块420，用于从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态。

语音信息接收模块430，用于当所述移动终端处于通话模式时，接收对方用户的第二语音信息。

所述语音特征信息提取模块420，还用于从所述第二语音信息中提取第二语音特征信息，基于所述第二语音特征信息获得所述对方用户的第二情绪状态。

情绪状态判断模块440，用于判断所述第一情绪状态与所述第二情绪状态是否一致。

提示信息输出模块450，用于当所述第一情绪状态与所述第二情绪状态一致时，在所述移动终端输出第二提示信息，其中，所述第二提示信息与所述第一提示信息不同。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，模块相互之间的耦合可以是电性，机械或其它形式的耦合。

另外，在本申请各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。

请参阅图8，其示出了本申请实施例提供的一种移动终端100的结构框图。该移动终端100可以是智能手机、平板电脑、电子书等能够运行应用程序的移动终端。本申请中的移动终端100可以包括一个或多个如下部件：处理器110、存储器120、屏幕130以及一个或多个应用程序，其中一个或多个应用程序可以被存储在存储器120中并被配置为由一个或多个处理器110执行，一个或多个程序配置用于执行如前述方法实施例所描述的方法。

其中，处理器110可以包括一个或者多个处理核。处理器110利用各种接口和线路连接整个移动终端100内的各个部分，通过运行或执行存储在存储器120内的指令、程序、代码集或指令集，以及调用存储在存储器120内的数据，执行移动终端100的各种功能和处理数据。可选地，处理器110可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(ProgrammableLogic Array，PLA)中的至少一种硬件形式来实现。处理器110可集成中央处理器(CentralProcessing Unit，CPU)、图形处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器110中，单独通过一块通信芯片进行实现。

存储器120可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。存储器120可用于存储指令、程序、代码、代码集或指令集。存储器120可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储终端100在使用中所创建的数据(比如电话本、音视频数据、聊天记录数据)等。

进一步地，所述屏幕130可以为液晶显示屏(Liquid Crystal Display，LCD)，可以为有机发光二极管(Organic Light-Emitting Diode，OLED)等。所述屏幕130用于显示由用户输入的信息、提供给用户的信息以及所述移动终端的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、数字、视频和其任意组合来构成。

请参阅图9，其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读介质500中存储有程序代码，所述程序代码可被处理器调用执行上述方法实施例中所描述的方法。

计算机可读存储介质500可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地，计算机可读存储介质500包括非易失性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质500具有执行上述方法中的任何方法步骤的程序代码510的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码510可以例如以适当形式进行压缩。

综上所述，本申请实施例提供的情绪提示方法、装置、移动终端以及存储介质，移动终端采集用户输入的第一语音信息，从第一语音信息中提取第一语音特征信息，基于该第一语音特征信息获得用户的第一情绪状态，确定该第一情绪状态对应的第一提示信息，在该移动终端输出第一提示信息，从而根据移动终端用户输入的语音信息获取用户的情绪状态，并根据该情绪状态输出与该情绪状态对应的提示信息，提升移动终端的趣味性和用户体验。

最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.一种情绪提示方法，其特征在于，应用于移动终端，所述方法包括：

所述移动终端采集用户输入的第一语音信息；

从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态；

确定所述第一情绪状态对应的第一提示信息，在所述移动终端输出所述第一提示信息；

当所述移动终端处于通话模式时，接收对方用户的第二语音信息；

从所述第二语音信息中提取第二语音特征信息，基于所述第二语音特征信息获得所述对方用户的第二情绪状态；

判断所述第一情绪状态与所述第二情绪状态是否一致；

当所述第一情绪状态与所述第二情绪状态一致时，在所述移动终端输出第二提示信息，其中，所述第二提示信息与所述第一提示信息不同。

2.根据权利要求1所述的方法，其特征在于，所述确定所述第一情绪状态对应的第一提示信息，包括：

根据预设映射关系表，确定所述第一情绪状态对应的提示信息为所述第一提示信息，其中，所述预设映射关系表中包括情绪状态和提示信息之间的对应关系。

3.根据权利要求1所述的方法，其特征在于，所述提示信息包括多个不同颜色的提示光效，所述在所述移动终端输出所述第一提示信息，包括：

在所述移动终端显示第一提示光效，其中，所述第一提示光效的颜色与所述第一情绪状态存在对应关系。

4.根据权利要求1所述的方法，其特征在于，所述第一语音特征信息为多个，所述基于所述第一语音特征信息获得所述用户的第一情绪状态，包括：

分别获取多个第一语音特征信息对应的权重值；

根据所述多个第一语音特征信息和每个第一语音特征信息对应的权重值，获得语音特征信息分数值；

基于所述语音特征信息分数值获得所述用户的第一情绪状态。

5.根据权利要求4所述的方法，其特征在于，所述第一语音特征信息至少包括音调、响度、语速以及关键字中的一种或几种的组合。

6.根据权利要求1-5任一项所述的方法，其特征在于，所述基于所述第一语音特征信息获得所述用户的第一情绪状态，包括：

将所述第一语音特征信息输入预设神经网络，获得所述用户的第一情绪状态，其中，所述预设神经网络基于卷积神经网络构架并通过多个语音特征信息和多个情绪状态进行训练获得，所述多个语音特征信息和所述多个情绪状态一一对应。

7.根据权利要求1-5任一项所述的方法，其特征在于，所述基于所述第一语音特征信息获得所述用户的第一情绪状态之后，还包括：

所述移动终端采集用户的脸部图像信息；

基于所述脸部图像信息获得所述用户的第三情绪状态；

判断所述第一情绪状态与所述第三情绪状态是否一致；

当所述第一情绪状态与所述第三情绪状态一致时，执行确定所述第一情绪状态对应的第一提示信息。

8.一种情绪提示装置，其特征在于，应用于移动终端，所述装置包括：

语音信息采集模块，用于所述移动终端采集用户输入的第一语音信息；

语音特征信息提取模块，用于从所述第一语音信息中提取第一语音特征信息，基于所述第一语音特征信息获得所述用户的第一情绪状态；

提示信息确定模块，用于确定所述第一情绪状态对应的第一提示信息，在所述移动终端输出所述第一提示信息；当所述移动终端处于通话模式时，接收对方用户的第二语音信息；从所述第二语音信息中提取第二语音特征信息，基于所述第二语音特征信息获得所述对方用户的第二情绪状态；判断所述第一情绪状态与所述第二情绪状态是否一致；当所述第一情绪状态与所述第二情绪状态一致时，在所述移动终端输出第二提示信息，其中，所述第二提示信息与所述第一提示信息不同。

9.一种移动终端，其特征在于，包括：

存储器；

一个或多个处理器，与所述存储器耦接；

一个或多个程序，其中，所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行如权利要求1-7任一项所述的方法。

10.一种计算机可读取存储介质，其特征在于，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行如权利要求1-7任一项所述的方法。

Images