CN101645961A - 实现来电情绪辨识的手机及方法 - Google Patents

实现来电情绪辨识的手机及方法 Download PDF

Info

Publication number
CN101645961A
CN101645961A CN200810303557A CN200810303557A CN101645961A CN 101645961 A CN101645961 A CN 101645961A CN 200810303557 A CN200810303557 A CN 200810303557A CN 200810303557 A CN200810303557 A CN 200810303557A CN 101645961 A CN101645961 A CN 101645961A
Authority
CN
China
Prior art keywords
data
mobile phone
degree
emotion identification
emotion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200810303557A
Other languages
English (en)
Inventor
张唐瑜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Futaihong Precision Industry Co Ltd
Chi Mei Communication Systems Inc
Original Assignee
Shenzhen Futaihong Precision Industry Co Ltd
Chi Mei Communication Systems Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Futaihong Precision Industry Co Ltd, Chi Mei Communication Systems Inc filed Critical Shenzhen Futaihong Precision Industry Co Ltd
Priority to CN200810303557A priority Critical patent/CN101645961A/zh
Publication of CN101645961A publication Critical patent/CN101645961A/zh
Pending legal-status Critical Current

Links

Images

Abstract

一种实现来电情绪辨识的手机包括:语音录制单元,用于将来电语音录制为模拟语音信号;A/D转换器,用于将模拟语音信号转换为数字语音信号;特征撷取单元,用于切割数字语音信号中的有声语音数据,并从有声语音中撷取不同的特征参数;情绪分类器,用于根据不同的特征参数读取有声语音信号对应的情绪特征数据,并对情绪特征数据进行分类统计以产生情绪特征的分类统计数据;情绪输出单元,用于根据分类统计数据产生来电对方的情绪分析报告。本发明还提供一种手机来电情绪辨识的方法。实施本发明,能够在手机通话过程中辨识出对方的情绪状态。

Description

实现来电情绪辨识的手机及方法
技术领域
本发明涉及语音辨识技术,特别是关于一种实现来电情绪辨识的手机及方法。
背景技术
根据研究,人类总共具有五种基本的情绪反应,包含生气(Anger)、厌倦(bored)、快乐(happy)、平常(neutral)及悲伤(sadness)。目前,忙碌的现代人与亲人、朋友、同事之间,常以电话作为沟通与连络感情的媒介,因为电话通信的非面对面性,所以时常不知对方在当前通话时的情绪状态,有时更会因为未能正确理解对方的说话含义而误解对方的情绪,从而说错话引起双方发生口角,造成不必要的误会。当今手机,如果能够在这方面提供使用者更进一步的感应数据,从而辨识出对方说话时的情绪,这样对于人与人之间感情交流的提升可以产生很好效果。
发明内容
鉴于以上内容,有必要提供一种实现来电情绪辨识的手机,能够在手机通话过程中辨识出对方的情绪状态。
此外,还有必要提供一种手机来电情绪辨识的方法,能够在手机通话过程中辨识出对方的情绪状态。
一种实现来电情绪辨识的手机,该手机包括:语音录制单元,用于将对方的来电语音录制为模拟语音信号;A/D转换器,用于将模拟语音信号转换为数字语音信号;特征撷取单元,用于通过端点侦测原理切割数字语音信号中的有声语音数据和无声语音数据,并根据有声语音信号的频率大小从有声语音信号中撷取不同的特征参数;情绪分类器,用于根据有不同的特征参数读取有声语音信号对应的情绪特征数据,并对读取的情绪特征数据进行分类统计以产生情绪特征的分类统计数据;情绪输出单元,用于根据情绪分类器产生的分类统计数据产生来电对方的情绪分析报告。
一种手机来电情绪辨识的方法,该方法包括步骤:将对方的来电语音录制为模拟语音信号;将模拟语音信号转换为数字语音信号;通过端点侦测原理将数字语音信号中的有声语音数据与无声语音数据切割开来;根据有声语音信号的频率大小从有声语音信号中撷取不同的特征参数;根据不同的特征参数读取有声语音信号对应的情绪特征数据;对读取的情绪特征数据进行分类统计以产生情绪特征的分类统计数据;根据所述的分类统计数据产生来电对方的情绪分析报告。
所述的实现来电情绪辨识的手机及方法,能够在手机通话过程中辨识出对方的情绪状态,从而提升通话双方之间的通话质量。
附图说明
图1是本发明实现来电情绪辨识的手机较佳实施例的结构图。
图2是图1中的特征撷取单元利用端点侦测原理切割有声语音与无声语音的示意图。
图3是本发明实现手机来电情绪辨识的方法较佳实施例的流程图。
具体实施方式
参阅图1所示,是本发明实现来电情绪辨识的手机10较佳实施例的结构图。在本实施例中,所述的手机10包括语音录制单元1、数模(A/D)转换器2、特征撷取单元3、存储器4、情绪分类器5、情绪输出单元6以及显示屏幕7。
所述的语音录制单元1用于将对方的来电语音录制为模拟语音信号,并将该模拟语音信号传送给A/D转换器2。
所述的A/D转换器2用于将模拟语音信号转换为数字语音信号。
所述的特征撷取单元3用于通过端点侦测原理将数字语音信号中的有声语音数据和无声语音数据切割开来,以便从数字语音信号中获取有声语音信号,并根据有声语音信号的频率大小从有声语音信号中撷取不同的特征参数。如何利用端点侦测原理将数字语音信号中的有声语音数据和无声语音数据进行切割将在下图2中进行详细描述。所述的特征参数是用于描述语音特征的声学参数,例如倒谱系数(Mel-Frequency Cepstrum Coefficients,MFCC)等。
所述的存储器4用于存储不同特征参数所对应的情绪特征数据。例如:一个特征参数A与一个情绪特征数据(例如:生气“angry”)相对应。所述的情绪特征数据是手机制造商预先定义的,在本实施例中,该情绪特征数据直接存储在手机10的存储器4中。在其他实施例中,所述的情绪特征数据可以存储在手机运营商的网络数据库中。
所述的情绪分类器5用于根据不同的特征参数从存储器4中读取有声语音信号对应的情绪特征数据,并对读取的情绪特征数据进行分类统计以产生情绪特征的分类统计数据。情绪分类器5利用相近数据具有同类特征的原理对读取的情绪特征数据进行分类统计的,例如,若两个有声语音信号的MFCC值相差不大于一个预设值a,则该两个有声语音信号是相近的有声语音信号,且与同一个情绪特征(例如:生气“angry”)相对应。在本实施例中,情绪分类器5根据情绪特征的分类统计数据中统计值最高的情绪特征来判断对方当前情绪的,例如,若情绪特征的分类统计数据为:悲伤程度(sadness)=4,生气程度(angry)=2,快乐程度(happy)=1,中性程度(neutral)=1以及厌倦程度(bored)=0,则情绪分类器5判定该情绪类别就是“悲伤(sadness)”。
所述的情绪输出单元6用于根据情绪特征的分类统计数据产生来电对方的情绪分析报告,并将该情绪分析报告输出并显示在手机10的显示屏幕7上。所述的情绪分析报告包括生气程度、厌倦程度、快乐程度、平常程度及悲伤程度,从而让使用者了解对方通话时的情绪状态。
参阅图2所示,是图1中的特征撷取单元3利用端点侦测原理切割有声语音与无声语音的示意图。本实施例中,端点侦测主要目的是在切割出语音信号中的有声数据与无声数据,其依据某一个时间内语音信号中的能量和越零率。如图2所示,“En1”表示一个能量保守值,若语音信号的能量小于等于该能量保守值“En1”,则特征撷取单元3判定该语音信号为无声语音;若语音信号的能量大于该能量保守值“En1”,则特征撷取单元3判定该语音信号为有声语音。“En2”表示一个比“En1”大的开始能量值,若某一时刻“t1”的语音信号能量大于能量值“En2”,则该时刻“t1”即为该语音有声信号的开始。“EnEnd”表示一个比“En1”小的终点能量值,若某一时刻“t2”的语音信号能量小于能量值“EnEnd”,则该时刻“t2”即为该语音有声信号的结束。特征撷取单元3将时刻“t1”到时刻“t2”之间的按能量值的大小从语音信号中切割出声语音数据与无声语音数据。在图2中,同样可以采用越零率“ZCR”来切割出语音信号中的有声数据与无声数据,其判断依据与语音信号能量的判断原理相同,因此本实施例不再做详细地阐述。
参阅图3所示,是本发明手机来电情绪辨识的方法较佳实施例的流程图。语音录制单元1将对方的来电语音录制为模拟语音信号,并将该模拟语音信号传送给A/D转换器2(步骤S31)。A/D转换器2将模拟语音信号转换为数字语音信号(步骤S32)。
特征撷取单元3通过端点侦测原理将数字语音信号中的有声语音数据和无声语音数据切割开来,以便从数字语音信号中获取有声语音信号(步骤S33)。特征撷取单元3根据有声语音信号的频率大小从有声语音信号中撷取不同的特征参数(步骤S34),如何利用端点侦测原理切割数字语音信号中的有声语音数据和无声语音数据如图2描述。
情绪分类器5根据不同的特征参数从存储器4中读取有声语音信号对应的情绪特征数据(步骤S35)。情绪分类器5对读取的情绪特征数据进行分类统计以产生情绪特征的分类统计数据(步骤S36)。情绪分类器5利用相近数据具有同类特征的原理对读取的情绪特征数据进行分类统计的。例如,特征撷取单元3撷取有声语音的MFCC参数,情绪分类器5将MFCC值进行相邻距离计算,取K个值距离最短的情绪数据定义语音的情绪特征,如果取K=5,悲伤程度(sadness)=4,生气程度(angry)=2,快乐程度(happy)=1,中性程度(neutral)=1以及厌倦程度(bored)=0,则情绪分类器5判定该情绪类别就是“悲伤(sadness)”。
情绪输出单元6根据情绪分类器5产生的分类统计数据产生来电对方的情绪分析报告。所述的情绪分析报告描述了对方通话时的情绪状态,其包括生气程度、厌倦程度、快乐程度、平常程度以及悲伤程度(步骤S37)。最后,情绪输出单元6将该情绪分析报告输出并显示在手机10的显示屏幕7上,以供使用者了解对方通话时的情绪状态(步骤S38)。
以上实施例仅用以说明本发明的技术方案而非限制,尽管参照以上较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换都不应脱离本发明技术方案的精神和范围。

Claims (10)

1.一种实现来电情绪辨识的手机,其特征在于,该手机包括:
语音录制单元,用于将来电语音录制为模拟语音信号;
A/D转换器,用于将模拟语音信号转换为数字语音信号;
特征撷取单元,用于通过端点侦测原理切割数字语音信号中的有声语音数据和无声语音数据,并根据有声语音信号的频率大小从有声语音信号中撷取不同的特征参数;
情绪分类器,用于根据不同的特征参数读取有声语音信号对应的情绪特征数据,并对读取的情绪特征数据进行分类统计以产生情绪特征的分类统计数据;及
情绪输出单元,用于根据情绪分类器产生的分类统计数据生成来电对方的情绪分析报告。
2.如权利要求1所述的实现来电情绪辨识的手机,其特征在于,所述的情绪特征数据存储在手机的存储器中,或者存储在手机运营商的网络数据库中。
3.如权利要求1所述的实现来电情绪辨识的手机,其特征在于,所述的情绪分类器根据相近数据具有同类特征的原理对读取的情绪特征数据进行分类统计。
4.如权利要求1所述的实现来电情绪辨识的手机,其特征在于,所述的情绪输出单元还用于将所述的情绪分析报告输出并显示在手机的显示屏幕上。
5.如权利要求4所述的实现来电情绪辨识的手机,其特征在于,所述的情绪分析报告描述了对方通话时的情绪状态,包括生气程度、厌倦程度、快乐程度、平常程度以及悲伤程度。
6.一种手机来电情绪辨识的方法,其特征在于,该方法包括步骤:
将来电语音录制为模拟语音信号;
将模拟语音信号转换为数字语音信号;
通过端点侦测原理将数字语音信号中的有声语音数据与无声语音数据切割开来;
根据有声语音信号的频率大小从有声语音信号中撷取不同的特征参数;
根据不同的特征参数读取有声语音信号对应的情绪特征数据;
对读取的情绪特征数据进行分类统计以产生情绪特征的分类统计数据;
根据所述的分类统计数据产生来电对方的情绪分析报告。
7.如权利要求6所述的手机来电情绪辨识的方法,其特征在于,所述的情绪特征数据存储在手机的存储器中,或者存储在手机运营商的网络数据库中。
8.如权利要求6所述的手机来电情绪辨识的方法,其特征在于,所述的端点侦测原理依据语音信号中的能量和越零率来切割出语音信号中的有声数据与无声数据
9.如权利要求6所述的手机来电情绪辨识的方法,其特征在于,该方法还包括如下步骤:
将所述的情绪分析报告输出并显示在手机的显示屏幕上。
10.如权利要求9所述的手机来电情绪辨识的方法,其特征在于,所述的情绪分析报告描述了对方通话时的情绪状态,包括生气程度、厌倦程度、快乐程度、平常程度以及悲伤程度。
CN200810303557A 2008-08-06 2008-08-06 实现来电情绪辨识的手机及方法 Pending CN101645961A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN200810303557A CN101645961A (zh) 2008-08-06 2008-08-06 实现来电情绪辨识的手机及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200810303557A CN101645961A (zh) 2008-08-06 2008-08-06 实现来电情绪辨识的手机及方法

Publications (1)

Publication Number Publication Date
CN101645961A true CN101645961A (zh) 2010-02-10

Family

ID=41657675

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200810303557A Pending CN101645961A (zh) 2008-08-06 2008-08-06 实现来电情绪辨识的手机及方法

Country Status (1)

Country Link
CN (1) CN101645961A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103366760A (zh) * 2012-03-26 2013-10-23 联想(北京)有限公司 一种数据处理方法、装置及系统
CN103634472A (zh) * 2013-12-06 2014-03-12 惠州Tcl移动通信有限公司 根据通话语音判断用户心情及性格的方法、系统及手机
CN104113634A (zh) * 2013-04-22 2014-10-22 三星电子(中国)研发中心 一种对语音进行处理的方法
CN105323704A (zh) * 2014-07-07 2016-02-10 中兴通讯股份有限公司 一种用户评论分享方法、装置及系统
CN108122552A (zh) * 2017-12-15 2018-06-05 上海智臻智能网络科技股份有限公司 语音情绪识别方法和装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000062279A1 (en) * 1999-04-12 2000-10-19 Amir Liberman Apparatus and methods for detecting emotions in the human voice
US20020194002A1 (en) * 1999-08-31 2002-12-19 Accenture Llp Detecting emotions using voice signal analysis
CN1694162A (zh) * 2005-03-31 2005-11-09 金庆镐 语音识别分析系统及服务方法
CN1838237A (zh) * 2000-09-13 2006-09-27 株式会社A·G·I 情绪探测方法及其系统
CN101201980A (zh) * 2007-12-19 2008-06-18 北京交通大学 一种基于语音情感识别的远程汉语教学系统
CN201075286Y (zh) * 2007-07-27 2008-06-18 陈修志 语音识别装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2000062279A1 (en) * 1999-04-12 2000-10-19 Amir Liberman Apparatus and methods for detecting emotions in the human voice
US20020194002A1 (en) * 1999-08-31 2002-12-19 Accenture Llp Detecting emotions using voice signal analysis
CN1838237A (zh) * 2000-09-13 2006-09-27 株式会社A·G·I 情绪探测方法及其系统
CN1694162A (zh) * 2005-03-31 2005-11-09 金庆镐 语音识别分析系统及服务方法
CN201075286Y (zh) * 2007-07-27 2008-06-18 陈修志 语音识别装置
CN101201980A (zh) * 2007-12-19 2008-06-18 北京交通大学 一种基于语音情感识别的远程汉语教学系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
金学成: "基于语音信号的情感识别研究", 《中国博士学位论文全文数据库信息科技辑》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103366760A (zh) * 2012-03-26 2013-10-23 联想(北京)有限公司 一种数据处理方法、装置及系统
CN104113634A (zh) * 2013-04-22 2014-10-22 三星电子(中国)研发中心 一种对语音进行处理的方法
CN103634472A (zh) * 2013-12-06 2014-03-12 惠州Tcl移动通信有限公司 根据通话语音判断用户心情及性格的方法、系统及手机
CN105323704A (zh) * 2014-07-07 2016-02-10 中兴通讯股份有限公司 一种用户评论分享方法、装置及系统
CN108122552A (zh) * 2017-12-15 2018-06-05 上海智臻智能网络科技股份有限公司 语音情绪识别方法和装置
CN108122552B (zh) * 2017-12-15 2021-10-15 上海智臻智能网络科技股份有限公司 语音情绪识别方法和装置

Similar Documents

Publication Publication Date Title
CN102027536B (zh) 响应于说话时在用户面部中感测到的振动对麦克风信号进行自适应滤波的电子设备
CN100361197C (zh) 说话时段检测设备及方法、语音识别处理设备
CN102340599B (zh) 终端通话时的处理方法、终端以及处理系统
CN101789990A (zh) 一种在通话过程中判断对方情绪的方法及移动终端
CN101917656A (zh) 音量自动调节装置及自动调节音量的方法
CN101645961A (zh) 实现来电情绪辨识的手机及方法
KR101010852B1 (ko) 음성 프로세서 및 통신 단말 장치
WO2007121792A1 (en) Method and system for retrieving information
US20140257802A1 (en) Signal processing device, signal processing method, and storage medium
CN103730122A (zh) 语音转换设备及其用于转换用户语音的方法
CN105208189B (zh) 音频处理方法及移动终端
CN101510917A (zh) 一种移动终端无声通话的方法及移动终端
CN107369441A (zh) 语音信号的消噪方法、装置及终端
JP2007049657A (ja) 留守番電話装置
CN101257533A (zh) 智能化控制扬声器音量的移动终端及其实现方法
EP2917915B1 (en) Multi-resolution audio signals
CN103716467B (zh) 一种手机系统参数的调整方法及系统
JP5233287B2 (ja) 携帯通信端末
KR100792990B1 (ko) 이동통신망에서의 통화중 감정분석 서비스장치 및 방법
KR20070110509A (ko) 음원 공급 장치 및 음원 공급 방법
CN104394276A (zh) 一种移动终端及其在通话中自动免提的方法和装置
CN101399874A (zh) 手机铃声音量加强装置及方法
US20080146197A1 (en) Method and device for emitting an audible alert
KR100387962B1 (ko) 엠피쓰리 휴대폰에서의 엠피쓰리 음악 재생방법
TW201008222A (en) A mobile phone for emotion recognition of incoming-phones and a method thereof

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20100210