CN103530912A - 一种具有情绪识别功能的考勤系统及方法 - Google Patents
一种具有情绪识别功能的考勤系统及方法 Download PDFInfo
- Publication number
- CN103530912A CN103530912A CN201310463876.5A CN201310463876A CN103530912A CN 103530912 A CN103530912 A CN 103530912A CN 201310463876 A CN201310463876 A CN 201310463876A CN 103530912 A CN103530912 A CN 103530912A
- Authority
- CN
- China
- Prior art keywords
- employee
- data
- database
- tone
- identification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Collating Specific Patterns (AREA)
- Time Recorders, Dirve Recorders, Access Control (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
一种具有情绪识别功能的考勤系统，其特征在于包括：中央处理器、人脸与表情识别单元、语音与语气识别单元、情绪判别单元、图象存储器、总线、图像编／解码电路、声音处理部、数据库、图像输入电路、LCD输出电路、LCD显示器以及图像采集装置。智能考勤系统通过人脸识别和语音识别的双重检验确定员工身份，更重要的是可以通过员工面部的表情和声音的语调进行员工情绪与状态的判别。以便于公司的管理人员掌握员工每天的工作状态，帮助员工调整到积极的工作状态。
Description
技术领域
本发明涉及一种基于用户表情和语气分析的智能情绪识别考勤系统。
背景技术
考勤系统是一种传统且广泛使用的公司管理设备。目前比较常用的考勤系统有指纹考勤、人脸考勤、智能卡考勤等等。这些现有的考勤系统可以很好的对员工的出勤状态进行记录和管理，但是除此之外就没有其他的功能了。
随着人性化管理的逐步深入人心，公司对于员工的出勤状态管理将不再局限于是否迟到、是否早退，更深一层，公司的管理人员还想掌握员工每天的工作状态如何，来上班的情绪是否积极，对于长期以消极情绪工作的员工，公司管理人员需要及时作出调整和沟通，帮助员工调整到积极的工作状态。
很显然传统的考勤系统已经无法满足以上的要求了。鉴于此，本发明介绍了一种可以通过员工的表情和语气判断和识别其情绪的智能考勤系统。
发明内容
本发明的目的在于提供一种基于用户表情和语气分析的智能情绪识别考勤系统，以便于公司的管理人员掌握员工每天的工作状态，帮助员工调整到积极的工作状态。
为了实现上述目的，本发明提供如下技术方案：
一种具有情绪识别功能的考勤系统，其特征在于包括：数据库、中央处理器、人脸与表情识别单元、语音与语气识别单元、情绪判别单元、图像输入电路、LCD输出电路、图像编／解码电路、声音处理部、图像采集装置、LCD显示器、图象存储器以及总线。
优选地是，所述图像采集装置为摄像头。
优选地是，所述数据库包括人脸与表情数据库和语音与语气数据库。
优选地是，所述总线包括数据总线和控制总线。
一种具有情绪识别功能的考勤方法，包括以下步骤：
(1)采集图像和语音数据，通过图像采集装置，采集人脸图像数据，并提示员工进行语音输入，采集语音数据；
(2)身份识别，将通过人脸与表情识别单元和语音与语气识别单元采集到的人脸数据和语音数据与数据库中的数据进行比对识别员工的身份，如果身份识别没有通过，考勤系统给出语音提示，如果身份识别通过，则进一步进行情绪识别；
(3)情绪识别，通过情绪判别单元识别员工情绪，其分为表情识别和语气识别两个部分，表情识别主要是判断员工的面部表情，语气识别主要是判断员工的声音的大小以及语调的高低；
(4)情绪分析，通过上述情绪识别的信息，考勤系统可以给出员工情绪的基本判断，当判断员工的情绪比较积极时，考勤系统不对数据库进行更新也不做任何记录，当员工的情绪被判断为比较消极时，考勤系统将此时的表情数据和语气数据记录到数据库中，如果连续一段时间都判断该员工的情绪比较消极时，则通过系统将信息发送至管理人员。
优选地是，在数据首次录入时就要求员工摆出平常的表情，发出正常的语气，在随后每天的考勤时，系统不断增加员工的人脸与表情数据库和语音与语气数据库。
优选地是，在步骤(4)中，还包括将采集的员工的表情数据和语气数据与原来存在数据库中的数据进行比对，如果当前的表情数据和语气数据与数据库中标准数据的不一样，则对员工情绪进行判断。
与现有技术相比，本发明解决了现有考勤机功能单一，不人性化的缺陷，便于公司的管理人员掌握员工每天的工作状态，帮助员工调整到积极的工作状态。
附图说明
图1是本发明的考勤系统的组成图。
图2是本发明的考勤系统识别用户身份及情绪的流程图。
具体实施方式
下面结合附图1-2对本发明的实施方式进行描述。
如图1所示，本发明的情绪识别考勤系统，包括：数据库1、中央处理器2、人脸与表情识别单元3、语音与语气识别单元4、情绪判别单元5、图像输入电路6、LCD输出电路7、图像编／解码电路8、声音处理部9、图像采集装置10、LCD显示器11、图象存储器12以及总线。
总线包括数据总线和控制总线；
所述数据库1，负责存储情绪识别算法程序及人脸与表情数据库和语音与语气数据库，并通过数据总线和与中央处理器2、人脸与表情识别单元3、语音与语气识别单元4和情绪判别单元5传输数据；
所述中央处理器2负责系统级的所有运算和操作，中央处理器2通过控制总线连接各外部设备、通过数据总线获取数据；
所述人脸与表情识别单元3、语音与语气识别单元4和情绪判别单元5，负责处理识别算法的运算；
所述图像输入电路6负责将图像采集装置10中的信号进行A／D转换后通过数据总线发送到DSP单元；
所述LCD输出电路7和LCD显示器11是用于图像显示的设备；
所述图像编／解码电路8，负责图像信号的编码和解码；
所述声音处理部9为语音信号处理电路，负责语音信号的采集、A／D转换及滤波；
所述图像存储器12负责存储一些需要记录和存档的图像数据。
智能考勤系统通过人脸识别和语音识别的双重检验确定员工身份，更重要的是可以通过员工面部的表情和声音的语调进行员工情绪与状态的判别。首先在数据首次录入时就要求员工摆出平常的表情，发出正常的语气，在随后每天的考勤时，系统不断增加每个员工的人脸与表情数据库和语音与语气数据库。
参见附图2所示的智能考勤系统识别用户身份及情绪的流程图，该情绪识别考勤方法包括以下步骤：智能考勤系统的摄像头时刻进行图像采集，当其检测到人脸时，考勤系统被激发，系统会给出语音提示，例如，提示员工与摄像头保持一定距离以保证最佳的人脸采集图像，还可以与员工打招呼并提示员工进行语音输入。当采集到合适的图像数据和语音数据后，考勤系统首先进行的是身份识别，通过将人脸图像和语音信息与数据库中的信息进行比对就可以识别出员工的身份。如果身份识别没有通过，考勤系统给出语音提示，如果身份识别通过，则进一步进行情绪识别。情绪识别也分为表情识别和语气识别两个部分。表情识别主要是判断员工有没有皱眉、眯眼、微笑等表情，语气识别主要是判断员工的声音的大小以及语调的高低。通过以上综合信息的融合，考勤系统可以给出员工情绪的基本判断，比如，愤怒、消极、疲惫、兴奋等等。一般来说，单单从以上信息进行判断会导致比较高的误判率，所以本发明还需要将员工输入的人脸图像信息和语气信息与原来存在数据库中的信息进行比对，如果当前的人脸信息与语气信息与数据库中标准信息的不一样，则可以对员工信息进行判断。
当判断员工的情绪比较积极时，考勤系统不对数据库进行更新也不做任何记录，当员工的情绪被判断为比较消极时，考勤系统将此时的人脸数据和语气数据记录到系统数据库中，如果连续一段时间都判断该员工的情绪比较消极时，则通过系统向管理人员报警，管理人员可以对数据库中记录的表情图像和语音数据进行核实，以便迅速做出回应，帮助员工尽快走出消极的工作状态。
Claims (7)
1.一种具有情绪识别功能的考勤系统，其特征在于包括：数据库、中央处理器、人脸与表情识别单元、语音与语气识别单元、情绪判别单元、图像输入电路、LCD输出电路、图像编／解码电路、声音处理部、图像采集装置、LCD显示器、图象存储器以及总线。
2.一种如权利要求1所述的考勤系统，其特征在于：所述图像采集装置为摄像头。
3.一种如权利要求1所述的考勤系统，其特征在于：所述数据库包括人脸与表情数据库和语音与语气数据库。
4.一种如权利要求1所述的考勤系统，其特征在于：所述总线包括数据总线和控制总线。
5.一种使用权利要求1-3中任一项所述的考勤系统的具有情绪识别功能的考勤方法，包括以下步骤：
(1)采集图像和语音数据，通过图像采集装置，采集人脸图像数据，并提示员工进行语音输入，采集语音数据；
(2)身份识别，将通过人脸与表情识别单元和语音与语气识别单元采集到的人脸数据和语音数据与数据库中的数据进行比对识别员工的身份，如果身份识别没有通过，考勤系统给出语音提示，如果身份识别通过，则进一步进行情绪识别；
(3)情绪识别，通过情绪判别单元识别员工情绪，其分为表情识别和语气识别两个部分，表情识别主要是判断员工的面部表情，语气识别主要是判断员工的声音的大小以及语调的高低；
(4)情绪分析，通过上述情绪识别的信息，考勤系统可以给出员工情绪的基本判断，当判断员工的情绪比较积极时，考勤系统不对数据库进行更新也不做任何记录，当员工的情绪被判断为比较消极时，考勤系统将此时的表情数据和语气数据记录到数据库中，如果连续一段时间都判断该员工的情绪比较消极时，则通过系统将信息发送至管理人员。
6.一种如权利要求4所述的考勤方法，其特征在于：在数据首次录入时就要求员工摆出平常的表情，发出正常的语气，在随后每天的考勤时，系统不断增加员工的人脸与表情数据库和语音与语气数据库。
7.一种如权利要求4所述的考勤方法，其特征在于：在步骤(4)中，还包括将采集的员工的表情数据和语气数据与原来存在数据库中的数据进行比对，如果当前的表情数据和语气数据与数据库中标准数据的不一样，则对员工情绪进行判断。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310463876.5A CN103530912A (zh) | 2013-09-27 | 2013-09-27 | 一种具有情绪识别功能的考勤系统及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310463876.5A CN103530912A (zh) | 2013-09-27 | 2013-09-27 | 一种具有情绪识别功能的考勤系统及方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN103530912A true CN103530912A (zh) | 2014-01-22 |
Family
ID=49932890
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310463876.5A Pending CN103530912A (zh) | 2013-09-27 | 2013-09-27 | 一种具有情绪识别功能的考勤系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103530912A (zh) |
Cited By (27)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104464001A (zh) * | 2014-12-04 | 2015-03-25 | 重庆晋才富熙科技有限公司 | 面视度考勤方法 |
| CN104835232A (zh) * | 2015-05-25 | 2015-08-12 | 郭萌 | 一种声控锁具 |
| CN105488859A (zh) * | 2015-11-24 | 2016-04-13 | 苏州铭冠软件科技有限公司 | 基于人脸识别和语音识别的考勤系统 |
| CN105788018A (zh) * | 2016-05-12 | 2016-07-20 | 杭州信鸽金融信息服务股份有限公司 | 一种基于平板电脑的人脸语音考勤系统 |
| CN106372604A (zh) * | 2016-08-31 | 2017-02-01 | 北京光年无限科技有限公司 | 智能机器人检测负面情绪的方法及系统 |
| CN106650621A (zh) * | 2016-11-18 | 2017-05-10 | 广东技术师范学院 | 一种基于深度学习的情绪识别方法及系统 |
| CN106970743A (zh) * | 2017-03-27 | 2017-07-21 | 宇龙计算机通信科技(深圳)有限公司 | 一种图标排序方法、装置及移动终端 |
| CN107647873A (zh) * | 2017-08-31 | 2018-02-02 | 维沃移动通信有限公司 | 一种情绪的检测方法及移动终端 |
| CN107729882A (zh) * | 2017-11-19 | 2018-02-23 | 济源维恩科技开发有限公司 | 基于图像识别的情绪识别判定方法 |
| CN107833018A (zh) * | 2017-11-10 | 2018-03-23 | 郑州工业应用技术学院 | 一种基于人脸识别技术的企业管理系统 |
| CN107918766A (zh) * | 2017-11-27 | 2018-04-17 | 中山路得斯空调有限公司 | 一种基于大数据实现的学生性格追踪系统 |
| CN108198265A (zh) * | 2018-03-13 | 2018-06-22 | 成都数智凌云科技有限公司 | 基于语音和人脸复合识别的考勤系统 |
| CN108229855A (zh) * | 2018-02-06 | 2018-06-29 | 上海小蚁科技有限公司 | 服务质量监测方法及装置、计算机可读存储介质、终端 |
| CN108416865A (zh) * | 2018-04-03 | 2018-08-17 | 郑州云海信息技术有限公司 | 一种基于云计算的人脸识别数据自动修正方法及系统 |
| CN108960022A (zh) * | 2017-09-19 | 2018-12-07 | 炬大科技有限公司 | 一种情绪识别方法及其装置 |
| CN109147529A (zh) * | 2018-09-29 | 2019-01-04 | 上海嘉奕医学科技有限公司 | 基于人工智能的可实现人文考核的标准化病人模拟系统 |
| CN109344739A (zh) * | 2018-09-12 | 2019-02-15 | 安徽美心信息科技有限公司 | 基于面部表情的情绪分析系统 |
| CN109407504A (zh) * | 2018-11-30 | 2019-03-01 | 华南理工大学 | 一种基于智能手表的人身安全检测系统及方法 |
| CN109672937A (zh) * | 2018-12-28 | 2019-04-23 | 深圳Tcl数字技术有限公司 | 电视应用主题切换方法、电视、可读存储介质及系统 |
| CN109829996A (zh) * | 2018-12-15 | 2019-05-31 | 深圳壹账通智能科技有限公司 | 应用签到方法、装置、计算机装置及存储介质 |
| CN109871807A (zh) * | 2019-02-21 | 2019-06-11 | 百度在线网络技术（北京）有限公司 | 人脸图像处理方法和装置 |
| CN110114740A (zh) * | 2016-12-27 | 2019-08-09 | 本田技研工业株式会社 | 信息提供装置以及信息提供方法 |
| CN110175522A (zh) * | 2019-04-24 | 2019-08-27 | 深圳智慧林网络科技有限公司 | 考勤方法、系统及相关产品 |
| CN110414205A (zh) * | 2019-07-31 | 2019-11-05 | 中国工商银行股份有限公司 | 用于生成用户画像的方法、装置、电子设备及介质 |
| CN112489235A (zh) * | 2020-10-30 | 2021-03-12 | 郑州富联智能工坊有限公司 | 考勤装置及其方法 |
| CN113409507A (zh) * | 2021-06-15 | 2021-09-17 | 深圳市纽贝尔电子有限公司 | 一种基于人脸识别的控制方法 |
| CN114333910A (zh) * | 2022-01-05 | 2022-04-12 | 游密科技(深圳)有限公司 | 基于视频会议的员工情绪识别方法、装置和计算机设备 |
-
2013
- 2013-09-27 CN CN201310463876.5A patent/CN103530912A/zh active Pending
Cited By (30)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104464001A (zh) * | 2014-12-04 | 2015-03-25 | 重庆晋才富熙科技有限公司 | 面视度考勤方法 |
| CN104835232A (zh) * | 2015-05-25 | 2015-08-12 | 郭萌 | 一种声控锁具 |
| CN105488859A (zh) * | 2015-11-24 | 2016-04-13 | 苏州铭冠软件科技有限公司 | 基于人脸识别和语音识别的考勤系统 |
| CN105788018A (zh) * | 2016-05-12 | 2016-07-20 | 杭州信鸽金融信息服务股份有限公司 | 一种基于平板电脑的人脸语音考勤系统 |
| CN106372604A (zh) * | 2016-08-31 | 2017-02-01 | 北京光年无限科技有限公司 | 智能机器人检测负面情绪的方法及系统 |
| CN106650621A (zh) * | 2016-11-18 | 2017-05-10 | 广东技术师范学院 | 一种基于深度学习的情绪识别方法及系统 |
| CN110114740A (zh) * | 2016-12-27 | 2019-08-09 | 本田技研工业株式会社 | 信息提供装置以及信息提供方法 |
| CN110114740B (zh) * | 2016-12-27 | 2022-10-18 | 本田技研工业株式会社 | 信息提供装置以及信息提供方法 |
| CN106970743A (zh) * | 2017-03-27 | 2017-07-21 | 宇龙计算机通信科技(深圳)有限公司 | 一种图标排序方法、装置及移动终端 |
| CN107647873A (zh) * | 2017-08-31 | 2018-02-02 | 维沃移动通信有限公司 | 一种情绪的检测方法及移动终端 |
| CN108960022A (zh) * | 2017-09-19 | 2018-12-07 | 炬大科技有限公司 | 一种情绪识别方法及其装置 |
| CN108960022B (zh) * | 2017-09-19 | 2021-09-07 | 炬大科技有限公司 | 一种情绪识别方法及其装置 |
| CN107833018A (zh) * | 2017-11-10 | 2018-03-23 | 郑州工业应用技术学院 | 一种基于人脸识别技术的企业管理系统 |
| CN107729882A (zh) * | 2017-11-19 | 2018-02-23 | 济源维恩科技开发有限公司 | 基于图像识别的情绪识别判定方法 |
| CN107918766A (zh) * | 2017-11-27 | 2018-04-17 | 中山路得斯空调有限公司 | 一种基于大数据实现的学生性格追踪系统 |
| CN108229855A (zh) * | 2018-02-06 | 2018-06-29 | 上海小蚁科技有限公司 | 服务质量监测方法及装置、计算机可读存储介质、终端 |
| CN108198265A (zh) * | 2018-03-13 | 2018-06-22 | 成都数智凌云科技有限公司 | 基于语音和人脸复合识别的考勤系统 |
| CN108416865A (zh) * | 2018-04-03 | 2018-08-17 | 郑州云海信息技术有限公司 | 一种基于云计算的人脸识别数据自动修正方法及系统 |
| CN109344739A (zh) * | 2018-09-12 | 2019-02-15 | 安徽美心信息科技有限公司 | 基于面部表情的情绪分析系统 |
| CN109147529A (zh) * | 2018-09-29 | 2019-01-04 | 上海嘉奕医学科技有限公司 | 基于人工智能的可实现人文考核的标准化病人模拟系统 |
| CN109407504B (zh) * | 2018-11-30 | 2021-05-14 | 华南理工大学 | 一种基于智能手表的人身安全检测系统及方法 |
| CN109407504A (zh) * | 2018-11-30 | 2019-03-01 | 华南理工大学 | 一种基于智能手表的人身安全检测系统及方法 |
| CN109829996A (zh) * | 2018-12-15 | 2019-05-31 | 深圳壹账通智能科技有限公司 | 应用签到方法、装置、计算机装置及存储介质 |
| CN109672937A (zh) * | 2018-12-28 | 2019-04-23 | 深圳Tcl数字技术有限公司 | 电视应用主题切换方法、电视、可读存储介质及系统 |
| CN109871807A (zh) * | 2019-02-21 | 2019-06-11 | 百度在线网络技术（北京）有限公司 | 人脸图像处理方法和装置 |
| CN110175522A (zh) * | 2019-04-24 | 2019-08-27 | 深圳智慧林网络科技有限公司 | 考勤方法、系统及相关产品 |
| CN110414205A (zh) * | 2019-07-31 | 2019-11-05 | 中国工商银行股份有限公司 | 用于生成用户画像的方法、装置、电子设备及介质 |
| CN112489235A (zh) * | 2020-10-30 | 2021-03-12 | 郑州富联智能工坊有限公司 | 考勤装置及其方法 |
| CN113409507A (zh) * | 2021-06-15 | 2021-09-17 | 深圳市纽贝尔电子有限公司 | 一种基于人脸识别的控制方法 |
| CN114333910A (zh) * | 2022-01-05 | 2022-04-12 | 游密科技(深圳)有限公司 | 基于视频会议的员工情绪识别方法、装置和计算机设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103530912A (zh) | 一种具有情绪识别功能的考勤系统及方法 | |
| CN102843543B (zh) | 视频会议提醒方法、装置和视频会议系统 | |
| EP3890342B1 (en) | Waking up a wearable device | |
| CN104376250A (zh) | 基于音型像特征的真人活体身份验证方法 | |
| CN105615902A (zh) | 情绪监控方法和装置 | |
| CN103561652A (zh) | 用于辅助患者的方法和系统 | |
| CN109036393A (zh) | 家电设备的唤醒词训练方法、装置及家电设备 | |
| WO2022142614A1 (zh) | 危险驾驶预警方法、装置、计算机设备及存储介质 | |
| CN107767873A (zh) | 一种快速准确的离线语音识别装置及方法 | |
| CN105389859A (zh) | 基于智慧灯杆的环卫人员工作状态监测系统及方法 | |
| US10769648B2 (en) | Automated business reviews based on patron sentiment | |
| CN109829691B (zh) | 基于位置和深度学习多重生物特征的c/s打卡方法和装置 | |
| CN107085717A (zh) | 一种家庭监控方法、服务端及计算机可读存储介质 | |
| CN110516568A (zh) | 一种基于人脸识别的高校多场景数据管理方法及系统 | |
| CN112883932A (zh) | 员工异常行为检测方法、装置及系统 | |
| WO2024082865A1 (zh) | 预警方法、装置、电子设备及存储介质 | |
| WO2016165403A1 (zh) | 一种交通辅助方法及系统 | |
| CN204331789U (zh) | 一种基于人脸识别的会议管理系统 | |
| CN116935277A (zh) | 多模态情感识别方法及装置 | |
| CN109345652A (zh) | 基于语音识别录入文字的考勤装置及实现方法 | |
| CN203288020U (zh) | 基于人脸识别的防盗系统 | |
| CN109117765A (zh) | 视频侦查装置和方法 | |
| CN108520749A (zh) | 一种基于语音的网格化管理控制方法及控制装置 | |
| CN114511817A (zh) | 面向微空间的人员行为全景画像智能监管系统 | |
| CN208654865U (zh) | 一种基于人头部姿态识别的考勤系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| DD01 | Delivery of document by public notice |
Addressee: Shenzhen Mai Ruisi intellectual technology company limited Document name: Notification of before Expiration of Request of Examination as to Substance |
|
| DD01 | Delivery of document by public notice |
Addressee: Shenzhen Mai Ruisi intellectual technology company limited Document name: Notification that Application Deemed to be Withdrawn |
|
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20140122 |