CN106019977A - 一种手势及情感识别家居控制系统 - Google Patents

一种手势及情感识别家居控制系统 Download PDF

Info

Publication number
CN106019977A
CN106019977A CN201610639992.1A CN201610639992A CN106019977A CN 106019977 A CN106019977 A CN 106019977A CN 201610639992 A CN201610639992 A CN 201610639992A CN 106019977 A CN106019977 A CN 106019977A
Authority
CN
China
Prior art keywords
emotion recognition
module
gesture
emotion
control system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610639992.1A
Other languages
English (en)
Inventor
易晓阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201610639992.1A priority Critical patent/CN106019977A/zh
Publication of CN106019977A publication Critical patent/CN106019977A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00—Systems controlled by a computer
    • G05B15/02—Systems controlled by a computer electric
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/20—Pc systems
    • G05B2219/26—Pc applications
    • G05B2219/2642—Domotique, domestic, home control, automation, smart house

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Manufacturing & Machinery (AREA)
  • Quality & Reliability (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种手势及情感识别家居控制系统，包括：手势识别模块、情感识别判断模块、音频信号采集模块、视频信号采集模块、综合信息处理模块、控制模块、无线收发模块；手势识别模块、情感识别判断模块与综合信息处理模块电连接；音频信号采集模块与情感识别判断模块连接；视频信号采集模块与手势识别模块和情感识别判断模块连接；综合信息处理模块通过控制模块与无线收发模块电连接；综合信息处理模块，对手势识别结果、情感识别结果进行综合处理，得出综合判断信息，并根据该综合判断信息控制各智能家居设备执行相应的操作。本发明给用户提供了多种选择，使得智能家居的使用更加人性化。

Description

一种手势及情感识别家居控制系统
技术领域
本发明涉及智能家居技术领域，更具体地说，涉及一种手势及情感识别家居控制系统。
背景技术
智能家居是在互联网的影响之下物联化的体现。智能家居通过物联网技术将家中的各种设备连接到一起，提供家电控制、照明控制、电话远程控制、室内外遥控、防盗报警、环境监测、暖通控制、红外转发以及可编程定时控制等多种功能和手段。与普通家居相比，智能家居不仅具有传统的居住功能，兼备建筑、网络通信、信息家电、设备自动化，集系统、结构、服务、管理为一体的高效、舒适、安全、便利、环保的居住环境，提供全方位的信息交互功能，帮助家庭与外部保持信息交流畅通，优化人们的生活方式，帮助人们有效安排时间，增强家居生活的安全性，甚至为各种能源费用节约资金。
随着智能家居的越来越普及，单一的识别控制模式已经不能满足人们的需要。
发明内容
本发明要解决的技术问题在于，针对现有技术的上述缺陷，提供一种手势及情感识别家居控制系统。
本发明解决其技术问题所采用的技术方案是：
构造一种手势及情感识别家居控制系统，包括：手势识别模块、情感识别判断模块、音频信号采集模块、视频信号采集模块、综合信息处理模块、控制模块、无线收发模块；所述手势识别模块、情感识别判断模块与所述综合信息处理模块电连接；所述音频信号采集模块与所述情感识别判断模块连接；所述视频信号采集模块与所述手势识别模块和所述情感识别判断模块连接；所述综合信息处理模块通过所述控制模块与所述无线收发模块电连接；所述综合信息处理模块，用于对手势识别结果、情感识别结果进行综合处理，得出综合判断信息，并根据该综合判断信息控制各智能家居设备执行相应的操作。
本发明所述的手势及情感识别家居控制系统，其中，所述综合信息处理模块包括：
识别状态判断单元，用于根据用户设置输入参数判断当前识别状态，其中，当前识别状态包括：只根据手势识别进行判断的第一识别状态、只根据情感识别进行判断的第二识别状态、同时根据手势和情感识别进行判断的第三识别状态。
本发明所述的手势及情感识别家居控制系统，其中，所述综合信息处理模块还包括：
综合判断信息生成单元，用于在当前识别状态为第三识别状态时，将手势识别结果作为第一参数、将情感识别结果作为第二参数，根据预设的判断公式输出综合判断信息。
本发明所述的手势及情感识别家居控制系统，其中，所述情感识别判断模块包括：
第一情感识别单元，用于对所述语音信息进行语音音调情感识别，生成第一情感识别结果；
第二情感识别单元，用于将所述语音信息转换为文字信息后，对所述文字信息进行语义情感识别生成第二情感识别结果；
情感识别结果输出单元，用于基于所述第一情感识别结果和第二情感识别结果，根据预定的情感识别结果判断方法生成用户情感识别结果。
本发明所述的手势及情感识别家居控制系统，其中，所述手势识别模块连接有手势识别增强手套。
本发明所述的手势及情感识别家居控制系统，其中，所述手势识别增强手套内置红外光源，且所述手势识别增强手套的外表面设置有多个小孔以利于所述红外光源发射出的红外光透过进而增强所述手势识别模块对用户的手势的识别。
本发明所述的手势及情感识别家居控制系统，其中，所述情感识别包括褒义情感识别和贬义情感识别。
本发明所述的手势及情感识别家居控制系统，其中，所述情感识别判断模块包括：
第三情感识别单元，用于对所述视频信号采集模块获取的面部图像信息进行图像识别判断，生成第三情感识别结果。
本发明的有益效果在于：通过采用情感识别和手势识别模式相结合的识别方式进行智能家居控制，给用户提供了多种选择，使得智能家居的使用更加人性化。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将结合附图及实施例对本发明作进一步说明，下面描述中的附图仅仅是本发明的部分实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他附图：
图1是本发明较佳实施例的手势及情感识别家居控制系统原理框图。
具体实施方式
为了使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本发明的部分实施例，而不是全部实施例。基于本发明的实施例，本领域普通技术人员在没有付出创造性劳动的前提下所获得的所有其他实施例，都属于本发明的保护范围。
本发明较佳实施例的手势及情感识别家居控制系统原理框图如图1所示，包括：手势识别模块、情感识别判断模块、音频信号采集模块、视频信号采集模块、综合信息处理模块、控制模块、无线收发模块；手势识别模块、情感识别判断模块与综合信息处理模块电连接；音频信号采集模块与情感识别判断模块连接；视频信号采集模块与手势识别模块和情感识别判断模块连接；综合信息处理模块通过控制模块与无线收发模块电连接；综合信息处理模块，用于对手势识别结果、情感识别结果进行综合处理，得出综合判断信息，并根据该综合判断信息控制各智能家居设备执行相应的操作。本实施例通过采用情感识别和手势识别模式相结合的识别方式进行智能家居控制，给用户提供了多种选择，使得智能家居的使用更加人性化。
上述手势及情感识别家居控制系统中，综合信息处理模块包括：识别状态判断单元，用于根据用户设置输入参数判断当前识别状态，其中，当前识别状态包括：只根据手势识别进行判断的第一识别状态、只根据情感识别进行判断的第二识别状态、同时根据手势和情感识别进行判断的第三识别状态。
上述手势及情感识别家居控制系统中，综合信息处理模块还包括：综合判断信息生成单元，用于在当前识别状态为第三识别状态时，将手势识别结果作为第一参数、将情感识别结果作为第二参数，根据预设的判断公式输出综合判断信息。
上述手势及情感识别家居控制系统中，情感识别判断模块包括：第一情感识别单元，用于对语音信息进行语音音调情感识别，生成第一情感识别结果；第二情感识别单元，用于将语音信息转换为文字信息后，对文字信息进行语义情感识别生成第二情感识别结果；情感识别结果输出单元，用于基于第一情感识别结果和第二情感识别结果，根据预定的情感识别结果判断方法生成用户情感识别结果。
上述手势及情感识别家居控制系统中，手势识别模块连接有手势识别增强手套。手势识别增强手套内置红外光源，且手势识别增强手套的外表面设置有多个小孔以利于红外光源发射出的红外光透过进而增强手势识别模块对用户的手势的识别。
上述手势及情感识别家居控制系统中，情感识别包括褒义情感识别和贬义情感识别。例如，选定若干个褒义种子词和若干个贬义种子词生成情感词典；分别计算文字信息中的词语与情感词典中的褒义种子词和贬义种子词的词语相似度；根据词语相似度，通过预设的语义情感分析方法生成所述第二情感识别结果。具体地，可根据语义相似度计算方法分别计算所述文字信息中的词语与所述褒义种子词的词语相似度以及所述文字信息中的词语与所述贬义种子词的词语相似度。
上述实施例中，根据词语相似度，通过预设的语义情感分析方法生成所述第二情感识别结果的步骤具体方法为：通过词语情感倾向算式计算词语情感倾向值：当词语情感倾向值大于预定的阈值时，判断文字信息中的词语为褒义情感；当词语情感倾向值小于预定的阈值时，判断文字信息中的词语为贬义情感。
上述手势及情感识别家居控制系统中，情感识别判断模块包括：第三情感识别单元，用于对视频信号采集模块获取的面部图像信息进行图像识别判断，生成第三情感识别结果。
应当理解的是，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，而所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (8)

1.一种手势及情感识别家居控制系统，其特征在于，包括：手势识别模块、情感识别判断模块、音频信号采集模块、视频信号采集模块、综合信息处理模块、控制模块、无线收发模块；所述手势识别模块、情感识别判断模块与所述综合信息处理模块电连接；所述音频信号采集模块与所述情感识别判断模块连接；所述视频信号采集模块与所述手势识别模块和所述情感识别判断模块连接；所述综合信息处理模块通过所述控制模块与所述无线收发模块电连接；所述综合信息处理模块，用于对手势识别结果、情感识别结果进行综合处理，得出综合判断信息，并根据该综合判断信息控制各智能家居设备执行相应的操作。
2.根据权利要求1所述的手势及情感识别家居控制系统，其特征在于，所述综合信息处理模块包括：
识别状态判断单元，用于根据用户设置输入参数判断当前识别状态，其中，当前识别状态包括：只根据手势识别进行判断的第一识别状态、只根据情感识别进行判断的第二识别状态、同时根据手势和情感识别进行判断的第三识别状态。
3.根据权利要求2所述的手势及情感识别家居控制系统，其特征在于，所述综合信息处理模块还包括：
综合判断信息生成单元，用于在当前识别状态为第三识别状态时，将手势识别结果作为第一参数、将情感识别结果作为第二参数，根据预设的判断公式输出综合判断信息。
4.根据权利要求1所述的手势及情感识别家居控制系统，其特征在于，所述情感识别判断模块包括：
第一情感识别单元，用于对所述语音信息进行语音音调情感识别，生成第一情感识别结果；
第二情感识别单元，用于将所述语音信息转换为文字信息后，对所述文字信息进行语义情感识别生成第二情感识别结果；
情感识别结果输出单元，用于基于所述第一情感识别结果和第二情感识别结果，根据预定的情感识别结果判断方法生成用户情感识别结果。
5.根据权利要求1所述的手势及情感识别家居控制系统，其特征在于，所述手势识别模块连接有手势识别增强手套。
6.根据权利要求5所述的手势及情感识别家居控制系统，其特征在于，所述手势识别增强手套内置红外光源，且所述手势识别增强手套的外表面设置有多个小孔以利于所述红外光源发射出的红外光透过进而增强所述手势识别模块对用户的手势的识别。
7.根据权利要求1所述的手势及情感识别家居控制系统，其特征在于，所述情感识别包括褒义情感识别和贬义情感识别。
8.根据权利要求1所述的手势及情感识别家居控制系统，其特征在于，所述情感识别判断模块包括：
第三情感识别单元，用于对所述视频信号采集模块获取的面部图像信息进行图像识别判断，生成第三情感识别结果。
CN201610639992.1A 2016-08-05 2016-08-05 一种手势及情感识别家居控制系统 Pending CN106019977A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610639992.1A CN106019977A (zh) 2016-08-05 2016-08-05 一种手势及情感识别家居控制系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610639992.1A CN106019977A (zh) 2016-08-05 2016-08-05 一种手势及情感识别家居控制系统

Publications (1)

Publication Number Publication Date
CN106019977A true CN106019977A (zh) 2016-10-12

Family

ID=57134592

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610639992.1A Pending CN106019977A (zh) 2016-08-05 2016-08-05 一种手势及情感识别家居控制系统

Country Status (1)

Country Link
CN (1) CN106019977A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106019973A (zh) * 2016-07-30 2016-10-12 杨超坤 一种具有情感识别功能的智能家居
CN109542233A (zh) * 2018-11-30 2019-03-29 哈尔滨拓博科技有限公司 一种基于动态手势和人脸识别的灯具控制系统
CN111770609A (zh) * 2020-07-03 2020-10-13 深圳市明学光电股份有限公司 智能灯带控制系统和方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102932212A (zh) * 2012-10-12 2013-02-13 华南理工大学 一种基于多通道交互方式的智能家居控制系统
CN103456299A (zh) * 2013-08-01 2013-12-18 百度在线网络技术（北京）有限公司 一种控制语音识别的方法和装置
WO2015088141A1 (en) * 2013-12-11 2015-06-18 Lg Electronics Inc. Smart home appliances, operating method of thereof, and voice recognition system using the smart home appliances
CN105334743A (zh) * 2015-11-18 2016-02-17 深圳创维－Rgb电子有限公司 一种基于情感识别的智能家居控制方法及其系统
CN105468145A (zh) * 2015-11-18 2016-04-06 北京航空航天大学 一种基于手势和语音识别的机器人人机交互方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102932212A (zh) * 2012-10-12 2013-02-13 华南理工大学 一种基于多通道交互方式的智能家居控制系统
CN103456299A (zh) * 2013-08-01 2013-12-18 百度在线网络技术（北京）有限公司 一种控制语音识别的方法和装置
WO2015088141A1 (en) * 2013-12-11 2015-06-18 Lg Electronics Inc. Smart home appliances, operating method of thereof, and voice recognition system using the smart home appliances
CN105334743A (zh) * 2015-11-18 2016-02-17 深圳创维－Rgb电子有限公司 一种基于情感识别的智能家居控制方法及其系统
CN105468145A (zh) * 2015-11-18 2016-04-06 北京航空航天大学 一种基于手势和语音识别的机器人人机交互方法和装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106019973A (zh) * 2016-07-30 2016-10-12 杨超坤 一种具有情感识别功能的智能家居
CN109542233A (zh) * 2018-11-30 2019-03-29 哈尔滨拓博科技有限公司 一种基于动态手势和人脸识别的灯具控制系统
CN111770609A (zh) * 2020-07-03 2020-10-13 深圳市明学光电股份有限公司 智能灯带控制系统和方法

Similar Documents

Publication Publication Date Title
CN103730116B (zh) 在智能手表上实现智能家居设备控制的系统及其方法
CN106228989A (zh) 一种语音交互识别控制方法
CN106782535A (zh) 基于智能家电的数据处理方法及装置
CN105185378A (zh) 声控方法、声控系统及能够进行声控的空调
CN204904540U (zh) 有屏智能遥控器
CN106249614A (zh) 智能终端、智能家居系统、语音识别方法及下单方法
CN107818782B (zh) 一种实现家用电器智能控制的方法及系统
CN106205648A (zh) 一种语音控制音乐网络播放方法
CN103543699A (zh) 一种基于智能盒的智能家居管理系统
CN108332363A (zh) 一种带语音控制功能空调器及其控制方法
CN106019977A (zh) 一种手势及情感识别家居控制系统
CN111197841A (zh) 控制方法、装置、遥控终端、空调器、服务器及存储介质
WO2017166462A1 (zh) 一种环境变化提醒方法、系统与头戴式vr设备
CN106251871A (zh) 一种语音控制音乐本地播放装置
CN108156705A (zh) 一种智能语音灯光控制系统
CN106037560A (zh) 一种智能淋浴系统及其控制方法
CN106254186A (zh) 一种语音交互识别控制系统
CN106125566A (zh) 一种家居背景音乐控制系统
WO2018023515A1 (zh) 一种手势及情感识别家居控制系统
CN106296909A (zh) 一种智能开门方法
CN109584869A (zh) 家电语音采集方法、装置及计算机可读存储介质
CN205620724U (zh) 智能语音远程控制系统
CN103645690A (zh) 一种语音控制数字家庭智能盒的方法
CN104880953A (zh) 一种控制方法及智能家居控制设备
CN104698942A (zh) 一种智能控制与信息管理系统及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20161012

WD01 Invention patent application deemed withdrawn after publication