WO2018023523A1 - 一种运动及情感识别家居控制系统 - Google Patents

一种运动及情感识别家居控制系统 Download PDF

Info

Publication number
WO2018023523A1
WO2018023523A1 PCT/CN2016/093169 CN2016093169W WO2018023523A1 WO 2018023523 A1 WO2018023523 A1 WO 2018023523A1 CN 2016093169 W CN2016093169 W CN 2016093169W WO 2018023523 A1 WO2018023523 A1 WO 2018023523A1
Authority
WO
WIPO (PCT)
Prior art keywords
module
emotion recognition
motion
recognition
emotion
Prior art date
Application number
PCT/CN2016/093169
Other languages
English (en)
French (fr)
Inventor
易晓阳
Original Assignee
易晓阳
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 易晓阳 filed Critical 易晓阳
Priority to PCT/CN2016/093169 priority Critical patent/WO2018023523A1/zh
Publication of WO2018023523A1 publication Critical patent/WO2018023523A1/zh

Links

Images

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B15/00—Systems controlled by a computer
    • G05B15/02—Systems controlled by a computer electric

Definitions

  • Smart home is the embodiment of materialization under the influence of the Internet. Smart Home connects various devices in the home through IoT technology, providing home appliance control, lighting control, telephone remote control, indoor and outdoor remote control, burglar alarm, environmental monitoring, HVAC control, infrared forwarding and programmable timing control. Functions and means. Compared with ordinary homes, smart homes not only have traditional living functions, but also combine construction, network communication, information appliances, equipment automation, and integrate efficient systems, structures, services and management into a highly efficient, comfortable, safe, convenient and environmentally friendly living environment. Provide a full range of information interaction functions to help families and the outside to maintain information exchange, optimize people's lifestyles, help people to effectively arrange time, enhance the safety of home life, and even save money for various energy costs.
  • the sports and emotion recognition home control system of the present invention wherein at least four motion control modes are disposed in the motion recognition module.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Image Analysis (AREA)

Abstract

一种运动及情感识别家居控制系统，包括：运动识别模块(40)、情感识别判断模块(30)、音频信号采集模块(10)、视频信号采集模块(20)、综合信息处理模块(50)、控制模块(60)、无线收发模块(70)；运动识别模块(40)、情感识别判断模块(30)与综合信息处理模块(50)电连接；音频信号采集模块(10)与情感识别判断模块(30)连接；视频信号采集模块(20)与运动识别模块(40)和情感识别判断模块(30)连接；综合信息处理模块(50)通过控制模块(60)与无线收发模块(70)电连接；综合信息处理模块(50)，对运动识别结果、情感识别结果进行综合处理，得出综合判断信息，并根据该综合判断信息控制各智能家居设备执行相应的操作。给用户提供了多种选择，使得智能家居的使用更加人性化。

Description

一种运动及情感识别家居控制系统 技术领域
本发明涉及智能家居技术领域，更具体地说，涉及一种运动及情感识别家居控制系统。
背景技术
智能家居是在互联网的影响之下物联化的体现。智能家居通过物联网技术将家中的各种设备连接到一起，提供家电控制、照明控制、电话远程控制、室内外遥控、防盗报警、环境监测、暖通控制、红外转发以及可编程定时控制等多种功能和手段。与普通家居相比，智能家居不仅具有传统的居住功能，兼备建筑、网络通信、信息家电、设备自动化，集系统、结构、服务、管理为一体的高效、舒适、安全、便利、环保的居住环境，提供全方位的信息交互功能，帮助家庭与外部保持信息交流畅通，优化人们的生活方式，帮助人们有效安排时间，增强家居生活的安全性，甚至为各种能源费用节约资金。
随着智能家居的越来越普及，单一的识别控制模式已经不能满足人们的需要。
发明内容
本发明要解决的技术问题在于，针对现有技术的上述缺陷，提供一种运动及情感识别家居控制系统。
本发明解决其技术问题所采用的技术方案是：
构造一种运动及情感识别家居控制系统，其中，包括：运动识别模块、情感识别判断模块、音频信号采集模块、视频信号采集模块、综合信息处理模块、控制模块、无线收发模块；所述运动识别模块、情感识别判断模块与所述综合信息处理模块电连接；所述音频信号采集模块与所述情感识别判断模块连接；所述视频信号采集模块与所述运动识别模块和所述情感识别判断模块连接；所述综合信息处理模块通过所述控制模块与所述无线收发模块电连接；所述综合信息处理模块，用于对运动识别结果、情感识别结果进行综合处理，得出综合判断信息，并根据该综合判断信息控制各智能家居设备执行相应的操作。
本发明所述的运动及情感识别家居控制系统，其中，所述运动识别模块包括：
第一图像分析单元，用于根据获取的运动图像生成模拟运动图形，并于标准运动控制方式对应的运动图形相对比。
本发明所述的运动及情感识别家居控制系统，其中，所述运动识别模块包括：
第二图像分析单元，用于根据获取的视频信号生成运动轨迹，并于标准运动控制方式对应的运动轨迹相对比。
本发明所述的运动及情感识别家居控制系统，其中，所述综合信息处理模块包括：
识别状态判断单元，用于根据用户设置输入参数判断当前识别状态，其中，当前识别状态包括：只根据运动识别进行判断的第一识别状态、只根据情感识别进行判断的第二识别状态、同时根据运动和情感识别进行判断的第三识别状态。
本发明所述的运动及情感识别家居控制系统，其中，所述综合信息处理模 块还包括：
综合判断信息生成单元，用于在当前识别状态为第三识别状态时，将运动识别结果作为第一参数、将情感识别结果作为第二参数，根据预设的判断公式输出综合判断信息。
本发明所述的运动及情感识别家居控制系统，其中，所述情感识别判断模块包括：
第一情感识别单元，用于对所述语音信息进行语音音调情感识别，生成第一情感识别结果；
第二情感识别单元，用于将所述语音信息转换为文字信息后，对所述文字信息进行语义情感识别生成第二情感识别结果；
情感识别结果输出单元，用于基于所述第一情感识别结果和第二情感识别结果，根据预定的情感识别结果判断方法生成用户情感识别结果。
本发明所述的运动及情感识别家居控制系统，其中，所述运动识别模块内设置有至少四种运动控制方式。
本发明所述的运动及情感识别家居控制系统，其中，所述情感识别判断模块包括：
第三情感识别单元，用于对所述视频信号采集模块获取的面部图像信息进行图像识别判断，生成第三情感识别结果。
本发明的有益效果在于：通过采用情感识别和运动识别模式相结合的识别方式进行智能家居控制，给用户提供了多种选择，使得智能家居的使用更加人性化。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将结合附图及实施例对本发明作进一步说明，下面描述中的附图仅仅是本发明的部分实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他附图：
图1是本发明较佳实施例的运动及情感识别家居控制系统原理框图；
图2是本发明较佳实施例的运动及情感识别家居控制系统的运动识别模块原理框图。
具体实施方式
为了使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本发明的部分实施例，而不是全部实施例。基于本发明的实施例，本领域普通技术人员在没有付出创造性劳动的前提下所获得的所有其他实施例，都属于本发明的保护范围。
本发明较佳实施例的运动及情感识别家居控制系统原理框图如图1所示，包括：运动识别模块40、情感识别判断模块30、音频信号采集模块10、视频信号采集模块20、综合信息处理模块50、控制模块60、无线收发模块70；运动识别模块40、情感识别判断模块30与综合信息处理模块50电连接；音频信号采集模块10与情感识别判断模块30连接；视频信号采集模块20与运动识别模块40和情感识别判断模块30连接；综合信息处理模块50通过控制模块60与无线收发模块70电连接；综合信息处理模块50，用于对运动识别结果、情感识别结果进行综合处理，得出综合判断信息，并根据该综合判断信息控制各智能家居设备执行相应的操作。本实施例通过采用情感识别和运动识别 模式相结合的识别方式进行智能家居控制，给用户提供了多种选择，使得智能家居的使用更加人性化。
如图2所示，上述运动识别模块40包括：第一图像分析单元41，用于根据获取的运动图像生成模拟运动图形，并于标准运动控制方式对应的运动图形相对比。还进一步包括：第二图像分析单元42，用于根据获取的视频信号生成运动轨迹，并于标准运动控制方式对应的运动轨迹相对比。
上述运动及情感识别家居控制系统中，综合信息处理模块50包括：识别状态判断单元，用于根据用户设置输入参数判断当前识别状态，其中，当前识别状态包括：只根据运动识别进行判断的第一识别状态、只根据情感识别进行判断的第二识别状态、同时根据运动和情感识别进行判断的第三识别状态。
上述运动及情感识别家居控制系统中，综合信息处理模块50还包括：综合判断信息生成单元，用于在当前识别状态为第三识别状态时，将运动识别结果作为第一参数、将情感识别结果作为第二参数，根据预设的判断公式输出综合判断信息。
上述运动及情感识别家居控制系统中，情感识别判断模块包括：第一情感识别单元，用于对语音信息进行语音音调情感识别，生成第一情感识别结果；第二情感识别单元，用于将语音信息转换为文字信息后，对文字信息进行语义情感识别生成第二情感识别结果；情感识别结果输出单元，用于基于第一情感识别结果和第二情感识别结果，根据预定的情感识别结果判断方法生成用户情感识别结果。
上述运动及情感识别家居控制系统中，情感识别包括褒义情感识别和贬义情感识别。例如，选定若干个褒义种子词和若干个贬义种子词生成情感词典；分别计算文字信息中的词语与情感词典中的褒义种子词和贬义种子词的词语 相似度；根据词语相似度，通过预设的语义情感分析方法生成所述第二情感识别结果。具体地，可根据语义相似度计算方法分别计算所述文字信息中的词语与所述褒义种子词的词语相似度以及所述文字信息中的词语与所述贬义种子词的词语相似度。
上述实施例中，根据词语相似度，通过预设的语义情感分析方法生成所述第二情感识别结果的步骤具体方法为：通过词语情感倾向算式计算词语情感倾向值：当词语情感倾向值大于预定的阈值时，判断文字信息中的词语为褒义情感；当词语情感倾向值小于预定的阈值时，判断文字信息中的词语为贬义情感。
上述运动及情感识别家居控制系统中，情感识别判断模块包括：第三情感识别单元，用于对视频信号采集模块获取的面部图像信息进行图像识别判断，生成第三情感识别结果。
应当理解的是，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，而所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (8)

  1. 一种运动及情感识别家居控制系统，其特征在于，包括：运动识别模块、情感识别判断模块、音频信号采集模块、视频信号采集模块、综合信息处理模块、控制模块、无线收发模块；所述运动识别模块、情感识别判断模块与所述综合信息处理模块电连接；所述音频信号采集模块与所述情感识别判断模块连接；所述视频信号采集模块与所述运动识别模块和所述情感识别判断模块连接；所述综合信息处理模块通过所述控制模块与所述无线收发模块电连接；所述综合信息处理模块，用于对运动识别结果、情感识别结果进行综合处理，得出综合判断信息，并根据该综合判断信息控制各智能家居设备执行相应的操作。
  2. 根据权利要求1所述的运动及情感识别家居控制系统，其特征在于，所述运动识别模块包括：
    第一图像分析单元，用于根据获取的运动图像生成模拟运动图形，并于标准运动控制方式对应的运动图形相对比。
  3. 根据权利要求1所述的运动及情感识别家居控制系统，其特征在于，所述运动识别模块包括：
    第二图像分析单元，用于根据获取的视频信号生成运动轨迹，并于标准运动控制方式对应的运动轨迹相对比。
  4. 根据权利要求1所述的运动及情感识别家居控制系统，其特征在于，所述综合信息处理模块包括：
    识别状态判断单元，用于根据用户设置输入参数判断当前识别状态，其中，当前识别状态包括：只根据运动识别进行判断的第一识别状态、只根据情感识 别进行判断的第二识别状态、同时根据运动和情感识别进行判断的第三识别状态。
  5. 根据权利要求4所述的运动及情感识别家居控制系统，其特征在于，所述综合信息处理模块还包括：
    综合判断信息生成单元，用于在当前识别状态为第三识别状态时，将运动识别结果作为第一参数、将情感识别结果作为第二参数，根据预设的判断公式输出综合判断信息。
  6. 根据权利要求1所述的运动及情感识别家居控制系统，其特征在于，所述情感识别判断模块包括：
    第一情感识别单元，用于对所述语音信息进行语音音调情感识别，生成第一情感识别结果；
    第二情感识别单元，用于将所述语音信息转换为文字信息后，对所述文字信息进行语义情感识别生成第二情感识别结果；
    情感识别结果输出单元，用于基于所述第一情感识别结果和第二情感识别结果，根据预定的情感识别结果判断方法生成用户情感识别结果。
  7. 根据权利要求1所述的运动及情感识别家居控制系统，其特征在于，所述运动识别模块内设置有至少四种运动控制方式。
  8. 根据权利要求1所述的运动及情感识别家居控制系统，其特征在于，所述情感识别判断模块包括：
    第三情感识别单元，用于对所述视频信号采集模块获取的面部图像信息进行图像识别判断，生成第三情感识别结果。
PCT/CN2016/093169 2016-08-04 2016-08-04 一种运动及情感识别家居控制系统 WO2018023523A1 (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/093169 WO2018023523A1 (zh) 2016-08-04 2016-08-04 一种运动及情感识别家居控制系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/093169 WO2018023523A1 (zh) 2016-08-04 2016-08-04 一种运动及情感识别家居控制系统

Publications (1)

Publication Number Publication Date
WO2018023523A1 true WO2018023523A1 (zh) 2018-02-08

Family

ID=61072415

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2016/093169 WO2018023523A1 (zh) 2016-08-04 2016-08-04 一种运动及情感识别家居控制系统

Country Status (1)

Country Link
WO (1) WO2018023523A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109373500A (zh) * 2018-10-23 2019-02-22 珠海格力电器股份有限公司 一种具有与人互动功能的空调控制方法及空调器
CN112578681A (zh) * 2020-11-24 2021-03-30 薛廷兰 一种智能家居环境情感控制系统及基于该系统的控制方法
CN116909159A (zh) * 2023-01-17 2023-10-20 广东维锐科技股份有限公司 一种基于心情指数的智能家居控制系统及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102932212A (zh) * 2012-10-12 2013-02-13 华南理工大学 一种基于多通道交互方式的智能家居控制系统
CN103456299A (zh) * 2013-08-01 2013-12-18 百度在线网络技术（北京）有限公司 一种控制语音识别的方法和装置
WO2015088141A1 (en) * 2013-12-11 2015-06-18 Lg Electronics Inc. Smart home appliances, operating method of thereof, and voice recognition system using the smart home appliances
CN105334743A (zh) * 2015-11-18 2016-02-17 深圳创维－Rgb电子有限公司 一种基于情感识别的智能家居控制方法及其系统
CN105468145A (zh) * 2015-11-18 2016-04-06 北京航空航天大学 一种基于手势和语音识别的机器人人机交互方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102932212A (zh) * 2012-10-12 2013-02-13 华南理工大学 一种基于多通道交互方式的智能家居控制系统
CN103456299A (zh) * 2013-08-01 2013-12-18 百度在线网络技术（北京）有限公司 一种控制语音识别的方法和装置
WO2015088141A1 (en) * 2013-12-11 2015-06-18 Lg Electronics Inc. Smart home appliances, operating method of thereof, and voice recognition system using the smart home appliances
CN105334743A (zh) * 2015-11-18 2016-02-17 深圳创维－Rgb电子有限公司 一种基于情感识别的智能家居控制方法及其系统
CN105468145A (zh) * 2015-11-18 2016-04-06 北京航空航天大学 一种基于手势和语音识别的机器人人机交互方法和装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109373500A (zh) * 2018-10-23 2019-02-22 珠海格力电器股份有限公司 一种具有与人互动功能的空调控制方法及空调器
CN112578681A (zh) * 2020-11-24 2021-03-30 薛廷兰 一种智能家居环境情感控制系统及基于该系统的控制方法
CN116909159A (zh) * 2023-01-17 2023-10-20 广东维锐科技股份有限公司 一种基于心情指数的智能家居控制系统及方法

Similar Documents

Publication Publication Date Title
JP6690031B2 (ja) システムの制御方法、システム、及びプログラム
CN105118257B (zh) 智能控制系统及方法
US11354089B2 (en) System and method for dialog interaction in distributed automation systems
WO2020244573A1 (zh) 一种语音指令的处理方法、设备及控制系统
CN105471705B (zh) 一种基于即时通讯的智能控制方法、设备及系统
CN104049721B (zh) 信息处理方法及电子设备
CN103730116B (zh) 在智能手表上实现智能家居设备控制的系统及其方法
CN112051743A (zh) 设备控制方法、冲突处理方法、相应的装置及电子设备
CN107358954A (zh) 一种实时更换唤醒词的设备及方法
CN105045140A (zh) 智能控制受控设备的方法和装置
CN109951363B (zh) 数据处理方法、装置及系统
WO2018023515A1 (zh) 一种手势及情感识别家居控制系统
WO2017166462A1 (zh) 一种环境变化提醒方法、系统与头戴式vr设备
CN106228989A (zh) 一种语音交互识别控制方法
CN110415694A (zh) 一种多台智能音箱协同工作的方法
WO2018023523A1 (zh) 一种运动及情感识别家居控制系统
CN204884159U (zh) 无屏智能遥控器
CN106251871A (zh) 一种语音控制音乐本地播放装置
CN114582318B (zh) 一种基于语音识别的智能家居控制方法及系统
WO2018023514A1 (zh) 一种家居背景音乐控制系统
CN106125566A (zh) 一种家居背景音乐控制系统
CN106254186A (zh) 一种语音交互识别控制系统
WO2018023513A1 (zh) 一种基于运动识别的家居控制方法
JP6719434B2 (ja) 機器制御装置、機器制御方法及び機器制御システム
CN109343481A (zh) 一种控制设备的方法与设备

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16911120

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205 DATED 02/07/2019)

122 Ep: pct application non-entry in european phase

Ref document number: 16911120

Country of ref document: EP

Kind code of ref document: A1