CN102932212A - 一种基于多通道交互方式的智能家居控制系统 - Google Patents

一种基于多通道交互方式的智能家居控制系统 Download PDF

Info

Publication number
CN102932212A
CN102932212A CN2012103883731A CN201210388373A CN102932212A CN 102932212 A CN102932212 A CN 102932212A CN 2012103883731 A CN2012103883731 A CN 2012103883731A CN 201210388373 A CN201210388373 A CN 201210388373A CN 102932212 A CN102932212 A CN 102932212A
Authority
CN
China
Prior art keywords
module
controller
control system
identification module
system based
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012103883731A
Other languages
English (en)
Inventor
徐向民
苗捷
翁俊武
崔东顺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
South China University of Technology SCUT
Original Assignee
South China University of Technology SCUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by South China University of Technology SCUT filed Critical South China University of Technology SCUT
Priority to CN2012103883731A priority Critical patent/CN102932212A/zh
Publication of CN102932212A publication Critical patent/CN102932212A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本发明公开了一种基于多通道交互方式的智能家居控制系统,包括控制器和控制网络;所述控制器包括前端传感器,包括前端摄像头和音频传感器;信号预处理模块,包括视频预处理模块和音频预处理模块;核心处理芯片,包括唇语识别模块、人脸识别模块和手势识别模块和语音识别模块;所述控制网络包括设于控制器上的控制器通信模块及设于家电上的家电通信模块。本发明利用各技术在其应用领域的优势,取长补短,各技术模块相对独立又相互融合,实现了家居控制系统的稳定与操作的舒适。

Description

一种基于多通道交互方式的智能家居控制系统
技术领域
本发明涉及智能家居控制技术,特别涉及一种基于多通道交互方式的智能家居控制系统。
背景技术
随着智能人机交互技术的飞速发展,各种各样的新型人机交互方式成为各国学者们研究的热门课题,同时已有不少新的人机交互方式走进了平常百姓家,为人们的日常生活及工作带来了各种便利。另一方面,随着三网技术日趋融合,智能家居这一概念日益得到实现,电脑已不再是人们获取信息、进行日常娱乐的唯一载体,不远的将来这一系列的功能将在我们的客厅中逐步得到实现。
但是我们也同样看到,如今的人机交互技术尚不成熟,仍然存在着许多难以跨越的技术瓶颈。各种人机交互技术,如手势识别、人脸识别、语音识别等,虽然都具有各自在实际运用上的优势,但是其现有的算法都仅针对特定的应用领域,还无法真正投入实际使用。
发明内容
为了克服现有技术的上述缺点与不足,本发明的目的在于提供一种基于多通道交互方式的智能家居控制系统,对唇语识别、人脸识别、手势识别和语音识别进行融合,利用各技术在其应用领域的优势,取长补短,各技术模块相对独立又相互融合,实现了家居控制系统的稳定与操作的舒适。
本发明的目的通过以下技术方案实现:
一种基于多通道交互方式的智能家居控制系统,包括控制器和控制网络;所述控制器包括
前端传感器,包括前端摄像头和音频传感器;用于获取视频数据和音频数据;
信号预处理模块,包括视频预处理和音频预处理模块;用于对前端传感器获取到的视频数据和音频数据进行预处理,以提高各输入信号的质量,保证后端算法处理的稳定性;
核心处理芯片,包括唇语识别模块、人脸识别模块、手势识别模块和语音识别模块;
所述唇语识别模块用于对预处理后的视频数据取出唇语图像的特征,利用唇语信息识别当前用户的嘴型变化,使用唇语识别模块同时可以降低用户进行语音识别操作时的误判率,以保证在噪声环境中语音操作也能正常识别;
所述人脸识别模块用于对视频数据中用户脸部特征进行提取,对用户的身份和位置进行确定,识别出不同注册用户的身份主要是有利于整个系统个性化操作的定制,如不同控制权的授予,用户的位置信息可以用于辅助手势识别确定用户手的操作区域、确定用户进行语音操作时的方位,以提高麦克风用户方位的音频输入增益;当有多个可能的用户时,此模块能够识别出所有人脸的位置,并对所有用户身份进行判断,并分别进行处理,询问用户哪位摄像头视野中的用户将被授予控制权;
所述手势识别模块用于对预处理后的视频数据中手势信息进行提取,确定手型、手的运动轨迹、手在图像中的坐标信息,进而对任意手型进行跟踪,对手在图像中的轮廓进行分析,用户通过特定的手势或动作以获得整个系统的启动和控制权,以实现对控制界面进行漫游和快捷操作;
所述语音识别模块用于对预处理后的音频数据进行识别;语音识别模块的识别对象包括孤立词汇的语音识别和连续大词汇量的语音识别,前者主要用来确定控制指令,后者主要用于文本的输入;孤立词汇及连续大词汇量的识别包含自然语言的处理,以增加语音识别模块的智能及容错性,自然语言处理能够很好的结合用户进行语音操作的上下文,预判各种用户指令所要表达的本质信息,更好地识别用户的语音的意义,从而更好地触发相应的指令。
所述控制网络包括设于控制器上的通信模块及设于家电上的通信模块。
所述控制器还包括显示模块,用于显示控制面板,有各种供选择的菜单。
所述前端摄像头在任何光照条件下均采用红外光进行主动照明,并仅对系统设定的波段的场景红外光进行采集。
所述音频传感器为麦克风阵列或指向性麦克风。
所述设于控制器上的通信模块及设于家电上的通信模块均为无线通信模块。
与现有技术相比,本发明具有以下优点和有益效果:
(1)本发明对现有的各种形式的人机交互技术,包括手势识别、语音识别、人脸识别、唇语识别技术等进行融合,利用各技术在其应用领域的优势,取长补短,各技术模块相对独立又相互融合,很好地做到了家居控制系统的稳定与操作的舒适。例如:利用唇语信息识别当前用户的嘴型变化,以此为依据降低用户进行语音识别操作时的误判率,以保证在噪声环境中语音操作也能正常识别;人脸识别模块识别出用户的位置信息,可以用于辅助手势识别确定用户手的操作区域、确定用户进行语音操作时的方位,以提高麦克风用户方位的音频输入增益;手势操作时双手需悬于半空,当用户操作时间过长时手臂会有酸痛感,这将给用户带来极大的不适,语音识别技术很好的解决了这一问题。
(2)本发明采用信号预处理模块对前端摄像头和音频传感器采集的数据进行预处理,提高了系统输入数据的质量及核心处理芯片的稳定性,使得系统能够很好地应对家居环境中各种不可预测的干扰,保证本系统最终能够很好地投入实际使用。
附图说明
图1为本发明的实施例的基于多通道交互方式的智能家居控制系统的组成示意图。
图2为本发明的实施例的核心处理芯片的工作流程图。
图3为本发明的实施例的控制网络的工作流程图。
具体实施方式
下面结合实施例及附图,对本发明作进一步地详细说明,但本发明的实施方式不限于此。
实施例
如图1所示,本实施例的基于多通道交互方式的智能家居控制系统包括控制器和无线控制网络。所述控制器包括前端传感器、信号预处理模块、核心处理芯片。所述无线控制网络包括设于控制器上的无线发射模块及设于各家电(包括电视机、冰箱、空调等)上的无线接收模块。
所述前端传感器用于获取视频数据和音频数据,包括前端摄像头和音频传感器;前端摄像头在任何光照条件下均采用红外光进行主动照明,保证场景照明的唯一性及可控性,仅对系统设定的波段的场景红外光进行采集。同时对前端摄像头曝光时间、量化级数、数据量化范围、数据压缩等参数进行控制或固化,保证了前端视频数据获取的完全可控。
所述音频传感器为麦克风阵列或指向性麦克风。由于家居环境中存在各种形式的噪声干扰,而现有基于普通麦克风的音频获取方式对于用户语音及环境噪声具有相同的灵敏度,没有区别语音与噪声的能力,因此容易造成用户语音识别指令操作正确率的下降。使用麦克风阵列或指向性麦克风可以克服上述问题,使用声源定位与语音增强算法跟踪操作用户的声音并对其声音信号进行增强,抑制周围环境噪声及人声干扰的影响,提高系统语音音频输入的信噪比,保证后端算法获取数据质量的可靠。
信号预处理模块,包括视频预处理模块和音频预处理模块;用于对前端传感器获取到的视频数据和音频数据进行预处理,以提高各输入信号的质量,保证后端算法处理的稳定性。
核心处理芯片,包括唇语识别模块、人脸识别模块和手势识别模块和语音识别模块。
所述唇语识别模块用于对预处理后的视频数据取出唇语图像的特征,利用唇语图像的特征识别当前用户的嘴型变化,使用唇语识别模块同时可以降低用户进行语音识别操作时的误判率,以保证在噪声环境中语音操作也能正常识别;然而,此模块主要用于但不局限于辅助语音识别模块。
所述人脸识别模块用于对视频数据中用户脸部特征进行提取,对用户的身份和位置进行确定,识别出不同注册用户的身份主要是有利于整个系统个性化操作的定制,如不同控制权的授予,用户的位置信息可以用于辅助手势识别确定用户手的操作区域、确定用户进行语音操作时的方位,以提高麦克风用户方位的音频输入增益;当有多个可能的用户时,此模块能够识别出所有人脸的位置,并对所有用户身份进行判断,并分别进行处理,询问用户哪位摄像头视野中的用户将被授予控制权。
所述手势识别模块用于对预处理后的视频数据中手势信息进行提取,确定手型和手的运动轨迹、手在图像中的坐标信息,进而对任意手型进行跟踪,对手在图像中的轮廓进行分析,用户通过特定的手势或动作以获得整个系统的启动和控制权,以实现对控制界面进行漫游和快捷操作;
所述语音识别模块用于对预处理后的音频数据进行识别;语音识别模块的识别对象包括孤立词汇的语音识别和连续大词汇量的语音识别,前者主要用来确定控制指令,后者主要用于文本的输入;孤立词汇及连续大词汇量的识别包含自然语言的处理,以增加语音识别模块的智能及容错性,自然语言处理能够很好的结合用户进行语音操作的上下文,预判各种用户指令所要表达的本质信息,更好地识别用户的语音的意义,从而更好地触发相应的指令。
本是实施例采用电视机作为控制器的显示模块,用于显示控制面板,有各种供选择的菜单。
如图2和图3所示,本实施例的基于多通道交互方式的智能家居控制系统的工作过程如下:前端摄像头采集到的视频数据经信号预处理模块预处理后由核心处理芯片中的唇语识别模块、人脸识别模块和手势识别模块进行识别,音频传感器采集到的视频数据经信号预处理模块预处理后由核心处理芯片中的语音识别模块进行识别和自然语言处理,识别结果由控制器无线发射模块发送到各家电无线接收模块,各家电执行相应操作。
上述实施例为本发明较佳的实施方式,但本发明的实施方式并不受所述实施例的限制,其他的任何未背离本发明的精神实质与原理下所作的改变、修饰、替代、组合、简化,均应为等效的置换方式,都包含在本发明的保护范围之内。

Claims (5)

1.一种基于多通道交互方式的智能家居控制系统,其特征在于,包括控制器和控制网络;所述控制器包括
前端传感器,包括前端摄像头和音频传感器;用于获取视频数据和音频数据;
信号预处理模块,包括视频预处理模块和音频预处理模块;用于对前端传感器获取到的视频数据和音频数据进行预处理;
核心处理芯片,包括唇语识别模块、人脸识别模块和手势识别模块和语音识别模块;所述唇语识别模块用于对预处理后的视频数据取出唇语图像的特征,利用唇语图像的特征识别当前用户的嘴型变化;所述人脸识别模块用于对预处理后的视频数据中用户脸部特征进行提取,对用户的身份和位置进行确定;所述手势识别模块用于对预处理后的视频数据中手势信息进行提取,确定手型和手的运动轨迹、手在图像中的坐标信息,进而对任意手型进行跟踪,对手在图像中的轮廓进行分析;所述语音识别模块用于对预处理后的音频数据进行识别;
所述控制网络包括设于控制器上的控制器通信模块及设于家电上的家电通信模块。
2.根据权利要求1所述的基于多通道交互方式的智能家居控制系统,其特征在于,所述控制器还包括显示模块,用于显示控制面板。
3.根据权利要求1所述的基于多通道交互方式的智能家居控制系统,其特征在于,所述前端摄像头在任何光照条件下均采用红外光进行主动照明,仅对系统设定的波段的场景红外光进行采集。
4.根据权利要求1所述的基于多通道交互方式的智能家居控制系统,其特征在于,所述音频传感器为麦克风阵列或指向性麦克风。
5.根据权利要求1所述的基于多通道交互方式的智能家居控制系统,其特征在于,所述设于控制器上的通信模块及设于家电上的通信模块均为无线通信模块。
CN2012103883731A 2012-10-12 2012-10-12 一种基于多通道交互方式的智能家居控制系统 Pending CN102932212A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2012103883731A CN102932212A (zh) 2012-10-12 2012-10-12 一种基于多通道交互方式的智能家居控制系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2012103883731A CN102932212A (zh) 2012-10-12 2012-10-12 一种基于多通道交互方式的智能家居控制系统

Publications (1)

Publication Number Publication Date
CN102932212A true CN102932212A (zh) 2013-02-13

Family

ID=47646919

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012103883731A Pending CN102932212A (zh) 2012-10-12 2012-10-12 一种基于多通道交互方式的智能家居控制系统

Country Status (1)

Country Link
CN (1) CN102932212A (zh)

Cited By (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103294197A (zh) * 2013-05-22 2013-09-11 深圳Tcl新技术有限公司 基于手势操作实现终端遥控的方法、终端
CN103345204A (zh) * 2013-05-10 2013-10-09 上海斐讯数据通信技术有限公司 一种家庭控制系统
CN104023208A (zh) * 2014-06-05 2014-09-03 北京小鱼儿科技有限公司 一种自动监测与自主反应的装置及方法
CN104244049A (zh) * 2014-10-21 2014-12-24 三星电子(中国)研发中心 一种动态调节曲率和方向的曲面电视和方法
CN104267618A (zh) * 2014-07-31 2015-01-07 广东美的制冷设备有限公司 基于红外定位的语音控制方法和系统
CN104409075A (zh) * 2014-11-28 2015-03-11 深圳创维-Rgb电子有限公司 语音识别方法和系统
CN104615243A (zh) * 2015-01-15 2015-05-13 深圳市掌网立体时代视讯技术有限公司 一种头戴式多通道交互系统及多通道交互方法
CN104714411A (zh) * 2013-12-13 2015-06-17 青岛海尔机器人有限公司 一种智能家居机器人
CN104898581A (zh) * 2014-03-05 2015-09-09 青岛海尔机器人有限公司 一种全息智能中控系统
CN104932797A (zh) * 2014-03-17 2015-09-23 深圳富泰宏精密工业有限公司 手势解锁方法及系统
CN105278817A (zh) * 2014-05-30 2016-01-27 金兆栋 一种语音、唇语控制装置及控制方法
CN105867595A (zh) * 2015-01-21 2016-08-17 武汉明科智慧科技有限公司 联合语音信息与手势信息的人机交互方式以及实施装置
CN106019977A (zh) * 2016-08-05 2016-10-12 易晓阳 一种手势及情感识别家居控制系统
US9477217B2 (en) 2014-03-06 2016-10-25 Haier Us Appliance Solutions, Inc. Using visual cues to improve appliance audio recognition
CN106125565A (zh) * 2016-08-05 2016-11-16 易晓阳 一种运动及情感识别家居控制系统
WO2016187964A1 (zh) * 2015-05-26 2016-12-01 深圳创维-Rgb电子有限公司 智能控制受控设备的方法和装置
CN106652409A (zh) * 2016-12-01 2017-05-10 重庆君农哥科技有限公司 无线传感终端装置
CN106648079A (zh) * 2016-12-05 2017-05-10 华南理工大学 一种基于人脸识别与手势交互的电视娱乐系统
CN106773815A (zh) * 2016-11-30 2017-05-31 广州微至科技有限公司 数字智能控制方法、装置和中控系统
CN107123423A (zh) * 2017-06-07 2017-09-01 微鲸科技有限公司 语音拾取装置及多媒体设备
CN107127765A (zh) * 2017-03-29 2017-09-05 广西喜爱家饮水设备有限公司 一种智能饮水机器人
CN107430854A (zh) * 2015-04-13 2017-12-01 Bsh家用电器有限公司 家用器具和用于操作家用器具的方法
CN107620996A (zh) * 2017-10-12 2018-01-23 信利光电股份有限公司 一种智能吸油烟机及其使用方法
WO2018023514A1 (zh) * 2016-08-04 2018-02-08 易晓阳 一种家居背景音乐控制系统
WO2018023523A1 (zh) * 2016-08-04 2018-02-08 易晓阳 一种运动及情感识别家居控制系统
WO2018023513A1 (zh) * 2016-08-04 2018-02-08 易晓阳 一种基于运动识别的家居控制方法
WO2018023515A1 (zh) * 2016-08-04 2018-02-08 易晓阳 一种手势及情感识别家居控制系统
WO2018027505A1 (zh) * 2016-08-09 2018-02-15 曹鸿鹏 一种灯光控制系统
WO2018027504A1 (zh) * 2016-08-09 2018-02-15 曹鸿鹏 一种灯光控制方法
CN107702273A (zh) * 2017-09-20 2018-02-16 珠海格力电器股份有限公司 空调控制方法和装置
CN107799125A (zh) * 2017-11-09 2018-03-13 维沃移动通信有限公司 一种语音识别方法、移动终端及计算机可读存储介质
CN108375911A (zh) * 2018-01-22 2018-08-07 珠海格力电器股份有限公司 一种设备控制方法、装置、存储介质及设备
CN108428453A (zh) * 2018-03-27 2018-08-21 王凯 一种基于唇语识别的智能终端操控系统
CN108874142A (zh) * 2018-06-26 2018-11-23 哈尔滨拓博科技有限公司 一种基于手势的无线智能控制装置及其控制方法
CN110021297A (zh) * 2019-04-13 2019-07-16 上海影隆光电有限公司 一种基于音视频识别的智能显示方法及其装置
CN110262278A (zh) * 2019-07-31 2019-09-20 珠海格力电器股份有限公司 智能家电设备的控制方法及装置、智能电器设备
CN110767221A (zh) * 2018-07-26 2020-02-07 珠海格力电器股份有限公司 家电设备及控制权限的确定方法
US10591999B2 (en) 2014-02-25 2020-03-17 Zte Corporation Hand gesture recognition method, device, system, and computer storage medium
WO2020103703A1 (zh) * 2018-11-23 2020-05-28 腾讯科技(深圳)有限公司 一种音频数据处理方法、装置、设备及存储介质
CN111522301A (zh) * 2019-02-01 2020-08-11 上海未为智能科技有限公司 语音控制智能家居系统和方法
CN111898108A (zh) * 2014-09-03 2020-11-06 创新先进技术有限公司 身份认证方法、装置、终端及服务器
CN112054946A (zh) * 2020-08-25 2020-12-08 华南理工大学 一种基于多模态信息融合的智能家居控制方法及其系统
WO2021007856A1 (zh) * 2019-07-18 2021-01-21 深圳海付移通科技有限公司 一种身份验证方法、终端设备、存储介质
WO2021007857A1 (zh) * 2019-07-18 2021-01-21 深圳海付移通科技有限公司 一种身份验证方法、终端设备、存储介质
CN112750437A (zh) * 2021-01-04 2021-05-04 欧普照明股份有限公司 控制方法、控制装置及电子设备
CN115333890A (zh) * 2022-10-09 2022-11-11 珠海进田电子科技有限公司 一种基于人工智能的家电控制型智能线控器
CN116301389A (zh) * 2023-05-17 2023-06-23 广东皮阿诺科学艺术家居股份有限公司 一种基于深度学习的多模态智能家具控制方法
CN116434027A (zh) * 2023-06-12 2023-07-14 深圳星寻科技有限公司 一种基于图像识别人工智能交互系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201181413Y (zh) * 2007-10-31 2009-01-14 陈修志 声控智能家居控制装置
US20090175509A1 (en) * 2008-01-03 2009-07-09 Apple Inc. Personal computing device control using face detection and recognition
CN202075689U (zh) * 2011-01-27 2011-12-14 广东九联科技股份有限公司 一种手势识别机顶盒
CN102298443A (zh) * 2011-06-24 2011-12-28 华南理工大学 结合视频通道的智能家居语音控制系统及其控制方法
CN202110564U (zh) * 2011-06-24 2012-01-11 华南理工大学 结合视频通道的智能家居语音控制系统
CN102393707A (zh) * 2011-10-27 2012-03-28 东莞中山大学研究院 基于机顶盒的智能家居控制系统
CN102427418A (zh) * 2011-12-09 2012-04-25 福州海景科技开发有限公司 基于语音识别的智能家居的系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201181413Y (zh) * 2007-10-31 2009-01-14 陈修志 声控智能家居控制装置
US20090175509A1 (en) * 2008-01-03 2009-07-09 Apple Inc. Personal computing device control using face detection and recognition
CN202075689U (zh) * 2011-01-27 2011-12-14 广东九联科技股份有限公司 一种手势识别机顶盒
CN102298443A (zh) * 2011-06-24 2011-12-28 华南理工大学 结合视频通道的智能家居语音控制系统及其控制方法
CN202110564U (zh) * 2011-06-24 2012-01-11 华南理工大学 结合视频通道的智能家居语音控制系统
CN102393707A (zh) * 2011-10-27 2012-03-28 东莞中山大学研究院 基于机顶盒的智能家居控制系统
CN102427418A (zh) * 2011-12-09 2012-04-25 福州海景科技开发有限公司 基于语音识别的智能家居的系统

Cited By (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103345204A (zh) * 2013-05-10 2013-10-09 上海斐讯数据通信技术有限公司 一种家庭控制系统
CN103294197A (zh) * 2013-05-22 2013-09-11 深圳Tcl新技术有限公司 基于手势操作实现终端遥控的方法、终端
CN104714411A (zh) * 2013-12-13 2015-06-17 青岛海尔机器人有限公司 一种智能家居机器人
US10591999B2 (en) 2014-02-25 2020-03-17 Zte Corporation Hand gesture recognition method, device, system, and computer storage medium
CN104898581B (zh) * 2014-03-05 2018-08-24 青岛海尔机器人有限公司 一种全息智能中控系统
CN104898581A (zh) * 2014-03-05 2015-09-09 青岛海尔机器人有限公司 一种全息智能中控系统
US9477217B2 (en) 2014-03-06 2016-10-25 Haier Us Appliance Solutions, Inc. Using visual cues to improve appliance audio recognition
CN104932797A (zh) * 2014-03-17 2015-09-23 深圳富泰宏精密工业有限公司 手势解锁方法及系统
CN105278817A (zh) * 2014-05-30 2016-01-27 金兆栋 一种语音、唇语控制装置及控制方法
CN104023208B (zh) * 2014-06-05 2019-07-05 北京小鱼在家科技有限公司 一种自动监测与自主反应的装置及方法
US10445587B2 (en) 2014-06-05 2019-10-15 Ainemo Inc. Device and method for automatic monitoring and autonomic response
CN104023208A (zh) * 2014-06-05 2014-09-03 北京小鱼儿科技有限公司 一种自动监测与自主反应的装置及方法
CN104267618A (zh) * 2014-07-31 2015-01-07 广东美的制冷设备有限公司 基于红外定位的语音控制方法和系统
CN111898108A (zh) * 2014-09-03 2020-11-06 创新先进技术有限公司 身份认证方法、装置、终端及服务器
CN104244049A (zh) * 2014-10-21 2014-12-24 三星电子(中国)研发中心 一种动态调节曲率和方向的曲面电视和方法
CN104409075A (zh) * 2014-11-28 2015-03-11 深圳创维-Rgb电子有限公司 语音识别方法和系统
CN104615243A (zh) * 2015-01-15 2015-05-13 深圳市掌网立体时代视讯技术有限公司 一种头戴式多通道交互系统及多通道交互方法
CN105867595A (zh) * 2015-01-21 2016-08-17 武汉明科智慧科技有限公司 联合语音信息与手势信息的人机交互方式以及实施装置
CN107430854A (zh) * 2015-04-13 2017-12-01 Bsh家用电器有限公司 家用器具和用于操作家用器具的方法
WO2016187964A1 (zh) * 2015-05-26 2016-12-01 深圳创维-Rgb电子有限公司 智能控制受控设备的方法和装置
WO2018023515A1 (zh) * 2016-08-04 2018-02-08 易晓阳 一种手势及情感识别家居控制系统
WO2018023514A1 (zh) * 2016-08-04 2018-02-08 易晓阳 一种家居背景音乐控制系统
WO2018023523A1 (zh) * 2016-08-04 2018-02-08 易晓阳 一种运动及情感识别家居控制系统
WO2018023513A1 (zh) * 2016-08-04 2018-02-08 易晓阳 一种基于运动识别的家居控制方法
CN106125565A (zh) * 2016-08-05 2016-11-16 易晓阳 一种运动及情感识别家居控制系统
CN106019977A (zh) * 2016-08-05 2016-10-12 易晓阳 一种手势及情感识别家居控制系统
WO2018027504A1 (zh) * 2016-08-09 2018-02-15 曹鸿鹏 一种灯光控制方法
WO2018027505A1 (zh) * 2016-08-09 2018-02-15 曹鸿鹏 一种灯光控制系统
CN106773815A (zh) * 2016-11-30 2017-05-31 广州微至科技有限公司 数字智能控制方法、装置和中控系统
CN106652409A (zh) * 2016-12-01 2017-05-10 重庆君农哥科技有限公司 无线传感终端装置
CN106648079A (zh) * 2016-12-05 2017-05-10 华南理工大学 一种基于人脸识别与手势交互的电视娱乐系统
CN107127765A (zh) * 2017-03-29 2017-09-05 广西喜爱家饮水设备有限公司 一种智能饮水机器人
CN107123423A (zh) * 2017-06-07 2017-09-01 微鲸科技有限公司 语音拾取装置及多媒体设备
CN107702273A (zh) * 2017-09-20 2018-02-16 珠海格力电器股份有限公司 空调控制方法和装置
CN107702273B (zh) * 2017-09-20 2020-06-16 珠海格力电器股份有限公司 空调控制方法和装置
CN107620996A (zh) * 2017-10-12 2018-01-23 信利光电股份有限公司 一种智能吸油烟机及其使用方法
CN107799125A (zh) * 2017-11-09 2018-03-13 维沃移动通信有限公司 一种语音识别方法、移动终端及计算机可读存储介质
CN108375911A (zh) * 2018-01-22 2018-08-07 珠海格力电器股份有限公司 一种设备控制方法、装置、存储介质及设备
CN108375911B (zh) * 2018-01-22 2020-03-27 珠海格力电器股份有限公司 一种设备控制方法、装置、存储介质及设备
CN108428453A (zh) * 2018-03-27 2018-08-21 王凯 一种基于唇语识别的智能终端操控系统
CN108874142A (zh) * 2018-06-26 2018-11-23 哈尔滨拓博科技有限公司 一种基于手势的无线智能控制装置及其控制方法
CN108874142B (zh) * 2018-06-26 2019-08-06 哈尔滨拓博科技有限公司 一种基于手势的无线智能控制装置及其控制方法
CN110767221A (zh) * 2018-07-26 2020-02-07 珠海格力电器股份有限公司 家电设备及控制权限的确定方法
US11710490B2 (en) 2018-11-23 2023-07-25 Tencent Technology (Shenzhen) Company Limited Audio data processing method, apparatus and storage medium for detecting wake-up words based on multi-path audio from microphone array
WO2020103703A1 (zh) * 2018-11-23 2020-05-28 腾讯科技(深圳)有限公司 一种音频数据处理方法、装置、设备及存储介质
CN111522301A (zh) * 2019-02-01 2020-08-11 上海未为智能科技有限公司 语音控制智能家居系统和方法
CN110021297A (zh) * 2019-04-13 2019-07-16 上海影隆光电有限公司 一种基于音视频识别的智能显示方法及其装置
WO2021007856A1 (zh) * 2019-07-18 2021-01-21 深圳海付移通科技有限公司 一种身份验证方法、终端设备、存储介质
WO2021007857A1 (zh) * 2019-07-18 2021-01-21 深圳海付移通科技有限公司 一种身份验证方法、终端设备、存储介质
CN110262278B (zh) * 2019-07-31 2020-12-11 珠海格力电器股份有限公司 智能家电设备的控制方法及装置、智能电器设备
CN110262278A (zh) * 2019-07-31 2019-09-20 珠海格力电器股份有限公司 智能家电设备的控制方法及装置、智能电器设备
CN112054946A (zh) * 2020-08-25 2020-12-08 华南理工大学 一种基于多模态信息融合的智能家居控制方法及其系统
CN112750437A (zh) * 2021-01-04 2021-05-04 欧普照明股份有限公司 控制方法、控制装置及电子设备
CN115333890A (zh) * 2022-10-09 2022-11-11 珠海进田电子科技有限公司 一种基于人工智能的家电控制型智能线控器
CN115333890B (zh) * 2022-10-09 2023-08-04 珠海进田电子科技有限公司 一种基于人工智能的家电控制型智能线控器
CN116301389A (zh) * 2023-05-17 2023-06-23 广东皮阿诺科学艺术家居股份有限公司 一种基于深度学习的多模态智能家具控制方法
CN116301389B (zh) * 2023-05-17 2023-09-01 广东皮阿诺科学艺术家居股份有限公司 一种基于深度学习的多模态智能家具控制方法
CN116434027A (zh) * 2023-06-12 2023-07-14 深圳星寻科技有限公司 一种基于图像识别人工智能交互系统

Similar Documents

Publication Publication Date Title
CN102932212A (zh) 一种基于多通道交互方式的智能家居控制系统
US10796694B2 (en) Optimum control method based on multi-mode command of operation-voice, and electronic device to which same is applied
CN104410883B (zh) 一种移动可穿戴非接触式交互系统与方法
WO2021135577A1 (zh) 音频信号处理方法、装置、电子设备及存储介质
CN103353935B (zh) 一种用于智能家居系统的3d动态手势识别方法
US20180048482A1 (en) Control system and control processing method and apparatus
CN105700363A (zh) 一种智能家居设备语音控制装置的唤醒方法及系统
US20210109598A1 (en) Systems, methods and devices for gesture recognition
WO2016150001A1 (zh) 语音识别的方法、装置及计算机存储介质
CN106569613A (zh) 一种多模态人机交互系统及其控制方法
CN106440192A (zh) 一种家电控制方法、装置、系统及智能空调
CN109767769A (zh) 一种语音识别方法、装置、存储介质及空调
CN107336243A (zh) 基于智能移动终端的机器人控制系统及控制方法
WO2018230160A1 (ja) 情報処理システム、情報処理方法、およびプログラム
CN105976814A (zh) 头戴设备的控制方法和装置
CN109901698B (zh) 一种智能交互方法、可穿戴设备和终端以及系统
JP2010511958A (ja) ジェスチャー/音声統合認識システム及び方法
CN111128157B (zh) 一种智能家电的免唤醒语音识别控制方法、计算机可读存储介质及空调
KR102431817B1 (ko) 사용자 발화를 처리하는 전자 장치 및 서버
WO2020192215A1 (zh) 一种交互方法及可穿戴交互设备
CN110010125A (zh) 一种智能机器人的控制方法、装置、终端设备及介质
CN105867595A (zh) 联合语音信息与手势信息的人机交互方式以及实施装置
CN103472915A (zh) 基于瞳孔跟踪的阅读控制方法、阅读控制装置及显示设备
CN105042789A (zh) 一种智能空调的控制方法及系统
CN110442233A (zh) 一种基于手势交互的增强现实键鼠系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20130213