CN109992095A - 一种智能厨房的语音和手势结合的控制方法及控制装置 - Google Patents

一种智能厨房的语音和手势结合的控制方法及控制装置 Download PDF

Info

Publication number
CN109992095A
CN109992095A CN201711482556.9A CN201711482556A CN109992095A CN 109992095 A CN109992095 A CN 109992095A CN 201711482556 A CN201711482556 A CN 201711482556A CN 109992095 A CN109992095 A CN 109992095A
Authority
CN
China
Prior art keywords
gesture
phonetic order
instruction
preset
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711482556.9A
Other languages
English (en)
Inventor
杨志强
兰荣鑫
孙树波
肖莉莉
王滔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Science And Technology Co Ltd
Original Assignee
Qingdao Science And Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Science And Technology Co Ltd filed Critical Qingdao Science And Technology Co Ltd
Priority to CN201711482556.9A priority Critical patent/CN109992095A/zh
Publication of CN109992095A publication Critical patent/CN109992095A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种智能厨房的语音和手势结合的控制方法及控制装置,属于智能家居技术领域。该方法包括:获取用户的第一手势指令,根据第一手势指令切换至预设功能界面;获取用户的第一语音指令,根据第一语音指令选定预设功能界面的预设项目;获取用户的第二手势指令和/或第二语音指令,根据第二手势指令和/或第二语音指令对预设项目进行对应的运行控制。在本控制方法中,用户通过语音和手势对智能厨房中的智能设备进行控制,用户不用顾忌手上是否有油或水,一边尽情烹饪,一边享受其他兴趣,提高了用户的使用体验。

Description

一种智能厨房的语音和手势结合的控制方法及控制装置
技术领域
本发明涉及智能家居技术领域,特别涉及一种智能厨房的语音和手势结合的控制方法及控制装置。
背景技术
人们对生活质量的要求越来越高,越来越注重享受自身的兴趣,例如电视剧更新了或是动漫更新了,就必须要去看,若更新时间恰好是中午或傍晚做饭的时间,对于追剧爱好者或者动漫迷来说,此时大多是一边看电视剧剧或动漫,一边做饭。但很多烹饪过程需要用眼睛去看,从而影响看剧,例如切菜时,菜刚下锅时,为了观看完整的视频,在上述过程中要暂停正在播放的视频。但此时用户手上往往会沾满油或水,需要先把手擦干净,再暂停视频,烹饪,擦手,播放,烹饪,擦手,暂停……这些麻烦的过程极大的降低了用户体验。
发明内容
本发明实施例提供了一种智能厨房的语音和手势结合的控制方法及控制装置。常规控制方式中依赖触控输入指令而为烹饪过程中的用户带来不便的问题。
为了对披露的实施例的一些方面有一个基本的理解,下面给出了简单的概括。该概括部分不是泛泛评述,也不是要确定关键/重要组成元素或描绘这些实施例的保护范围。其唯一目的是用简单的形式呈现一些概念,以此作为后面的详细说明的序言。
根据本发明实施例的第一方面,提供了一种智能厨房的语音和手势结合的控制方法,包括:
获取用户的第一手势指令,根据所述第一手势指令切换至预设功能界面;
获取用户的第一语音指令,根据所述第一语音指令选定所述预设功能界面的预设项目;
获取用户的第二手势指令和/或第二语音指令,根据所述第二手势指令和/或第二语音指令对所述预设项目进行对应的运行控制。
在本控制方法中,用户通过语音和手势对智能厨房中的智能设备进行控制,用户不用顾忌手上是否有油或水,一边尽情烹饪,一边享受其他兴趣,提高了用户的使用体验。
一种可选的实施例中,所述根据所述第一手势指令切换至预设功能界面,具体为:
根据所述第一手势指令的特征获取所述第一手势指令对应的第一指令代码;
根据所述第一指令代码切换至所述预设功能界面。
一种可选的实施例中,所述根据所述第一语音指令获取所述预设功能界面的预设项目,具体为:
将所述第一语音指令转换为第一字符串;
以所述第一字符串为关键字进行搜索并获取搜索结果;
锁定所述搜索结果。
一种可选的实施例中,所述获取用户的第二手势指令和/或第二语音指令,具体为:
获取厨房的实际光强值或实际噪音强度值;
判断厨房的实际光强值是否大于第一光强预设值,若是,则获取用户的所述第二手势指令;
或者,判断厨房的实际噪音强度值是否小于第一噪音强度预设值,若是,则获取用户的所述第二语音指令。
一种可选的实施例中,判断是否所述实际光强值小于所述第一光强预设值并且所述实际噪音强度值大于第一噪音预设值,若是,则同时获取用户的所述第二手势指令和所述第二语音指令。
根据本发明实施例的第二方面,提供一种智能厨房的语音和手势结合的控制装置,包括:
显示模块,用于显示界面;
手势指令获取模块,用于获取用户的第一手势指令;或者,获取用户的第二手势指令;
语音指令获取模块,用于获取用户的第一语音指令;或者,获取用户的第二语音指令;
中央控制模块,用于根据所述第一手势指令将所述显示模块切换至预设功能界面;或者,根据所述第一语音指令选定所述预设功能界面的预设项目;或者,根据所述第二手势指令和/或第二语音指令对所述预设项目进行对应的运行控制。
一种可选的实施例中,所述中央控制模块具体用于根据所述第一手势指令的特征获取所述第一手势指令对应的第一指令代码;
根据所述第一指令代码切换至所述预设功能界面。
一种可选的实施例中,所述中央控制模块具体用于将所述第一语音指令转换为第一字符串;
以所述第一字符串为关键字进行搜索并获取搜索结果;
锁定所述搜索结果即可选定所述预设项目。
一种可选的实施例中,还包括:
光强测量模块,用于获取厨房的实际光强值;
噪音测量模块,用于获取厨房的实际噪音强度值;
第一判断模块,用于判断厨房的实际光强值是否大于第一光强预设值,若是,则获取用户的所述第二手势指令;
第二判断模块,用于判断厨房的实际噪音强度值是否小于第一噪音强度预设值,若是,则获取用户的所述第二语音指令。
一种可选的实施例中,还包括第三控制模块,用于判断是否所述实际光强值小于所述第一光强预设值并且所述实际噪音强度值大于第一噪音预设值,若是,则同时获取用户的所述第二手势指令和所述第二语音指令。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本发明。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种智能厨房的语音和手势结合的控制方法的流程示意图;
图2是根据一示例性实施例示出的一种根据第一手势指令切换至预设功能界面的流程示意图;
图3是根据一示例性实施例示出的一种配置第一手势指令过程的流程示意图;
图4是根据一示例性实施例示出的一种根据第一语音指令获取预设功能界面的预设项目的流程示意图;
图5是根据一示例性实施例示出的三种控制方式的流程示意图;
图6是根据一示例性实施例示出的一种获取用户的第二手势指令和/或第二语音指令的流程示意图;
图7是根据一示例性实施例示出的一种获取用户的第二手势指令和/或第二语音指令的流程示意图;
图8是根据一示例性实施例示出的一种根据第二手势指令和第二语音指令对预设项目进行对应的运行控制的流程示意图;
图9是根据一示例性实施例示出的一种根据第二手势指令和第二语音指令对预设项目进行对应的运行控制的流程示意图;
图10是根据一示例性实施例示出的一种获取第二指令代码的流程示意图;
图11是根据一示例性实施例示出的一种获取第二指令代码的流程示意图;
附图标识说明:U、第二特征集合;U1、第二特征集合第一子集;U2、第二特征集合第二子集;T、第二指令代码;T1、第二指令代码第一部分;T2、第二指令代码第二部分。
具体实施方式
以下描述和附图充分地示出本发明的具体实施方案,以使本领域的技术人员能够实践它们。实施例仅代表可能的变化。除非明确要求,否则单独的部件和功能是可选的,并且操作的顺序可以变化。一些实施方案的部分和特征可以被包括在或替换其他实施方案的部分和特征。本发明的实施方案的范围包括权利要求书的整个范围,以及权利要求书的所有可获得的等同物。在本文中,各实施方案可以被单独地或总地用术语“发明”来表示,这仅仅是为了方便,并且如果事实上公开了超过一个的发明,不是要自动地限制该应用的范围为任何单个发明或发明构思。本文中,诸如第一和第二等之类的关系术语仅仅用于将一个实体或者操作与另一个实体或操作区分开来,而不要求或者暗示这些实体或操作之间存在任何实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素。本文中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的结构、产品等而言,由于其与实施例公开的部分相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
根据本发明实施例的第一方面,提供一种智能厨房的语音和手势结合的控制方法,如图1所示,包括:
S101、获取用户的第一手势指令,根据第一手势指令切换至预设功能界面;
S102、获取用户的第一语音指令,根据第一语音指令选定预设功能界面的预设项目;
S103、获取用户的第二手势指令和/或第二语音指令,根据第二手势指令和/或第二语音指令对预设项目进行对应的运行控制。
在本实施例中,用户通过语音和手势对智能厨房中的智能设备进行控制,用户不用顾忌手上是否有油或水,一边尽情烹饪,一边享受其他兴趣,提高了用户的使用体验。
在步骤S101中,所谓获取用户的第一手势指令,即获取用户的手势的图形信息,并在该图形信息中提取该手势指令的特征。预设功能界面为常用功能的总菜单,例如预设功能界面包括但不限于:电视剧界面、动漫界面、电影界面、音乐界面和烹饪学习界面等,每个预设功能界面链接至独立的指令代码,执行对应的代码段即可选择对应的预设功能界面。例如电视剧界面对应第一指令代码中的第一个代码段,执行第一个代码段即可切换至电视剧界面;动漫界面对应第一指令代码中的第二个代码段,执行第二个代码段即可切换至动漫界面;电影界面对应第一指令代码中的第三个代码段,执行第三个代码段即可切换至电影界面;……,依次类推。
在步骤S101中,关于根据第一手势指令切换至预设功能界面,如图2所示,一种可选的实施方式为:
S201、根据第一手势指令的特征获取第一手势指令对应的第一指令代码;
S202、根据第一指令代码切换至预设功能界面;
在步骤S202中,执行在步骤S201中所获取的第一指令代码,即可切换至对应的预设功能界面。
不同的第一手势指令具有不同的特征,不同的特征对应着不同的第一指令代码,为实现根据第一手势指令的特征即可获取第一手势指令对应的第一指令代码的功能,在步骤S201前,还包括配置第一手势指令过程,如图3所示,具体为:
S301、获取第一手势指令的图形信息;
S302、根据图形信息获取第一手势指令的特征;
S303、为该特征配置对应功能的第一指令代码;
S304、存储第一手势指令的特征及其对应的第一指令代码。
上述配置第一手势指令过程,包括出厂前控制装置进行的默认配置第一手势指令过程,和控制装置在工作时进行的自定义配置第一手势指令过程。
若干个第一手势指令及其对应的第一指令代码形成第一手势指令集合,相应的,若干第二手势指令及其对应的第二指令代码形成第二手势指令结合。控制装置在特定阶段仅识别特定阶段的手势指令结合。在步骤S101中,只识别第一手势指令集合中的第一手势指令并执行对应的第一指令代码,在步骤S103中,只识别第二手势指令集合中的第二手指指令并执行对应的第二指令代码。例如,第一手势指令集合中“一根手指”对应“第一个代码段”,“第一个代码段”对应“选定电视剧界面”,而在第二手势指令集合中,“一根手指”对应“第一个代码段”,“第一个代码段”代表“播放”功能。那么,在步骤S101中,用户伸出一根手指,控制装置会执行“选定电视剧界面”动作而不会执行“播放”动作;同样的,在步骤S103中,用户伸出一根手指,控制装置执行“播放”动作,而不会执行“选定电视剧界面”动作。
在步骤S102中,所谓获取用户的第一语音指令,即获取用户的语音信息,并在该语音信息中提取出语音特征。不同的预设功能界面对应的预设项目是不同的。例如,电视剧界面的预设项目包括但不限于:“网络热播剧”、“本地缓冲剧”和“追剧更新剧”等几大类,或者电视剧界面的预设项目包括视频供应商所能提供的所有电视剧的名称,用户只需说出电视剧的详细名称即可选定该电视剧;烹饪学习界面的预设项目则包括但不限于菜谱的名称、原材料的名称、菜系名称等,例如用户只需说出菜谱的名称即可选定该菜谱,并进行学习。
步骤S102中,根据第一语音指令获取预设功能界面的预设项目,如图4所示,一种可选的实施方式为:
S401、将第一语音指令转换为第一字符串;
S402、以第一字符串为关键字进行搜索并获取搜索结果;
本步骤中的搜索包括网络搜索和本地搜索:若项目来源于网络,则进行网络搜索,例如更新的电视剧、西红柿炒鸡蛋的最新做法等;若项目存储在本地,则进行本地搜索,例如经常播放的经典音乐;
S403、锁定搜索结果;
本步骤中,锁定搜索结果即为选定预设项目。
步骤S103中根据不同的预设项目设置不同的运行控制策略。若预设项目为某一集电视剧时,以第20集《还珠格格》为例,此时的运行控制策略包括:播放、暂停、重播、快进、快退、上一集、下一集、音量加、音量减。若此时正在播放第1集《还珠格格》,那么运行控制策略中不包括“上一集”的控制策略。若预设项目为某一首经典音乐,此时的运行控制策略包括:播放、暂停、重播、快进、快退、上一首、下一首、音量加、音量减和播放模式。若预设项目为某一菜谱的视频教程,此时的运行控制策略包括:播放、暂停、重播、加速播放、减速播放、音量加和音量减。
步骤S103中获取用户的第二手势指令的方式与步骤S101中获取用户的第一手势指令的方式相同,步骤S103中获取用户的第二语音指令的方式与步骤S102中获取用户的第一手势指令的方式相同,这里不再一一赘述。
如图5所示,步骤S103包括以下三种控制方式:
S1031、获取用户的第二手势指令,根据第二手势指令对预设项目进行对应的运行控制。
S1032、获取用户的第二语音指令,根据第二语音指令对预设项目进行对应的运行控制。
S1033、同时获取用户的第二手势指令和第二语音指令,同时根据第二手势指令和第二语音指令对预设醒目进行对应的运行控制。
以上三种不同的实施方式对应不同的客观环境,故在步骤S103的“获取用户的第二手势指令和/或第二语音指令”中,还包括根据客观环境选择对应的控制方式,以保证控制装置准确的识别第二手势指令和第二语音指令。
一种可选的实施例中,获取用户的第二手势指令和/或第二语音指令,如图6所示,具体为:
S601、获取厨房的实际光强值或实际噪音强度值;
S6021、判断厨房的实际光强值是否大于第一光强预设值,若是,则执行步骤S6031;
S6031、获取用户的第二手势指令;
步骤S6021和步骤S6031表明,只有在实际光强值大于第一光强预设值的情况下,才选择获取用户的第二手势指令,以便控制装置可准确的识别用户的第二手势指令;
S6022、判断厨房的实际噪音强度值是否小于第一噪音强度预设值,若是,则执行步骤S6032;
S6032、获取用户的第二语音指令;
步骤S6022和步骤S6032表明,只有在实际噪音强度值小于第一噪音强度预设值的情况下,才选择获取用户的第二语音指令,以便控制装置可准确的识别用户的第二语音指令。
在实际光强值大于第一光强预设值并且实际噪音强度值小于第一造影强度预设值的情况下,仍按照当前的控制方式运行:若在获取第二手势指令的过程中检测到实际光强值大于第一光强预设值并且实际噪音强度值小于第一造影强度预设值,则继续获取第二手势指令,根据第二手势指令对预设项目进行对应的运行控制;若在获取第二语音指令的过程中检测到实际光强值大于第一光强预设值并且实际噪音强度值小于第一造影强度预设值,则继续获取第二语音指令,根据第二语音指令对预设项目进行对应的运行控制。
步骤S6021中的第一光强预设值指的是:在特定区域中,即手势指令识别区域,在保证获取的手势指令的图形信息为准确信息的前提下,逐渐降低手势指令输入区域的光强值,所得到的最小光强值即为第一光强预设值,即保证准确获取手势指令的图形信息的最小光强值。其中,一般人工判断获取的手势指令的图形信息是否为准确信息。
关于步骤S6022中的第一噪音强度预设值,若实际噪音强度值大于第一噪音预设值,识别用户语音的准确率低于标准线;若实际噪音强度值小于第一噪音预设值,识别用户语音的准确率高于标准线,才能保证用户具有较好的使用体验。
一种可选的实施例中,判断是否实际光强值小于第一光强预设值并且实际噪音强度值大于第一噪音预设值,若是,则同时获取用户的第二手势指令和第二语音指令。
在本实施中,获取用户的第二手势指令和/或第二语音指令,如图7所示,具体为:
S701、获取厨房的实际光强值或实际噪音强度值;
S7021、判断厨房的实际光强值是否大于第一光强预设值,若是,则执行步骤S7031;
S7031、获取用户的第二手势指令;即选择步骤S1031中的控制方式来运行;
S7022、判断厨房的实际噪音强度值是否小于第一噪音强度预设值,若是,则执行步骤S7032;
S7032、获取用户的第二语音指令;即选择步骤S1032中的控制方式来运行;
S7023、判断是否实际光强值小于第一光强预设值并且实际噪音强度值大于第一噪音预设值,若是,则执行步骤S7033;
S7033、同时获取用户的第二手势指令和第二语音指令;即选择步骤S1033中的控制方式来运行。
步骤S1031和步骤S1032中的控制方式表明,无论单以第二手势指令,还是单以第二语音指令,在外界环境合适的情况均可执行所有的运行控制策略,即,对于同一个运行控制策略,均存在一个与之对应的第二手势指令和一个与之对应的第而语音指令。
在实际光强值小于第一光强预设值并且实际噪音强度值大于第一噪音预设值的情况下,同时获取具有相同功能的第二手势指令和第二语音指令后,根据第二手势指令和第二语音指令对预设项目进行对应的运行控制,具体为:
对于具有相同功能的第二手势指令和第二语音指令,如图8所示:
S801、处理第二手势指令获取第二特征集合第一子集;
S802、处理第二语音指令获取第二特征集合第二子集;
其中,步骤S801与步骤S802的顺序部分先后;
S803、合并第二特征结合第一子集与第二特征集合第二子集获取第二特征集合;
S804、根据第二特征集合获取第二指令代码;
S805、根据第二指令代码对预设项目进行对应的运动控制。
在本实施例中,同时获取的具有相同功能的第二手势指令的特征和第二语音指令的特征具有互补的关系,即使无法获取完整的第二手势指令的特征和无法获取完整的第二语音指令,通过第二手势指令的部分特征与第二语音指令的部分特征仍能获取完整的第二特征集合,从而得到准确的第二指令代码,保证用户对智能厨房的智能设备进行准确的控制。
如图10所示,处理第二手势指令获取第二特征集合第一子集U1,U1={U_1,U_2,U_4};处理第二语音指令获取第二特征集合第二子集U2,U2={U_1,U_3,U_5};那么第二特征集合U=U1∪U2={U_1,U_2,U_3,U_4,U_5};根据完整的第二特征集合U获取对应的第二指令代码。
在本实施例中,完整的第二特征集合对应第二指令代码,意味着根据具有相同功能的第二手势指令和第二语音指令均可得到相同的第二特征集合;另外,在根据具有相同功能的第二手势指令和第二语音指令无法提取到相同的第二特征集合的情况下,仍然可将“残缺”的第二手势指令与“残缺”的第二语音指令互补:
一种可选的实施方式中,根据第二手势指令和第二语音指令对预设项目进行对应的运行控制,具体为:
对于具有相同功能的第二手势指令和第二语音指令,如图9所示:
S901、处理第二手势指令获取第二指令代码第一部分;
S902、处理第二语音指令获取第二指令代码第二部分;
其中,步骤S901与步骤S902的执行顺序不分先后;
S903、合并第二指令代码第一部分与第二指令代码第二部分获取完整第二指令代码;
S904、根据第二指令代码对预设项目进行对应的运动控制。
在本实施例中,将第二指令代码分割,第二手势指令的每个特征对应着部分代码,第二语音指令的每个特征对应着部分代码,不完整的第二手势指令只具有部分特征,根据该部分特征获取第二指令代码第一部分;不完整的第二语音指令只具有部分特征,根据该部分特征获取第二指令代码第二部分。在第二指令代码第一部分和第二指令代码第二部分中,会存在一些重叠的指令代码,对第二指令代码第一部分和第二指令代码第二部分取并运算,从而得到完整、准确的第二指令代码。
如图11所示,处理第二手势指令获取第二指令代码第一部分T1,T1={T_1,T_2,T_4};处理第二语音指令获取第二指令代码第二部分T2,T2={T_1,T_3,T_5};那么第一语音指令T=T1∪T2={T_1,T_2,T_3,T_4,T_5}。
根据本发明实施例的第二方面,提供一种智能厨房的语音和手势结合的控制装置,包括:
显示模块,用于显示界面;
手势指令获取模块,用于获取用户的第一手势指令;或者,获取用户的第二手势指令;
语音指令获取模块,用于获取用户的第一语音指令;或者,获取用户的第二语音指令;
中央控制模块,用于根据第一手势指令将显示模块切换至预设功能界面;或者,根据第一语音指令选定预设功能界面的预设项目;或者,根据第二手势指令和/或第二语音指令对预设项目进行对应的运行控制。
一种可选的实施例中,中央控制模块具体用于根据第一手势指令的特征获取第一手势指令对应的第一指令代码;
根据第一指令代码切换至预设功能界面。
一种可选的实施例中,中央控制模块具体用于将第一语音指令转换为第一字符串;
以第一字符串为关键字进行搜索并获取搜索结果;
锁定搜索结果即可选定预设项目。
一种可选的实施例中,还包括:
光强测量模块,用于获取厨房的实际光强值;
噪音测量模块,用于获取厨房的实际噪音强度值;
第一判断模块,用于判断厨房的实际光强值是否大于第一光强预设值,若是,则获取用户的第二手势指令;
第二判断模块,用于判断厨房的实际噪音强度值是否小于第一噪音强度预设值,若是,则获取用户的第二语音指令。
一种可选的实施例中,还包括第三控制模块,用于判断是否实际光强值小于第一光强预设值并且实际噪音强度值大于第一噪音预设值,若是,则同时获取用户的第二手势指令和第二语音指令。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的流程及结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (10)

1.一种智能厨房的语音和手势结合的控制方法,其特征在于,包括:
获取用户的第一手势指令,根据所述第一手势指令切换至预设功能界面;
获取用户的第一语音指令,根据所述第一语音指令选定所述预设功能界面的预设项目;
获取用户的第二手势指令和/或第二语音指令,根据所述第二手势指令和/或第二语音指令对所述预设项目进行对应的运行控制。
2.根据权利要求1所述的控制方法,其特征在于,所述根据所述第一手势指令切换至预设功能界面,具体为:
根据所述第一手势指令的特征获取所述第一手势指令对应的第一指令代码;
根据所述第一指令代码切换至所述预设功能界面。
3.根据权利要求1所述的控制方法,其特征在于,所述根据所述第一语音指令获取所述预设功能界面的预设项目,具体为:
将所述第一语音指令转换为第一字符串;
以所述第一字符串为关键字进行搜索并获取搜索结果;
锁定所述搜索结果。
4.根据权利要求1所述的控制方法,其特征在于,所述获取用户的第二手势指令和/或第二语音指令,具体为:
获取厨房的实际光强值或实际噪音强度值;
判断厨房的实际光强值是否大于第一光强预设值,若是,则获取用户的所述第二手势指令;
或者,判断厨房的实际噪音强度值是否小于第一噪音强度预设值,若是,则获取用户的所述第二语音指令。
5.根据权利要求4所述的控制方法,其特征在于,判断是否所述实际光强值小于所述第一光强预设值并且所述实际噪音强度值大于第一噪音预设值,若是,则同时获取用户的所述第二手势指令和所述第二语音指令。
6.一种智能厨房的语音和手势结合的控制装置,其特征在于,包括:
显示模块,用于显示界面;
手势指令获取模块,用于获取用户的第一手势指令;或者,获取用户的第二手势指令;
语音指令获取模块,用于获取用户的第一语音指令;或者,获取用户的第二语音指令;
中央控制模块,用于根据所述第一手势指令将所述显示模块切换至预设功能界面;或者,根据所述第一语音指令选定所述预设功能界面的预设项目;或者,根据所述第二手势指令和/或第二语音指令对所述预设项目进行对应的运行控制。
7.根据权利要求6所述的控制装置,其特征在于,所述中央控制模块具体用于根据所述第一手势指令的特征获取所述第一手势指令对应的第一指令代码;
根据所述第一指令代码切换至所述预设功能界面。
8.根据权利要求6所述的控制装置,其特征在于,所述中央控制模块具体用于将所述第一语音指令转换为第一字符串;
以所述第一字符串为关键字进行搜索并获取搜索结果;
锁定所述搜索结果即可选定所述预设项目。
9.根据权利要求6所述的控制装置,其特征在于,还包括:
光强测量模块,用于获取厨房的实际光强值;
噪音测量模块,用于获取厨房的实际噪音强度值;
第一判断模块,用于判断厨房的实际光强值是否大于第一光强预设值,若是,则获取用户的所述第二手势指令;
第二判断模块,用于判断厨房的实际噪音强度值是否小于第一噪音强度预设值,若是,则获取用户的所述第二语音指令。
10.根据权利要求9所述的控制装置,其特征在于,还包括第三控制模块,用于判断是否所述实际光强值小于所述第一光强预设值并且所述实际噪音强度值大于第一噪音预设值,若是,则同时获取用户的所述第二手势指令和所述第二语音指令。
CN201711482556.9A 2017-12-29 2017-12-29 一种智能厨房的语音和手势结合的控制方法及控制装置 Pending CN109992095A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711482556.9A CN109992095A (zh) 2017-12-29 2017-12-29 一种智能厨房的语音和手势结合的控制方法及控制装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711482556.9A CN109992095A (zh) 2017-12-29 2017-12-29 一种智能厨房的语音和手势结合的控制方法及控制装置

Publications (1)

Publication Number Publication Date
CN109992095A true CN109992095A (zh) 2019-07-09

Family

ID=67109838

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711482556.9A Pending CN109992095A (zh) 2017-12-29 2017-12-29 一种智能厨房的语音和手势结合的控制方法及控制装置

Country Status (1)

Country Link
CN (1) CN109992095A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113671846A (zh) * 2021-08-06 2021-11-19 深圳市欧瑞博科技股份有限公司 智能设备控制方法、装置、可穿戴设备及存储介质

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090150160A1 (en) * 2007-10-05 2009-06-11 Sensory, Incorporated Systems and methods of performing speech recognition using gestures
CN102339129A (zh) * 2011-09-19 2012-02-01 北京航空航天大学 一种基于语音和手势的多通道人机交互方法
CN102824092A (zh) * 2012-08-31 2012-12-19 华南理工大学 一种窗帘的智能手势和语音控制系统及其控制方法
CN103000054A (zh) * 2012-11-27 2013-03-27 广州中国科学院先进技术研究所 智能厨房烹饪教学机及其控制方法
CN103137128A (zh) * 2011-11-18 2013-06-05 索尼公司 用于设备控制的手势和语音识别
CN104111728A (zh) * 2014-06-26 2014-10-22 联想(北京)有限公司 基于操作手势的语音指令输入方法及电子设备
US20150339098A1 (en) * 2014-05-21 2015-11-26 Samsung Electronics Co., Ltd. Display apparatus, remote control apparatus, system and controlling method thereof
CN105204743A (zh) * 2015-09-28 2015-12-30 百度在线网络技术(北京)有限公司 用于语音和视频通讯的交互控制方法及装置
US9390726B1 (en) * 2013-12-30 2016-07-12 Google Inc. Supplementing speech commands with gestures
CN105867595A (zh) * 2015-01-21 2016-08-17 武汉明科智慧科技有限公司 联合语音信息与手势信息的人机交互方式以及实施装置
CN106125925A (zh) * 2016-06-20 2016-11-16 华南理工大学 基于手势和语音控制的智能抓捕方法
CN106569613A (zh) * 2016-11-14 2017-04-19 中国电子科技集团公司第二十八研究所 一种多模态人机交互系统及其控制方法
CN106568107A (zh) * 2016-05-23 2017-04-19 广东万和新电气股份有限公司 手势控制方法及其吸油烟机

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090150160A1 (en) * 2007-10-05 2009-06-11 Sensory, Incorporated Systems and methods of performing speech recognition using gestures
CN102339129A (zh) * 2011-09-19 2012-02-01 北京航空航天大学 一种基于语音和手势的多通道人机交互方法
CN103137128A (zh) * 2011-11-18 2013-06-05 索尼公司 用于设备控制的手势和语音识别
CN102824092A (zh) * 2012-08-31 2012-12-19 华南理工大学 一种窗帘的智能手势和语音控制系统及其控制方法
CN103000054A (zh) * 2012-11-27 2013-03-27 广州中国科学院先进技术研究所 智能厨房烹饪教学机及其控制方法
US9390726B1 (en) * 2013-12-30 2016-07-12 Google Inc. Supplementing speech commands with gestures
US20150339098A1 (en) * 2014-05-21 2015-11-26 Samsung Electronics Co., Ltd. Display apparatus, remote control apparatus, system and controlling method thereof
CN104111728A (zh) * 2014-06-26 2014-10-22 联想(北京)有限公司 基于操作手势的语音指令输入方法及电子设备
CN105867595A (zh) * 2015-01-21 2016-08-17 武汉明科智慧科技有限公司 联合语音信息与手势信息的人机交互方式以及实施装置
CN105204743A (zh) * 2015-09-28 2015-12-30 百度在线网络技术(北京)有限公司 用于语音和视频通讯的交互控制方法及装置
CN106568107A (zh) * 2016-05-23 2017-04-19 广东万和新电气股份有限公司 手势控制方法及其吸油烟机
CN106125925A (zh) * 2016-06-20 2016-11-16 华南理工大学 基于手势和语音控制的智能抓捕方法
CN106569613A (zh) * 2016-11-14 2017-04-19 中国电子科技集团公司第二十八研究所 一种多模态人机交互系统及其控制方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
胡小强: "《虚拟现实技术》", 31 July 2005, 北京邮电大学出版社 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113671846A (zh) * 2021-08-06 2021-11-19 深圳市欧瑞博科技股份有限公司 智能设备控制方法、装置、可穿戴设备及存储介质
CN113671846B (zh) * 2021-08-06 2024-03-12 深圳市欧瑞博科技股份有限公司 智能设备控制方法、装置、可穿戴设备及存储介质

Similar Documents

Publication Publication Date Title
CN105549888B (zh) 组合控件生成方法和装置
CN104238759B (zh) 实体按键控制终端的方法及装置
US20160209925A1 (en) Haptic design authoring tool
US20120084729A1 (en) Proactive browsing method with swing gesture in free space
CN105653140B (zh) 标签页自定义交互的方法和系统
US20140038489A1 (en) Interactive plush toy
US20090049389A1 (en) Usage Pattern Driven Graphical User Interface Element Rendering
CN107133368B (zh) 人机交互方法、系统及机器人
CN104166547B (zh) 一种频道的控制方法和装置
CN104182232B (zh) 一种创建上下文感知应用的方法及用户终端
CN105872803A (zh) 对智能电视进行声控的方法和装置
CN104898821B (zh) 一种信息处理的方法及电子设备
CN102132106A (zh) 烹饪设备智能发送报警信号的方法
CN107995510A (zh) 电视机控制方法、装置、电视机和可读存储介质
CN104575473B (zh) 电子乐器和音符选择方法
CN106603621B (zh) 智能烹饪厨具的设置方法及装置
CN105138234A (zh) 家用电器的操作提示系统和家用电器的操作提示方法
CN110377197A (zh) 电器设备的控制方法及装置、存储介质和处理器
CN106934067A (zh) 信息处理方法及电子设备
CN109992095A (zh) 一种智能厨房的语音和手势结合的控制方法及控制装置
CN106569661A (zh) 一种用于智能手表的表盘切换的设置方法和装置
CN107885567A (zh) 界面的显示方法、系统、可读存储介质及移动设备
Foukarakis et al. Applying a multimodal user interface development framework on a domestic service robot
CN107977072A (zh) 一种机器人使用的养成方法、养成专家系统及电子设备
CN104598133B (zh) 对象的说明书生成方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190709