CN113907609A - 一种应用于烹饪设备的交互方法及装置、设备、存储介质 - Google Patents

一种应用于烹饪设备的交互方法及装置、设备、存储介质 Download PDF

Info

Publication number
CN113907609A
CN113907609A CN202010659394.7A CN202010659394A CN113907609A CN 113907609 A CN113907609 A CN 113907609A CN 202010659394 A CN202010659394 A CN 202010659394A CN 113907609 A CN113907609 A CN 113907609A
Authority
CN
China
Prior art keywords
information
cooking
determining
progress
holographic projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010659394.7A
Other languages
English (en)
Other versions
CN113907609B (zh
Inventor
梁照辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Foshan Shunde Midea Electrical Heating Appliances Manufacturing Co Ltd
Original Assignee
Foshan Shunde Midea Electrical Heating Appliances Manufacturing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Foshan Shunde Midea Electrical Heating Appliances Manufacturing Co Ltd filed Critical Foshan Shunde Midea Electrical Heating Appliances Manufacturing Co Ltd
Priority to CN202010659394.7A priority Critical patent/CN113907609B/zh
Publication of CN113907609A publication Critical patent/CN113907609A/zh
Application granted granted Critical
Publication of CN113907609B publication Critical patent/CN113907609B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47JKITCHEN EQUIPMENT; COFFEE MILLS; SPICE MILLS; APPARATUS FOR MAKING BEVERAGES
    • A47J36/00Parts, details or accessories of cooking-vessels
    • A47J36/32Time-controlled igniting mechanisms or alarm devices
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47JKITCHEN EQUIPMENT; COFFEE MILLS; SPICE MILLS; APPARATUS FOR MAKING BEVERAGES
    • A47J27/00Cooking-vessels
    • A47J27/08Pressure-cookers; Lids or locking devices specially adapted therefor
    • A47J27/0802Control mechanisms for pressure-cookers
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47JKITCHEN EQUIPMENT; COFFEE MILLS; SPICE MILLS; APPARATUS FOR MAKING BEVERAGES
    • A47J36/00Parts, details or accessories of cooking-vessels
    • A47J36/32Time-controlled igniting mechanisms or alarm devices
    • A47J36/321Time-controlled igniting mechanisms or alarm devices the electronic control being performed over a network, e.g. by means of a handheld device

Landscapes

  • Engineering & Computer Science (AREA)
  • Food Science & Technology (AREA)
  • Electric Ovens (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例公开了一种应用于烹饪设备上的交互方法、装置、设备和存储介质,所述方法包括:获取烹饪设备上的信息采集组件采集的第一信息;基于所述第一信息中的唤醒信息,启动全息投影组件;获取所述信息采集组件采集的第二信息;基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;控制所述全息投影组件输出所述烹饪功能信息。

Description

一种应用于烹饪设备的交互方法及装置、设备、存储介质
技术领域
本申请实施例涉及家用技术,涉及但不限于一种应用于烹饪设备的交互方法及装置、设备、存储介质。
背景技术
目前的烹饪设备,由于一般缺少语音控制系统或投影控制系统,因此无法通过语音或投影相关画面和用户进行交互,烹饪设备的智能性不足,用户体验不够友好。
发明内容
有鉴于此,本申请实施例提供一种应用于烹饪设备上的交互方法及装置、设备、存储介质。
第一方面,本申请实施例提供一种应用于烹饪设备上的交互方法,所述方法包括:获取烹饪设备上的信息采集组件采集的第一信息;基于所述第一信息中的唤醒信息,启动全息投影组件;获取所述信息采集组件采集的第二信息;基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;控制所述全息投影组件输出所述烹饪功能信息。
第二方面,本申请实施例提供一种应用于烹饪设备的交互装置,所述装置包括:第一获取模块,用于获取烹饪设备上的信息采集组件采集的第一信息;启动模块,用于基于所述第一信息中的唤醒信息,启动全息投影组件;第二获取模块,用于获取所述信息采集组件采集的第二信息;确定模块,用于基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;输出模块,用于控制所述全息投影组件输出所述烹饪功能信息。
第三方面,本申请实施例提供一种烹饪设备,包括存储器和处理器,所述存储器存储有可在处理器上运行的烹饪程序,所述处理器执行所述烹饪程序时实现本申请实施例第一方面所述交互方法中的步骤。
第四方面,本申请实施例提供一种计算机可读存储介质,其上存储有烹饪程序,该烹饪程序被处理器执行时实现本申请实施例第一方面所述交互方法中的步骤。
本申请实施例中,通过烹饪设备的信息采集组件采集交互对象的第一信息以启动烹饪设备的全息投影组件,通过信息采集组件采集交互对象的第二信息,并通过全息投影组件投影根据所述第二信息确定出的、与交互对象进行交互的烹饪功能信息,从而能够提高所述烹饪设备的智能性,并使得烹饪设备和交互对象之间的交互更加友好和高效。
附图说明
图1为本申请实施例一种烹饪设备的示意图;
图2为本申请实施例一种应用于烹饪设备的交互方法的流程示意图;
图3为本申请实施例一种用户和烹饪设备的交互示意图;
图4为本申请实施例另一种用户和烹饪设备的交互示意图;
图5为本申请实施例一种应用于烹饪设备的交互装置的组成结构示意图;
图6为本申请实施例烹饪设备的一种硬件实体示意图。
具体实施方式
现在市场上的烹饪设备(如智能电饭锅)缺少语音控制系统或者有语音控制系统却缺少全息人机交互的科技感体验。
基于上述的问题,本申请实施例提出基于全息投影语音控制系统的全自动电饭锅解决方案。通过该方案,进一步提升电饭锅智能控制的精确性和提高了电饭锅智能控制的智能性,增加人机交互的科技体验。
下面结合附图和实施例对本申请的技术方案进一步详细阐述。
本实施例先提供一种烹饪设备,图1为本申请实施例的一种烹饪设备示意图,如图1所示,所述烹饪设备100上设置有信息采集组件101和全息投影组件102,其中:
一般来说,烹饪设备100在实施的过程中可以为各种类型的具有烹饪能力的设备,例如所述烹饪设备100可以包括但不限于电饭煲、微波炉、烤箱、蒸锅、煎锅、豆浆机、榨汁机、电炖锅、电压力锅、电蒸汽锅、空气炸锅等;信息采集组件101可以是麦克风、摄像头等,全息投影组件102可以包括投影仪、投影膜和语音播放器等;所述全息投影组件用于进行图像的全息投影,全息投影技术属于3D技术的一种利用干涉原理记录并再现物体真实的三维图像的技术。
首先,烹饪设备100处于待机状态时,可以获取信息采集组件101采集到的交互对象的第一信息“准备煮饭”,根据所述第一信息中的唤醒信息“煮饭”,将烹饪设备100由待机状态切换至工作状态,并启动烹饪设备100的全息投影组件102,并根据唤醒信息“煮饭”,确定用于展示的启动信息:启动画面和启动语音信息“烹饪设备已准备就绪”,所述唤醒信息对应的启动画面和启动语音信息可以是由交互对象预先设定的,也可以是由烹饪设备100自行确定的。所述交互对象可以是使用烹饪设备的用户,也可以是烹饪设备的销售人员,还可以是所述用户使用的终端设备(可以是手机、平板电脑、台式机、个人数字助理、导航仪、数字电话、视频电话、电视机、传感设备等)。
其次,在通过全息投影组件102输出上述启动画面的同时,输出上述启动语音信息。
然后,烹饪设备100处于工作状态时,可以获取信息采集组件101采集到的交互对象的第二信息“怎样炖鸡更好吃”,根据所述第二信息中的控制意图信息“炖鸡”,确定用于展示的烹饪功能信息:展示画面“炖鸡的家常做法”和应答语音信息“准备一只整鸡,可以是乌鸡或者柴鸡,若干香菇,葱姜适量,……”;所述控制意图信息对应的展示画面和应答语音信息可以是由交互对象预先设定的,也可以是由烹饪设备100自行确定的。
最后,在通过全息投影组件102输出上述展示画面的同时,输出上述应答语音信息。
本实施例提出一种应用于烹饪设备的交互方法,该方法所实现的功能可以通过烹饪设备中的处理器调用程序代码来实现,当然程序代码可以保存在计算机存储介质中,可见,该烹饪设备至少包括处理器和存储介质。
图2为本申请实施例提供的应用于烹饪设备上的交互方法的实现流程示意图,如图2所示,该方法包括:
步骤202:获取烹饪设备上的信息采集组件采集的第一信息;
其中,烹饪设备可以是电饭煲、微波炉、烤箱或蒸锅等各种类型的具有烹饪能力的设备。
第一信息可以是烹饪设备处于待机状态时采集到的信息,所述第一信息用于唤醒或启动所述烹饪设备,交互对象为用户时,第一信息可以是用户发出的信息;交互对象为用户使用的终端设备时,第一信息可以是用户向终端设备的应用程序的对话框输入的信息。
假设信息采集组件为语音采集组件,如麦克风,第一信息为用户发出的信息,则第一信息可以为第一语音信息“切换至工作状态”、“准备烹饪”等;对应地,唤醒信息包括唤醒词“工作状态”、“烹饪”等。
假设信息采集组件为图像采集组件,如摄像头,第一信息为用户发出的信息,则第一信息可以为第一图像信息,第一图像信息可以为用户在一段时间内的全身姿势变化视频等;对应地,唤醒信息包括唤醒动作,如用户在一段时间内的合掌动作等。
步骤204:基于所述第一信息中的唤醒信息,启动全息投影组件;
其中,假设唤醒信息为唤醒词“工作状态”,则启动全息投影组件,并根据唤醒词“工作状态”,确定用于展示的启动信息:启动画面和启动语音信息“主人您好,又见面了,我准备好工作了”。
步骤204可以示例为:首先,烹饪设备对处于待机状态时采集到的第一语音信息“切换至工作状态”进行语音识别,得到第一语音信息对应的文本信息“切换至工作状态”;其次,烹饪设备将所述文本信息与预建立的用于唤醒烹饪设备的第一信息库中存储的多个唤醒词逐个进行匹配,若匹配不成功,则保持所述烹饪设备的待机状态,若匹配成功,即文本信息中存在与所述第一信息库中的唤醒词(例如唤醒词为“工作状态”),则将烹饪设备由待机状态切换至工作状态,并调用启动画面和启动语音信息。
步骤206:获取所述信息采集组件采集的第二信息;
其中,第二信息可以是烹饪设备处于工作状态时采集到的信息,所述第二信息用于供烹饪设备识别交互对象的意图,交互对象为用户时,第二信息可以是用户发出的信息;交互对象为用户使用的终端设备时,第二信息可以是用户向终端设备的应用程序的对话框输入的信息;所述工作状态可以包括烹饪预准备状态、烹饪进行状态和烹饪完成状态等。
假设信息采集组件为语音采集组件,如麦克风,第二信息为用户发出的信息,则第二信息可以为第二语音信息“如何做香辣虾才好吃”、“开启精华煮模式”以及“现在的烹饪进度是什么”等;对应地,控制意图信息包括关键词“做香辣虾”、“精华煮模式”和“烹饪进度”等。
假设信息采集组件为图像采集组件,如摄像头,第二信息为用户发出的信息,则第二信息可以为第二图像信息,第二图像信息可以为用户在一段时间内的全身姿势变化视频等;对应地,控制意图信息包括关键动作,如用户在一段时间内的虾行动作等;另外,第二图像信息还可以为包含虾的图片或视频,对应地,控制意图信息可以为图片或视频中包含虾的组成部分。
步骤208:基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;
在第二信息包括第二语音信息,所述控制意图信息为特定的关键词,所述烹饪功能信息包括展示画面和应答语音信息的情况下,所述关键词包括以下至少之一指令的关键词:烹饪指令、烹饪进度查询指令、烹饪资讯查询指令;对应地,所述关键词可以是“精华煮模式”、“烹饪进度”和“做香辣虾”等。在实施的过程中,所述关键词可以存储在预建立的用于触发烹饪设备执行相应指令的第二信息库中;所述第二信息库中还可以存储与所述关键词对应的烹饪功能信息,所述烹饪功能信息包括展示画面和应答语音信息。
所述展示画面和应答语音信息可以是烹饪设备的操作系统根据关键词确定的展示画面和应答语音信息,也可以是用户根据关键词自行设置的个性化展示画面和应答语音信息。
参见图3,步骤208可以示例为:首先,烹饪设备312对其处于烹饪预准备状态时采集到的用户311的第二语音信息“如何做香辣虾才好吃”进行语音识别,得到第二语音信息对应的文本信息“如何做香辣虾才好吃”;其次,烹饪设备312将所述文本信息与所述第二信息库中存储的多个关键词逐个进行匹配,若匹配成功(例如关键词为“做香辣虾”),则调用所述第二信息库中与“做香辣虾”对应的展示画面“香辣虾窍门”和应答语音信息“将虾清洗干净,去掉虾尾,用料酒、生抽和姜腌制一小时,在油锅中放入花椒……”,若匹配不成功,则向云服务器313发送“如何做香辣虾才好吃”,接收所述云服务器313基于“如何做香辣虾才好吃”返回的烹饪资讯,基于所述烹饪资讯的点击量等因素从所述烹饪资讯中选取视频类烹饪资讯,将所述“视频类烹饪资讯”确定为“如何做香辣虾才好吃”对应的展示画面和应答语音信息。
步骤210:控制所述全息投影组件输出所述烹饪功能信息。
在通过全息投影组件输出所述关键词对应的展示画面的同时,输出所述关键词对应的应答语音信息。
在本申请实施例的步骤202和步骤206中,第一信息和第二信息既可以是语音信息,也可以是图像信息,从而能够提高交互对象与烹饪设备交互的灵活性和多样性。
在本申请实施例中,通过烹饪设备的信息采集组件采集交互对象的第一信息以启动烹饪设备的全息投影组件,通过信息采集组件采集交互对象的第二信息,并通过全息投影组件投影根据所述第二信息确定出的、与交互对象进行交互的烹饪功能信息,从而能够提高所述烹饪设备的智能性,并使得烹饪设备和交互对象之间的交互更加友好和高效。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤302至步骤312:
步骤302:获取烹饪设备上的信息采集组件采集的第一信息;
步骤304:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤306:获取所述信息采集组件采集的第二信息;
步骤308:在所述第二信息包括第二语音信息,所述控制意图信息为特定的关键词,且所述烹饪功能信息包括展示画面和应答语音信息的情况下,基于所述第二语音信息中所包括特定的关键词,确定进行交互的至少一帧展示画面;
其中,帧是影像动画中最小单位的单幅影像画面,一帧就是一幅静止的画面,连续的帧就形成动画,如电视图像等。
步骤310:确定每一帧所述展示画面对应的应答语音信息;
步骤312:在控制所述全息投影组件投影每一帧所述展示画面的过程中,输出对应的应答语音信息。
这里,以所述展示画面包括两帧为例进行说明步骤308和步骤310:所述第二语音信息中包括特定的关键词“煮饭”,首先,根据“煮饭”确定出第一展示画面“柴火饭的烹饪技巧”和第二展示画面“婴儿饭的烹饪技巧”;其次,确定出第一展示画面对应的应答语音信息“柴火饭可以充分释放米香,还原原始生活……”,确定出第二展示画面对应的应答语音“婴儿饭软糯可口,适宜婴儿食用……”。
在本申请实施例中,通过在所述展示画面为多帧时,分别确定每一帧展示画面对应的应答语音信息,从而能够在投影某帧展示画面时,输出与展示画面对应的应答语音信息,从而能够更准确地确定展示画面对应的应答语音信息,保证音画同步,提高交互对象对于所投影内容的观看体验。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤402至步骤412:
步骤402:获取烹饪设备上的信息采集组件采集的第一信息;
步骤404:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤406:获取所述信息采集组件采集的第二信息;
步骤408:在所述第二信息包括第二语音信息,所述第二语音信息中的控制意图信息为包括烹饪指令的关键词,所述烹饪功能信息包括展示画面和应答语音信息的情况下,根据所述烹饪指令,确定所述烹饪设备的目标烹饪功能;
其中,所述包括烹饪指令的关键词可以是“精华煮”、“蒸红薯”和“稀饭”等;则所述目标烹饪功能对应可以是精华煮模式、蒸红薯模式和稀饭模式。
步骤410:根据所述目标烹饪功能,确定所述展示画面和所述应答语音信息;
其中,所述目标烹饪功能对应的展示画面中可以包括全息人像客服和目标烹饪功能对应的文字形式的目标烹饪程序,也可以包括全息人像客服和图片形式的目标烹饪功能对应的烹饪流程图,还可以包括全息人像客服和视频形式的目标烹饪功能对应的烹饪方法讲解等;其中,所述目标烹饪功能对应的目标烹饪程序可以包括:“首先,采用第一功率对米饭进行浸泡五分钟,其次,采用第二功率对煮饭十分钟,最后,采用第三功率焖饭五分钟”。所述目标烹饪功能对应的应答语音信息为与所述展示画面相匹配的语音信息。
步骤412:在控制所述全息投影组件投影所述展示画面的过程中,输出应答语音信息。
其中,投影所述展示画面采用的投影方法可以是全息投影,也可以是普通投影,投影方法为全息投影时,所述展示画面可以是3D版的全息人像客服和目标烹饪程序。
本申请实施例中步骤406至步骤412可以示例为:
首先,烹饪设备处于烹饪预准备状态时采集到第二语音信息“我要煮饭”,所述烹饪设备对所述第二语音信息进行语音识别和关键词匹配,确定出第二语音信息中所包括特定的关键词“煮饭”,确定“煮饭”对应的待选烹饪功能为“柴火饭模式”、“婴儿饭模式”、“老人饭模式”以及“超快煮模式”,则确定出待选烹饪菜单:“柴火饭模式”、“婴儿饭模式”、“老人饭模式”以及“超快煮模式”,将所述待选烹饪菜单和全息人像客服作为“煮饭”对应的展示画面并进行全息投影,确定出“煮饭”对应的应答语音信息“主人,请从画面所示的菜单中选出您最期望的烹饪方式吧”并进行输出。
其次,烹饪设备采集到第三语音信息“柴火饭”,所述烹饪设备对所述第三语音信息进行语音识别和关键词匹配,确定出第二语音信息中所包括特定的关键词“柴火饭”,确定“柴火饭”对应的待选烹饪功能为“柴火饭模式”,并将“柴火饭模式”确定为目标烹饪功能。
最后,烹饪设备确定“柴火饭模式”对应的展示画面为图片形式的“柴火饭模式”对应的烹饪流程图,以及“柴火饭模式”对应的应答语音信息“首先,采用第一功率对米饭进行浸泡五分钟,其次,采用第二功率对煮饭十分钟,最后,采用第三功率焖饭五分钟”,并在全息投影展示画面的过程中,输出应答语音信息。
在本申请实施例中,通过根据第二语音信息中包括的烹饪指令的关键词,确定烹饪设备的目标烹饪功能,以使所述烹饪设备启动目标烹饪功能对应的目标烹饪程序对烹饪设备中的食材进行烹饪,从而能够更高效、便捷地根据用户意图对食材进行个性化烹饪;通过投影全息人像客服,从而能够提高用户烹饪的趣味性,并提高烹饪设备的科技感,为用户带来更好的烹饪体验。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤502至步骤512:
步骤502:获取烹饪设备上的信息采集组件采集的第一信息;
步骤504:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤506:获取所述信息采集组件采集的第二信息;
步骤508:在所述第二信息包括第二语音信息,所述第二语音信息中的控制意图信息为包括烹饪进度查询指令的关键词,所述烹饪功能信息包括展示画面和应答语音信息的情况下,根据所述烹饪进度查询指令,确定所述烹饪设备中的食材的烹饪进度;
其中,所述包括烹饪进度查询指令的关键词可以是“烹饪进度”和“当前烹饪步骤”等;所述烹饪进度可以反映食材的烹饪进展程度,烹饪进度可以用烹饪完成度(例如可以是85%、75%、100%等)、烹饪未完成度(例如可以是19%,还剩十分钟烹饪完成)、烹饪当前所处阶段(例如可以是浸泡阶段、蒸煮阶段和焖饭阶段)等来表示。
步骤510:根据所述烹饪进度,确定所述展示画面和所述应答语音信息;
其中,所述烹饪进度对应的展示画面中可以包括全息人像客服和反映烹饪完成度的进度条,还可以是烹饪设备中食材的实时烹饪图像等。
步骤512:在控制所述全息投影组件投影所述展示画面的过程中,输出应答语音信息。
本申请实施例中步骤506至步骤512可以示例为:
烹饪设备处于烹饪进行状态时采集到第二语音信息“请告诉我目前的烹饪进度”,所述烹饪设备对所述第二语音信息进行语音识别和关键词匹配,确定出第二语音信息中所包括特定的关键词“烹饪进度”,确定烹饪设备中食材的烹饪进度为80%,并将全息人像客服和所述烹饪进度对应的长方形进度条作为“烹饪进度”对应的展示画面并进行全息投影,确定出“烹饪进度”对应的应答语音信息“主人,饭马上就好,请再耐心等待两分钟”并进行输出。
在本申请实施例中,通过根据第二语音信息中包括的烹饪进度查询指令的关键词,确定烹饪设备中食材的烹饪进度,从而能够更高效便捷且直观地掌握烹饪进度;通过投影全息人像客服,从而能够提高用户烹饪的趣味性,并提高烹饪设备的科技感,为用户带来更好的烹饪体验。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤602至步骤612:
步骤602:获取烹饪设备上的信息采集组件采集的第一信息;
步骤604:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤606:获取所述信息采集组件采集的第二信息;
步骤608:在所述第二信息包括第二语音信息,所述第二语音信息中的控制意图信息为包括烹饪资讯查询指令的关键词,所述烹饪功能信息包括展示画面和应答语音信息的情况下,根据所述烹饪资讯查询指令,确定烹饪资讯;
其中,所述包括烹饪资讯查询指令的关键词可以是“做香辣虾”、“健康饮食”和“做可乐鸡翅”等;所述烹饪资讯可以是与关键词对应的菜谱、烹调建议、烹饪方法讲解等。
步骤610:根据所述烹饪资讯,确定所述展示画面和所述应答语音信息。
其中,所述烹饪资讯对应的展示画面中可以包括全息人像客服和烹饪方法讲解等。
步骤612:在控制所述全息投影组件投影所述展示画面的过程中,输出应答语音信息。
继续参见图3,步骤606至步骤612可以示例为:
首先,烹饪设备312对其处于烹饪预准备状态时采集到的用户311的第二语音信息“怎么做酸菜鱼”进行语音识别,得到第二语音信息对应的文本信息“怎么做酸菜鱼”。
其次,烹饪设备312将所述文本信息与所述第二信息库中存储的多个关键词逐个进行匹配,若匹配成功(例如关键词为“做酸菜鱼”),则调用所述第二信息库中与“做酸菜鱼”对应的展示画面“酸菜鱼窍门”和应答语音信息“首先鱼肉切片,其次加盐、胡椒粉等拌匀,接着下油煎至两面金黄,然后,用姜末和蒜蓉爆香……”。
若匹配不成功,则向云服务器313发送“怎么做酸菜鱼”,接收所述云服务器313基于“怎么做酸菜鱼”返回的烹饪资讯“家常酸菜鱼的做法”,将“家常酸菜鱼的做法”确定为“怎么做酸菜鱼”对应的展示画面和应答语音信息。
在本申请实施例中,通过根据第二语音信息中包括的烹饪资讯查询指令的关键词,确定烹饪资讯,从而能够更便捷、更直观地获得更多的烹饪指导,进而能够使用户利用现有食材烹饪出更美味、更具营养的菜肴;通过投影全息人像客服,从而能够提高用户烹饪的趣味性,并提高烹饪设备的科技感,为用户带来更好的烹饪体验。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤702至步骤720:
步骤702:获取烹饪设备上的信息采集组件采集的第一信息;
步骤704:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤706:获取所述信息采集组件采集的第二信息;
步骤708:基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;
步骤710:获取所述信息采集组件采集的第三信息;
其中,所述第三信息可以是烹饪设备处于工作状态时采集到的信息,所述第三信息用于供烹饪设备识别交互对象的准确命令,交互对象为用户时,第三信息可以是用户发出的信息;交互对象为用户使用的终端设备时,第三信息可以是用户向终端设备的应用程序的对话框输入的信息;因为有时候烹饪设备并不能根据用户的第二信息准确识别用户的命令,因此,烹饪设备可展示与第二信息对应的多个可能的烹饪功能,用户根据展出的多个可能的烹饪功能,发出第三信息,所述第三信息用于从多个可能的烹饪功能中选出目标烹饪功能。
假设信息采集组件为语音采集组件,如麦克风,第三信息为用户发出的信息,则第二信息为第二语音信息“煮饭”时,第三信息可以为第三语音信息“选择柴火饭”;对应地,所述命令信息为“柴火饭”。
假设信息采集组件为图像采集组件,如摄像头,第三信息为用户发出的信息,则第三信息可以为第三图像信息,第三图像信息可以为用户在一段时间内的全身姿势变化视频等;对应地,命令信息包括关键动作。
步骤712:基于所述第三信息中的命令信息,控制烹饪设备进行工作和确定用于展示的烹饪过程信息;
其中,所述命令信息为“柴火饭”时,控制烹饪设备调用“柴火饭”对应的烹饪程序进行工作,并利用全息投影组件实时展示烹饪过程。
步骤714:确定所述烹饪设备和交互对象之间的距离;
其中,可以通过近场感知技术感知所述烹饪设备和交互对象之间的距离,所述近场感知技术包括红外线近场感知技术和超声波近场感知技术等。
步骤716:在所述烹饪过程信息包括烹饪进度信息,所述烹饪设备的烹饪状态为烹饪进行中的情况下,确定所述距离是否小于特定的距离阈值,若是,则执行步骤718,若否,则执行步骤720;
步骤718:控制所述全息投影组件输出烹饪进度信息;
步骤720:将所述烹饪进度信息发送至终端,以供所述终端将所述烹饪进度信息发送至所述交互对象。
其中,所述终端可以是云端服务器,还可以是其他可以进行数据接收和发送的终端设备等。
在本申请实施例的步骤710和步骤712中,通过根据所述第三信息中的命令信息,控制烹饪设备进行工作和确定用于展示的烹饪过程信息,从而能够使烹饪设备在无法根据采集到的第二信息准确识别用户意图时,向用户展示可能与第二信息对应的烹饪功能,并接收用户根据展示的可能的烹饪功能发出的第三信息,所述第三信息用于从多个可能的烹饪功能中选出目标烹饪功能,从而能够使烹饪设备更准确地了解到用户的意图。
在本申请实施例中,假设烹饪状态为烹饪进行中,由于烹饪设备和交互对象距离较远时,交互对象可能无法看到或听到全息投影组件输出的烹饪进度信息,因此可通过确定烹饪设备和交互对象之间的距离,仅在交互对象和烹饪设备距离较近时控制全息投影组件输出烹饪进度信息,从而能够避免在烹饪设备和交互对象距离较远时,仍然输出烹饪进度信息所造成的资源浪费的问题;并且在交互对象和烹饪设备距离较远时,将烹饪进度信息发送至交互对象,从而能够实现烹饪设备和交互对象更便捷地进行远程交互,使得交互对象及时掌握烹饪进度信息,从而能够根据烹饪设备和交互对象的距离,更灵活地确定如何将烹饪进度信息展现在交互对象面前。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤802至步骤822:
步骤802:获取烹饪设备上的信息采集组件采集的第一信息;
步骤804:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤806:获取所述信息采集组件采集的第二信息;
步骤808:基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;
步骤810:获取所述信息采集组件采集的第三信息;
步骤812:基于所述第三信息中的命令信息,控制烹饪设备进行工作和确定用于展示的烹饪过程信息;
步骤814:确定所述烹饪设备和交互对象之间的距离;
步骤816:在所述烹饪过程信息包括烹饪完成提示信息,所述烹饪设备的烹饪状态为烹饪完成的情况下,确定所述距离是否小于特定的距离阈值,若是,则执行步骤818,若否,则执行步骤820;
步骤818:控制所述全息投影组件输出烹饪完成提示信息;
步骤820:将所述烹饪完成提示信息发送至终端,以供所述终端将所述烹饪完成提示信息发送至所述交互对象。
步骤822:在检测到所述烹饪状态由烹饪进行中切换至烹饪完成,并且所述信息采集组件在特定的时长内未采集到信息的情况下,将所述全息投影组件由工作状态切换至待机状态。
在本申请实施例步骤822中,通过在信息采集组件长时间未采集到的信息的情况下,将全息投影组件优把工作状态切换至待机状态,从而能够更加节约能源。
在本申请实施例中,假设烹饪状态为烹饪完成,由于烹饪设备和交互对象距离较远时,交互对象可能无法看到或听到全息投影组件输出的烹饪完成提示信息,因此可通过确定烹饪设备和交互对象之间的距离,仅在交互对象和烹饪设备距离较近时控制全息投影组件输出烹饪完成提示信息,从而能够避免在烹饪设备和交互对象距离较远时,仍然输出烹饪完成提示信息所造成的资源浪费的问题;并且在交互对象和烹饪设备距离较远时,将烹饪完成提示信息发送至交互对象,从而能够实现烹饪设备和交互对象更便捷地进行远程交互,使得交互对象在烹饪完成时,及时收到烹饪完成提示信息,从而能够根据烹饪设备和交互对象的距离,更灵活地确定如何烹饪完成提示信息展现在交互对象面前。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤902至步骤918:
步骤902:获取烹饪设备上的信息采集组件采集的第一信息;
步骤904:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤906:获取所述信息采集组件采集的第二信息;
步骤908:基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;
步骤910:获取所述信息采集组件采集的第三信息;
步骤912:基于所述第三信息中的命令信息,控制烹饪设备进行工作和确定用于展示的烹饪过程信息;
步骤914:确定所述烹饪设备和交互对象之间的距离;
步骤916:在所述烹饪过程信息包括烹饪进度信息,所述烹饪设备的烹饪状态为烹饪进行中,且所述距离不小于特定的距离阈值的情况下,根据所述烹饪进度信息,确定第一提示文本信息;
其中,所述烹饪进度信息可以包括进度条展示画面和应答语音信息“主人,饭马上就好,请再耐心等待两分钟”,所述第一提示文本信息可以是对所述应答语音信息进行语音识别得到的文本信息。
步骤918:将所述第一提示文本信息发送至终端,以供所述终端将所述第一提示文本信息发送至所述交互对象。
在本申请实施例中,假设烹饪状态为烹饪进行中,由于烹饪设备和交互对象距离较远时,交互对象可能无法看到或听到全息投影组件输出的烹饪进度信息,因此可通过确定烹饪设备和交互对象之间的距离,仅在交互对象和烹饪设备距离较近时控制全息投影组件输出烹饪进度信息,从而能够避免在烹饪设备和交互对象距离较远时,仍然输出烹饪进度信息所造成的资源浪费的问题;并且在交互对象和烹饪设备距离较远时,将烹饪进度信息转换为文本信息发送至交互对象,从而能够实现烹饪设备和交互对象更便捷地进行远程交互,使得交互对象及时掌握烹饪进度信息,从而能够根据烹饪设备和交互对象的距离,更灵活地确定如何将烹饪进度信息展现在交互对象面前。并能够保证交互对象获得更直观的交互信息,提高了交互方式和交互内容的丰富性。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤1002至步骤1018:
步骤1002:获取烹饪设备上的信息采集组件采集的第一信息;
步骤1004:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤1006:获取所述信息采集组件采集的第二信息;
步骤1008:基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;
步骤1010:获取所述信息采集组件采集的第三信息;
步骤1012:基于所述第三信息中的命令信息,控制烹饪设备进行工作和确定用于展示的烹饪过程信息;
步骤1014:确定所述烹饪设备和交互对象之间的距离;
步骤1016:在所述烹饪过程信息包括烹饪完成提示信息,所述烹饪设备的烹饪状态为烹饪完成,且所述距离不小于特定的距离阈值的情况下,根据所述烹饪完成提示信息,确定第二提示文本信息;
其中,所述烹饪完成提示信息可以包括进度条展示画面和应答语音信息“主人,饭已经熟了”,所述第二提示文本信息可以是对所述应答语音信息进行语音识别得到的文本信息。
步骤1018:将所述第二提示文本信息发送至终端,以供所述终端将所述第二提示文本信息发送至所述交互对象。
在本申请实施例中,假设烹饪状态为烹饪完成,由于烹饪设备和交互对象距离较远时,交互对象可能无法看到或听到全息投影组件输出的烹饪完成提示信息,因此可通过确定烹饪设备和交互对象之间的距离,仅在交互对象和烹饪设备距离较近时控制全息投影组件输出烹饪完成提示信息,从而能够避免在烹饪设备和交互对象距离较远时,仍然输出烹饪完成提示信息所造成的资源浪费的问题;并且在交互对象和烹饪设备距离较远时,将烹饪完成提示信息转换为文本信息发送至交互对象,从而能够实现烹饪设备和交互对象更便捷地进行远程交互,使得交互对象及时掌握烹饪完成提示信息,从而能够根据烹饪设备和交互对象的距离,更灵活地确定如何将烹饪完成提示信息展现在交互对象面前。并能够保证交互对象获得更直观的交互信息,提高了交互方式和交互内容的丰富性。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤1102至步骤1112:
步骤1102:获取烹饪设备上的信息采集组件采集的第一信息;
步骤1104:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤1106:获取所述信息采集组件采集的第二信息;
步骤1108:在所述第二信息包括第二图像信息,所述第二图像信息中的控制意图信息为包括烹饪指令的关键动作,且所述烹饪功能信息包括展示画面和应答语音信息的情况下,根据所述烹饪指令,确定目标烹饪功能;
其中,所述包括烹饪指令的关键动作可以是用户的拿米、洗米的动作,则所述关键动作对应的目标烹饪功能可以是“精华煮”或“柴火饭”等;所述关键动作还可以是用户的拿红薯、洗红薯或切红薯、拿烤架的动作等,则所述关键动作对应的目标烹饪功能可以是“烤红薯”等。
步骤1110:根据所述目标烹饪功能,确定所述展示画面和所述应答语音信息。
其中,所述目标烹饪功能对应的展示画面中可以包括全息人像客服和目标烹饪功能对应的文字形式的目标烹饪程序,也可以是目标烹饪功能对应的图片形式的烹饪流程图,还可以是目标烹饪功能对应的视频形式的烹饪方法讲解图;所述全息人像客服可以是利用全息投影技术生成的全息人像客服,所述目标烹饪功能对应的应答语音信息为与所述展示画面相匹配的语音信息;所述目标烹饪功能为“烤红薯”时,所述应答语音信息可以是“您想吃烤红薯吗?烤红薯和泡菜搭配着吃很美味”。
步骤1112:在控制所述全息投影组件投影所述展示画面的过程中,输出应答语音信息。
在本申请实施例中,通过根据第二图像信息中包括的烹饪指令的关键动作,确定用户期望选择的烹饪设备的目标烹饪功能,从而能够更高效、便捷地对用户的烹饪意图进行预判,以使烹饪设备执行与目标烹饪功能对应的准备工作,或使烹饪设备向用户投影与所述目标烹饪功能对应的展示画面,并输出与所述目标烹饪功能对应的应答语音信息,从而能够提高用户在烹饪过程中的趣味性。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤1202至步骤1212:
步骤1202:获取烹饪设备上的信息采集组件采集的第一信息;
步骤1204:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤1206:获取所述信息采集组件采集的第二信息;
步骤1208:在所述第二信息包括第二图像信息,所述第二图像信息中的控制意图信息为包括烹饪进度查询指令的关键动作,且所述烹饪功能信息包括展示画面和应答语音信息的情况下,根据所述烹饪进度,确定目标烹饪功能;
其中,所述包括烹饪进度查询指令的关键动作可以是用户的踱步动作,还可以是用户的托腮动作等。
步骤1210:根据所述烹饪进度,确定所述展示画面和所述应答语音信息;
步骤1212:在控制所述全息投影组件投影所述展示画面的过程中,输出应答语音信息。
在本申请实施例中,通过根据第二图像信息中包括的烹饪进度查询指令的关键动作,确定烹饪设备中食材的烹饪进度,从而能够更高效便捷且直观地掌握烹饪进度;通过投影全息人像客服,从而能够提高用户烹饪的趣味性,并提高烹饪设备的科技感,为用户带来更好的烹饪体验。
本申请实施例再提供一种应用于烹饪设备上的交互方法,所述方法可以包括步骤1302至步骤1312:
步骤1302:获取烹饪设备上的信息采集组件采集的第一信息;
步骤1304:基于所述第一信息中的唤醒信息,启动全息投影组件;
步骤1306:获取所述信息采集组件采集的第二信息;
步骤1308:在所述第二信息包括第二图像信息,所述第二图像信息中的控制意图信息为包括烹饪资讯查询指令的关键动作,且所述烹饪功能信息包括展示画面和应答语音信息的情况下,根据所述烹饪资讯,确定目标烹饪功能;
其中,所述包括烹饪资讯查询指令的关键动作可以是用户的挠头动作,还可以是用户的搓手动作等。
步骤1310:根据所述烹饪资讯,确定所述展示画面和所述应答语音信息;
步骤1312:在控制所述全息投影组件投影所述展示画面的过程中,输出应答语音信息。
在本申请实施例中,通过根据第二图像信息中包括的烹饪资讯查询指令的关键工作,确定烹饪资讯,从而能够更便捷、更直观地获得更多的烹饪指导,进而能够使用户利用现有食材烹饪出更美味、更具营养的菜肴;通过投影全息人像客服,从而能够提高用户烹饪的趣味性,并提高烹饪设备的科技感,为用户带来更好的烹饪体验。
本申请实施例再提供一种应用于烹饪设备的交互方法,参见图4,所述方法可以包括步骤1401至步骤1406:
步骤1401:用户401通过语音唤醒烹饪设备(如全自动电饭锅)的全息投影语音交互与用户近场感知模块403;
其中,语音唤醒控制模块402监听所述用户401的语音信息,若所述语音唤醒模块402监听到所述用户401开启所述全息投影语音交互与用户近场感知模块403的命令,则所述全息投影语音交互与用户近场感知模块403被启动或者被唤醒并进入工作状态;所述全息投影语音交互与用户近场感知模块403被启动可以是指所述全息投影语音交互与用户近场感知模块403由关机状态切换至工作状态,所述全息投影语音交互与用户近场感知模块403被唤醒可以是指所述全息投影语音交互与用户近场感知模块403由待机状态切换至工作状态。
步骤1402:全息投影语音交互与用户近场感知模块403启动后,全息投影语音交互与用户近场感知模块403投影全息人像客服,并和用户进行简单的问候交流或者对话;
其中,所述全息人像客服为采用全息投影技术投影出的3D版的虚拟人像客户。
步骤1403:用户401通过和全息人像客服对话交流,全息投影语音交互与用户近场感知模块403对用户401的语言进行指令控制命令关键字提取识别,若识别到用户的控制意图,全息投影语音交互与用户近场感知模块403就列出可能功能菜单,并且全息人像客服询问用户期望意图,再次让用户确定下达的期望命令;若用户确定全息人像客服询问的命令意图则发送控制指令给全自动电饭锅,执行用户指令;
其中,全息投影语音交互与用户近场感知模块403监听到用户401期望的相应控制指令,再次和用户401进行确认后,则发送控制指令给全自动电饭锅的指令处理模块404,指令通过解析为加热功率或加热电流处理后,将所述经过解析的控制指令进行输出处理,以将所述经过解析的控制指令输出至全自动电饭锅,控制全自动电饭锅进行工作,并反馈工作状态(烹饪进度)给全息投影语音交互与用户近场感知模块403。
步骤1404:工作过程中,全息投影语音交互与用户近场感知模块403会投影烹饪的过程进度,并且利用近场感知技术确定用户401是否在全自动电饭锅附近,若用户401在全自动电饭锅附近,则给用户401播报烹饪进度;
步骤1405:烹饪完成后,若用户401不在全自动电饭锅附近,则通过发送提示消息到云端405,然后通过405云端发送提示消息到用户应用程序进行提醒;若用户401在全自动电饭锅附近,则通过投影全息人像客服进行播报提示信息;
其中,所述提示信息可以是烹饪完成信息或者安全信息等,所述安全信息可以是烹饪设备的电路短路、电路短路等信息。
步骤1406:烹饪结束一定时间或者用户401长时间没语音响应,则全息投影语音交互与用户近场感知模块403进入后台待机状态;待用户401再次发起语音唤醒,全息投影语音交互与用户近场感知模块403再次进入工作状态。
本申请实施例的方案通过用户发起语音唤醒命令,语音唤醒控制模块监听用户的语音信息,若监听到用户开启全息投影语音交互与用户近场感知模块的命令,则全息投影语音交互与用户近场感知模块被启动或者被唤醒并进入工作状态;用户和全息投影语音交互与用户近场感知模块进行交互,若监听到用户期望的相应控制指令,再次和用户进行确认后,则发送控制指令给全自动电饭锅的指令处理模块,指令通过处理后,控制设备进行工作,并反馈工作状态给全息投影语音交互与用户近场感知模块,提示用户当前全自动电饭锅的工作过程信息;若用户近场感知模块感知不到用户在感知范围内,而全息投影语音交互与用户近场感知模块又急需给用户提示工作过程信息或者安全信息,则会通过给云端发送提示信息,再进一步通过云端给用户发送提示信息。通过该方案,能进一步提升用户对全自动电饭锅工作控制的精确性,以及提升人机交互的体验。
进一步地,还可通过增加用户动作预判感知模块,预先通过摄像头采集用户的动作,并根据关键动作判断用户的行为期望,可进一步提升全自动电饭锅的智能控制。
基于前述的实施例,本申请实施例提供一种应用于烹饪设备的交互装置,该装置包括所包括的各单元、以及各单元所包括的各模块,可以通过烹饪设备中的处理器来实现;当然也可通过具体的逻辑电路实现;在实施的过程中,处理器可以为中央处理器(CPU)、微处理器(MPU)、数字信号处理器(DSP)或现场可编程门阵列(FPGA)等。
图5为本申请实施例应用于烹饪设备的交互装置的组成结构示意图,如图5所示,所述应用于烹饪设备的交互装置500包括第一获取模块501、启动模块502、第二获取模块503、确定模块504和输出模块505,其中:
第一获取模块501,用于烹饪设备控制语音采集组件采集第一语音信息;
启动模块502,用于基于所述第一信息中的唤醒信息,启动全息投影组件;
第二获取模块503,用于获取所述信息采集组件采集的第二信息;
确定模块504,用于基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;
输出模块505,用于控制所述全息投影组件输出所述烹饪功能信息。
在一些实施例中,在所述第一信息包括第一语音信息的情况下,所述唤醒信息包括唤醒词;在所述第一信息包括第一图像信息的情况下,所述唤醒信息包括唤醒动作;在所述第二信息包括第二语音信息的情况下,所述控制意图信息包括关键词;在所述第二信息包括第二图像信息的情况下,所述控制意图信息包括关键动作。
在一些实施例中,所述装置还包括:第三获取模块,用于获取所述信息采集组件采集的第三信息;基于所述第三信息中的命令信息,控制烹饪设备进行工作和确定用于展示的烹饪过程信息;控制所述全息投影组件输出所述烹饪过程信息。
在一些实施例中,在所述第二信息包括第二语音信息,所述控制意图信息为特定的关键词,且所述烹饪功能信息包括展示画面和应答语音信息的情况下,确定模块504包括:第一确定单元,用于基于所述第二语音信息中所包括特定的关键词,确定进行交互的至少一帧展示画面;确定每一帧所述展示画面对应的应答语音信息;
对应地,输出模块505包括:第一输出单元,用于在控制所述全息投影组件投影每一帧所述展示画面的过程中,输出对应的应答语音信息。
在一些实施例中,在所述第二信息包括第二语音信息,所述控制意图信息为特定的关键词,所述烹饪功能信息包括展示画面和应答语音信息的情况下,确定模块504包括:第二确定单元,用于在所述特定的关键词为包括烹饪指令的关键词的情况下,根据所述烹饪指令,确定所述烹饪设备的目标烹饪功能;根据所述目标烹饪功能,确定所述展示画面和所述应答语音信息;或者,在所述特定的关键词为包括烹饪进度查询指令的关键词的情况下,根据所述烹饪进度查询指令,确定所述烹饪设备中的食材的烹饪进度;根据所述烹饪进度,确定所述展示画面和所述应答语音信息;或者,在所述特定的关键词为包括烹饪资讯查询指令的关键词的情况下,根据所述烹饪资讯查询指令,确定烹饪资讯;根据所述烹饪资讯,确定所述展示画面和所述应答语音信息。
在一些实施例中,所述装置还包括:距离确定模块,用于确定所述烹饪设备和交互对象之间的距离;
在所述烹饪过程信息包括烹饪进度信息的情况下,所述输出模块505包括第二输出单元,用于在所述烹饪设备的烹饪状态为烹饪进行中,并且所述距离小于特定的距离阈值的情况下,控制所述全息投影组件输出烹饪进度信息;在所述烹饪状态为烹饪进行中,并且所述距离不小于所述距离阈值的情况下,将所述烹饪进度信息发送至终端,以供所述终端将所述烹饪进度信息发送至所述交互对象。
在一些实施例中,所述输出模块505包括第三输出单元,用于在所述烹饪状态为烹饪完成,且所述距离小于特定的距离阈值的情况下,控制所述全息投影组件输出烹饪完成提示信息;在所述烹饪状态为烹饪完成,并且所述距离不小于所述距离阈值的情况下,将所述烹饪完成提示信息发送至终端,以供所述终端将烹饪完成提示信息发送至所述交互对象。
在一些实施例中,所述装置还包括第一发送模块,用于在所述烹饪设备的烹饪状态为烹饪进行中,且所述距离不小于特定的距离阈值的情况下,根据所述烹饪进度信息,确定第一提示文本信息;将所述第一提示文本信息发送至终端,以供所述终端将所述第一提示文本信息发送至所述交互对象。
在一些实施例中,所述装置还包括第二发送模块,用于在所述烹饪状态为烹饪完成,并且所述距离不小于所述距离阈值的情况下,根据所述烹饪完成提示信息,确定第二提示文本信息;将所述第二提示文本信息发送至终端,以供所述终端将所述第二提示文本信息发送至所述交互对象。
在一些实施例中,所述装置还包括切换模块,用于在检测到所述烹饪状态由烹饪进行中切换至烹饪完成,并且所述信息采集组件在特定的时长内未采集到信息的情况下,将所述全息投影组件由工作状态切换至待机状态。
在一些实施例中,在所述第二信息包括第二图像信息,所述控制意图信息为特定的关键动作,且所述烹饪功能信息包括展示画面和应答语音信息的情况下,所述确定模块504包括第三确定单元,用于在所述特定的关键动作为包括烹饪指令的关键动作的情况下,根据所述烹饪指令,确定目标烹饪功能;根据所述目标烹饪功能,确定所述展示画面和所述应答语音信息;或者,在所述特定的关键动作为包括烹饪进度查询指令的关键动作的情况下,根据所述烹饪进度查询指令,确定所述烹饪设备中的食材的烹饪进度;根据所述烹饪进度,确定所述展示画面和所述应答语音信息;或者,在所述特定的关键动作为包括烹饪资讯查询指令的关键动作的情况下,根据所述烹饪资讯查询指令,确定烹饪资讯;根据所述烹饪资讯,确定所述展示画面和所述应答语音信息。
以上装置实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本申请装置实施例中未披露的技术细节,请参照本申请方法实施例的描述而理解。
需要说明的是,本申请实施例中,如果以软件功能模块的形式实现上述的应用于烹饪设备的交互方法,并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得烹饪设备(可以是电饭煲、微波炉、烤箱、蒸锅、煎锅、豆浆机和榨汁机等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read Only Memory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。这样,本申请实施例不限制于任何特定的硬件和软件结合。
对应地,本申请实施例提供一种烹饪设备,图6为本申请实施例烹饪设备的一种硬件实体示意图,如图6所示,烹饪设备600的硬件实体包括:包括存储器601和处理器602,所述存储器601存储有可在处理器602上运行的烹饪程序,所述处理器602执行所述烹饪程序时实现上述实施例中提供的应用于烹饪设备的交互方法中的步骤。
存储器601配置为存储由处理器602可执行的指令和应用,还可以缓存待处理器602以及烹饪设备600中各模块待处理或已经处理的数据(例如,图像数据、音频数据、语音通信数据和视频通信数据),可以通过闪存(FLASH)或随机访问存储器(Random AccessMemory,RAM)实现。
对应地,本申请实施例提供一种计算机可读存储介质,其上存储有烹饪程序,该烹饪程序被处理器执行时实现上述实施例中提供的应用于烹饪设备的交互中的步骤。
这里需要指出的是:以上存储介质和设备实施例的描述,与上述方法实施例的描述是类似的,具有同方法实施例相似的有益效果。对于本申请存储介质和设备实施例中未披露的技术细节,请参照本申请方法实施例的描述而理解。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本申请的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解,在本申请的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元;既可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。另外,在本申请各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(Read Only Memory,ROM)、磁碟或者光盘等各种可以存储程序代码的介质。或者,本申请上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得烹饪设备(可以是电饭煲、微波炉、烤箱、蒸锅、煎锅、豆浆机和榨汁机等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、磁碟或者光盘等各种可以存储程序代码的介质。
本申请所提供的几个方法实施例中所揭露的方法,在不冲突的情况下可以任意组合,得到新的方法实施例。本申请所提供的几个产品实施例中所揭露的特征,在不冲突的情况下可以任意组合,得到新的产品实施例。本申请所提供的几个方法或设备实施例中所揭露的特征,在不冲突的情况下可以任意组合,得到新的方法实施例或设备实施例。
以上所述,仅为本申请的实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (14)

1.一种应用于烹饪设备上的交互方法,其特征在于,所述方法包括:
获取烹饪设备上的信息采集组件采集的第一信息;
基于所述第一信息中的唤醒信息,启动全息投影组件;
获取所述信息采集组件采集的第二信息;
基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;
控制所述全息投影组件输出所述烹饪功能信息。
2.根据权利要求1所述的方法,其特征在于,
在所述第一信息包括第一语音信息的情况下,所述唤醒信息包括唤醒词;
在所述第一信息包括第一图像信息的情况下,所述唤醒信息包括唤醒动作;
在所述第二信息包括第二语音信息的情况下,所述控制意图信息包括关键词;
在所述第二信息包括第二图像信息的情况下,所述控制意图信息包括关键动作。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述信息采集组件采集的第三信息;
基于所述第三信息中的命令信息,控制烹饪设备进行工作和确定用于展示的烹饪过程信息;
控制所述全息投影组件输出所述烹饪过程信息。
4.根据权利要求2所述的方法,其特征在于,在所述第二信息包括第二语音信息,所述控制意图信息为特定的关键词,且所述烹饪功能信息包括展示画面和应答语音信息的情况下,
所述基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息,包括:
基于所述第二语音信息中所包括特定的关键词,确定进行交互的至少一帧展示画面;
确定每一帧所述展示画面对应的应答语音信息;
对应地,所述控制所述全息投影组件输出所述烹饪功能信息,包括:
在控制所述全息投影组件投影每一帧所述展示画面的过程中,输出对应的应答语音信息。
5.根据权利要求2所述的方法,其特征在于,在所述第二信息包括第二语音信息,所述控制意图信息为特定的关键词,所述烹饪功能信息包括展示画面和应答语音信息的情况下,
所述基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息,包括:
在所述特定的关键词为包括烹饪指令的关键词的情况下,根据所述烹饪指令,确定所述烹饪设备的目标烹饪功能;根据所述目标烹饪功能,确定所述展示画面和所述应答语音信息;
或者,在所述特定的关键词为包括烹饪进度查询指令的关键词的情况下,根据所述烹饪进度查询指令,确定所述烹饪设备中的食材的烹饪进度;根据所述烹饪进度,确定所述展示画面和所述应答语音信息;
或者,在所述特定的关键词为包括烹饪资讯查询指令的关键词的情况下,根据所述烹饪资讯查询指令,确定烹饪资讯;根据所述烹饪资讯,确定所述展示画面和所述应答语音信息。
6.根据权利要求3所述的方法,其特征在于,所述方法还包括:
确定所述烹饪设备和交互对象之间的距离;
在所述烹饪过程信息包括烹饪进度信息的情况下,所述控制所述全息投影组件输出所述烹饪过程信息,包括:
在所述烹饪设备的烹饪状态为烹饪进行中,并且所述距离小于特定的距离阈值的情况下,控制所述全息投影组件输出烹饪进度信息;
在所述烹饪状态为烹饪进行中,并且所述距离不小于所述距离阈值的情况下,将所述烹饪进度信息发送至终端,以供所述终端将所述烹饪进度信息发送至所述交互对象。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
在所述烹饪过程信息包括烹饪完成提示信息的情况下,所述控制所述全息投影组件输出所述烹饪过程信息,包括:
在所述烹饪状态为烹饪完成,且所述距离小于特定的距离阈值的情况下,控制所述全息投影组件输出烹饪完成提示信息;
在所述烹饪状态为烹饪完成,并且所述距离不小于所述距离阈值的情况下,将所述烹饪完成提示信息发送至终端,以供所述终端将烹饪完成提示信息发送至所述交互对象。
8.根据权利要求6所述的方法,其特征在于,所述方法还包括:
在所述烹饪设备的烹饪状态为烹饪进行中,且所述距离不小于特定的距离阈值的情况下,根据所述烹饪进度信息,确定第一提示文本信息;
将所述第一提示文本信息发送至终端,以供所述终端将所述第一提示文本信息发送至所述交互对象。
9.根据权利要求7所述的方法,其特征在于,所述方法还包括:
在所述烹饪状态为烹饪完成,并且所述距离不小于所述距离阈值的情况下,根据所述烹饪完成提示信息,确定第二提示文本信息;
将所述第二提示文本信息发送至终端,以供所述终端将所述第二提示文本信息发送至所述交互对象。
10.根据权利要求6所述的方法,其特征在于,所述方法还包括:
在检测到所述烹饪状态由烹饪进行中切换至烹饪完成,并且所述信息采集组件在特定的时长内未采集到信息的情况下,将所述全息投影组件由工作状态切换至待机状态。
11.根据权利要求2所述的方法,其特征在于,在所述第二信息包括第二图像信息,所述控制意图信息为特定的关键动作,且所述烹饪功能信息包括展示画面和应答语音信息的情况下,
所述基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息,包括:
在所述特定的关键动作为包括烹饪指令的关键动作的情况下,根据所述烹饪指令,确定目标烹饪功能;根据所述目标烹饪功能,确定所述展示画面和所述应答语音信息;或者,
在所述特定的关键动作为包括烹饪进度查询指令的关键动作的情况下,根据所述烹饪进度查询指令,确定所述烹饪设备中的食材的烹饪进度;根据所述烹饪进度,确定所述展示画面和所述应答语音信息;
或者,在所述特定的关键动作为包括烹饪资讯查询指令的关键动作的情况下,根据所述烹饪资讯查询指令,确定烹饪资讯;根据所述烹饪资讯,确定所述展示画面和所述应答语音信息。
12.一种应用于烹饪设备的交互装置,其特征在于,所述装置包括:
第一获取模块,用于获取烹饪设备上的信息采集组件采集的第一信息;
启动模块,用于基于所述第一信息中的唤醒信息,启动全息投影组件;
第二获取模块,用于获取所述信息采集组件采集的第二信息;
确定模块,用于基于所述第二信息中的控制意图信息,确定用于展示的烹饪功能信息;
输出模块,用于控制所述全息投影组件输出所述烹饪功能信息。
13.一种烹饪设备,包括存储器和处理器,所述存储器存储有可在处理器上运行的烹饪程序,其特征在于,所述处理器执行所述烹饪程序时实现权利要求1至11中任一项所述应用于烹饪设备的交互方法中的步骤。
14.一种计算机可读存储介质,其上存储有烹饪程序,其特征在于,该烹饪程序被处理器执行时实现权利要求1至11中任一项所述应用于烹饪设备的交互方法中的步骤。
CN202010659394.7A 2020-07-09 2020-07-09 一种应用于烹饪设备的交互方法及装置、设备、存储介质 Active CN113907609B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010659394.7A CN113907609B (zh) 2020-07-09 2020-07-09 一种应用于烹饪设备的交互方法及装置、设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010659394.7A CN113907609B (zh) 2020-07-09 2020-07-09 一种应用于烹饪设备的交互方法及装置、设备、存储介质

Publications (2)

Publication Number Publication Date
CN113907609A true CN113907609A (zh) 2022-01-11
CN113907609B CN113907609B (zh) 2023-01-31

Family

ID=79232169

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010659394.7A Active CN113907609B (zh) 2020-07-09 2020-07-09 一种应用于烹饪设备的交互方法及装置、设备、存储介质

Country Status (1)

Country Link
CN (1) CN113907609B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150029046A (ko) * 2013-09-05 2015-03-18 삼성전자주식회사 유도 가열 조리기 및 그 표시 제어방법
US20180220500A1 (en) * 2017-01-30 2018-08-02 Newtonoid Technologies, L.L.C. Smart ovens and optional browning trays therefor
CN108464729A (zh) * 2018-04-24 2018-08-31 珠海优特物联科技有限公司 使用ar眼镜的辅助烹饪方法、ar眼镜和烹饪系统
CN108668120A (zh) * 2017-03-28 2018-10-16 松下电器(美国)知识产权公司 显示装置、显示方法以及程序
CN208551219U (zh) * 2018-03-19 2019-03-01 浙江苏泊尔家电制造有限公司 烹饪器具
CN110045638A (zh) * 2018-01-17 2019-07-23 佛山市顺德区美的电热电器制造有限公司 一种烹饪信息的推荐方法、装置及存储介质
CN110089924A (zh) * 2019-06-10 2019-08-06 珠海格力电器股份有限公司 烹饪器具及其注水量状态显示控制方法、装置、系统
CN110754948A (zh) * 2018-07-27 2020-02-07 九阳股份有限公司 一种烹饪过程中的意图识别方法和智能烹饪设备
CN110944548A (zh) * 2017-03-28 2020-03-31 感应智能技术有限责任公司 智能器具、系统和方法
CN111096680A (zh) * 2019-12-31 2020-05-05 广东美的厨房电器制造有限公司 烹饪设备、电子设备、语音服务器、语音控制方法和装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150029046A (ko) * 2013-09-05 2015-03-18 삼성전자주식회사 유도 가열 조리기 및 그 표시 제어방법
US20180220500A1 (en) * 2017-01-30 2018-08-02 Newtonoid Technologies, L.L.C. Smart ovens and optional browning trays therefor
CN108668120A (zh) * 2017-03-28 2018-10-16 松下电器(美国)知识产权公司 显示装置、显示方法以及程序
CN110944548A (zh) * 2017-03-28 2020-03-31 感应智能技术有限责任公司 智能器具、系统和方法
CN110045638A (zh) * 2018-01-17 2019-07-23 佛山市顺德区美的电热电器制造有限公司 一种烹饪信息的推荐方法、装置及存储介质
CN208551219U (zh) * 2018-03-19 2019-03-01 浙江苏泊尔家电制造有限公司 烹饪器具
CN108464729A (zh) * 2018-04-24 2018-08-31 珠海优特物联科技有限公司 使用ar眼镜的辅助烹饪方法、ar眼镜和烹饪系统
CN110754948A (zh) * 2018-07-27 2020-02-07 九阳股份有限公司 一种烹饪过程中的意图识别方法和智能烹饪设备
CN110089924A (zh) * 2019-06-10 2019-08-06 珠海格力电器股份有限公司 烹饪器具及其注水量状态显示控制方法、装置、系统
CN111096680A (zh) * 2019-12-31 2020-05-05 广东美的厨房电器制造有限公司 烹饪设备、电子设备、语音服务器、语音控制方法和装置

Also Published As

Publication number Publication date
CN113907609B (zh) 2023-01-31

Similar Documents

Publication Publication Date Title
US8323026B2 (en) Interactive recipe preparation using instructive device with integrated actuators to provide tactile feedback
CN104461501B (zh) 云智能烹饪方法、云智能烹饪设备和云端服务器
US8342847B2 (en) Interactive recipe preparation instruction delivery to disabled indiviuals
US8419434B2 (en) Interactive recipe preparation using interactive cooking device to communicate with kitchen appliances
CN108681283B (zh) 一种智能烹饪方法及系统
WO2019033843A1 (zh) 烹饪器具的控制方法、装置和系统
CN109683516B (zh) 辅助烹饪方法、家电设备及计算机存储介质
US20090259687A1 (en) Interactive Recipe Preparation Using Instructive Device with Integrated Actuators to Provide Tactile Feedback
CN110045638B (zh) 一种烹饪信息的推荐方法、装置及存储介质
CN206378716U (zh) 厨房管家机器人
KR20120018220A (ko) 요리용 장치 및 사용자가 요리하는 것을 돕는 방법
CN108415308B (zh) 一种预约烹饪控制方法及装置、烹饪器
CN110604459A (zh) 一种全封闭无油烟智能炒菜机器人及其控制系统
CN112579873A (zh) 烹饪食谱推荐方法、装置、存储介质及电子设备
CN109380975A (zh) 烹饪器具及其控制方法和系统、服务器
CN111035261A (zh) 烹饪控制方法、装置及设备
CN108415301A (zh) 烹饪参数变更方法及装置
CN112383455B (zh) 数据生成方法和执行方法及设备
CN113907609B (zh) 一种应用于烹饪设备的交互方法及装置、设备、存储介质
CN108415307B (zh) 一种烹饪控制方法及装置、烹饪器
CN111541868A (zh) 一种烹饪状态的监控方法、装置及系统
CN110960103A (zh) 一种厨师机管理方法、客户端、厨师机及系统
JP6989683B2 (ja) 音声制御調理器具プラットフォーム
CN115587245A (zh) 菜谱清单的推荐方法、装置、存储介质及电子装置
JPH11243874A (ja) 調理システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant