CN107077529B - 用于食谱管理的方法和系统 - Google Patents

用于食谱管理的方法和系统 Download PDF

Info

Publication number
CN107077529B
CN107077529B CN201580060190.9A CN201580060190A CN107077529B CN 107077529 B CN107077529 B CN 107077529B CN 201580060190 A CN201580060190 A CN 201580060190A CN 107077529 B CN107077529 B CN 107077529B
Authority
CN
China
Prior art keywords
preparation
recipe
user
extracted
communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580060190.9A
Other languages
English (en)
Other versions
CN107077529A (zh
Inventor
R·S·西索迪亚
A·S·斯里尼瓦桑纳特桑
A·古恩达马内
C·布哈特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fansongni Holdings Ltd
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of CN107077529A publication Critical patent/CN107077529A/zh
Application granted granted Critical
Publication of CN107077529B publication Critical patent/CN107077529B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • AHUMAN NECESSITIES
    • A23FOODS OR FOODSTUFFS; TREATMENT THEREOF, NOT COVERED BY OTHER CLASSES
    • A23LFOODS, FOODSTUFFS, OR NON-ALCOHOLIC BEVERAGES, NOT COVERED BY SUBCLASSES A21D OR A23B-A23J; THEIR PREPARATION OR TREATMENT, e.g. COOKING, MODIFICATION OF NUTRITIVE QUALITIES, PHYSICAL TREATMENT; PRESERVATION OF FOODS OR FOODSTUFFS, IN GENERAL
    • A23L5/00Preparation or treatment of foods or foodstuffs, in general; Food or foodstuffs obtained thereby; Materials therefor
    • A23L5/10General methods of cooking foods, e.g. by roasting or frying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • G06F16/435Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/18Speech classification or search using natural language modelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Acoustics & Sound (AREA)
  • Artificial Intelligence (AREA)
  • Food Science & Technology (AREA)
  • Chemical & Material Sciences (AREA)
  • Polymers & Plastics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Nutrition Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Machine Translation (AREA)
  • Cookers (AREA)

Abstract

用于从因特网上获取内容、标识内容内的文本(例如,诸如隐藏字幕文本或食谱文本)或使用诸如语音识别的技术从内容中生成文本、分析文本中的可执行指示、并且将可执行指示翻译成适用于联网的烹饪器具的指令的系统和方法。某些实施例提供了附加的指导以避免或校正烹饪过程中的错误并允许对食谱进行定制以解决,例如,饮食限制、烹饪偏好、翻译成外国语言等。

Description

用于食谱管理的方法和系统
技术领域
本发明总体涉及用于食谱管理的方法和系统,并且更具体地涉及一种平台,该平台摄取多媒体内容,将其翻译成机器可执行的指令,并可选地向器具和其他作用主体分派该指令和其他指示以影响食物的制备。
背景技术
传统上,食物制备需要大量的体力劳动。制备典型的一餐可能需要从书架上选择一本烹饪书,在选择的烹饪书中标识感兴趣的食谱,通过将其与现有的库存原材料相比较而生成该食谱的购物单,购买购物单上的物品,准备购买的物品为执行食谱做准备,以及通过以指定顺序在一个或多个温度下以不同的持续时间汇集指定量的原材料而利用各种烹饪器具(例如,食物处理器、微波炉、光波炉、慢炖锅等)来执行食谱。
食物制备工作的各部分已经被自动化或者正处于努力将其自动化的过程中。例如,由位于加州山景城(Mountain View,CA)的谷歌公司(Google Inc.)提供的GOOGLERECIPE VIEW允许用户在万维网上搜索使用特定原材料的食谱内容。将计算机处理器和网络接口嵌入家用器具用于因特网上的远程操作,为该设备的自动化操作提供了光明前景。
这种自动化操作的困难之一是食物制备者与器具程序设计员之间的技能组合上的差异。传统上,食物制备者熟悉遵循操作指南并可能与在食物制备上有不同技能水平的他人分享该操作指南。传统上,程序设计员熟悉软件开发,基于数据包的网络通信等。虽然程序设计员可以使各种器具能够自动化操作,但他们可能并未以用户友好的方式来这样做,用户友好的方式将使得食物制备者能够从该功能中容易地得到好处。
因此,存在对于能够弥合该差距并且进而提供食谱管理的方法和系统的需要。
发明内容
本发明内容以简化的形式介绍了在以下具体实施方式中进一步描述的概念的选集。本发明内容并不旨在标识所要求保护的主题中的关键特征或基本特征,也不旨在用作确定所要求保护的主题的范围的辅助手段。
本发明的各实施例起源于观察到存在大量面向人类受众的数字格式的在线可获得的食谱库及食物制备操作指南。本发明的实施例将该内容从人类友好的格式翻译成适合自动处理的指示。一旦完成翻译,该指示可以被提供给人类操作者,作为机器可执行的指令发布给一个或多个器具,或者作为二者的组合以影响食谱中描述的食物的制备。本发明的实施例还允许用户通过基于成本、便利性、饮食偏好等原因替换原材料而单独定制或在全球范围内定制制备方法。
一方面,本发明涉及用于食谱管理的装置。该装置包括用于存储的持久存储器;网络接口,被配置为接收包括关于食物或饮料的制备的自然语言的至少一条通信;以及至少一个处理器,被配置为,从网络接口接收包括关于食物或饮料的制备的自然语言的至少一条通信,从接收的至少一条通信中提取至少一条制备指示,并将提取的至少一条制备指示变换成至少一条机器可执行的指令。
在一个实施例中,至少一个处理器还被配置为将包括至少一条机器可执行的指令的至少一条通信传送至网络接口,并且网络接口还被配置为传送包括至少一条机器可执行的指令的至少一条通信。在另一个实施例中,至少一个处理器还被配置为接收至少一条定制指令并将所述至少一条定制指令储存于持久存储器中。在某些实施例中,至少一条定制指令是饮食要求和原材料替代中的一项或多项。
在一个实施例中,包括自然语言的至少一条通信包括口头语言,并且至少一个处理器还被配置为将口头语言转换成文本。在某些实施例中,至少一个处理器还被配置为,使用自然语言处理,从接收的包括口头语言的至少一条通信中提取至少一条制备指示。
在一个实施例中,持久存储器包括描述至少一个器具的能力的信息,并且,至少一个处理器还被配置为将提取的至少一条制备指示与描述至少一个器具的能力的信息进行比较,以根据提取的至少一条制备指示而标识用于制备食物或饮料的至少一个器具。在另一个实施例中,装置还包括用于根据提取的至少一条制备指示而提供关于食物或饮料的制备的至少一条指示的用户接口。在又另一个实施例中,装置还包括用于从用户处接收关于食物或饮料的制备的反馈的用户接口。在另外一个实施例中,持久存储器包括描述食物或饮料制备的制备信息,并且处理器还被配置为使用制备信息对提取的至少一条制备指示进行校正或适配。
另一方面,本发明涉及一种用于食谱管理的方法。该方法包括,通过网络接口,接收包括关于食物或饮料的制备的自然语言的至少一条电子通信;利用至少一个配置的处理器,从接收的至少一条自然语言通信中自动提取至少一条制备指示;以及利用至少一个配置的处理器,将提取的至少一条制备指示变换为至少一条机器可执行的指令。
在一个实施例中,至少一个处理器还被配置为,使用网络接口传送至少一条机器可执行的指令。在另一个实施例中,方法还包括接收至少一条定制指令并将至少一条定制指令存储于持久存储器中。在某些实施例中,至少一条定制指令是饮食要求和原材料替代中的一项或多项。
在一个实施例中,包括自然语言的至少一条电子通信包括口头语言,并且方法还包括利用至少一个配置的处理器将口头语言转换成文本。在某些实施例中,利用至少一个配置的处理器,使用自然语言处理从包括口头语言的至少一条接收的通信中提取至少一条制备指示。
在一个实施例中,方法还包括,将提取的至少一条制备指示与存储在持久存储器中的描述至少一个器具的能力的信息进行比较,以根据提取的至少一条制备指示标识用于制备食物或饮料的至少一个器具。在另一个实施例中,方法还包括,根据提取的至少一条制备指示,利用用户接口提供关于食物或饮料的制备的至少一条指示。在又另一个实施例中,方法还包括,利用用户接口从用户处接收关于食物或饮料的制备的反馈。在另外一个实施例中,方法还包括,利用存储在持久存储器中的描述食物或饮料制备的制备信息,对提取的至少一条制备指示进行校正或适配。
通过阅读以下的详细说明及查阅相关附图,描绘本公开中非限制性实施例的上述和其他特征及优点将会非常明显。需要理解的是,上述一般说明和以下详细说明仅仅是示例性的,并不限制所要求的非限制性实施例。
附图说明
参考如下附图描述了非限制性和非详尽的实施例,其中:
图1是根据本发明的用于食谱管理的装置的框图;
图2更详细地描述了图1中的食谱处理器100;
图3是根据本发明的用于食谱管理的方法的流程图;以及
图4图示了由根据本发明的食谱内容的处理得到的示例性的食谱图。
在图中,相同的标记符号贯穿不同视图一般指代对应的部分。附图无需依比例绘制,相反,重点放在操作的原理和概念上。
具体实施方式
参照构成本公开的一部分并示出了具体示例性的实施例的附图,以下更充分地描述了各种实施例。然而,实施例可以通过多种不同的形式被实现并且不应被解释为限制于在本文中陈述的实施例;相反,提供该实施例是为了使得本公开严密完整并且向本领域技术人员充分地传达该实施例的范围。实施例可作为方法、系统、或设备实施。因此,实施例可采用硬件实施方式,完全软件实施方式,或软硬件结合的实施方式。因此,以下详细描述不应被视为具有限制意义。
说明书中对“一个实施例”或“实施例”的引用意指结合实施例所描述的特定特征、结构、或特点被包含于本发明的至少一个实施例中。在本说明书中各处出现的术语“在一个实施例中”并不一定指的是相同的实施例。
本说明书以下的一些部分采用符号表示对存储在计算机存储器内的非瞬态信号所进行的操作。该描述和表示是数据处理领域的技术人员所使用的方式,以最有效率地向该领域的其他技术人员传达其工作的主旨。这样的操作一般要求对物理量进行物理操作。虽然并非必要,该物理量通常采取电信号、磁信号、或光信号的形式,上述信号能够被存储、变换、组合、比较、以及以其他方式进行操作。主要基于一般用法的原因,有时将上述信号称为比特、值、元素、符号、字符、术语、数量等很方便。此外,有时将对物理量进行物理操作的步骤的某些布置称为模块或代码设备也很方便,并不失一般性。
然而,所有上述术语和相似的术语将与恰当的物理量相关联,并且只作为方便应用于该物理量的标记。除非在以下讨论中特别说明,应当理解在本说明书中,利用诸如“处理”或“计算”或“运算”或“确定”或“显示”或“确定”等术语进行的讨论,指代计算机系统或类似的电子计算设备的动作与过程,该计算机系统或类似的电子计算设备对表示为物理(电子)量的数据进行操作或变换,该物理量存储在计算机系统存储器或寄存器或其他这样的信息存储、传输、或显示设备内。
本发明的某些方面包括过程步骤和指令,该过程步骤和指令可以被实施在软件、固件、或硬件中,并且当被实施在软件中时,可以被下载以驻留在由各种操作系统使用的不同的平台上并且被该不同的平台操作。
本发明还涉及用于执行在本文中公开的操作的装置。该装置可以出于所需目的而被特别地构造,或其可以包括通用计算机,通用计算机被存储在其上的计算机程序选择性地激活或重新配置。这样的计算机程序可以被存储在计算机可读存储介质中,诸如,但不限于,任何类型的磁盘,包括软盘、光盘、CD-ROM、磁光盘、只读存储器(ROM)、随机存取存储器(RAM)、EPROM,EEPROM、磁卡或光卡、专用集成电路(ASIC)、或任何类型的适于存储电子指令的介质,每种存储介质均耦合至计算机系统总线。此外,本说明书中提及的计算机可以包括单处理器,或者可以是使用多处理器设计以提高计算能力的架构。
在本文中提出的过程与显示并不隐含地涉及任何特定的计算机或其他装置。各种通用系统也可以与根据本文中的教导的程序一同被使用,或者构造更专用的装置来执行所需的方法步骤可能会更加方便。以下将描述各种系统所需的结构。此外,本发明的描述并不参照任何特定的编程语言。应当理解,各种编程语言均可以用来实现在本文中描述的本发明的教导,并且以下对特定语言的引用仅被提供用于公开本发明的实现以及最佳模式。
此外,本说明书中使用的语言主要出于可读性以及教示目的而被选择,并非被选择用于描述或限制创造性主题。因此,本发明的公开旨在是说明性的而非限制权利要求书中陈述的本发明的范围。
简要概述,本发明的各实施例提供了新一代的食谱管理系统。本发明的实施例提供了如下系统和方法,其用于在互联网上获取内容、标识该内容内的文本(例如,诸如隐藏字幕或食谱文本)或使用诸如语音识别等技术从该内容中生成文本、分析文本中的可执行指示,并且将可执行指示翻译成适用于联网的烹饪器具的指令或适合人类操作员的指示。某些实施例提供了附加的指导以避免或纠正烹饪过程中的错误并允许定制食谱以解决,例如,饮食限制、烹饪偏好、翻译成外国语言等。
当前的方法要求用户手动地从在线媒体内容转录文本并解读转录的文本以制备食谱。例如,用户可以回顾视频博客、做记录、并回顾烹饪器具的说明书,从而确定制备食谱的正确程序。当前的方法很耗时并且可能需要用户在制备食谱的过程中数次回顾原始内容。在某种程度上,该方法还依赖于用户在烹饪、特定烹饪器具、及制备类似食谱方面的个人专业技能。
参照图1,本发明的实施例可以包括食谱处理器100,其适于从一种或多种内容形式或从一条或多条内容片断中提取制备指示。处理器100可以被实施为在单个计算设备(诸如个人计算机或蜂窝电话)上执行的程序,具有在固定存储器中实施的处理器100的专用计算器具,在多个计算设备上执行的程序等。
处理器100通过访问预先定义的文本模式104,并使用这些存储的模式以文本形式通知其对烹饪内容的分析,而进行操作。烹饪内容通常为传达给人类受众的自然语言。这种自然语言内容的示例为“在很低的温度下将鸡蛋打入冷的平底锅中,加入黄油,频繁搅拌鸡蛋直到其开始凝固;六或七分钟即可。加另一块黄油,继续搅拌,然后,在完全凝固之前,将平底锅从热源移开,放入一茶匙的法式鲜奶油,根据口味调节”。
这样的自然语言内容是要被人类读者所解析的,并且通常不适合以其原本的形式用于被自动化的(亦称“智能的”)烹饪器具进行自动化处理。食谱处理器100摄取自然语言内容,并且使用诸如动词词组提取和智能文本解析的自然语言处理(NLP)技术,而在自然语言内容中搜索来自于预先定义的文本模式104的文本模式。文本中指令发生的顺序通常表明制备指示的发生顺序。具体的模式(诸如温度和原材料量)使用编辑并存储在数据存储中的特定的正则表达式被提取。
每个预先定义的模式可与在翻译过程中使用的人类可理解的制备指示和机器可执行的指令相关联。例如,一个模式可以是“低温烹饪”,其与人类可理解的制备指示“将平底锅下的燃烧器调至‘低’”以及机器可执行的指令“将燃烧器<1>设置到<2>”相关联。
当该模式被标识112时,将任何相关联的制备指示和机器可执行的指令116添加到用于储存的存储器中,以便以后交付给用户或智能烹饪器具。如下所述,在一个实施例中,这些项目被添加到食谱图中,尽管其他的数据结构也可以用于存储制备指示和机器可执行的指令。
如上所述,烹饪内容的许多项目是在互联网上以各种形式可获得的。文本形式的网页和博客条目108可以按上述讨论进行处理。本发明的实施例还可以使用由食谱内容的结构化源108’暴露的API(应用编程接口)与结构化源108’交互;某些结构化源108’可以以制备指示和/或机器可执行的指令的形式提供烹饪内容,从而避免了从烹饪内容中提取制备指示的需求和/或为智能烹饪器具生成机器可执行的指令的需求。
以口语形式可获得的烹饪内容的项目可以采用本领域已知的语音识别技术(诸如神经网络,隐马尔可夫模型和动态时间规整)进行预处理,从而产生可以由如上所讨论的食谱处理器100处理的一段转录文本120。视频内容的项目也可以使用语音识别技术进行预处理,或者在其包括隐藏字幕的情况下,隐藏字幕文本可以由如上所讨论的食谱处理器100直接进行处理或者其可以用来辅助语音识别过程,从而产生转录文本120。
食谱处理器100可以结合所提取的制备指示对关于各种智能烹饪器具的能力的信息的电子数据库124进行查阅。该数据库124可以用于标识适用于制备该食谱的智能或人工操作的烹饪器具。例如,食谱处理器100可以修改制备指示,从而在向人类操作者提供制备指示之前指定器具(例如,烤箱、微波炉等)。食谱处理器100还可以在将提取的制备指示的至少一些变换为机器可执行的指令之前,标识能够独立执行食谱的步骤的一个或多个智能器具,该机器可执行的指令具有适于被所标识的智能器具执行的格式。
基于所标识的基于指令的文本模式的类型,该模式可以与描述智能设备的条目相关联,以标识和推荐用于制备食谱的设备。例如,“烧水”的指示将需要电热水器根据指令在特定时间烧水。
食谱处理器100还可以查阅定制信息128的存储,其可包括诸如个人饮食偏好,用户理解的语言,现有的库存原材料等项目。食谱处理器100可以使用该信息,以在将制备指示132提供给用户之前定制制备指示132,或在将机器可执行的指令提供给智能器具以用于执行之前定制机器可执行的指令。例如,对于定制信息128指定其为患有乳糖不耐症的用户,处理器100可以在需要奶油的食谱中替代椰奶。在将食谱内容翻译为另一种语言的情况下,关键字跟踪和优先顺序可以用来维护上下文和菜谱中动作项的顺序。
在已经从食谱文本中提取出人性化的制备指示之后,食谱处理器100可使用诸如平板计算机或文本到语音生成器之类的用户接口,为用户提供制备指示。所提供的制备指示可包括食谱内容以及与烹饪过程的各个中间阶段相关的信息,如温度、菜肴颜色、气味等,该信息可以帮助用户确认烹饪过程按预期进行。
食谱处理器100还可以使用用户接口从用户处接收实时反馈,如颜色、气味、时间等,以确定用户是否已经成功地或未成功地完成食谱的各阶段,并且作为响应提供可替换的制备该食谱的指令以纠正在制备食谱的过程中所犯的任何错误或误差。
图2更加详尽地描述了食谱处理器100。如上所述,食谱处理器100可以采用各种形式,物理的和虚拟的,可是大部分实施方式将分享某些常用功能。网络接口200允许食谱处理器100从其他设备接收通信,并且在一个实施例中,提供与因特网的双向接口。适当的网络接口200包括千兆以太网、Wi-Fi(802.11a/b/g/n)、及3G/4G无线接口(诸如GSM/WCDMA/LTE),其能够实现在食谱处理器100与其他设备之间的数据传输。处理器204生成用于通过接口200传输的通信,以及处理通过接口200接收的、来自食谱处理器100外部的通信。典型的处理器204为x86、x86-64、或ARMv7处理器等。用户接口208允许食谱处理器100从操作者接收命令并向操作者提供反馈。示例性的用户接口包括图形显示器、物理键盘、虚拟键盘等。数据存储212为通过接口200接收的数据、处理器204处理的数据、和通过用户接口208接收或发送的数据,提供瞬态存储和持久存储。
食谱处理器100的接口200被配置成处理与各种数据源和器具的通信。食谱处理器100从诸如食谱内容的结构化源108、转录文本源120、器具信息数据库124、定制信息128的存储等的源中检索数据。食谱处理器100的一些实施例还与上述源进行双向通信。如下所述,食谱处理器100还使用其接口200与装配有接口的器具进行通信,以接收机器可执行的指令。
食谱处理器100还使用其存储208以保存包含预先定义的文本模式104、标识的与指令相关的文本模式112、机器可执行的指令116、定制信息128、和定制的制备指示132的库。
参照图3,本发明的实施例还可以采取用于食谱管理的方法的形式。该方法可以被实现为在单个计算设备(例如个人计算机或蜂窝电话)上执行的程序、具有存储在固定存储器中的方法的专用计算器具、在多个计算设备上执行的程序等。
该过程通过访问内容开始(步骤300)。烹饪内容可以存储在诸如温彻斯特磁盘驱动器之类的本地存储器中,或通过某种形式的网络接口(例如互联网连接)可访问。烹饪内容的合适形式包括网页、文本形式的博客条目,视频博客条目,多媒体文件、流媒体等。可使用API(应用编程接口)对烹调内容进行结构化和访问,或者以供人类消费的形式呈现烹调内容。如该过程的进一步的步骤所述,当食谱内容被结构化时,可以通过制备指示和/或机器可执行的指令的形式获得食谱内容,从而避免了从烹饪内容中提取制备指示的需求和/或为智能烹饪器具生成机器可执行的指令的需求。
如果内容不包含文本,则文本从所接收的烹饪内容中被提取(步骤304)。以口语形式可获得的烹饪内容的项目可以采用本领域已知的语音识别技术(诸如神经网络、隐马尔可夫模型、和动态时间规整)进行预处理,从而产生可以按如下所述进行处理的转录文本。视频内容的项目也可以使用语音识别技术进行预处理,或者在该项目包括隐藏字幕的情况下,隐藏字幕文本可以按如下所述进行处理或者可以用来通知语音识别过程,从而产生用于进一步处理的转录文本。
给定文本烹饪内容,适合人类操作者的制备指示可以从内容中被提取(步骤308)。在一个实施例中,该提取过程可以访问预先定义的文本模式库并且使用该存储的模式来分析文本烹饪内容。例如,使用诸如动词词组提取和智能文本解析的自然语言处理(NLP)技术,可以在自然语言内容中搜索来自于预先定义的文本模式库的文本模式。文本中指令发生的顺序通常指示制备指示的发生顺序。具体的模式(诸如温度和原材料量)使用编辑并存储在数据存储中的特定的正则表达式被提取。
每个预先定义的模式可以与人类可理解的制备指示和机器可执行的指令相关联。例如,一个模式可以是“低温烹饪”,其与人类可理解的制备指示“将平底锅下的燃烧器调至‘低’”以及机器可执行的指令“将燃烧器<1>设置到<2>”相关联。当这样的模式被标识时,将任何相关联的制备指示和机器可执行的指令添加到用于储存的存储器中,以便以后交付给用户或智能烹饪器具。如下所述,在一个实施例中,这些项目被添加到食谱图中,尽管其他的数据结构可以用于存储制备指示和机器可执行的指令,。
在已经处理文本食谱内容之后,可以结合所提取的制备指示对描述各种智能烹饪器具的能力的信息的电子数据库进行查阅(步骤312)。该数据库可以用于标识适用于制备该食谱的智能或人工操作的烹饪器具。例如,在将制备指示提供给人类操作者之前,制备指示可以被修改以指定器具(例如,烤箱、微波炉等)。在将提取的制备指示的至少一些变换为机器可执行的指令之前,一个或多个能够独立执行食谱的步骤的智能器具可以被标识,该机器可执行的指令的格式适于被所标识的智能器具执行。
基于所标识的基于指令的文本模式的类型,该模式可以与描述智能设备的条目相关联,以标识和推荐用于制备食谱的设备。例如,“烧水”的指示需要电热水器根据指令在特定时间烧水。
在做准备制备指示的过程中,定制信息存储可以被查阅(316),其可包括诸如个人饮食偏好,用户理解的语言,现有的库存原材料等项目。该信息可以用来,在将制备指示提供给用户之前定制制备指示,或在将机器可执行的指令提供给智能器具以用于执行之前定制机器可执行的指令。例如,对于定制信息指定其为患有乳糖不耐症的用户,在需要奶油的食谱中,椰奶可以被替代。在将食谱内容翻译为另一种语言的情况下,关键字跟踪和优先顺序可以用来维护上下文和菜谱中动作项的顺序。
在已经从食谱文本中提取出人性化的制备指示之后,诸如平板计算机或文本到语音生成器之类的用户接口可以用来向用户提供制备指示。所提供的制备指示可包括食谱内容以及与烹饪过程的各个中间阶段相关的信息,如温度、菜肴颜色、气味等,该信息可以帮助用户确认烹饪过程按预期进行。用户接口还可以用来从用户处接收实时反馈,如颜色、气味、时间等,以确定用户是否已经成功地或未成功地完成食谱的各阶段,并且作为响应提供可替换的制备该食谱的指令以纠正在制备食谱的过程中所犯的任何错误或误差。
当一个或多个智能器具已被标识用于帮助食谱制备时,然后机器可执行的指令可被发布至该器具用于执行(步骤320)。该指令可以以在器具信息的数据库中指定的器具特定的格式发布。
例如,机器可执行的指令可以是二进制,JSON,XML或任何其他的本行业使用的格式或专有格式。机器可执行的指令可以通过各种通信信道(如Wi-Fi、以太网、蓝牙、BT-LE,NFC等)被传送至设备。当器具与发送设备在同一个节点中时,指令可以被本地传送,或者,当接收指令的机器与发送设备在不同的节点中时,指令可以被远程传送。
图4呈现了由食谱内容的处理所得到的食谱图数据结构的示例。在该示例中,关于马铃薯的制备的内容已按照如上所讨论的被检索。食谱内容被解析为单独的语句,每个语句是得到的解析器输出中的顶级条目。使用技术人员已知的解析方法,每条语句,依次,被解析成一系列的动词短语,形容词短语、名词短语等。该短语被存储在一个树形结构中,动词短语通常形成该结构的根,语句中的其他短语形成该结构的叶。
然后,解析器输出被转换为根据本发明的食谱图。每条语句被分配到图中的一个节点,并且在节点之间建立链接,从而使图中的节点的顺序大致对应于解析的食谱内容中的语句的顺序。语句的各个动词短语等被建立为在转至下一个结点之前要满足的与结点相关联的条件。
在一些实施例中,食谱图结构可以由本发明的实施例使用以根据食谱内容制备食物。图结构可以被视为状态机,系统在该结构中的开始节点处开始。系统检查与开始节点相关的条件和指令,并发布反映该相关条件和指令的恰当的机器可执行的指令和人类可理解的指示。系统等待表明机器可执行的指令已经被完成的自动反馈,以及来自人类操作者的表明人类可理解的指示已经被完成的人工反馈。
当反馈表明条件和指令已经被完成时,系统沿链接向下前进至图中的下一个状态并重复该过程,发布指令和指示并且在前进至下一个结点前等待表明指令和指示被完成的反馈,直至到达图中的结束状态,在该点的假设是食物已经被制备好。
本发明的实施例可以在有需要或指示时实时地检索包含自然语言通信的内容,或者根据用户指示或为以后的使用做准备,在使用前提前检索并储存该内容。例如,本发明的实施例可以用于准备食谱库,该食谱库可以至少部分地由一个或多个智能器具执行并且可以以储存的形式作为专用器具或以其他形式被递送,以供以后使用。
从之前的描述中可以明显发现,本发明呈现了优于现有技术的数个方面。一方面,提出的系统和方法使用来自于在线资源的视频的隐藏字幕文本,以标识使用例如文本模式的制备指示,该制备指示被解释或翻译成用于一个或多个烹饪设备的指令,其可为自动化的或非自动化的。另一方面,提出的系统和方法,在标识制备指示和设备指令前,使用自然语言处理和其他相似的技术从音频内容中提取文本。另外一方面,提出的系统和方法,在已经提取出制备指示之后,可以推荐智能或非智能的烹饪器具的列表,用于制备发布的食谱;提供关于在制备食谱时避免错误的建议或在制备食谱时校正错误而要进行的步骤;考虑文化偏好、饮食要求、所用语言的差异等原因,提供替代物以个性化食谱的内容;并且,当协调各种自动烹调设备的操作以执行食谱的制备时,通过经由用户接口(如平板计算机设备)显示用户指示而帮助用户查看内容。
本发明的实施例可以被应用至数个期望的应用中。
例如,本发明的实施例可以用来变换广播烹饪内容的过程。拍摄食谱视频或烹饪秀的广播提供者或网络内容提供者,可以利用本发明的实施例来自动转录伴随视频内容的口语音频。一旦口语内容被转录,实施例基于例如预先构建的存在论从转录中继续自动提取食谱内容。然后,提取的食谱内容可以被分析以提取动词、指令、时间、温度、前置条件、后置条件等,并且从该信息中自动生成可执行的食谱图。图中的适当节点被转换成可执行的机器可执行的指令,以用于一个或多个可远程操作的器具。利用多语言词典或原材料替代物的词典,可以将食谱图转换成不同的语言,或者将食谱图转换为使用不同的原材料。
另一个有用的应用为出于饮食考虑的自动食谱适配。例如,与本发明的实施例交互的有高血压的个体,可以看到原材料列表中的盐被用颜色编码突出显示,或者对食谱中的盐自动地做出合适的替代。同样地,与本发明的实施例交互的有糖尿病的患者,可以利用原材料替代物的词典或替代存在论,而使得食谱中的某些原材料被替代。
另一个有用的应用涉及当食谱中的原材料或步骤被遗失或忽略时的食谱“恢复”或“修复”。在该情况下,可执行的食谱图可以用来通过向用户提供指导或备选方案来挽救食谱。例如,如果盐被加多了,通过使用原材料替代物的词典或替代存在论,可以建议吸收盐的原材料,并且推荐其他原材料的替代品。
例如,在上文中参照根据本公开中实施例的方法、系统和计算机程序产品的框图和/或操作图示描述了本公开的实施例。框中注解的功能/行为可以以流程图中所示顺序以外的顺序出现。例如,取决于所涉及的功能/行为,连续显示的两个框实际上可以被并行执行或者有时可能被以相反的顺序执行。此外,不是流程图中所示出的所有框都需要被运行和/或执行。例如,如果给定的流程图有五个包含功能/行为的框,可能该五个框中只有三个框被运行和/或执行。在该例中,该五个框中的该三个框的任何一个都可以被运行和/或执行。
本申请中提供的一个或多个实施例的描述和说明并不以任何方式限制或限定所要求的本公开中的范围。本申请提供的实施例、示例和详细信息被认为充分地传达了本申请的范围,并且使其他人能够制造和使用所要求的实施例的最佳方式。所要求的实施例不应被理解为仅限于此申请中提供的任何实施例、示例或详细信息。无论是否组合或单独地示出和描述,各种特征(结构的和方法的)都被有意地选择性地包含或省略以出示具有特定特征集的实施例。在已经提供了本申请的描述与说明之后,本领域技术人员可以预见变化,修改,和可替换的实施例均属于本申请中的总体发明构思的较宽范畴的主旨中,并不偏离要求的实施例的较宽范围。

Claims (23)

1.一种用于食谱管理的装置,所述装置包括:
网络接口,被配置为接收包括关于食物或饮料的制备的自然语言的至少一条通信;
用于存储的持久存储器;以及
至少一个处理器,被配置为:
从所述网络接口接收包括关于食物或饮料的制备的自然语言的所述至少一条通信;
在所述至少一条通信包括视频内容的情况下,利用来自语音识别处理器的辅助,预处理接收的所述至少一条通信,所述视频内容包括隐藏字幕文本,所述隐藏字幕文本产生经预处理的转录文本;
在接收的所述至少一条通信源自于包括口头语言的烹饪内容的至少一个源的情况下,使用语音识别,预处理包括音频内容的接收的所述至少一条通信以从所接收的通信中提取文本;
从接收的所述至少一条通信中提取至少一条制备指示;
在将所述至少一条制备指示提供给用户之前,从所述至少一条制备指示中定制特定的制备指示;
在将提取的制备指示的至少一些变换成机器可执行的指令之前,从描述各种智能烹饪器具的能力的信息的数据库中,标识能够独立地执行食谱的步骤的一个或多个智能器具,所述机器可执行的指令具有适于被所标识的智能器具执行的格式;
在所述一个或多个智能器具已经被标识为能够独立地执行提取的所述至少一条制备指示的情况下,将提取的所述至少一条制备指示变换成至少一条机器可执行的指令;
在能够独立地执行所述食谱的步骤的所述一个或多个智能器具在所述标识步骤中不能被标识的情况下,将提取的所述至少一条制备指示直接提供给用户;
响应于在烹饪过程的各个中间阶段处提供给用户的补充信息,经由用户接口从用户处接收包括颜色、气味和时间的实时反馈,以确定用户是否已经成功地或未成功地完成所述食谱的各阶段,其中,所述补充信息被提供作为对提取的所述至少一条制备指示的补充;以及
响应于所述实时反馈,向用户提供可替换的制备所述食谱的指令,以纠正在制备所述食谱的过程中所犯的任何错误或误差。
2.根据权利要求1所述的装置,其中,所述至少一个处理器还被配置为将包括所述至少一条机器可执行的指令的至少一条通信传送至所述网络接口,并且所述网络接口还被配置为传送包括所述至少一条机器可执行的指令的所述至少一条通信。
3.根据权利要求1所述的装置,其中,所述至少一个处理器还被配置为接收至少一条定制指令并将所述至少一条定制指令储存于所述持久存储器中。
4.根据权利要求3所述的装置,其中,所述至少一条定制指令是饮食要求和原材料替代中的一项或多项。
5.根据权利要求1所述的装置,其中,包括自然语言的所述至少一条通信包括所述口头语言,并且所述至少一个处理器还被配置为将所述口头语言转换成文本。
6.根据权利要求5所述的装置,其中,所述至少一个处理器还被配置为,使用自然语言处理,从接收的包括口头语言的所述至少一条通信中提取至少一条制备指示。
7.根据权利要求1所述的装置,其中,所述持久存储器包括描述至少一个器具的能力的信息,并且所述至少一个处理器还被配置为将提取的所述至少一条制备指示与描述至少一个器具的所述能力的所述信息进行比较,以根据提取的所述至少一条制备指示而标识用于制备食物或饮料的至少一个器具。
8.根据权利要求1所述的装置,还包括用于根据提取的所述至少一条制备指示而提供关于食物或饮料的制备的至少一条指示的所述用户接口。
9.根据权利要求1所述的装置,还包括用于从用户处接收关于食物或饮料的制备的反馈的所述用户接口。
10.根据权利要求1所述的装置,其中,所述持久存储器包括描述食物或饮料制备的制备信息,并且所述处理器还被配置为使用所述制备信息对提取的所述至少一条制备指示进行校正或适配。
11.一种用于食谱管理的方法,所述方法包括:
通过网络接口,接收包括关于食物或饮料的制备的自然语言的至少一条电子通信,其中所述至少一条电子通信源自于音频烹饪内容和视频烹饪内容的至少一个源,所述至少一个源包括基于预先构建的存在论来自所述内容和的转录的转录文本;
利用至少一个处理器以:
从接收的所述至少一条自然语言通信中自动提取至少一条制备指示;
在将提取的制备指示的至少一些变换成机器可执行的指令之前,从描述各种智能烹饪器具的能力的信息的数据库中,标识能够独立地执行食谱的步骤的一个或多个智能器具,所述机器可执行的指令具有适于被所标识的智能器具执行的格式;
在能够独立地执行所述食谱的步骤的所述一个或多个智能器具在所述标识步骤中不能被标识的情况下,将提取的所述至少一条制备指示直接提供给用户;
在所述一个或多个智能器具已经被标识为能够独立地执行提取的所述至少一条制备指示的情况下,将提取的所述至少一条制备指示变换为至少一条机器可执行的指令;
在所述一个或多个智能器具已经被标识为能够独立地执行提取的所述至少一条制备指示的情况下,在提取的所述至少一条制备指示变换为至少一条机器可执行的指令之前,从所述至少一条制备指示中定制特定的制备指示;
在所述一个或多个智能器具没有被标识为能够独立地执行提取的所述至少一条制备指示的情况下,将提取的所述至少一条制备指示直接提供给用户;
响应于在烹饪过程的各个中间阶段处提供给用户的补充信息,经由用户接口从用户处接收包括颜色、气味和时间的实时反馈,以确定用户是否已经成功地或未成功地完成所述食谱的各阶段;以及
响应于所述实时反馈,向用户提供可替换的制备所述食谱的指令,以纠正在制备所述食谱的过程中所犯的任何错误或误差。
12.根据权利要求11所述的方法,还包括使用所述网络接口传送所述至少一条机器可执行的指令。
13.根据权利要求11所述的方法,还包括接收至少一条定制指令并将所述至少一条定制指令存储于持久存储器中。
14.根据权利要求13所述的方法,其中,所述至少一条定制指令是饮食要求和原材料替代中的一项或多项。
15.根据权利要求11所述的方法,其中,包括自然语言的所述至少一条电子通信包括口头语言,并且所述方法还包括利用所述至少一个配置的处理器将所述口头语言转换成文本。
16.根据权利要求15所述的方法,其中,利用所述至少一个配置的处理器,使用自然语言处理从包括口头语言的所述至少一条接收的通信中提取所述至少一条制备指示。
17.根据权利要求11所述的方法,还包括,将提取的所述至少一条制备指示与存储在持久存储器中的描述至少一个器具的能力的信息进行比较,以根据提取的所述至少一条制备指示标识用于制备食物或饮料的至少一个器具。
18.根据权利要求11所述的方法,还包括,根据提取的所述至少一条制备指示,利用所述用户接口提供关于食物或饮料的制备的至少一条指示。
19.根据权利要求11所述的方法,还包括,利用所述用户接口从用户处接收关于食物或饮料的制备的反馈。
20.根据权利要求11所述的方法,还包括,利用存储在持久存储器中的描述食物或饮料制备的制备信息,对提取的所述至少一条制备指示进行校正或适配。
21.一种用于食谱管理的装置,所述装置包括:
网络接口,被配置为接收包括关于食物或饮料的制备的自然语言的至少一条通信;
用于存储的持久存储器;以及
至少一个处理器,被配置为:
从所述网络接口接收包括关于食物或饮料的制备的自然语言的所述至少一条通信,其中所述至少一条通信源自于食谱内容的呈制备指示和/或机器可执行的指令形式的结构化源,
从接收的所述至少一条通信中提取至少一条制备指示;
查阅源自于定制信息的存储的所述通信,以检索用户理解的一种或多种语言;
在将提取的制备指示的至少一些变换成机器可执行的指令之前,从描述各种智能烹饪器具的能力的信息的数据库中,标识能够独立地执行食谱的步骤的一个或多个智能器具,所述机器可执行的指令具有适于被所标识的智能器具执行的格式;
在所述一个或多个智能器具已经被标识为能够独立地执行提取的所述至少一条制备指示的情况下,将提取的所述至少一条制备指示变换成至少一条机器可执行的指令;
在能够独立地执行所述食谱的步骤的所述一个或多个智能器具在所述标识步骤中不能被标识的情况下,将提取的所述至少一条制备指示直接提供给用户;
响应于在烹饪过程的各个中间阶段处提供给用户的补充信息,经由用户接口从用户处接收包括颜色、气味和时间的实时反馈,以确定用户是否已经成功地或未成功地完成所述食谱的各阶段;以及
响应于所述实时反馈,向用户提供可替换的制备所述食谱的指令以纠正在制备所述食谱的过程中所犯的任何错误或误差;
在将所述至少一条制备指示提供给用户之前,从所述至少一条制备指示中定制特定的制备指示包括在将所述制备指示提供给用户之前,将所述制备指示翻译成用户理解的语言,和/或在将所述制备指示提供给智能器具以用于执行之前,将所述制备指示变换成所述机器可执行的指令。
22.根据权利要求21所述的装置,其中所述处理器还被配置为:将所述食谱内容翻译成确定被用户理解的所述一种或多种语言,利用关键字跟踪和优先顺序以维护上下文和所述食谱中动作项的顺序。
23.根据权利要求21所述的装置,其中使用应用编程接口(API)能够访问食谱内容的呈制备指示和/或机器可执行的指令形式的所述结构化源。
CN201580060190.9A 2014-11-05 2015-11-04 用于食谱管理的方法和系统 Active CN107077529B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
IN5567CH2014 2014-11-05
IN5567/CHE/2014 2014-11-05
PCT/IB2015/058530 WO2016071854A1 (en) 2014-11-05 2015-11-04 Methods and systems for recipe management

Publications (2)

Publication Number Publication Date
CN107077529A CN107077529A (zh) 2017-08-18
CN107077529B true CN107077529B (zh) 2021-03-26

Family

ID=55908672

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580060190.9A Active CN107077529B (zh) 2014-11-05 2015-11-04 用于食谱管理的方法和系统

Country Status (5)

Country Link
US (1) US10692491B2 (zh)
EP (1) EP3216000A1 (zh)
JP (1) JP2018506758A (zh)
CN (1) CN107077529B (zh)
WO (1) WO2016071854A1 (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10545632B2 (en) * 2015-03-27 2020-01-28 Panasonic Intellectual Property Corporation Of America Cooking support display system
US10540058B2 (en) * 2016-01-08 2020-01-21 Whirlpool Corporation Network and method for casting a user interface
DE102016209796A1 (de) 2016-06-03 2017-12-07 BSH Hausgeräte GmbH System und Verfahren zur Ermittlung eines strukturierten Rezeptes
CN107133457A (zh) * 2017-04-24 2017-09-05 美的集团股份有限公司 智能烹饪方法、装置及设备
US11410638B1 (en) * 2017-08-30 2022-08-09 Amazon Technologies, Inc. Voice user interface for nested content
US11430347B2 (en) * 2017-09-18 2022-08-30 Microsoft Technology Licensing, Llc Providing diet assistance in a session
CN109696857B (zh) * 2017-10-24 2021-11-02 佛山市顺德区美的电热电器制造有限公司 一种烹饪的控制方法、装置及存储介质
US10839151B2 (en) * 2017-12-05 2020-11-17 myFavorEats Ltd. Systems and methods for automatic analysis of text-based food-recipes
EP3765970A4 (en) * 2018-03-14 2021-12-08 Hestan Smart Cooking, Inc. RECIPE CONVERSION SYSTEM
US11406896B1 (en) 2018-06-08 2022-08-09 Meta Platforms, Inc. Augmented reality storytelling: audience-side
EP3595409A1 (en) * 2018-07-09 2020-01-15 Electrolux Appliances Aktiebolag Method for operating a cooking appliance
CN112369122B (zh) * 2018-07-09 2023-10-10 伊莱克斯家用电器股份公司 用于操作烹饪用具的方法
JP7259270B2 (ja) * 2018-11-05 2023-04-18 ソニーグループ株式会社 調理ロボット、調理ロボット制御装置、制御方法
ES2764323A1 (es) * 2018-11-27 2020-06-02 Bsh Electrodomesticos Espana Sa Sistema de preparacion de alimentos
ES2763185A1 (es) * 2018-11-27 2020-05-27 Bsh Electrodomesticos Espana Sa Sistema de preparacion de alimentos
WO2020136723A1 (ja) * 2018-12-25 2020-07-02 クックパッド株式会社 定量的レシピ情報作成支援サーバ、情報処理端末、定量的レシピ情報作成支援システム、定量的レシピ情報作成支援方法及び定量的レシピ情報作成支援プログラム
JP6491807B1 (ja) * 2018-12-25 2019-03-27 クックパッド株式会社 サーバ装置、情報処理端末、システム、方法およびプログラム
US11631010B1 (en) 2019-01-06 2023-04-18 Adaptics Limited System and method for use with connected kitchen appliances
CN109918522A (zh) * 2019-01-25 2019-06-21 广州富港万嘉智能科技有限公司 一种基于烹饪平台的菜品烹饪学习方法及装置
CN111061857A (zh) * 2019-12-10 2020-04-24 珠海格力电器股份有限公司 菜谱生成方法、装置、电子设备及存储介质
US11308432B2 (en) * 2020-06-05 2022-04-19 International Business Machines Corporation Augmented reality virtual order assistant
CN113647797B (zh) * 2021-09-09 2023-06-09 广东美的厨房电器制造有限公司 烹饪设备及其控制方法、装置、存储介质

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6549818B1 (en) 1999-07-26 2003-04-15 General Electric Company Cooking appliance and cooking system
US20020009016A1 (en) 2000-07-21 2002-01-24 Bruce Ancona Apparatus and method for a smart kitchen appliance
US7370034B2 (en) * 2003-10-15 2008-05-06 Xerox Corporation System and method for performing electronic information retrieval using keywords
DE102004062737A1 (de) * 2004-12-27 2006-07-13 Rational Ag Gargerät, enthaltend mindestens ein Gassensorarray, sowie ein Verfahren zum Garen mit diesem Gargerät, ein Verfahren zum Reinigen dieses Gargeräts und ein Probenentnahmesystem
DE502005000527D1 (de) * 2005-02-02 2007-05-10 Frima Sa Verfahren und Vorrichtung zum Bestimmen eines Wendezeitpunktes eines Gargutes
CN100454816C (zh) * 2005-02-23 2009-01-21 侯万春 一种面向个人提供每日健康食谱的装置和方法
US8145854B1 (en) * 2006-06-08 2012-03-27 Rusty Shawn Lee Method and apparatus for controlling automated food preparation systems
JP2008123131A (ja) 2006-11-09 2008-05-29 Toshiba Corp 調理レシピ抽出装置および方法、並びに調理レシピ抽出プログラム
US7890493B2 (en) * 2007-07-20 2011-02-15 Google Inc. Translating a search query into multiple languages
KR101412149B1 (ko) * 2007-10-29 2014-07-02 엘지전자 주식회사 조리 기기
US8419434B2 (en) * 2008-04-15 2013-04-16 International Business Machines Corporation Interactive recipe preparation using interactive cooking device to communicate with kitchen appliances
CN102194305A (zh) * 2010-03-11 2011-09-21 梁波 家用全自动就餐系统
MX2012011029A (es) * 2010-03-23 2012-11-16 Nestec Sa Mejoramiento de la apariencia de productos alimenticios.
CN102853459B (zh) * 2011-07-01 2014-11-05 刘舸 基于网络下载食谱进行自动烹饪的微波炉控制系统及方法
US20130092032A1 (en) * 2011-10-18 2013-04-18 Bsh Home Appliances Corporation Intelligent home cooking appliance, associated systems, and/or methods
US20130149677A1 (en) * 2011-12-12 2013-06-13 Josiah A. Slone System and methods for virtual cooking with food pairing
US20140249966A1 (en) * 2012-08-30 2014-09-04 FoodRocket, Inc. System and Method for Recipe, Grocery, and Food Services
US8829365B1 (en) * 2013-03-15 2014-09-09 Pure Imagination, LLC System and method for maintaining recipe ratios when measuring ingredients for culinary combinations
US20140272817A1 (en) * 2013-03-15 2014-09-18 Provictus, Inc. System and method for active guided assistance
DE102013204634A1 (de) * 2013-03-15 2014-09-18 E.G.O. Elektro-Gerätebau GmbH Verfahren zur Zubereitung eines Garguts und Gargerät
US9797873B1 (en) * 2014-06-26 2017-10-24 Yummly, Inc. Prediction of recipe preparation time

Also Published As

Publication number Publication date
US10692491B2 (en) 2020-06-23
WO2016071854A1 (en) 2016-05-12
US20170323640A1 (en) 2017-11-09
JP2018506758A (ja) 2018-03-08
EP3216000A1 (en) 2017-09-13
CN107077529A (zh) 2017-08-18

Similar Documents

Publication Publication Date Title
CN107077529B (zh) 用于食谱管理的方法和系统
US8935148B2 (en) Computer-assisted natural language translation
US8935150B2 (en) Dynamic generation of auto-suggest dictionary for natural language translation
US20210043108A1 (en) Recipe conversion system
US20140122083A1 (en) Chatbot system and method with contextual input and output messages
JP2015201169A (ja) 多様な意味カテゴリに基づいた翻訳結果提供方法およびシステム
CN111310440A (zh) 文本的纠错方法、装置和系统
KR101709693B1 (ko) 크라우드 소싱을 이용한 웹툰 언어 자동 번역 방법
JP2016164707A (ja) 自動翻訳装置及び翻訳用モデル学習装置
JP5856708B1 (ja) 翻訳システム及びサーバ
Ortiz-Martinez et al. An interactive machine translation system with online learning
CN115186070A (zh) 信息处理方法、装置、设备、存储介质及程序产品
TWI493365B (zh) 多字集字碼輸入與即時顯示方法、系統與裝置
EP3595409A1 (en) Method for operating a cooking appliance
JP6491806B1 (ja) 定量的レシピ情報作成支援サーバ、情報処理端末、定量的レシピ情報作成支援システム、定量的レシピ情報作成支援方法及び定量的レシピ情報作成支援プログラム
JP6378964B2 (ja) 手話cg生成装置及び手話cg生成プログラム
US20200118541A1 (en) Chat and knowledge domain driven task-specific query and response system
JP2021032921A (ja) 音声認識による自動翻訳機の人工知能による自動アップデートとそのアップデート配信及び情報システム
JP6591720B1 (ja) 定量的レシピ翻訳サーバ、情報処理端末、定量的レシピ翻訳システム、定量的レシピ翻訳方法及び定量的レシピ翻訳プログラム
RU2770569C2 (ru) Способ и сервер для обучения алгоритма машинного обучения переводу
Kristiadi Bamboopreneurship: Pemodelan Pedagogi untuk Arsitektur Bambu Berdasarkan Creativepreneurship
JP2011076375A (ja) 文章変換装置、方法及びプログラム
CN111104630A (zh) 菜谱文件的创建方法及装置、存储介质、电子装置
CN112369122B (zh) 用于操作烹饪用具的方法
KR20230146166A (ko) 실시간 웹 서비스를 위한 번역문 교정 방법 및 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20231124

Address after: Holland Ian Deho Finn

Patentee after: Fansongni Holdings Ltd.

Address before: The city of Eindhoven in Holland

Patentee before: KONINKLIJKE PHILIPS N.V.