CN115190956A - 在家用烹饪器具上设定目标褐变程度 - Google Patents

在家用烹饪器具上设定目标褐变程度 Download PDF

Info

Publication number
CN115190956A
CN115190956A CN202180020109.XA CN202180020109A CN115190956A CN 115190956 A CN115190956 A CN 115190956A CN 202180020109 A CN202180020109 A CN 202180020109A CN 115190956 A CN115190956 A CN 115190956A
Authority
CN
China
Prior art keywords
image
user
image measurement
cooking
cur
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180020109.XA
Other languages
English (en)
Inventor
J·亚当
K·尼加尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BSH Hausgeraete GmbH
Original Assignee
BSH Hausgeraete GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BSH Hausgeraete GmbH filed Critical BSH Hausgeraete GmbH
Publication of CN115190956A publication Critical patent/CN115190956A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47JKITCHEN EQUIPMENT; COFFEE MILLS; SPICE MILLS; APPARATUS FOR MAKING BEVERAGES
    • A47J36/00Parts, details or accessories of cooking-vessels
    • A47J36/32Time-controlled igniting mechanisms or alarm devices
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24CDOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00Stoves or ranges heated by electric energy
    • F24C7/08Arrangement or mounting of control or safety devices
    • F24C7/082Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination
    • F24C7/085Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination on baking ovens
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24CDOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00Stoves or ranges heated by electric energy
    • F24C7/08Arrangement or mounting of control or safety devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/68Food, e.g. fruit or vegetables
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Food Science & Technology (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Electric Ovens (AREA)

Abstract

一种方法(S1‑S6)用于设定烹饪物(G)的目标褐变程度,并且具有下列步骤:拍摄(S2)来自家用烹饪器具(1)的装有烹饪物(G)的烹饪室的图像(P);在屏幕(S)上显示(S3)所述图像;在所显示的图像(P)中定义(S4,S5)用户可选择的图像测量区域(C;CUR);和针对所选择的图像测量区域(C;CUR)规定(S6)目标褐变程度。用于执行该方法的设备(1,SP,DB)具有:带有烹饪室(2)的家用烹饪器具(1);对准烹饪室(2)的至少一个摄像机(5);至少一个屏幕(S,7,9),在所述至少一个屏幕(S,7,9)上可显示由至少一个摄像机(5)拍摄的图像(P);至少一个操作者界面(7,9),用于在所显示的图像中定义用户可选择的图像测量区域并用于规定目标褐变程度;和数据处理装置(6),用于在考虑目标褐变程度的情况下执行烹饪过程。本发明尤其有利地可应用于烤箱。

Description

在家用烹饪器具上设定目标褐变程度
技术领域
本发明涉及一种用于设定目标褐变程度(Ziel-Braeunungsgrads)的方法,该方法具有下列步骤:拍摄来自家用烹饪器具的烹饪室的图像;在所显示的图像中定义图像测量区域;和为所选择的图像测量区域规定目标褐变程度。本发明也涉及一种用于执行该方法的设备,该设备具有:带有烹饪室的家用烹饪器具;对准烹饪室的至少一个摄像机;至少一个屏幕,在所述至少一个屏幕上可显示由至少一个摄像机拍摄的照片;至少一个操作者界面和用于在考虑目标褐变程度的情况下执行烹饪流程的数据处理装置。本发明尤其有利地可应用于烤箱。
背景技术
EP 3 477 206 A1公开了一种烹饪器具,该烹饪器具包括:烹饪室;图像产生设备,用于检测在烹饪室之内的食品的图像;数据处理设备,所述数据处理设备与图像产生设备处于通信并且包括软件模块,所述软件模块配置为,从图像产生设备接收检测到的图像并且计算褐变程度;和操作者界面,所述操作者界面配置为,显示表明褐变程度的视觉标度。在一个实施形式中,烹饪器具包括选择装置,该选择装置配置为,使得用户能够为食物设定目标褐变程度。
US 20130092145 A1公开了一种炉子,该炉子包括:配置用于容纳食物产品的烹饪室、配置用于显示与用于烹调的过程有联系的信息的操作者界面、第一和第二能量源以及烹调控制系统。针对食物产品,第一能量源供应一级热量(Primaerwaerme),并且第二能量源供应二级热量(Sekundaerwaerme)。烹调控制系统可以根据运行与第一和第二能量源耦合。烹调控制系统可以包含处理电路,该处理电路配置为,使得操作者能够经由操作者界面作出褐变控制选择,其方式是:该操作者为显示在操作者界面上的所选择的控制台提供操作者指令。可以基于炉子的烹调模式来选择所选择的控制台。褐变控制系统的选择可以提供控制参数,以便经由第二能量源将热量直接施加到食物产品上。在一个实施形式中,烹调模式是来自第一模式和来自第二模式的一个模式,在第一模式中,操作者可以选择包括空气温度、气流速度和时间在内的控制参数中的多个控制参数,在第二模式中,操作者可以选择褐变程度,其中接着自动地基于所选择的褐变程度来确定控制参数。
WO 2009/026895 A2公开了一种用于设定要在烹饪器具的内部空间中进行的工作程序的方法,该方法包括至少一个烹饪程序和/或至少一个清洁程序,其中可以设定多个参数中的至少一个参数或者至少一个显示和操作装置,其中所述参数、所述参数的可设定的值和所设定的值至少暂时以可视化的方式被显示在显示和操作装置上。在一种构建方案中,可以发生对多个外部烹饪程度的可视化,以设定其他的第一烹饪物参数,或者可以发生对褐变标度的多个褐变设定范围的显示,其中优选地,根据所选择的烹饪物类型、所选择的部分、烹饪器具的架设地点和/或烹饪器具的操作语言,确定褐变设定范围的数目和/或颜色。
DE 10 2016 215 550 A1公开了一种用于查明家用燃气器具(Haushalts-Gasgeraets)的烹饪室中的烹饪物的褐变程度的方法,家用烹饪器具具有对准烹饪室的摄像机和用于照明烹饪室的光源,并且其中借助摄像机拍摄参考图像,在光源的第一亮度的情况下拍摄第一测量图像,在光源的第二亮度的情况下拍摄第二测量图像,由第一测量图像和第二测量图像产生差分图像,并且将该差分图像与参考图像进行比较。
在已知的褐变测量中自动地确定,所取出的图像中的哪个区域要用作图像测量区域或者“参考区域”,以便确定褐变程度。这被称为“分类”或者“分割”问题,并且是对自动褐变识别的最大要求之一。迄今,为此大多使用复杂的AI(人工智能)算法,所述AI算法基于机器学习(“Machine Learning”)。这种算法很难开发,并且需要高计算能力。在家用烹饪器具中进行实施的情况下,这又导致针对相关联的数据处理装置的高成本。但是,特别在复杂的(特别不均匀的)烹饪物的情况下,即使以高花费来执行这种AI算法,确定适当的图像测量区域也常常不能令人满意。因此,在使用AI算法来确定图像测量区域的情况下,烹饪结果也常常未褐变到使用户满意。
发明内容
本发明的任务是,至少部分地克服现有技术的缺点,并且尤其是提供一种经改进的可能性,以在烹饪过程期间实现烹饪物的所期望的褐变程度。
根据独立权利要求的特征来解决该任务。有利的实施形式是从属权利要求、说明书和附图的主题。
该任务通过一种用于经历来以设定待烹饪的烹饪物的目标褐变程度的方法来解决,该方法具有下列步骤:
- 拍摄来自家用烹饪器具的装有烹饪物的烹饪室的图像;
- 在屏幕上显示所述图像;和
- 在所显示的图像中定义用户可选择的图像测量区域;及
- 针对所选择的图像测量区域,规定目标褐变程度。
通过由用户可选择或者可规定用于确定实际褐变程度的图像测量区域,实现如下优点:有针对性地依据对于用户为了实现所期望的烹饪结果而是决定性的或者是最重要的那个烹饪物,和/或依据对于用户为了实现所期望的烹饪结果而是决定性的或者是最重要的那个区域,确定褐变程度。尤其是,当有如下情况时可以这样有针对性地通过用户也接着可靠地选择确定的烹饪物或确定的烹饪物区域:
- 烹饪物具有不均匀的颜色分布,和/或示出局部明显不同的褐变进程,例如有大理石花纹的蛋糕、带有多种配料的披萨、炒蔬菜等等;
- 烹饪物具有不同的食物或者食物成分,例如鸡肉配炸薯条;
- 烹饪物形状复杂,使得非常不同地照射该烹饪物,例如面包;
- 在烹饪过程期间褐变的烹饪物垫子是可见的,例如烘焙纸;和/或
- 使用带颜色(尤其是棕色直至黑色)的烹饪物容器,如烘烤用的模子等;
- 或者存在其他复杂的烹饪物。
借此,可以再度舍弃如下对图像测量区域的自动确定:所述对图像测量区域的自动确定在开发技术上和在计算技术上是费事的,并且仍然常常容易出错。例如,针对鸡肉配炸薯条的情况,用户可以确定,是要依据鸡肉的褐变程度还是要依据炸薯条的褐变程度来控制烹饪过程,并且用户可以将图像测量区域准确地放置到鸡肉或者炸薯条上。因此,本方法所基于的构思在于,让用户判定,在所拍摄的图像中要在何处确定褐变程度。
该图像可以依据摄像机来拍摄,必要时可以依据来自一组多个可用的摄像机的摄像机来拍摄,所述一组多个可用的摄像机例如从不同的角度拍摄烹饪物。
因此,在所显示的图像中定义用户可选择的图像测量区域包括如下可能性:用户可以自己规定用于确定褐变程度的图像测量区域。
例如基于存储在数据库中的目标褐变程度或者所计算的目标褐变程度,可以由用户规定和/或自动地规定针对所选择的图像测量区域的目标褐变程度。例如,经由百分率量表或者色彩标度,例如借助所谓的滑块,用户可以设定目标褐变程度。例如,依据烹饪程序或者依据以前在用户侧存储的值,可以进行自动规定。一般而言,为了确定目标褐变程度,可以应用对此已知的方法。
本方法可以附设步骤:- 在考虑目标褐变程度的情况下,执行烹饪过程。那么,本方法也可以被视为用于运行家用烹饪器具的方法,或者被视为用于执行烹饪过程或者烹饪流程的方法。在考虑目标褐变程度的情况下的烹饪过程可以根据任何已知的和适合的方法来执行,并且使用用户选择的图像测量区域作为参考区域。尤其是,为了确定在图像测量区域中如何确定褐变程度、实际褐变程度何时已达到目标褐变程度和接着触发哪个动作(例如停止烹饪过程,冷却烹饪室,给用户输出消息等等),接着可以动用已知的方法。
一种构建方案是,定义图像测量区域的步骤包括在屏幕上面受用户引导地定位图像测量区域。借此,可以特别简单地规定或者定义图像测量区域。在该构建方案中,用户可以在屏幕上至少使图像测量区域(在x和y方向上)移位。例如,图像测量区域可以预先定义为在屏幕上面可移位的光标(Cursor)或者光标窗口/光标区域。
一种构建方案是,受用户引导地定义图像测量区域包括:在屏幕上面触摸引导地和/或操作板引导地(bedienfeldgefuehrtes)定位图像测量区域。这完全极大地使图像测量区域的定位简单。在触摸引导地进行定位时,通过对触摸敏感的屏幕进行触摸,例如,通过用户用手指在屏幕上轻叩要在其处定位图像测量区域的部位,通过将光标/光标区域拉到所期望的位置等,对图像测量区域进行定位。光标/光标区域可以自动地被采纳为图像测量区域,或者可以在用户确认之后才被采纳为图像测量区域。在操作板引导地进行定位时,可以借助操作板(例如通过移动操纵杆、启动光标键等)在屏幕上移动光标。屏幕在此不需要是触摸敏感的屏幕。
一种构建方案是,可以在用户侧改变图像测量区域,例如在它的形状和/或大小方面可改变该图像测量区域。借此,图像测量区域可以还更准确地适应用户期望。例如通过双指手势(“捏(Pinching)”),例如可以通过用户缩小或者放大方形的或者圆形的图像测量区域。也可以改变图像测量区域的形状、例如矩形的边比率、从椭圆到圆的形状等等。
一种构建方案是,为了定义图像测量区域
- 对于在用户侧选择的图像区域,自动地确定包括该图像区域的模式区域(Musterbereich),以及
- 模式区域被采纳为图像测量区域。
借此实现如下优点:也可以简单地由用户定义或者规定具有复杂形状或者轮廓的图像测量区域。模式区域可以自动地被采纳为图像测量区域,或者可以在用户确认之后才被采纳为图像测量区域。这种构建方案没有费事的AI算法也行,而是例如可以使用从图像处理领域中已知的可比较简单地实现的用于进行模式识别的方法。例如,在所拍摄的图像中,用户可以通过轻击相关联的触摸敏感的屏幕来选择对于该用户可识别的对象(例如鸡肉),于是借助模式识别来确定该图像中的鸡肉的轮廓。接着,用户可以确认或者拒绝该轮廓。利用确认,通过轮廓定义的模式区域被采纳为图像测量区域。
在用户侧选择的图像区域可以是像素的图像位置或者可以是包括多个像素的区域,例如根据手指的触摸区域来计算所述像素的图像位置。
也可能的是,依据该图像,首先自动地执行模式识别,所述模式识别可得到一个或者多个显示在该图像中的模式区域。现在,用户可以通过轻击或者以其他方式进行确定来选择所期望的模式区域,所述所期望的模式区域接着可以被采纳为图像测量区域。
一种扩展方案是,用户可以选择定义图像测量区域的方式,亦即可以例如在依据光标/光标区域进行定义与图像模式识别之间切换。如果用户例如对图像模式识别的结果不满意,则他可以切换到依据光标/光标区域进行定义,或者反之亦然。
一种构建方案是,自动模式识别包括与模式数据库的模式匹配,在该模式数据库中存放有与预先给定的烹饪物相关联的图像模式。这进一步使自动确定与确定的烹饪物相一致的有用模式区域简单。例如,多个与鸡肉相关联的参考模式可以被储存在模式数据库中,并且可以依据或者借助这些参考模式在当前拍摄的图像中规定模式区域。
一种构建方案是,首先自动地选择用户可选择的图像测量区域,并在用户确认或者在预先给定的图像持续之内缺少用户确认(这同样被解释为用户确认)之后,采纳该用户可选择的图像测量区域。借此,可以提高用户友好性。如果用户因此识别出自动选择的图像测量区域是合适的,则用户可以简单地确认该图像测量区域,可以在预先给定的持续时间根本不实施任何行动,或者可以简单地转到下一个行动步骤(例如输入褐变程度)。图像测量区域的自动选择可以舍弃使用复杂的AI算法,并且例如可以表示图像中心或者包围图像中心的区域。如果用户不喜欢自动选择,则他可以如上面描述的那样改变图像测量区域,例如在其位置、形状和/或大小方面改变图像测量区域。
一种构建方案是,在烹饪过程期间自动跟踪图像测量区域。这样实现如下优点:即使烹饪物的位置和/或其形状改变,该图像测量区域也至少在很大程度上与用户选择的图像测量区域相对应。例如,通过用户搅拌或者转动烹饪物,可以造成烹饪物的位置的改变。形状的改变可以例如包括面团的发起。
尤其是,可以如下地执行方法流程:
- 用户将烹饪物装入例如炉子的烹饪室;
- 借助炉子,自动地拍摄烹饪室的图像,所述图像示出烹饪物;
- 炉子将该图像发送到优选地触摸敏感的炉子屏幕上,和/或发送到用户终端设备的优选地触摸敏感的屏幕上;
- 用户通过对图像区域进行轻击或诸如此类来定义图像测量区域;于是接着从手指的位置,预先给定的(例如方形的或者圆的)图像测量区域被叠加到该图像。例如,图像测量区域可以围绕在轻击或者诸如此类时定义的像素位置来定中心。替选地,通过轻击,可以自动地产生图像模式区域,所述图像模式区域包括手指在图像上的位置。替选地,可以给用户提供自动生成的图像测量区域,例如提供例如在图像的中心的方形的或者圆的图像测量区域,该图像测量区域仅需要由用户来确认;
- 在定义或者规定图像测量区域之后,基于图像测量区域的内容,可以以原则上已知的方式自动地计算并显示褐变标度,并且用户可以依据褐变标度来设定所期望的褐变程度;
- 接下来,执行烹饪过程,直至达到所期望的褐变程度,这可以以原则上已知的方式进行。
如果用户在烹饪过程期间移动烹饪物或者烹饪物自己移动(例如面团发起),则在一种扩展方案中可以借助算法来跟随该移动,并且相对应地跟踪图像测量区域。借此,用户不需要挑选新的图像测量区域。
该任务也通过一种设立用于执行如上面描述的方法的设备来解决,该设备具有:
- 带有烹饪室的家用烹饪器具,
- 对准烹饪室的至少一个摄像机,
- 至少一个屏幕,在所述至少一个屏幕上可显示由至少一个摄像机拍摄的照片,
- 至少一个操作者界面,所述至少一个操作者界面设立用于在所显示的图像中定义用户可选择的图像测量区域,并用于规定目标褐变程度,和
- 数据处理装置,所述数据处理装置设立用于在考虑目标褐变程度的情况下执行烹饪过程。
该设备可以与方法类似地来构造,并且具有相同的优点。
家用烹饪器具例如可以是炉子、尤其是烤箱、微波器具、蒸汽处理设备或者其任意组合,例如可以是具有微波和/或蒸汽处理功能的炉子。
摄像机可以集成到家用烹饪器具中,尤其是可以穿过烹饪室壁来对准烹饪室。替选地或者附加地,摄像机可以布置在烹饪室之外,例如可以从外部穿过封闭烹饪室的门的观察窗来对准烹饪室。特别在该情况下,摄像机可以是可取下的摄像机。
屏幕可以是触摸敏感的屏幕,这使得能够进行特别简单的操作。接着,操作者界面尤其是集成到屏幕中,或屏幕也用作操作者界面。
但是,屏幕也可以是非触摸敏感的屏幕,该非触摸敏感的屏幕的图像测量区域可以经由分开的操作者界面来设定。例如,操作者界面为此可以具有操作板(例如传感器按键)、例如光标键十字、操纵杆等。例如,非触摸敏感的屏幕和操作者界面可以在家用电器的控制面板上占据不同的区域。
操作者界面和屏幕可以一起也被称为用户界面。
图像可以被显示在屏幕上,或者可以同时被显示在多个屏幕上。
在一种扩展方案中,摄像机和屏幕是彩色编码的(farbunterstuetzt),也就是说是彩色摄像机和彩色屏幕,这使确定图像测量区域和规定褐变程度变得特别简单。
一种构建方案是,该设备是家用烹饪器具。这得到如下优点:家用烹饪器具可以自主地执行本方法,而为此不需要到网络的连接,但是它可以具有到网络的连接。在该构建方案中,家用烹饪器具具有用于执行本方法的屏幕和操作者界面(必要时集成到触摸敏感的屏幕中),所述屏幕和操作者界面可以是操作面板的部分。数据处理装置可以对应于烹饪器具的控制装置,或烹饪器具的中央控制装置也可以设立为,执行本方法。
一种扩展方案是,该设备是一种系统,该系统包括家用烹饪器具作为系统组件。其构建方案是,屏幕和操作者界面是用户终端设备(例如智能手机、平板电脑(Tablet-PCs)、台式电脑(Desktop-PCs)、笔记本(Notebooks)等)的组件,并且家用烹饪器具具有与用户终端设备的通信接口,用于传输涉及本方法的数据。这得到如下优点:可以在用户终端设备上以特别使用友好的方式定义或规定图像测量区域和目标褐变程度。为了执行本方法,可以在用户终端设备上安装相对应的应用程序(“App”)。家用烹饪器具同样可以具有屏幕和操作者界面,或者可以舍弃屏幕和操作者界面。
一种构建方案是,模式数据库存储在网络支持的数据存储器中,例如存储在所谓的“云(Cloud)”中。借此,可以节省家用烹饪器具中的存储空间。
一种构建方案是,该设备包括网络支持的图像处理装置,至少用于借助自动模式识别而在所显示的图像中定义用户可选择的图像测量区域。可是,也可以借助用户终端设备和/或家用烹饪器具来执行自动模式识别。
如果家用烹饪器具具有用于传输涉及本方法的数据的通信接口,则原则上也可能的是,由家用烹饪器具选择性地自主执行本方法,或者在计算机支持的实体上实施本方法的至少部分。这例如可能取决于,用户是否想要在用户终端设备上实施对用户可选择的图像测量区域的定义。也包括如下情况:依据家用烹饪器具的屏幕,进行对用户可选择的图像测量区域的定义(例如用于用户侧检验、改变和/或确认通过自动模式识别所计算的图像测量区域),但是,借助网络支持的图像处理装置(例如网络服务器或者云计算机),必要时借助网络支持的模式数据库,执行用于自动模式识别本身的计算能力。
附图说明
结合下列对实施例的示意性描述,本发明的上面描述的特性、特征和优点以及如何实现这些特性、特征和优点的方式和方法变得更清楚和更容易理解,所述实施例结合附图予以更详细地阐述。
图1示出了用于运行家用烹饪器具的包括设定目标褐变程度在内的可能方法流程;
图2示出了引入到家用烹饪器具的烹饪室中的烹饪物;
图3示出了烹饪物在触摸敏感的屏幕上的借助家用烹饪器具拍摄的图像;
图4示出了用于在用户侧选择图像测量区域的第一子步骤;
图5示出了用于在用户侧选择图像测量区域的第二子步骤;和
图6示出了用于在用户侧选择图像测量区域的替选的第二子步骤;
图7作为剖视图以侧视图示出了用于执行本方法的设备的略图。
具体实施方式
图1示出了用于运行家用烹饪器具的包括设定目标褐变程度在内的可能方法流程,所述家用烹饪器具呈例如烤箱1(参见图7)的形式。
在步骤S1中,用户将烹饪物G装入烤箱1的烹饪室2。如在图2中概略地示出的那样,烹饪物G可以例如包括平放在彩色烤盘B上的鸡肉H以及布置在其周围的土豆片K或者炸薯条。完全自动地只是不可靠地可能对此确定适合于高用户满意度的图像测量区域,更确切而言,即使使用复杂的AI算法,也不可能对此确定适合于高用户满意度的图像测量区域。
在步骤S2中,借助烤箱1的摄像机5(参见图7)来拍摄烹饪室2的图像P,该图像P在本发明示出了烤盘B、烹饪物G以及其周围环境。在图3中,概略地示出这种图像P。
在步骤S3中,图像P被发送至触摸敏感的屏幕S、例如烤箱1的屏幕7和/或如智能手机SP之类的用户终端设备的屏幕9(参见图7),并在那里被显示,如在图4中概略地示出的那样。
如同样在图4中示出的那样,在步骤S4中,用户N可以例如用他的手指、笔等轻击屏幕S的显示图像P的区域,在本发明轻击:与鸡肉H相关联的图像区域。
现在,在步骤S5中,对于所轻击的图像区域自动产生图像模式区域,所述图像模式区域在图5中划成虚线地显示为鸡肉H的轮廓C。如果该图像模式区域与由用户N所期望的图像测量区域相对应,则例如通过轻击肯定的复选框(图5中的上部复选框),用户N可以将该图像模式区域确认为图像测量区域;或者,如果不是,则例如通过轻击否定的复选框(图5中的下部复选框),用户N可以摒弃该图像模式区域作为图像测量区域。那么,图像测量区域因此与被确认的图像模式区域C相对应。替选地,用户N可以将图像测量区域放置到土豆片K上。
图像模式区域C可以单独地根据包含在图像P中的图像信息来计算。在一个变型方案中,附加地可以进行与存储在模式数据库DB(参见图7)中的图像模式的匹配,所述图像模式分配给确定的烹饪物G。借此,在图像P中确定的至少一个图像模式还可以更好地接近已知的烹饪物的形状。这样,鸡肉H的图像模式可以储存在模式数据库DB中,例如按照视角、部分(例如整只鸡、半只鸡、鸡腿等)等而改变。
在步骤S6中,针对所选择的或者所定义的图像测量区域,自动产生褐变标度(没有附图),并在屏幕S上显示所述褐变标度。依据褐变标度,用户N可以输入或者选择(在本发明:鸡肉H的)所期望的目标褐变程度。替选地,用户N可以规定土豆片K的所期望的褐变程度。
在接下来的步骤S7中,借助烤箱1的控制装置6,执行烹饪过程,直至达到目标褐变程度,更确切而言,基于借助图像测量区域所计算的当前实际褐变程度与目标褐变程度的比较,执行烹饪过程。
在代替上面描述的步骤S5可执行的替选步骤S5中,在屏幕S上,预先给定的图像区域(“光标” CUR)被叠加到图像P。例如通过借助手指、笔等轻击或者拖放运动,光标CUR可以由用户N移动到图像B的如下部位:在该部位处,用户N想要以经过评估的方式知道褐变程度。如在图6中示出的那样,光标CUR可以再现图像测量区域的形状和大小,其中通过用户N接着仅还需要规定光标CUR的位置。图像测量区域因此在本发明对应于通过光标CUR确定的图像区域。在一个变型方案中,用户N可以调整光标CUR的大小和/或形状,并且由此也可以调整图像测量区域。
在另一变型方案中,可以由用户在光标CUR在图像P上的起始位置(例如图像中心)处来确认光标CUR,而可能无需移动光标CUR。
通过用户在预先给定的持续时间不改变图像测量区域C, CUR,也可以进行确认。
如果用户N在烹饪过程期间移动烹饪物G,则可以借助图像评估算法来跟随移动,并且图像测量区域C, CUR可以相对应被跟踪或者适应移动。借此,用户N不需要挑选新的图像测量区域C, CUR。
图7作为剖视图以侧视图示出了用于执行本方法的设备1, SP, DB的略图。该设备包括烤箱1、呈智能手机SP形式的用户终端设备,并且可选地包括模式数据库DB。
烤箱1具有烹饪室2,该烹饪室2的前侧的装料开口3借助门4是可封闭的。通过装料开口3,可以给烹饪室2装入存在于烤盘B中的烹饪物G。摄像机5处于烹饪室2的顶板的区域中,所述摄像机5从上方或者斜上方指向烹饪室2。可选地,摄像机5可以处于其他部位。也可以存在多个摄像机5。摄像机5(必要时经由控制装置6)与触摸敏感的屏幕7相连。由摄像机5拍摄的图像P可以被发送至屏幕7,于是用户N如上面描述的那样可以定义图像测量区域C,CUR以及可以设定目标褐变程度。基于所选择的图像测量区域C, CUR和目标褐变程度,控制装置6可以控制烹饪过程(例如激活未示出的加热元件),例如直至达到目标褐变程度。在一个变型方案中,可以自主地在烤箱1上执行本方法。
在替选的或者附加的第二变型方案中,烤箱1可以经由通信模块8(例如蓝牙和/或WLAN模块)无线地与智能手机SP相连。智能手机同样具有触摸敏感的屏幕9,经由所述触摸敏感的屏幕9可以进行上面的方法步骤S3至S6,更确切而言代替烤箱1的屏幕7或者除了烤箱1的屏幕7以外而具有触摸敏感的屏幕9。
烤箱1和/或智能手机2可以经由网络NW(例如互联网)与模式数据库DB相连。
当然,本发明并不限于所示出的实施例。
一般而言,这样也可以通过用户定义两个或者还更多个图像测量区域,并且可以给这些图像测量区域分配相同的或者不同的褐变目标值。例如,当这些图像测量区域中的一个或者多个的实际褐变程度达到相关联的目标褐变程度时,那么可以结束接下来的烹饪过程。
一般而言,“一”、“一个”等可以被理解为单个或者多个,尤其是在“至少一个”或者“一个或者多个”等的意义下来理解,只要这没有例如通过表达“恰好一个”等而被明确排除就如此。
附图标记列表
1 烤箱
2 烹饪室
3 装料开口
4 门
5 摄像机
6 控制装置
7 烤箱的触摸敏感的屏幕
8 通信模块
9 智能手机的触摸敏感的屏幕
B 烤盘
C 轮廓
CUR 光标
DB 模式数据库
G 烹饪物
H 鸡肉
K 土豆片
N 用户
NW 网络
P 烹饪室的图像
S 触摸敏感的屏幕
S1-S7 方法步骤
SP 智能手机。

Claims (14)

1.一种用于设定烹饪物(G)的目标褐变程度的方法(S1-S6),其具有下列步骤:
- 拍摄(S2)来自家用烹饪器具(1)的装有所述烹饪物(G)的烹饪室的图像(P);
- 在屏幕(S)上显示(S3)所述图像(P);
- 在所显示的图像(P)中定义(S4,S5)用户可选择的图像测量区域(C;CUR);和
- 针对所选择的图像测量区域(C;CUR),规定(S6)目标褐变程度。
2.根据权利要求1所述的方法(S1-S6),其中,定义(S4,S5)所述图像测量区域(C;CUR)的步骤包括在所述屏幕(S)上面受用户引导地定位所述图像测量区域(CUR)。
3.根据权利要求2所述的方法(S1-S6),其中,受用户引导地定义所述图像测量区域(C;CUR)包括在所述屏幕(S)上面触摸引导地和/或操作板引导地定位所述图像测量区域(CUR)。
4.根据上述权利要求中任一项所述的方法(S1-S6),其中,为了定义所述图像测量区域(C;CUR)
- 对于在用户侧选择的图像区域,自动地确定包括所述图像区域的模式区域,和
- 所述模式区域被采纳为所述图像测量区域(C)。
5.根据权利要求4所述的方法(S1-S6),其中,自动模式识别包括与模式数据库(DB)的模式匹配,在该所述模式数据库(DB)中存放有与预先给定的烹饪物(G)相关联的图像模式。
6.根据上述权利要求中任一项所述的方法(S1-S6),其中,能在用户侧改变所述图像测量区域(CUR)。
7.根据上述权利要求中任一项所述的方法(S1-S6),其中,首先自动地选择用户可选择的图像测量区域(C;CUR),并在用户确认或者在预先给定的持续时间之内未发生用户确认之后,采纳所述用户可选择的图像测量区域(C;CUR)。
8.根据上述权利要求中任一项所述的方法(S1-S7),其中,在接下来的烹饪流程(S7)期间,自动跟踪所述图像测量区域(C;CUR)。
9.根据上述权利要求中任一项所述的方法(S1-S6),其中,在用户侧设定(S6)所述目标褐变程度。
10.一种设立用于执行根据上述权利要求中任一项所述的方法(S1-S7)的设备(1,SP,DB),其具有:
- 带有烹饪室(2)的家用烹饪器具(1),
- 对准所述烹饪室(2)的至少一个摄像机(5),
- 至少一个屏幕(S,7,9),在所述至少一个屏幕(S,7,9)上能显示由所述至少一个摄像机(5)拍摄的图像(P),
- 至少一个操作者界面(7,9),用于在所显示的图像(P)中定义用户可选择的图像测量区域(C,CUR)并用于规定目标褐变程度,
- 数据处理装置(6),用于在考虑所述目标褐变程度的情况下执行烹饪过程。
11.根据权利要求10所述的设备(1),其中,所述设备(1)是家用烹饪器具。
12.根据权利要求10至11中任一项所述的设备(1,其中,所述屏幕(S,9)和所述操作者界面(S,9)是用户终端设备(SP)的组件,并且家用电器(1)具有与所述用户终端设备(SP)的通信接口(8),用于传输涉及所述方法(S2-S6)的数据。
13.根据权利要求10至12中任一项所述的设备(1,SP,DB),其中,模式数据库(DB)存储在网络支持的数据存储器中。
14.根据权利要求10至13中任一项所述的设备(1,SP,DB),其中,所述设备包括网络支持的图像处理装置,用于借助自动模式识别在所述所显示的图像(P)中定义所述用户可选择的图像测量区域(C,CUR)。
CN202180020109.XA 2020-03-12 2021-02-25 在家用烹饪器具上设定目标褐变程度 Pending CN115190956A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP20290028.8 2020-03-12
EP20290028 2020-03-12
PCT/EP2021/054664 WO2021180477A1 (de) 2020-03-12 2021-02-25 Einstellen eines ziel-bräunungsgrads an einem haushalts-gargerät

Publications (1)

Publication Number Publication Date
CN115190956A true CN115190956A (zh) 2022-10-14

Family

ID=70482521

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180020109.XA Pending CN115190956A (zh) 2020-03-12 2021-02-25 在家用烹饪器具上设定目标褐变程度

Country Status (4)

Country Link
US (1) US20230075347A1 (zh)
EP (1) EP4118382A1 (zh)
CN (1) CN115190956A (zh)
WO (1) WO2021180477A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102023121440A1 (de) 2023-08-10 2024-08-29 Miele & Cie. Kg Verfahren zum Betrieb eines Garsystems und Garsystem, umfassend ein Gargerät mit einem Garraum

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2880411A1 (fr) * 2005-01-03 2006-07-07 Bernard Loubieres Combine electromenager tv-micro-onde (four)
EP2977683A1 (de) * 2014-07-25 2016-01-27 Rational Aktiengesellschaft Verfahren zur steuerung eines gargeräts
DE102017101183A1 (de) * 2017-01-23 2018-07-26 Miele & Cie. Kg Verfahren zum Betreiben eines Gargerätes und Gargerät
EP3608593A1 (en) * 2018-08-10 2020-02-12 Electrolux Appliances Aktiebolag Cooking system

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8254713B2 (en) * 2005-11-11 2012-08-28 Sony Corporation Image processing apparatus, image processing method, program therefor, and recording medium in which the program is recorded
DE102007040651B4 (de) 2007-08-27 2012-02-09 Rational Ag Verfahren zur Einstellung eines Garprogramms über visualisierte Gargutparameter und Gargerät hierfür
EP2638325B1 (en) * 2010-11-12 2015-03-11 Convotherm Elektrogeräte GmbH A cooking device, and a procedure for cooking food
US10584881B2 (en) 2011-10-17 2020-03-10 Illinois Tool Works, Inc. Browning control for an oven
US10656808B2 (en) * 2012-09-18 2020-05-19 Adobe Inc. Natural language and user interface controls
DE102016215550A1 (de) * 2016-08-18 2018-02-22 BSH Hausgeräte GmbH Feststellen eines Bräunungsgrads von Gargut
US20190110638A1 (en) * 2017-10-16 2019-04-18 Midea Group Co., Ltd Machine learning control of cooking appliances
US10605463B2 (en) 2017-10-27 2020-03-31 Whirlpool Corporation Cooking appliance with a user interface
KR20220049437A (ko) * 2019-08-30 2022-04-21 엘지전자 주식회사 카메라를 구비한 조리기기

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2880411A1 (fr) * 2005-01-03 2006-07-07 Bernard Loubieres Combine electromenager tv-micro-onde (four)
EP2977683A1 (de) * 2014-07-25 2016-01-27 Rational Aktiengesellschaft Verfahren zur steuerung eines gargeräts
DE102017101183A1 (de) * 2017-01-23 2018-07-26 Miele & Cie. Kg Verfahren zum Betreiben eines Gargerätes und Gargerät
EP3608593A1 (en) * 2018-08-10 2020-02-12 Electrolux Appliances Aktiebolag Cooking system

Also Published As

Publication number Publication date
EP4118382A1 (de) 2023-01-18
WO2021180477A1 (de) 2021-09-16
US20230075347A1 (en) 2023-03-09

Similar Documents

Publication Publication Date Title
CN212157290U (zh) 烹饪辅助器具
CN111527348B (zh) 可配置的烹饪系统和方法
US11867411B2 (en) Cooking appliance with a user interface
EP3189509B1 (en) Method for data communication between a mobile computer device and a household device, as well as application software, mobile computer device, computer program and system
CN105659029B (zh) 操作装置以及操作方法
EP3344007B1 (en) Heat-cooking device
KR20190000908U (ko) 주방 기구들의 유도성 가열 및 무선 급전을 갖는 요리 시스템
CA2731470A1 (en) Oven and method of operating the same
CN107205583A (zh) 烹饪器具及其控制方法
CN106020007A (zh) 控制方法及烹饪器具
US11741390B2 (en) Cooking system and method for making recipe suggestions in real time
CN107647789B (zh) 烹饪控制方法、装置及计算机可读存储介质
US11727682B2 (en) Lid detection method for an over-the-range appliance
WO2018140574A1 (en) Electronic oven with improved human-machine interface
CN115190956A (zh) 在家用烹饪器具上设定目标褐变程度
US20210207811A1 (en) Method for preparing a cooking product, cooking device, and cooking device system
WO2019208284A1 (ja) 加熱調理器
US12119953B2 (en) Method for data communication with a domestic appliance by a mobile computer device, mobile computer device and domestic appliance
JP6909954B2 (ja) 加熱調理器
CN115349760A (zh) 烹饪规则调整方法及烤箱
US20240107638A1 (en) Determining a target processing state of a cooking product to be treated
CN116802681A (zh) 用于确定食物的烹饪时间结束的方法以及家用烹饪器具
CN105911896A (zh) 一种智能厨房系统及其控制方法
EP4361951A1 (en) Area calculation of food items using image segmentation
CN111788433A (zh) 交互模块

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination