WO2016206889A1 - Steuereinheit und verfahren zur ermittlung eines rezeptes - Google Patents

Steuereinheit und verfahren zur ermittlung eines rezeptes Download PDF

Info

Publication number
WO2016206889A1
WO2016206889A1 PCT/EP2016/061552 EP2016061552W WO2016206889A1 WO 2016206889 A1 WO2016206889 A1 WO 2016206889A1 EP 2016061552 W EP2016061552 W EP 2016061552W WO 2016206889 A1 WO2016206889 A1 WO 2016206889A1
Authority
WO
WIPO (PCT)
Prior art keywords
control unit
sensor data
recipe
food
camera
Prior art date
Application number
PCT/EP2016/061552
Other languages
English (en)
French (fr)
Inventor
Duc Hanh Bui Tran
Kay-Uwe CLEMENS
Maresa Schicker
Original Assignee
BSH Hausgeräte GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BSH Hausgeräte GmbH filed Critical BSH Hausgeräte GmbH
Publication of WO2016206889A1 publication Critical patent/WO2016206889A1/de

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/68—Food, e.g. fruit or vegetables

Definitions

  • the invention relates to a method and a corresponding control unit for determining a recipe in a household.
  • foods e.g., meals and / or biscuits
  • a storable or storable recipe especially in text form. This may result in foods that may need to be re-cooked at a later date.
  • US201 1 / 0167100A1 describes a kitchen appliance that assists a user in preparing a recipe.
  • the ingredients and the process steps of a recipe can be entered via an input menu and displayed on a screen.
  • the kitchen appliance includes a cutting board with sensors for automatic recognition of ingredients for a recipe. However, the process steps for a recipe must be entered manually by the user via the input menu.
  • the present document deals with the technical task of making it possible for a user in a comfortable way to re-produce a food that has been specially created in-house or to enable other people to produce the created food.
  • a system or a control unit for such a system are to be described, which support a user in the preparation of a recipe (for example a cooking or baking recipe) and in particular in the determination of the process steps of a recipe.
  • a recipe for example a cooking or baking recipe
  • the object is solved by the subject matters of the independent claims.
  • Advantageous embodiments are described i.a. described or illustrated in the dependent claims, the following description and the accompanying drawings.
  • a controller for determining a prescription for a food produced by a person is described.
  • the recipe typically includes ingredients and process steps for the production of the food.
  • the control unit is set up camera sensor data of a camera (in particular a Video or image camera).
  • the camera is set up to detect the person during the production of the food, so that the camera sensor data display the person in the production of the food.
  • the camera sensor data can be sent via a communication link from the camera and received by the control unit.
  • the camera sensor data can then be evaluated by the control unit, for example by means of an image analysis algorithm, in order to determine an ingredient and / or a process step of the recipe.
  • the control unit may e.g. include a software program that is listed by a processor.
  • the control unit thus assists a user by the evaluation of camera sensor data in the creation of a (written in text form) recipe for a produced by him (possibly self-created) food.
  • the control unit makes it possible to prepare the prescription (in particular the prescription process steps) in an automatic manner, and typically without manual intervention by the user.
  • the control unit may be further configured to determine home appliance sensor data of a domestic appliance (e.g., a refrigerator, a stove, a cooker, and / or a food processor), the domestic appliance being used in the manufacture of the food.
  • the home appliance sensor data can be sent via a communication link from the household appliance and received by the control unit.
  • the home appliance sensor data may indicate: a domestic appliance type of the domestic appliance used for the production of the food; an operating program of the household appliance used for the production of the food; an operating parameter (e.g., a temperature) of the domestic appliance used for the production of the food; and / or a period of time for which the domestic appliance is used to produce the food.
  • the controller may be further configured to create the recipe based on the home appliance sensor data and based on the camera sensor data.
  • the recipe can in particular a list of the required ingredients (possibly with quantities of the individual Ingredients) and a description of the required process steps.
  • the additional determination and consideration of domestic appliance sensor data, the precision of the determined recipe can be further increased.
  • the control unit may be configured to determine information relating to a possible ingredient and / or to a possible process step on the basis of the camera sensor data and / or on the basis of the domestic appliance sensor data. On the basis of the camera sensor data and / or on the basis of the household appliance sensor data, it may not be possible to determine unambiguously whether the possible ingredient and / or the possible process step is part of the recipe. However, the control unit may be further configured to access expert information to determine if the food is being made with the possible ingredient and / or with the possible process step. In other words, expert information may be used to indicate possible ambiguities with respect to an ingredient and / or with respect to a process step, which may be e.g. from the camera sensor data and / or from the home appliance sensor data. Thus, the accuracy of the determined recipe can be increased.
  • the expert information may be based on training data having a variety of known recipes for producing a corresponding variety of known foods.
  • the training data may e.g. be generated from a recipe database.
  • the expert information may include an assignment function that is configured to assign an ingredient and / or a process step to a plurality of different occurrences of a (typically multi-dimensional) feature vector.
  • the assignment function may in particular comprise a cluster algorithm and / or a neural network.
  • the assignment function can be based on the o.g. Training data to have been trained by means of a machine-learning process.
  • the control unit can be set up on the basis of Camera sensor data and / or based on the home appliance sensor data to determine a certain expression of the feature vector.
  • the control unit can be set up to determine an ingredient and / or a process step for the recipe on the basis of the assignment function and on the basis of the specific characteristic of the feature vector.
  • the feature vector may indicate occurrences of features of a particular ingredient (eg, shape, color, texture, etc.).
  • the characteristics of the features can be determined on the basis of the camera sensor data and / or based on the home appliance sensor data.
  • the expression of the feature vector results from the characteristics of the features of the feature vector.
  • the assignment function can then assign a specific ingredient to this characteristic of the feature vector.
  • the camera sensor data and the home device sensor data may include time information (e.g., a time stamp) indicating a time at which the respective sensor data was acquired.
  • the control unit may be configured to correlate the camera sensor data and the home appliance sensor data based on the time information to determine an ingredient and / or process step for the recipe. Alternatively or additionally, the control unit may be configured to determine a sequence of process steps for the recipe on the basis of the time information. By taking into account time information, the accuracy of a determined recipe can be increased.
  • the controller may be configured to determine utensil sensor data from a household utensil used to make the food.
  • Exemplary household utensils are a cutting board, a knife, a scale and / or a grater.
  • a household utensil may include a sensor for detecting the utensil sensor data.
  • the control unit can then be set up to also create the recipe on the basis of the utensil sensor data.
  • the accuracy of a detected prescription can be further increased. For example, based on the utensil sensor data, the amount and / or the weight of an ingredient of the recipe can be determined.
  • the control unit can be set up to store the recipe on a storage unit (eg in a file, for example a PDF file). Alternatively or additionally, the control unit may be configured to send the recipe via a communication link to an electronic device (eg a smartphone). The recipe can thus be saved for later use and possibly shared with other people.
  • a storage unit eg in a file, for example a PDF file.
  • the control unit may be configured to send the recipe via a communication link to an electronic device (eg a smartphone). The recipe can thus be saved for later use and possibly shared with other people.
  • a system for determining a prescription for a food produced by a person includes ingredients and process steps for the production of the food.
  • the system includes a camera configured to capture camera sensor data relating to the person making the food.
  • the system includes a control unit described in this document that is configured to determine the ingredients and / or the process steps for the recipe based on the camera sensor data.
  • the system may comprise a domestic appliance, in particular a household appliance, which is set up to detect domestic appliance sensor data relating to the domestic appliance during the production of the food. The control unit can then determine the ingredients and / or the process steps for the recipe based on the home appliance sensor data.
  • a method for determining a prescription for a food produced by a person includes determining camera sensor data of a camera, the camera sensor data indicating the person in the production of the food. Furthermore, the method may include determining home appliance sensor data of a home appliance used in the manufacture of the food. In addition, the method comprises determining, on the basis of the camera sensor data and possibly on the basis of the household appliance sensor data, of process steps and possibly of ingredients for the recipe.
  • a software (SW) program is described.
  • the SW program can be set up to run on a processor and thereby perform the method described in this document.
  • a storage medium is described.
  • the storage medium may include a SW program that is set up to run on a processor and thereby perform the method described in this document.
  • Figure 1 shows an exemplary system for creating a recipe
  • FIG. 2 shows a flow chart of an exemplary method for determining a recipe.
  • Fig. 1 shows a block diagram of a system 100 and a control unit 101 adapted to assist a user in preparing a recipe for self-created food.
  • the system 100 includes a plurality of sensor units 110, 111, 112 arranged to detect sensor data relating to the manufacturing process of a food.
  • the plurality of sensor units 1 10, 1 1 1, 1 12 includes one or more Household appliances 1 10, in particular household appliances, which are used in the production of the food.
  • Exemplary home appliances are an oven, a stove, a refrigerator and / or a food processor.
  • a home appliance 110 may provide home appliance sensor data that includes one or more of the following information:
  • a temperature and / or a temperature profile which are used by the domestic appliance 1 10 for the production of the food;
  • the home appliance sensor data may be transmitted to the control unit 101 via a suitable communication link (e.g., wireless LAN, LAN, Bluetooth, etc.).
  • the control unit 101 is configured to generate a recipe of the produced food based on the home appliance sensor data.
  • Further sensor data may be obtained from household utensils 1 1 1, such as e.g. a cutting board, a knife, a grater, a balance, etc., detected during the production of the food and forwarded to the control unit 101 as utensil sensor data.
  • the control unit 101 may be configured to (possibly also) create the recipe of the food produced based on the utensil sensor data.
  • a cutting board may include a sensor that can detect the position of the contact with a knife. Thus, e.g. determine the cutting distance with which an ingredient is cut on the cutting board.
  • Exemplary utensil sensor data indicate:
  • the system 100 also includes a camera 1 12 configured to capture camera sensor data relating to the manufacturing process.
  • a person can be detected during the production of the food by means of the camera 12.
  • the camera sensor data can be transmitted via a communication link from the camera 1 12 to the control unit 101.
  • the control unit 101 can be set up (possibly also) based on the camera sensor data to create the recipe of the food produced.
  • the camera sensor data may be evaluated by the control unit 101 (e.g., by appropriate image processing algorithms) to determine information about it.
  • the control unit 101 may be configured to access one or more (possibly external) databases 120 via a communication connection.
  • the one or more databases 120 may include expert information related to the production of food.
  • Exemplary expert information includes:
  • the expert information can be created based on a variety of recipes.
  • a variety of recipes can be evaluated (eg in the context of a training phase) to determine the above-mentioned expert information.
  • the expert information can thus be based on a statistical evaluation of a variety of known recipes.
  • the expert information may include an assignment function configured to assign an ingredient to a feature vector for a food and / or a process step for a manufacturing process of a food.
  • the assignment function may be learned based on training data (e.g., based on a variety of recipes) using a machine learning algorithm.
  • Exemplary assignment functions are a cluster algorithm and a neural network.
  • a feature vector includes a plurality of dimensions for a plurality of features, wherein the features of the individual dimensions of the feature vector may be determined based on the sensor data. For example, based on the image sensor data and possibly based on the utensil sensor data (e.g., based on weight data), a feature vector relating to an unknown ingredient of the food may be created. In particular, the feature vector may indicate as features the shape, size and / or weight of the unknown ingredient. These features can be determined based on the sensor data. By means of the assignment function, an ingredient can then be assigned to the feature vector (or to a specific characteristic, i.e. a specific value, of the feature vector). In this way, the ingredients and / or process steps for a manufactured foodstuff can be reliably and robustly determined on the basis of the sensor data.
  • the expert information can thus be used to evaluate the image sensor data, the home appliance sensor data and / or the utensil sensor data. For example, based on the image sensor data and based on the expert information, it can be determined with high accuracy which ingredients and which process steps are used for the production of a foodstuff.
  • the control unit 101 may include a memory unit 102 configured to store (at least in part) expert information.
  • the determined recipe can be stored on the storage unit 102.
  • the determined recipe comprises recipe information in relation to:
  • Operating programs e.g., the type of heating of a furnace
  • operating parameters e.g.
  • Temperature, duration, operating level of the household appliances used 1 10; and / or the (possibly manual) process and / or processing steps for the production of the food.
  • information (in particular sensor data) of various household appliances 1 120, sensors on various objects or utensils 1 10 in the household (eg cutting board, knife, countertop, etc.) as well as a tracking system (eg consisting of infrared sensors, a Camera 1 12, a microphone, etc.) used.
  • the acquired information (in particular the sensor data, device information and / or tracking data) is transmitted via communication links to the control unit 101 (for example to a smart home platform) and is evaluated by an algorithm of the control unit 101.
  • the evaluation may be done on a server located outside a household (e.g., in a so-called cloud).
  • the algorithm processes and interprets the captured information and transforms the information into a recipe. For example, it can be determined via a camera in a refrigerator 1 10 by the control unit 101, which ingredients have been removed from the refrigerator 110 for the production of the food. Through the use of weight sensors, the control unit 101 receives information about the amount used or about the weight of an ingredient. An oven may detect and provide to the control unit 101 the exact baking time and / or type of heating used to produce the food. The tracking system (in particular the camera 1 12) can provide data from which, for example, can be determined in which pot the respective ingredients are added. In addition, the algorithm on the control unit 101 may have access to external expert information that may be included in the determination of a recipe.
  • External expert information may be provided, for example, from a database 120 with expert knowledge of cooking operations.
  • the expert information can be used to eliminate ambiguity. For example, it can be determined on the basis of the evaluation of the sensor data that an ingredient (eg meat) has been placed in a pot or in a pan. By incorporating expert information (ie by using expert knowledge), it can be determined that the ingredient (eg meat) is typically seared. It can thus be clearly determined that the ingredient was placed in a pan. This can be done, for example, by means of an above-mentioned assignment function.
  • a determined recipe may be stored on the storage unit 102. Furthermore, the identified prescription may be communicated to an electronic device 130 (e.g., a smartphone, a tablet PC, a personal computer, etc.) to view the recipe and / or share it with others.
  • an electronic device 130 e.g., a smartphone, a tablet PC, a personal computer, etc.
  • the recipe typically displays a variety of ingredients and process steps needed to make the food.
  • the recipe may include a list of ingredients (typically with quantities) and a list of process step descriptions.
  • the method 200 includes determining 201 camera sensor data of a camera 1 12, wherein the camera sensor data display or reproduce the person in the production of the food. By evaluating the camera sensor data (eg by means of an image analysis algorithm), information relating to the ingredients and the process steps can be determined.
  • the method 200 further includes determining 202 home appliance sensor data of a home appliance 110 used in the manufacture of the food. In particular, it is possible to determine which type of household appliance to use for the production of the food, and in what form the domestic device (eg with which operating program and / or with which operating parameters) is to be used for the production of the food.
  • the method 200 also includes determining 203 based on the home appliance sensor data and based on the camera sensor data, the ingredients, and the process steps for the recipe. In particular, a process step for the recipe can be determined by evaluating the camera sensor data.
  • a user can be efficiently assisted in preparing a recipe for a self-created food.
  • the comfort for the user can be increased.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • General Factory Administration (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

Es wird eine Steuereinheit (101) für die Ermittlung eines Rezeptes für ein von einer Person hergestelltes Nahrungsmittel beschrieben. Die Steuereinheit (101) ist eingerichtet, Kamera-Sensordaten einer Kamera (112) zu ermitteln, wobei die Kamera (112) eingerichtet ist, die Person während der Herstellung des Nahrungsmittels zu erfassen. Die Steuereinheit (101) ist weiter eingerichtet, die Kamera-Sensordaten mittels eines Bildanalyse-Algorithmus auszuwerten, um einen Prozessschritt für das Rezept zu ermitteln.

Description

Steuereinheit und Verfahren zur Ermittlung eines Rezeptes
Die Erfindung betrifft ein Verfahren und eine entsprechende Steuereinheit zur Ermittlung eines Rezeptes in einem Haushalt. In einem Haushalt werden regelmäßig Nahrungsmittel (z.B. Mahlzeiten und/oder Gebäck) ohne Verwendung eines Speicher- oder aufbewahrbaren, insbesondere in Textform niedergelegten Rezeptes zubereitet. Dabei können Nahrungsmittel entstehen, die ggf. zu einem späteren Zeitpunkt erneut zubereitet werden sollen. US201 1/0167100A1 beschreibt ein Küchengerät, das einen Nutzer bei der Erstellung eines Rezeptes unterstützt. Dabei können über ein Eingabemenü die Zutaten und die Prozessschritte eines Rezeptes eingegeben und auf einem Bildschirm angezeigt werden. Das Küchengerät umfasst ein Schneidebrett mit Sensoren zur automatischen Erkennung von Zutaten für ein Rezept. Die Prozessschritte für ein Rezept müssen jedoch manuell durch den Nutzer über das Eingabemenü eingegeben werden.
Das vorliegende Dokument befasst sich mit der technischen Aufgabe, es einem Nutzer in komfortabler Weise zu ermöglichen, ein insbesondere selbst kreiertes Nahrungsmittel erneut herzustellen oder es anderen Personen zu ermöglichen, das kreierte Nahrungsmit- tel herzustellen. In diesem Zusammenhang sollen ein System bzw. eine Steuereinheit für ein solches System beschrieben werden, welche einen Nutzer bei der Erstellung eines Rezeptes (z.B. eines Koch- oder Backrezeptes) und insbesondere bei der Ermittlung der Prozessschritte eines Rezeptes unterstützen. Die Aufgabe wird durch die Gegenstände der unabhängigen Patentansprüche gelöst. Vorteilhafte Ausführungsformen werden u.a. in den abhängigen Patentansprüchen, nachfolgender Beschreibung und beigefügter Zeichnung beschrieben oder dargestellt.
Gemäß einem Aspekt wird eine Steuereinheit für die Ermittlung eines Rezeptes für ein von einer Person hergestelltes Nahrungsmittel beschrieben. Dabei umfasst das Rezept typischerweise Zutaten und Prozessschritte für die Herstellung des Nahrungsmittels. Die Steuereinheit ist eingerichtet, Kamera-Sensordaten einer Kamera (insbesondere einer Video- oder Bildkamera) zu ermitteln. Dabei ist die Kamera eingerichtet, die Person während der Herstellung des Nahrungsmittels zu erfassen, so dass die Kamera-Sensordaten die Person bei der Herstellung des Nahrungsmittels anzeigen. Die Kamera-Sensordaten können über eine Kommunikationsverbindung von der Kamera versendet und von der Steuereinheit empfangen werden. Die Kamera-Sensordaten können dann von der Steu- ereinheit, z.B. mittels eines Bildanalyse-Algorithmus, ausgewertet werden, um eine Zutat und/oder einen Prozessschritt des Rezeptes zu ermitteln.
Die Steuereinheit kann z.B. ein Software-Programm umfassen, das von einem Prozessor aufgeführt wird.
Die Steuereinheit unterstützt somit einen Nutzer durch die Auswertung von Kamera-Sensordaten bei der Erstellung eines (in Textform niedergelegten) Rezeptes für ein von diesem hergestelltes (ggf. selbst kreiertes) Nahrungsmittel. Insbesondere ermöglicht es die Steuereinheit, das Rezept (insbesondere die Prozessschritte des Rezeptes) in automati- scher Weise und typischerweise ohne manuellen Eingriff durch den Nutzer zu erstellen.
Die Steuereinheit kann weiter eingerichtet sein, Hausgerät-Sensordaten eines Hausgeräts (z.B. eines Kühlschranks, eines Ofens, eines Herdes und/oder einer Küchenmaschine) zu ermitteln, wobei das Hausgerät bei der Herstellung des Nahrungsmittels verwendet wird. Die Hausgerät-Sensordaten können über eine Kommunikationsverbindung von dem Hausgerät versendet und von der Steuereinheit empfangen werden. Dabei können die Hausgerät-Sensordaten insbesondere anzeigen: Einen Hausgerät-Typ des Hausgeräts, das für die Herstellung des Nahrungsmittels verwendet wird; ein Betriebsprogramm des Hausgeräts, das für die Herstellung des Nahrungsmittels verwendet wird; einen Betriebs- parameter (z.B. eine Temperatur) des Hausgeräts, der für die Herstellung des Nahrungsmittels verwendet wird; und/oder eine Zeitdauer, für die das Hausgerät zur Herstellung des Nahrungsmittels verwendet wird.
Die Steuereinheit kann weiter eingerichtet sein, das Rezept auf Basis der Hausgerät- Sensordaten und auf Basis der Kamera-Sensordaten zu erstellen. Dabei kann das Rezept insbesondere eine Liste der erforderlichen Zutaten (ggf. mit Mengenangaben der einzel nen Zutaten) und eine Beschreibung der erforderlichen Prozessschritte umfassen. Durch die zusätzliche Ermittlung und Berücksichtigung von Hausgerät-Sensordaten kann die Präzision des ermittelten Rezeptes weiter erhöht werden.
Die Steuereinheit kann eingerichtet sein, auf Basis der Kamera-Sensordaten und/oder auf Basis der Hausgerät-Sensordaten Information in Bezug auf eine mögliche Zutat und/oder auf einen möglichen Prozessschritt zu ermitteln. Dabei kann ggf. auf Basis der Kamera- Sensordaten und/oder auf Basis der Hausgerät-Sensordaten nicht in eindeutiger Weise ermittelt werden, ob die mögliche Zutat und/oder der mögliche Prozessschritt Teil des Rezeptes sind. Die Steuereinheit kann jedoch weiter eingerichtet sein, auf Experten-Infor- mation zuzugreifen, um zu bestimmen, ob das Nahrungsmittel mit der möglichen Zutat und/oder mit dem möglichen Prozessschritt hergestellt wird. Mit anderen Worten, Experten-Information kann dazu verwendet werden, mögliche Mehrdeutigkeiten in Bezug auf eine Zutat und/oder in Bezug auf einen Prozessschritt, welche sich z.B. aus den Kamera- Sensordaten und/oder aus den Hausgerät-Sensordaten ergeben, aufzulösen. So kann die Genauigkeit des ermittelten Rezeptes erhöht werden.
Die Experten-Information kann auf Trainingsdaten mit einer Vielzahl von bekannten Rezepten für die Herstellung einer entsprechenden Vielzahl von bekannten Nahrungsmitteln beruhen. Die Trainingsdaten können z.B. aus einer Rezept-Datenbank generiert wer- den. Durch das Extrahieren von Experten-Information aus Trainingsdaten kann eine zuverlässige Disambiguierung von Mehrdeutigkeiten bei der Ermittlung eines Rezeptes gewährleistet werden.
Die Experten-Information kann eine Zuweisungsfunktion umfassen, die eingerichtet ist, einer Vielzahl von unterschiedlichen Ausprägungen eines (typischerweise mehrdimensionalen) Merkmalsvektors jeweils eine Zutat und/oder einen Prozessschritt zuzuweisen. Die Zuweisungsfunktion kann insbesondere einen Cluster-Algorithmus und/oder ein neuronales Netzwerk umfassen. Desweiteren kann die Zuweisungsfunktion auf Basis der o.g. Trainingsdaten mittels eines Maschine-Lernverfahrens angelernt worden sein.
Durch die Verwendung einer Zuweisungsfunktion kann in effizienter und zuverlässiger Weise Experten-Information bei der Ermittlung eines Rezeptes berücksichtigt werden. Insbesondere kann zu diesem Zweck die Steuereinheit eingerichtet sein, auf Basis der Kamera-Sensordaten und/oder auf Basis der Hausgerät-Sensordaten eine bestimmte Ausprägung des Merkmalsvektors zu ermitteln. Desweiteren kann die Steuereinheit eingerichtet sein, anhand der Zuweisungsfunktion und anhand der bestimmten Ausprägung des Merkmalsvektors eine Zutat und/oder einen Prozessschritt für das Rezept zu ermitteln. Beispielsweise kann der Merkmalsvektor Ausprägungen von Merkmalen einer bestimmten Zutat anzeigen (z.B. Form, Farbe, Oberflächenbeschaffenheit, etc.). Die Ausprägungen der Merkmale können auf Basis der Kamera-Sensordaten und/oder auf Basis der Hausgerät-Sensordaten ermittelt werden. Die Ausprägung des Merkmalsvektors ergibt sich aus den Ausprägungen der Merkmale des Merkmalsvektors. Die Zuweisungsfunktion kann dann dieser Ausprägung des Merkmalsvektors eine bestimmte Zutat zuwei- sen.
Die Kamera-Sensordaten und die Hausgerät-Sensordaten (sowie ggf. weitere Sensordaten) können Zeit-Information (z.B. einen Zeitstempel) umfassen, die einen Zeitpunkt anzeigt, an dem die jeweiligen Sensordaten erfasst wurden. Die Steuereinheit kann ein- gerichtet sein, die Kamera-Sensordaten und die Hausgerät-Sensordaten anhand der Zeit- Information zu korrelieren, um eine Zutat und/oder einen Prozessschritt für das Rezept zu ermitteln. Alternativ oder ergänzend kann die Steuereinheit eingerichtet sein, auf Basis der Zeit-Information eine Abfolge von Prozessschritten für das Rezept zu ermitteln. Durch die Berücksichtigung von Zeit-Information kann die Genauigkeit eines ermittelten Rezep- tes erhöht werden.
Die Steuereinheit kann eingerichtet sein, Utensilien-Sensordaten von einem Haushalts- Utensil zu ermitteln, das für die Herstellung des Nahrungsmittels verwendet wird. Beispielhafte Haushalts-Utensilien sind ein Schneidebrett, ein Messer, eine Waage und/oder eine Reibe. Dabei kann ein Haushalts-Utensil einen Sensor zur Erfassung der Utensilien-Sensordaten umfassen. Die Steuereinheit kann dann eingerichtet sein, das Rezept auch auf Basis der Utensilien-Sensordaten zu erstellen. Durch die Bereitstellung von Haushalts- Utensilien mit Sensoren und durch die Berücksichtigung von Utensilien-Sensordaten kann die Genauigkeit eines ermittelten Rezeptes weiter erhöht werden. Beispielsweise kann auf Basis der Utensilien-Sensordaten die Menge und/oder das Gewicht einer Zutat des Rezeptes ermittelt werden. Die Steuereinheit kann eingerichtet sein, das Rezept auf einer Speichereinheit zu speichern (z.B. in einer Datei, etwa einer PDF Datei). Alternativ oder ergänzend kann die Steuereinheit eingerichtet sein, das Rezept über eine Kommunikationsverbindung an ein elektronisches Gerät (z.B. ein Smartphone) zu senden. Das Rezept kann somit für eine spätere Verwendung gespeichert und ggf. mit anderen Personen geteilt werden.
Gemäß einem weiteren Aspekt wird ein System zur Ermittlung eines Rezeptes für ein von einer Person hergestelltes Nahrungsmittel beschrieben. Dabei umfasst das Rezept Zutaten und Prozessschritte für die Herstellung des Nahrungsmittels. Das System umfasst eine Kamera, die eingerichtet ist, Kamera-Sensordaten bezüglich der Person bei der Her- Stellung des Nahrungsmittels zu erfassen. Außerdem umfasst das System eine in diesem Dokument beschriebene Steuereinheit, die eingerichtet ist, auf Basis der Kamera-Sensordaten, die Zutaten und/oder die Prozessschritte für das Rezept zu ermitteln. Des Weiteren kann das System ein Hausgerät, insbesondere ein Haushaltsgerät, umfassen, das eingerichtet ist, Hausgerät-Sensordaten bezüglich des Hausgeräts bei der Herstellung des Nahrungsmittels zu erfassen. Die Steuereinheit kann dann die Zutaten und/oder die Prozessschritte für das Rezept auch auf Basis der Hausgerät-Sensordaten ermitteln.
Gemäß einem weiteren Aspekt wird ein Verfahren zur Ermittlung eines Rezeptes für ein von einer Person hergestelltes Nahrungsmittel beschrieben. Das Verfahren umfasst das Ermitteln von Kamera-Sensordaten einer Kamera, wobei die Kamera-Sensordaten die Person bei der Herstellung des Nahrungsmittels anzeigen. Desweiteren kann das Verfahren das Ermitteln von Hausgerät-Sensordaten eines Hausgeräts umfassen, das bei der Herstellung des Nahrungsmittels verwendet wird. Außerdem umfasst das Verfahren das Ermitteln, auf Basis der Kamera-Sensordaten und ggf. auf Basis der Hausgerät-Sen- sordaten, von Prozessschritten und ggf. von Zutaten für das Rezept.
Gemäß einem weiteren Aspekt wird ein Software (SW) Programm beschrieben. Das SW Programm kann eingerichtet werden, um auf einem Prozessor ausgeführt zu werden, und um dadurch das in diesem Dokument beschriebene Verfahren auszuführen. Gemäß einem weiteren Aspekt wird ein Speichermedium beschrieben. Das Speichermedium kann ein SW Programm umfassen, welches eingerichtet ist, um auf einem Prozessor ausgeführt zu werden, und um dadurch das in diesem Dokument beschriebene Verfahren auszuführen. Es ist zu beachten, dass die in diesem Dokument beschriebenen Verfahren, Vorrichtungen und Systeme sowohl alleine, als auch in Kombination mit anderen in diesem Dokument beschriebenen Verfahren, Vorrichtungen und Systemen verwendet werden können. Desweiteren können jegliche Aspekte der in diesem Dokument beschriebenen Verfahren, Vorrichtung und Systemen in vielfältiger Weise miteinander kombiniert werden. Insbeson- dere können die Merkmale der Ansprüche in vielfältiger Weise miteinander kombiniert werden.
Im Weiteren wird die Erfindung anhand von in der beigefügten Zeichnung dargestellten Ausführungsbeispielen näher beschrieben. Dabei zeigen:
Figur 1 ein beispielhaftes System zur Erstellung eines Rezeptes; und
Figur 2 ein Ablaufdiagramm eines beispielhaften Verfahrens zur Ermittlung eines Rezeptes.
Wie eingangs dargelegt, befasst sich das vorliegende Dokument mit der Unterstützung eines Nutzers bei der Erstellung eines Rezeptes für ein selbst kreiertes Nahrungsmittel. Insbesondere kann es vorkommen, dass beim Kochen bzw. Backen eine Mahlzeit oder ein Gebäck entstehen, die so gut schmecken, dass eine erneute Zubereitung erwünscht ist. Dabei sind typischerweise bei der Herstellung der Mahlzeit oder des Gebäcks die Herstellungsschritte nicht ausreichend dokumentiert worden, um eine erneute Zubereitung zu ermöglichen. Fig. 1 zeigt ein Blockdiagramm eines Systems 100 und einer Steuereinheit 101 , die eingerichtet sind, einen Nutzer bei der Erstellung eines Rezeptes für ein selbst kreiertes Nahrungsmittel zu unterstützen.
Das System 100 umfasst eine Vielzahl von Sensoreinheiten 1 10, 1 1 1 , 1 12, die eingerichtet sind, Sensordaten bezüglich des Herstellungsprozesses eines Nahrungsmittels zu erfassen. Die Vielzahl von Sensoreinheiten 1 10, 1 1 1 , 1 12 umfasst ein oder mehrere Hausgeräte 1 10, insbesondere Haushaltsgeräte, die bei der Herstellung des Nahrungsmittels verwendet werden. Beispielhafte Hausgeräte sind ein Ofen, ein Herd, ein Kühlschrank und/oder eine Küchenmaschine. Ein Hausgerät 1 10 kann Hausgerät-Sensordaten bereitstellen, die ein oder mehrere der folgenden Information umfassen:
• eine Temperatur und/oder einen Temperaturverlauf, die von dem Hausgerät 1 10 zur Herstellung des Nahrungsmittels verwendet werden;
• ein vordefiniertes Betriebsprogramm, das von dem Hausgerät 1 10 zur Herstellung des Nahrungsmittels verwendet wird;
• eine Betriebsstufe (z.B. eine Drehgeschwindigkeit), mit der das Hausgerät 1 10 zur Herstellung des Nahrungsmittels verwendet wird; und/der
· einen Zeitraum bzw. eine Dauer, für die das Hausgerät 1 10 zur Herstellung des
Nahrungsmittels verwendet wird.
Die Hausgerät-Sensordaten können über eine geeignete Kommunikationsverbindung (z.B. Wireless LAN, LAN, Bluetooth, etc.) an die Steuereinheit 101 übertragen werden. Die Steuereinheit 101 ist eingerichtet, auf Basis der Hausgerät-Sensordaten ein Rezept des hergestellten Nahrungsmittels zu erstellen.
Weitere Sensordaten können von Haushalts-Utensilien 1 1 1 , wie z.B. einem Schneidebrett, einem Messer, einer Reibe, einer Waage, etc., während der Herstellung des Nah- rungsmittels erfasst und als Utensilien-Sensordaten an die Steuereinheit 101 weitergeleitet werden. Die Steuereinheit 101 kann eingerichtet sein, (ggf. auch) auf Basis der Utensilien-Sensordaten das Rezept des hergestellten Nahrungsmittels zu erstellen.
Beispielsweise kann ein Schneidebrett einen Sensor umfassen, der die Position des Kon- takts mit einem Messer erfassen kann. So kann z.B. die Schnittweite ermittelt werden, mit der eine Zutat auf dem Schneidebrett geschnitten wird. Beispielhafte Utensilien-Sensordaten zeigen an:
• ein von einer Waage ermitteltes Gewicht einer Zutat für das hergestellte Nahrungsmittel; · Schnittparameter (wie z.B. Schnittweite, Schnittgröße, etc.) von einer geschnittenen Zutat für das hergestellte Nahrungsmittel; und/oder
• Größenparameter von einer zerkleinerten (z.B. geriebenen oder zerhackten) Zutat für das hergestellte Nahrungsmittel. Das System 100 umfasst außerdem eine Kamera 1 12, die eingerichtet ist, Kamera-Sensordaten bezüglich des Herstellungsprozesses zu erfassen. Insbesondere kann anhand der Kamera 1 12 eine Person bei der Herstellung des Nahrungsmittels erfasst werden. Die Kamera-Sensordaten können über eine Kommunikationsverbindung von der Kamera 1 12 an die Steuereinheit 101 übermittelt werden. Die Steuereinheit 101 kann eingerichtet sein, (ggf. auch) auf Basis der Kamera-Sensordaten das Rezept des hergestellten Nahrungsmittels zu erstellen.
Die Kamera-Sensordaten können von der Steuereinheit 101 ausgewertet werden (z.B. mittels geeigneter Bildverarbeitungs-Algorithmen), um Information darüber zu ermitteln,
• welche Zutaten für das Nahrungsmittel verwendet werden;
• in welcher Reihenfolge die Zutaten verarbeitet werden; und/oder
• welche manuellen Herstellungsschritte für die Herstellung des Nahrungsmittels erforderlich sind.
Die Steuereinheit 101 kann eingerichtet sein, über eine Kommunikationsverbindung auf ein oder mehrere (ggf. externe) Datenbanken 120 zuzugreifen. Die ein oder mehreren Datenbanken 120 können Experten-Information in Bezug auf die Herstellung von Nahrungsmitteln umfassen. Beispielhafte Experten-Information umfasst:
• Information in Bezug auf typische Zutaten für ein Nahrungsmittel;
• Information in Bezug auf typische Kombinationen von Zutaten in einem Nahrungsmittel;
• Information in Bezug auf typische Prozessschritte und/oder auf typische Kombinationen von Prozessschritten in dem Herstellungsprozess eines Nahrungsmittels; und/oder
• Information in Bezug auf die äußerliche Erscheinungsform von Zutaten für Nahrungsmittel. Die Experten-Information kann auf Basis von einer Vielzahl von Rezepten erstellt werden. Insbesondere kann eine Vielzahl von Rezepten ausgewertet werden (z.B. im Rahmen einer Trainingsphase), um die o.g. Experten-Information zu ermitteln. Die Experten-Information kann somit auf einer statistischen Auswertung einer Vielzahl von bekannten Rezepten basieren.
Die Experten-Information kann eine Zuweisungsfunktion umfassen, die eingerichtet ist, einem Merkmalsvektor eine Zutat für ein Nahrungsmittel und/oder einen Prozessschritt für einen Herstellungsprozess eines Nahrungsmittels zuzuweisen. Die Zuweisungsfunktion kann auf Basis von Trainingsdaten (z.B. auf Basis einer Vielzahl von Rezepten) mittels eines Maschine-Lern-Algorithmus angelernt werden. Beispielhafte Zuweisungsfunktionen sind ein Cluster-Algorithmus und ein neuronales Netzwerk.
Auf Basis der Sensordaten kann ein Merkmalsvektor erstellt werden. Ein Merkmalsvektor umfasst eine Vielzahl von Dimensionen für eine Vielzahl von Merkmalen, wobei die Merk- male der einzelnen Dimensionen des Merkmalsvektors auf Basis der Sensordaten ermittelt werden können. Beispielsweise kann auf Basis der Bild-Sensordaten und ggf. auf Basis der Utensilien-Sensordaten (z.B. auf Basis von Gewichtsdaten) ein Merkmalsvektor in Bezug auf eine unbekannte Zutat des Nahrungsmittels erstellt werden. Insbesondere kann der Merkmalsvektor als Merkmale die Form, die Größe und/oder das Gewicht der unbekannten Zutat anzeigen. Diese Merkmale können auf Basis der Sensordaten ermittelt werden. Mittels der Zuweisungsfunktion kann dann dem Merkmalsvektor (bzw. einer bestimmten Ausprägung, d.h. einem bestimmten Wert, des Merkmalsvektors) eine Zutat zugewiesen werden. So können in zuverlässiger und robuster Weise auf Basis der Sensordaten die Zutaten und/oder Prozessschritte für ein hergestelltes Nahrungsmittel ermit- telt werden.
Die Experten-Information kann somit dazu verwendet werden, die Bild-Sensordaten, die Hausgerät-Sensordaten und/oder die Utensilien-Sensordaten auszuwerten. Beispielsweise kann auf Basis der Bild-Sensordaten und auf Basis der Experten-Information mit hoher Genauigkeit bestimmt werden, welche Zutaten und welche Prozessschritte für die Herstellung eines Nahrungsmittels verwendet werden. Die Steuereinheit 101 kann eine Speichereinheit 102 umfassen, die eingerichtet ist, (zumindest teilweise) Experten-Information zu speichern. Desweiteren kann auf der Speichereinheit 102 das ermittelte Rezept gespeichert werden. Dabei umfasst das ermittelte Rezept Rezept-Information in Bezug auf:
• die Zutaten des hergestellten Nahrungsmittels;
» die Menge bzw. das Gewicht der verwendeten Zutaten;
• Hausgeräte 1 10 und/oder Utensilien 1 1 1 , die für die Herstellung des Nahrungsmittels verwendet werden;
• Betriebsprogramme (z.B. die Heizart eines Ofens) und Betriebsparameter (z.B.
Temperatur, Dauer, Betriebsstufe) der verwendeten Hausgeräte 1 10; und/oder » die (ggf. manuellen) Prozess- und/oder Verarbeitungsschritte für die Herstellung des Nahrungsmittels.
Zur automatisierten Rezepterstellung wird somit Information (insbesondere Sensordaten) von verschiedenen Hausgeräten 1 120, von Sensoren an verschiedenen Objekten bzw. Utensilien 1 10 im Haushalt (z.B. Schneidebrett, Messer, Arbeitsplatte, etc.) sowie von einem Trackingsystem (z.B. bestehend aus Infrarotsensoren, einer Kamera 1 12, einem Mikrophon, etc.) verwendet. Die erfasste Information (insbesondere die Sensordaten, Geräteinformationen und/oder Trackingdaten) wird über Kommunikationsverbindungen an die Steuereinheit 101 (z.B. an eine Smart Home Plattform) übermittelt und wird von einem Algorithmus der Steuereinheit 101 ausgewertet. Die Auswertung kann ggf. auf einem Server erfolgen, der außerhalb eines Haushalts positioniert ist (z.B. in einer sogenannten Cloud).
Der Algorithmus verarbeitet und interpretiert die erfasste Information und transformiert die Information in ein Rezept. Beispielsweise kann über eine Kamera in einem Kühlschrank 1 10 von der Steuereinheit 101 ermittelt werden, welche Zutaten aus dem Kühlschrank 1 10 zur Herstellung des Nahrungsmittels entnommen worden sind. Durch die Verwendung von Gewichtssensoren erhält die Steuereinheit 101 Information über die verwendete Menge bzw. über das Gewicht einer Zutat. Ein Backofen kann die genaue Backzeit und/oder die Heizart, welche für die Herstellung des Nahrungsmittels verwendet werden, erfassen und der Steuereinheit 101 bereitstellen. Das Trackingsystem (insbesondere die Kamera 1 12) kann Daten bereitstellen, aus denen z.B. ermittelt werden kann, in welchen Topf die jeweiligen Zutaten hinzugefügt werden. Darüber hinaus kann der Algorithmus auf der Steuereinheit 101 Zugriff auf externe Experten-Information haben, die bei der Ermittlung eines Rezepts einbezogen werden kann. Externe Experten-Information kann z.B. von einer Datenbank 120 mit Expertenwissen zu Kochvorgängen bereitgestellt werden. Bei der reinen Auswertung von Sensordaten kön- nen Situationen vorliegen, bei denen eine Zutat und/oder ein Prozessschritt nicht eindeutig identifiziert werden können. Die Experten-Information kann dazu verwendet werden, Mehrdeutigkeiten zu beseitigen. Beispielsweise kann auf Basis der Auswertung der Sensordaten ermittelt werden, dass eine Zutat (z.B. Fleisch) in einen Topf oder in eine Pfanne gelegt wurde. Durch das Einbeziehen von Experten-Informationen (d.h. durch das Ein- beziehen von Expertenwissen) kann ermittelt werden, dass die Zutat (z.B. Fleisch) typischerweise angebraten wird. Es kann somit eindeutig ermittelt werden, dass die Zutat in eine Pfanne gelegt wurde. Dies kann z.B. anhand einer o.g. Zuweisungsfunktion erfolgen.
Ein ermitteltes Rezept kann auf der Speichereinheit 102 gespeichert werden. Desweiteren kann das ermittelte Rezept ggf. an ein elektronisches Gerät 130 (z.B. an ein Smartphone, ein Tablet PC, ein PC, etc.) übermittelt werden, um das Rezept einzusehen und/oder mit anderen Personen zu teilen.
Fig. 2 zeigt ein Ablaufdiagramm eines beispielhaften Verfahrens 200 zur Ermittlung eines Rezeptes für ein von einer Person hergestelltes Nahrungsmittel. Dabei zeigt das Rezept typischerweise eine Vielzahl von Zutaten und Prozessschritten an, die für die Herstellung des Nahrungsmittels erforderlich sind. Das Rezept kann dazu eine Liste von Zutaten (typischerweise mit Mengenangaben) und eine Liste mit einer Beschreibung der Prozessschritte umfassen.
Das Verfahren 200 umfasst das Ermitteln 201 von Kamera-Sensordaten einer Kamera 1 12, wobei die Kamera-Sensordaten die Person bei der Herstellung des Nahrungsmittels anzeigen bzw. wiedergeben. Durch Auswertung der Kamera-Sensordaten (z.B. mittels eines Bildanalyse-Algorithmus) kann Information in Bezug auf die Zutaten und die Pro- zessschritte ermittelt werden. Das Verfahren 200 umfasst weiter das Ermitteln 202 von Hausgerät-Sensordaten eines Hausgeräts 1 10, das bei der Herstellung des Nahrungsmittels verwendet wird. So kann insbesondere ermittelt werden, welcher Typ von Hausgerät für die Herstellung des Nahrungsmittels zu verwenden ist, und in welcher Form das Haus- gerät (z.B. mit welchem Betriebsprogramm und/oder mit welchen Betriebsparametern) für die Herstellung des Nahrungsmittels zu verwenden ist. Das Verfahren 200 umfasst außerdem das Ermitteln 203, auf Basis der Hausgerät-Sensordaten und auf Basis der Kamera-Sensordaten, der Zutaten und der Prozessschritte für das Rezept. Insbesondere kann dabei durch Auswertung der Kamera-Sensordaten ein Prozessschritt für das Rezept ermittelt werden.
Durch die in diesem Dokument beschriebene Steuereinheit 101 und durch das entsprechende Verfahren 200 kann ein Nutzer in effizienter Weise bei der Erstellung eines Rezeptes für ein selbst kreiertes Nahrungsmittel unterstützt werden. So kann insbeson- dere der Komfort für den Nutzer erhöht werden.
Die vorliegende Erfindung ist nicht auf die gezeigten Ausführungsbeispiele beschränkt. Insbesondere ist zu beachten, dass die Beschreibung und die Figuren nur das Prinzip der vorgeschlagenen Verfahren, Vorrichtungen und Systeme veranschaulichen sollen.

Claims

PATENTANSPRÜCHE
Steuereinheit (101 ) für die Ermittlung eines Rezeptes für ein von einer Person hergestelltes Nahrungsmittel, wobei die Steuereinheit (101 ) eingerichtet ist,
Kamera-Sensordaten einer Kamera (1 12) zu ermitteln, wobei die Kamera (1 12) eingerichtet ist, die Person während der Herstellung des Nahrungsmittels zu erfassen; und
die Kamera-Sensordaten mittels eines Bildanalyse-Algorithmus auszuwerten, um einen Prozessschritt für das Rezept zu ermitteln.
Steuereinheit (101 ) gemäß Anspruch 1 , wobei
das Rezept Zutaten und Prozessschritte für die Herstellung des Nahrungsmittels umfasst; und
die Steuereinheit (101 ) eingerichtet ist, die Kamera-Sensordaten mittels des Bildanalyse-Algorithmus auszuwerten, um eine Zutat des Rezeptes zu ermitteln.
Steuereinheit (101 ) gemäß einem der vorhergehenden Ansprüche, wobei die Steuereinheit (101 ) eingerichtet ist,
auf Basis der Kamera-Sensordaten Information in Bezug auf eine mögliche Zutat und/oder auf einen möglichen Prozessschritt des Rezeptes zu ermitteln; und auf Experten-Information zuzugreifen, um zu bestimmen, ob das Nahrungsmittel mit der möglichen Zutat und/oder mit dem möglichen Prozessschritt hergestellt wird.
Steuereinheit (101 ) gemäß Anspruch 3, wobei die Experten-Information auf Trainingsdaten mit einer Vielzahl von bekannten Rezepten für die Herstellung einer entsprechenden Vielzahl von bekannten Nahrungsmitteln beruht.
Steuereinheit (101 ) gemäß einem der Ansprüche 3 bis 4, wobei
die Experten-Information eine Zuweisungsfunktion umfasst, die eingerichtet ist, einer Vielzahl von unterschiedlichen Ausprägungen eines Merkmalsvektors jeweils eine Zutat und/oder einen Prozessschritt zuzuweisen; die Steuereinheit eingerichtet ist, auf Basis der Kamera-Sensordaten eine bestimmte Ausprägung des Merkmalsvektors zu ermitteln; und
die Steuereinheit eingerichtet ist, anhand der Zuweisungsfunktion und anhand der bestimmten Ausprägung des Merkmalsvektors eine Zutat und/oder einen Prozessschritt für das Rezept zu ermitteln.
Steuereinheit (101 ) gemäß Anspruch 5, wobei die Zuweisungsfunktion einen Clu- ster-Algorithmus und/oder ein neuronales Netzwerk umfasst.
Steuereinheit (101 ) gemäß einem der vorhergehenden Ansprüche, wobei die Steuereinheit (101 ) eingerichtet ist,
Hausgerät-Sensordaten eines Hausgeräts (1 10) zu ermitteln, das bei der Herstellung des Nahrungsmittels verwendet wird; und
das Rezept auch auf Basis der Hausgerät-Sensordaten zu erstellen.
Steuereinheit (101 ) gemäß Anspruch 7, wobei
die Kamera-Sensordaten und die Hausgerät-Sensordaten Zeit-Information umfassen, die einen Zeitpunkt anzeigt, an dem die jeweiligen Sensordaten erfasst wurden; und
die Steuereinheit (101 ) eingerichtet ist, die Kamera-Sensordaten und die Hausgerät- Sensordaten anhand der Zeit-Information zu korrelieren, um eine Zutat und/oder einen Prozessschritt für das Rezept zu ermitteln; und/oder
die Steuereinheit (101 ) eingerichtet ist, auf Basis der Zeit-Information eine zeitliche Abfolge von Prozessschritten für das Rezept zu ermitteln.
Steuereinheit (101 ) gemäß einem der Ansprüche 7 bis 8, wobei die Steuereinheit (101 ) eingerichtet ist, auf Basis der Hausgerät-Sensordaten ein oder mehrere zu ermitteln von:
einen Hausgerät-Typ des Hausgeräts (1 10), das für die Herstellung des Nahrungsmittels verwendet wird;
ein Betriebsprogramm des Hausgeräts (1 10), das für die Herstellung des Nahrungsmittels verwendet wird; - einen Betriebsparameter des Hausgeräts (1 10), der für die Herstellung des Nahrungsmittels verwendet wird; und/oder
- eine Zeitdauer, für die das Hausgerät (1 10) zur Herstellung des Nahrungsmittels verwendet wird. 10. Steuereinheit (101 ) gemäß einem der Ansprüche 7 bis 9, wobei das Hausgerät (1 10) ein oder mehrere umfasst von: einen Kühlschrank, einen Ofen, einen Herd und/oder eine Küchenmaschine.
1 1. Steuereinheit (101 ) gemäß einem der vorhergehenden Ansprüche, wobei die Steu- ereinheit (101 ) eingerichtet ist,
- Utensilien-Sensordaten von einem Haushalts-Utensil (1 1 1 ) zu ermitteln, das für die Herstellung des Nahrungsmittels verwendet wird; und
- das Rezept auch auf Basis der Utensilien-Sensordaten zu erstellen. 12. Steuereinheit (101 ) gemäß Anspruch 1 1 , wobei
- das Haushalts-Utensil ein oder mehrere umfasst von: ein Schneidebrett, ein Messer, eine Waage und/oder eine Reibe; und/oder
- das Haushalts-Utensil einen Sensor zur Erfassung der Utensilien-Sensordaten umfasst.
13. Steuereinheit (101 ) gemäß einem der vorhergehenden Ansprüche, wobei die Steuereinheit (101 ) eingerichtet ist,
- das Rezept auf einer Speichereinheit (102) zu speichern; und/oder
- das Rezept über eine Kommunikationsverbindung an ein elektronisches Gerät (130) zu senden.
14. System (100) zur Ermittlung eines Rezeptes für ein von einer Person hergestelltes Nahrungsmittel, wobei das Rezept Zutaten und Prozessschritte für die Herstellung des Nahrungsmittels umfasst; wobei das System (100) umfasst,
- eine Kamera (1 12), die eingerichtet ist, Kamera-Sensordaten bezüglich der Person bei der Herstellung des Nahrungsmittels zu erfassen; und - eine Steuereinheit (101 ) gemäß einem der vorhergehenden Ansprüche, wobei die Steuereinheit (101 ) eingerichtet ist, die Kamera-Sensordaten mittels eines Bildanalyse-Algorithmus auszuwerten, um einen Prozessschritt für das Rezept zu ermitteln.
15. Verfahren (200) zur Ermittlung eines Rezeptes für ein von einer Person hergestell- tes Nahrungsmittel, wobei das Verfahren (200) umfasst,
- Ermitteln (201 ) von Kamera-Sensordaten einer Kamera (1 12), wobei die Kamera- Sensordaten die Person bei der Herstellung des Nahrungsmittels anzeigen; und
- Ermitteln (203), durch Auswerten der Kamera-Sensordaten mittels eines Bildanalyse-Algorithmus, eines Prozessschrittes für das Rezept.
PCT/EP2016/061552 2015-06-22 2016-05-23 Steuereinheit und verfahren zur ermittlung eines rezeptes WO2016206889A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102015211425.2 2015-06-22
DE102015211425.2A DE102015211425A1 (de) 2015-06-22 2015-06-22 Steuereinheit und Verfahren zur Ermittlung eines Rezeptes

Publications (1)

Publication Number Publication Date
WO2016206889A1 true WO2016206889A1 (de) 2016-12-29

Family

ID=56131497

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2016/061552 WO2016206889A1 (de) 2015-06-22 2016-05-23 Steuereinheit und verfahren zur ermittlung eines rezeptes

Country Status (2)

Country Link
DE (1) DE102015211425A1 (de)
WO (1) WO2016206889A1 (de)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108363329A (zh) * 2017-01-27 2018-08-03 松下知识产权经营株式会社 信息处理装置以及信息处理方法
CN111552188A (zh) * 2019-02-12 2020-08-18 Bsh家用电器有限公司 用于运行用于制作食品的家用器具的控制器和方法
US11157936B2 (en) 2020-02-08 2021-10-26 International Business Machines Corporation Product discovery via connected kitchen

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3379475A1 (de) * 2017-03-23 2018-09-26 Panasonic Intellectual Property Management Co., Ltd. Informationspräsentationvorrichtung und informationspräsentationsverfahren
DE102019201780B4 (de) * 2019-02-12 2020-09-03 BSH Hausgeräte GmbH System und Verfahren zum Betreiben von Hausgeräten
DE102020203920B4 (de) 2020-03-26 2021-10-28 BSH Hausgeräte GmbH System zur Interaktion mit einem Anwendergerät

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070114224A1 (en) * 2004-03-17 2007-05-24 Sachio Nagamitsu Ingredient cooking-operation recognition system and ingredient cooking-operation recognition program
JP2009151352A (ja) * 2007-12-18 2009-07-09 Satellite Links:Kk レシピ作成システム
WO2010005355A1 (en) * 2008-07-08 2010-01-14 Aktiebolaget Electrolux Cooking support device
US20100182136A1 (en) * 2004-09-07 2010-07-22 Timothy Pryor Control of appliances, kitchen and home

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070114224A1 (en) * 2004-03-17 2007-05-24 Sachio Nagamitsu Ingredient cooking-operation recognition system and ingredient cooking-operation recognition program
US20100182136A1 (en) * 2004-09-07 2010-07-22 Timothy Pryor Control of appliances, kitchen and home
JP2009151352A (ja) * 2007-12-18 2009-07-09 Satellite Links:Kk レシピ作成システム
WO2010005355A1 (en) * 2008-07-08 2010-01-14 Aktiebolaget Electrolux Cooking support device
US20110167100A1 (en) 2008-07-08 2011-07-07 Aktiebolaget Electrolux Cooking support device

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108363329A (zh) * 2017-01-27 2018-08-03 松下知识产权经营株式会社 信息处理装置以及信息处理方法
CN111552188A (zh) * 2019-02-12 2020-08-18 Bsh家用电器有限公司 用于运行用于制作食品的家用器具的控制器和方法
US11157936B2 (en) 2020-02-08 2021-10-26 International Business Machines Corporation Product discovery via connected kitchen

Also Published As

Publication number Publication date
DE102015211425A1 (de) 2016-12-22

Similar Documents

Publication Publication Date Title
WO2016206889A1 (de) Steuereinheit und verfahren zur ermittlung eines rezeptes
EP3730005B1 (de) Verfahren zur generierung zumindest eines rezeptvorschlags, küchengerät sowie system zum zubereiten von speisen
EP3526649B1 (de) Verfahren und steuereinheit zur überwachung eines herstellungsprozesses einer nahrungsmittel-masse
CN108133743A (zh) 一种信息推送的方法、装置和系统
WO2016142415A2 (de) Verfahren und system mit einer steuerung für die zubereitung von speisen
DE102018130667B4 (de) System zum Zubereiten von Lebensmitteln und Verfahren zum Steuern eines Küchengeräts
EP3394515A1 (de) System zur zubereitung von mindestens einem nahrungsmittel sowie verfahren zum betreiben des betreffenden systems
DE102010054382B4 (de) Verfahren zur Steuerung eines Gargerätes und Gargerät mit Gerätesteuerung
EP1498057B1 (de) Verfahren zum Bestimmen von Parametern eines Garprozesses eines Nahrungsmittels und dieses benutzende Steuervorrichtung
DE102018102123A1 (de) Verfahren sowie Gargerät zum Garen wenigstens eines Garguts
DE102008014006B4 (de) Verfahren zum Bereitstellen eines intelligenten Mensch-Maschinen-Interfaces bei Gargeräten und zugehöriges Gargerät
EP2101230B1 (de) Verfahren zum Bereitstellen eines intelligenten Mensch-Maschinen-Interfaces bei Gargeräten
EP3864346A1 (de) Verfahren zum zubereiten von gargut, gargerät und gargeräte-system
EP2101229B1 (de) Verfahren zum Bereitstellen eines intelligenten Mensch-Maschinen-Interfaces bei Gargeräten
DE102022124280A1 (de) System zur Steuerung eines Produktionsablaufs
WO2017207247A1 (de) System und verfahren zur ermittlung eines strukturierten rezeptes
EP3524888B1 (de) Verfahren zum steuern eines gargerätes sowie gargerät
DE102018118486A1 (de) Verfahren zum Erzeugen eines Garprogramms sowie Gargerät
EP3696623B1 (de) Steuergerät und verfahren zum betrieb eines hausgeräts für die herstellung eines nahrungsmittels
EP3857128A1 (de) Haushaltsgerät, haushaltsgerätesystem und verfahren zum betreiben eines haushaltsgeräts
CN110972346B (zh) 数据处理方法及装置
EP3653091A1 (de) System und verfahren zum zubereiten von lebensmitteln
EP4176426A1 (de) Lebensmittelzubereitungsvorrichtung und verfahren zur lebensmittelzubereitung
WO2023187058A1 (de) Garsystem, gargerät und verfahren zum betrieb eines garsystems
EP4202581A1 (de) Verfahren zum betreiben eines nahrungsmittelbehandlungsgerätes

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16729202

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16729202

Country of ref document: EP

Kind code of ref document: A1