DE102017127418A1 - A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods - Google Patents

A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods Download PDF

Info

Publication number
DE102017127418A1
DE102017127418A1 DE102017127418.9A DE102017127418A DE102017127418A1 DE 102017127418 A1 DE102017127418 A1 DE 102017127418A1 DE 102017127418 A DE102017127418 A DE 102017127418A DE 102017127418 A1 DE102017127418 A1 DE 102017127418A1
Authority
DE
Germany
Prior art keywords
storage
user
refrigerator
recommendation
refrigerated goods
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102017127418.9A
Other languages
German (de)
Inventor
Birgit Wegner
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Miele und Cie KG
Original Assignee
Miele und Cie KG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Miele und Cie KG filed Critical Miele und Cie KG
Priority to DE102017127418.9A priority Critical patent/DE102017127418A1/en
Publication of DE102017127418A1 publication Critical patent/DE102017127418A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00Arrangement or mounting of control or safety devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Thermal Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Devices That Are Associated With Refrigeration Equipment (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum Unterstützen eines Benutzers eines Kühlgeräts (100) beim Lagern von Kühlgut (128), wobei das Kühlgerät (100) zumindest eine Kamera (130, 132) zum Erfassen eines Kühlraums (106) des Kühlgeräts (100) aufweist. In dem Verfahren wird eine von der Kamera (130, 132) bereitgestellte und den Kühlraum (106) repräsentierende Bildinformation (134) empfangen. Diese wird unter Verwendung zumindest eines Bilderkennungsalgorithmus ausgewertet, um zumindest ein Kühlgut (128) zu erkennen. Schließlich wird abhängig von einem Ergebnis des Auswertens eine an den Benutzer gerichtete Lagerungsempfehlung (136) ausgegeben.

Figure DE102017127418A1_0000
The invention relates to a method for supporting a user of a cooling device (100) when storing refrigerated goods (128), wherein the cooling device (100) has at least one camera (130, 132) for detecting a cooling space (106) of the cooling device (100). In the method, image information (134) provided by the camera (130, 132) and representing the cold room (106) is received. This is evaluated using at least one image recognition algorithm in order to recognize at least one item to be cooled (128). Finally, depending on a result of the evaluation, a storage recommendation (136) directed to the user is output.
Figure DE102017127418A1_0000

Description

Die Erfindung betrifft ein Verfahren und eine Vorrichtung zum Unterstützen eines Benutzers eines Kühlgeräts beim Lagern von Kühlgut.The invention relates to a method and a device for supporting a user of a cooling device when storing refrigerated goods.

Es sind Kühlschränke mit Kameras zum Erfassen eines Kühlschrankinhalts bekannt. Die Bilder des erfassten Kühlschrankinhalts können beispielsweise über eine App auf einem Smartphone angezeigt werden. Ferner sind Apps bekannt, die einem Benutzer Hinweise darauf geben, welche Produkte wo am besten im Kühlschrank positioniert werden.There are known refrigerators with cameras for detecting a refrigerator contents. The images of the detected refrigerator content can be displayed via an app on a smartphone, for example. Furthermore, apps are known that give a user hints as to which products are best positioned in the refrigerator.

Vor diesem Hintergrund stellt sich die vorliegende Erfindung die Aufgabe, ein verbessertes Verfahren und eine verbesserte Vorrichtung zum Unterstützen eines Benutzers eines Kühlgeräts beim Lagern von Kühlgut zu schaffen.Against this background, the present invention has the object to provide an improved method and an improved device for supporting a user of a refrigerator when storing refrigerated goods.

Erfindungsgemäß wird diese Aufgabe durch ein Verfahren, eine Vorrichtung und ein Computerprogramm mit den Merkmalen der Hauptansprüche gelöst. Vorteilhafte Ausgestaltungen und Weiterbildungen der Erfindung ergeben sich aus den nachfolgenden Unteransprüchen.According to the invention, this object is achieved by a method, a device and a computer program having the features of the main claims. Advantageous embodiments and further developments of the invention will become apparent from the following subclaims.

Die Erfindung bietet den Vorteil, dass durch eine tatsächliche Erkennung von Lebensmitteln im Kühlschrank über einen geeigneten Bilderkennungsalgorithmus eine besonders zuverlässige Lagerungsempfehlung erzeugt werden kann. Vorteilhafterweise kann eine solche Lagerungsempfehlung beispielsweise in einer App dargestellt werden. Dadurch kann zum einen vermieden werden, dass Lebensmittel fälschlicherweise im Kühlschrank gelagert werden und schon nach kurzer Zeit verderben, wie beispielsweise Zitronen, Bananen, Kartoffeln oder Zwiebeln. Zum anderen kann dadurch eine optimale Nutzung der verschiedenen Kühlzonen des Kühlschranks gewährleistet werden, sodass die Lebensmittel längstmöglich halten und weniger Lebensmittel weggeworfen werden.The invention offers the advantage that a particularly reliable storage recommendation can be generated by an actual recognition of foods in the refrigerator via a suitable image recognition algorithm. Advantageously, such a storage recommendation can be displayed for example in an app. This can be avoided on the one hand that food is stored incorrectly in the refrigerator and spoil after a short time, such as lemons, bananas, potatoes or onions. On the other hand, this can ensure optimal use of the refrigerator's various cooling zones so that the food will last as long as possible and less food will be thrown away.

Es wird ein Verfahren zum Unterstützen eines Benutzers eines Kühlgeräts beim Lagern von Kühlgut vorgestellt, wobei das Kühlgerät zumindest eine Kamera zum Erfassen eines Kühlraums des Kühlgeräts aufweist, wobei das Verfahren folgende Schritte umfasst:

  • Empfangen einer von der Kamera bereitgestellten und den Kühlraum repräsentierenden Bildinformation;
  • Auswerten der Bildinformation unter Verwendung zumindest eines Bilderkennungsalgorithmus, um zumindest ein Kühlgut zu erkennen; und
  • Ausgeben einer an den Benutzer gerichteten Lagerungsempfehlung abhängig von einem Ergebnis des Auswertens.
A method is presented for supporting a user of a refrigerator when storing refrigerated goods, wherein the refrigerator has at least one camera for detecting a cooling space of the refrigerator, the method comprising the following steps:
  • Receiving image information provided by the camera and representing the cold room;
  • Evaluating the image information using at least one image recognition algorithm to detect at least one item to be refrigerated; and
  • Issue a storage recommendation directed to the user depending on a result of the evaluation.

Unter einem Kühlgerät kann beispielsweise ein Kühlschrank, ein Gefrierschrank oder eine Kühlgefrierkombination verstanden werden. Unter einem Kühlgut kann beispielsweise ein Lebensmittel verstanden werden. Unter einem Kühlraum kann ein gekühlter Innenraum des Kühlgeräts verstanden werden. Die Kamera kann beispielsweise an einem Korpus oder einer Tür des Kühlgeräts angeordnet sein. Unter einer Lagerungsempfehlung kann eine Information verstanden werden, die den Benutzer auf eine richtige oder falsche Lagerung des erkannten Kühlguts hinweist. Die Lagerungsempfehlung kann beispielsweise auf einem mobilen Endgerät anzeigbar sein.Under a refrigerator, for example, a refrigerator, a freezer or a Kühlgefrierkombination be understood. Under a refrigerated goods, for example, a food can be understood. A refrigerated space can be understood as meaning a cooled interior of the refrigerating appliance. The camera can be arranged for example on a body or a door of the refrigerator. A storage recommendation can be understood to mean information that informs the user about correct or incorrect storage of the identified item to be cooled. The storage recommendation can be displayed, for example, on a mobile device.

Gemäß einer Ausführungsform umfasst das Verfahren einen Schritt des Verknüpfens des erkannten Kühlguts mit zumindest einer vorgegebenen Lagerungsbedingung. Im Schritt des Ausgebens kann die Lagerungsempfehlung abhängig von einem Ergebnis des Verknüpfens ausgegeben werden. Unter einer Lagerungsbedingung kann beispielsweise ein Satz von Parametern bezüglich der Lagerung eines bestimmten Kühlguts verstanden werden. Die Lagerungsbedingung kann beispielsweise durch eine Datenbank, etwa eine Cloud, bereitgestellt sein. Dadurch kann je nach erkanntem Kühlgut eine optimale Lagerung des Kühlguts gewährleistet werden.According to one embodiment, the method comprises a step of linking the identified item to be cooled with at least one predetermined storage condition. In the step of issuing, the storage recommendation may be issued depending on a result of the association. For example, a storage condition may be understood to mean a set of parameters related to the storage of a particular item of refrigeration. The storage condition may be provided, for example, by a database, such as a cloud. As a result, depending on the recognized refrigerated goods optimal storage of the refrigerated goods can be ensured.

Gemäß einer weiteren Ausführungsform kann im Schritt des Verknüpfens das erkannte Kühlgut mit einer einen Lagerungsort und/oder eine Lagerungstemperatur und/oder eine Lagerungsfeuchtigkeit und/oder eine Lagerungsdauer repräsentierenden Lagerungsbedingung verknüpft werden. Dadurch kann die Genauigkeit der Lagerungsempfehlung erhöht werden.According to a further embodiment, in the step of linking, the recognized refrigerated goods can be linked to a storage condition representing a storage location and / or a storage temperature and / or a storage moisture and / or a storage period. As a result, the accuracy of the storage recommendation can be increased.

Es ist ferner von Vorteil, wenn im Schritt des Ausgebens die Lagerungsempfehlung unter Verwendung einer dem Kühlgerät zugeordneten Geräteinformation ausgegeben wird. Unter einer Geräteinformation kann beispielsweise eine Information über einen Gerätetyp des Kühlgeräts oder eine sonstige gerätespezifische Information verstanden werden. Dadurch kann die Lagerungsempfehlung abhängig vom verwendeten Kühlgerät ausgegeben werden.It is also advantageous if in the step of outputting the storage recommendation is output using a device information associated with the cooling device. Under a device information, for example, information about a device type of the refrigerator or other device-specific information can be understood. As a result, the storage recommendation can be issued depending on the cooling unit used.

Beispielsweise kann im Schritt des Ausgebens die Lagerungsempfehlung unter Verwendung einer eine Anordnung von Kühlfächern im Kühlraum repräsentierenden Geräteinformation ausgegeben werden. Unter einem Kühlfach kann beispielsweise eine Schublade, ein Einlegeboden oder ein Türfach verstanden werden. Dadurch kann die Lagerungsempfehlung auf die Anzahl, Art, Größe oder Lage der Kühlfächer abgestimmt werden.For example, in the step of outputting, the storage recommendation may be output using device information representing an arrangement of refrigerators in the refrigerator compartment. Under a refrigerator compartment, for example, a drawer, a shelf or a Door compartment can be understood. This allows the storage recommendation to be matched to the number, type, size or location of the refrigerators.

Gemäß einer weiteren Ausführungsform kann im Schritt des Ausgebens eine Lagerungsempfehlung ausgegeben werden, die den Benutzer auf einen falschen und/oder richtigen Lagerungsort des erkannten Kühlguts und/oder auf eine vom Benutzer mittels eines Bedienelements des Kühlgeräts vorzunehmende Einstellung zumindest eines Kühlparameters hinweist. Unter einem Lagerungsort kann ein Ort innerhalb oder außerhalb des Kühlgeräts verstanden werden. Unter einem Bedienelement kann beispielsweise ein Schalter oder Schieber verstanden werden. Unter einem Kühlparameter kann beispielsweise eine Temperatur oder Feuchtigkeit im Kühlraum verstanden werden. Durch diese Ausführungsform kann die Effizienz des Verfahrens weiter gesteigert werden.According to a further embodiment, in the step of outputting, a storage recommendation can be issued, which points the user to a wrong and / or correct storage location of the identified goods to be cooled and / or to an adjustment of at least one cooling parameter to be made by the user by means of an operating element of the refrigerator. A storage location can be understood to mean a location inside or outside the refrigerator. Under a control, for example, a switch or slider can be understood. By a cooling parameter can be understood, for example, a temperature or humidity in the cold room. By this embodiment, the efficiency of the method can be further increased.

Der hier vorgestellte Ansatz schafft ferner eine Vorrichtung, die ausgebildet ist, um die Schritte einer Variante eines hier vorgestellten Verfahrens in entsprechenden Einrichtungen durchzuführen, anzusteuern bzw. umzusetzen. Auch durch diese Ausführungsvariante der Erfindung in Form einer Vorrichtung kann die der Erfindung zugrunde liegende Aufgabe schnell und effizient gelöst werden.The approach presented here also creates a device that is designed to perform the steps of a variant of a method presented here in appropriate facilities to drive or implement. Also by this embodiment of the invention in the form of a device, the object underlying the invention can be solved quickly and efficiently.

Unter einer Vorrichtung kann vorliegend ein elektrisches Gerät verstanden werden, das Sensorsignale verarbeitet und in Abhängigkeit davon Steuer- und/oder Datensignale ausgibt. Die Vorrichtung kann eine Schnittstelle aufweisen, die hard- und/oder softwaremäßig ausgebildet sein kann. Bei einer hardwaremäßigen Ausbildung können die Schnittstellen beispielsweise Teil eines sogenannten System-ASICs sein, der verschiedenste Funktionen der Vorrichtung beinhaltet. Es ist jedoch auch möglich, dass die Schnittstellen eigene, integrierte Schaltkreise sind oder zumindest teilweise aus diskreten Bauelementen bestehen. Bei einer softwaremäßigen Ausbildung können die Schnittstellen Softwaremodule sein, die beispielsweise auf einem Mikrocontroller neben anderen Softwaremodulen vorhanden sind.In the present case, a device can be understood as meaning an electrical device which processes sensor signals and outputs control and / or data signals in dependence thereon. The device may have an interface, which may be formed in hardware and / or software. In the case of a hardware-based embodiment, the interfaces can be part of a so-called system ASIC, for example, which contains a wide variety of functions of the device. However, it is also possible that the interfaces are their own integrated circuits or at least partially consist of discrete components. In a software training, the interfaces may be software modules that are present, for example, on a microcontroller in addition to other software modules.

Bei der Vorrichtung kann es sich beispielsweise auch um ein mobiles Endgerät wie etwa ein Smartphone oder Tablet handeln.The device may also be, for example, a mobile terminal such as a smartphone or tablet.

Von Vorteil ist auch ein Computerprogrammprodukt oder Computerprogramm mit Programmcode, der auf einem maschinenlesbaren Träger oder Speichermedium wie einem Halbleiterspeicher, einem Festplattenspeicher oder einem optischen Speicher gespeichert sein kann und zur Durchführung, Umsetzung und/oder Ansteuerung der Schritte des Verfahrens nach einer der vorstehenden Ausführungsformen verwendet wird, insbesondere wenn das Programmprodukt oder Programm auf einem Computer oder einer Vorrichtung ausgeführt wird. Bei dem Computerprogramm kann es sich beispielsweise um eine App handeln.Also of advantage is a computer program product or computer program with program code which can be stored on a machine-readable carrier or storage medium such as a semiconductor memory, a hard disk memory or an optical memory and used for carrying out, implementing and / or controlling the steps of the method according to one of the preceding embodiments especially if the program product or program is running on a computer or device. The computer program may be, for example, an app.

Ein Ausführungsbeispiel der Erfindung ist in den Zeichnungen rein schematisch dargestellt und wird nachfolgend näher beschrieben. Es zeigt

  • 1 eine schematische Darstellung eines Kühlgeräts und einer Vorrichtung gemäß einem Ausführungsbeispiel;
  • 2 eine schematische Darstellung einer Vorrichtung gemäß einem Ausführungsbeispiel; und
  • 3 ein Ablaufdiagramm eines Verfahrens gemäß einem Ausführungsbeispiel.
An embodiment of the invention is shown purely schematically in the drawings and will be described in more detail below. It shows
  • 1 a schematic representation of a cooling device and a device according to an embodiment;
  • 2 a schematic representation of a device according to an embodiment; and
  • 3 a flowchart of a method according to an embodiment.

1 zeigt eine schematische Darstellung eines Kühlgeräts 100, hier beispielhaft eines Kühlschranks, und einer Vorrichtung 102 gemäß einem Ausführungsbeispiel. Das Kühlgerät 100 umfasst eine Innenbeleuchtung 104 zum Beleuchten eines Kühlraums 106 und eine Tür 108 mit drei niedrigeren Türfächern 108, 110, 112 und zwei höheren Türfächern 114, 116 mit je einem Einsatz 118, beispielsweise zur vertikalen Lagerung von Flaschen. Im Kühlraum 106 sind eine Mehrzahl von Einlegeböden 120, ein Flaschenhalter 122 zur horizontalen Lagerung von Flaschen und zwei Schubladen 124, etwa für die schonende Lagerung von Gemüse, übereinander angeordnet. Zwischen einer der Schubladen 124 und dem Flaschenhalter 122 ist eine Auffangrinne 126 zum Auffangen von Wasser angeordnet. Auf einem der Einlegeböden 120 ist ein Kühlgut 128 gelagert, hier beispielhaft ein Apfel. 1 shows a schematic representation of a cooling device 100 , here by way of example a refrigerator, and a device 102 according to an embodiment. The refrigerator 100 includes an interior lighting 104 to light a cold room 106 and a door 108 with three lower door compartments 108 . 110 . 112 and two higher door compartments 114 . 116 with one use each 118 For example, for the vertical storage of bottles. In the fridge 106 are a plurality of shelves 120 , a bottle holder 122 for horizontal storage of bottles and two drawers 124 , for example, for the gentle storage of vegetables, arranged one above the other. Between one of the drawers 124 and the bottle holder 122 is a gutter 126 arranged to catch water. On one of the shelves 120 is a refrigerated goods 128 stored, here an example of an apple.

Zum Erfassen des Kühlraums 106 ist das Kühlgerät 100 gemäß diesem Ausführungsbeispiel mit einer ersten Kamera 130 und einer zweiten Kamera 132 ausgestattet. Beispielhaft ist die erste Kamera 130 im Korpus des Kühlgeräts 100 angeordnet, während die zweite Kamera 132 an einer Innenseite der Tür 108 angeordnet ist. Die beiden Kameras 130, 132 sind ausgebildet, um eine Bildinformation 134, die zumindest ein Bild des Kühlraums 106 repräsentiert, bereitzustellen. Die Vorrichtung 102 ist ausgebildet, um die Bildinformation 134 von den beiden Kameras 130, 132 zu empfangen. Die Übertragung der Bildinformation 134 erfolgt je nach Ausführungsbeispiel über eine Funkverbindung, etwa über WLAN, oder eine drahtgebundene Verbindung. In der Vorrichtung 102 ist beispielsweise zumindest ein Bilderkennungsalgorithmus hinterlegt, mit dessen Hilfe die Bildinformation 134 von der Vorrichtung 102 ausgewertet wird, um die Art des Kühlguts 128, hier einen Apfel, oder auch dessen Lagerungsort im Kühlraum 106, hier der dritte Einlegeboden 120 von oben, zu erkennen. Abhängig vom Ergebnis der Auswertung gibt die Vorrichtung 102 eine an einen Benutzer des Kühlgeräts 100 gerichtete Lagerungsempfehlung 136 aus. Die Lagerungsempfehlung 136 enthält beispielsweise Hinweise zur optimalen Lagerung des erkannten Kühlguts 128 inner- oder außerhalb des Kühlgeräts 100 oder sonstige Informationen zur Haltbarkeitssteigerung des erkannten Kühlguts 128. Beispielsweise ist die Lagerungsempfehlung 136 in Form einer entsprechenden Meldung auf einem mobilen Endgerät wie etwa einem Smartphone oder einem Tablet in einer entsprechenden App anzeigbar.For detecting the cold room 106 is the cooling unit 100 according to this embodiment with a first camera 130 and a second camera 132 fitted. Exemplary is the first camera 130 in the body of the refrigerator 100 arranged while the second camera 132 on an inside of the door 108 is arranged. The two cameras 130 . 132 are trained to image information 134 that have at least a picture of the refrigerator 106 represents to provide. The device 102 is trained to get the picture information 134 from the two cameras 130 . 132 to recieve. The transmission of image information 134 Depending on the embodiment via a wireless connection, such as via WLAN, or a wired connection. In the device 102 For example, at least one image recognition algorithm is deposited, with the aid of which the image information 134 from the device 102 is evaluated to the type of refrigerated goods 128 , here an apple, or its storage location in the refrigerator 106 , here the third shelf 120 from above, to recognize. Depending on the result of the evaluation, the device gives 102 one to a user of the refrigerator 100 directed storage recommendation 136 out. The storage recommendation 136 contains, for example, instructions for optimal storage of the identified items to be cooled 128 inside or outside the refrigerator 100 or other information on the increase in durability of the identified item to be cooled 128 , For example, the storage recommendation 136 in the form of a corresponding message on a mobile device such as a smartphone or a tablet in a corresponding app displayable.

Gemäß einem Ausführungsbeispiel ist die Vorrichtung 102 selbst als das mobile Endgerät ausgeführt und ausgebildet, um die Lagerungsempfehlung 136 dem Benutzer anzuzeigen. Alternativ überträgt die Vorrichtung 102 die Lagerungsempfehlung 136 über eine geeignete drahtlose oder drahtgebundene Kommunikationsverbindung an das mobile Endgerät.According to one embodiment, the device is 102 even as the mobile terminal is running and trained to the storage recommendation 136 to the user. Alternatively, the device transmits 102 the storage recommendation 136 via a suitable wireless or wired communication link to the mobile terminal.

Mithilfe der Vorrichtung 102 kann eine nahezu perfekte Kühlung für alle Produkte gewährleistet werden.Using the device 102 Almost perfect cooling can be guaranteed for all products.

Der Bilderkennungsalgorithmus ist gemäß einem alternativen Ausführungsbeispiel in einer Cloud ausführbar.The image recognition algorithm is executable in a cloud according to an alternative embodiment.

Zur Erkennung des Kühlguts 128 verknüpft die Vorrichtung 102 die Bildinformation 134 beispielsweise mit bestimmten Lagerungsbedingungen. Diese sind beispielsweise in einer Datenbank, etwa in der Cloud, gespeichert und dort abrufbar.For detecting the refrigerated goods 128 linked the device 102 the picture information 134 for example, with certain storage conditions. These are stored, for example, in a database, for example in the cloud, and can be called up there.

Beispielsweise sind die Kameras 130, 132 ausgebildet, um beim Schließen der Tür 108 ein Foto aufzunehmen, anhand dessen die Vorrichtung 102 erkennt, welche Produkte der Benutzer in das Kühlgerät 100 gelegt hat.For example, the cameras 130 . 132 trained to close the door 108 to take a photo, on the basis of which the device 102 Detects which products the user is in the refrigerator 100 has laid.

Gemäß einem Ausführungsbeispiel erfolgt die Auswertung der Bildinformation 134 in einer Bilderkennungssoftware und die Erzeugung einer entsprechenden produktspezifischen Lagerungsempfehlung 136 in der Cloud. Beispielsweise wird der Benutzer je nach Auswertungsergebnis hierauf in der App auf Fehllagerungen hingewiesen.According to one embodiment, the evaluation of the image information takes place 134 in an image recognition software and the generation of a corresponding product-specific storage recommendation 136 in the cloud. For example, depending on the result of the evaluation, the user is referred to incorrect storage in the app.

Beispiele für Lagerungsempfehlungen sind etwa „Zwiebeln gehören nicht in den Kühlschrank. Sie sollten kühl und trocken gelagert werden - z. B. im Keller“ oder „Bitte legen Sie Milch nicht ganz oben in den Kühlschrank, dort ist es am wärmsten“. Entsprechend dem in 1 gezeigten Ausführungsbeispiel lautet die Lagerungsempfehlung 136 beispielsweise: „Für eine längere Haltbarkeit lagern Sie Äpfel bitte in der Gemüseschublade.“Examples of storage recommendations include "Onions do not belong in the fridge. They should be stored cool and dry - eg. B. in the basement "or" Please do not put milk at the top of the fridge, where it is the warmest. " According to the in 1 embodiment shown is the storage recommendation 136 For example: "For longer shelf life please store apples in the vegetable drawer."

Um die kühlschrankspezifischen Unterschiede der Lagerungsmöglichkeiten mit zu verarbeiten, gibt der Benutzer beispielsweise in der App an, welchen Kühlschrank er besitzt. Mithilfe dieser Geräteinformation erfolgt die Auswertung der Bildinformation 134 beispielsweise unter Berücksichtigung der verschiedenen Schubladen und Einlegeböden je nach Kühlschrankmodell. Durch Verarbeitung der Geräteinformation ist es beispielsweise auch möglich, eine Lagerungsempfehlung 136 auszugeben, die einen Hinweis darauf enthält, in welche Stellung ein Bedienelement des Kühlgeräts 100, etwa ein Feuchtigkeitsschieberregler, abhängig vom erkannten Kühlgut 128 geschoben werden sollte, um die Haltbarkeit des erkannten Kühlguts 128 weiter zu steigern.In order to be able to process the refrigerator-specific differences of the storage options, the user indicates, for example, in the app, which refrigerator he owns. This device information is used to evaluate the image information 134 for example, taking into account the different drawers and shelves depending on the refrigerator model. By processing the device information, it is also possible, for example, a storage recommendation 136 output, which contains an indication of which position a control element of the refrigerator 100 , such as a humidity slider, depending on the detected refrigerated goods 128 should be pushed to the durability of the identified chilled goods 128 continue to increase.

2 zeigt eine schematische Darstellung einer Vorrichtung 102 gemäß einem Ausführungsbeispiel. Bei der Vorrichtung 102 zum Unterstützen eines Benutzers eines Kühlgeräts beim Lagern von Kühlgut kann es sich etwa um die vorangehend anhand von 1 beschriebene Vorrichtung handeln. Die Vorrichtung 102 umfasst eine Auswerteeinheit 210, die ausgebildet ist, um die Bildinformation 134 von den beiden Kameras zu empfangen und unter Verwendung eines oder mehrerer Bilderkennungsalgorithmen auszuwerten. Eine Ausgabeeinheit 220 ist ausgebildet, um unter Verwendung eines von der Auswerteeinheit 210 bereitgestellten Erkennungsergebnisses 222, das das erkannte Kühlgut oder dessen Lagerungsort im Kühlgerät repräsentiert, die Lagerungsempfehlung 136 zu erzeugen und auszugeben. Beispielsweise gibt die Ausgabeeinheit 220 die Lagerungsempfehlung 136 an eine geeignete Schnittstelle zu einem mobilen Endgerät aus. 2 shows a schematic representation of a device 102 according to an embodiment. In the device 102 for supporting a user of a refrigerator when storing refrigerated goods may be about the above with reference to 1 act described device. The device 102 includes an evaluation unit 210 that is designed to handle the image information 134 from the two cameras and evaluate using one or more image recognition algorithms. An output unit 220 is designed to be using one of the evaluation unit 210 provided recognition result 222 , which represents the recognized refrigerated goods or its storage location in the refrigerator, the storage recommendation 136 to generate and output. For example, the output unit indicates 220 the storage recommendation 136 to a suitable interface to a mobile terminal.

Je nach Ausführungsbeispiel ist die Vorrichtung 102 als Komponente einer zentralen Datenverarbeitungseinrichtung, etwa eines Cloud-Servers, oder als mobiles Endgerät ausgeführt. Alternativ ist die Vorrichtung 102 in das Kühlgerät integriert. Die Wiedergabe der Lagerungsempfehlung 136 erfolgt hierbei beispielsweise direkt am Kühlgerät.Depending on the embodiment, the device 102 as a component of a central data processing device, such as a cloud server, or designed as a mobile terminal. Alternatively, the device 102 integrated into the cooling unit. The reproduction of the storage recommendation 136 takes place here, for example, directly on the refrigerator.

3 zeigt ein Ablaufdiagramm eines Verfahrens 300 gemäß einem Ausführungsbeispiel. Das Verfahren 300 zum Unterstützen eines Benutzers eines Kühlgeräts beim Lagern von Kühlgut kann beispielsweise von einer Vorrichtung, wie sie vorangehend anhand von 2 beschrieben ist, ausgeführt werden. Dabei wird in einem ersten Schritt 310 die von den Kameras bereitgestellte Bildinformation empfangen. In einem zweiten Schritt 320 wird die Bildinformation unter Verwendung des Bilderkennungsalgorithmus ausgewertet, um das Kühlgut zu erkennen. Schließlich wird in einem dritten Schritt 330 die Lagerungsempfehlung abhängig vom Ergebnis der Auswertung im Schritt 320 ausgegeben. 3 shows a flowchart of a method 300 according to an embodiment. The procedure 300 for supporting a user of a refrigerator when storing refrigerated goods, for example, by a device, as described above with reference to 2 is described, executed. This will be done in a first step 310 receive the image information provided by the cameras. In a second step 320 the image information is evaluated using the image recognition algorithm to detect the refrigerated goods. Finally, in a third step 330 the storage recommendation depends on the result of the evaluation in the step 320 output.

Claims (8)

Verfahren (300) zum Unterstützen eines Benutzers eines Kühlgeräts (100) beim Lagern von Kühlgut (128), wobei das Kühlgerät (100) zumindest eine Kamera (130, 132) zum Erfassen eines Kühlraums (106) des Kühlgeräts (100) aufweist, wobei das Verfahren (300) folgende Schritte umfasst: Empfangen (310) einer von der Kamera (130, 132) bereitgestellten und den Kühlraum (106) repräsentierenden Bildinformation (134); Auswerten (320) der Bildinformation (134) unter Verwendung zumindest eines Bilderkennungsalgorithmus, um zumindest ein Kühlgut (128) zu erkennen; und Ausgeben (330) einer an den Benutzer gerichteten Lagerungsempfehlung (136) abhängig von einem Ergebnis des Auswertens (320).Method (300) for supporting a user of a cooling device (100) when storing refrigerated goods (128), wherein the cooling device (100) at least one Camera (130, 132) for detecting a cooling space (106) of the cooling device (100), the method (300) comprising the steps of: receiving (310) a cooling space (106) provided by the camera (130, 132); representing image information (134); Evaluating (320) the image information (134) using at least one image recognition algorithm to detect at least one item to be cooled (128); and outputting (330) a storage recommendation (136) directed to the user depending on a result of the evaluation (320). Verfahren (300) gemäß Anspruch 1, mit einem Schritt des Verknüpfens des erkannten Kühlguts (128) mit zumindest einer vorgegebenen Lagerungsbedingung, wobei im Schritt des Ausgebens (330) die Lagerungsempfehlung (136) abhängig von einem Ergebnis des Verknüpfens ausgegeben wird.Method (300) according to Claim 1 , comprising a step of linking the detected item of refrigerated goods (128) to at least one predetermined storage condition, wherein in the outputting step (330) the storage recommendation (136) is output depending on a result of the combination. Verfahren (300) gemäß Anspruch 2, bei dem Schritt des Verknüpfens das erkannte Kühlgut (128) mit einer einen Lagerungsort und/oder eine Lagerungstemperatur und/oder eine Lagerungsfeuchtigkeit und/oder eine Lagerungsdauer repräsentierenden Lagerungsbedingung verknüpft wird.Method (300) according to Claim 2 in the step of linking the detected refrigerated goods (128) is linked to a storage condition representing a storage location and / or a storage temperature and / or a storage moisture and / or a storage period. Verfahren (300) gemäß einem der vorangegangenen Ansprüche, bei dem im Schritt des Ausgebens (330) die Lagerungsempfehlung (136) unter Verwendung einer dem Kühlgerät (100) zugeordneten Geräteinformation ausgegeben wird.Method (300) according to one of the preceding claims, wherein in the step of outputting (330) the storage recommendation (136) is output using device information associated with the cooling device (100). Verfahren (300) gemäß Anspruch 4, bei dem im Schritt des Ausgebens (330) die Lagerungsempfehlung (136) unter Verwendung einer eine Anordnung von Kühlfächern (108, 110, 112, 114, 116, 118, 120, 122, 124) im Kühlraum (106) repräsentierenden Geräteinformation ausgegeben wird.Method (300) according to Claim 4 in which, in the step of outputting (330), the storage recommendation (136) is output using device information representing an arrangement of refrigerated compartments (108, 110, 112, 114, 116, 118, 120, 122, 124) in the refrigerated space (106) , Verfahren (300) gemäß einem der vorangegangenen Ansprüche, bei dem im Schritt des Ausgebens (330) eine Lagerungsempfehlung (136) ausgegeben wird, die den Benutzer auf einen falschen und/oder richtigen Lagerungsort des erkannten Kühlguts (128) und/oder auf eine vom Benutzer mittels eines Bedienelements des Kühlgeräts (100) vorzunehmende Einstellung zumindest eines Kühlparameters hinweist.Method (300) according to one of the preceding claims, wherein in the step of outputting (330), a storage recommendation (136) is output, which directs the user to a wrong and / or correct storage location of the identified item (128) and / or one of User by means of an operating element of the refrigerator (100) to be made setting at least one cooling parameter. Vorrichtung (102) mit Einheiten (210, 220), die ausgebildet sind, um das Verfahren (300) gemäß einem der vorangegangenen Ansprüche auszuführen und/oder anzusteuern.Apparatus (102) comprising units (210, 220) adapted to execute and / or drive the method (300) according to any one of the preceding claims. Computerprogramm, das ausgebildet ist, um das Verfahren (300) gemäß einem der Ansprüche 1 bis 6 auszuführen und/oder anzusteuern.A computer program configured to perform the method (300) according to any one of Claims 1 to 6 execute and / or control.
DE102017127418.9A 2017-11-21 2017-11-21 A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods Pending DE102017127418A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102017127418.9A DE102017127418A1 (en) 2017-11-21 2017-11-21 A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102017127418.9A DE102017127418A1 (en) 2017-11-21 2017-11-21 A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods

Publications (1)

Publication Number Publication Date
DE102017127418A1 true DE102017127418A1 (en) 2019-05-23

Family

ID=66336040

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102017127418.9A Pending DE102017127418A1 (en) 2017-11-21 2017-11-21 A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods

Country Status (1)

Country Link
DE (1) DE102017127418A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111043830A (en) * 2019-12-23 2020-04-21 四川虹美智能科技有限公司 Refrigerator and method for detecting deterioration condition of food in refrigerator
CN114279137A (en) * 2021-06-29 2022-04-05 海信视像科技股份有限公司 Refrigerator and information synchronization method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015210899A1 (en) * 2015-06-15 2016-12-15 BSH Hausgeräte GmbH Method for operating a household appliance and corresponding household appliance and system with household appliance
WO2016202543A1 (en) * 2015-06-15 2016-12-22 BSH Hausgeräte GmbH Processing of data of a household appliance
EP3128274A1 (en) * 2015-08-05 2017-02-08 Whirlpool Corporation Object recognition system for an appliance and method for managing household inventory of consumables

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015210899A1 (en) * 2015-06-15 2016-12-15 BSH Hausgeräte GmbH Method for operating a household appliance and corresponding household appliance and system with household appliance
WO2016202543A1 (en) * 2015-06-15 2016-12-22 BSH Hausgeräte GmbH Processing of data of a household appliance
EP3128274A1 (en) * 2015-08-05 2017-02-08 Whirlpool Corporation Object recognition system for an appliance and method for managing household inventory of consumables

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111043830A (en) * 2019-12-23 2020-04-21 四川虹美智能科技有限公司 Refrigerator and method for detecting deterioration condition of food in refrigerator
CN114279137A (en) * 2021-06-29 2022-04-05 海信视像科技股份有限公司 Refrigerator and information synchronization method

Similar Documents

Publication Publication Date Title
JP7211700B2 (en) refrigerator, display system
DE102017127418A1 (en) A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods
US11386621B2 (en) Augmented reality feedback of inventory for an appliance
WO2017068420A3 (en) Method of managing resources in a warehouse
WO2013143559A1 (en) Storage device for articles having a load state detection device for detecting a removal, a loading and/or the load state of the storage device
JP2016196981A (en) Storage shed management system and storage shed management method
CN109416219A (en) Cold chain quality evaluation feedback manager
CN110864493B (en) Temperature adjusting method and device, refrigerator and computer readable storage medium
CN105791674A (en) Electronic device and focusing method
JP2017028658A5 (en)
DE102014222110A1 (en) Refrigeration device with a ripening chamber
CN114270124A (en) Method for viewing and tracking stored items
CN113780182A (en) Method and system for detecting food freshness
US9943090B2 (en) Hygienic oven cooking systems and methods
DE102015103690A1 (en) Method for detecting the direction of movement of an object in the region of a cooking chamber opening
DE102014222111A1 (en) Refrigeration unit with a camera module
CN111783627B (en) Commodity stock determining method, device and equipment
DE102012201089A1 (en) REFRIGERATOR WITH A REFRIGERATOR
JP2017098640A5 (en)
DE102011115146A1 (en) Cooling and freezing appliance for use in system, has display device, which stays in direct or indirect communication with detection unit, where portion of refrigerated interior is highlighted for storage of cooling or freezing goods
JP2019070475A (en) refrigerator
DE102018221639A1 (en) Process for improving object recognition through machine learning
JP7113281B2 (en) refrigerator
CN109784131B (en) Object detection method, device, storage medium and processor
DE102016116367A1 (en) Method for object detection

Legal Events

Date Code Title Description
R163 Identified publications notified
R084 Declaration of willingness to licence