DE102017127418A1 - A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods - Google Patents
A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods Download PDFInfo
- Publication number
- DE102017127418A1 DE102017127418A1 DE102017127418.9A DE102017127418A DE102017127418A1 DE 102017127418 A1 DE102017127418 A1 DE 102017127418A1 DE 102017127418 A DE102017127418 A DE 102017127418A DE 102017127418 A1 DE102017127418 A1 DE 102017127418A1
- Authority
- DE
- Germany
- Prior art keywords
- storage
- user
- refrigerator
- recommendation
- refrigerated goods
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D29/00—Arrangement or mounting of control or safety devices
Landscapes
- Engineering & Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- Thermal Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Devices That Are Associated With Refrigeration Equipment (AREA)
- Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
Abstract
Die Erfindung betrifft ein Verfahren zum Unterstützen eines Benutzers eines Kühlgeräts (100) beim Lagern von Kühlgut (128), wobei das Kühlgerät (100) zumindest eine Kamera (130, 132) zum Erfassen eines Kühlraums (106) des Kühlgeräts (100) aufweist. In dem Verfahren wird eine von der Kamera (130, 132) bereitgestellte und den Kühlraum (106) repräsentierende Bildinformation (134) empfangen. Diese wird unter Verwendung zumindest eines Bilderkennungsalgorithmus ausgewertet, um zumindest ein Kühlgut (128) zu erkennen. Schließlich wird abhängig von einem Ergebnis des Auswertens eine an den Benutzer gerichtete Lagerungsempfehlung (136) ausgegeben. The invention relates to a method for supporting a user of a cooling device (100) when storing refrigerated goods (128), wherein the cooling device (100) has at least one camera (130, 132) for detecting a cooling space (106) of the cooling device (100). In the method, image information (134) provided by the camera (130, 132) and representing the cold room (106) is received. This is evaluated using at least one image recognition algorithm in order to recognize at least one item to be cooled (128). Finally, depending on a result of the evaluation, a storage recommendation (136) directed to the user is output.
Description
Die Erfindung betrifft ein Verfahren und eine Vorrichtung zum Unterstützen eines Benutzers eines Kühlgeräts beim Lagern von Kühlgut.The invention relates to a method and a device for supporting a user of a cooling device when storing refrigerated goods.
Es sind Kühlschränke mit Kameras zum Erfassen eines Kühlschrankinhalts bekannt. Die Bilder des erfassten Kühlschrankinhalts können beispielsweise über eine App auf einem Smartphone angezeigt werden. Ferner sind Apps bekannt, die einem Benutzer Hinweise darauf geben, welche Produkte wo am besten im Kühlschrank positioniert werden.There are known refrigerators with cameras for detecting a refrigerator contents. The images of the detected refrigerator content can be displayed via an app on a smartphone, for example. Furthermore, apps are known that give a user hints as to which products are best positioned in the refrigerator.
Vor diesem Hintergrund stellt sich die vorliegende Erfindung die Aufgabe, ein verbessertes Verfahren und eine verbesserte Vorrichtung zum Unterstützen eines Benutzers eines Kühlgeräts beim Lagern von Kühlgut zu schaffen.Against this background, the present invention has the object to provide an improved method and an improved device for supporting a user of a refrigerator when storing refrigerated goods.
Erfindungsgemäß wird diese Aufgabe durch ein Verfahren, eine Vorrichtung und ein Computerprogramm mit den Merkmalen der Hauptansprüche gelöst. Vorteilhafte Ausgestaltungen und Weiterbildungen der Erfindung ergeben sich aus den nachfolgenden Unteransprüchen.According to the invention, this object is achieved by a method, a device and a computer program having the features of the main claims. Advantageous embodiments and further developments of the invention will become apparent from the following subclaims.
Die Erfindung bietet den Vorteil, dass durch eine tatsächliche Erkennung von Lebensmitteln im Kühlschrank über einen geeigneten Bilderkennungsalgorithmus eine besonders zuverlässige Lagerungsempfehlung erzeugt werden kann. Vorteilhafterweise kann eine solche Lagerungsempfehlung beispielsweise in einer App dargestellt werden. Dadurch kann zum einen vermieden werden, dass Lebensmittel fälschlicherweise im Kühlschrank gelagert werden und schon nach kurzer Zeit verderben, wie beispielsweise Zitronen, Bananen, Kartoffeln oder Zwiebeln. Zum anderen kann dadurch eine optimale Nutzung der verschiedenen Kühlzonen des Kühlschranks gewährleistet werden, sodass die Lebensmittel längstmöglich halten und weniger Lebensmittel weggeworfen werden.The invention offers the advantage that a particularly reliable storage recommendation can be generated by an actual recognition of foods in the refrigerator via a suitable image recognition algorithm. Advantageously, such a storage recommendation can be displayed for example in an app. This can be avoided on the one hand that food is stored incorrectly in the refrigerator and spoil after a short time, such as lemons, bananas, potatoes or onions. On the other hand, this can ensure optimal use of the refrigerator's various cooling zones so that the food will last as long as possible and less food will be thrown away.
Es wird ein Verfahren zum Unterstützen eines Benutzers eines Kühlgeräts beim Lagern von Kühlgut vorgestellt, wobei das Kühlgerät zumindest eine Kamera zum Erfassen eines Kühlraums des Kühlgeräts aufweist, wobei das Verfahren folgende Schritte umfasst:
- Empfangen einer von der Kamera bereitgestellten und den Kühlraum repräsentierenden Bildinformation;
- Auswerten der Bildinformation unter Verwendung zumindest eines Bilderkennungsalgorithmus, um zumindest ein Kühlgut zu erkennen; und
- Ausgeben einer an den Benutzer gerichteten Lagerungsempfehlung abhängig von einem Ergebnis des Auswertens.
- Receiving image information provided by the camera and representing the cold room;
- Evaluating the image information using at least one image recognition algorithm to detect at least one item to be refrigerated; and
- Issue a storage recommendation directed to the user depending on a result of the evaluation.
Unter einem Kühlgerät kann beispielsweise ein Kühlschrank, ein Gefrierschrank oder eine Kühlgefrierkombination verstanden werden. Unter einem Kühlgut kann beispielsweise ein Lebensmittel verstanden werden. Unter einem Kühlraum kann ein gekühlter Innenraum des Kühlgeräts verstanden werden. Die Kamera kann beispielsweise an einem Korpus oder einer Tür des Kühlgeräts angeordnet sein. Unter einer Lagerungsempfehlung kann eine Information verstanden werden, die den Benutzer auf eine richtige oder falsche Lagerung des erkannten Kühlguts hinweist. Die Lagerungsempfehlung kann beispielsweise auf einem mobilen Endgerät anzeigbar sein.Under a refrigerator, for example, a refrigerator, a freezer or a Kühlgefrierkombination be understood. Under a refrigerated goods, for example, a food can be understood. A refrigerated space can be understood as meaning a cooled interior of the refrigerating appliance. The camera can be arranged for example on a body or a door of the refrigerator. A storage recommendation can be understood to mean information that informs the user about correct or incorrect storage of the identified item to be cooled. The storage recommendation can be displayed, for example, on a mobile device.
Gemäß einer Ausführungsform umfasst das Verfahren einen Schritt des Verknüpfens des erkannten Kühlguts mit zumindest einer vorgegebenen Lagerungsbedingung. Im Schritt des Ausgebens kann die Lagerungsempfehlung abhängig von einem Ergebnis des Verknüpfens ausgegeben werden. Unter einer Lagerungsbedingung kann beispielsweise ein Satz von Parametern bezüglich der Lagerung eines bestimmten Kühlguts verstanden werden. Die Lagerungsbedingung kann beispielsweise durch eine Datenbank, etwa eine Cloud, bereitgestellt sein. Dadurch kann je nach erkanntem Kühlgut eine optimale Lagerung des Kühlguts gewährleistet werden.According to one embodiment, the method comprises a step of linking the identified item to be cooled with at least one predetermined storage condition. In the step of issuing, the storage recommendation may be issued depending on a result of the association. For example, a storage condition may be understood to mean a set of parameters related to the storage of a particular item of refrigeration. The storage condition may be provided, for example, by a database, such as a cloud. As a result, depending on the recognized refrigerated goods optimal storage of the refrigerated goods can be ensured.
Gemäß einer weiteren Ausführungsform kann im Schritt des Verknüpfens das erkannte Kühlgut mit einer einen Lagerungsort und/oder eine Lagerungstemperatur und/oder eine Lagerungsfeuchtigkeit und/oder eine Lagerungsdauer repräsentierenden Lagerungsbedingung verknüpft werden. Dadurch kann die Genauigkeit der Lagerungsempfehlung erhöht werden.According to a further embodiment, in the step of linking, the recognized refrigerated goods can be linked to a storage condition representing a storage location and / or a storage temperature and / or a storage moisture and / or a storage period. As a result, the accuracy of the storage recommendation can be increased.
Es ist ferner von Vorteil, wenn im Schritt des Ausgebens die Lagerungsempfehlung unter Verwendung einer dem Kühlgerät zugeordneten Geräteinformation ausgegeben wird. Unter einer Geräteinformation kann beispielsweise eine Information über einen Gerätetyp des Kühlgeräts oder eine sonstige gerätespezifische Information verstanden werden. Dadurch kann die Lagerungsempfehlung abhängig vom verwendeten Kühlgerät ausgegeben werden.It is also advantageous if in the step of outputting the storage recommendation is output using a device information associated with the cooling device. Under a device information, for example, information about a device type of the refrigerator or other device-specific information can be understood. As a result, the storage recommendation can be issued depending on the cooling unit used.
Beispielsweise kann im Schritt des Ausgebens die Lagerungsempfehlung unter Verwendung einer eine Anordnung von Kühlfächern im Kühlraum repräsentierenden Geräteinformation ausgegeben werden. Unter einem Kühlfach kann beispielsweise eine Schublade, ein Einlegeboden oder ein Türfach verstanden werden. Dadurch kann die Lagerungsempfehlung auf die Anzahl, Art, Größe oder Lage der Kühlfächer abgestimmt werden.For example, in the step of outputting, the storage recommendation may be output using device information representing an arrangement of refrigerators in the refrigerator compartment. Under a refrigerator compartment, for example, a drawer, a shelf or a Door compartment can be understood. This allows the storage recommendation to be matched to the number, type, size or location of the refrigerators.
Gemäß einer weiteren Ausführungsform kann im Schritt des Ausgebens eine Lagerungsempfehlung ausgegeben werden, die den Benutzer auf einen falschen und/oder richtigen Lagerungsort des erkannten Kühlguts und/oder auf eine vom Benutzer mittels eines Bedienelements des Kühlgeräts vorzunehmende Einstellung zumindest eines Kühlparameters hinweist. Unter einem Lagerungsort kann ein Ort innerhalb oder außerhalb des Kühlgeräts verstanden werden. Unter einem Bedienelement kann beispielsweise ein Schalter oder Schieber verstanden werden. Unter einem Kühlparameter kann beispielsweise eine Temperatur oder Feuchtigkeit im Kühlraum verstanden werden. Durch diese Ausführungsform kann die Effizienz des Verfahrens weiter gesteigert werden.According to a further embodiment, in the step of outputting, a storage recommendation can be issued, which points the user to a wrong and / or correct storage location of the identified goods to be cooled and / or to an adjustment of at least one cooling parameter to be made by the user by means of an operating element of the refrigerator. A storage location can be understood to mean a location inside or outside the refrigerator. Under a control, for example, a switch or slider can be understood. By a cooling parameter can be understood, for example, a temperature or humidity in the cold room. By this embodiment, the efficiency of the method can be further increased.
Der hier vorgestellte Ansatz schafft ferner eine Vorrichtung, die ausgebildet ist, um die Schritte einer Variante eines hier vorgestellten Verfahrens in entsprechenden Einrichtungen durchzuführen, anzusteuern bzw. umzusetzen. Auch durch diese Ausführungsvariante der Erfindung in Form einer Vorrichtung kann die der Erfindung zugrunde liegende Aufgabe schnell und effizient gelöst werden.The approach presented here also creates a device that is designed to perform the steps of a variant of a method presented here in appropriate facilities to drive or implement. Also by this embodiment of the invention in the form of a device, the object underlying the invention can be solved quickly and efficiently.
Unter einer Vorrichtung kann vorliegend ein elektrisches Gerät verstanden werden, das Sensorsignale verarbeitet und in Abhängigkeit davon Steuer- und/oder Datensignale ausgibt. Die Vorrichtung kann eine Schnittstelle aufweisen, die hard- und/oder softwaremäßig ausgebildet sein kann. Bei einer hardwaremäßigen Ausbildung können die Schnittstellen beispielsweise Teil eines sogenannten System-ASICs sein, der verschiedenste Funktionen der Vorrichtung beinhaltet. Es ist jedoch auch möglich, dass die Schnittstellen eigene, integrierte Schaltkreise sind oder zumindest teilweise aus diskreten Bauelementen bestehen. Bei einer softwaremäßigen Ausbildung können die Schnittstellen Softwaremodule sein, die beispielsweise auf einem Mikrocontroller neben anderen Softwaremodulen vorhanden sind.In the present case, a device can be understood as meaning an electrical device which processes sensor signals and outputs control and / or data signals in dependence thereon. The device may have an interface, which may be formed in hardware and / or software. In the case of a hardware-based embodiment, the interfaces can be part of a so-called system ASIC, for example, which contains a wide variety of functions of the device. However, it is also possible that the interfaces are their own integrated circuits or at least partially consist of discrete components. In a software training, the interfaces may be software modules that are present, for example, on a microcontroller in addition to other software modules.
Bei der Vorrichtung kann es sich beispielsweise auch um ein mobiles Endgerät wie etwa ein Smartphone oder Tablet handeln.The device may also be, for example, a mobile terminal such as a smartphone or tablet.
Von Vorteil ist auch ein Computerprogrammprodukt oder Computerprogramm mit Programmcode, der auf einem maschinenlesbaren Träger oder Speichermedium wie einem Halbleiterspeicher, einem Festplattenspeicher oder einem optischen Speicher gespeichert sein kann und zur Durchführung, Umsetzung und/oder Ansteuerung der Schritte des Verfahrens nach einer der vorstehenden Ausführungsformen verwendet wird, insbesondere wenn das Programmprodukt oder Programm auf einem Computer oder einer Vorrichtung ausgeführt wird. Bei dem Computerprogramm kann es sich beispielsweise um eine App handeln.Also of advantage is a computer program product or computer program with program code which can be stored on a machine-readable carrier or storage medium such as a semiconductor memory, a hard disk memory or an optical memory and used for carrying out, implementing and / or controlling the steps of the method according to one of the preceding embodiments especially if the program product or program is running on a computer or device. The computer program may be, for example, an app.
Ein Ausführungsbeispiel der Erfindung ist in den Zeichnungen rein schematisch dargestellt und wird nachfolgend näher beschrieben. Es zeigt
-
1 eine schematische Darstellung eines Kühlgeräts und einer Vorrichtung gemäß einem Ausführungsbeispiel; -
2 eine schematische Darstellung einer Vorrichtung gemäß einem Ausführungsbeispiel; und -
3 ein Ablaufdiagramm eines Verfahrens gemäß einem Ausführungsbeispiel.
-
1 a schematic representation of a cooling device and a device according to an embodiment; -
2 a schematic representation of a device according to an embodiment; and -
3 a flowchart of a method according to an embodiment.
Zum Erfassen des Kühlraums
Gemäß einem Ausführungsbeispiel ist die Vorrichtung
Mithilfe der Vorrichtung
Der Bilderkennungsalgorithmus ist gemäß einem alternativen Ausführungsbeispiel in einer Cloud ausführbar.The image recognition algorithm is executable in a cloud according to an alternative embodiment.
Zur Erkennung des Kühlguts
Beispielsweise sind die Kameras
Gemäß einem Ausführungsbeispiel erfolgt die Auswertung der Bildinformation
Beispiele für Lagerungsempfehlungen sind etwa „Zwiebeln gehören nicht in den Kühlschrank. Sie sollten kühl und trocken gelagert werden - z. B. im Keller“ oder „Bitte legen Sie Milch nicht ganz oben in den Kühlschrank, dort ist es am wärmsten“. Entsprechend dem in
Um die kühlschrankspezifischen Unterschiede der Lagerungsmöglichkeiten mit zu verarbeiten, gibt der Benutzer beispielsweise in der App an, welchen Kühlschrank er besitzt. Mithilfe dieser Geräteinformation erfolgt die Auswertung der Bildinformation
Je nach Ausführungsbeispiel ist die Vorrichtung
Claims (8)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017127418.9A DE102017127418A1 (en) | 2017-11-21 | 2017-11-21 | A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017127418.9A DE102017127418A1 (en) | 2017-11-21 | 2017-11-21 | A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102017127418A1 true DE102017127418A1 (en) | 2019-05-23 |
Family
ID=66336040
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102017127418.9A Pending DE102017127418A1 (en) | 2017-11-21 | 2017-11-21 | A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102017127418A1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111043830A (en) * | 2019-12-23 | 2020-04-21 | 四川虹美智能科技有限公司 | Refrigerator and method for detecting deterioration condition of food in refrigerator |
CN114279137A (en) * | 2021-06-29 | 2022-04-05 | 海信视像科技股份有限公司 | Refrigerator and information synchronization method |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102015210899A1 (en) * | 2015-06-15 | 2016-12-15 | BSH Hausgeräte GmbH | Method for operating a household appliance and corresponding household appliance and system with household appliance |
WO2016202543A1 (en) * | 2015-06-15 | 2016-12-22 | BSH Hausgeräte GmbH | Processing of data of a household appliance |
EP3128274A1 (en) * | 2015-08-05 | 2017-02-08 | Whirlpool Corporation | Object recognition system for an appliance and method for managing household inventory of consumables |
-
2017
- 2017-11-21 DE DE102017127418.9A patent/DE102017127418A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102015210899A1 (en) * | 2015-06-15 | 2016-12-15 | BSH Hausgeräte GmbH | Method for operating a household appliance and corresponding household appliance and system with household appliance |
WO2016202543A1 (en) * | 2015-06-15 | 2016-12-22 | BSH Hausgeräte GmbH | Processing of data of a household appliance |
EP3128274A1 (en) * | 2015-08-05 | 2017-02-08 | Whirlpool Corporation | Object recognition system for an appliance and method for managing household inventory of consumables |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111043830A (en) * | 2019-12-23 | 2020-04-21 | 四川虹美智能科技有限公司 | Refrigerator and method for detecting deterioration condition of food in refrigerator |
CN114279137A (en) * | 2021-06-29 | 2022-04-05 | 海信视像科技股份有限公司 | Refrigerator and information synchronization method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7211700B2 (en) | refrigerator, display system | |
DE102017127418A1 (en) | A method and apparatus for assisting a user of a refrigerator in storing refrigerated goods | |
US11386621B2 (en) | Augmented reality feedback of inventory for an appliance | |
WO2017068420A3 (en) | Method of managing resources in a warehouse | |
WO2013143559A1 (en) | Storage device for articles having a load state detection device for detecting a removal, a loading and/or the load state of the storage device | |
JP2016196981A (en) | Storage shed management system and storage shed management method | |
CN109416219A (en) | Cold chain quality evaluation feedback manager | |
CN110864493B (en) | Temperature adjusting method and device, refrigerator and computer readable storage medium | |
CN105791674A (en) | Electronic device and focusing method | |
JP2017028658A5 (en) | ||
DE102014222110A1 (en) | Refrigeration device with a ripening chamber | |
CN114270124A (en) | Method for viewing and tracking stored items | |
CN113780182A (en) | Method and system for detecting food freshness | |
US9943090B2 (en) | Hygienic oven cooking systems and methods | |
DE102015103690A1 (en) | Method for detecting the direction of movement of an object in the region of a cooking chamber opening | |
DE102014222111A1 (en) | Refrigeration unit with a camera module | |
CN111783627B (en) | Commodity stock determining method, device and equipment | |
DE102012201089A1 (en) | REFRIGERATOR WITH A REFRIGERATOR | |
JP2017098640A5 (en) | ||
DE102011115146A1 (en) | Cooling and freezing appliance for use in system, has display device, which stays in direct or indirect communication with detection unit, where portion of refrigerated interior is highlighted for storage of cooling or freezing goods | |
JP2019070475A (en) | refrigerator | |
DE102018221639A1 (en) | Process for improving object recognition through machine learning | |
JP7113281B2 (en) | refrigerator | |
CN109784131B (en) | Object detection method, device, storage medium and processor | |
DE102016116367A1 (en) | Method for object detection |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R163 | Identified publications notified | ||
R084 | Declaration of willingness to licence |