DE102019110795A1

DE102019110795A1 - Dishwasher with an image acquisition device and method for operating such a dishwasher

Info

Publication number: DE102019110795A1
Application number: DE102019110795.4A
Authority: DE
Inventors: Alexander Adam; Martin Kornberger; Holger Ernst; Eckard Riedenklau; Seyfettin Kara
Original assignee: Miele und Cie KG
Current assignee: Miele und Cie KG
Priority date: 2019-04-26
Filing date: 2019-04-26
Publication date: 2020-10-29

Abstract

Die Erfindung betrifft ein Verfahren zum Betreiben einer Geschirrspülmaschine zur Reinigung von Spülgut (10) in einem Spülraum (3), wobei die Geschirrspülmaschine eine Bilderfassungseinrichtung zur Aufnahme von Bildern des Spülraums (3) aufweist. Das Verfahren umfasst die folgenden Schritte:- Aufnehmen eines Bildes des Spülraums (3);- Ermitteln eines einen Beladungszustand des Spülraums (3) widerspiegelnden Wertes anhand einer Bildanalyse des aufgenommenen Bildes; und- Übertragen einer Datennachricht an ein Mobilgerät abhängig von dem ermittelten Wert.Die Erfindung betrifft weiterhin eine zur Durchführung des Verfahrens eingerichtete Geschirrspülmaschine.The invention relates to a method for operating a dishwasher for cleaning items to be washed (10) in a washing area (3), the dishwasher having an image acquisition device for recording images of the washing area (3). The method comprises the following steps: taking an image of the washing area (3); determining a value reflecting a load condition of the washing area (3) on the basis of an image analysis of the recorded image; and transmitting a data message to a mobile device as a function of the determined value. The invention further relates to a dishwasher designed to carry out the method.

Description

Die Erfindung betrifft ein Verfahren zum Betreiben einer Geschirrspülmaschine, insbesondere einer Haushalts-Geschirrspülmaschine, wobei die Geschirrspülmaschine der Reinigung von Spülgut in einem Spülraum dient und eine Bilderfassungseinrichtung zur Aufnahme von Bildern des Spülraums aufweist. Die Erfindung betrifft weiterhin eine derartige Geschirrspülmaschine.The invention relates to a method for operating a dishwasher, in particular a domestic dishwasher, wherein the dishwasher is used to clean items to be washed in a washing area and has an image acquisition device for recording images of the washing area. The invention also relates to such a dishwasher.

Geschirrspülmaschinen mit Bilderfassungseinrichtungen, beispielsweise einer Kamera, die Bilder aus dem Spülraum liefert, sind beispielsweise aus den Druckschriften DE 100 48 081 A1 oder EP 1 793 723 B1 bekannt.Dishwashers with image acquisition devices, for example a camera that delivers images from the washing area, are for example from the publications DE 100 48 081 A1 or EP 1 793 723 B1 known.

Gemäß der Druckschrift DE 100 48 081 A1 wird ein vor oder während eines laufenden Reinigungsprogramms erstelltes Kamerabild ausgewertet, um einen Verschmutzungsgrad des Spülguts festzustellen. Abhängig von dem Verschmutzungsgrad kann rechnergesteuert ein auf den Verschmutzungsgrad optimiertes Spülprogramm eingestellt werden, bzw. ein eingestelltes Spülprogramm im Hinblick auf den Verschmutzungsgrad optimiert werden. Neben der Bestimmung des Verschmutzungsgrads ist auch eine Erkennung des Beladungszustands anhand der aufgenommenen Bilder möglich und wird bei der Einstellung bzw. Optimierung des Spülprogramms berücksichtigt. Eine Auswertung der Bilder erfolgt durch einen Vergleich mit hinterlegten Bildern.According to the publication DE 100 48 081 A1 a camera image created before or during a running cleaning program is evaluated in order to determine the degree of soiling of the items to be washed. Depending on the degree of soiling, a washing program optimized for the degree of soiling can be set under computer control, or a set washing program can be optimized with regard to the degree of soiling. In addition to determining the degree of soiling, it is also possible to recognize the load status on the basis of the recorded images and this is taken into account when setting or optimizing the washing program. The images are evaluated by comparing them with stored images.

Aus der Druckschrift EP 1 793 723 B1 ist ebenfalls ein Verfahren zum Erkennen einer Beladung einer Geschirrspülmaschine bekannt. Zur Bilderfassung wird eine Kamera mit Laufzeiterkennung des abbildenden Lichts verwendet, sodass zur Auswertung ein dreidimensionales Bild zur Verfügung steht. In einer Ausgestaltung des Verfahrens ist vorgesehen, in regelmäßigen Abständen den Beladungszustand der Geschirrspülmaschine zu ermitteln und bei Feststellung einer vorgegebenen Beladung ein Spülprogramm der Geschirrspülmaschine automatisch zu starten. Auf die Weise wird wirksam verhindert, dass eine Geschirrspülmaschine obwohl vollgeladen nicht gestartet wird, weil der Bediener die Vollbeladung der Geschirrspülmaschine übersehen hat oder schlichtweg vergessen hat, sie zu starten. Nachteilig ist jedoch, dass dabei bewusste Entscheidungen, das Spülprogramm erst später zu starten nicht zum Tragen kommen.From the pamphlet EP 1 793 723 B1 a method for detecting a load in a dishwasher is also known. A camera with transit time detection of the imaging light is used for image acquisition, so that a three-dimensional image is available for evaluation. In one embodiment of the method, provision is made for the load status of the dishwasher to be determined at regular intervals and for a washing program of the dishwasher to be started automatically when a predetermined load is determined. In this way, it is effectively prevented that a dishwasher is not started although it is fully loaded because the operator overlooked the dishwasher when it was fully loaded or simply forgot to start it. However, it is disadvantageous that conscious decisions to start the washing program later do not come into play.

Es ist daher eine Aufgabe der vorliegenden Erfindung, eine Geschirrspülmaschine und ein Verfahren zum Betreiben einer Geschirrspülmaschine zu schaffen, bei denen verhindert wird, dass eine Geschirrspülmaschine unnötig lange in einem vollbeladenen Zustand verbleibt, ohne das ein Spülprogramm gestartet wird, und bei denen dennoch ein Spülprogramm nicht ungewollt automatisch startet.It is therefore an object of the present invention to provide a dishwasher and a method for operating a dishwasher in which a dishwasher is prevented from remaining unnecessarily long in a fully loaded state without a washing program being started, and in which a washing program is nonetheless does not start automatically inadvertently.

Diese Aufgabe wird gelöst durch ein Betriebsverfahren für eine Geschirrspülmaschine bzw. eine Geschirrspülmaschine mit den Merkmalen des jeweiligen unabhängigen Anspruchs.This object is achieved by an operating method for a dishwasher or a dishwasher with the features of the respective independent claim.

Bei einem erfindungsgemäßen Betriebsverfahren der eingangs genannten Art wird ein Bild des Spülraums aufgenommen und ein einen Beladungszustand des Spülraums widerspiegelnder Wert anhand einer Bildanalyse des aufgenommenen Bildes ermittelt. Es wird dann eine Datennachricht abhängig von dem ermittelten Wert an ein Mobilgerät übertragen.In an operating method according to the invention of the type mentioned at the outset, an image of the washing area is recorded and a value reflecting a loading state of the washing area is determined on the basis of an image analysis of the recorded image. A data message is then transmitted to a mobile device depending on the determined value.

Beispielsweise kann vorgesehen sein, die Datennachricht an das Mobilgerät zu senden, wenn ein vorgegebener Wert für den Beladungszustand erreicht oder überschritten wird. Ein Spülprogramm kann dann gestartet werden, wenn vom Mobilgerät eine entsprechende Bestätigung zurück an eine Steuereinrichtung der Geschirrspülmaschine gesendet wird.For example, it can be provided that the data message is sent to the mobile device when a predefined value for the load status is reached or exceeded. A washing program can be started when the mobile device sends a corresponding confirmation back to a control device of the dishwasher.

Durch die Rückfrage beim Benutzer vor einem automatischen Start der Geschirrspülmaschine wird ein ungewolltes Starten des Spülprogramms verhindert. Dennoch verbleibt ein entsprechender Beladungszustand der Geschirrspülmaschine, bei dem ein Start des Spülprogramms erfolgen sollte, nicht unbemerkt, da der Benutzer über das Mobilgerät entsprechend informiert wird. Der Einsatz eines Mobilgeräts anstelle einer unmittelbar an der Geschirrspülmaschine ausgegebenen Nachricht stellt dabei sicher, dass die Nachricht empfangen wird, sodass der Benutzer darauf reagieren kann, auch wenn er sich nicht mehr in unmittelbarer Nähe der Geschirrspülmaschine befindet.By asking the user before the dishwasher starts automatically, an unintentional start of the washing program is prevented. Nevertheless, a corresponding loading state of the dishwasher, in which the washing program should be started, does not go unnoticed, since the user is informed accordingly via the mobile device. The use of a mobile device instead of a message output directly on the dishwasher ensures that the message is received so that the user can react to it, even if he is no longer in the immediate vicinity of the dishwasher.

In einer vorteilhaften Ausgestaltung des Verfahrens sind der ermittelte Wert und der vorgegebene Wert prozentuale Angaben zum Beladungszustand. Der vorgegebene Wert, bei dessen Überschreitung die Nachricht gesendet wird, liegt bevorzugt im Bereich von 80 % bis 100 % und insbesondere im Bereich von 90 % bis 100 %, wobei 100 % eine maximale Beladung kennzeichnen.In an advantageous embodiment of the method, the determined value and the specified value are percentage information on the loading condition. The predefined value, beyond which the message is sent, is preferably in the range from 80% to 100% and in particular in the range from 90% to 100%, with 100% indicating a maximum load.

In einer weiteren vorteilhaften Ausgestaltung des Verfahrens werden die Schritte des Aufnehmens des Bildes des Spülraums und des Ermittelns des Beladungszustands mehrfach ausgeführt, wobei die Datennachricht übertragen wird, wenn der ermittelte Wert sich über einen vorgegebenen Zeitraum nicht oder nur unwesentlich ändert. Der vorgegebene Zeitraum liegt bevorzugt im Bereich von 12 Stunden bis 60 Stunden und insbesondere im Bereich von 24 Stunden bis 48 Stunden. Bei dieser Ausgestaltung des Verfahrens wird der Nutzer benachrichtigt, wenn sich Spülgut über einen langen und ggf. hygienisch bedenklichen Zeitraum in der Geschirrspülmaschine befindet, ohne dass diese gestartet wurde.In a further advantageous embodiment of the method, the steps of taking the picture of the washing area and determining the load status are carried out several times, the data message being transmitted if the determined value does not change or changes only insignificantly over a predetermined period of time. The predetermined period of time is preferably in the range from 12 hours to 60 hours and in particular in the range from 24 hours to 48 hours. With this configuration of the method, the user is notified if items to be washed have been in the dishwasher for a long and possibly hygienically questionable period without the dishwasher having been started.

In einer weiteren vorteilhaften Ausgestaltung des Verfahrens umfasst die Bildanalyse eine Kantendetektion und/oder es wird ein neuronales Netz eingesetzt. Das neuronale Netz kann bevorzugt selbstlernend sein, um z.B. das Verfahren an verwendetes Spülgut anzupassen. Als Teil der Datennachricht kann neben dem Beladungszustand auch das zugrundeliegende aufgenommene Bild oder zumindest ein Ausschnitt daraus ebenfalls an das Mobilgerät übertragen werden. Die Übertragung der Datennachricht, einschließlich ggf. des Bildes und/oder der Steueranweisung erfolgt bevorzugt über ein Netzwerk, zu dem die Steuereinrichtung der Geschirrspülmaschine und das Mobilgerät Zugang haben.In a further advantageous embodiment of the method, the image analysis includes edge detection and / or a neural network is used. The neural network can preferably be self-learning, e.g. adapt the process to the items to be washed. As part of the data message, in addition to the load status, the underlying recorded image or at least a section thereof can also be transmitted to the mobile device. The transmission of the data message, including possibly the image and / or the control instruction, takes place preferably via a network to which the control device of the dishwasher and the mobile device have access.

Eine erfindungsgemäße Geschirrspülmaschine ist zur Durchführung eines derartigen Verfahrens eingerichtet. Es ergeben sich die im Zusammenhang mit dem Verfahren genannten Vorteile.A dishwasher according to the invention is set up to carry out such a method. The advantages mentioned in connection with the method result.

Die Erfindung wird nachfolgend anhand von Ausführungsbeispielen mithilfe von Figuren näher erläutert. Die Figuren zeigen:

1 eine schematische Darstellung einer Geschirrspülmaschine mit Bilderfassungseinrichtung zur Durchführung eines erfindungsgemäßen Verfahrens;
2 ein Ablaufplan eines ersten Ausführungsbeispiels eines erfindungsgemäßen Verfahrens;
3a bis c verschiedene, beispielhaft illustrierte Beladungszustände von Geschirrspülmaschinen;
4 eine beispielhafte Darstellung eines in das Verfahren gemäß 2 eingebundenen Mobilgeräts; und
5 ein Ablaufplan eines weiteren Ausführungsbeispiels eines erfindungsgemäßen Verfahrens.
1 zeigt schematisch eine Geschirrspülmaschine in einem vertikal ausgeführten Schnittbild.

The invention is explained in more detail below on the basis of exemplary embodiments with the aid of figures. The figures show:

1 a schematic representation of a dishwasher with image acquisition device for performing a method according to the invention;
2 a flow chart of a first embodiment of a method according to the invention;
3a to c various loading states of dishwashers, illustrated by way of example;
4th an exemplary representation of a in the method according to 2 connected mobile device; and
5 a flow chart of a further embodiment of a method according to the invention.
1 shows schematically a dishwasher in a vertical sectional view.

Die Geschirrspülmaschine, bei der es sich um ein Haushaltsgerät ebenso wie eine Maschine für den professionellen Gebrauch handeln kann, weist einen Korpus 1 mit einer Tür 2 auf, die einen Spülraum 3 umgeben. Innerhalb des Spülraums 3 sind in der Regel mehrere, hier beispielhaft zwei Spülgutkörbe 4 übereinander angeordnet. Darüber hinaus ist ein in der 1 nicht näher bezeichneter Besteckträger vorhanden. In den Spülgutkörben 4 ist beispielhaft verschiedenes Spülgut 10 einsortiert. In alternativen Ausgestaltungen der Geschirrspülmaschine kann anstelle oder zusätzlich zum Besteckträger ein Besteckkorb in einem der Spülgutkörbe 4 vorhanden sein.The dishwasher, which can be a household appliance as well as a machine for professional use, has a body 1 with a door 2 on that a wash cabinet 3 surround. Inside the wash cabinet 3 are usually several, here as an example two wash baskets 4th arranged one above the other. In addition, there is one in the 1 unspecified cutlery carrier available. In the wash baskets 4th is an example of different items to be washed 10 sorted. In alternative configurations of the dishwasher, a cutlery basket can be placed in one of the washware baskets instead of or in addition to the cutlery holder 4th to be available.

Den Spülgutkörben 4 ist jeweils ein Sprüharm 5 zugeordnet, der im Spülbetrieb rotiert und Spülflüssigkeit auf das Spülgut 10 sprüht. In einem unteren Bereich (Sockelbereich) der Geschirrspülmaschine sammelt sich die Spülflüssigkeit in einem Spülsumpf, auch Spülflottentopf genannt, in dem sie aufgeheizt werden kann und zu den Sprüharmen 5 gepumpt werden kann. Der Spülsumpf und Komponenten zum Umwälzen der Spülflüssigkeit sind in der schematischen Zeichnung der 1 nicht wiedergegeben.The wash baskets 4th each is a spray arm 5 assigned, which rotates in the washing mode and washing liquid on the items to be washed 10 sprays. In a lower area (base area) of the dishwasher, the washing liquid collects in a washing sump, also called washing liquor pot, in which it can be heated up and to the spray arms 5 can be pumped. The flushing sump and components for circulating the flushing liquid are shown in the schematic drawing of FIG 1 not reproduced.

Eine Steuereinrichtung 6 zur Steuerung der Geschirrspülmaschine ist in der Tür 2 der Geschirrspülmaschine angeordnet. Die Steuereinrichtung 6 ist als eine Ablaufsteuerung basierend auf einem Mikrokontroller bzw. - prozessor ausgebildet. In der Tür 2 ist weiter eine Dosiereinheit 7 angeordnet, mit der benötigte Reinigungsmittel während eines Spülvorgangs automatisch in den Spülraum 3 eindosiert werden können.A control device 6 to control the dishwasher is in the door 2 the dishwasher arranged. The control device 6 is designed as a sequence control based on a microcontroller or processor. In the door 2 is also a dosing unit 7th arranged, with the required detergent automatically in the wash cabinet during a wash process 3 can be dosed.

Beim dargestellten Ausführungsbeispiel ist in die Dosiereinheit 7 eine Kamera 8 als Bilderfassungseinrichtung integriert, die in den Spülraum 3 gerichtet ist, um ein Bild von dem Spülraum 3 aufzunehmen. Weiter ist im Spülraum 3 eine Lichtquelle 9 angeordnet, die bedarfsweise zugeschaltet werden kann, wenn von der Kamera 8 ein Bild des Spülraums 3 aufgenommen wird. Alternativ oder zusätzlich kann auch im Bereich der Kamera 8 selbst eine Lichtquelle angeordnet sein, die beispielsweise ringförmig um ein Objektiv der Kamera 8 ausgebildet ist. Die Kamera 8 ist eine zweidimensional aufzeichnende Kamera. Alternativ kann auch eine dreidimensional aufzeichnende Kamera eingesetzt werden, beispielsweise eine TOF (time of flight)-Kamera, die Lichtlaufzeiten berücksichtigt. Auch eine stereoskopisch aufzeichnende Anordnung von zwei Kameras gilt im Rahmen der Anmeldung als eine Bilderfassungseinrichtung.In the illustrated embodiment is in the dosing unit 7th a camera 8th Integrated as an image capture device that is in the wash cabinet 3 is directed to a picture of the wash cabinet 3 record. Next is in the wash cabinet 3 a light source 9 arranged, which can be switched on if necessary, if from the camera 8th a picture of the wash cabinet 3 is recorded. Alternatively or additionally, it can also be in the area of the camera 8th even a light source can be arranged, for example ring-shaped around an objective of the camera 8th is trained. The camera 8th is a two-dimensional recording camera. Alternatively, a three-dimensional recording camera can also be used, for example a TOF (time of flight) camera that takes light transit times into account. An arrangement of two cameras that records stereoscopically is also considered an image acquisition device in the context of the application.

Im gezeigten Ausführungsbeispiel ist lediglich eine Kamera 8 vorhanden, die im Wesentlichen das in dem unteren Spülgutkorb 4 einsortierte Spülgut 10 erfasst. Es kann eine weitere Kamera vorhanden sein, die z.B. oberhalb der dargestellten Kamera 8 angeordnet ist und auf das in den oberen Spülgutkorb 4 einsortierte Spülgut 10 gerichtet ist. Im dargestellten Ausführungsbeispiel ist die Aufnahmerichtung (optische Achse) der Kamera 8 horizontal ausgerichtet. Es sind andere Ausrichtungen der Kamera 8 denkbar. Für eine dem oberen Spülgutkorb 4 zugeordnete Kamera kann es beispielsweise sinnvoll sein, die Kamera so auszurichten, dass sie schräg von unten auf den oberen Spülgutkorb 4 blickt, da häufig Tassen oder Gefäße in den oberen Spülgutkorb 4 einsortiert werden, deren verschmutzte Fläche nach unten weist.In the exemplary embodiment shown, there is only one camera 8th present, which is essentially that in the lower washware basket 4th sorted wash items 10 detected. Another camera can be present, for example above the camera shown 8th is arranged and on the in the upper wash basket 4th sorted wash items 10 is directed. In the illustrated embodiment, the recording direction (optical axis) is the camera 8th horizontally aligned. There are other orientations of the camera 8th conceivable. For the upper wash basket 4th associated camera, it can be useful, for example, to align the camera in such a way that it faces the upper washware basket at an angle from below 4th because cups or vessels are often in the upper wash basket 4th be sorted with the dirty surface facing down.

2 zeigt in einem Flussdiagramm den Ablauf eines anmeldungsgemäßen Verfahrens in einem ersten Ausführungsbeispiel. Das in 2 gezeigt Verfahren kann beispielsweise mit der in 1 wiedergegebenen Geschirrspülmaschine ausgeführt werden und wird daher beispielhaft mit Verweisen auf die Geschirrspülmaschine der 1 erläutert. 2 shows in a flow chart the sequence of a method according to the application in a first embodiment. This in 2 The method shown can be used, for example, with the in 1 reproduced dishwasher and is therefore exemplified with references to the dishwasher of 1 explained.

In einem ersten Schritt S1 wird die Geschirrspülmaschine von einem Nutzer beladen. Dieses kann von der Steuereinrichtung 6 der Geschirrspülmaschine leicht über das Öffnen und Schließen oder zumindest Anlehnen der Tür 2 erfasst werden.In a first step S1 the dishwasher is loaded by a user. This can be done by the control device 6 the dishwasher easily by opening and closing or at least leaning against the door 2 are recorded.

In einem nächsten Schritt S2 wird von der Kamera 8 ein Bild des Spülraums 3 aufgenommen. Zu diesem Zweck wird die Lichtquelle 9 oder eine weitere, z.B. zusammen mit der Kamera 8 angeordneten Lichtquelle aktiviert.In a next step S2 is from the camera 8th a picture of the wash cabinet 3 recorded. For this purpose the light source is used 9 or another, e.g. together with the camera 8th arranged light source activated.

Nach Aufnahme des Bildes wird im nächsten Schritten S3a und S3b das aufgenommene Kamerabild ausgewertet. Bei der Auswertung können beispielsweise einzelne Spülgutteile durch Verfahren der Objekterkennung identifiziert werden. Dabei kann eine Unterteilung nach Art des Spülguts 10 erfolgen, ebenso wie eine Feststellung eines Verschmutzungsgrads bzw. der Art der Verschmutzung. Die Objekterkennung kann sich dabei beispielsweise einer Kantendetektion bedienen. Die Bildauswertung kann alternativ oder zusätzlich durch neuronale Netze erfolgen, insbesondere selbstlernende neuronale Netze. Ein ausgewerteter Beladungszustand, der beispielsweise eine Füllmenge der Geschirrspülmaschine als eine Prozentzahl repräsentiert, wird in einem Schritt S3a bestimmt und in einem nächsten Schritt S4 einer Prüfung unterzogen. Die Prüfung kann, wie in einem Schritt S5 dargestellt ist, beispielsweise durch einen Vergleich mit einem vorgegebenen Beladungszustand erfolgen.After the image has been recorded, the recorded camera image is evaluated in the next steps S3a and S3b. During the evaluation, for example, individual items to be washed can be identified using object recognition methods. A subdivision can be based on the type of items to be washed 10 take place, as well as a determination of the degree of pollution or the type of pollution. The object recognition can use edge detection, for example. The image evaluation can alternatively or additionally take place through neural networks, in particular self-learning neural networks. An evaluated loading state, which for example represents a filling quantity of the dishwasher as a percentage, is determined in a step S3a and in a next step S4 subjected to an examination. The exam can, as in one step S5 is shown, for example, by a comparison with a predetermined load condition.

Verschiedene Beladungszustände einer Geschirrspülmaschine sind in den 3a bis 3c beispielhaft dargestellt. In dem in 3a gezeigten Zustand ist die Geschirrspülmaschine zu etwa 50% beladen. 3b zeigt einen Beladungszustand von 75%. In 3c beträgt der Beladungszustand der Geschirrspülmaschine annähernd 100%. Ist im Schritt S5 der vorgegebene Beladezustand von beispielsweise 95% noch nicht erreicht - wie beispielsweise bei den 3a und 3b -, verzweigt das Verfahren zurück zum Schritt S1, in dem auf ein weiteres Beladen der Geschirrspülmaschine gewartet wird.Different load states of a dishwasher are in the 3a to 3c shown as an example. In the in 3a The dishwasher is about 50% loaded. 3b shows a loading condition of 75%. In 3c the loading status of the dishwasher is approximately 100%. Is in step S5 the specified loading status of, for example, 95% has not yet been reached - as is the case with the 3a and 3b -, the process branches back to step S1 waiting for the dishwasher to be loaded again.

Hat im Schritt S5 der Beladezustand den vorgegebenen Wert von beispielsweise 95% erreicht oder überschritten, wie im Beispiel der 3c gezeigt, verzweigt das Verfahren zu einem nächsten Schritt S6, in dem eine Anfrage für einen möglichen automatischen Start der Geschirrspülmaschine an ein Mobilgerät gesendet wird, das zu diesem Zweck bei der Steuereinrichtung 6 registriert ist und das über eine Netzwerkverbindung, beispielsweise eine WLAN-Verbindung oder eine Bluetooth-Verbindung erreichbar ist. Aufgrund eines größeren Radius ist eine WLAN-Verbindung bzw. eine Verbindung über ein gemeinsames übergeordnetes Netzwerk bevorzugt. Neben einer Anfrage, den automatischen Start des Spülprogramms betreffend, können weitere Informationen mit an das Mobilgerät gesendet werden. Beispielsweise kann in einem dem Schritt S6 zeitlich vorgeschalteten Schritt S7 eine Auswahl eines geeigneten Spülprogramms erfolgen, das im Schritt S6 als ein Vorschlag mit an das Mobilgerät gesendet wird. Die Auswahl des Spülprogramms in Schritt S7 beruht auf den Ergebnissen der Bildauswertung, insbesondere aus einer Auswertung und Erkennung der Art des Spülguts 10 sowie einer Verschmutzungsart und eines Verschmutzungsgrad des Spülguts 10. Diese Informationen werden im Schritt S3b bei der Auswertung des im Schritt S2 aufgenommenen Kamerabilds erstellt und im Schritt S7 berücksichtigt.Has in crotch S5 the loading status reaches or exceeds the specified value of, for example, 95%, as in the example of 3c shown, the method branches to a next step S6 , in which a request for a possible automatic start of the dishwasher is sent to a mobile device, which for this purpose at the control device 6 is registered and that can be reached via a network connection, for example a WLAN connection or a Bluetooth connection. Due to the larger radius, a WLAN connection or a connection via a common higher-level network is preferred. In addition to a request regarding the automatic start of the washing program, further information can also be sent to the mobile device. For example, in one of the steps S6 upstream step S7 a selection of a suitable washing program can be carried out in step S6 is sent as a suggestion to the mobile device. The selection of the washing program in step S7 is based on the results of the image evaluation, in particular from an evaluation and recognition of the type of items to be washed 10 as well as a type of soiling and a degree of soiling of the items to be washed 10 . This information is used in step S3b when evaluating the in step S2 recorded camera image and in step S7 considered.

4 zeigt beispielhaft, wie im Schritt S6 an das Mobilgerät übertragene Informationen dargestellt werden können. Als Mobilgerät ist ein Mobiltelefon 11 dargestellt, auf dem ein Software-Programm („App“) abläuft, das zur Kommunikation mit der Steuereinrichtung 6 der Geschirrspülmaschine eingerichtet ist. Dabei kann vorgesehen sein, dass ein Bild 12, das im Schritt S2 erstellt wurde, mit dargestellt wird. Weiter können Informationen 13 über zum Beispiel den Beladungszustand, das im Schritt S7 ausgewählte vorgeschlagene Spülprogramm und/oder weitere Einstellungen dargestellt werden. Insbesondere wenn der Beladungszustand kleiner als 100% ist, kann in dem Bild 12 möglicher Freiraum, in den weiteres Spülgut 10 eingeräumt werden könnte, visualisiert werden. 4th shows an example of how in step S6 information transmitted to the mobile device can be displayed. The mobile device is a mobile phone 11 shown, on which a software program ("app") runs that is used to communicate with the control device 6 the dishwasher is set up. It can be provided that an image 12 that in the crotch S2 was created with is displayed. Next can information 13 via, for example, the load status that is shown in step S7 selected suggested wash program and / or other settings are displayed. In particular, if the loading status is less than 100%, in the picture 12 possible free space in which further items to be washed 10 could be conceded, visualized.

Weiterhin weist das Mobilgerät 11 in der gestarteten Software Bedienelemente 14 auf, mit denen eine Steuerung der Geschirrspülmaschine erfolgen kann. Ein Betätigen der Bedienelemente 14 wird eine entsprechende Rückmeldung vom Mobilgerät an die Steuereinrichtung 6 übertragen, die in einem Schritt S8 ausgewertet wird. Wenn diese Rückmeldung einen Start der Geschirrspülmaschine vorsieht, erfolgt ein solcher automatischer Start der Geschirrspülmaschine in einem Schritt S10. Bevorzugt ist die Geschirrspülmaschine dabei wie in 1 gezeigt mit einer automatischen Dosiereinheit 7 ausgestattet, so dass benötigtes Reinigungsmittel automatisch dem Spülprogramm zugefügt werden kann. Weiter bevorzugt weist die Geschirrspülmaschine eine Vorrichtung auf, mit der die Tür 2 zugezogen und verriegelt werden kann, auch wenn sie nicht vollständig geschlossen, sondern beispielsweise nur angelehnt ist.Furthermore, the mobile device 11 Control elements in the started software 14th on, with which the dishwasher can be controlled. Pressing the controls 14th is a corresponding feedback from the mobile device to the control device 6 transferred that in one step S8 is evaluated. If this feedback provides for a start of the dishwasher, such an automatic start of the dishwasher takes place in one step S10 . The dishwasher is preferably as in FIG 1 shown with an automatic dosing unit 7th equipped so that the cleaning agent required can be automatically added to the wash program. The dishwasher more preferably has a device with which the door 2 drawn and can be locked, even if it is not completely closed, but is only ajar, for example.

Wenn im Schritt S8 ein unmittelbares Starten der Geschirrspülmaschine noch nicht gewünscht ist, wird nach einer Pause im Schritt S9 die Abfrage im Schritt S8 wiederholt, sodass die Geschirrspülmaschine zu einem späteren Zeitpunkt gestartet werden kann. If in step S8 an immediate start of the dishwasher is not yet desired, after a pause in step S9 the query in step S8 repeatedly so that the dishwasher can be started at a later time.

5 zeigt ein zweites Ausführungsbeispiel eines anmeldungsgemäßen Verfahrens in gleicher Weise in einem Flussdiagramm wie 2. Das in 5 gezeigte Verfahren stellt eine Erweiterung des Verfahrens gemäß 2 dar, wobei zusätzliche Schritte S41 bis S44 in einem Block S40 nach dem Schritt S4 ausgeführt werden. Alle aus dem Verfahren gemäß 2 bekannten Schritte werden auch bei dem Ausführungsbeispiel der 5 ausgeführt. 5 shows a second embodiment of a method according to the application in the same way in a flow chart as 2 . This in 5 The method shown represents an extension of the method according to FIG 2 dar, taking additional steps S41 to S44 in a block S40 after the step S4 are executed. All out of the procedure according to 2 known steps are also in the embodiment of 5 executed.

Nachfolgend werden insbesondere die Ergänzungen des Blocks S40 gemäß 5 erläutert. Im Hinblick auf alle anderen Verfahrensschritte wird auf die Ausführung zu 2 verwiesen.The following are especially the additions to the block S40 according to 5 explained. With regard to all other procedural steps, the execution is too 2 referenced.

Nach einer Prüfung des aktuellen Beladezustands im Schritt S4 wird in einem Schritt S42 ermittelt, ob sich der Beladezustand verändert hat. Dazu wird auf zurückliegende Beladungszustände zugegriffen, die in einem Schritt S41 aus einem Zwischenspeicher bereitgestellt werden. Falls sich der Beladungszustand geändert hat, verzweigt das Verfahren zu dem Schritt S5 und wird damit ebenso weitergeführt, wie zuvor beim Ausführungsbeispiel der 2.After checking the current load status in step S4 is in one step S42 determines whether the loading status has changed. For this purpose, previous load statuses are accessed, which in one step S41 can be provided from a buffer. If the load status has changed, the method branches to step S5 and is thus continued as before in the embodiment of FIG 2 .

Falls sich keine Änderung des Beladungszustands im Schritt S42 gezeigt hat, verzweigt das Verfahren zu einem Schritt S43, in dem ein Zeitgeber abgefragt wird, der gestartet wurde, als zuletzt eine Änderung im Beladungszustand im Schritt S42 erkannt wurde. Übersteigt der Zeitgeber einen vorgegebenen Zeitwert, beispielsweise ein Zeitwert von 48 Stunden, verzweigt das Verfahren zu einem Schritt S44, in dem automatisch ein Vorspülprogramm der Geschirrspülmaschine gestartet wird.If there is no change in the load status in step S42 has shown, the method branches to a step S43 , in which a timer is queried that was started when the last change in the load status in step S42 was recognized. If the timer exceeds a predetermined time value, for example a time value of 48 hours, the method branches to a step S44 , in which a pre-wash program for the dishwasher is started automatically.

Auf diese Weise wird verhindert, dass eingeräumtes Spülgut 10 so lange in der Geschirrspülmaschine ohne Spülprogramm verbleibt, dass dieses hygienisch bedenklich sein könnte. Nach Durchführung des Vorspülprogramms im Schritt S44 verzweigt das Verfahren zurück zum normalen Betriebsablauf, also beispielsweise zum Schritt S5 bzw. zum Schritt S1. Wird im Schritt S43 festgestellt, dass der aktuelle Beladungszustand noch nicht länger als der vorgegebene Zeitwert vorliegt, verzweigt das Verfahren zurück zum Schritt S2, in dem ein weiteres Kamerabild erstellt und nachfolgend ausgewertet wird, sodass der Block S40 auch ohne ein Beladen der Geschirrspülmaschine im Schritt S1 wiederholt ausgeführt wird. Dabei kann zwischen dem Schritt S43 und dem Schritt S2 eine Pause vorgesehen sein, um nicht unnötig häufig Kameraaufnahmen und Auswertungen durchzuführen.In this way it is prevented that stored items are washed 10 remains in the dishwasher without a wash program for so long that this could be hygienically questionable. After performing the pre-wash program in step S44 the method branches back to the normal operating sequence, for example to step S5 or to the step S1 . Will be in crotch S43 If it is found that the current load status has not been present for longer than the predefined time value, the method branches back to step S2 , in which another camera image is created and subsequently evaluated so that the block S40 even without loading the dishwasher in step S1 is executed repeatedly. You can choose between the step S43 and the crotch S2 a break should be provided so that camera recordings and evaluations are not carried out unnecessarily frequently.

Anstelle des automatischen Starten des Vorspülprogramms im Schritt S44 kann auch vorgesehen sein, analog zum Schritt S6 zunächst eine entsprechende Nachricht, die über die möglicherweise auftretenden hygienischen Probleme informiert, an das Mobilgerät zu senden, sodass der Nutzer entscheiden kann, ob er zu diesem Zeitpunkt das Vorspülprogramm starten möchte.Instead of automatically starting the pre-wash program in step S44 can also be provided, analogously to step S6 first of all to send a corresponding message informing the mobile device of any hygienic problems that may arise so that the user can decide whether he would like to start the pre-wash program at this point in time.

BezugszeichenlisteList of reference symbols

11: KorpusBody
22: Türdoor
33: SpülraumWash cabinet
44th: SpülgutkorbWash basket
55: SprüharmSpray arm
66th: SteuereinrichtungControl device
77th: DosiereinheitDosing unit
88th: Kameracamera
99: LichtquelleLight source
1010: SpülgutItems to be washed
1111: MobiltelefonCellphone
1212: Bildimage
1313th: Informationinformation
1414th: Bedienelement Control element
S1-S10S1-S10: VerfahrensschrittProcess step
S40S40: Block mehrerer VerfahrensschritteBlock of several process steps
S41-S44S41-S44: VerfahrensschrittProcess step

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent literature cited

DE 10048081 A1 [0002, 0003]
EP 1793723 B1 [0002, 0004]

Claims

A method for operating a dishwasher for cleaning items to be washed (10) in a washing area (3), the dishwasher having an image acquisition device for recording images of the washing area (3), with the following steps: - Taking a picture of the washing area (3); - Determination of a value reflecting a load condition of the washing area (3) on the basis of an image analysis of the recorded image; - Transmission of a data message to a mobile device depending on the determined value.

Procedure according to Claim 1 , in which the determined value is compared with a predetermined value and in which the data message is transmitted when the determined value reaches or exceeds the predetermined value.

Procedure according to Claim 1 or 2 , for which the determined value and the specified value are percentage information on the loading condition.

Procedure according to Claim 3 , in which the predetermined value is in the range from 80% to 100% and preferably in the range from 90% to 100%.

Method according to one of the Claims 1 to 5 , in which the steps of taking the picture of the washing area (3) and determining the load status are carried out several times, the data message being transmitted if the determined value does not change or changes only insignificantly over a predetermined period of time.

Procedure according to Claim 5 , in which the predetermined period of time is in the range from 12 hours to 60 hours and preferably in the range from 24 hours to 48 hours.

Method according to one of the Claims 1 to 6 , in which the image analysis includes edge detection and / or uses a neural network.

Method according to one of the Claims 1 to 7th , in which the recorded image or at least a section of it is also transmitted to the mobile device.

Method according to one of the Claims 1 to 8th , in which a control instruction is transmitted from the mobile device to the control device, the control instruction relating to starting a washing program.

Procedure according to Claim 9 , in which the control instruction is transmitted depending on a user input on the mobile device.

Method according to one of the Claims 1 to 10 , in which the transmission of the data message, possibly including the image and / or the control instruction, takes place via a network to which the control device of the dishwasher and the mobile device have access.

Dishwasher for cleaning items to be washed (10) in a washing area (3), having an image acquisition device for recording images of the washing area (3), characterized in that the dishwasher is set up to carry out a method according to one of the preceding claims.