EP4487749A1 - Verfahren und steuervorrichtung zum anpassen eines reinigungsvorgangs in einem reinigungsgerät, reinigungsgerät - Google Patents

Verfahren und steuervorrichtung zum anpassen eines reinigungsvorgangs in einem reinigungsgerät, reinigungsgerät Download PDF

Info

Publication number
EP4487749A1
EP4487749A1 EP24185203.7A EP24185203A EP4487749A1 EP 4487749 A1 EP4487749 A1 EP 4487749A1 EP 24185203 A EP24185203 A EP 24185203A EP 4487749 A1 EP4487749 A1 EP 4487749A1
Authority
EP
European Patent Office
Prior art keywords
cleaning device
parameter
image
determining
determined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
EP24185203.7A
Other languages
English (en)
French (fr)
Inventor
Eckard Riedenklau
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Miele und Cie KG
Original Assignee
Miele und Cie KG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Miele und Cie KG filed Critical Miele und Cie KG
Publication of EP4487749A1 publication Critical patent/EP4487749A1/de
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L15/00—Washing or rinsing machines for crockery or tableware
    • A47L15/0018—Controlling processes, i.e. processes to control the operation of the machine characterised by the purpose or target of the control
    • A47L15/0021—Regulation of operational steps within the washing processes, e.g. optimisation or improvement of operational steps depending from the detergent nature or from the condition of the crockery
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L15/00—Washing or rinsing machines for crockery or tableware
    • A47L15/42—Details
    • A47L15/4295—Arrangements for detecting or measuring the condition of the crockery or tableware, e.g. nature or quantity
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L15/00—Washing or rinsing machines for crockery or tableware
    • A47L15/0018—Controlling processes, i.e. processes to control the operation of the machine characterised by the purpose or target of the control
    • A47L15/0063—Controlling processes, i.e. processes to control the operation of the machine characterised by the purpose or target of the control using remote monitoring or controlling of the dishwasher operation, e.g. networking systems
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L2401/00—Automatic detection in controlling methods of washing or rinsing machines for crockery or tableware, e.g. information provided by sensors entered into controlling devices
    • A47L2401/04—Crockery or tableware details, e.g. material, quantity, condition
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L2401/00—Automatic detection in controlling methods of washing or rinsing machines for crockery or tableware, e.g. information provided by sensors entered into controlling devices
    • A47L2401/30—Variation of electrical, magnetical or optical quantities
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L2501/00—Output in controlling method of washing or rinsing machines for crockery or tableware, i.e. quantities or components controlled, or actions performed by the controlling device executing the controlling method
    • A47L2501/26—Indication or alarm to the controlling device or to the user
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47L—DOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L2501/00—Output in controlling method of washing or rinsing machines for crockery or tableware, i.e. quantities or components controlled, or actions performed by the controlling device executing the controlling method
    • A47L2501/30—Regulation of machine operational steps within the washing process, e.g. performing an additional rinsing phase, shortening or stopping of the drying phase, washing at decreased noise operation conditions

Definitions

  • the invention relates to a method and a control device for adapting a cleaning process in a cleaning device and to a cleaning device.
  • Dishwashers can have an interior camera.
  • the invention has for its object to provide an improved method and an improved control device for adapting a cleaning process in a cleaning device as well as an improved cleaning device.
  • the invention relates to a method for adapting a cleaning process in a cleaning device.
  • the cleaning device has a camera for capturing the interior.
  • the method comprises a step of reading in an image signal, a step of determining an object area, a step of determining a parameter and a step of providing an adaptation signal.
  • the image signal is read in via an interface to the camera, the image signal representing an image taken by the camera.
  • the object area is determined using the image signal, the object area representing at least one object depicted in the image.
  • the parameter is determined using the object area, the parameter representing a type and/or a size and/or a state and/or a location of the depicted object in the interior of the cleaning device.
  • the adaptation signal for adapting and/or changing a cleaning process is provided using the parameter.
  • the latter step may in particular also include starting a cleaning process, in particular an adapted one.
  • the cleaning device can be designed as a dishwasher for cleaning dishes.
  • the camera can be arranged in a door of the cleaning device.
  • the object can be, for example, a spray arm in the interior of the cleaning device or a dish.
  • the type of object can be, for example, the shape and/or the material of the object and the condition can be, for example, dirty dishes.
  • the approach presented here can therefore also be understood as a DishCam with efficient, multifunctional image analysis and can be implemented cost-effectively.
  • the method may include a step of issuing a warning signal if a parameter is determined in the determining step that exceeds a predefined size of the object area.
  • the predefined size may be 60 percent of the total image area. This may indicate that an object in the interior is obscuring the camera.
  • a user may change the loading state in the interior in order to achieve reliable cleaning performance.
  • the object region can be determined as a polygon around the object depicted in the image.
  • a reliable parameter can be determined using the object region.
  • a further object region can be determined that represents a further object depicted in the image.
  • a further parameter can be ascertained using the further object region.
  • the adaptation signal can be provided using the parameter and the further parameter.
  • the further object area can be determined as a polygon around the further object shown in the image.
  • the method can comprise a step of superimposing the object area and the further object area if, in the step of determining as parameters and further parameters, values are determined which each represent identical parameters.
  • object areas can be superimposed if they are detected in the upper basket. Additionally or alternatively, the object areas can be superimposed which represent an identical type, for example plates.
  • an additional object region may be determined that represents an additional object depicted in the image.
  • an additional parameter may be determined using the additional object region.
  • the adaptation signal may be provided using the parameter and the additional parameter.
  • the approach presented here also creates a control device that is designed to carry out, control or implement the steps of a variant of a method presented here in corresponding devices.
  • the problem underlying the invention can also be solved quickly and efficiently by this embodiment variant of the invention in the form of a control device.
  • the control device can be designed to read in input signals and to determine and provide output signals using the input signals.
  • An input signal can, for example, represent a sensor signal that can be read in via an input interface of the device.
  • An output signal can represent a control signal or a data signal that can be provided at an output interface of the device.
  • the control device can be designed to determine the output signals using a processing rule implemented in hardware or software.
  • the device can comprise a logic circuit, an integrated circuit or a software module and can be implemented, for example, as a discrete component or be comprised of a discrete component.
  • a cleaning device has a camera for capturing an interior of the cleaning device and the said control device.
  • the cleaning device can have a radio interface for coupling the cleaning device with an external central device for controlling the cleaning device.
  • the external central device can be designed as a smartphone and can show the user information about the load of the cleaning device and suggest suitable cleaning programs.
  • the method and the cleaning device described here can be used accordingly in connection with a commercial or professional device, for example a medical device, such as a cleaning or disinfection device, a small sterilizer, a large-scale disinfector or a container washing system.
  • a medical device such as a cleaning or disinfection device, a small sterilizer, a large-scale disinfector or a container washing system.
  • a computer program product or computer program with program code that can be stored on a machine-readable carrier or storage medium such as a semiconductor memory, a hard disk memory or an optical memory. If the program product or program is executed on a computer or device, the program product or program can be used to carry out,
  • Figure 1 shows a representation of an embodiment of a cleaning device 100, in the form of a plan view onto or into the interior 105 of the cleaning device 100, which is designed here as a dishwasher.
  • the interior 105 is designed to accommodate, by way of example only, a lower basket 115 and an upper basket 125.
  • the baskets 115, 125 are arranged one above the other, for example, and are designed to accommodate items to be washed for cleaning, with the baskets 115, 125 in Figure 1 are not loaded.
  • a spray arm 130 is arranged between the baskets 115, 125 and is designed to spray a cleaning fluid into the interior 105.
  • the cleaning device 100 has a camera 110, which is shown here purely schematically, which can be arranged on a door of the cleaning device 100, so that the camera 110 captures the interior 105 of the cleaning device 100.
  • the cleaning device 100 additionally has a control device 120, which can be arranged adjacent to the camera 110 on the door of the cleaning device 100, for example.
  • the camera 110 takes an image of the interior 105, whereby Figure 1 represents the image of the interior 105 taken by the camera 110.
  • Figure 1 a schematic photo of an empty sink interior 105, as recorded by the camera 110.
  • At least one object area is subsequently determined which represents an object, for example a spray arm, see for example Figure 2 .
  • a parameter of the imaged object is determined.
  • the parameter represents a type and/or a size and/or a state and/or a location of the imaged object in the interior 105 of the cleaning device 100.
  • a cleaning process for the cleaning device 100 is adapted or suggested to the user, for example on a smartphone.
  • the cleaning device 100 has a radio interface 140 which is designed to couple the cleaning device 100 to an external central device, here for example a smartphone.
  • the approach presented here enables images from the camera 110 to be evaluated by means of the control device 120 (or an external or cloud-based server that is connected to the cleaning device via an Internet connection), which can also be referred to as a detector model.
  • the results of such a detector model are so detailed that a large number of different use cases can be implemented relatively easily.
  • the need for operation and maintenance ideally remains at a constant level.
  • this implementation method allows more detailed information for the user, which means greater transparency is achieved, as well as significantly easier options for individualization.
  • the control device 120 (or the external server, for example located in the cloud) provides a detailed evaluation result and can identify and name individual objects that are recognizable in the image, i.e. assign individual class labels and additionally locate them in the image by specifying rectangular, overlapping borders, or bounding boxes.
  • the Figures 1 to 18 show this ability using simple examples in the cleaning device, with three views being shown for each embodiment: "photo", "photo” with bounding boxes and only bounding boxes, for better interpretability.
  • the result of the control device 120 therefore contains not only the information as to whether a certain circumstance is present, but also which and how many different objects are present and approximately how large they are, for example in percentage of the image area.
  • Various objects are detected in the interior 105, which can also be referred to as the dishwasher interior.
  • the dishwasher interior For example, plates, various drinking containers such as cups, mugs, drinking glasses, etc., plastic containers, pots, pans, casserole dishes, various cooking utensils and bottles, etc. are detected as load parts, but also parts of the interior 105, such as the middle spray arm 130 on the upper basket 125, which can also be referred to as the middle basket, or tiered stands and bottle holders in the lower basket 115 are detected.
  • the total loading level can be determined from the union of all loading parts, i.e. without components of the interior 105, such as the spray arm 130 or tiered stands.
  • the pixel area of the union divided by the total pixel area minus a delta ⁇ total to be determined experimentally can already be roughly used as a simple total loading level ⁇ total .
  • the same information can be used to derive a separate loading level for the upper basket 125 and the lower basket 115.
  • the lower line 2205 of the bounding box around the middle spray arm 130 can serve as a dividing line for this, as this is usually easily recognizable, see for example Figure 22 . If, contrary to expectations, this dividing line cannot be determined because the spray arm 130 cannot be seen, a generally valid height is used to divide the image.
  • load level information items are used, for example, for the "load level-dependent auto-start" application case.
  • a fully automatic wash cycle can be started as soon as one, two, or all three of the values exceed the corresponding threshold values.
  • it is possible to start a wash cycle as soon as the upper basket 125 is sufficiently full because the household rarely cooks, for example because people eat out at lunchtime, and clean cups and glasses would otherwise quickly run out.
  • particularly sustainable users can prefer the more restrictive variant, which only starts when the cleaning device is completely full.
  • the threshold values and whether one, two or all should be exceeded can be easily set using the control panel on the device or an app, for example on a smartphone.
  • the current partial load level can also be displayed at these points to ensure user transparency.
  • an automatic setting can be offered as an alternative, which, for example, assumes a total load level of at least 75 percent and, when this level is reached, Threshold automatically suggests or carries out a flush start, comparable to the binary start classifier model.
  • a rough loading statistic can also be offered on the device or in the app, which shows, for example, how much cookware, porcelain or plastic parts have been loaded in percentage terms. Together with the loading level(s), users can easily estimate what kind of load there is probably still enough space for in the cleaning device.
  • the control device 120 is trained to recognize different loads, such as loads that are typically made of plastic, pots and pans, and bottles. This property allows the control device 120 to be used for other applications beyond the autonomous rinsing start variants described above: It is assumed that pots, pans or even casserole dishes tend to be affected by stubborn dirt. In this case, when such loads are detected, for example a pan 1605, as in Figure 16 In the lower half of the image, in the lower basket 115, the control device 120 automatically preselects the "Intense Zone" option if activated by the user via the app or on the cleaning device. This causes, for example, a higher circulation pump speed in the water diverter position of the lower basket 115 and thus ideally achieves better cleaning performance.
  • the camera 110 is most likely obscured if only a few objects are detected in the interior 105, but the average object size is above average. To date, depending on the image processed, an average object size of up to six percent of the total image area has been observed. If, for example, the control device 120 can only detect one object in the image, but this object takes up a large part of the total image area (> 50 percent), the camera 110 is probably obscured. In such a case, users have the choice of remedying the obscuration of the camera 110 as best as possible by rearranging the load, or accepting this circumstance and possibly foregoing the use cases described above until, for example, the machine has been emptied again after a manually performed wash cycle.
  • the approach presented here shows the versatility of a control device 120 for a wide range of applications with the camera 110 and thus offers a high level of user satisfaction.
  • the approach presented here is resource- and effort-saving. Consistent development costs allow more calculable costs for operation and maintenance.
  • the application cases can be easily customized with this model approach and communicated more transparently to users.
  • Figure 2 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 1 , except that an object area 200 is determined in the interior space 105.
  • the object area 200 is defined using the Figure 1 image displayed and represents at least one element in the image from Figure 1 object shown.
  • the spray arm 130 is defined as the object area 200. More precisely, the object area 200 is defined as a polygon around the spray arm 130.
  • Figure 2 the object area 200, which is also known as the bounding box which the control device, which can also be called a detector model, detects.
  • the object area 200 which can also be referred to as the bounding box, only takes up an image area of 35 percent of the total image area.
  • Figure 3 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 1 , except that the captured image is Figure 1 and the object area 200 from Figure 2 are shown superimposed.
  • Figure 4 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 1 , except that a plate 405 is arranged in the lower basket 115.
  • Figure 5 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 4 , with the exception that the plate 405 is defined as a further object area 500.
  • the further object area 500 only takes up an image area of 10 percent of the total image area, for example.
  • Figure 6 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 4 , except that the captured image is Figure 4 and the object areas 200, 500 from Figure 5 are shown superimposed.
  • FIG. 7 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 4 , with the exception that an additional plate 705 is arranged in the lower basket 115.
  • Figure 8 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 7 , with the exception that the further plate 705 is designated as an additional object area 800.
  • the additional object area 800 merely occupies an image area of 10 percent of the total image area, as an example.
  • Figure 9 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 7 , except that the captured image is Figure 7 and the object areas 200, 500, 700 from Figure 8 are shown superimposed.
  • Figure 10 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 7 , with the exception that an additional cup 1005 is arranged in the upper basket 125.
  • Figure 11 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 10 , with the exception that the cup 1005 is defined as a fourth object area 1100.
  • the fourth object area 1100 merely occupies an image area of 4 percent of the total image area, as an example.
  • Figure 12 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 10 , except that the captured image is Figure 10 and the object areas 200, 500, 700, 1100 from Figure 11 are superimposed.
  • FIG 13 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 10 , with the exception that in addition to the cup 1005, further cups 1305, 1315, 1325 are arranged in the upper basket 125 and in addition to the further plate 705, further plates 1335 are arranged in the lower basket 115.
  • Figure 14 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 13 , with the exception that the second cup 1305 is designated as the fifth object area 1400, the third cup 1315 as the sixth object area 1410 and the fourth cup 1325 as the seventh object area 1420.
  • the other plates 1335 are designated as the eighth object area 1430.
  • the Plate 1335 in contrast to cups 1005, 1305, 1315, 1325, is combined as an object area 1430 because they completely overlap in the image recorded by the camera.
  • the eighth object area 1430 only takes up an image area of 21 percent of the total image area, for example.
  • the fourth object area 1100 of cup 1005 only takes up an image area of six percent of the total image area, for example, and the fifth object area 1400 of the second cup 1305 only takes up an image area of four percent of the total image area, for example.
  • Figure 15 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 13 , except that the captured image is Figure 13 and the object areas 200, 500, 700, 1100, 1400, 1410, 1420, 1430 from Figure 14 are shown superimposed.
  • FIG 16 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 13 , except that in addition to the wash ware from the previous figures, a pan 1605 is arranged in the lower basket 115.
  • Figure 17 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 16 , with the exception that the pan 1605 is designated as the ninth object area 1700.
  • the ninth object area 1700 only takes up an image area of 35 percent of the total image area, for example.
  • the ninth object area 1700 partially covers the eighth object area 1430, whereby the eighth object area 1430 only takes up an image area of 18 percent of the total image area, as opposed to Figure 14 .
  • Figure 18 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 16 , except that the captured image is Figure 16 and the object areas 200, 500, 700, 1100, 1400, 1410, 1420, 1430, 1700 from Figure 17 are shown superimposed.
  • Figure 19 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 17 , except that the ninth object area is omitted.
  • Figure 20 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 19 , with the exception that the object areas of the cups are combined to form an object area 2000.
  • the object area 2000 only takes up an image area of 12 percent of the total image area, as an example.
  • the object areas of the cups are combined to form the object area 2000 because an identical type of object, in this case cups, is determined as a parameter.
  • the object area 2000 is thus identified as a load in the upper basket.
  • Figure 21 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 17 , with the exception that the object areas of the pan and the plate are combined to form an object area 2100.
  • the object areas of the cups are also combined to form the object area 2000.
  • the object areas of the pan and the plate are combined to form the object area 2100 because an identical location of the objects, here in the lower basket, is determined as a parameter.
  • the object area 2100 only takes up an image area of 52 percent of the total image area as an example.
  • Figure 22 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 22 , except that a dividing line 2205 is drawn between the object areas 2000, 2100.
  • the dividing line 2205 represents the lower line of the object area 200 of the spray arm.
  • the object area 2000 is thus identified as the upper basket and the object area 2100 as the lower basket, whereby the object area 2100 merely takes up an image area of 80 percent of the lower half of the image as an example.
  • Figure 23 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 1 except that a large object 2305 at least partially obscures the camera.
  • Figure 24 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 23 with the exception that an object area 2400 is determined in the interior 105.
  • the object area 2400 only takes up an image area of 60 percent of the total image area by way of example.
  • Figure 25 shows a representation of an embodiment of a cleaning device 100.
  • the cleaning device 100 is similar to the cleaning device from Figure 23 , except that the captured image is Figure 23 and the object area 2400 from Figure 24 are shown superimposed.
  • Figure 23 is a schematic photo of the interior 105, which contains a large, unspecified object 2305 that obscures a large part (> 50 percent) of the camera's field of view.
  • Figure 24 shows only the bounding box with about 60 percent of the total image area that the detector model would recognize in the photo.
  • Figure 25 shows the overlay of both pieces of information.
  • Figure 26 shows a flow chart of an embodiment of a method 2600 for adapting a cleaning process in a cleaning device.
  • the cleaning device is a cleaning device from one of the figures described above or a similar cleaning device.
  • the method 2600 comprises a step 2605 of reading in an image signal, a step 2610 of determining an object region, a step 2615 of determining a Parameter and a step 2620 of providing an adaptation signal.
  • the method 2600 comprises a step 2625 of outputting a warning signal and a step 2630 of overlaying the object area with another object area.
  • step 2605 of reading the image signal is read in via an interface to a camera.
  • step 2610 of determining the object region is determined using the image signal. According to one embodiment, a further object region is determined using the image signal.
  • step 2615 of determining the parameter is determined using the object area.
  • a further parameter is determined using the further object area.
  • step 2620 of providing the adaptation signal for adapting and/or changing and/or starting a cleaning program for the cleaning device is provided using the parameter.
  • the adaptation signal is additionally provided using the further parameter.
  • the outputting step 2625 is performed if a parameter is determined in the determining step 2615 that exceeds a predefined size of the object area.
  • step 2610 of determining the object area and/or the further object area are determined as a polygon.
  • step 2630 of overlaying the object area and the further object area are overlaid if, in step 2615 of determining, values are determined as parameters and further parameters that each represent identical parameters.
  • the parameters represent an identical type, for example a cup.
  • step 2610 of determining an additional object region is determined that represents an additional object depicted in the image.
  • step 2615 of determining an additional parameter is then determined using the additional object region.
  • step 2620 of providing the adaptation signal is then provided using the parameter and the additional parameter.
  • Figure 27 shows a block diagram of an embodiment of a control device 120 for adjusting a cleaning process in a cleaning device.
  • the control device 120 is designed, for example, to Figure 26 described procedure or a similar procedure.
  • the control device 120 has a unit 2705 for reading in an image signal 2708, a unit 2710 for determining an object area 200, a unit 2715 for determining a parameter 2718 and a unit 2720 for providing an adaptation signal 2722.
  • the control device 120 has a unit 2725 for outputting a warning signal 2728 and a unit 2730 for superimposing the object area 200 with another object area.
  • the unit 2710 for determining an object area 200, the unit 2715 for determining a parameter 2718 and, if applicable, also the unit 2730 for overlaying the object area 200 with another object area can also be provided by an external server, i.e. remote from the cleaning device, or located in the cloud, which is connected to the cleaning device via an Internet connection.
  • the image signal 2708 is read in via an interface to the camera 110 and the object area 200 is determined using the image signal 2708.
  • the determining unit 2710 is designed to determine a further object region 500.
  • the object regions 200, 500 are subsequently superimposed in the unit 2730 if identical parameters 2718, 2738 of the object regions 200, 500 are previously determined in the determining unit 2715.
  • the determining unit 2715 is configured to determine an additional parameter 2748 using an additional object region 800 previously determined in the unit 2710.
  • the output unit 2725 is configured to output the warning signal 2728 when a parameter is determined in the determination unit 2715 that exceeds a predefined size of the object area.
  • the unit 2720 provides the adjustment signal 2722 using the at least one parameter 2718, 2738, 2748.

Landscapes

  • Image Analysis (AREA)
  • Cleaning By Liquid Or Steam (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät (100). Das Reinigungsgerät (100) weist eine Kamera zum Erfassen des Innenraums (105) auf. Das Verfahren umfasst einen Schritt des Einlesens eines Bildsignals, einen Schritt des Bestimmens eines Objektbereichs (200), einen Schritt des Ermittelns eines Parameters und einen Schritt des Bereitstellens eines Anpassungssignals. Im Schritt des Einlesens wird das Bildsignal über eine Schnittstelle zu der Kamera eingelesen, wobei das Bildsignal ein von der Kamera aufgenommenes Bild repräsentiert. Im Schritt des Bestimmens wird der Objektbereich (200) unter Verwendung des Bildsignals bestimmt, wobei der Objektbereich (200) mindestens ein in dem Bild abgebildetes Objekt repräsentiert. Im Schritt des Ermittelns wird der Parameter unter Verwendung des Objektbereichs (200) ermittelt, wobei der Parameter eine Art und/oder eine Größe und/oder einen Zustand und/oder einen Standort des abgebildeten Objekts in dem Innenraum (105) des Reinigungsgeräts (100) repräsentiert. Im Schritt des Bereitstellens wird das Anpassungssignal zum Anpassen und/oder Verändern eines Reinigungsvorgangs unter Verwendung des Parameters bereitgestellt.

Description

  • Die Erfindung betrifft ein Verfahren und eine Steuervorrichtung zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät sowie ein Reinigungsgerät.
  • Geschirrspüler können eine Innenraumkamera aufweisen.
  • Der Erfindung stellt sich die Aufgabe ein verbessertes Verfahren und eine verbesserte Steuervorrichtung zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät sowie ein verbessertes Reinigungsgerät zu schaffen.
  • Erfindungsgemäß wird diese Aufgabe durch ein Verfahren und eine Steuervorrichtung zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät sowie durch ein Reinigungsgerät mit den Merkmalen der Hauptansprüche gelöst. Vorteilhafte Ausgestaltungen und Weiterbildungen der Erfindung ergeben sich aus den nachfolgenden Unteransprüchen.
  • Die mit der Erfindung erreichbaren Vorteile bestehen insbesondere darin, dass ein Verfahren geschaffen wird, dass einen Beladungszustand in einem Innenraum eines Reinigungsgeräts zuverlässig und schnell erfassen kann und ansprechend darauf einen Reinigungsvorgang anpassen kann.
  • Die Erfindung betrifft ein Verfahren zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät. Das Reinigungsgerät weist eine Kamera zum Erfassen des Innenraums auf. Das Verfahren umfasst einen Schritt des Einlesens eines Bildsignals, einen Schritt des Bestimmens eines Objektbereichs, einen Schritt des Ermittelns eines Parameters und einen Schritt des Bereitstellens eines Anpassungssignals. Im Schritt des Einlesens wird das Bildsignal über eine Schnittstelle zu der Kamera eingelesen, wobei das Bildsignal ein von der Kamera aufgenommenes Bild repräsentiert. Im Schritt des Bestimmens wird der Objektbereich unter Verwendung des Bildsignals bestimmt, wobei der Objektbereich mindestens ein in dem Bild abgebildetes Objekt repräsentiert. Im Schritt des Ermittelns wird der Parameter unter Verwendung des Objektbereichs ermittelt, wobei der Parameter eine Art und/oder eine Größe und/oder einen Zustand und/oder einen Standort des abgebildeten Objekts in dem Innenraum des Reinigungsgeräts repräsentiert. Im Schritt des Bereitstellens wird das Anpassungssignal zum Anpassen und/oder Verändern eines Reinigungsvorgangs unter Verwendung des Parameters bereitgestellt. Letzterer Schritt kann insbesondere auch ein Starten eines, insbesondere angepassten Reinigungsvorgangs beinhalten.
  • Das Reinigungsgerät kann als ein Geschirrspüler zum Reinigen von Spülgut ausgeformt sein. Die Kamera kann in einer Tür des Reinigungsgeräts angeordnet sein. Das Objekt kann beispielsweise ein Sprüharm im Innenraum des Reinigungsgeräts oder ein Spülgut sein. Als Art des Objekts kann beispielsweise die Form und/oder das Material des Objekts und als Zustand kann beispielsweise verschmutztes Spülgut ermittelt werden. Der hier vorgestellte Ansatz kann somit auch als DishCam mit effizienter, multifunktionaler Bildauswertung verstanden werden und kann kostengünstig realisiert werden.
  • Das Verfahren kann einen Schritt des Ausgebens eines Warnsignals umfassen, wenn im Schritt des Ermittelns ein Parameter ermittelt wird, der eine vordefinierte Größe des Objektbereichs übersteigt. Lediglich beispielhaft kann die vordefinierte Größe 60 Prozent der Gesamtbildfläche betragen. Dies kann darauf hinweisen, dass ein Objekt im Innenraum die Kamera verdeckt. Ansprechend auf das Ausgeben des Warnsignals kann ein Nutzer den Beladungszustand im Innenraum ändern, um somit eine zuverlässige Reinigungsleistung zu bewirken.
  • Im Schritt des Bestimmens kann der Objektbereich als Polygon um das in dem Bild abgebildete Objekt bestimmt werden. Somit kann ein zuverlässiger Parameter unter Verwendung des Objektbereichs ermittelt werden.
  • Im Schritt des Bestimmens kann ein weiterer Objektbereich bestimmt werden, der ein weiteres in dem Bild abgebildetes Objekt repräsentiert. Im Schritt des Ermittelns kann ein weiterer Parameter unter Verwendung des weiteren Objektbereichs ermittelt werden. Dabei kann im Schritt des Bereitstellens das Anpassungssignal unter Verwendung des Parameters und des weiteren Parameters bereitgestellt werden.
  • Im Schritt des Bestimmens kann der weitere Objektbereich als Polygon um das in dem Bild abgebildete weitere Objekt bestimmt werden.
  • Das Verfahren kann einen Schritt des Überlagerns des Objektbereichs und des weiteren Objektbereichs umfassen, wenn im Schritt des Ermittelns als Parameter und weiterer Parameter Werte ermittelt werden, die jeweils identische Parameter repräsentieren. Beispielsweise können Objektbereiche überlagert werden, wenn sie im Oberkorb erfasst werden. Zusätzlich oder alternativ können die Objektbereiche überlagert werden, die eine identische Art repräsentieren, beispielsweise Teller.
  • Im Schritt des Bestimmens kann ein zusätzlicher Objektbereich bestimmt werden, der ein zusätzliches in dem Bild abgebildetes Objekt repräsentiert. Im Schritt des Ermittelns kann ein zusätzlicher Parameter unter Verwendung des zusätzlichen Objektbereichs ermittelt werden.
  • Im Schritt des Bereitstellens kann das Anpassungssignal unter Verwendung des Parameters und des zusätzlichen Parameters bereitgestellt werden.
  • Der hier vorgestellte Ansatz schafft ferner eine Steuervorrichtung, die ausgebildet ist, um die Schritte einer Variante eines hier vorgestellten Verfahrens in entsprechenden Einrichtungen durchzuführen, anzusteuern bzw. umzusetzen. Auch durch diese Ausführungsvariante der Erfindung in Form einer Steuervorrichtung kann die der Erfindung zugrunde liegende Aufgabe schnell und effizient gelöst werden.
  • Die Steuervorrichtung kann ausgebildet sein, um Eingangssignale einzulesen und unter Verwendung der Eingangssignale Ausgangssignale zu bestimmen und bereitzustellen. Ein Eingangssignal kann beispielsweise ein über eine Eingangsschnittstelle der Vorrichtung einlesbares Sensorsignal darstellen. Ein Ausgangssignal kann ein Steuersignal oder ein Datensignal darstellen, das an einer Ausgangsschnittstelle der Vorrichtung bereitgestellt werden kann. Die Steuervorrichtung kann ausgebildet sein, um die Ausgangssignale unter Verwendung einer in Hardware oder Software umgesetzten Verarbeitungsvorschrift zu bestimmen. Beispielsweise kann die Vorrichtung dazu eine Logikschaltung, einen integrierten Schaltkreis oder ein Softwaremodul umfassen und beispielsweise als ein diskretes Bauelement realisiert sein oder von einem diskreten Bauelement umfasst sein.
  • Ein Reinigungsgerät weist eine Kamera zum Erfassen eines Innenraums des Reinigungsgeräts und die genannte Steuervorrichtung auf.
  • Das Reinigungsgerät kann eine Funkschnittstelle zum Koppeln des Reinigungsgeräts mit einer externen Zentraleinrichtung zum Steuern des Reinigungsgeräts aufweisen. Die externe Zentraleinrichtung kann als ein Smartphone ausgebildet sein und dem Nutzer Informationen über die Beladung des Reinigungsgeräts anzeigen und geeignete Reinigungsprogramme vorschlagen.
  • Auch wenn der beschriebene Ansatz anhand eines Haushaltgeräts beschrieben wird, kann das hier beschriebene Verfahren und das hier beschriebene Reinigungsgerät entsprechend im Zusammenhang mit einem gewerblichen oder professionellen Gerät, beispielsweise einem medizinischen Gerät, wie einem Reinigungs- oder Desinfektionsgerät, einem Kleinsterilisator, einem Großraumdesinfektor oder einer Container-Waschanlage eingesetzt werden.
  • Von Vorteil ist auch ein Computer-Programmprodukt oder Computerprogramm mit Programmcode, der auf einem maschinenlesbaren Träger oder Speichermedium wie einem Halbleiterspeicher, einem Festplattenspeicher oder einem optischen Speicher gespeichert sein kann. Wird das Programmprodukt oder Programm auf einem Computer oder einer Vorrichtung ausgeführt, so kann das Programmprodukt oder Programm zur Durchführung,
  • Umsetzung und/oder Ansteuerung der Schritte des Verfahrens nach einer der vorstehend beschriebenen Ausführungsformen verwendet werden.
  • Ein Ausführungsbeispiel der Erfindung ist in den Zeichnungen rein schematisch dargestellt und wird nachfolgend näher beschrieben. Es zeigt
    • Figur 1
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 2
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 3
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 4
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 5
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 6
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 7
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 8
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 9
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 10
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 11
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 12
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 13
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 14
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 15
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 16
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 17
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 18
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 19
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 20
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 21
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 22
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 23
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 24
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 25
    eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts;
    Figur 26
    ein Ablaufdiagramm eines Ausführungsbeispiels eines Verfahrens zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät; und
    Figur 27
    ein Blockschaltbild einer Steuervorrichtung zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät.
  • Figur 1 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100, in Gestalt einer Draufsicht auf bzw. in den Innenraum 105 des hier als Geschirrspüler ausgebildeten Reinigungsgeräts 100.
  • Der Innenraum 105 ist ausgebildet, um lediglich beispielhaft einen Unterkorb 115 und einen Oberkorb 125 aufzunehmen. Die Körbe 115, 125 sind beispielsweise übereinander angeordnet und ausgebildet, um Spülgut zum Reinigen aufzunehmen, wobei die Körbe 115, 125 in Figur 1 nicht beladen sind. Zwischen den Körben 115, 125 ist ein Sprüharm 130 angeordnet, der ausgebildet ist, um ein Reinigungsfluid in den Innenraum 105 zu sprühen.
  • Das Reinigungsgerät 100 weist eine, hier rein schematisch angedeutete, Kamera 110 auf, die lediglich beispielhaft an einer Tür des Reinigungsgeräts 100 angeordnet sein kann, sodass die Kamera 110 den Innenraum 105 des Reinigungsgeräts 100 erfasst. Das Reinigungsgerät 100 weist zusätzliche eine Steuervorrichtung 120 auf, die lediglich beispielhaft benachbart zu der Kamera 110 an der Tür des Reinigungsgeräts 100 angeordnet sein kann.
  • In einem betriebsbereiten Zustand nimmt die Kamera 110 ein Bild des Innenraums 105 auf, wobei Figur 1 das von der Kamera 110 aufgenommene Bild des Innenraums 105 repräsentiert. In anderen Worten ausgedrückt zeigt Figur 1 ein schematisches Foto von einem leeren Spülinnenraum 105, wie es die Kamera 110 aufnimmt.
  • In dem aufgenommenen Bild wird nachfolgend mindestens ein Objektbereich bestimmt, der ein Objekt, beispielsweise einen Sprüharm, repräsentiert, siehe beispielsweise Figur 2. In einem nächsten Schritt wird ein Parameter des abgebildeten Objekts bestimmt. Der Parameter repräsentiert eine Art und/oder eine Größe und/oder einen Zustand und/oder einen Standort des abgebildeten Objekts in dem Innenraum 105 des Reinigungsgeräts 100. Unter Verwendung des ermittelten Parameters wird ein Reinigungsvorgang für das Reinigungsgerät 100 angepasst bzw. dem Nutzer, beispielsweise auf einem Smartphone, vorgeschlagen. Dazu weist das Reinigungsgerät 100 eine Funkschnittstelle 140 auf, die ausgebildet ist, um das Reinigungsgerät 100 mit einer externen Zentraleinrichtung, hier beispielsweise einem Smartphone, zu koppeln.
  • In anderen Worten ausgedrückt ermöglicht der hier vorgestellte Ansatz ein Auswerten von Bildern der Kamera 110 mittels der Steuervorrichtung 120 (oder eines externen oder in der Cloud verorteten Servers, der über eine Internetverbindung mit dem Reinigungsgerät in Verbindung steht), was auch als Detektor-Modell bezeichnet werden kann. Die Ergebnisse eines solchen Detektor-Modells sind so detailliert, dass sich damit eine Vielzahl verschiedener Anwendungsfälle vergleichsweise einfach realisieren lassen. Der Bedarf für den Betrieb und die Pflege bleibt im Idealfall auf einem konstanten Niveau. Als zusätzlichen Bonus erlaubt diese Umsetzungsweise detailliertere Informationen für den Nutzer, wodurch eine höhere Transparenz erreicht wird, sowie deutlich einfachere Möglichkeiten der Individualisierung.
  • Die Steuervorrichtung 120 (oder der externe, etwa in der Cloud verortete Server) liefert ein detailliertes Auswertungsergebnis und kann einzelne, im Bild erkennbare Objekte identifizieren und benennen, das heißt einzelne Klassenlabels zuordnen und zusätzlich diese im Bild durch die Angabe von rechteckigen, überlappungsfähigen Umrandungen, engl. Bounding Boxes verorten. Die Figuren 1 bis 18 zeigen diese Fähigkeit an einfachen Beispielen im Reinigungsgerät, wobei für jedes Ausführungsbeispiel drei Ansichten dargestellt sind: "Foto", "Foto" mit Bounding Boxen und nur Bounding Boxen, für die bessere Interpretierbarkeit. Das Ergebnis der Steuervorrichtung 120 enthält folglich nicht nur die Information, ob ein bestimmter Umstand vorliegt, sondern auch welche und wie viele verschiedene Objekte vorliegen und wie groß sie ungefähr sind, zum Beispiel im prozentualen Bildflächenanteil.
  • Es werden verschiedene Objekte im Innenraum 105, der auch als Spülinnenraum bezeichnet werden kann, erkannt. Beispielsweise werden als Beladungsteile Teller, diverse Trinkbehältnisse, wie Tassen, Becher, Trinkgläser, etc., Kunststoffbehälter, Töpfe, Pfannen, Auflaufformen, diverse Kochutensilien und Flaschen, usw. erkannt, aber auch Teile des Innenraums 105, wie zum Beispiel der mittlere Sprüharm 130 am Oberkorb 125, der auch als mittlerer Korb bezeichnet werden kann, oder Etageren und Flaschenhalter im Unterkorb 115 werden erkannt.
  • Entscheidend ist nun die Art und Weise, wie diese Informationen weiterverarbeitet werden: Interpretiert man die Rechtecke, zum Beispiel definiert durch zwei Punktkoordinaten der oberen linken und unteren rechten Ecke, um die einzelnen Objekte herum als Polygone, Linienzüge bestehend aus verbundenen Einzelpunkten, eine Punktkoordinate pro Ecke, lassen sich recht einfach geometrische Operatoren, wie zum Beispiel die geometrische Vereinigung, engl. Union, anwenden, siehe. Figuren 19 und 20. Auch die Fläche einzelner Objekte oder ganzer Objektklassen lässt sich so sehr leicht überlappungsfrei und damit bereits recht genau bestimmen.
  • Mit diesen Informationen lassen sich diverse Anwendungsfälle leicht und effizient umsetzen, zum Beispiel lassen sich mehrere Beladungsgradinformationen daraus ableiten:
    Der Gesamtbeladungsgrad lässt sich aus der Vereinigung sämtlicher Beladungsteile, das heißt ohne Bestandteile des Innenraumes 105, wie Sprüharm 130 oder Etageren, bestimmen. Die Pixelfläche der Vereinigung geteilt durch die Gesamtpixelfläche abzüglich eines experimentell zu bestimmenden Deltas δgesamt kann bereits grob als ein einfacher Gesamtbeladungsgrad σgesamt genutzt werden. Der Innenraum 105 wird in der Regel nie aus Sicht der Kamera 110 komplett mit Beladungsteilen abgedeckt werden können, es sei denn, die Kamera 110 wird komplett verstellt und die Perspektive der Kamera 110 verzerrt die erkannten Bildflächen ebenfalls; gleichzeitig ist wiederum von rechteckigen Bounding Boxen auf tendenziell runde Objekte zu schließen; beispielsweise ist δ = 0,8.
  • Analog lässt sich mit denselben Informationen ein eigener Beladungsgrad separat für den Oberkorb 125 und den Unterkorb 115 ableiten. Als Trennlinie hierfür kann die untere Linie 2205 der Bounding Box um den mittleren Sprüharm 130 dienen, da dieser in der Regel gut erkennbar ist, siehe beispielsweise Figur 22. Sollte widererwarten diese Trennlinie nicht bestimmbar sein, weil der Sprüharm 130 nicht zu erkennen ist, wird eine allgemeingültige Höhe für die Unterteilung des Bildes genutzt. Mithilfe dieser Trennlinie kann nun das Vereinigungspolygon der Beladungsteile, wie es auch beim Gesamtbeladungsgrad verwendet wurde, zerschnitten werden, engl. Cropping, und entsprechend in Relation der jeweiligen Pixelfläche für die obere und untere Bildfläche gesetzt werden und erneut zum Beispiel mit einem experimentell zu bestimmenden Delta, δoben und δunten, angepasst werden und als jeweiliger Beladungsgrad σoben und σunten, genutzt werden, siehe Figur 22.
  • Diese drei Beladungsgradinformationen werden beispielsweise für den Anwendungsfall "Beladungsgradabhängiger Auto-Start" genutzt. Mit der vorgestellten Herangehensweise ist es darüber hinaus möglich, dem Nutzer sehr differenzierte Individualisierungsmöglichkeiten zu bieten. So ist es möglich, dem Nutzer individuelle Schwellwerte jeweils für den Oberkorb 125 und Unterkorb 115, oder auch für den Gesamtbeladungsgrad anzugeben. Gleichzeitig kann der Nutzer selbst entscheiden, wie restriktiv diese Werte anzuwenden sind. Ein vollautomatischer Spülstart kann bereits ausgeführt werden, sobald einer der Werte, zwei, oder erst alle drei entsprechende Schwellwerte überschreiten. Je nach Haushaltssituation wird zum Beispiel ermöglicht, einen Spülstart bereits auszuführen, sobald der Oberkorb 125 hinreichend gefüllt ist, weil im Haushalt selten gekocht wird, zum Beispiel weil mittags außer Haus gegessen wird, und saubere Tassen und Gläser sonst schnell zur Neige gehen. Alternativ können besonders nachhaltig eingestellte Nutzer die restriktivere Variante bevorzugen, bei der erst bei einem ganz voll beladenen Reinigungsgerät gestartet wird. Die Schwellwerte und ob einer, zwei, oder alle überschritten sein sollen, sind leicht über das Bedienfeld am Gerät oder über eine App, zum Beispiel auf einem Smartphone einstellbar. Ebenfalls kann zugunsten der Nutzertransparenz an diesen Stellen der jeweilige aktuelle Teil-Beladungsgrad angezeigt werden.
  • Wünschen Nutzer solch feine Individualisierungsmöglichkeiten nicht, kann alternativ auch eine Automatik-Einstellung angeboten werden, die zum Beispiel pauschal einen Gesamtbeladungsgrad von mindestens 75 Prozent annimmt und beim Erreichen dieser Schwelle automatisch einen Spülstart vorschlägt, bzw. durchführt, vergleichbar mit dem binären Start-Klassifikator-Modell.
  • Im Sinne der Nutzertransparenz kann am Gerät oder in der App auch eine grobe Beladungsstatistik angeboten werden, über die prozentual zum Beispiel ersichtlich ist, wie viel Kochgeschirr, Porzellan oder Kunststoffteile beladen wurden. Zusammen mit dem/den Beladungsgrad(en) können Nutzer leicht einschätzen, für was für Beladungsteile vermutlich noch genügend Platz im Reinigungsgerät ist.
  • Die Steuervorrichtung 120 ist so trainiert, dass sie unterschiedliche Beladungsteile erkennt, wie zum Beispiel auch Beladung, die typischerweise aus Kunststoff besteht, Töpfe und Pfannen, sowie Flaschen. Diese Eigenschaft lässt die Steuervorrichtung 120 über die oben beschriebenen Varianten des autonomen Spülstarts hinaus für noch weitere Anwendungsfälle nutzen:
    Es wird angenommen, dass Töpfe, Pfannen, oder auch Auflaufformen tendenziell mit hartnäckiger Anschmutzung behaftet sind. In diesem Fall wird beim Erkennen solcher Beladungsteile, beispielsweise eine Pfanne 1605, wie in Figur 16 in der unteren Bildhälfte, im Unterkorb 115, die Steuervorrichtung 120 automatisch die Option "Intense Zone" vorwählen, sofern vom Nutzer über die App oder am Reinigungsgerät aktiviert. Diese bewirkt zum Beispiel eine höhere Umwälzpumpendrehzahl bei der Wasserweichenstellung Unterkorb 115 und erreicht so im Idealfall eine bessere Reinigungsleistung.
  • Analog wird beim Erkennen von Kunststoffteilen durch die Steuervorrichtung 120 jedoch Beladungstypen, die bekanntlich aus Kunststoff bestehen, erkannt. Kunststoff trocknet bekanntlich aufgrund der geringeren Wärmekapazität schlechter, verglichen mit Beladung aus Porzellan, Glas oder Metall. So kann automatisch für den nächsten Spülgang, gleich ob automatisch oder manuell gestartet, die Option "Extra Trocken" vorgewählt werden. Diese bewirkt eine höhere Klarspültemperatur, was eine bessere Trocknungsleistung, auch bei Kunststoff, bewirkt.
  • Dasselbe wird beim Erkennen von Flaschen erreicht. Hier wird jedoch die neue Programmoption "BottleClean" vorgewählt, die eine zusätzliche Zwischenspülphase vor der Klarspülphase einlegt, um eine Wiederanschmutzung gerade bei flaschenähnlichen Gefäßen zu vermeiden.
  • Diese drei Anwendungsfälle sind individuell durch die Nutzer zu- und abwählbar, sowie vorgeschlagene Optionen vor einem Spülgang auch wieder entfernbar, zum Beispiel weil beladene Töpfe und Pfannen keine hartnäckige Anschmutzung aufweisen. Darüber hinaus ist es möglich, auch für die automatische Optionsanwahl Schwellwerte einstellen zu lassen. Hier dient alternativ zur prozentualen Beladung auch die Anzahl der erkannten Objekte als Schwelle, sodass zum Beispiel erst ab drei Kunststoffbehältern die Option "Extra Trocken" automatisch angewählt wird.
  • Experimentell wird darüber hinaus noch ein weiterer, technischer Anwendungsfall mit der Steuervorrichtung 120 identifiziert. Wird die Kamera 110 mit einem großen Objekt verstellt, sodass große Bereiche zum Beispiel des Unterkorbes 115 oder sogar nicht mehr sicher eingesehen werden können, siehe Figur 23 bis 25, um die vorgestellten Anwendungsfälle erfüllen zu können, so kann am Reinigungsgerät 100 und/oder in der App eine entsprechende Warnmeldung ausgegeben werden und die Nutzer können durch Umräumen der Beladung selbst tätig werden, um das Problem zu beheben.
  • Eine Verdeckung der Kamera 110 liegt höchstwahrscheinlich vor, wenn nur wenige Objekte im Innenraum 105 erkannt werden, die durchschnittliche Objektgröße aber überdurchschnittlich groß ausfällt. Bislang wurde, je nach verarbeitetem Bild, eine durchschnittliche Objektgröße von bis zu sechs Prozent Gesamtbildfläche beobachtet. Ist von der Steuervorrichtung 120 beispielsweise nur ein Objekt im Bild zu erkennen, nimmt dieses aber einen Großteil der Gesamtbildfläche ein (> 50 Prozent), so liegt wahrscheinlich eine Verdeckung der Kamera 110 vor. Die Nutzer haben in einem solchen Fall die Wahl, die Verdeckung der Kamera 110 so gut es geht durch Umräumen der Beladung zu beheben, oder diesen Umstand hinzunehmen und möglicherweise auf die Erfüllung der oben beschriebenen Anwendungsfälle zu verzichten, bis zum Beispiel nach einem manuell durchgeführten Spülgang die Maschine wieder ausgeräumt wurde.
  • Der hier vorgestellte Ansatz zeigt die vielseitige Einsetzbarkeit einer Steuervorrichtung 120 für verschiedenste Anwendungsfälle mit der Kamera 110 und bietet damit einen hohe Nutzerzufriedenheit. Der hier vorgestellte Ansatz ist ressourcen- und aufwandschonend. Dadurch gleichbleibende Entwicklungsaufwände erlauben kalkulierbarere Aufwände für den Betrieb und die Pflege. Darüber hinaus sind die Anwendungsfälle mit diesem Modellansatz leicht individualisierbar und für die Nutzer transparenter kommunizierbar.
  • Figur 2 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 1, mit Ausnahme dessen, dass ein Objektbereich 200 in dem Innenraum 105 bestimmt ist.
  • Der Objektbereich 200 ist unter Verwendung des in Figur 1 dargestellten Bildes bestimmt und repräsentiert mindestens ein in dem Bild aus Figur 1 abgebildetes Objekt. Gemäß dem hier gezeigten Ausführungsbeispiel ist der Sprüharm 130 als Objektbereich 200 bestimmt. Genauer gesagt ist der Objektbereich 200 als Polygon um den Sprüharm 130 bestimmt. In anderen Worten ausgedrückt zeigt Figur 2 den Objektbereich 200, der auch als bounding box bezeichnet werden kann, den die Steuervorrichtung, die auch als Detektor-Modell bezeichnet werden kann, erkennt.
  • Der Objektbereich 200, der auch als Bounding Box bezeichnet werden kann, nimmt lediglich beispielhaft eine Bildfläche von 35 Prozent der Gesamtbildfläche ein.
  • Figur 3 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 1, mit Ausnahme dessen, dass das aufgenommene Bild aus Figur 1 und der Objektbereich 200 aus Figur 2 überlagert dargestellt sind.
  • Figur 4 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 1, mit Ausnahme dessen, dass ein Teller 405 in dem Unterkorb 115 angeordnet ist.
  • Figur 5 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 4, mit Ausnahme dessen, dass der Teller 405 als ein weiterer Objektbereich 500 bestimmt ist. Dabei nimmt der weitere Objektbereich 500 lediglich beispielhaft eine Bildfläche von 10 Prozent der Gesamtbildfläche ein.
  • Figur 6 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 4, mit Ausnahme dessen, dass das aufgenommene Bild aus Figur 4 und die Objektbereiche 200, 500 aus Figur 5 überlagert dargestellt sind.
  • In anderen Worten ausgedrückt ist hinten rechts im Unterkorb 115 ein einzelner Teller 405 mit beispielhaft ca. zehn Prozent der Gesamtbildfläche beladen. Figur 4, Figur 5 und die hier dargestellte Überlagerung ist entsprechend angepasst. Figur 7 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 4, mit Ausnahme dessen, dass zusätzlich ein weiterer Teller 705 in dem Unterkorb 115 angeordnet ist.
  • Figur 8 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 7, mit Ausnahme dessen, dass der weitere Teller 705 als ein zusätzlicher Objektbereich 800 bestimmt ist. Dabei nimmt der zusätzliche Objektbereich 800 lediglich beispielhaft eine Bildfläche von 10 Prozent der Gesamtbildfläche ein.
  • Figur 9 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 7, mit Ausnahme dessen, dass das aufgenommene Bild aus Figur 7 und die Objektbereiche 200, 500, 700 aus Figur 8 überlagert dargestellt sind.
  • Gegenüber Figur 6 wurde hier ein weiterer einzelner Teller 705, ebenfalls mit ca. 10 % Flächenanteil hinten links im Unterkorb beladen. Das "Foto" aus Figur 7, die Bounding Box-Darstellung aus Figur 8 und die mittige Überlagerung beider wurden entsprechend in Figur 9 angepasst.
  • Figur 10 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 7, mit Ausnahme dessen, dass zusätzlich eine Tasse 1005 in dem Oberkorb 125 angeordnet ist.
  • Figur 11 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 10, mit Ausnahme dessen, dass die Tasse 1005 als ein vierter Objektbereich 1100 bestimmt ist. Dabei nimmt der vierte Objektbereich 1100 lediglich beispielhaft eine Bildfläche von 4 Prozent der Gesamtbildfläche ein.
  • Figur 12 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 10, mit Ausnahme dessen, dass das aufgenommene Bild aus Figur 10 und die Objektbereiche 200, 500, 700, 1100 aus Figur 11 überlagert sind.
  • Gegenüber Figur 9 wurde hier eine einzelne Tasse 1005 mit beispielhaft ca. vier Prozent Flächenanteil links im Oberkorb beladen. Das "Foto" links aus Figur 10, die Bounding Box-Darstellung aus Figur 11 und die Überlagerung beider wurden entsprechend in Figur 12 angepasst.
  • Figur 13 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 10, mit Ausnahme dessen, dass zusätzlich zu der Tasse 1005 weitere Tassen 1305, 1315, 1325 in dem Oberkorb 125 und zusätzlich zu dem weiteren Teller 705 weitere Teller 1335 in dem Unterkorb 115 angeordnet sind.
  • Figur 14 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 13, mit Ausnahme dessen, dass die zweite Tasse 1305 als fünfter Objektbereich 1400, die dritte Tasse 1315 als sechster Objektbereich 1410 und die vierte Tasse 1325 als siebter Objektbereich 1420 bestimmt ist. Zudem sind die weiteren Teller 1335 als achter Objektbereich 1430 bestimmt. Dabei sind die Teller 1335, im Gegensatz zu den Tassen 1005, 1305, 1315, 1325, als ein Objektbereich 1430 zusammengefasst, da sie sich in dem von der Kamera aufgenommenem Bild vollständig überlagern. Dabei nimmt der achte Objektbereich 1430 lediglich beispielhaft eine Bildfläche von 21 Prozent der Gesamtbildfläche ein. Der vierte Objektbereich 1100 der Tasse 1005 nimmt lediglich beispielhaft eine Bildfläche von sechs Prozent der Gesamtbildfläche ein und der fünfte Objektbereich 1400 der zweiten Tasse 1305 eine Bildfläche von lediglich beispielhaft vier Prozent der Gesamtbildfläche.
  • Figur 15 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 13, mit Ausnahme dessen, dass das aufgenommene Bild aus Figur 13 und die Objektbereiche 200, 500, 700, 1100, 1400, 1410, 1420, 1430 aus Figur 14 überlagert dargestellt sind.
  • Gegenüber Figur 12 wurden weitere Tassen 1305, 1315, 1325 mit ca. vier Prozent und sechs Prozent Gesamtbildflächenanteil links im Oberkorb, sowie weitere Teller 1335 mit nun ca. 21 Prozent Gesamtbildflächenanteil rechts im Unterkorb beladen. Das "Foto" links aus Figur 13, die Bounding Box-Darstellung aus Figur 14 und die Überlagerung beider wurden entsprechend in Figur 15 angepasst.
  • Figur 16 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 13, mit Ausnahme dessen, dass zusätzlich zu dem Spülgut aus den vorangegangenen Figuren eine Pfanne 1605 in dem Unterkorb 115 angeordnet ist.
  • Figur 17 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 16, mit Ausnahme dessen, dass die Pfanne 1605 als neunter Objektbereich 1700 bestimmt ist. Dabei nimmt der neunte Objektbereich 1700 lediglich beispielhaft eine Bildfläche von 35 Prozent der Gesamtbildfläche ein. Der neunte Objektbereich 1700 verdeckt teilweise den achten Objektbereich 1430, wobei der achte Objektbereich 1430 hier nur noch eine Bildfläche von lediglich beispielhaft 18 Prozent der Gesamtbildfläche einnimmt, im Gegensatz zu Figur 14.
  • Figur 18 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 16, mit Ausnahme dessen, dass das aufgenommene Bild aus Figur 16 und die Objektbereiche 200, 500, 700, 1100, 1400, 1410, 1420, 1430, 1700 aus Figur 17 überlagert dargestellt sind.
  • Gegenüber Figur 15 wurde im Unterkorb nun zusätzlich eine Pfanne 1605 mit ca. 35 Prozent Gesamtbildflächenanteil beladen. Die Bounding Box um die Teller 1335 links im Unterkorb schrumpft durch die Verdeckung auf ca. 18 Prozent. Das "Foto" aus Figur 16, die Bounding Box-Darstellung aus Figur 17 und die Überlagerung beider wurden entsprechend in Figur 18 angepasst.
  • Figur 19 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 17, mit Ausnahme dessen, dass der neunte Objektbereich weggelassen ist.
  • Figur 20 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 19, mit Ausnahme dessen, dass die Objektbereiche der Tassen zu einem Objektbereich 2000 zusammengefügt sind. Dabei nimmt der Objektbereich 2000 lediglich beispielhaft eine Bildfläche von 12 Prozent der Gesamtbildfläche ein. Die Objektbereiche der Tassen sind zu dem Objektbereich 2000 zusammengefügt, da als Parameter eine identische Art der Objekte, hier Tassen, ermittelt wird. Der Objektbereich 2000 ist somit als Beladung in dem Oberkorb identifiziert.
  • Auf die Bounding Boxen / Polygone der Beladungsteile aus Figur 19 wurde klassenweise der Vereinigungsoperator angewandt. Daraus resultiert die Vereinigung der Tassen-Polygone mit nun 12 Prozent überlappungsfreiem Gesamtbildflächenanteil im Oberkorb zu einem komplexeren Polygon, dem Objektbereich 2000. Da sich die Bounding Boxen / Polygone der Teller 705, 1335 nicht überlappen, werden diese weiterhin als getrennt behandelt.
  • Figur 21 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 17, mit Ausnahme dessen, dass die Objektbereiche der Pfanne und der Teller zu einem Objektbereich 2100 zusammengefügt sind. Die Objektbereiche der Tassen sind weiterhin zu dem Objektbereich 2000 zusammengefügt. Die Objektbereiche der Pfanne und der Teller sind zu dem Objektbereich 2100 zusammengefügt, da als Parameter eine identische Verortung der Objekte, hier im Unterkorb, ermittelt wird. Der Objektbereich 2100 nimmt lediglich beispielhaft eine Bildfläche von 52 Prozent der Gesamtbildfläche ein.
  • Auf die Bounding Boxen / Polygone der Beladungsteile aus Figur 17 wurde der Vereinigungsoperator auf die gesamte Beladung angewandt. Daraus resultiert die Vereinigung der Tassen-Polygone zu allgemeiner Beladung mit 12 Prozent Gesamtbildflächenanteil im Oberkorb, sowie die Vereinigung der Teller und der Pfanne im Unterkorb zu jeweils einem komplexeren Polygon mit ca. 52 Prozent Gesamtbildflächenanteil. Gäbe es eine Überlappung zwischen beiden Polygonen, wären sie zu einem einzigen vereinigt worden.
  • Figur 22 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 22, mit Ausnahme dessen, dass eine Trennlinie 2205 zwischen den Objektbereichen 2000, 2100 gezogen ist. Die Trennlinie 2205 stellt die untere Linie des Objektbereichs 200 des Sprüharms dar. Der Objektbereich 2000 ist somit als Oberkorb identifiziert und der Objektbereich 2100 als Unterkorb, wobei der Objektbereich 2100 lediglich beispielhaft eine Bildfläche von nun 80 Prozent der unteren Hälfte des Bildes einnimmt.
  • Wie in Figur 21 wurde auf die Bounding Boxen / Polygone der Beladungsteile aus Figur 17 der Vereinigungsoperator auf die Gesamtbeladung angewandt. Die untere Linie der Sprüharm-Bounding Box wurde genutzt, um die Polygone der gesamten Beladung mittels Cropping in Polygone für den Ober- und Unterkorb zu differenzieren. Das Oberkorb-Polygon hat nun einen angenommen Bildflächenanteil von ca. 18 Prozent, bezogen auf die obere Bildfläche, analog das Polygon im Unterkorb ca. 80 Prozent, bezogen auf die untere Bildfläche.
  • Figur 23 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 1 mit Ausnahme dessen, dass ein großflächiges Objekt 2305 die Kamera zumindest teilweise verdeckt.
  • Figur 24 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 23 mit Ausnahme dessen, dass ein Objektbereich 2400 in dem Innenraum 105 bestimmt ist. Der Objektbereich 2400 nimmt lediglich beispielhaft eine Bildfläche von 60 Prozent der Gesamtbildfläche ein.
  • Figur 25 zeigt eine Darstellung eines Ausführungsbeispiels eines Reinigungsgeräts 100. Das Reinigungsgerät 100 ähnelt dem Reinigungsgerät aus Figur 23, mit Ausnahme dessen, dass das aufgenommene Bild aus Figur 23 und der Objektbereich 2400 aus Figur 24 überlagert dargestellt sind.
  • In Figur 23 ist ein schematisches Foto von dem Innenraum 105 skizziert, der mit einem großen, nicht näher spezifizierbaren Objekt 2305 einen Großteil (> 50 Prozent) des Sichtfeldes der Kamera verstellt. Figur 24 zeigt nur die Bounding Box mit ca. 60 Prozent Gesamtbildflächenanteil, den das Detektor-Modell im Foto erkennen würde. Figur 25 zeigt die Überlagerung beider Informationen.
  • Figur 26 zeigt ein Ablaufdiagramm eines Ausführungsbeispiels eines Verfahrens 2600 zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät. Bei dem Reinigungsgerät handelt es sich um ein Reinigungsgerät aus einer der vorstehend beschriebenen Figuren oder ein ähnliches Reinigungsgerät.
  • Das Verfahren 2600 umfasst einen Schritt 2605 des Einlesens eines Bildsignals, einen Schritt 2610 des Bestimmens eines Objektbereichs, einen Schritt 2615 des Ermittelns eines Parameters und einen Schritt 2620 des Bereitstellens eines Anpassungssignals. Optional umfasst das Verfahren 2600 einen Schritt 2625 des Ausgebens eines Warnsignals sowie einen Schritt 2630 des Überlagerns des Objektbereichs mit einem weiteren Objektbereich.
  • Im Schritt 2605 des Einlesens wird das Bildsignal über eine Schnittstelle zu einer Kamera eingelesen. Im Schritt 2610 des Bestimmens wird der Objektbereich unter Verwendung des Bildsignals bestimmt. Gemäß einem Ausführungsbeispiel wird ein weiterer Objektbereich unter Verwendung des Bildsignals bestimmt.
  • Im Schritt 2615 des Ermittelns wird der Parameter unter Verwendung des Objektbereichs ermittelt. Gemäß einem Ausführungsbeispiel wird ein weiterer Parameter unter Verwendung des weiteren Objektbereichs ermittelt.
  • Im Schritt 2620 des Bereitstellens wird unter Verwendung des Parameters das Anpassungssignal zum Anpassen und/oder Verändern und/oder Starten eines Reinigungsprogramms für das Reinigungsgerät bereitgestellt. Das Anpassungssignal wird gemäß einem Ausführungsbeispiel zusätzlich unter Verwendung des weiteren Parameters bereitgestellt.
  • Der Schritt 2625 des Ausgebens wird ausgeführt, wenn im Schritt 2615 des Ermittelns ein Parameter ermittelt wird, der eine vordefinierte Größe des Objektbereichs übersteigt.
  • Im Schritt 2610 des Bestimmens werden der Objektbereich und/oder der weitere Objektbereich als Polygon bestimmt. Im Schritt 2630 des Überlagerns werden der Objektbereich und der weitere Objektbereich überlagert, wenn im Schritt 2615 des Ermittelns als Parameter und weitere Parameter Werte ermittelt werden, die jeweils identische Parameter repräsentieren. Beispielsweise repräsentieren die Parameter eine identische Art, beispielsweise eine Tasse.
  • Gemäß einem Ausführungsbeispiel wird im Schritt 2610 des Bestimmens ein zusätzlicher Objektbereich bestimmt, der ein zusätzliches in dem Bild abgebildetes Objekt repräsentiert. Im Schritt 2615 des Ermittelns wird dann ein zusätzlicher Parameter unter Verwendung des zusätzlichen Objektbereichs ermittelt. Im Schritt 2620 des Bereitstellens wird dann das Anpassungssignal unter Verwendung des Parameters und des zusätzlichen Parameters bereitgestellt.
  • Figur 27 zeigt ein Blockschaltbild eines Ausführungsbeispiels einer Steuervorrichtung 120 zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät. Die Steuervorrichtung 120 ist beispielsweise ausgebildet, um das in Figur 26 beschriebene Verfahren oder ein ähnliches Verfahren anzusteuern.
  • Die Steuervorrichtung 120 weist eine Einheit 2705 zum Einlesen eines Bildsignals 2708, eine Einheit 2710 zum Bestimmen eines Objektbereichs 200, eine Einheit 2715 zum Ermitteln eines Parameters 2718 und eine Einheit 2720 zum Bereitstellen eines Anpassungssignals 2722 auf. Optional weist die Steuervorrichtung 120 eine Einheit 2725 zum Ausgeben eines Warnsignals 2728 sowie eine Einheit 2730 zum Überlagern des Objektbereichs 200 mit einem weiteren Objektbereich auf. Alternativ können die Einheit 2710 zum Bestimmen eines Objektbereichs 200, die Einheit 2715 zum Ermitteln eines Parameters 2718 und ggf. auch die Einheit 2730 zum Überlagern des Objektbereichs 200 mit einem weiteren Objektbereich auch von einem externen, d.h. entfernt vom Reinigungsgerät, oder in der Cloud verorteten Server, der über eine Internetverbindung mit dem Reinigungsgerät in Verbindung steht, bereitgestellt werden.
  • Das Bildsignal 2708 wird über eine Schnittstelle zu der Kamera 110 eingelesen und der Objektbereich 200 wird unter Verwendung des Bildsignals 2708 bestimmt.
  • Gemäß einem Ausführungsbeispiel ist die Einheit 2710 zum Bestimmen ausgebildet, um einen weiteren Objektbereich 500 zu bestimmen. Die Objektbereiche 200, 500 werden nachfolgend in der Einheit 2730 überlagert, wenn zuvor in der Einheit 2715 zum Ermitteln identische Parameter 2718, 2738 der Objektbereiche 200, 500 ermittelt werden.
  • Gemäß einem Ausführungsbeispiel ist die Einheit 2715 zum Ermitteln ausgebildet, um einen zusätzlichen Parameter 2748 unter Verwendung eines zusätzlichen Objektbereichs 800, der zuvor in der Einheit 2710 bestimmt wird, zu ermitteln.
  • Die Einheit 2725 zum Ausgeben ist ausgebildet, um das Warnsignal 2728 auszugeben, wenn in der Einheit 2715 zum Ermitteln ein Parameter ermittelt wird, der eine vordefinierte Größe des Objektbereichs übersteigt.
  • Die Einheit 2720 stellt das Anpassungssignal 2722 unter Verwendung des zumindest eines Parameters 2718, 2738, 2748 bereit.

Claims (12)

  1. Verfahren (2600) zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät (100), wobei das Reinigungsgerät (100) eine Kamera (110) zum Erfassen eines Innenraums (105) aufweist, wobei das Verfahren (2600) die folgenden Schritte umfasst:
    Einlesen (2605) eines Bildsignals (2708) über eine Schnittstelle zu der Kamera (110), wobei das Bildsignal (2708) ein von der Kamera (110) aufgenommenes Bild repräsentiert;
    Bestimmen (2610) eines Objektbereichs (200) unter Verwendung des Bildsignals (2708), wobei der Objektbereich (200) mindestens ein in dem Bild abgebildetes Objekt repräsentiert;
    Ermitteln (2615) eines Parameters (2718) unter Verwendung des Objektbereichs (200), wobei der Parameter (2718) eine Art und/oder eine Größe und/oder einen Zustand und/oder einen Standort des abgebildeten Objekts in dem Innenraum (105) des Reinigungsgeräts (100) repräsentiert; und
    Bereitstellen (2620) eines Anpassungssignals (2722) zum Anpassen und/oder Verändern eines Reinigungsvorgangs unter Verwendung des Parameters (2718).
  2. Verfahren (2600) gemäß Anspruch 1, mit einem Schritt (2625) des Ausgebens eines Warnsignals (2728), wenn im Schritt (2615) des Ermittelns ein Parameter ermittelt wird, der eine vordefinierte Größe des Objektbereichs (200) übersteigt.
  3. Verfahren (2600) gemäß einem der vorangegangenen Ansprüche, wobei im Schritt (2610) des Bestimmens der Objektbereich (200) als Polygon um das in dem Bild abgebildete Objekt bestimmt wird.
  4. Verfahren (2600) gemäß einem der vorangegangenen Ansprüche, wobei im Schritt (2610) des Bestimmens ein weiterer Objektbereich (500) bestimmt wird, der ein weiteres in dem Bild abgebildetes Objekt repräsentiert, wobei im Schritt (2615) des Ermittelns ein weiterer Parameter (2738) unter Verwendung des weiteren Objektbereichs (500) ermittelt wird, wobei im Schritt (2620) des Bereitstellens das Anpassungssignal (2722) unter Verwendung des Parameters (2718) und des weiteren Parameters (2738) bereitgestellt wird.
  5. Verfahren (2600) gemäß einem der vorangegangenen Ansprüche, wobei im Schritt (2610) des Bestimmens der weitere Objektbereich (500) als Polygon um das in dem Bild abgebildete weitere Objekt bestimmt wird.
  6. Verfahren (2600) gemäß einem der vorangegangenen Ansprüche, mit einem Schritt (2730) des Überlagerns des Objektbereichs (200) und des weiteren Objektbereichs (500), wenn im Schritt (2615) des Ermittelns als Parameter (2718) und weitere Parameter (2738) Werte ermittelt werden, die jeweils identische Parameter repräsentieren.
  7. Verfahren (2600) gemäß einem der vorangegangenen Ansprüche, wobei im Schritt (2610) des Bestimmens ein zusätzlicher Objektbereich (800) bestimmt wird, der ein zusätzliches in dem Bild abgebildetes Objekt repräsentiert, wobei im Schritt (2615) des Ermittelns ein zusätzlicher Parameter (2748) unter Verwendung des zusätzlichen Objektbereichs (800) ermittelt wird, wobei im Schritt (2620) des Bereitstellens das Anpassungssignal (2722) unter Verwendung des Parameters (2718) und des zusätzlichen Parameters (2748) bereitgestellt wird.
  8. Steuervorrichtung (120), die ausgebildet ist, um die Schritte des Verfahrens (2600) gemäß einem der vorangegangenen Ansprüche 1 bis 7 in entsprechenden Einheiten (2705, 2710, 2715, 2720, 2725, 2730) auszuführen und/oder anzusteuern.
  9. Reinigungsgerät (100) mit einer Kamera (110) zum Erfassen eines Innenraums (105) des Reinigungsgeräts (100) und einer Steuervorrichtung (120) gemäß Anspruch 8.
  10. Reinigungsgerät (100) gemäß Anspruch 9, wobei das Reinigungsgerät (100) eine Funkschnittstelle (140) zum Koppeln des Reinigungsgeräts (100) mit einer externen Zentraleinrichtung zum Steuern des Reinigungsgeräts (100) aufweist.
  11. Computer-Programmprodukt mit Programmcode zur Durchführung des Verfahrens (2600) nach einem der vorangegangenen Ansprüche 1 bis 7, wenn das Computer-Programmprodukt auf einer Steuervorrichtung (120) ausgeführt wird.
  12. Maschinenlesbares Speichermedium, auf dem das Computerprogramm nach Anspruch 11 gespeichert ist.
EP24185203.7A 2023-07-04 2024-06-28 Verfahren und steuervorrichtung zum anpassen eines reinigungsvorgangs in einem reinigungsgerät, reinigungsgerät Pending EP4487749A1 (de)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
BE20235556A BE1031766B1 (de) 2023-07-04 2023-07-04 Verfahren und Steuervorrichtung zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät, Reinigungsgerät

Publications (1)

Publication Number Publication Date
EP4487749A1 true EP4487749A1 (de) 2025-01-08

Family

ID=88689699

Family Applications (1)

Application Number Title Priority Date Filing Date
EP24185203.7A Pending EP4487749A1 (de) 2023-07-04 2024-06-28 Verfahren und steuervorrichtung zum anpassen eines reinigungsvorgangs in einem reinigungsgerät, reinigungsgerät

Country Status (2)

Country Link
EP (1) EP4487749A1 (de)
BE (1) BE1031766B1 (de)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020226922A1 (en) * 2019-05-07 2020-11-12 Illinois Tool Works Inc. System for optical wash item recognition in dishwashers, method for optical wash item recognition, dishwasher with an optical wash item recognition system and method for operating such a dishwasher
EP3892182A1 (de) * 2020-04-09 2021-10-13 Candy S.p.A. Verfahren und system zur bestimmung von beladungsinformationen eines geschirrspülers und zur vorbereitung eines geschirrspülwaschablaufs
WO2021254758A1 (de) * 2020-06-18 2021-12-23 BSH Hausgeräte GmbH System mit einer geschirrspülmaschine, verfahren zum betreiben einer geschirrspülmaschine und computerprogrammprodukt

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020226922A1 (en) * 2019-05-07 2020-11-12 Illinois Tool Works Inc. System for optical wash item recognition in dishwashers, method for optical wash item recognition, dishwasher with an optical wash item recognition system and method for operating such a dishwasher
EP3892182A1 (de) * 2020-04-09 2021-10-13 Candy S.p.A. Verfahren und system zur bestimmung von beladungsinformationen eines geschirrspülers und zur vorbereitung eines geschirrspülwaschablaufs
WO2021254758A1 (de) * 2020-06-18 2021-12-23 BSH Hausgeräte GmbH System mit einer geschirrspülmaschine, verfahren zum betreiben einer geschirrspülmaschine und computerprogrammprodukt

Also Published As

Publication number Publication date
BE1031766A1 (de) 2025-01-29
BE1031766B1 (de) 2025-02-06

Similar Documents

Publication Publication Date Title
DE102020112205B4 (de) Geschirrspülmaschine mit einer Bilderfassungseinrichtung und Verfahren zum Betreiben einer derartigen Geschirrspülmaschine
DE102011053555B4 (de) Wiederverwendung von Spülflüssigkeit in einem Geschirrspüler
DE102011122900B3 (de) Wiederverwendung von Spülflüssigkeit in einem Geschirrspüler
EP2510863B1 (de) Geschirrspülmaschine mit variabler Direktbesprühung
EP4076123B1 (de) Geschirrspülmaschine, anordnung mit einer geschirrspülmaschine und verfahren zum betreiben einer geschirrspülmaschine
WO2017032629A1 (de) Wasserführendes haushaltsgerät und verfahren zum betreiben eines wasserführenden haushaltsgeräts
DE102017126856A1 (de) Spülmaschine sowie Verfahren zum Reinigen von Spülgut in einer Spülmaschine
DE102005014353A1 (de) Transportspülmaschine und Verfahren hierfür
DE102008037344A1 (de) Transportspülmaschine und Verfahren zum Betreiben einer Transportspülmaschine
DE102019108395A1 (de) Verfahren und Vorrichtung zum Betreiben eines Geschirrspülers und Geschirrspüler und/oder eine Kamera mit einer Vorrichtung
DE102019111848B4 (de) System zur optischen Spülguterkennung bei Spülmaschinen, Verfahren zur optischen Spülguterkennung, Spülmaschine mit einem optischen Spülguterkennungssystem sowie Verfahren zum Betreiben einer solchen Spülmaschine
EP3530172B1 (de) Spülmaschine mit beladungserkennung
BE1031766B1 (de) Verfahren und Steuervorrichtung zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät, Reinigungsgerät
EP4175526A1 (de) System mit einer geschirrspülmaschine und verfahren zum betreiben einer geschirrspülmaschine
DE102023117622A1 (de) Verfahren und Steuervorrichtung zum Anpassen eines Reinigungsvorgangs in einem Reinigungsgerät, Reinigungsgerät
DE2442619C3 (de) Geschirspülmaschine, insbesondere zum Reinigen gewerblichen Geschirrs
EP4027854B1 (de) Haushaltsgerät, system mit einem haushaltsgerät und verfahren zum betreiben eines haushaltsgeräts
EP4110156A1 (de) System mit einer geschirrspülmaschine und verfahren zum betreiben einer geschirrspülmaschine
EP3626140A1 (de) Elektronisches gerät, vorzugsweise haushaltsgerät, besonders vorzugsweise getränkebereiter, insbesondere kaffeevollautomat
EP4151137B1 (de) Verfahren zum überwachen eines beladungszustands eines spülgeräts und spülgerät
EP4331466B1 (de) Mobile reinigungsvorrichtung, kochfeldeinheit, verfahren zum betreiben einer mobilen reinigungsvorrichtung und verfahren zum betreiben einer kochfeldeinheit
BE1031788B1 (de) Verfahren und Steuereinheit zum Betreiben eines Reinigungsgerätes und Reinigungsgerät
BE1030060B1 (de) Bedienvorrichtung und Verfahren zum Bedienen eines Reinigungsgeräts und Reinigungsgerät
EP3613324B1 (de) Verfahren zum betreiben einer geschirrspülmaschine in einem gastronomiebetrieb
WO2025190614A1 (de) System zur optischen spülguterkennung bei einer spülmaschine

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION HAS BEEN PUBLISHED

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC ME MK MT NL NO PL PT RO RS SE SI SK SM TR

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20250708