DE102018115153A1 - System und Verfahren zum Betreiben von mindestens einem Hausgerät - Google Patents

System und Verfahren zum Betreiben von mindestens einem Hausgerät Download PDF

Info

Publication number
DE102018115153A1
DE102018115153A1 DE102018115153.5A DE102018115153A DE102018115153A1 DE 102018115153 A1 DE102018115153 A1 DE 102018115153A1 DE 102018115153 A DE102018115153 A DE 102018115153A DE 102018115153 A1 DE102018115153 A1 DE 102018115153A1
Authority
DE
Germany
Prior art keywords
user
operating
detection
emotions
device system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102018115153.5A
Other languages
English (en)
Inventor
Stefan Rüther
Matthias Stahl
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Miele und Cie KG
Original Assignee
Miele und Cie KG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Miele und Cie KG filed Critical Miele und Cie KG
Priority to DE102018115153.5A priority Critical patent/DE102018115153A1/de
Publication of DE102018115153A1 publication Critical patent/DE102018115153A1/de
Pending legal-status Critical Current

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00Arrangement or mounting of control or safety devices
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24CDOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C15/00Details
    • F24C15/20Removing cooking fumes
    • F24C15/2021Arrangement or mounting of control or safety systems
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24CDOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00Stoves or ranges heated by electric energy
    • F24C7/08Arrangement or mounting of control or safety devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/63Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2400/00General features of, or devices for refrigerators, cold rooms, ice-boxes, or for cooling or freezing apparatus not covered by any other subclass
    • F25D2400/36Visual displays
    • F25D2400/361Interactive visual displays
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2700/00Means for sensing or measuring; Sensors therefor
    • F25D2700/04Sensors detecting the presence of a person
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/011Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Child & Adolescent Psychology (AREA)
  • General Physics & Mathematics (AREA)
  • Hospice & Palliative Care (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Thermal Sciences (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Die Erfindung betrifft ein System und Verfahren zum Betreiben von mindestens einem Hausgerät, wie Wäschebehandlungs- und Spülmaschine, Gerät für das Garen von Nahrungsmitteln, Dunstabzugshauben, Kühl- und Gefriergerät, Getränkebereiter u. dergl., wobei das Gerät (1) eine Steuerungsanordnung mit einer Steuereinrichtung (10) für die Steuerung der bestimmungsgemäß vorgesehenen Betriebsabläufe, eine Bedien-und Anzeigevorrichtung (20) für die Einstellung und Anzeige von Betriebsfunktionen aufweist.Bei einem derartigen Gerätesystem und Verfahren ist erfindungsgemäß vorgesehen, dass die Steuerungsanordnung des Gerätesystems eine Einrichtung (5) umfasst, mittels der die vom Benutzer während der Gerätenutzung ausgehenden Emotionen erkannt und erfasst werden.Durch die gemäß der Erfindung ausgebildete Erfassungseinrichtung (5) zur Emotionserkennung wird in vorteilhafter Weise erreicht, dass erkannte negative oder auch positive Benutzeremotionen berücksichtigt werden können, um abhängig von der aktuellen Stimmung des Gerätenutzers eine Änderung des jeweiligen Prozessablaufs im Gerät herbeiführen zu können.

Description

  • Die Erfindung betrifft ein System zum Betreiben von mindestens einem Hausgerät, wie Wäschebehandlungs- und Spülmaschine, Gerät für das Garen von Nahrungsmitteln, Dunstabzugshauben, Kühl- und Gefriergerät, Getränkebereiter u. dergl., wobei das Gerät eine Steuerungsanordnung mit einer Steuereinrichtung für die Steuerung der bestimmungsgemäß vorgesehenen Betriebsabläufe, einer Bedien- und Anzeigevorrichtung für die Einstellung und Anzeige von Betriebsfunktionen aufweist.
  • Im Zuge der aktuell fortschreitenden Entwicklung nahezu auf allen Gebieten der Technik und des täglichen Lebens im allgemeinen, gewinnt die Digitalisierung, Vernetzung von Steuerungs- und Kommunikationssystemen, sowie die Einbindung von künstlichen Intelligenz- und Assistenzsystemen in allgemeine Steuerungs- und Automatisierungsprozesse zunehmend an Bedeutung.
  • Auch im Bereich der im Haushalt eingesetzten Geräte ist diese Entwicklung zu beobachten. Die Digitalisierung für die im täglichen Gebrauch befindlichen Hausgeräte, die Vernetzung von Haushaltgeräten untereinander sowie mit anderen Kommunikationsgeräten, die Verbindung der Gerätesteuerung mit dem Internet, die Nutzung von Smart-Home-Systemen im Haushalt und die Einbindung von Assistenzsystemen inklusive der Nutzung von neuronalen Netzwerken wird nach augenblicklich erkennbarer Tendenz immer mehr in die Steuerungsprozesse der Geräte Eingang finden, um den Benutzer bei der Gerätenutzung unterstützen und um darüber Bedienungsvorgänge und Prozessabläufe beeinflussen zu können. In dieser Richtung sind auch bereits aus der praktischen Anwendung sowie aus der Patentschriftenliteratur einige Lösungsvorschläge bekannt geworden.
  • So wird zum Beispiel in DE10 2016 109 880 A1 ein für ein Küchengerät einsetzbares Verfahren und eine dazu verwendbare Vorrichtung beschrieben, womit eine über eine Benutzerschnittstelle darstellbare Kochanweisung beeinflusst werden kann. Das Verfahren hat dabei im Wesentlichen zum Inhalt, dass während der Zubereitung eines Gerichts mit einer Kochanweisung ein Stresswert des Benutzers unter Verwendung von einem Stressindikator erfasst und bestimmt wird, wobei davon abhängig über eine Benutzerschnittstelle eine durch den Stresswert beeinflusste Kochanweisung darstellbar ist. Als Stressindikatoren werden beispielsweise u.a. die Bewegungsdynamik des Benutzers und die Fehlerhäufigkeit bei der Bedienungseingabe herangezogen. Mit dieser Verfahrensweise soll ein Assistenzsystem geschaffen werden, welches Stresssymptome des Benutzers beim Bedienen eines Küchengerätes erkennt und dem Benutzer dabei hilft, beispielsweise ein Kochrezept abzuändern oder neu zu gestalten.
  • Die Auswertung der vom Benutzer ausgehenden Stresssignale erfolgt bei dem vorgenannten Lösungsvorschlag aber quasi nur indirekt, und zwar allein aufgrund einer Auswertung der Art und Weise, wie die Bedienungsperson bei der Gerätenutzung rein mechanisch bzw. haptisch die Bedienungs- und Eingabebefehle ausgeführt hat. Dabei werden Schlussfolgerungen u.a. zum Beispiel aus der Schnelligkeit der hintereinander folgenden Eingaben, aus der Fehlerhäufigkeit in einer bestimmten Zeitdauer usw. getroffen. Die Emotionslage und der tatsächliche Gemütszustand, was sich durch die markante Gesichtsmimik, die sich ändernde Sprechcharakteristik und beispielsweise durch das körperliche Bewegungsverhalten der Bedienungsperson äußert, wird dabei nicht berücksichtigt.
  • Es wird somit zwar aufgrund der Analyse von rein mechanisch ablaufenden Bedienungsaktivitäten versucht, Stresssymptome des Nutzers erkennen zu können. Die Interaktion mit den Geräten bleibt aber bislang auf einer eher neutralen, allgemeingültigen Ebene beschränkt, ohne dass die körperlich unmittelbar vom Benutzer ausgehenden Emotionen berücksichtigt werden.
  • Vor dem Hintergrund des vorbeschriebenen Technikstandes stellt sich der Erfindung das Problem, die Steuerung und die Bedienbarkeit von Hausgeräten derart weiterzubilden, dass dem Benutzer eine Unterstützungsfunktion und ein weiteres Hilfsmittel bereitgestellt wird, durch das die allgemeine Nutzung und Handhabung eines oder mehrerer Gerätes zusätzlich erleichtert wird.
  • Erfindungsgemäß wird dieses Problem durch ein Gerätesystem mit den Merkmalen des Patentanspruchs 1 gelöst. Vorteilhafte Ausgestaltungen und Weiterbildungen der Erfindung ergeben sich aus den nachfolgenden Unteransprüchen. In Patentanspruch 13 wird ein Verfahren zum Betreiben eines erfindungsgemäß ausgebildeten Gerätesystems angegeben.
  • Bei der vorliegenden Erfindung wird in erster Linie von mindestens einem oder von mehreren Hausgeräten ausgegangen, die üblicherweise in einem Haushalt betrieben werden, wie zum Beispiel Wäschebehandlungs- und Spülmaschinen, Geräte für das Garen von Nahrungsmitteln wie Herde, Backöfen und Kochfelder, sowie Dunstabzugshauben, Kühl- und Gefriergeräte, Getränkebereiter u. dergl.. Unabhängig davon kann die Erfindung aber auch bei gleichartigen, im gewerblichen Bereich verwendeten Geräten realisiert werden.
  • Die Erfindung zielt dabei in vorteilhafter Weise ganz allgemein darauf ab, erkannte negative oder auch positive Benutzeremotionen zu berücksichtigen und die Stimmung des Gerätenutzers durch eine Änderung des jeweiligen Prozessablaufs für das Gerät positiv beeinflussen zu können. Dadurch lassen sich eine Reihe von Vorteilen für den Gebrauch der vorgenannten Hausgeräte generieren.
  • Dabei umfasst mindestens eines der Geräte eine Steuerungsanordnung, welche die übliche Steuereinrichtung für die Steuerung der bestimmungsgemäß vorgesehenen Betriebsabläufe, die Bedien- und Anzeigevorrichtung für die Einstellung und Anzeige von Betriebsfunktionen aufweist. In einer besonders vorteilhaften Ausgestaltungsform ist zudem vorgesehen, dass mindestens eines der Geräte mit einer Benutzerschnittstelle ausgerüstet ist, über die die Verbindung mit einem externen Kommunikationsgerät und/oder mit einem Smart-Home-System und/oder mit dem Internet herstellbar ist.
  • Für die Steuerungsanordnung eines erfindungsgemäß ausgebildeten Gerätes oder eines von mehreren Geräten gebildeten Gerätesystem ist eine Erfassungseinrichtung vorgesehen, die derart konfiguriert und eingerichtet ist, dass das vom Benutzer ausgehende emotionale Verhalten während des Bedienvorgangs am Gerät und/oder während des Anzeigevorgangs von Betriebsfunktionen für das Gerät und/oder bei Beendigung der Gerätenutzung erfasst, analysiert und ausgewertet werden kann, und dass abhängig von den emotional bedingten Ergebnissen durch die Steuerungsanordnung diese Prozessabläufe und Betriebsprogramme mit neu gestalteten Betriebsparametern für den weiteren Betrieb des Gerätes bereitgestellt werden. Bei der Einbindung des Gerätes in einem Smart-Home-System kann sogar der emotionale Zustand des Benutzers berücksichtigt werden, bevor er mit der Inbetriebnahme des jeweiligen Gerätes beginnt.
  • In vorteilhafter Ausführungsform kann die Aktivierung der neuen und/oder abgewandelten Prozessabläufe, der neuen Betriebsprogramme und/oder der abgewandelten Betriebsprogramme von der Zustimmung durch den Benutzer der Geräte abhängig gemacht werden. Der Benutzer kann somit entscheiden, ob er die vorgeschlagenen Änderungen akzeptieren will oder nicht.
  • Bei der praktischen Umsetzung der Erfindung ist es in zweckmäßiger Weise vorgesehen, dass die Erfassungseinrichtung zur Emotionserkennung signaltechnisch mit Softwareprodukten in Verbindung gebracht wird, die speziell dazu konfiguriert und eingerichtet sind, um emotionale Regungen und/oder das emotionale Verhalten einer Person erfassen und auswerten zu können. Insbesondere können visuell ablesbare Emotionen, zum Beispiel über die Körpersprache, über den Gesichtsausdruck und die Augenbewegung, Aufschlüsse über die emotionale Verfassung des Nutzers geben. Akustisch kann ebenfalls die emotionale Verfassung des Nutzers erfasst werden, in dem die Sprachcharakteristik des Benutzers über die Tonlage der Stimme, die Lautstärke und beispielsweise über die Wortwahl ausgewertet wird.
  • Das vom Benutzer ausgehende emotionale Verhalten wird in bevorzugter Ausgestaltungsform durch Mittel erfasst, die für eine akustische und visuelle Emotionserkennung konfiguriert und eingerichtet sind, und dass die von den Mitteln generierten audio-visuellen Signale entschlüsselt und als Anzeichen für Emotionen in Verbindung mit einer Auswerteeinheit analysiert und ausgewertet werden.
  • Das Gerätesystem für die akustische Emotionserkennung ist in zweckmäßiger Weise mit einem Mikrofon als Spracherfassungsvorrichtung und für die visuelle Emotionserkennung mit einer Kamera als Bilderfassungsvorrichtung ausgebildet.
  • Zudem sind noch weitere Erkennungssysteme verwendbar, durch die eine vom Benutzer ausgehende emotionale Reaktion während der Gerätenutzung unmittelbar oder auch indirekt über bestimmte Verhaltensmuster festgestellt werden kann, wie zum Beispiel durch die Auswertung eines Bewegungsdiagramms, einer Gestenanalyse oder einer bereits aus dem Stand der Technik bekannten Interaktionsauswertung.
  • Für die Emotionserkennung gibt es mittlerweile auch eine Vielzahl an Software-Lösungen, die zum Beispiel Gesichtserkennung, Blickrichtungen, Interaktion mit Webseiteninhalten, Sprach- und Tonalitätseigenschaften, Gestik, Bio-Feedback oder Ähnliches nutzen.
  • Optional wäre auch nach Zustimmung des Benutzers die Einbindung seiner von einer Fitness-Uhr erzeugten Daten bezüglich der Puls- und/oder Herzfrequenz denkbar. Außerdem kann über diese Schnittstelle und den Kommunikationsgeräten ein externer Dienste-Anbieter in den Steuerungsverbund des Gerätesystems mit seinen Apps oder Softwareprodukten eingebunden werden. Durch die über die Schnittstelle verbindbaren Kommunikationsgeräte können zudem zusätzliche Assistenzsysteme und/oder künstliche Intelligenzsysteme in die Steuerung der Geräte eingebunden werden.
  • Auch Sprachassistenten wie beispielsweise „Amazon Echo/Alexa“ werden zunehmend in die Gerätesteuerung von Haushaltgeräten integriert. Somit könnte ggfs. ein bereits vorhandener Sprachassistent zusätzlich den emotionalen Zustand des Nutzer bei der Kommunikation erfassen und die Auswertung über das externe Kommunikationsgerät sowie die Benutzerschnittstelle dem jeweiligen Steuerungssystem an einem der Haushaltgeräte zugänglich machen.
  • Außerdem kann dem Benutzer über eines der Kommunikationsgeräte ein sogenannter Avatar zur Seite gestellt werden, der den Gerätenutzer bei der Ausübung der Bedienungsoperationen unterstützt und mit Hinweisen versorgt.
  • Zur Zeit verarbeiten die bislang bei Hausgeräten eingesetzten digitalen Assistenten nur direkte Befehle des Benutzers bzw. der Bedienungspersonen. Durch die Erfindung kommt man dem angestrebten Ziel einen großen Schritt näher, damit sich die Gerätesteuerung mit den Assistenzsystemen auf den Nutzer, seine Bedürfnisse und Vorlieben einstellen kann, so dass mit Hilfe künstlicher Intelligenz die Nutzung der Geräte situationsgerecht verbessert werden kann. Für diese Personalisierung und Adaption wird dementsprechend der relevante Gemütszustand der Nutzer erfasst, um personalisierte Gebrauchseigenschaften und Unterstützungsfunktionen zielgerichteter und wirkungsvoller anbieten zu können.
  • Wenn das Gerätesystem von mehreren Einzelgeräten gebildet wird, ist die Steuereinrichtung mindestens eines Gerätes steuerungstechnisch mit der erfindungsgemäß vorgesehenen Einrichtung zur Erfassung der vom Benutzer ausgehenden Emotionen verbunden.
  • Die Erfassungseinrichtung kann dabei mit verschiedenen Softwareprodukten für die Emotionserkennung in Verbindung stehen, die dazu geeignet und eingerichtet sind, um die von einer Bedienungsperson ausgehenden emotionalen Signale entschlüsseln, analysieren und auswerten zu können. Hierzu können Softwaremodule verwendet werden, wie insbesondere ein Spracherfassungs-Modul sowie ein Bilderfassungs-Modul. Außerdem können in einer nicht abschließenden Aufzählung zusätzliche Softwaremodule, wie ein Interaktionserfassungs-Modul, ein Gestenerfassungs-Modul und ein Modul für die Erfassung von körperlichen Zustandsdaten, wie Puls- und Herzfrequenz für die Emotionserkennung eingesetzt werden. Ein derartiges Softwaremodul kann zum Beispiel - wie vorstehend bereits erwähnt - die von einer Fitness-Uhr generierte Puls- und Herzfrequenz als emotionalen Zustand des Benutzers auswerten.
  • Die vorstehende Aufzählung der einsetzbaren Software- und Auswertungsmodule ist deshalb nicht abschließend zu verstehen, da hierzu die Verwendung noch nicht bekannter Erkenntnismethoden in Frage kommen kann, denn die allgemeine Entwicklung von Systemen zur Emotionserkennung dürfte sich noch im Fluss befinden und somit noch ausreichenden Realisierungsspielraum für die Nutzung neuer Entwicklungsergebnisse auf diesem Gebiet bieten.
  • Durch ein erfindungsgemäß ausgebildetes Gerätesystem lassen sich weiterhin noch zahlreiche Verbesserungen und Vorteile realisieren. So kann zum Beispiel die Erfassung des emotionalen Zustands als Metrik in das Qualitätsmanagement des Gerätes einbezogen werden. Beispielsweise ließen sich Bedienvorgänge am Hausgerät automatisch durch den ermittelten, emotionalen Zustand des Bedieners beeinflussen. Über eine statistische Mittelung ließen sich zudem Probleme in der Interaktion automatisch aufdecken. Dies könnte dann beim Entwicklungsprozess des Steuerungssystems berücksichtigt werden.
  • In gewissen Grenzen wäre die Bedienung zunächst adaptiv und würde bei einem schlechten Interaktionserlebnis ggf. andere Bedienelemente anbieten. Beispielsweise könnte nach einer „ärgerlichen Programmstartvorwahl“ ein alternatives Widget gezeigt werden, mit dem der Nutzer ggf. mehr Freude hat. Dadurch kann ein lernendes System geschaffen werden, bei dem die vom Nutzer ausgehenden Emotionen den entscheidungserheblichen Inputvektor darstellen.
  • Die Erfassung der Emotionen kann in in vorteilhafter Weise in einem automatischen Prozess erfolgen, ohne das der Nutzer selbst seinen Gemütszustand kommunizieren muss. Vielmehr wird aus der Art und Weise, wie er mit den Systemen in der Küche interagiert und während der Gerätenutzung reagiert, sein aktueller Gemütszustand festgestellt.
  • Das von der Erfassungseinrichtung ermittelte, emotionale Feedback kann zum Beispiel bei einem Gargerät, wie bei einem Herd oder Dampfgarger, in vorteilhafter Ausgestaltung zur Bewertung von Kochprozessen und Rezepten herangezogen werden. Es dient dabei als Qualität sichernde Maßnahme für die Bereitstellung von Rezepten und Services, was keine explizite Nutzereingabe erfordert. Für nahezu jedes gekochte Rezept bzw. nahezu jeden Kochvorgang bekommt man die Information, ob der Nutzer Spaß und Erfolg oder Frust und Enttäuschung bei der Zubereitung hatte. Diese Information wird mit dem Rezept bzw. dem Kochvorgang verknüpft und könnte zum Beispiel über eine Cloud Anbindung in einer Rezept-Datenbank gespeichert werden. Für jedes Rezept kann man die Emotionen ermitteln und die besonders emotional erfolgreichen Rezepte als „persönliche Favoritenrezepte“ in einer Favoritenliste dem Benutzer zur freien Verfügung bereitstellen .
  • Wird die Benutzerstimmung beim Bedienen des Geräts plötzlich schlechter, so können sofort Hilfestellungen zu der gerade durchgeführten Bedienungsaktion angeboten werden, wenn der Benutzer mutmaßlich mit der Bedienung gerade überfordert ist. Die Hilfestellungen können zum Beispiel über ein Display am Gerät oder am angeschlossenen Kommunikationsgerät durch Sprachausgabe oder visuell durch einen Avatar realisiert werden.
  • Weiterhin kann die Kochassistenz hinsichtlich des Anforderungsprofils und der Kochgeschwindigkeit auf die momentane, emotionale Lage des Benutzers angepasst werden. Beispielsweise wird über den Gemütszustand „ärgerlich“ und „frustiert“ eine Überforderung festgestellt. Eine Kochassistenz könnte daraufhin die aufwendige Bratenfüllung vereinfachen und zeitlich entzerren, so dass das Rezept einfacher wird und wieder Spaß macht. Insbesondere eine Gemütszustandshistorie kann hier hilfreich sein, zum Beispiel um zu erkennen, ob der Nutzer erst während des Kochens ärgerlich wird bzw. enttäuscht wurde, oder ob er in diesem Zustand bereits den Kochvorgang begonnen hat.
  • Negative Emotionen beim Kochen (bzw. im Haushalt) sollen vermieden und positive Erlebnisse erhalten oder verstärkt werden, indem die negativen oder positiven Emotionen erkannt werden, so dass Maßnahmen durch die Geräte- und Ablaufsteuerung eingeleitet werden können, um das emotionale Erlebnis zu steigern oder zu erhalten. Damit könnte zum Beispiel eine zeitliche Dehnung/Stauchung von Prozessen, eine Anpassung der Prozessziele (z.B. Rezeptvariation), eine Regulierung des Informationsgehalts von Anwendungen, eine Anpassung der Tonalität von Sprachausgaben, eine Steuerung von Stimmungen durch Licht, Musik, Düfte und eine Empfehlung für den Einsatz von besonderen Gewürzen realisiert werden.
  • Die erfassten Emotion können zudem als personalisierter Indikator für den Prozesserfolg von Hausgeräten herangezogen werden. Durch das emotionale Feedback eines Nutzers als Reaktion auf einen beendeten Prozess können persönliche Vorlieben des Nutzers gewonnen und bei der Parametrierung der Prozesse berücksichtigt werden. So kann beispielsweise eine erfreuliche Reaktion als bestimmender Parameter beibehalten werden, während bei einer enttäuschenden Reaktion die Parameter für die Zubereitung des nächsten Garvorgangs angepasst werden. Die Erkenntnisse und Parametersätze kann man natürlich in einer Cloud zusammenbringen und ggfs. auch regional orientierte Cluster einrichten, bei denen regionale Eigenheiten für den Garvorgang berücksichtigt werden.
  • Für die Umsetzung der Erfindung ließen sich vorteilhafte und zahlreiche gerätebezogene Ausführungsbeispiele aufführen. So könnte zum Beispiel bei einem Gargerät eine Hilfestellung zu der gerade durchgeführten Bedienung angeboten werden, wenn die Benutzerstimmung bei der Bedienung des Geräts plötzlich schlechter wird und wenn der Benutzer offensichtlich mit der Handhabung der Bedienung überfordert ist.
  • Ein Kaffeevollautomat könnte mit einer Mechanik zu Flexibilisierung der Wartungszyklen ausgestattet werden, so dass zum Beispiel die Abtropfschale später geleert werden kann, in dem die Aufforderung etwas früher als erforderlich erfolgt. Und zwar dies für den Fall, dass das System vorher erkannt hat, dass der Nutzer genervt und aggressiv reagiert, wenn die Aufforderung zur Leerung erscheint, wenn er sich gerade einen neuen Kaffee zubereiten lassen möchte. Andererseits könnte eine gute Stimmung des Benutzers dazu führen, dass manuelle Reinigungs- und Entleerungsvorgänge vor der letzten Fälligkeit aufgerufen werden. In analoger Weise können diese Mechanismen auch für andere Hausgeräte eingesetzt werden, bei denen derartige Reinigungs- und Nachfüllaufforderungen sowie Filterwechsel und dergl. üblich sind.
  • In einer praktischen Ausführungsform ist vorgesehen, dass eine im Haushalt übliche Gerätekonstellation mit einem Gargerät und mit einer Dunstabzugshaube verwendet wird. Das Gargerät kann dabei von einem Herd mit einem Backofen und/oder mit einem Kochfeld gebildet werden.
  • Hierzu wird im Bereich der Bedienblende des Herdes für die Spracherfassung ein Mikrofon und für die Bilderfassung eine Kamera mit einem als sogenanntes Fischauge ausgebildeten Objektivs verwendet, welches aus dieser Lage in geeigneter Weise insbesondere das Gesicht des vor dem Herd stehenden Benutzers erfassen kann.
  • Im Gehäuse der Dunstabzugshaube ist ebenfalls ein Mikrofon für die Spracherfassung vorgesehen, während für die Bilderfassung eine Kamera mit einem geeigneten Objektiv verwendet wird, welches sowohl den Körper des Benutzers als auch sein Gesicht in vorteilhafter Weise aus einer Über-Kopf-Position erfassen kann.
  • Die vorbeschriebene Ausführungsform ist lediglich nur ein Beispiel für die praktische Umsetzung der Erfindung, wobei zahlreiche analoge Ausgestaltungsformen für alle anderen Hausgeräte denkbar sind.
  • Ein Ausführungsbeispiel der Erfindung ist in der Zeichnung rein schematisch dargestellt und wird nachfolgend näher beschrieben.
  • In dieser Zeichnung ist eine im Haushalt übliche Gerätekonstellation mit einem Gargerät und einer Dunstabzugshaube 2 abgebildet. Das Gargerät kann hier ein Herd 1 sein, der mit einem in der Zeichnung nicht dargestelltem Backofen und/oder mit einem Kochfeld ausgerüstet ist.
  • Die Steuerung der bestimmungsgemäß vorgesehenen Programm- und Prozessabläufe erfolgt in bekannter Weise durch die zentrale Steuereinrichtung eines der Geräte, hier durch die Steuereinrichtung 10 des Herdes 1. Über die Bedien-und Anzeigeeinrichtung 11 des Herdes können vom Benutzer die Eingabebefehle und Einstellungen vorgenommen werden. Das Display 12 kann hierzu in bevorzugter Ausführung als Touchscreen ausgebildet sein, wobei darüber gleichzeitig die Zustands- und Bedienanzeigen darstellbar sind.
  • Über die symbolisiert dargestellte Schnittstelle 4 kann die Steuereinrichtung 10 mit einem externen Kommunikationsgerät 6 verbunden werden, wobei in diesem Ausführungsbeispiel hierzu beispielsweise ein Tablet 60 mit dem angedeuteten Display 61 dargestellt ist.
  • Außerdem kann über diese Schnittstelle 4 und diversen Kommunikationsgeräten 6 ein externer Dienste-Anbieter in den Steuerungsverbund des Gerätesystems mit seinen Apps oder Softwareprodukten eingebunden werden. Zudem können über die Schnittstelle 4 und die darüber mit der Gerätesteuerung kommunizierenden Kommunikationsgeräte 6 Assistenzsysteme sowie künstliche Intelligenzsysteme für den Betrieb des Hausgerätes genutzt werden.
  • Weiterhin ist die Steuereinrichtung 10 steuerungstechnisch mit der erfindungsgemäß vorgesehenen Erfassungseinrichtung 5 verbunden, mittels der das vom Benutzer ausgehende emotionale Verhalten während der Gerätenutzung erfasst sowie durch die in der Erfassungseinrichtung 5 angedeutete Auswerteeinheit 50 ausgewertet wird. Die dadurch mögliche Emotionserkennung kann dabei während des Bedienvorgangs am Herd 1 und/oder während des Anzeigevorgangs von Betriebsfunktionen für das Gerät und/oder bei Beendigung der Gerätenutzung erfolgen.
  • Die Erfassungseinrichtung 5 kann mit verschiedenen Softwareprodukten 3 in Verbindung stehen, die dazu geeignet und eingerichtet sind, um die von einer Bedienungsperson ausgehenden emotionalen Signale entschlüsseln, analysieren und auswerten zu können. Bei dem in der Zeichnung dargestellten Ausführungsbeispiel sind hierzu beispielsweise ein Interaktionserfassungs-Modul 30, ein Spracherfassungs-Modul 31, ein Bilderfassungs-Modul 32 und ein Modul 33 zur Erfassung von körperlichen Signalen, wie Puls- und Herzfrequenz aufgeführt, die zum Beispiel von einer Fitness-Uhr als Kommunikationsgerät geliefert werden können. Sinnbildlich für zusätzlich mögliche Erfassungseinrichtungen von emotional bedingten Signalen ist ein weiteres Softwareprodukt 34 in gestrichelten Linien angedeutet.
  • Über die am Gerät vorhandene Schnittstelle 4 kann die Steuereinrichtung 10 mit einem externen Kommunikationsgerät 6, wie beispielsweise einem Tablet, einem Smartphone oder einer Fitness-Uhr verbunden werden.
  • Die über dem Herd 1 angeordnete Dunstabzugshaube 2 ist ebenfalls mit einer Bedien-und Anzeigeeinrichtung 20 ausgerüstet. Bei der hier dargestellten Ausführungsart sind beide Geräte 1 u. 2 jeweils mit einer Spracherfassungseinrichtung 7 und mit einer Bilderfassungseinrichtung 8 ausgebildet.
  • Hierzu ist im Bereich der Bedienblende des Herdes 1 für die Spracherfassung ein Mikrofon 70 und für die Bilderfassung wird eine Kamera 81 mit einem als sogenanntes Fischauge ausgebildeten Objektivs verwendet, welches aus dieser Lage in geeigneter Weise insbesondere das Gesicht des vor dem Herd 1 stehenden Benutzers erfassen kann.
  • Im Gehäuse der Dunstabzugshaube 2 ist ebenfalls ein für die Spracherfassung ein Mikrofon 70 vorgesehen, während für die Bilderfassung eine Kamera 80 mit einem geeigneten Objektiv verwendet wird, welches sowohl den Körper des Benutzers als auch sein Gesicht in vorteilhafter Weise aus einer Über-Kopf-Position erfassen kann.
  • Die im Herd 1 und in der Dunstabzugshaube 2 positionierten Spracherfassungseinrichtungen 7 sowie die Bilderfassungseinrichtungen 8 sind signaltechnisch mit der Erfassungseinrichtung 5 für die Emotionserkennung verbunden, wobei die Erfassungseinrichtung 5 in der vorliegenden Ausführungsform in bevorzugter Weise in das Steuerungssystem des Herd 1 eingebunden ist.
  • Bezugszeichenliste
  • 1. Herd
    10 Steuereinrichtung
    11 Bedien-und Anzeigeeinrichtung
    12 Display
    2. Dunstabzugshaube
    20 Bedien-und Anzeigeeinrichtung DA
    3. Softwareprodukt
    30 Interaktionserfassungs-Modul
    31 Spracherfassungs-Modul
    32 Bilderfassungs-Modul
    33 Modul zur Erfassung von körperlichen Signalen
    34 Zusätzliche Emotionserfassungs-Module (angedeutet)
    4. Schnittstelle, Benutzerschnittstelle
    5. Erfassungseinrichtung zur Emotionserkennung
    50 Auswerteeinheit
    6. Externes Kommunikationsgerät
    60 Tablet, Smartphone
    61 Display
    7. Spracherfassungsvorrichtung
    70 Mikrofon
    8. Bilderfassungsvorrichtung
    80 Kamera
    81 Kamera mit Fischaugen-Objektiv
  • ZITATE ENTHALTEN IN DER BESCHREIBUNG
  • Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
  • Zitierte Patentliteratur
    • DE 102016109880 A1 [0004]

Claims (13)

  1. System zum Betreiben von mindestens einem Hausgerät, wie Wäschebehandlungs- und Spülmaschine, Gerät für das Garen von Nahrungsmitteln, Dunstabzugshauben, Kühl- und Gefriergerät, Getränkebereiter u. dergl., wobei das Gerät (1) eine Steuerungsanordnung mit einer Steuereinrichtung (10) für die Steuerung der bestimmungsgemäß vorgesehenen Betriebsabläufe, eine Bedien-und Anzeigevorrichtung (20) für die Einstellung und Anzeige von Betriebsfunktionen aufweist, dadurch gekennzeichnet, dass die Steuerungsanordnung des Gerätesystems eine Einrichtung (5) umfasst, mittels der die vom Benutzer während der Gerätenutzung ausgehenden Emotionen erkannt und erfasst werden.
  2. Gerätesystem nach Anspruch 1, dadurch gekennzeichnet, dass die Erfassungseinrichtung (5) zur Emotionserkennung derart konfiguriert und eingerichtet ist, dass die vom Benutzer ausgehenden Emotionen sowie das emotionale Verhalten des Benutzers während des Bedienvorgangs am Gerät (1) und/oder während des Anzeigevorgangs von Betriebsfunktionen für das Gerät (1) und/oder nach Beendigung der Gerätenutzung erfasst/überwacht, analysiert und ausgewertet wird, und dass abhängig von den emotionalbedingten Ergebnissen durch die Steuerungsanordnung dem Benutzer veränderte Prozessabläufe und Betriebsprogramme für den weiteren Betrieb des Gerätes (1) bereitgestellt und angeboten werden.
  3. Gerätesystem nach Anspruch 2, dadurch gekennzeichnet, dass die Erfassungseinrichtung (5) zur Emotionserkennung signaltechnisch mit mindestens einem Softwareprodukt (3) in Verbindung steht, welches derart konfiguriert und eingerichtet ist, dass damit die von einer Person ausgehenden Emotionen erkannt und erfasst werden.
  4. Gerätesystem nach Anspruch 1, 2 oder 3, dadurch gekennzeichnet, dass die vom Benutzer während der Gerätenutzung ausgehenden Emotionen durch Mittel für eine akustische und visuelle Emotionserkennung erfasst wird, und dass die von den Mitteln generierten audio-visuellen Signale entschlüsselt, analysiert und als Anzeichen für Emotionen in Verbindung mit einer Auswerteeinheit (50) ausgewertet werden.
  5. Gerätesystem nach Anspruch 4, dadurch gekennzeichnet, dass das Gerätesystem für die akustische Emotionserkennung mit einer Spracherfassungsvorrichtung (7) und für die visuelle Emotionserkennung mit einer Bilderfassungsvorrichtung (8) ausgebildet ist.
  6. Gerätesystem nach Anspruch 5 , dadurch gekennzeichnet, dass die Signale der Spracherfassungseinrichtung (7) einem Spracherfassungs-Modul (31) zugeführt werden, mittels der die Sprechcharakteristik des Benutzers erfasst und bezüglich seines jeweiligen emotionalen Zustandes ausgewertet wird.
  7. Gerätesystem nach einem der Ansprüche 3 bis 5, dadurch gekennzeichnet, dass für die Spracherfassung ein Mikrofon (70) und für die Bilderfassung eine Kamera (80) verwendet werden, wobei die Sprach- und Bilderfassungseinrichtungen (7, 8) derart am jeweiligen Gerät (1, 2) positioniert werden, dass dadurch der vom Benutzer über seine Sprache, über seinen Gesichtsausdruck und seine Mimik erkennbare emotionale Zustand erfasst werden kann.
  8. Gerätesystem nach Anspruch 5, dadurch gekennzeichnet, dass die Bilderfassungseinrichtung (8) mit einem Bilderfassungs-Modul (31) in Verbindung steht, mittels der der Gesichtsausdruck, die Mimik sowie die Gestik des Benutzers erfasst und bezüglich seines jeweiligen emotionalen Zustandes ausgewertet werden.
  9. Gerätesystem nach einem oder mehreren der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass die Erfassungseinrichtung (5) zur Emotionserkennung mit einem Interaktionserfassungs-Modul (30) in Verbindung steht, mittels der die vom Benutzer ausgeführten Aktionen und Reaktionen während der Gerätenutzung, bei der Programmauswahl, bei der Befehlseingabe, während des laufenden Betriebs und nach Beendigung des Betriebs erfasst und bezüglich seines emotionalen Zustandes ausgewertet werden.
  10. Gerätesystem nach einem der Ansprüche 1 bis 9, dadurch gekennzeichnet, dass die Erfassungseinrichtung (5) zur Emotionserkennung mit einem Modul (33) in Verbindung steht, mittels der physische Zustandsdaten wie Puls- und Herzfrequenz des Benutzers während der Gerätenutzung erfasst, analysiert und ausgewertet werden können.
  11. Gerätesystem nach einem oder mehreren der Ansprüche 1 bis 10, dadurch gekennzeichnet, dass das Gerätesystem eine Schnittstelle (4) umfasst, über die eine Verbindung mit einem externen Kommunikationsgerät (6), und/oder mit einem Smart-Home-System und/oder mit dem Internet herstellbar ist.
  12. Gerätesystem nach Anspruch 11, dadurch gekennzeichnet, dass über das externe Kommunikationsgerät (6) zusätzliche Assistenzsysteme und/oder künstliche Intelligenzsysteme in die Gerätesteuerung eingebunden werden können.
  13. Verfahren zum Betreiben eines Gerätesystem gemäß Oberbegriff des Anspruchs 1 dadurch gekennzeichnet; dass das während der Gerätenutzung vom Benutzer ausgehende emotionale Verhalten durch Mittel für eine akustische und visuelle Emotionserkennung erfasst wird, dass die von den Mitteln generierten audio-visuellen Signale durch Softwaremodule entschlüsselt, analysiert und als Anzeichen für Emotionen in Verbindung mit einer Auswerteeinheit (50) ausgewertet werden, und dass abhängig von den emotionalbedingten Ergebnissen Prozessabläufe und Betriebsprogramme mit ihren Betriebsparametern für den weiteren Betrieb des Gerätes (1) veränderbar sind oder dem Benutzer für eine Veränderung angeboten und bereitgestellt werden.
DE102018115153.5A 2018-06-25 2018-06-25 System und Verfahren zum Betreiben von mindestens einem Hausgerät Pending DE102018115153A1 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102018115153.5A DE102018115153A1 (de) 2018-06-25 2018-06-25 System und Verfahren zum Betreiben von mindestens einem Hausgerät

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102018115153.5A DE102018115153A1 (de) 2018-06-25 2018-06-25 System und Verfahren zum Betreiben von mindestens einem Hausgerät

Publications (1)

Publication Number Publication Date
DE102018115153A1 true DE102018115153A1 (de) 2020-01-02

Family

ID=68885686

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102018115153.5A Pending DE102018115153A1 (de) 2018-06-25 2018-06-25 System und Verfahren zum Betreiben von mindestens einem Hausgerät

Country Status (1)

Country Link
DE (1) DE102018115153A1 (de)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016109880A1 (de) 2016-05-30 2017-11-30 Miele & Cie. Kg Verfahren und Vorrichtung zum Beeinflussen einer über eine Benutzerschnittstelle darstellbaren Kochanweisung

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016109880A1 (de) 2016-05-30 2017-11-30 Miele & Cie. Kg Verfahren und Vorrichtung zum Beeinflussen einer über eine Benutzerschnittstelle darstellbaren Kochanweisung

Similar Documents

Publication Publication Date Title
EP3084742B1 (de) Tragbare bedienvorrichtung zur fernsteuerung einer mehrzahl von haushaltsgeräten, system, entsprechendes verfahren und computerprogrammprodukt
DE102013226390A1 (de) Verfahren zum Umschalten von Haushaltsgeräten zwischen einem Zuhause-Modus und einem Nicht-Zuhause-Modus, tragbare Bedienvorrichtung, System und Computerprogrammprodukt
DE102019134874A1 (de) Verfahren zur Bedienung eines Geräts durch einen Benutzer mittels einer Sprachsteuerung
DE102004020824A1 (de) Stellvorrichtung mit einem zumindest zweidimensionalen Sen-sorbereich
DE102007058936A1 (de) Sensoreinrichtung für ein Haushaltsgerät
DE102012217003A1 (de) Verfahren zum Betreiben eines Systems mit einer Mehrzahl von Haushaltsgeräten sowie System mit derartigen Haushaltsgeräten
DE102017111356A1 (de) Verfahren und Vorrichtung zum Steuern eines Kochfelds, Kochfeld mit einer Vorrichtung und Kochfeld und/oder Garbehälter mit einer Sensoreinrichtung
DE102014212294A1 (de) Wasserführendes Haushaltsgerät
EP3605317B1 (de) Verfahren zur sprachbedienung zumindest eines elektronischen gerätes, insbesondere eines hausgerätes eines haushalts, sowie system
EP3868273A1 (de) System und verfahren zur steuerung von hausgeräten
DE102018115153A1 (de) System und Verfahren zum Betreiben von mindestens einem Hausgerät
EP3757990A1 (de) Verfahren zur bedienung eines geräts durch einen benutzer mittels einer sprachsteuerung
DE102010016473B4 (de) Verfahren zum Anleiten, Anweisen und/oder Anlernen von Benutzern eines Gargeräts und Gargerät zur Durchführung solch eines Verfahrens
DE102008028027A1 (de) Hausgerätvorrichtung
DE102008014006B4 (de) Verfahren zum Bereitstellen eines intelligenten Mensch-Maschinen-Interfaces bei Gargeräten und zugehöriges Gargerät
DE102015115325A1 (de) Dunstabzugsvorrichtung und Dunstabzugssystem sowie Verfahren zum Betreiben
DE102019125673A1 (de) Verfahren zum Regeln oder Steuern eines Haushaltsgeräts, Haushaltsgerät und System
DE102014205596A1 (de) Verfahren zum Betreiben eines Haushaltsgeräts sowie Haushaltsgerät
EP4202581B1 (de) Verfahren zum betreiben eines nahrungsmittelbehandlungsgerätes
DE102008025985A1 (de) Anzeigeeinrichtung und Gargerät damit
BE1031073B1 (de) Steuersystem zum Betreiben eines ersten elektrischen Haushaltsgerätes und eines weiteren, zweiten elektrischen Haushaltsgerätes
DE102016109880A1 (de) Verfahren und Vorrichtung zum Beeinflussen einer über eine Benutzerschnittstelle darstellbaren Kochanweisung
DE102013017201A1 (de) Betreiben eines Gargeräts
DE102012212030A1 (de) Verfahren zur Bedienung eines Haushaltsgerätes und Haushaltsgerät
EP3661198B1 (de) Verfahren zum kalibrieren einer anzeigeeinrichtung eines mobilen endgeräts

Legal Events

Date Code Title Description
R079 Amendment of ipc main class

Free format text: PREVIOUS MAIN CLASS: D06F0033020000

Ipc: D06F0033300000

R084 Declaration of willingness to licence