DE112016007435T5

DE112016007435T5 - Zustandsschätzeinrichtung

Info

Publication number: DE112016007435T5
Application number: DE112016007435.2T
Authority: DE
Inventors: Isamu Ogawa; Takahiro Otsuka
Original assignee: Mitsubishi Electric Corp
Current assignee: Mitsubishi Electric Corp
Priority date: 2016-12-14
Filing date: 2016-12-14
Publication date: 2019-07-25
Also published as: JP6509459B2; CN110049724A; CN110049724B; WO2018109863A1; US20200060597A1; JPWO2018109863A1

Abstract

Eine Zustandsschätzeinrichtung enthält Folgendes: eine Aktionsdetektionseinheit (104), die Verhaltensinformationen mit vorab gespeicherten Aktionsmustern vergleicht und ein übereinstimmendes Aktionsmuster detektiert; eine Reaktionsdetektionseinheit (106), die die Verhaltensinformationen und biologischen Informationen über einen Anwender mit vorab gespeicherten Reaktionsmustern vergleicht und ein übereinstimmendes Reaktionsmuster detektiert; eine Unbehagenbestimmungseinheit (108), die bestimmt, dass der Anwender sich in einem Unbehagenzustand befindet, wenn ein übereinstimmendes Aktionsmuster detektiert worden ist oder wenn ein übereinstimmendes Reaktionsmuster detektiert worden ist und das detektierte Reaktionsmuster mit einem Unbehagenreaktionsmuster, das einen Unbehagenzustand des Anwenders anzeigt, übereinstimmt, wobei das Unbehagenreaktionsmuster vorab gespeichert worden ist; eine Unbehagenzonenschätzeinheit (110), die eine Schätzbedingung zum Schätzen einer Unbehagenzone auf der Grundlage des detektierten Aktionsmusters erfasst und eine Unbehagenzone schätzt, die eine Zone ist, die mit der erfassten Schätzbedingung in vorab gespeicherten Verlaufsinformationen übereinstimmt; und eine Lerneinheit (109), die Bezug auf die Verlaufsinformationen nimmt und das Unbehagenreaktionsmuster auf der Grundlage der geschätzten Unbehagenzone und der Auftrittshäufigkeiten der Reaktionsmuster in einer Zone außer der Unbehagenzone erfasst und speichert.

Description

TECHNISCHES GEBIET
Die vorliegende Erfindung bezieht sich auf eine Technik, um einen emotionalen Zustand eines Anwenders zu schätzen.
TECHNISCHER HINTERGRUND
Es existieren Techniken, um einen emotionalen Zustand eines Anwenders aus biologischen Informationen, die von einem tragbaren Sensor oder dergleichen erfasst werden, zu schätzen. Auf die geschätzte Emotion des Anwenders wird z. B. als Information zum Bereitstellen eines empfohlenen Dienstes abhängig von einem Zustand des Anwenders Bezug genommen.
Zum Beispiel offenbart Patentliteratur 1 eine Schätzeinrichtung für emotionale Informationen, die ein maschinelles Lernen durchführt, um einen Schätzer zu erzeugen, der die Beziehung zwischen biologischen Informationen und emotionalen Informationen auf der Grundlage einer Verlaufsansammlungsdatenbank, in der biologische Informationen eines Anwenders, die vorab erfasst wurden, und die emotionalen Informationen und physischen Zustände, die den biologischen Informationen entsprechen, gespeichert sind, lernt und emotionale Informationen aus den biologischen Informationen für jeden physischen Zustand schätzt. Die Schätzeinrichtung für emotionale Informationen schätzt emotionale Informationen des Anwenders aus den biologischen Informationen des Anwenders, die mit dem Schätzer entsprechend dem physischen Zustand des Anwenders detektiert werden.
ENTGEGENHALTUNGSLISTE
PATENTLITERATUR
Patentliteratur 1: JP 2013-73985 A
KURZDARSTELLUNG DER ERFINDUNG
TECHNISCHES PROBLEM
In der oben beschriebenen Schätzeinrichtung für emotionale Informationen aus Patentliteratur 1 muss der Anwender, um die Verlaufsansammlungsdatenbank zu bilden, seine emotionalen Informationen, die biologischen Informationen entsprechen, eingeben. Daher wird dem Anwender durch das Durchführen von Eingabevorgängen eine große Last auferlegt und die Anwenderfreundlichkeit nimmt ab.
Darüber hinaus kann, um einen hochpräzisen Schätzer über maschinelles Lernen zu erhalten, kein Schätzer verwendet werden, bis eine ausreichend große Menge von Informationen in der Verlaufsansammlungsdatenbank angesammelt ist.
Die vorliegende Erfindung wurde gemacht, um die oben genannten Probleme zu lösen, und beabsichtigt, einen emotionalen Zustand eines Anwenders zu schätzen, ohne dass der Anwender seinen emotionalen Zustand eingibt, auch dann, wenn Informationen, die emotionale Zustände des Anwenders anzeigen, und Informationen, die physische Zustände anzeigen, nicht angesammelt sind.
LÖSUNG DES PROBLEMS
Eine Zustandsschätzeinrichtung gemäß dieser Erfindung enthält Folgendes: eine Aktionsdetektionseinheit, die mindestens ein Verhaltensinformationsstück, das Bewegungsinformationen über einen Anwender, Schallinformationen über den Anwender und Betätigungsinformationen über den Anwender enthält, mit Aktionsmustern, die vorab gespeichert wurden, vergleicht und ein übereinstimmendes Aktionsmuster detektiert; eine Reaktionsdetektionseinheit, die die Verhaltensinformationen und biologischen Informationen über den Anwender mit Reaktionsmustern, die vorab gespeichert wurden, vergleicht und ein übereinstimmendes Reaktionsmuster detektiert; eine Unbehagenbestimmungseinheit, die bestimmt, dass der Anwender sich in einem Unbehagenzustand befindet, wenn die Aktionsdetektionseinheit ein übereinstimmendes Aktionsmuster detektiert hat oder wenn die Reaktionsdetektionseinheit ein übereinstimmendes Reaktionsmuster detektiert hat und das detektierte Reaktionsmuster mit einem Unbehagenreaktionsmuster, das einen Unbehagenzustand des Anwenders anzeigt, übereinstimmt, wobei das Unbehagenreaktionsmuster vorab gespeichert wurde; eine Unbehagenzonenschätzeinheit, die eine Schätzbedingung zum Schätzen einer Unbehagenzone auf der Grundlage des Aktionsmusters, das durch die Aktionsdetektionseinheit detektiert wurde, erfasst und eine Unbehagenzone schätzt, die eine Zone ist, die mit der erfassten Schätzbedingung in Verlaufsinformationen, die vorab gespeichert wurden, übereinstimmt; und eine Lerneinheit, die das Unbehagenreaktionsmuster auf der Grundlage der Unbehagenzone, die durch die Unbehagenzonenschätzeinheit geschätzt wurde, und der Auftrittshäufigkeit eines Reaktionsmusters in einer Zone außer der Unbehagenzone unter Bezugnahme auf die Verlaufsinformationen erfasst und speichert.
VORTEILHAFTE WIRKUNGEN DER ERFINDUNG
Gemäß dieser Erfindung ist es möglich, einen emotionalen Zustand eines Anwenders zu schätzen, ohne dass der Anwender seinen emotionalen Zustand eingibt, auch dann, wenn Informationen, die emotionale Zustände des Anwenders anzeigen, und Informationen, die physische Zustände anzeigen, nicht angesammelt werden.
Figurenliste

1 ist ein Blockdiagramm, das die Konfiguration einer Zustandsschätzeinrichtung gemäß einer ersten Ausführungsform zeigt.
2 ist eine Tabelle, die ein Beispiel eines Speichers in einer Aktionsinformationsdatenbank der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
3 ist eine Tabelle, die ein Beispiel des Speichers in einer Reaktionsinformationsdatenbank der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
4 ist eine Tabelle, die ein Beispiel des Speichers in einer Unbehagenreaktionsmusterdatenbank der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
5 ist eine Tabelle, die ein Beispiel des Speichers in einer Lerndatenbank der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
6A und 6B sind Diagramme, die jeweils eine beispielhafte Hardware-Konfiguration der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigen.
7 ist ein Ablaufplan, der einen Betrieb der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
8 ist ein Ablaufplan, der einen Betrieb einer Erfassungseinheit für Umgebungsinformationen der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
9 ist ein Ablaufplan, der einen Betrieb einer Verhaltensinformationserfassungseinheit der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
10 ist ein Ablaufplan, der einen Betrieb einer Erfassungseinheit für biologische Informationen der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
11 ist ein Ablaufplan, der einen Betrieb einer Aktionsdetektionseinheit der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
12 ist ein Ablaufplan, der einen Betrieb einer Reaktionsdetektionseinheit der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
13 ist ein Ablaufplan, der einen Betrieb einer Unbehagenbestimmungseinheit, einer Unbehagenreaktionsmusterlerneinheit und einer Unbehagenzonenschätzeinheit der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
14 ist ein Ablaufplan, der einen Betrieb der Unbehagenreaktionsmusterlerneinheit der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
15 ist ein Ablaufplan, der einen Betrieb der Unbehagenzonenschätzeinheit der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
16 ist ein Ablaufplan, der einen Betrieb der Unbehagenreaktionsmusterlerneinheit der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
17 ist ein Ablaufplan, der einen Betrieb der Unbehagenreaktionsmusterlerneinheit der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
18 ist ein Diagramm, das ein Beispiel des Lernens eines Unbehagenreaktionsmuster in der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
19 ist ein Ablaufplan, der einen Betrieb der Unbehagenbestimmungseinheit der Zustandsschätzeinrichtung gemäß der dritten Ausführungsform zeigt.
20 ist ein Diagramm, das ein Beispiel einer Unbehagenzustandsschätzung durch die Zustandsschätzeinrichtung gemäß der ersten Ausführungsform zeigt.
21 ist ein Blockdiagramm, das die Konfiguration einer Zustandsschätzeinrichtung gemäß einer zweiten Ausführungsform zeigt.
22 ist ein Ablaufplan, der einen Betrieb einer Schätzererzeugungseinheit der Zustandsschätzeinrichtung gemäß der zweiten Ausführungsform zeigt.
23 ist ein Ablaufplan, der einen Betrieb einer Unbehagenbestimmungseinheit der Zustandsschätzeinrichtung gemäß der dritten Ausführungsform zeigt.
24 ist ein Blockdiagramm, das die Konfiguration einer Zustandsschätzeinrichtung gemäß einer dritten Ausführungsform zeigt.
25 ist eine Tabelle, die ein Beispiel eines Speichers in einer Unbehagenreaktionsmusterdatenbank der Zustandsschätzeinrichtung gemäß der dritten Ausführungsform zeigt.
26 ist ein Ablaufplan, der einen Betrieb einer Unbehagenbestimmungseinheit der Zustandsschätzeinrichtung gemäß der dritten Ausführungsform zeigt.
27 ist ein Ablaufplan, der einen Betrieb der Unbehagenbestimmungseinheit der Zustandsschätzeinrichtung gemäß der dritten Ausführungsform zeigt.

BESCHREIBUNG DER AUSFÜHRUNGSFORMEN
Um die vorliegende Erfindung genauer zu beschreiben, werden unten Arten zum Ausführen der Erfindung unter Bezugnahme auf die begleitenden Zeichnungen beschrieben.
Erste Ausführungsform
1 ist ein Blockdiagramm, das die Konfiguration einer Zustandsschätzeinrichtung 100 gemäß einer ersten Ausführungsform zeigt.
Die Zustandsschätzeinrichtung 100 enthält eine Umgebungsinformationserfassungseinheit 101, eine Verhaltensinformationserfassungseinheit 102, eine Erfassungseinheit für biologische Informationen 103, eine Aktionsdetektionseinheit 104, eine Aktionsinformationsdatenbank 105, eine Reaktionsdetektionseinheit 106, eine Reaktionsinformationsdatenbank 107, eine Unbehagenbestimmungseinheit 108, eine Lerneinheit 109, eine Unbehagenzonenschätzeinheit 110, eine Unbehagenreaktionsmusterdatenbank 111 und eine Lerndatenbank 112.
Die Umgebungsinformationserfassungseinheit 101 erfasst Informationen über die Temperatur um einen Anwender und Lärminformationen, die den Betrag des Lärms anzeigen, als Umgebungsinformationen. Die Umgebungsinformationserfassungseinheit 101 erfasst z. B. Informationen, die durch einen Temperatursensor detektiert werden, als die Temperaturinformationen. Die Umgebungsinformationserfassungseinheit 101 erfasst z. B. Informationen, die den Betrag eines Schalls, der durch ein Mikrofon erfasst wird, anzeigen, als die Geräuschinformationen. Die Umgebungsinformationserfassungseinheit 101 gibt die erfassten Umgebungsinformationen zur Unbehagenbestimmungseinheit 108 und zur Lerndatenbank 112 aus.
Die Verhaltensinformationserfassungseinheit 102 erfasst Verhaltensinformationen, die Bewegungsinformationen sind, die eine Bewegung des Gesichts und des Körpers eines Anwenders anzeigen, Schallinformationen, die Äußerungen des Anwenders und Schall, der durch den Anwender abgegeben wird, anzeigen, und Betätigungsinformationen, die die Betätigung der Einrichtung des Anwenders anzeigen.
Die Verhaltensinformationserfassungseinheit 102 erfasst als die Bewegungsinformationen Informationen, die den Ausdruck eines Anwenders, eine Bewegung eines Teils des Gesichts des Anwenders, eine Bewegung von Körperteilen des Anwenders wie z. B. des Kopfs, einer Hand, eines Arms, eines Beins oder der Brust anzeigen. Diese Informationen werden z. B. über eine Analyse eines Bilds, das durch eine Kamera erfasst wurde, erhalten.
Die Verhaltensinformationserfassungseinheit 102 erfasst als die Schallinformationen ein Spracherkennungsergebnis, das den Inhalt einer Äußerung eines Anwenders anzeigt und das z. B. durch eine Analyse von Schallsignalen, die durch ein Mikrophon erfasst wurden, erhalten wird, und ein Schallerkennungsergebnis, das den Schall anzeigt, der durch den Anwender von sich gegeben wird (wie z. B. den Schall des Klickens der Zunge des Anwenders).
Die Verhaltensinformationserfassungseinheit 102 erfasst als die Betätigungsinformationen Informationen über einen Anwender, der eine Einrichtung betätigt, die durch ein berührungsempfindliches Bedienfeld oder einen physischen Schalter detektiert werden (wie z. B. Informationen, die anzeigen, dass eine Taste zum Erhöhen der Lautstärke gedrückt worden ist).
Die Verhaltensinformationserfassungseinheit 102 gibt die erfassten Verhaltensinformationen zur Aktionsdetektionseinheit 104 und zur Reaktionsdetektionseinheit 106 aus.
Die Erfassungseinheit für biologische Informationen 103 erfasst Informationen, die Fluktuationen der Herzfrequenz eines Anwender anzeigen, als biologische Informationen. Die Erfassungseinheit für biologische Informationen 103 erfasst als die biologischen Informationen z. B. Informationen, die Fluktuationen der Herzfrequenz eines Anwenders, die durch ein Herzfrequenzmessgerät oder dergleichen, das der Anwender trägt, gemessen werden, anzeigen. Die Erfassungseinheit für biologische Informationen 103 gibt die erfassten biologischen Informationen zur Reaktionsdetektionseinheit 106 aus.
Die Aktionsdetektionseinheit 104 vergleicht die Verhaltensinformationen, die von der Verhaltensinformationserfassungseinheit 102 eingegeben wurden, mit den Aktionsmustern in den Aktionsinformationen, die in der Aktionsinformationsdatenbank 105 gespeichert sind. Wenn ein Aktionsmuster, das mit den Verhaltensinformationen übereinstimmt, in der Aktionsinformationsdatenbank 105 gespeichert ist, erfasst die Aktionsdetektionseinheit 104 die Identifizierungsinformationen über das Aktionsmuster. Die Aktionsdetektionseinheit 104 gibt die erfassten Identifizierungsinformationen über das Aktionsmuster zur Unbehagenbestimmungseinheit 108 und zur Lerndatenbank 112 aus.
Die Aktionsinformationsdatenbank 105 ist eine Datenbank, in der Aktionsmuster von Anwendern für entsprechende Unbehagenfaktoren gespeichert sind.
2 ist eine Tabelle, die ein Beispiel des Speichers in der Aktionsinformationsdatenbank 105 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt.
Die Aktionsinformationsdatenbank 105, die in 2 gezeigt ist, enthält die folgenden Elemente: Kennungen 105a, Unbehagenfaktoren 105b, Aktionsmuster 105c und Schätzbedingungen 105d.
In der Aktionsinformationsdatenbank 105 ist für jeden Unbehagenfaktor 105b ein Aktionsmuster 105c definiert. Eine Schätzbedingung 105d, die eine Bedingung zum Schätzen einer Unbehagenzone ist, ist für jedes Aktionsmuster 105c gesetzt. Eine Kennung 105a als Identifizierungsinformationen ist außerdem jedem Aktionsmuster 105c angehängt.
Aktionsmuster von Anwendern, die direkt den Unbehagenfaktoren 105b zugeordnet sind, sind als die Aktionsmuster 105c gesetzt. Im Beispiel, das in 2 gezeigt ist, sind „Äußern des Wortes „heiß““ und „Drücken der Taste zum Verringern der Solltemperatur“ als die Aktionsmuster von Anwendern gesetzt, die einem Unbehagenfaktor 105b direkt zugeordnet sind, der „Klimaanlage (heiß)“ lautet.
Die Reaktionsdetektionseinheit 106 vergleicht die Verhaltensinformationen, die von der Verhaltensinformationserfassungseinheit 102 eingeben werden, und die biologischen Informationen, die von der Erfassungseinheit für biologische Informationen 103 eingegeben werden, mit den Reaktionsinformationen, die in der Reaktionsinformationsdatenbank 107 gespeichert sind. Wenn ein Reaktionsmuster, das mit den Verhaltensinformationen oder den biologischen Informationen übereinstimmt, in der Reaktionsinformationsdatenbank 107 gespeichert ist, erfasst die Reaktionsdetektionseinheit 106 die Identifizierungsinformationen, die dem Reaktionsmuster zugeordnet sind. Die Reaktionsdetektionseinheit 106 gibt die erfassten Identifizierungsinformationen über das Reaktionsmuster zur Unbehagenbestimmungseinheit 108, zur Lerneinheit 109 und zur Lerndatenbank 112 aus.
Die Reaktionsinformationsdatenbank 107 ist eine Datenbank, in der Reaktionsmuster von Anwendern gespeichert sind.
3 ist eine Tabelle, die ein Beispiel des Speichers in der Reaktionsinformationsdatenbank 107 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt.
Die Reaktionsinformationsdatenbank 107, die in 3 gezeigt ist, enthält die folgenden Elemente: Kennungen 107a und Reaktionsmuster 107b. Eine Kennung 107a als Identifizierungsinformation ist an jedes Reaktionsmuster 107b angehängt.
Reaktionsmuster von Anwendern, die Unbehagenfaktoren nicht direkt zugeordnet sind (z. B. die Unbehagenfaktoren 105b, die in 2 gezeigt sind), werden als die Reaktionsmuster 107b gesetzt. Im Beispiel, das in 3 gezeigt ist, sind „Stirnrunzeln“ und „Räuspern“ als Reaktionsmuster gesetzt, die beobachtet werden, wenn ein Anwender sich in einem Unbehagenzustand befindet.
Wenn die Identifizierungsinformationen über das detektierte Aktionsmuster von der Aktionsdetektionseinheit 104 eingegeben werden, gibt die Unbehagenbestimmungseinheit 108 ein Signal nach außen aus, das anzeigt, dass der Unbehagenzustand des Anwenders detektiert worden ist. Die Unbehagenbestimmungseinheit 108 gibt außerdem die eingegebenen Identifizierungsinformationen über das Aktionsmuster zur Lerneinheit 109 aus und weist die Lerneinheit 109 an, Reaktionsmuster zu lernen.
Ferner vergleicht die Unbehagenbestimmungseinheit 108, wenn die Identifizierungsinformationen über das detektierte Reaktionsmuster von der Reaktionsdetektionseinheit 106 eingegeben werden, die eingegebenen Identifizierungsinformationen mit den Unbehagenreaktionsmustern, die in der Unbehagenreaktionsmusterdatenbank 111 gespeichert sind und Unbehagenzustände von Anwendern anzeigen. Wenn ein Reaktionsmuster, das mit den eingegebenen Identifizierungsinformationen übereinstimmt, in der Unbehagenreaktionsmusterdatenbank 111 gespeichert ist, schätzt die Unbehagenbestimmungseinheit 108, dass der Anwender sich in einem Unbehagenzustand befindet. Die Unbehagenbestimmungseinheit 108 gibt ein Signal nach außen aus, das angibt, dass der Unbehagenzustand des Anwenders detektiert worden ist.
Die Unbehagenreaktionsmusterdatenbank 111 wird später genau beschrieben.
Wie in 1 gezeigt ist, enthält die Lerneinheit 109 die Unbehagenzonenschätzeinheit 110. Wenn eine Reaktionsmusterlernanweisung von der Unbehagenbestimmungseinheit 108 ausgegeben wird, erfasst die Unbehagenzonenschätzeinheit 110 eine Schätzbedingung zum Schätzen einer Unbehagenzone aus der Aktionsinformationsdatenbank 105 unter Verwendung der Aktionsmusteridentifizierungsinformationen, die zur selben Zeit wie die Anweisung eingegeben worden sind. Die Unbehagenzonenschätzeinheit 110 erfasst die Schätzbedingung 105d, die der Kennung 105a entspricht, die die Identifizierungsinformationen darstellt, über das Aktionsmuster, das z. B. in 2 gezeigt ist. Unter Bezugnahme auf die Lerndatenbank 112 schätzt die Unbehagenzonenschätzeinheit 110 eine Unbehagenzone aus den Informationen, die mit der erfassten Schätzbedingung übereinstimmen.
Unter Bezugnahme auf die Lerndatenbank 112 extrahiert die Lerneinheit 109 die Identifizierungsinformationen über ein oder mehrere Reaktionsmuster in der Unbehagenzone, die durch die Unbehagenzonenschätzeinheit 110 geschätzt wurde. Auf der Grundlage der extrahierten Identifizierungsinformationen nimmt die Lerneinheit 109 ferner Bezug auf die Lerndatenbank 112, um die Reaktionsmuster, die in der Vergangenheit bei Frequenzen, die gleich oder höher einem Schwellenwert sind, erzeugt wurden, als Unbehagenreaktionsmusterkandidaten zu extrahieren.
Unter Bezugnahme auf die Lerndatenbank 112 extrahiert die Lerneinheit 109 ferner die Reaktionsmuster, die bei Frequenzen gleich oder höher dem Schwellenwert in den Zonen außer der Unbehagenzone, die durch die Unbehagenzonenschätzeinheit 110 geschätzt wurde, erzeugt wurden, als Muster, die keine Unbehagenreaktionsmuster sind (diese Muster werden im Folgenden als Nichtunbehagenreaktionsmuster bezeichnet). Die Lerneinheit 109 schließt die extrahierten Nichtunbehagenreaktionsmuster aus den Unbehagenreaktionsmusterkandidaten aus.
Die Lerneinheit 109 speichert eine Kombination von Identifizierungsinformationen über die letztendlich verbleibenden Unbehagenreaktionsmusterkandidaten als ein Unbehagenreaktionsmuster in der Unbehagenreaktionsmusterdatenbank 111 für jeden Unbehagenfaktor.
Die Unbehagenreaktionsmusterdatenbank 111 ist eine Datenbank, die Unbehagenreaktionsmuster, die die Ergebnisse eines Lernens durch die Lerneinheit 109 sind, speichert.
4 ist eine Tabelle, die ein Beispiel des Speichers in der Unbehagenreaktionsmusterdatenbank 111 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt.
Die Unbehagenreaktionsmusterdatenbank 111, die in 4 gezeigt ist, enthält folgende Elemente: Unbehagenfaktoren 111a und Unbehagenreaktionsmuster 111b. Dieselben Elemente wie die Elemente der Unbehagenfaktoren 105b in der Aktionsinformationsdatenbank 105 werden als die Unbehagenfaktoren lila geschrieben.
Die Kennungen 107a, die den Reaktionsmustern 107b in der Reaktionsinformationsdatenbank 107 entsprechen, werden als die Unbehagenreaktionsmuster 111b geschrieben.
Wenn der Unbehagenfaktor in 4 „Klimaanlage (heiß)“ ist, zeigt der Anwender die Reaktionen „Stirnrunzeln“ von Kennung „b-1“ und „Starren auf den Gegenstand“ von Kennung „b-3“.
Die Lerndatenbank 112 ist eine Datenbank, in der Ergebnisse eines Lernens von Aktionsmustern und Reaktionsmustern gespeichert sind, wenn die Umgebungsinformationserfassungseinheit 101 Umgebungsinformationen erfasst.
5 ist eine Tabelle, die ein Beispiel des Speichers in der Lerndatenbank 112 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt.
Die Lerndatenbank 112, die in 5 gezeigt ist, enthält die folgenden Elemente: Zeitstempel 112a, Umgebungsinformationen 112b, Aktionsmusterkennungen 112c und Reaktionsmusterkennungen 112d.
Die Zeitstempel 112a sind Informationen, die Zeiten angeben, zu denen die Umgebungsinformationen 112b erfasst worden sind.
Die Umgebungsinformationen 112b sind Temperaturinformationen, Geräuschinformationen und dergleichen zu den Zeiten, die durch die Zeitstempel 112a angegeben werden. Die Aktionsmusterkennungen 112c sind die Identifizierungsinformationen, die durch die Aktionsdetektionseinheit 104 zu den Zeiten, die durch die Zeitstempel 112a angegeben werden, erfasst wurden. Die Reaktionsmusterkennungen 112d sind die Identifizierungsinformationen, die durch die Reaktionsdetektionseinheit 106 zu den Zeiten, die durch die Zeitstempel 112a angegeben werden, erfasst wurden.
Wenn der Zeitstempel 112a „2016/8/1/11:02:00“ ist, wie in 5 gezeigt ist, sind die Umgebungsinformationen 112b „Temperatur 28 °C, Lärm 35 dB“, hat die Aktionsdetektionseinheit 104 kein Aktionsmuster, das ein Unwohlsein des Anwenders anzeigt, detektiert und hat die Reaktionsdetektionseinheit 106 das Reaktionsmuster „Stirnrunzeln“ von Kennung „b-1“ detektiert.
Als nächstes wird eine beispielhafte Hardware-Konfiguration der Zustandsschätzeinrichtung 100 beschrieben.
6A und 6B sind Diagramme, die jeweils eine beispielhafte Hardware-Konfiguration der Zustandsschätzeinrichtung 100 zeigen.
Die Umgebungsinformationserfassungseinheit 101, die Verhaltensinformationserfassungseinheit 102, die Erfassungseinheit für biologische Informationen 103, die Aktionsdetektionseinheit 104, die Reaktionsdetektionseinheit 106, die Unbehagenbestimmungseinheit 108, die Lerneinheit 109 und die Unbehagenzonenschätzeinheit 110 in der Zustandsschätzeinrichtung 100 können eine Verarbeitungsschaltung 100a sein, die eine fest zugeordnete Hardware ist, wie in 6A gezeigt ist, oder können ein Prozessor 100b sein, der ein Programm ausführt, das in einem Speicher 100c gespeichert ist, wie in 6B gezeigt ist.
Wie in 6A gezeigt ist, kann, wenn die Umgebungsinformationserfassungseinheit 101, die Verhaltensinformationserfassungseinheit 102, die Erfassungseinheit für biologische Informationen 103, die Aktionsdetektionseinheit 104, die Reaktionsdetektionseinheit 106, die Unbehagenbestimmungseinheit 108, die Lerneinheit 109 und die Unbehagenzonenschätzeinheit 110 eine fest zugeordnete Hardware sind, die Verarbeitungsschaltung 100a z. B. eine einzelne Schaltung, eine Verbundschaltung, ein programmierter Prozessor, ein parallel programmierter Prozessor, eine anwendungsspezifische integrierte Schaltung (ASIC), eine feldprogrammierbare Gate-Anordnung (FPGA) oder eine Kombination der oben genannten sein. Jede der Funktionen der entsprechenden Komponenten der Umgebungsinformationserfassungseinheit 101, der Verhaltensinformationserfassungseinheit 102, der Erfassungseinheit für biologische Informationen 103, der Aktionsdetektionseinheit 104, der Reaktionsdetektionseinheit 106, der Unbehagenbestimmungseinheit 108, der Lerneinheit 109 und der Unbehagenzonenschätzeinheit 110 kann mit einer Verarbeitungsschaltung gebildet werden oder die Funktionen der entsprechenden Komponenten können gemeinsam mit einer Verarbeitungsschaltung gebildet werden.
Wie in 6B gezeigt ist, sind dann, wenn die Umgebungsinformationserfassungseinheit 101, die Verhaltensinformationserfassungseinheit 102, die Erfassungseinheit für biologische Informationen 103, die Aktionsdetektionseinheit 104, die Reaktionsdetektionseinheit 106, die Unbehagenbestimmungseinheit 108, die Lerneinheit 109 und die Unbehagenzonenschätzeinheit 110 der Prozessor 100b ist, die Funktionen der entsprechenden Komponenten mit Software, Firmware oder einer Kombination von Software und Firmware gebildet. Software oder Firmware sind als Programme geschrieben und sind im Speicher 100c gespeichert. Durch Lesen und Ausführen der Programme, die im Speicher 100c gespeichert sind, verwirklicht der Prozessor 100b die entsprechenden Funktion der Umgebungsinformationserfassungseinheit 101, der Verhaltensinformationserfassungseinheit 102, der Erfassungseinheit für biologische Informationen 103, der Aktionsdetektionseinheit 104, der Reaktionsdetektionseinheit 106, der Unbehagenbestimmungseinheit 108, der Lerneinheit 109 und der Unbehagenzonenschätzeinheit 110. Das heißt, die Umgebungsinformationserfassungseinheit 101, die Verhaltensinformationserfassungseinheit 102, die Erfassungseinheit für biologische Informationen 103, die Aktionsdetektionseinheit 104, die Reaktionsdetektionseinheit 106, die Unbehagenbestimmungseinheit 108, die Lerneinheit 109 und die Unbehagenzonenschätzeinheit 110 besitzen den Speicher 100c zum Speichern der Programme, durch den die entsprechenden Schritte , die in 7 bis 17 und 19, die später beschrieben werden, gezeigt sind, letztendlich ausgeführt werden, wenn sie durch den Prozessor 100b ausgeführt werden. Man kann auch sagen, dass diese Programme dazu dienen, zu bewirken, dass ein Computer Prozeduren oder ein Verfahren implementiert, die die Umgebungsinformationserfassungseinheit 101, die Verhaltensinformationserfassungseinheit 102, die Erfassungseinheit für biologische Informationen 103, die Aktionsdetektionseinheit 104, die Reaktionsdetektionseinheit 106, die Unbehagenbestimmungseinheit 108, die Lerneinheit 109 und die Unbehagenzonenschätzeinheit 110 umfassen.
Hier ist der Prozessor 100b z. B. eine Zentraleinheit (CPU), eine Verarbeitungseinrichtung, eine Arithmetikeinrichtung, ein Prozessor, ein Mikroprozessor, ein Mikrocomputer, ein digitaler Signalprozessor (DSP) oder dergleichen.
Der Speicher 100c kann z. B. ein nichtflüchtiger oder ein flüchtiger Halbleiterspeicher wie z. B. ein Schreib-/Lese-Speicher (RAM), ein Festwertspeicher (ROM), ein Flash-Speicher, ein löschbarer programmierbarer ROM (EPROM) oder ein elektrischer EPROM (EEPROM) sein, kann eine Magnetplatte wie z. B. eine Festplatte oder eine flexible Platte sein oder kann eine optische Platte wie z. B. eine Mini-Disc, eine Compact-Disc (CD) oder eine vielseitige digitale Disc (DVD) sein.
Es ist festzuhalten, dass einige der Funktionen der Umgebungsinformationserfassungseinheit 101, der Verhaltensinformationserfassungseinheit 102, der Erfassungseinheit für biologische Informationen 103, der Aktionsdetektionseinheit 104, der Reaktionsdetektionseinheit 106, der Unbehagenbestimmungseinheit 108, der Lerneinheit 109 und der Unbehagenzonenschätzeinheit 110 mit fest zugeordneter Hardware gebildet sein können und die weiteren Funktionen mit Software oder Firmware gebildet sein können. Auf diese Weise kann die Verarbeitungsschaltung 100a in der Zustandsschätzeinrichtung 100 die oben beschriebenen Funktionen mit Hardware, Software und/oder Firmware verwirklichen.
Als nächstes wird der Betrieb der Zustandsschätzeinrichtung 100 beschrieben.
7 ist ein Ablaufplan, der einen Betrieb der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt.
Die Umgebungsinformationserfassungseinheit 101 erfasst Umgebungsinformationen (Schritt ST101).
8 ist ein Ablaufplan, der einen Betrieb der Umgebungsinformationserfassungseinheit 101 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt, und ist ein Ablaufplan, der den Vorgang in Schritt ST101 genau zeigt.
Die Umgebungsinformationserfassungseinheit 101 erfasst Informationen, die z. B. durch einen Temperatursensor detektiert werden, als Temperaturinformationen (Schritt ST110). Die Umgebungsinformationserfassungseinheit 101 erfasst Informationen, die den Betrag von Schall, der z. B. durch ein Mikrofon erfasst wird, als Geräuschinformationen (Schritt ST111). Die Umgebungsinformationserfassungseinheit 101 gibt die Temperaturinformationen, die in Schritt ST110 erfasst wurden, und die Geräuschinformationen, die in Schritt ST111 erfasst wurden, als Umgebungsinformationen zur Unbehagenbestimmungseinheit 108 und zur Lerndatenbank 112 aus (Schritt ST112).
Durch die Vorgänge in den Schritten ST110 bis ST112, die oben beschrieben wurden, werden Informationen als Elemente eines Zeitstempels 112a und Umgebungsinformationen 112b in der Lerndatenbank 112, die z. B. in 5 gezeigt ist, gespeichert. Danach fährt der Ablaufplan zum Vorgang in Schritt ST102 in 7 fort.
Im Ablaufplan in 7 erfasst die Verhaltensinformationserfassungseinheit 102 dann Verhaltensinformationen über den Anwender (Schritt ST102).
9 ist ein Ablaufplan, der einen Betrieb der Verhaltensinformationserfassungseinheit 102 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt, und ist ein Ablaufplan, der den Vorgang in Schritt ST102 genau zeigt.
Die Verhaltensinformationserfassungseinheit 102 erfasst Bewegungsinformationen, die z. B. durch Analysieren eines aufgenommenen Bildes erhalten werden (Schritt ST113). Die Verhaltensinformationserfassungseinheit 102 erfasst Schallinformationen, die z. B. durch Analysieren eines Schallsignals erhalten werden (Schritt ST114). Die Verhaltensinformationserfassungseinheit 102 erfasst z. B. Informationen über die Betätigung einer Einrichtung als Betätigungsinformationen (Schritt ST115). Die Verhaltensinformationserfassungseinheit 102 gibt die Bewegungsinformationen, die in Schritt ST113 erfasst wurden, die Schallinformationen, die in Schritt ST114 erfasst wurden, und die Betätigungsinformationen, die in Schritt ST115 erfasst wurden, als Verhaltensinformationen zur Aktionsdetektionseinheit 104 und zur Reaktionsdetektionseinheit 106 aus (Schritt ST 116). Danach fährt der Ablaufplan zum Vorgang in Schritt ST103 in 7 fort.
Im Ablaufplan in 7 erfasst die Erfassungseinheit für biologische Informationen 103 dann biologische Informationen über den Anwender (Schritt ST103).
10 ist ein Ablaufplan, der einen Betrieb der Erfassungseinheit für biologische Informationen 103 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt, und ist ein Ablaufplan, der den Vorgang in Schritt ST103 genau zeigt.
Die Erfassungseinheit für biologische Informationen 103 erfasst z. B. Informationen, die Fluktuationen der Herzfrequenz des Anwenders anzeigen, als biologische Informationen (Schritt ST117). Die Erfassungseinheit für biologische Informationen 103 gibt die biologischen Informationen, die in Schritt ST117 erfasst wurden, zur Reaktionsdetektionseinheit 106 aus (Schritt ST118). Danach fährt der Ablaufplan zum Vorgang in Schritt ST104 in 7 fort.
Im Ablaufplan in 7 detektiert die Aktionsdetektionseinheit 104 dann Aktionsinformationen über den Anwender aus den Verhaltensinformationen, die von der Verhaltensinformationserfassungseinheit 102 in Schritt ST102 eingegeben wurden (Schritt ST104).
11 ist ein Ablaufplan, der einen Betrieb der Aktionsdetektionseinheit 104 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt, und ist ein Ablaufplan, der den Vorgang in Schritt ST104 genau zeigt.
Die Aktionsdetektionseinheit 104 bestimmt, ob Verhaltensinformationen von der Verhaltensinformationserfassungseinheit 102 (Schritt ST120) eingegeben worden sind. Wenn keine Verhaltensinformationen eingegeben worden sind (Schritt ST120; NEIN), endet der Vorgang und der Betrieb fährt zum Vorgang in Schritt ST105 in 7 fort. Wenn andererseits Verhaltensinformationen eingegeben worden sind (Schritt ST120; JA), bestimmt die Aktionsdetektionseinheit 104, ob die eingegebenen Verhaltensinformationen mit einem Aktionsmuster in den Aktionsinformationen, die in der Aktionsinformationsdatenbank 105 gespeichert sind, übereinstimmen (Schritt ST121).
Wenn die eingegebenen Verhaltensinformationen mit einem Aktionsmuster in den Aktionsinformationen, die in der Aktionsinformationsdatenbank 105 gespeichert sind, übereinstimmen (Schritt ST121; JA), erfasst die Aktionsdetektionseinheit 104 die Identifizierungsinformationen, die an die übereinstimmenden Aktionsmuster angehängt sind, und gibt die Identifizierungsinformationen zur Unbehagenbestimmungseinheit 108 und zur Lerndatenbank 112 aus (Schritt ST122). Wenn andererseits die eingegebenen Verhaltensinformationen mit keinem Aktionsmuster in den Aktionsinformationen, die in der Aktionsinformationsdatenbank 105 gespeichert sind, übereinstimmen (Schritt ST121; NEIN), bestimmt die Aktionsdetektionseinheit 104, ob ein Vergleichen mit allen Aktionsinformationen abgeschlossen worden ist (Schritt ST123). Wenn ein Prüfen gegen alle Aktionsinformationen noch nicht abgeschlossen worden ist (Schritt ST123; NEIN), kehrt der Betrieb zum Vorgang in Schritt ST121 zurück und die oben beschriebenen Vorgänge werden wiederholt. Wenn der Vorgang in Schritt ST122 durchgeführt worden ist oder wenn andererseits ein Prüfen gegen alle Aktionsinformationen abgeschlossen worden ist (Schritt ST123; JA), fährt der Ablaufplan zum Vorgang in Schritt ST105 in 7 fort.
Im Ablaufplan in 7 detektiert die Reaktionsdetektionseinheit 106 dann Reaktionsinformationen über den Anwender (Schritt ST105). Speziell detektiert die Reaktionsdetektionseinheit 106 Reaktionsinformationen über den Anwender unter Verwendung der Verhaltensinformationen, die von der Verhaltensinformationserfassungseinheit 102 in Schritt ST102 eingegeben wurden, und der biologischen Informationen, die von der Erfassungseinheit für biologische Informationen 103 in Schritt ST103 eingegeben wurden.
12 ist ein Ablaufplan, der einen Betrieb der Reaktionsdetektionseinheit 106 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt, und ist ein Ablaufplan, der den Vorgang in Schritt ST105 genau zeigt.
Die Reaktionsdetektionseinheit 106 bestimmt, ob Verhaltensinformationen von der Verhaltensinformationserfassungseinheit 102 eingegeben worden sind (Schritt ST124). Wenn keine Verhaltensinformationen eingeben worden sind (Schritt ST124; NEIN), bestimmt die Reaktionsdetektionseinheit 106, ob die biologischen Informationen von der Erfassungseinheit für biologische Informationen 103 eingegeben worden sind (Schritt ST125). Wenn keine biologischen Informationen eingegeben worden sind (Schritt ST125; NEIN), endet der Vorgang und der Betrieb fährt zum Vorgang in Schritt ST106 im Ablaufplan, der in 7 gezeigt ist, fort.
Wenn andererseits Verhaltensinformationen eingegeben worden sind (Schritt ST124; JA) oder wenn biologische Informationen eingegeben worden sind (Schritt ST125; JA), bestimmt die Reaktionsdetektionseinheit 106, ob die eingegebenen Verhaltensinformationen oder biologischen Informationen mit einem Reaktionsmuster in den Reaktionsinformationen, die in der Reaktionsinformationsdatenbank 107 gespeichert sind, übereinstimmen (Schritt ST126). Wenn die eingegebenen Verhaltensinformationen oder biologischen Informationen mit einem Reaktionsmuster in den Reaktionsinformationen, die in der Reaktionsinformationsdatenbank 107 gespeichert sind, übereinstimmen (Schritt ST126; JA), erfasst die Reaktionsdetektionseinheit 106 die Identifizierungsinformationen, die an die übereinstimmenden Reaktionsmuster angehängt sind, und gibt die Identifizierungsinformationen zur Unbehagenbestimmungseinheit 108, zur Lerneinheit 109 und zur Lerndatenbank 112 aus (Schritt ST127).
Wenn die eingegebenen Verhaltensinformationen oder biologischen Informationen mit keinen Reaktionsmuster in den Reaktionsinformationen, die in der Reaktionsinformationsdatenbank 107 gespeichert sind, übereinstimmen (Schritt ST126; NEIN), bestimmt die Reaktionsdetektionseinheit 106, ob das Prüfen gegen alle Reaktionsinformationen abgeschlossen worden ist (Schritt ST128). Wenn das Prüfen gegen alle Reaktionsinformationen noch nicht abgeschlossen worden ist (Schritt ST128; NEIN), kehrt der Betrieb zum Vorgang in Schritt ST126 zurück und die oben beschriebenen Vorgänge werden wiederholt. Wenn der Vorgang in Schritt ST127 durchgeführt worden ist oder wenn andererseits das Prüfen gegen alle Reaktionsinformationen abgeschlossen worden ist (Schritt ST128; JA), fährt der Ablaufplan zum Vorgang in Schritt ST106 in 7 fort.
Wenn der Aktionsinformationsdetektionsvorgang durch die Aktionsdetektionseinheit 104 und der Reaktionsinformationsdetektionsvorgang durch die Reaktionsdetektionseinheit 106 im Ablaufplan in 7 abgeschlossen sind, bestimmt die Unbehagenbestimmungseinheit 108, ob der Anwender sich in einem Unbehagenzustand befindet (Schritt ST106).
13 ist ein Ablaufplan, der den Betrieb der Unbehagenbestimmungseinheit 108, der Lerneinheit 109 und der Unbehagenzonenschätzeinheit 110 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt, und ist ein Ablaufplan, der den Vorgang in Schritt ST106 genau zeigt.
Die Unbehagenbestimmungseinheit 108 bestimmt, ob Identifizierungsinformationen über ein Aktionsmuster von der Aktionsdetektionseinheit 104 eingegeben worden sind (Schritt ST130). Wenn Identifizierungsinformationen über ein Aktionsmuster eingegeben worden sind (Schritt ST130; JA), gibt die Unbehagenbestimmungseinheit 108 ein Signal nach außen aus, das anzeigt, dass ein Unbehagenzustand des Anwenders detektiert worden ist (Schritt ST131). Die Unbehagenbestimmungseinheit 108 gibt außerdem die eingegebenen Identifizierungsinformationen über die Aktionsmuster zur Lerneinheit 109 aus und weist die Lerneinheit 109 an, Unbehagenreaktionsmuster (Schritt ST132) zu lernen. Die Lerneinheit 109 lernt ein Unbehagenreaktionsmuster auf der Grundlage der Aktionsmusteridentifizierungsinformationen und der Lernanweisung, die in Schritt ST132 eingegeben wurde (Schritt ST133). Der Vorgang des Lernens von Unbehagenreaktionsmustern in Schritt ST133 wird später genau beschrieben.
Wenn andererseits keine Identifizierungsinformationen über ein Aktionsmuster eingegeben worden sind (Schritt ST130; NEIN), bestimmt die Unbehagenbestimmungseinheit 108, ob Identifizierungsinformationen über ein Reaktionsmuster von der Reaktionsdetektionseinheit 106 eingeben worden sind (Schritt ST134). Wenn Identifizierungsinformationen über ein Reaktionsmuster eingegeben worden sind (Schritt ST134; JA), vergleicht die Unbehagenbestimmungseinheit 108 das Reaktionsmuster, das durch die Identifizierungsinformationen angegeben wird, mit den Unbehagenreaktionsmustern, die in der Unbehagenreaktionsmusterdatenbank 111 gespeichert sind, und schätzt einen Unbehagenzustand des Anwenders (Schritt ST135). Der Vorgang des Schätzens eines Unbehagenzustands in Schritt ST135 wird später genau beschrieben.
Die Unbehagenbestimmungseinheit 108 nimmt Bezug auf das Ergebnis der Schätzung in Schritt ST135 und bestimmt, ob der Anwender sich in einem Unbehagenzustand befindet (Schritt ST136). Wenn bestimmt wird, dass der Anwender sich in einem Unbehagenzustand befindet (Schritt ST136; JA), gibt die Unbehagenbestimmungseinheit 108 ein Signal nach außen aus, das anzeigt, dass der Unbehagenzustand des Anwenders detektiert worden ist (Schritt ST137). Im Vorgang in Schritt ST137 kann die Unbehagenbestimmungseinheit 108 dem Signal, das nach außen ausgegeben werden soll, Informationen hinzufügen, die einen Unbehagenfaktor anzeigen.
Wenn der Vorgang in Schritt ST133 durchgeführt worden ist, wenn der Vorgang in Schritt ST137 durchgeführt worden ist, wenn keine Identifizierungsinformationen über ein Reaktionsmuster eingegeben worden sind (Schritt ST134; NEIN) oder wenn bestimmt wird, dass der Anwender sich nicht in einem Unbehagenzustand (Schritt ST136; NEIN) befindet, kehrt der Ablaufplan zum Vorgang in Schritt ST101 in 7 zurück.
Als nächstes wird der oben erwähnte Vorgang in Schritt ST133 im Ablaufplan in 13 genau beschrieben. Die folgende Beschreibung erfolgt unter Bezugnahme auf die Speicherbeispiele, die in 2 bis 5 gezeigt sind, die Ablaufpläne, die in 14 bis 17 gezeigt sind, und ein Beispiel eines Unbehagenreaktionsmusterlernens, das in 18 gezeigt ist.
14 ist ein Ablaufplan, der einen Betrieb der Lerneinheit 109 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt.
18 ist ein Diagramm, das ein Beispiel des Lernens von Unbehagenreaktionsmustern in der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt.
Im Ablaufplan in 14 schätzt die Unbehagenzonenschätzeinheit 110 der Lerneinheit 109 eine Unbehagenzone aus den Aktionsmusteridentifizierungsinformationen, die von der Unbehagenbestimmungseinheit 108 eingegeben wurden (Schritt ST140).
15 ist ein Ablaufplan, der einen Betrieb der Unbehagenzonenschätzeinheit 110 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt und ist ein Ablaufplan, der den Vorgang in Schritt ST140 genau zeigt.
Unter Verwendung der Aktionsmusteridentifizierungsinformationen, die von der Unbehagenbestimmungseinheit 108 eingegeben werden, durchsucht die Unbehagenzonenschätzeinheit 110 die Aktionsinformationsdatenbank 105 und erfasst die Schätzbedingung und den Unbehagenfaktor, der dem Aktionsmuster zugeordnet ist (Schritt ST150).
Zum Beispiel durchsucht, wie in 18A gezeigt ist, dann, wenn das Aktionsmuster, das durch die Identifizierungsinformationen (Kennung; a-1) angegeben wird, eingegeben wird, die Unbehagenzonenschätzeinheit 110 die Aktionsinformationsdatenbank 105, die in 2 gezeigt ist, und erfasst die Schätzbedingung „Temperatur °C“ und den Unbehagenfaktor „Klimaanlage (heiß)“ der „Kennung; a-1“.
Die Unbehagenzonenschätzeinheit 110 nimmt dann Bezug auf die jüngsten Umgebungsinformationen, die in der Lerndatenbank 112 gespeichert sind, und gleicht die Identifizierungsinformationen über die Schätzbedingung, die in Schritt ST150 erfasst wurde, ab und erfasst die Umgebungsinformationen der Zeit, zu der die Aktionsinformationen detektiert werden (Schritt ST151). Die Unbehagenzonenschätzeinheit 110 erfasst außerdem den Zeitstempel, der den Umgebungsinformationen, die in Schritt ST151 erfasst wurden, entspricht, als die Unbehagenzone (Schritt ST152).
Zum Beispiel wenn auf die Lerndatenbank 112, die 5 gezeigt ist, Bezug genommen wird, erfasst die Unbehagenzonenschätzeinheit 110 „Temperatur 28 °C“ als die Umgebungsinformationen der Zeit, zu der das Aktionsmuster detektiert wird, aus „Temperatur 28 °C, Lärm 35 dB“, was die Umgebungsinformationen 112b in den jüngsten Verlaufsinformationen sind, auf der Grundlage der Schätzbedingung, die in Schritt ST150 erfasst wurde. Die Unbehagenzonenschätzeinheit 110 erfasst außerdem den Zeitstempel „2016/8/1/11:04:30“ der erfassten Umgebungsinformationen als die Unbehagenzone.
Die Unbehagenzonenschätzeinheit 110 nimmt Bezug auf Umgebungsinformationen in den Verlaufsinformationen, die in der Lerndatenbank 112 gespeichert sind, (Schritt ST153) und bestimmt, ob die Umgebungsinformationen in den Verlaufsinformationen mit den Umgebungsinformationen der Zeit, zu der das Aktionsmuster, das in Schritt ST151 erfasst wurde, detektiert wird (Schritt ST154). Wenn die Umgebungsinformationen in den Verlaufsinformationen mit den Umgebungsinformationen der Zeit, zu der das Aktionsmuster detektiert wird, übereinstimmen (Schritt ST154; JA), fügt die Unbehagenzonenschätzeinheit 110 die Zeit, die durch den Zeitstempel der übereinstimmenden Verlaufsinformationen angegeben wird, der Unbehagenzone hinzu (Schritt ST155). Die Unbehagenzonenschätzeinheit 110 bestimmt, ob auf alle Umgebungsinformationen in den Verlaufsinformationen, die in der Lerndatenbank 112 gespeichert sind, Bezug genommen wurde (Schritt ST156).
Wenn nicht auf alle Umgebungsinformationen in den Verlaufsinformationen noch nicht Bezug genommen worden ist (Schritt ST156; NEIN), kehrt der Betrieb zum Vorgang in Schritt ST153 zurück und die oben beschriebenen Vorgänge werden wiederholt. Wenn andererseits auf alle Umgebungsinformationen in den Verlaufsinformationen Bezug genommen worden ist (Schritt ST156; JA), gibt die Unbehagenzonenschätzeinheit 110 die Unbehagenzone, die in Schritt ST155 hinzugefügt worden ist, als die geschätzte Unbehagenzone zur Lerneinheit 109 aus (Schritt ST157). Die Unbehagenzonenschätzeinheit 110 gibt außerdem den Unbehagenfaktor, der in Schritt ST150 erfasst worden ist, zur Lerneinheit 109 aus.
Zum Beispiel wird dann, wenn auf die Lerndatenbank 112, die in 5 gezeigt ist, Bezug genommen wird, die Zeit von „2016/8/1/11:01:00“ bis „2016/8/1/11:04:30“, die durch den Zeitstempel der Verlaufsinformationen, die mit „Temperatur 28 °C“, was als die Unbehagenzonenschätzbedingung erfasst wurde, übereinstimmen, als die Unbehagenzone zur Lerneinheit 109 ausgegeben. Danach fährt der Betrieb zum Vorgang in Schritt ST141 im Ablaufplan in 7 fort.
Im oben beschriebenen Schritt ST154 bestimmt die Unbehagenzonenschätzeinheit 110, ob Umgebungsinformationen in den Verlaufsinformationen mit den Umgebungsinformationen der Zeit, zu der das Aktionsmuster detektiert wird, übereinstimmen. Allerdings kann eine Prüfung vorgenommen werden, um zu bestimmen, ob die Umgebungsinformationen in einen Schwellenwertbereich fallen, der auf der Grundlage der Umgebungsinformationen der Zeit, zu der das Aktionsmuster detektiert wird, gesetzt ist. Zum Beispiel setzt dann, wenn die Umgebungsinformation der Zeit, zu der das Aktionsmuster detektiert wird, „28 °C“ ist, die Unbehagenzonenschätzeinheit 110 „untere Beschränkung: 27,5 °C, obere Beschränkung: keine“ als den Schwellenwertbereich. Die Unbehagenzonenschätzeinheit 110 fügt die Zeit, die durch den Zeitstempel der Verlaufsinformationen im Bereich angezeigt wird, der Unbehagenzone hinzu.
Zum Beispiel wird, wie in 18D gezeigt ist, die kontinuierliche Zone von „2016/8/1/11:01:00“ bis „2016/8/1/11:04:30“, was eine Temperatur anzeigt, die gleich oder höher als die untere Beschränkung des Schwellenwertbereichs ist, als die Unbehagenzone geschätzt.
Im Ablaufplan in 14 nimmt die Lerneinheit 109 Bezug auf die Lerndatenbank 112 und extrahiert die Reaktionsmuster, die in der Unbehagenzone, die in Schritt ST140 geschätzt wurde, gespeichert sind, als Unbehagenreaktionsmusterkandidaten A (Schritt ST141).
Zum Beispiel extrahiert die Lerneinheit 109 dann, wenn auf die Lerndatenbank 112, die in 5 gezeigt ist, Bezug genommen wird, die Reaktionsmusterkennungen „b-1“, „b-2“, „b-3“ und „b-4“ in der Zone von „2016/8/1/11:01:00“ bis „2016/8/1/11:04:30“, was die geschätzte Unbehagenzone ist, als die Unbehagenreaktionsmusterkandidaten A.
Die Lerneinheit 109 nimmt dann Bezug auf die Lerndatenbank 112 und lernt den Unbehagenreaktionsmusterkandidaten in einer Zone, die Umgebungsinformationen besitzt, die der Unbehagenzone, die in Schritt ST140 geschätzt wurde, ähnlich sind (Schritt ST142).
16 ist ein Ablaufplan, der einen Betrieb der Lerneinheit 109 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt, und ist ein Ablaufplan, der den Vorgang in Schritt ST142 genau zeigt.
Die Lerneinheit 109 nimmt Bezug auf die Lerndatenbank 112 und sucht eine Zone, in der Umgebungsinformationen ähnlich der Unbehagenzone sind, die in Schritt ST140 geschätzt wurde (Schritt ST160).
Wie in 18E gezeigt ist, erfasst die Lerneinheit 109 z. B. über den Suchvorgang in Schritt ST160 eine Zone, die mit der Temperaturbedingung in der Vergangenheit übereinstimmt, wie z. B. eine Zone (von der Zeit t1 bis zur Zeit t2), in der die Temperaturinformationen bei 28 °C blieben.
Alternativ kann die Lerneinheit 109 über den Suchvorgang in Schritt ST160 eine Zone erfassen, in der die Temperaturbedingung in der Vergangenheit in einem voreingestellten Bereich (einem Bereich von 27,5°C und höher) war.
Die Lerneinheit 109 nimmt Bezug auf die Lerndatenbank 112 und bestimmt, ob Reaktionsmusterkennungen in der Zone, die in Schritt ST160 gesucht wurde, gespeichert sind (Schritt ST161). Wenn keine Reaktionsmusterkennung gespeichert ist (Schritt ST161; NEIN), fährt der Betrieb zum Vorgang in Schritt ST163 fort. Wenn andererseits Reaktionsmusterkennungen gespeichert sind (Schritt ST161; JA), extrahiert die Lerneinheit 109 die Reaktionsmusterkennungen als Unbehagenreaktionsmusterkandidaten B (Schritt ST162).
Zum Beispiel werden, wie in 18E gezeigt ist, die Reaktionsmusterkennungen „b-1“, „b-2“ und „b-3“, die in der durchsuchten Zone von der Zeit t1 bis zur Zeit t2 gespeichert wurden, als die Unbehagenreaktionsmusterkandidaten B extrahiert.
Die Lerneinheit 109 bestimmt dann, ob Bezug auf alle Verlaufsinformationen in der Lerndatenbank 112 genommen worden ist (Schritt ST163). Wenn nicht auf alle Verlaufsinformationen Bezug genommen worden ist (Schritt ST163; NEIN), kehrt der Betrieb zum Vorgang in Schritt ST160 zurück. Wenn andererseits auf alle Verlaufsinformationen Bezug genommen worden ist (Schritt ST163; JA), schließt die Lerneinheit 109 ein Reaktionsmuster mit einer geringen Auftrittshäufigkeit aus den Unbehagenreaktionsmusterkandidaten A, die in Schritt ST141 extrahiert wurden, und den Unbehagenreaktionsmusterkandidaten B, die in Schritt ST162 extrahiert wurden, aus (Schritt ST164). Die Lerneinheit 109 setzt dann die letztendlichen Unbehagenreaktionsmusterkandidaten, die die Reaktionsmuster sind, aus denen eine Reaktionsmusterkennung mit einer geringen Auftrittshäufigkeit in Schritt ST164 ausgeschlossen worden ist. Danach fährt der Betrieb zum Vorgang in Schritt ST143 im Ablaufplan in 14 fort.
Im Beispiel, das in 18F gezeigt ist, vergleicht die Lerneinheit 109 die Reaktionsmusterkennungen „b-1“, „b-2“, „b-3“ und „b-4“, die als die Unbehagenreaktionsmusterkandidaten A extrahiert wurden, mit den Reaktionsmusterkennungen „b-1“, „b-2“ und „b-3“, die als die Unbehagenreaktionsmusterkandidaten B extrahiert wurden, und schließt die Reaktionsmusterkennung „b-4“, die lediglich in den Unbehagenreaktionsmusterkandidaten A enthalten ist, als die Musterkennung mit einer geringen Auftrittshäufigkeit aus.
Im Ablaufplan in 14 nimmt die Lerneinheit 109 Bezug auf die Lerndatenbank 112 und lernt ein Reaktionsmuster zu einer Zeit, zu der der Anwender sich nicht in einem Unbehagenzustand befindet, während einer Zone, die eine Umgebungsbedingung besitzt, die der Unbehagenzone, die in Schritt ST140 geschätzt wurde, nicht ähnlich ist (Schritt ST143).
17 ist ein Ablaufplan, der einen Betrieb der Lerneinheit 109 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt, und ist ein Ablaufplan, der den Vorgang in Schritt ST143 genau zeigt.
Die Lerneinheit 109 nimmt Bezug auf die Lerndatenbank 112 und sucht eine vergangene Zone, die Umgebungsinformationen aufweist, die der Unbehagenzone, die in Schritt ST140 geschätzt wurde, nicht ähnlich sind (Schritt ST170). Insbesondere sucht die Lerneinheit 109 eine Zone, in der Umgebungsinformationen nicht übereinstimmen, oder eine Zone, in der Umgebungsinformationen außerhalb des voreingestellten Bereichs liegen.
Im Beispiel, das in 18G gezeigt ist, sucht die Lerneinheit 109 die Zone (von der Zeit t3 bis zur Zeit t4), in der die Temperaturinformationen in der Vergangenheit „niedriger als 28 °C“ blieben, als eine Zone mit Umgebungsinformationen, die der Unbehagenzone nicht ähnlich sind.
Die Lerneinheit 109 nimmt Bezug auf die Lerndatenbank 112 und bestimmt, ob ein Reaktionsmusterkennung in der Zone, die in Schritt ST170 (Schritt ST171) gesucht wurde, gespeichert ist. Wenn keine Reaktionsmusterkennung gespeichert ist (Schritt ST171; NEIN), wird der Betrieb mit dem Vorgang in Schritt ST173 fortgesetzt. Wenn andererseits eine Reaktionsmusterkennung gespeichert ist (Schritt ST171; JA), extrahiert die Lerneinheit 109 die gespeicherte Reaktionsmusterkennung als einen Nicht-Unbehagenreaktionsmusterkandidaten (Schritt ST172).
Im Beispiel, das in 18G gezeigt ist, wird die Musterkennung „b-2“, die in der Zone (von der Zeit t3 bis zur Zeit t4) gespeichert ist, in der die Temperaturinformationen in der Vergangenheit „niedriger als 28 °C“ geblieben sind, als ein Nicht-Unbehagenreaktionsmusterkandidat gespeichert.
Die Lerneinheit 109 bestimmt dann, ob Bezug auf alle Verlaufsinformationen in der Lerndatenbank 112 genommen worden ist (Schritt ST173). Wenn nicht auf alle Verlaufsinformationen Bezug genommen worden ist (Schritt ST173; NEIN), kehrt der Betrieb zum Vorgang in Schritt ST170 zurück. Wenn andererseits Bezug auf alle Verlaufsinformationen genommen worden ist (Schritt ST173; JA), schließt die Lerneinheit 109 ein Reaktionsmuster mit einer geringen Auftrittshäufigkeit unter den Nicht-Unbehagenreaktionsmusterkandidaten, die in Schritt ST172 (Schritt ST174) extrahiert wurden, aus. Die Lerneinheit 109 setzt dann die letztendlichen Nichtunbehagenreaktionsmuster, die die Reaktionsmuster sind, aus denen ein Reaktionsmuster mit einer geringen Auftrittshäufigkeit in Schritt ST174 ausgeschlossen worden ist. Danach fährt der Betrieb mit dem Vorgang in Schritt ST144 in 14 fort.
Im Beispiel, das in 18G gezeigt ist, wird dann, wenn das Verhältnis zwischen der Anzahl extrahierter Musterkennungen „b-2“, die als die Nicht-Unbehagenreaktionsmusterkandidaten extrahiert wurden, und der Anzahl von Zonen, die als Zonen, die Umgebungsinformationen besitzen, die der Unbehagenzone nicht ähnlich sind, geringer als ein Schwellenwert ist, die Reaktionsmusterkennung „b-2“ aus den Nicht-Unbehagenreaktionsmusterkandidaten ausgeschlossen. Es ist festzuhalten, dass im Beispiel, das in 18G gezeigt ist, die Reaktionsmusterkennung „b-2“ nicht ausgeschlossen ist.
Im Ablaufplan in 14 schließt die Lerneinheit 109 die NichtUnbehagenreaktionsmuster, die in Schritt ST143 gelernt wurden, aus den Unbehagenreaktionsmusterkandidaten, die in Schritt ST142 gelernt wurden, aus und erfasst ein Unbehagenreaktionsmuster (Schritt ST144).
Im Beispiel, das in 18H gezeigt ist, wird die Reaktionsmusterkennung „b-2“, die ein Nicht-Unbehagenreaktionsmusterkandidat ist, aus den Reaktionsmusterkennungen „b-1“, „b-2“ und „b-3“, die die Unbehagenreaktionsmusterkandidaten sind, ausgeschlossen und werden die Reaktionsmusterkennungen „b-1“ und „b-3“ nach dem Ausschluss als ein Unbehagenreaktionsmuster erfasst.
Die Lerneinheit 109 speichert die Unbehagenreaktionsmuster, die in Schritt ST144 erfasst wurden, gemeinsam mit dem Unbehagenfaktor, der aus der Unbehagenzonenschätzeinheit 110 eingegeben wurde, in der Unbehagenreaktionsmusterdatenbank 111 (Schritt ST145).
Im Beispiel, das in 4 gezeigt ist, speichert die Lerneinheit 109 die Reaktionsmusterkennungen „b-1“ und „b-3“, die als Unbehagenreaktionsmuster extrahiert wurden, gemeinsam mit einem Unbehagenfaktor „Klimaanlage (heiß)“. Danach kehrt der Ablaufplan zum Vorgang in Schritt ST101 in 7 zurück.
Als nächstes wird der oben erwähnte Vorgang in Schritt ST135 im Ablaufplan in 13 genau beschrieben.
Die folgende Beschreibung erfolgt unter Bezugnahme auf die Beispiele des Speichers in der Datenbank, die in 2 bis 5 gezeigt sind, ein Ablaufdiagramm, das in 19 gezeigt ist, und ein Beispiel einer Unbehagenzustandsschätzung, das in 20 gezeigt ist.
19 ist ein Ablaufplan, der einen Betrieb der Unbehagenbestimmungseinheit 108 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt.
20 ist ein Diagramm, das ein Beispiel einer Unbehagenzustandsschätzung durch die Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform zeigt.
Die Unbehagenbestimmungseinheit 108 nimmt Bezug auf die Unbehagenreaktionsmusterdatenbank 111 und bestimmt, ob Unbehagenreaktionsmuster gespeichert sind (Schritt ST180). Wenn keine Unbehagenreaktionsmuster gespeichert sind (Schritt ST180; NEIN), wird der Betrieb mit dem Vorgang in Schritt ST190 fortgesetzt.
Wenn andererseits ein Unbehagenreaktionsmuster gespeichert ist (Schritt ST180; JA), vergleicht die Unbehagenbestimmungseinheit 108 das gespeicherte Unbehagenreaktionsmuster mit den Identifizierungsinformationen über das Reaktionsmuster, das von der Reaktionsdetektionseinheit 106 in Schritt ST127 von 12 eingegeben wurde (Schritt ST181). Eine Prüfung wird vorgenommen, um zu bestimmen, ob das Unbehagenreaktionsmuster die Identifizierungsinformationen über das Reaktionsmuster, das durch die Reaktionsdetektionseinheit 106 detektiert wurde, enthält (Schritt ST182). Wenn die Identifizierungsinformationen über das Reaktionsmuster nicht enthalten sind (Schritt ST182; NEIN), fährt die Unbehagenbestimmungseinheit 108 zum Vorgang in Schritt ST189 fort. Wenn andererseits die Identifizierungsinformationen über das Reaktionsmuster enthalten sind (Schritt ST182; JA), nimmt die Unbehagenbestimmungseinheit 108 Bezug auf die Unbehagenreaktionsmusterdatenbank 111 und erfasst den Unbehagenfaktor, der den Identifizierungsinformationen über das Reaktionsmuster zugeordnet ist (Schritt ST183). Die Unbehagenbestimmungseinheit 108 erfasst aus der Umgebungsinformationserfassungseinheit 101 die Umgebungsinformationen der Zeit, zu der der Unbehagenfaktor in Schritt ST183 erfasst wird (Schritt ST184). Die Unbehagenbestimmungseinheit 108 schätzt eine Unbehagenzone aus den erfassten Umgebungsinformationen (Schritt ST185).
Im Beispiel, das in 20A gezeigt ist, erfasst die Unbehagenbestimmungseinheit 108 dann, wenn die Reaktionsmusterkennung „b-3“ von der Reaktionsdetektionseinheit 106 eingegeben wird, im Falle des Speicherbeispiels, das in 4 gezeigt ist, Umgebungsinformationen (Temperaturinformationen: 27 °C) der Zeit, zu der die Kennung „b-3“ erfasst wird. Die Unbehagenbestimmungseinheit 108 nimmt Bezug auf die Lerndatenbank 112 und schätzt eine Unbehagenzone, die die vergangene Zone ist (von der Zeit t5 bis zur Zeit t6), bis die Temperaturinformationen niedriger als 27 °C sind.
Die Unbehagenbestimmungseinheit 108 nimmt Bezug auf die Lerndatenbank 112 und extrahiert die Identifizierungsinformationen über die Reaktionsmuster, die in der Unbehagenzone, die in Schritt ST185 geschätzt wurde, detektiert wurden (Schritt ST186). Die Unbehagenbestimmungseinheit 108 bestimmt, ob die Identifizierungsinformationen über die Reaktionsmuster, die in Schritt ST186 extrahiert wurden, mit den Unbehagenreaktionsmustern, die in der Unbehagenreaktionsmusterdatenbank 111 gespeichert sind, übereinstimmen (Schritt ST187). Wenn ein übereinstimmendes Unbehagenreaktionsmuster gespeichert ist (Schritt ST187; JA), schätzt die Unbehagenbestimmungseinheit 108, dass der Anwender sich in einem Unbehagenzustand befindet (Schritt ST188).
Im Beispiel, das in 20B gezeigt ist, extrahiert die Unbehagenbestimmungseinheit 108 die Reaktionsmusterkennungen „b-1“, „b-2“ und „b-3“, die in der geschätzten Unbehagenzone detektiert wurden.
Die Unbehagenbestimmungseinheit 108 bestimmt, ob die Reaktionsmusterkennungen „b-1“, „b-2“ und „b-3“ in 20B mit den Unbehagenreaktionsmustern, die in der Unbehagenreaktionsmusterdatenbank 111 in 20C gespeichert sind, übereinstimmen.
Im Falle des Speicherbeispiels in der Unbehagenreaktionsmusterdatenbank 111, das in 4 gezeigt ist, sind alle Unbehagenreaktionsmusterkennungen „b-1” und „b-3“, wenn der Unbehagenfaktor lila „Klimaanlage (heiß)“ ist, unter den extrahierten Reaktionsmusterkennungen enthalten. In diesem Falle bestimmt die Unbehagenbestimmungseinheit 108, dass ein übereinstimmendes Unbehagenreaktionsmuster in der Unbehagenreaktionsmusterdatenbank 111 gespeichert ist und schätzt, dass der Anwender sich in einem Unbehagenzustand befindet.
Wenn andererseits kein übereinstimmendes Unbehagenreaktionsmuster gespeichert ist (Schritt ST187; NEIN), bestimmt die Unbehagenbestimmungseinheit 108, ob das Prüfen gegen alle Unbehagenreaktionsmuster abgeschlossen worden ist (Schritt ST189). Wenn das Prüfen gegen alle Unbehagenreaktionsmuster noch nicht abgeschlossen worden ist (Schritt ST189; NEIN), kehrt der Betrieb zum Vorgang in Schritt ST181 zurück. Wenn andererseits das Prüfen gegen alle Unbehagenreaktionsmuster abgeschlossen worden ist (Schritt ST189; JA), schätzt die Unbehagenbestimmungseinheit 108, dass sich der Anwender nicht in einem Unbehagenzustand befindet (Schritt ST190). Wenn der Vorgang in Schritt ST188 oder Schritt ST190 durchgeführt worden ist, fährt der Ablaufplan zum Vorgang in Schritt ST136 in 13 fort.
Wie oben beschrieben enthält die Zustandsschätzeinrichtung gemäß der ersten Ausführungsform Folgendes: die Aktionsdetektionseinheit 104, die mindestens ein Stück von Verhaltensinformationen, die Bewegungsinformationen über einen Anwender, Schallinformationen über den Anwender und Betätigungsinformationen über den Anwender enthalten, mit Aktionsmustern, die vorab gespeichert wurden, vergleicht und ein übereinstimmendes Aktionsmuster detektiert; die Reaktionsdetektionseinheit 106, die die Verhaltensinformationen und biologischen Informationen über den Anwender mit Reaktionsmustern, die vorab gespeichert wurden, vergleicht und ein übereinstimmendes Reaktionsmuster detektiert; die Unbehagenbestimmungseinheit 108, die bestimmt, dass der Anwender sich in einem Unbehagenzustand befindet, wenn ein übereinstimmendes Aktionsmuster detektiert worden ist oder wenn ein übereinstimmendes Reaktionsmuster detektiert worden ist und das Reaktionsmuster mit einem Unbehagenreaktionsmuster, das einen Unbehagenzustand des Anwender anzeigt, übereinstimmt, wobei das Unbehagenreaktionsmuster vorab gespeichert worden ist; die Unbehagenzonenschätzeinheit 110, die eine Schätzbedingung zum Schätzen einer Unbehagenzone auf der Grundlage eines detektierten Aktionsmusters erfasst und eine Unbehagenzone schätzt, die die Zone ist, die mit der erfassten Schätzbedingung in Verlaufsinformationen, die vorab gespeichert wurden, übereinstimmt; und die Lerneinheit 109, die Bezug auf die Verlaufsinformationen nimmt und ein Unbehagenreaktionsmuster auf der Grundlage der geschätzten Unbehagenzone und der Auftrittshäufigkeit von Reaktionsmustern in den Zonen außer der Unbehagenzone erfasst und speichert. Mit dieser Konfiguration ist es möglich, zu bestimmen, ob ein Anwender sich in einem Unbehagenzustand befindet, und den Zustand des Anwenders zu schätzen, ohne dass der Anwender Informationen über seinen Unbehagenzustand oder einen Unbehagenfaktor, der einer Reaktion entspricht, die nicht direkt einem Unbehagenfaktor zugeordnet ist, eingibt. Somit kann die Anwenderfreundlichkeit erhöht werden.
Ferner ist es selbst in einem Zustand, in dem keine große Menge Verlaufsinformationen angesammelt ist, möglich, mittels Lernen ein Unbehagenreaktionsmuster zu erfassen und zu speichern. Somit ist es möglich, einen Anwenderzustand zu schätzen, ohne eine lange Zeit ab dem Beginn der Verwendung der Zustandsschätzeinrichtung zu berücksichtigen und die Anwenderfreundlichkeit zu verbessern.
Außerdem extrahiert die Lerneinheit 109 gemäß der ersten Ausführungsform Unbehagenreaktionsmusterkandidaten auf der Grundlage der Auftrittshäufigkeiten der Reaktionsmuster in den Verlaufsinformationen in einer Unbehagenzone, extrahiert Nichtunbehagenreaktionsmuster auf der Grundlage der Auftrittshäufigkeiten der Reaktionsmuster in den Verlaufsinformationen in den Zonen außer der Unbehagenzone und erfasst Unbehagenreaktionsmuster, die Reaktionsmuster sind, die durch Ausschließen der Nichtunbehagenreaktionsmuster aus den Unbehagenreaktionsmustern erhalten werden. Mit dieser Konfiguration kann ein Unbehagenzustand lediglich aus den Reaktionsmustern bestimmt werden, die der Anwender abhängig von einem Unbehagenfaktor sehr wahrscheinlich zeigt, und die Reaktionsmuster, die der Anwender unabhängig von Unbehagenfaktoren sehr wahrscheinlich zeigt, können aus den beim Bestimmen eines Unbehagenzustands zu verwendenden Reaktionsmustern ausgeschlossen werden. Somit kann die Genauigkeit der Unbehagenzustandsschätzung erhöht werden.
Ferner bestimmt die Unbehagenbestimmungseinheit 108 gemäß der ersten Ausführungsform, dass sich der Anwender in einem Unbehagenzustand befindet, wenn ein übereinstimmendes Reaktionsmuster durch die Reaktionsdetektionseinheit 106 detektiert wurde und das detektierte Reaktionsmuster mit einem Unbehagenreaktionsmuster, das vorab gespeichert wurde und einen Unbehagenzustand des Anwenders anzeigt, übereinstimmt. Mit dieser Konfiguration ist es möglich, einen Unbehagenzustand des Anwenders zu schätzen, bevor der Anwender eine Maßnahme ergreift, die einem Unbehagenfaktor direkt zugeordnet ist, und zu bewirken, dass eine externe Einrichtung eine Steuerung durchführt, um den Unbehagenfaktor zu entfernen. Aus diesem Grund kann die Anwenderfreundlichkeit erhöht werden.
In der oben beschriebenen ersten Ausführungsform erfasst die Umgebungsinformationserfassungseinheit 101 Temperaturinformationen, die durch einen Temperatursensor detektiert wurden, und Geräuschinformationen, die den Betrag von Lärm, der durch ein Mikrophon erfasst wurde, anzeigen. Allerdings können Luftfeuchtigkeitsinformationen, die durch einen Luftfeuchtigkeitssensor detektiert wurden, und Informationen über die Helligkeit, die durch einen Beleuchtungssensor detektiert wurden, erfasst werden. Alternativ kann die Umgebungsinformationserfassungseinheit 101 Luftfeuchtigkeitsinformationen und Helligkeitsinformationen zusätzlich zu den Temperaturinformationen und den Geräuschinformationen erfassen. Unter Verwendung der Luftfeuchtigkeitsinformationen und der Helligkeitsinformationen, die durch die Umgebungsinformationserfassungseinheit 101 erfasst wurden, kann die Zustandsschätzeinrichtung 100 schätzen, dass der Anwender sich aufgrund von Trockenheit, einer Situation, die zu hell ist, oder einer Situation, die zu dunkel ist, in einem Unbehagenzustand befindet.
In der oben beschriebenen ersten Ausführungsform erfasst die Erfassungseinheit für biologische Informationen 103 Informationen, die Fluktuationen der Herzfrequenz des Anwenders, die durch ein Herzfrequenzmessgerät oder dergleichen gemessen wird, anzeigen, als biologische Informationen. Allerdings können Informationen erfasst werden, die Fluktuationen der Hirnstromwellen des Anwenders anzeigen, die durch einen Elektroenzephalographen, der am Anwender angebracht ist, gemessen werden. Alternativ kann die Erfassungseinheit für biologische Informationen 103 sowohl Informationen, die Fluktuationen der Herzfrequenz des Anwenders anzeigen, als auch Informationen, die Fluktuationen der Hirnstromwellen des Anwenders anzeigen, als die biologischen Informationen erfassen. Unter Verwendung der Informationen, die Fluktuationen der Hirnstromwellen des Anwenders anzeigen und die durch die Erfassungseinheit für biologische Informationen 103 erfasst wurden, kann die Zustandsschätzeinrichtung 100 die Genauigkeit beim Schätzen des Unbehagenzustands des Anwenders erhöhen, falls eine Änderung in den Fluktuationen der Hirnstromwellen als ein Reaktionsmuster auftritt, wenn der Anwender ein Unbehagen fühlt.
Ferner kann, falls Aktionsmusteridentifizierungsinformationen in der Unbehagenzone, die durch die Unbehagenzonenschätzeinheit 110 in der Zustandsschätzeinrichtung gemäß der oben beschriebenen ersten Ausführungsform geschätzt wird, enthalten sind, dann, wenn der Unbehagenfaktor, der den Aktionsmusteridentifizierungsinformationen entspricht, nicht mit dem Unbehagenfaktor, der als die Schätzbedingung zum Schätzen der Unbehagenzone verwendet wird, übereinstimmt, das Reaktionsmuster in der Zone nicht als Unbehagenreaktionsmusterkandidaten extrahiert werden. Auf diese Weise kann verhindert werden, dass die Reaktionsmuster, die verschiedenen Unbehagenfaktoren entsprechen, fälschlicherweise als Unbehagenreaktionsmuster in der Unbehagenreaktionsmusterdatenbank 111 gespeichert werden. Somit kann die Genauigkeit der Unbehagenzustandsschätzung erhöht werden.
Ferner wird in der Zustandsschätzeinrichtung gemäß der oben beschriebenen ersten Ausführungsform die Unbehagenzone, die durch die Unbehagenzonenschätzeinheit 110 geschätzt wird, auf der Grundlage einer Schätzbedingung 105d in der Aktionsinformationsdatenbank 105 geschätzt. Alternativ kann die Zustandsschätzeinrichtung Informationen über alle Einrichtungsbetätigungen des Anwenders in der Lerndatenbank 112 speichern und die Zone in einem bestimmten Zeitraum, nachdem eine Einrichtungsbetätigung durchgeführt worden ist, aus den Unbehagenzonenkandidaten ausschließen. Dadurch ist es möglich, die Reaktionen, die während des bestimmten Zeitraums, nachdem ein Anwender eine Einrichtungsbetätigung durchgeführt hat, aufgetreten sind, aus den Anwenderreaktionen auf Einrichtungsbetätigungen auszuschließen. Somit kann die Genauigkeit beim Schätzen eines Unbehagenzustands eines Anwenders erhöht werden.
Ferner werden in der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform, die oben beschrieben wird, in einer Zone mit Umgebungsinformationen, die der Unbehagenzone, die durch die Unbehagenzonenschätzeinheit 110 auf der Basis eines Unbehagenfaktor geschätzt wurde, ähnlich sind, Reaktionsmuster, die durch Ausschließen der Reaktionsmuster mit niedrigen Auftrittshäufigkeiten erhalten werden, als die Unbehagenreaktionsmusterkandidaten gesetzt. Dementsprechend können lediglich die Nichtunbehagenreaktionsmuster, die abhängig vom Unbehagenfaktor sehr wahrscheinlich von einem Anwender gezeigt werden, beim Schätzen eines Unbehagenzustands verwendet werden. Somit kann die Genauigkeit beim Schätzen eines Unbehagenzustands eines Anwenders erhöht werden.
Ferner werden in der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform, die oben beschrieben wird, in einer Zone mit Umgebungsinformationen, die der Unbehagenzone, die durch die Unbehagenzonenschätzeinheit 110 auf der Grundlage eines Unbehagenfaktor geschätzt wird, ähnlich sind, Reaktionsmuster, die durch Ausschließen der Reaktionsmuster mit hohen Auftrittshäufigkeiten erhalten werden, als die Unbehagenreaktionsmusterkandidaten gesetzt. Dementsprechend können die Nichtunbehagenreaktionsmuster, die unabhängig vom Unbehagenfaktor sehr wahrscheinlich durch einen Anwender gezeigt werden, aus denen, die beim Schätzen eines Unbehagenzustands verwendet werden, ausgeschlossen werden. Somit kann die Genauigkeit beim Schätzen eines Unbehagenzustands eines Anwenders erhöht werden.
Es ist festzuhalten, dass in der Zustandsschätzeinrichtung gemäß der ersten Ausführungsform, die oben beschrieben wird, dann, wenn Betätigungsinformationen in dem Aktionsmuster, das durch die Aktionsdetektionseinheit 104 detektiert wird, enthalten sind, die Unbehagenzonenschätzeinheit 110 die Zone in einem bestimmten Zeitraum nach der Erfassung der Betätigungsinformationen aus der Unbehagenzone ausschließen kann.
Dadurch ist es möglich, z. B. die Reaktionen, die während des bestimmten Zeitraums auftreten, nachdem die Einrichtung die obere Grenztemperatur der Klimaanlage geändert hat, als die Reaktionen des Anwenders zur Steuerung der Einrichtung auszuschließen. Somit kann die Genauigkeit beim Schätzen eines Unbehagenzustand eines Anwenders erhöht werden.
Zweite Ausführungsform
Eine zweite Ausführungsform betrifft eine Konfiguration zum Ändern der Verfahren zum Schätzen des Unbehagenzustands eines Anwenders abhängig von der Menge der Verlaufsinformationen, die in der Lerndatenbank 112 angesammelt sind.
21 ist ein Blockdiagramm, das die Konfiguration einer Zustandsschätzeinrichtung 100A gemäß der zweiten Ausführungsform zeigt.
Die Zustandsschätzeinrichtung 100A gemäß der zweiten Ausführungsform enthält eine Unbehagenbestimmungseinheit 201 anstelle der Unbehagenbestimmungseinheit 108 der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform, die in 1 gezeigt ist, und enthält ferner eine Schätzererzeugungseinheit 202.
In der Beschreibung unten werden die Komponenten, die dieselben wie die oder vergleichbar zu denen der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform sind, durch dieselben Bezugszeichen wie die Bezugszeichen, die in der ersten Ausführungsform verwendet werden, bezeichnet und werden nicht erklärt oder werden lediglich kurz erklärt.
Wenn ein Schätzer durch die Schätzererzeugungseinheit 202, die später beschrieben wird, erzeugt wird, schätzt die Unbehagenbestimmungseinheit 201 einen Unbehagenzustand eines Anwenders unter Verwendung des erzeugten Schätzers. Wenn kein Schätzer durch die Schätzererzeugungseinheit 202 erzeugt wird, schätzt die Unbehagenbestimmungseinheit 201 einen Unbehagenzustand des Anwenders unter Verwendung der Unbehagenreaktionsmusterdatenbank 111.
Wenn die Anzahl von Aktionsmustern in den Verlaufsinformationen, die in der Lerndatenbank 112 gespeichert sind, gleich oder größer als ein vorgegebener Wert ist, führt die Schätzererzeugungseinheit 202 ein maschinelles Lernen unter Verwendung der Verlaufsinformationen, die in der Lerndatenbank 112 gespeichert sind, durch. Hier ist der vorgegebene Wert ein Wert, der auf der Grundlage der Anzahl von Aktionsmustern eingestellt ist, die nötig sind, um durch die Schätzererzeugungseinheit 202 einen Schätzer zu erzeugen. Die Schätzererzeugungseinheit 202 führt ein maschinelles Lernen durch. Im maschinellen Lernen sind Eingangssignale die Reaktionsmuster und die Umgebungsinformationen, die für die entsprechenden Unbehagenzonen, die aus den Identifizierungsinformationen über Aktionsmuster geschätzt wurden, extrahiert wurden, und Ausgangssignale sind Informationen, die einen Behagenszustand oder einen Unbehagenzustand eines Anwenders in Bezug auf jeden der Unbehagenfaktoren, die den Identifizierungsinformationen über die Aktionsmuster entsprechen, anzeigen. Die Schätzererzeugungseinheit 202 erzeugt einen Schätzer zum Schätzen eines Unbehagenzustands eines Anwenders aus einem Reaktionsmuster und Umgebungsinformationen. Das maschinelle Lernen, das durch die Schätzererzeugungseinheit 202 durchgeführt werden soll, wird z. B. durch Anwenden des tiefen Lernverfahrens durchgeführt, das in der Nichtpatentliteratur 1 beschrieben wird, die unten gezeigt ist.
Nichtpatentliteratur 1:
Takayuki Okaya, „Deep Learning", Journal of the Institute of Image Information und Television Engineers, Vol. 68, No. 6, 2014
Als nächstes wir eine beispielhafte Hardware-Konfiguration der Zustandsschätzeinrichtung 100A beschrieben. Es ist festzuhalten, dass eine Erklärung derselben Komponenten wie die der ersten Ausführungsform hier nicht vorgenommen wird.
Die Unbehagenbestimmungseinheit 201 und die Schätzererzeugungseinheit 202 in der Zustandsschätzeinrichtung 100A sind die Verarbeitungsschaltung 100a, die in 6A gezeigt ist, oder sind der Prozessor 100b, der Programme ausführt, die im Speicher 100c, der in 6B gezeigt ist, gespeichert sind.
Als nächstes wird der Betrieb der Schätzererzeugungseinheit 202 beschrieben.
22 ist ein Ablaufplan, der einen Betrieb der Schätzererzeugungseinheit 202 der Zustandsschätzeinrichtung 100A gemäß der zweiten Ausführungsform zeigt.
Die Schätzererzeugungseinheit 202 nimmt Bezug auf die Lerndatenbank 112 und die Aktionsinformationsdatenbank 105 und zählt die Aktionsmusterkennungen, die in der Lerndatenbank 112 für jeden Unbehagenfaktor gespeichert sind (Schritt ST200). Die Schätzererzeugungseinheit 202 bestimmt, ob die Gesamtanzahl der Aktionsmusterkennungen, die in Schritt ST200 gezählt werden, gleich oder größer einem vorgegebenen Wert ist (Schritt ST201). Wenn die Gesamtanzahl der Aktionsmusterkennungen kleiner als der vorgegebene Wert ist (Schritt ST201; NEIN), kehrt der Betrieb zum Vorgang in Schritt ST200 zurück und der oben beschriebene Vorgang wird wiederholt.
Wenn andererseits die Gesamtanzahl der Aktionsmusterkennungen gleich oder größer dem vorgegebenen Wert ist (Schritt ST201; JA), führt die Schätzererzeugungseinheit 202 ein maschinelles Lernen durch und erzeugt einen Schätzer zum Schätzen des Unbehagenzustands eines Anwenders aus einem Reaktionsmuster und Umgebungsinformationen (Schritt ST202). Nachdem die Schätzererzeugungseinheit 202 in Schritt ST202 einen Schätzer erzeugt hat, endet der Vorgang.
23 ist ein Ablaufplan, der einen Betrieb der Unbehagenbestimmungseinheit 201 der Zustandsschätzeinrichtung 100A gemäß der zweiten Ausführungsform zeigt.
In 23 werden dieselben Schritte wie im Ablaufplan der ersten Ausführungsform, die in 19 gezeigt ist, durch dieselben Bezugszeichen, die in 19 verwendet werden, bezeichnet und deren Erklärung wird hier nicht vorgenommen.
Die Unbehagenbestimmungseinheit 201 nimmt Bezug auf den Zustand der Schätzererzeugungseinheit 202 und bestimmt, ob ein Schätzer erzeugt wurde (Schritt ST211). Wenn einen Schätzer erzeugt wurde (Schritt ST211; JA), gibt die Unbehagenbestimmungseinheit 201 ein Reaktionsmuster und Umgebungsinformationen als Eingangssignale in den Schätzer ein und erfasst ein Ergebnis einer Schätzung des Unbehagenzustand eines Anwenders als ein Ausgangssignal (Schritt ST212). Die Unbehagenbestimmungseinheit 201 nimmt Bezug auf das Ausgangssignal, das in Schritt ST212 erfasst wurde, und bestimmt, ob der Schätzer einen Unbehagenzustand des Anwenders geschätzt hat (Schritt ST213). Wenn der Schätzer einen Unbehagenzustand des Anwenders geschätzt hat (Schritt ST213; JA), schätzt die Unbehagenbestimmungseinheit 201, dass sich der Anwender in einem Unbehagenzustand befindet (Schritt ST214).
Wenn andererseits kein Schätzer erzeugt worden ist (Schritt ST211; NEIN), nimmt die Unbehagenbestimmungseinheit 201 Bezug auf die Unbehagenreaktionsmusterdatenbank 111 und bestimmt, ob ein Unbehagenreaktionsmuster gespeichert ist (Schritt ST180). Danach werden die Vorgänge von Schritt ST181 bis Schritt ST190 durchgeführt. Wenn der Vorgang in Schritt ST188, Schritt ST190 oder Schritt ST214 durchgeführt worden ist, fährt der Ablaufplan zum Vorgang in Schritt ST136 in 13 fort.
Gemäß der zweiten Ausführungsform enthält, wie oben beschrieben ist, die Zustandsschätzeinrichtung die Schätzererzeugungseinheit 202, die einen Schätzer erzeugt, um auf der Grundlage eines Reaktionsmusters, das durch die Reaktionsdetektionseinheit 106 detektiert wird, und von Umgebungsinformationen zu schätzen, ob ein Anwender sich in einem Unbehagenzustand befindet, wenn die Anzahl der Aktionsmuster, die als Verlaufsinformationen angesammelt wurden, gleich oder größer einem vorgegebenen Wert ist. Wenn ein Schätzer erzeugt wird, bestimmt die Unbehagenbestimmungseinheit 201 unter Bezugnahme auf das Ergebnis der Schätzung durch den Schätzer, ob der Anwender sich in einem Unbehagenzustand befindet. Mit dieser Konfiguration können, wenn die Anzahl der Aktionsmuster in den Verlaufsinformationen kleiner als der vorgegebene Wert ist, ein Unbehagenzustand des Anwenders und ein Unbehagenfaktor auf der Grundlage des Unbehagenreaktionsmusters, das in der Unbehagenreaktionsmusterdatenbank gespeichert ist, geschätzt werden. Wenn die Anzahl der Aktionsmuster gleich oder größer dem vorgegebenen Wert ist, können ein Unbehagenzustand des Anwenders und ein Unbehagenfaktor mit einem Schätzer, der über maschinelles Lernen erzeugt wird, geschätzt werden. Aus diesem Grund kann die Genauigkeit beim Schätzen eines Unbehagenzustand eines Anwenders erhöht werden.
Es ist festzuhalten, dass in der zweiten Ausführungsform, die oben beschrieben wird, die Schätzererzeugungseinheit 202 unter Verwendung von Eingangssignalen, die die Reaktionsmuster sind, die in der Lerndatenbank 112 gespeichert sind, ein maschinelles Lernen durchführt. Zusätzlich können Informationen, die in der Aktionsinformationsdatenbank 105 und der Reaktionsinformationsdatenbank 107 nicht gespeichert sind, in der Lerndatenbank 112 gespeichert werden und die gespeicherten Informationen können als Eingangssignale beim maschinellen Lernen verwendet werden. Dies ermöglicht, Gewohnheiten von Anwendern, die nicht in der Aktionsinformationsdatenbank 105 und der Reaktionsinformationsdatenbank 107 registriert sind, zu lernen, und die Genauigkeit beim Schätzen eines Unbehagenzustands eines Anwenders kann erhöht werden.
Dritte Ausführungsform
Eine dritte Ausführungsform betrifft eine Konfiguration zum Schätzen eines Unbehagenfaktors sowie eines Unbehagenzustands aus einem detektierten Reaktionsmuster.
24 ist ein Blockdiagramm, das die Konfiguration einer Zustandsschätzeinrichtung 100B gemäß der dritten Ausführungsform zeigt.
Die Zustandsschätzeinrichtung 100B gemäß der dritten Ausführungsform enthält eine Unbehagenbestimmungseinheit 301 und eine Unbehagenreaktionsmusterdatenbank 302 anstelle der Unbehagenbestimmungseinheit 108 und der Unbehagenreaktionsmusterdatenbank 111 der Zustandsschätzeinrichtung 100 der ersten Ausführungsform, die in 1 gezeigt ist.
In der Beschreibung unten werden die Komponenten, die dieselben oder vergleichbar mit den Komponenten der Zustandsschätzeinrichtung 100 gemäß der ersten Ausführungsform sind, durch dieselben Bezugszeichen wie die Bezugszeichen, die in der ersten Ausführungsform verwendet werden, bezeichnet und werden nicht erklärt oder werden lediglich kurz erklärt.
Wenn die Identifizierungsinformationen über ein detektiertes Reaktionsmuster von der Reaktionsdetektionseinheit 106 eingegeben werden, vergleicht die Unbehagenbestimmungseinheit 301 die eingegebenen Identifizierungsinformationen mit den Unbehagenreaktionsmustern, die in der Unbehagenreaktionsmusterdatenbank 302 gespeichert sind, und gibt Unbehagenzustände von Anwendern an. Wenn ein Reaktionsmuster, das mit den Identifizierungsinformationen übereinstimmt, in der Unbehagenreaktionsmusterdatenbank 302 gespeichert ist, schätzt die Unbehagenbestimmungseinheit 301, dass der Anwender sich in einem Unbehagenzustand befindet. Die Unbehagenbestimmungseinheit 301 nimmt ferner Bezug auf die Unbehagenreaktionsmusterdatenbank 302 und identifiziert den Unbehagenfaktor, falls der Unbehagenfaktor aus den eingegebenen Identifizierungsinformationen identifiziert werden kann. Die Unbehagenbestimmungseinheit 301 gibt ein Signal aus, das anzeigt, dass ein Unbehagenzustand des Anwenders detektiert worden ist, und gibt, wenn der Unbehagenfaktor erfolgreich identifiziert worden ist, ein Signal aus, das Informationen über den Unbehagenfaktor nach außen anzeigt.
Die Unbehagenreaktionsmusterdatenbank 302 ist eine Datenbank, in der Unbehagenreaktionsmuster gespeichert sind, die Ergebnisse eines Lernens durch die Lerneinheit 109 sind.
25 ist eine Tabelle, die ein Beispiel eines Speichers in der Unbehagenreaktionsmusterdatenbank 302 der Zustandsschätzeinrichtung 100B gemäß der dritten Ausführungsform zeigt.
Die Unbehagenreaktionsmusterdatenbank 302, die in 25 gezeigt ist, enthält die folgenden Elemente: Unbehagenfaktoren 302a, erste Unbehagenreaktionsmuster 302b und zweite Unbehagenreaktionsmuster 302c. Dieselben Elemente wie die Elemente der Unbehagenfaktoren 105b in der Aktionsinformationsdatenbank 105 (siehe 2) werden als die Unbehagenfaktoren 302a geschrieben. Die Kennung eines Unbehagenreaktionsmusters, das mehr als einem Unbehagenfaktor 302a entspricht, wird als die ersten Unbehagenreaktionsmuster 302b geschrieben. Die Kennungen von Unbehagenreaktionsmustern, die jeweils einem bestimmten Unbehagenfaktor entsprechen, werden als die zweiten Unbehagenreaktionsmuster 302c geschrieben. Die Kennungen der Unbehagenreaktionsmuster, die als die ersten und zweiten Unbehagenreaktionsmuster 302b und 302c geschrieben werden, entsprechen den Kennungen 107a, die in 3 gezeigt sind.
Wenn eingegebene Identifizierungsinformationen mit den Identifizierungsinformationen über ein zweites Unbehagenreaktionsmuster 302c übereinstimmen, erfasst die Unbehagenbestimmungseinheit 301 den Unbehagenfaktor 302a, der den übereinstimmenden Identifizierungsinformationen zugeordnet ist. Somit wird der Unbehagenfaktor identifiziert.
Nun wird eine beispielhafte Hardware-Konfiguration der Zustandsschätzeinrichtung 100B beschrieben. Es ist festzuhalten, dass eine Erklärung derselben Komponenten wie die der ersten Ausführungsform hier nicht vorgenommen wird.
Die Unbehagenbestimmungseinheit 301 und die Unbehagenreaktionsmusterdatenbank 302 in der Zustandsschätzeinrichtung 100B sind die Verarbeitungsschaltung 100a, die in 6A gezeigt ist, oder sind der Prozessor 100b, der Programme ausführt, die im Speicher 100c, der in 6B gezeigt ist, gespeichert sind.
Als nächstes wird der Betrieb der Unbehagenbestimmungseinheit 301 beschrieben.
26 ist ein Ablaufplan, der einen Betrieb der Unbehagenbestimmungseinheit 301 der Zustandsschätzeinrichtung 100B gemäß der ersten Ausführungsform zeigt.
In 26 sind dieselben Schritte wie im Ablaufdiagramm des ersten Ablaufdiagramms, das in 13 gezeigt ist, durch dieselben Bezugszeichen wie diejenigen, die in 13 verwendet werden, bezeichnet und ihre Erklärung wird hier nicht vorgenommen.
Wenn die Unbehagenbestimmungseinheit 301 in Schritt ST134 bestimmt, dass die Identifizierungsinformationen über ein Reaktionsmuster eingegeben worden sind (Schritt ST134; JA), vergleicht die Unbehagenbestimmungseinheit 301 die eingegebenen Identifizierungsinformationen über das Reaktionsmuster mit den ersten Unbehagenreaktionsmustern 302b und den zweiten Unbehagenreaktionsmustern 302c, die in der Unbehagenreaktionsmusterdatenbank 302 gespeichert sind, und schätzt einen Unbehagenzustand des Anwenders (Schritt ST301). Die Unbehagenbestimmungseinheit 301 nimmt Bezug auf das Ergebnis der Schätzung in Schritt ST301 und bestimmt, ob sich der Anwender in einem Unbehagenzustand befindet (Schritt ST302).
Wenn bestimmt wird, dass sich der Anwender in einem Unbehagenzustand befindet (Schritt ST302; JA), nimmt die Unbehagenbestimmungseinheit 301 Bezug auf das Ergebnis des Prüfens und bestimmt, ob der Unbehagenfaktor identifiziert worden ist (Schritt ST303). Wenn der Unbehagenfaktor identifiziert worden ist (Schritt ST303; JA), gibt die Unbehagenbestimmungseinheit 301 ein Signal, das angibt, dass ein Unbehagenzustand des Anwenders detektiert worden ist, gemeinsam mit dem Unbehagenfaktor zur Außenseite aus (Schritt ST304). Wenn andererseits kein Unbehagenfaktor identifiziert worden ist (Schritt ST303; NEIN), gibt die Unbehagenbestimmungseinheit 301 ein Signal zur Außenseite aus, das angibt, dass der Unbehagenfaktor unbekannt ist, jedoch ein Unbehagenzustand des Anwenders detektiert worden ist (Schritt ST305).
Wenn der Vorgang in Schritt ST133 durchgeführt worden ist, wenn der Vorgang in Schritt ST304 durchgeführt worden ist, wenn der Vorgang in Schritt ST305 durchgeführt worden ist, wenn keine Identifizierungsinformationen über ein Reaktionsmuster eingegeben worden sind (Schritt ST134; NEIN) oder wenn bestimmt worden ist, dass der Anwender sich nicht in einem Unbehagenzustand befindet (Schritt ST302; NEIN), kehrt der Ablaufplan zum Vorgang in Schritt ST101 in 7 zurück.
Als nächstes wird der oben erwähnte Vorgang in Schritt ST301 im Ablaufplan in 26 genau beschrieben.
27 ist ein Ablaufplan, der einen Betrieb der Unbehagenbestimmungseinheit 301 der Zustandsschätzeinrichtung 100B gemäß der dritten Ausführungsform zeigt.
In 27 werden dieselben Schritte wie im Ablaufplan der ersten Ausführungsform, der in 19 gezeigt ist, durch dieselben Bezugszeichen wie die, die in 19 verwendet werden, bezeichnet und ihre Erklärung wird hier nicht vorgenommen.
Nach dem Extrahieren der Identifizierungsinformationen über Reaktionsmuster in Schritt ST186 bestimmt die Unbehagenbestimmungseinheit 301, ob die extrahierten Identifizierungsinformationen über die Reaktionsmuster mit einer Kombination des ersten und des zweiten Unbehagenreaktionsmusters übereinstimmen (Schritt ST310). Wenn bestimmt wird, dass sie mit einer Kombination des ersten und des zweiten Unbehagenreaktionsmusters übereinstimmen (Schritt ST310; JA), schätzt die Unbehagenbestimmungseinheit 301, dass sie sich in einem Unbehagenzustand befindet, und schätzt den Unbehagenfaktor (Schritt ST311). Wenn andererseits bestimmt wird, dass sie nicht mit einer Kombination des ersten und des zweiten Unbehagenreaktionsmusters übereinstimmen (Schritt ST310: NEIN), bestimmt die Unbehagenbestimmungseinheit 301, ob das Prüfen gegen alle Kombinationen des ersten und des zweiten Unbehagenreaktionsmusters abgeschlossen worden ist (Schritt ST312).
Wenn das Prüfen gegen alle Kombination des ersten und des zweiten Unbehagenreaktionsmusters noch nicht abgeschlossen worden ist (Schritt ST312; NEIN), kehrt die Unbehagenbestimmungseinheit 301 zum Vorgang in Schritt ST181 zurück. Wenn andererseits ein Prüfen gegen alle Kombinationen des ersten und des zweiten Unbehagenreaktionsmusters abgeschlossen worden ist (Schritt ST312; JA), bestimmt die Unbehagenbestimmungseinheit 301, ob die Identifizierungsinformationen über das Reaktionsmuster mit einem ersten Unbehagenreaktionsmuster (Schritt ST313) übereinstimmen. Wenn die Identifizierungsinformationen mit einem ersten Unbehagenreaktionsmuster (Schritt ST313; JA) übereinstimmen, schätzt die Unbehagenbestimmungseinheit 301, dass sie sich in einem Unbehagenzustand befindet (Schritt ST314). Im Vorgang in Schritt ST314 wird lediglich ein Unbehagenzustand geschätzt und der Unbehagenfaktor wird nicht geschätzt.
Wenn andererseits die Identifizierungsinformationen nicht mit einem ersten Unbehagenreaktionsmuster übereinstimmen (Schritt ST313; NEIN), schätzt die Unbehagenbestimmungseinheit 301, dass sie sich nicht in einem Unbehagenzustand befindet (Schritt ST315). Wenn die Unbehagenbestimmungseinheit 301 in Schritt ST180 bestimmt, dass kein Unbehagenreaktionsmuster gespeichert wird (Schritt ST180; NEIN), fährt der Betrieb auch zum Vorgang im Schritt ST315 fort.
Wenn der Vorgang in Schritt ST311, Schritt ST314 oder Schritt ST315 durchgeführt worden ist, fährt der Ablaufplan zum Vorgang in Schritt ST302 in 26 fort.
Wie oben beschrieben ist, identifiziert die Unbehagenbestimmungseinheit 301 gemäß der dritten Ausführungsform dann, wenn Reaktionsmuster, die durch die Reaktionsdetektionseinheit 106 detektiert wurden, mit gespeicherten Unbehagenreaktionsmustern übereinstimmen und das Reaktionsmuster, das mit einem bestimmten Unbehagenfaktor übereinstimmt, unter den übereinstimmenden Reaktionsmustern enthalten ist, den Unbehagenfaktor aus dem Reaktionsmuster, das dem bestimmten Unbehagenfaktor entspricht. Dementsprechend kann dann, wenn ein Unbehagenfaktor identifiziert werden kann, der identifizierte Unbehagenfaktor unverzüglich entfernt werden. Ferner wird, wenn der Unbehagenfaktor unbekannt ist, ein dementsprechendes Signal ausgegeben, um z. B. vom Anwender den Unbehagenfaktor abzufragen. Auf diese Weise kann der Unbehagenfaktor schnell identifiziert und entfernt werden. Somit kann der Komfort des Anwenders erhöht werden.
Es ist festzuhalten, dass in der dritten Ausführungsform, die oben beschrieben wurde, dann, wenn eine Übereinstimmung mit dem ersten Unbehagenreaktionsmuster, das mehr als einem Unbehagenfaktor entspricht, detektiert wird, die Unbehagenbestimmungseinheit 301 unverzüglich schätzt, dass der Anwender sich in einem Unbehagenzustand befindet, obwohl der Unbehagenfaktor unbekannt ist. Allerdings arbeitet Zeitgeber lediglich, wenn eine Übereinstimmung mit einem ersten Unbehagenreaktionsmuster, das mehr als einem Unbehagenfaktor entspricht, detektiert wird. Wenn die Übereinstimmung mit dem ersten Unbehagenreaktionsmuster für einen bestimmten Zeitraum oder länger andauert, kann die Unbehagenbestimmungseinheit 301 schätzen, dass der Anwender sich in einem Unbehagenzustand befindet, obwohl der Unbehagenfaktor unbekannt ist. Dies kann häufige Anfragen an den Anwender über Unbehagenfaktoren verhindern. Somit kann der Komfort des Anwenders erhöht werden.
Es ist festzuhalten, dass zusätzlich zum oben Genannten im Umfang der vorliegenden Erfindung die Ausführungsformen frei kombiniert werden können, Modifikationen an jeder beliebigen Komponente jeder Ausführungsform vorgenommen werden können oder eine gewünschte Komponente aus jeder Ausführungsform ausgelassen werden kann.
INDUSTRIELLE ANWENDBARKEIT
Ein Zustandsschätzeinrichtung gemäß der vorliegenden Erfindung kann einen Zustand eines Anwenders schätzen, ohne dass der Anwender Informationen eingibt, die seinen emotionalen Zustand angeben. Dementsprechend ist die Zustandsschätzeinrichtung geeignet, einen Anwenderzustand zu schätzen, während die Belastung des Anwenders in einem Klimaregelungssystem oder dergleichen verringert wird.
Bezugszeichenliste
100, 100A, 100B: Zustandsschätzeinrichtung, 101: Umgebungsinformationserfassungseinheit, 102: Verhaltensinformationserfassungseinheit, 103: Erfassungseinheit für biologische Informationen, 104: Aktionsdetektionseinheit, 105: Aktionsinformationsdatenbank, 106: Reaktionsdetektionseinheit, 107: Reaktionsinformationsdatenbank, 108, 201, 301: Unbehagenbestimmungseinheit, 109: Lerneinheit, 110: Unbehagenzonenschätzeinheit, 111, 302: Unbehagenreaktionsmusterdatenbank, 112: Lerndatenbank und 202: Schätzererzeugungseinheit.
ZITATE ENTHALTEN IN DER BESCHREIBUNG
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
Zitierte Patentliteratur

JP 2013073985 A [0004]

Zitierte Nicht-Patentliteratur

Takayuki Okaya, „Deep Learning“, Journal of the Institute of Image Information und Television Engineers, Vol. 68, No. 6, 2014 [0151]

Claims

Zustandsschätzeinrichtung, die Folgendes umfasst: eine Aktionsdetektionseinheit zum Vergleichen mindestens eines Stücks von Verhaltensinformationen, die Bewegungsinformationen über einen Anwender, Schallinformationen über den Anwender und Betätigungsinformationen über den Anwender enthalten, mit Aktionsmustern, die vorab gespeichert wurden, und Detektieren eines übereinstimmenden Aktionsmusters; eine Reaktionsdetektionseinheit zum Vergleichen der Verhaltensinformationen und biologischer Informationen über den Anwender mit Reaktionsmustern, die vorab gespeichert wurden, und Detektieren eines übereinstimmenden Reaktionsmusters; eine Unbehagenbestimmungseinheit zum Bestimmen, dass der Anwender sich in einem Unbehagenzustand befindet, wenn die Aktionsdetektionseinheit ein übereinstimmendes Aktionsmuster detektiert oder wenn die Reaktionsdetektionseinheit ein übereinstimmendes Reaktionsmuster detektiert und das detektierte Reaktionsmuster mit einem Unbehagenreaktionsmuster übereinstimmt, das einen Unbehagenzustand des Anwenders anzeigt, wobei das Unbehagenreaktionsmuster vorab gespeichert worden ist, eine Unbehagenzonenschätzeinheit zum Erfassen einer Schätzbedingung zum Schätzen einer Unbehagenzone auf einer Grundlage des Aktionsmusters, das durch die Aktionsdetektionseinheit detektiert wurde, und Schätzen einer Unbehagenzone, wobei die Unbehagenzone eine Zone ist, die mit der erfassten Schätzbedingung in Verlaufsinformationen, die vorab gespeichert wurden, übereinstimmt; und eine Lerneinheit, um auf die Verlaufsinformationen Bezug zu nehmen und das Unbehagenreaktionsmuster auf einer Grundlage der Unbehagenzone, die durch die Unbehagenzonenschätzeinheit geschätzt wurde, und einer Auftrittshäufigkeit eines Reaktionsmusters in einer Zone außer der Unbehagenzone zu erfassen und zu speichern.
Zustandsschätzeinrichtung nach Anspruch 1, wobei die Verlaufsinformationen zumindest Umgebungsinformationen über eine Umgebung des Anwenders, ein Aktionsmuster des Anwenders und/oder ein Reaktionsmuster des Anwenders enthalten.
Zustandsschätzeinrichtung nach Anspruch 2, wobei die Lerneinheit einen Unbehagenreaktionsmusterkandidaten auf einer Grundlage einer Auftrittshäufigkeit eines Reaktionsmusters in den Verlaufsinformationen in der Unbehagenzone extrahiert, ein Nicht-Unbehagenreaktionsmuster auf einer Grundlage einer Auftrittshäufigkeit eines Reaktionsmusters in den Verlaufsinformationen in einer Zone außer der Unbehagenzone extrahiert und das Unbehagenreaktionsmuster, aus dem das Nicht-Unbehagenreaktionsmuster ausgeschlossen ist, aus dem Unbehagenreaktionsmusterkandidaten erfasst.
Zustandsschätzeinrichtung nach Anspruch 1, wobei, wenn das Reaktionsmuster, das durch die Reaktionsdetektionseinheit detektiert wurde, mit dem gespeicherten Unbehagenreaktionsmuster übereinstimmt und das übereinstimmende Reaktionsmuster ein Reaktionsmuster enthält, das einem bestimmten Unbehagenfaktor entspricht, die Unbehagenbestimmungseinheit einen Unbehagenfaktor des Anwenders auf einer Grundlage des Reaktionsmusters, das dem bestimmten Unbehagenfaktor entspricht, identifiziert.
Zustandsschätzeinrichtung nach Anspruch 2, die ferner Folgendes umfasst: eine Schätzererzeugungseinheit zum Erzeugen eines Schätzers zum Schätzen, ob der Anwender sich in einem Unbehagenzustand befindet, auf einer Grundlage des Reaktionsmusters, das durch die Reaktionsdetektionseinheit detektiert wurde, und der Umgebungsinformationen, wenn Aktionsmuster, die gleich oder größer als ein vorgegebener Wert sind, als die Verlaufsinformationen angesammelt werden, wobei, wenn der Schätzer erzeugt wird, die Unbehagenbestimmungseinheit sich auf ein Ergebnis von Schätzung durch den Schätzer bezieht und bestimmt, ob der Anwender sich in einem Unbehagenzustand befindet.
Zustandsschätzeinrichtung nach Anspruch 1, wobei, wenn das Aktionsmuster, das durch die Aktionsdetektionseinheit detektiert wurde, die Betätigungsinformationen enthält, die Unbehagenzonenschätzeinheit eine Zone in einem bestimmten Zeitraum nach der Erfassung der Betätigungsinformationen aus der Unbehagenzone ausschließt.