WO2019058590A1 - 見守りシステム、見守り方法、冷蔵庫、及び通信端末 - Google Patents

見守りシステム、見守り方法、冷蔵庫、及び通信端末 Download PDF

Info

Publication number
WO2019058590A1
WO2019058590A1 PCT/JP2018/007932 JP2018007932W WO2019058590A1 WO 2019058590 A1 WO2019058590 A1 WO 2019058590A1 JP 2018007932 W JP2018007932 W JP 2018007932W WO 2019058590 A1 WO2019058590 A1 WO 2019058590A1
Authority
WO
WIPO (PCT)
Prior art keywords
food
amount
data value
amount data
unit
Prior art date
Application number
PCT/JP2018/007932
Other languages
English (en)
French (fr)
Inventor
昌鷹 馬場
由佳 津田
Original Assignee
三菱電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三菱電機株式会社 filed Critical 三菱電機株式会社
Priority to JP2019542970A priority Critical patent/JP6710344B2/ja
Publication of WO2019058590A1 publication Critical patent/WO2019058590A1/ja

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D11/00Self-contained movable devices, e.g. domestic refrigerators
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D23/00General constructional features
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/04Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using a single signalling line, e.g. in a closed loop

Definitions

  • the present invention relates to a watching system, watching method, a refrigerator, and a communication terminal for notifying a watching person of watching situation of watching target person's living condition.
  • the conventional watching system notifies a watching person (for example, a relative) of the living situation of the watching target based on detection signals of sensors attached to various places of the living space of the watching target (for example, an elderly person).
  • a watching person for example, a relative
  • the behavior of the surveillance target person is constantly monitored by the sensors attached to each place, the privacy of the surveillance target person is not protected throughout the living space, and the surveillance target person is constantly monitored.
  • Patent Documents 1, 2 and 3 there have been proposed systems and devices capable of alleviating the discomfort of the watching target person (see, for example, Patent Documents 1, 2 and 3).
  • Patent Document 1 takes a picture of the contents of a container (including a refrigerator) used by a user who is a watching target, and transmits a piece of photographing information to an external server, and current photographing information of the contents of the container There is proposed a system having an external server which determines the safety of the user based on the difference with the past imaging information.
  • Patent Document 2 proposes a refrigerator used by a user who is a watching target.
  • This refrigerator has voice acquisition means for acquiring voice outside the storage or imaging means for imaging outside the storage, and communication means, and audio information or video information based on voice or video outside the storage from the communication means through the network Send to an external device via
  • Patent Document 3 proposes an apparatus that determines presence / absence of a user who is a watching target based on the energy usage of devices in a predetermined area, and transmits the determination result to an external organization.
  • Patent Document 1 has a problem that the contents of the container may be viewed by another person since the imaging information of the contents of the container is transmitted to the external server, and privacy is not appropriately protected. Further, since image data having a large data size is transmitted, a memory having a large storage capacity and an arithmetic processing unit having a high processing capacity are required, and there is a problem that cost reduction is difficult.
  • Patent Document 2 has a problem that privacy is not appropriately protected since audio information or video information based on audio or video acquired around the refrigerator is transmitted to the external apparatus. In addition, when transmitting video information, there is a problem that cost reduction is difficult.
  • the apparatus of patent document 3 only determines the presence / absence of a user based on energy consumption, and the subject that a user's living condition can not be determined appropriately occurs.
  • the present invention has been made to solve the above-mentioned problems, and appropriately protecting the privacy of a watching target who uses a food storage while appropriately suppressing an increase in cost, and appropriately determining a living situation.
  • monitoring method, communication terminal, and a refrigerator that appropriately protects the privacy of the person being watched over and enables an appropriate determination of the living condition while suppressing an increase in cost. I assume.
  • the watching system is a watching system for watching the living condition of the watching target and notifying the watching person, and detects the amount of food stored in the food storage used by the watching target,
  • the sensing means for generating a food amount data value indicating the amount of food
  • a data storage unit for storing the food amount data value generated by the sensing means as a food amount data history, and the food amount from the food amount data history Whether or not the pattern deriving unit for deriving the amount change pattern of food corresponding to the time change of the data value, and the latest amount data value of food generated by the sensing means are within the allowable range based on the change amount of food
  • a communication unit for transmitting the judgment information to the communication terminal of the watcher.
  • the refrigerator according to the present invention is a refrigerator for watching the living condition of the watching target person and notifying the watching person, which detects the amount of the foodstuff stored in the refrigerator, and indicates the amount data value of the foodstuff showing the amount of the foodstuff
  • the sensing means to generate, the data storage unit for storing the food amount data value generated by the sensing means as food amount data history, and the food amount corresponding to the time change of the food amount data value from the food amount data history It is monitored whether or not a pattern deriving unit for deriving a change pattern and the latest food amount data value generated by the sensing means are within an allowable range based on the food amount change pattern, and determination information based on a monitoring result And a communication unit for transmitting the judgment information to the communication terminal of the watcher.
  • the present invention it is possible to appropriately protect the privacy of a watching target who uses a food storage or a refrigerator and to appropriately determine the living condition while suppressing an increase in cost.
  • FIG. 1 is a block diagram schematically showing a configuration of a watching system according to a first embodiment of the present invention.
  • (A) is a longitudinal cross-sectional view which shows schematically the structure of the refrigerator which concerns on Embodiment 1
  • (b) is a front view which shows the example of the foodstuff which exists in the refrigerator compartment with a door open
  • c) is a figure which shows the bright part area
  • (A) to (c) are diagrams showing a light area where the light of the room light can be seen from the front and a dark area where the light of the room light is blocked by the food, and (d) is in the cold room It is a figure which shows the relationship between the quantity of foodstuffs, and the illumination intensity level detected by the illumination intensity sensor by a graph.
  • (A) to (c) are diagrams showing a light area where the light of the interior light can be seen from the front and a dark area where the light of the interior light is blocked by the food, and (d) is detected by the illuminance sensor It is a figure which shows the relationship of the illumination level performed and elapsed time by a graph, and (e) is a figure which shows the relationship between the quantity of foodstuffs in a refrigerator compartment, and elapsed time.
  • (A) is a figure which shows the example of the time change of the quantity of the foodstuff which exists in a refrigerator compartment (example for purchasing a foodstuff once every 3rd, and replenishing it), and (b) is in a refrigerator compartment It is a figure which shows the example of the time change of the quantity of foodstuffs (example of purchasing foodstuffs 3 times a week, and replenishing it) with a graph.
  • (A) is a figure which shows the example of the time change of the quantity of the foodstuff which exists in a refrigerator compartment (example for purchasing a foodstuff once every 3rd, and replenishing it),
  • (b) is the amount data generation of foodstuffs It is a figure which shows the amount data value of foodstuffs corresponding to the quantity of the foodstuff of the figure (a) produced
  • (A) is a figure which shows the example of 3 cycles (The period from the time of increase to the time of the next increase is made into 1 cycle) of the time change of the quantity of the foodstuff in a refrigerator compartment in a graph
  • (b) is a figure It is the figure which made the time change (starting point) correspond the time change of three cycles of the quantity of foodstuffs
  • (c) is the average value calculated from the time change of three cycles of the quantity of foodstuffs It is a figure which shows the upper limit and lower limit of a pattern (margin) and a margin (permissible range).
  • (A) to (d) is a figure which shows the setting method of the margin of a foodstuffs amount change pattern.
  • (A) to (d) are diagrams showing a method of determining whether or not the living condition of the watching target person is in an abnormal state from the time change of the actual food content data value.
  • (A) to (c) are diagrams showing a method of determining whether or not the living condition of the watching target person is in an abnormal state from the time change of the actual food content data value.
  • (A) to (c) are diagrams showing another method of determining whether or not the living condition of the watching target person is in an abnormal state from the time change of the actual food content data value.
  • (A) And (b) is a figure which shows the characteristics per week in the time change of a foodstuffs amount data value.
  • (A) to (c) is a figure which shows the characteristic for every season in the time change of a foodstuffs amount data value. It is a block diagram which shows roughly the structure of the guard system which concerns on Embodiment 2 of this invention.
  • (A) to (c) is a figure which shows the weight sensor of the sensing means of the refrigerator which concerns on Embodiment 2.
  • FIG. It is a block diagram which shows roughly the structure of the surveillance system which concerns on Embodiment 3 of this invention.
  • (A) to (c) is a figure which shows the method to acquire the amount of foodstuffs from the picked-up image data of the camera of the sensing means of the refrigerator which concerns on Embodiment 3.
  • FIG. 1 is a block diagram schematically showing a configuration of a watching system according to a first embodiment of the present invention.
  • the watching system shown in FIG. 1 monitors the living situation of the watching target who is a user of the refrigerator 10 as a food storage based on the change in the amount of food in the refrigerator 10 (also referred to as “inside storage”). This is a system for transmitting the judgment information based on the monitoring result to the communication terminal 50 of the watching person. Further, this watching system can implement the watching method according to the first embodiment.
  • the watching target is, for example, an elderly person or the like, and the watching is, for example, a company or the like who provides a relative or watching service of the watching target. In the present embodiment, the watching person is watched and described as the service center 60.
  • the watching system uses the refrigerator 10 as a storage device for storing food and information transmitted from the communication unit 17 of the refrigerator 10 via the network 40 such as the Internet.
  • the communication terminal (for example, receiving terminal) 50 which can receive is provided.
  • the watching system may include a server computer (external server) 61 of the watching service center 60.
  • the external server 61 receives the information transmitted from the communication unit 17 of the refrigerator 10 via the network 40, and transmits the information to the communication terminal 50 of the watcher via the network.
  • “food” includes food in general. Also, “food” includes not only food itself but also containers and packaging for storing food.
  • the user purchases food in a cycle having a certain degree of regularity and puts it in the refrigerator 10 (replenishes) in a normal living condition.
  • the user repeatedly performs an act of taking out and consuming the food from the inside of the refrigerator 10 in a normal living condition.
  • purchase of foodstuffs is an action accompanied by replenishment of foodstuffs to the refrigerator, and therefore, is used in the same meaning as “replenishment of foodstuffs”.
  • “consumption of food” is an action that involves taking out the food from the refrigerator, and therefore, is used in the same meaning as “taking out the food”.
  • the refrigerator 10 includes a sensor control unit 11, an interior lighting 18, an illuminance sensor 12, a food amount data generation unit 13, and a data storage unit 14 which is an information storage unit such as a memory. , A pattern derivation unit 15, a determination unit 16, and a communication unit 17.
  • the interior lighting 18, the illuminance sensor 12, and the amount-of-food data generation unit 13 constitute sensing means for detecting the amount of food stored in the refrigerator 10.
  • the refrigerator 10 has a cooling mechanism (for example, a motor, a compressor, a fan, a cold air path, a control circuit, etc.) for realizing a function of storing food materials as stored items at low temperature. Not shown because it exists.
  • the sensor control unit 11 of the refrigerator 10 generates a control signal for detecting the amount of food in the storage at a predetermined timing. For example, the sensor control unit 11 generates a control signal for turning on the interior lighting 18 at predetermined time intervals, and performs control for causing the illuminance sensor 12 to detect the illuminance level in the interior. Send a signal.
  • the interior lighting 18 is a lighting device that lights up based on the control signal transmitted from the sensor control unit 11 and illuminates the inside of the storage.
  • the illuminance sensor 12 detects the illuminance level in the refrigerator when the lamp 18 is on based on the control signal transmitted from the sensor control unit 11. This illuminance level has a negative correlation (shown in FIG. 3D described later) with the amount of food in the storage. Therefore, by detecting the illumination level, it is possible to measure the amount of food in the storage.
  • the food amount data generation unit 13 receives the illuminance level detected by the illuminance sensor 12 and generates a food amount data value, which is a numerical value representing the amount of food in the storage, based on the illuminance level. Are stored in the data storage unit 14 as a food content data history.
  • the pattern deriving unit 15 reads the past food content data value, which is the food content data history accumulated in the data storage unit 14, and uses the regularity of time change of the food content data value to make the user-specific regularity
  • a food material change pattern (one example is shown by a solid curve in FIG. 7 (c) described later), which is a change pattern of the amount of the food provided with.
  • the food content change pattern is the eating habits pattern of the user.
  • the regularity of the time change of the amount data value of food means that the amount of food in the storage increases in a cycle specific to the user of the refrigerator 10 (ie, the food is purchased), and this user is unique The food in the storage is gradually reduced (ie, the food is consumed) at a pace.
  • the determination unit 16 determines whether or not the latest (actual) food amount data value falls within the allowable range determined based on the food amount change pattern, or the time out of the allowable range is within the allowable value. Based on the result of this determination, it is monitored whether or not the living condition of the user who is the watching target is in an abnormal state, and determination information based on the monitoring result is output.
  • One example of the operation of the determination unit 16 will be described using FIGS. 9A to 9D described later and FIGS. 10A to 10C described later.
  • FIGS. 11 (a) to 11 (c) described later are examples of the operation of the determination unit 16 based on the monitoring result.
  • the communication unit 17 receives the determination information provided from the determination unit 16, and transmits the determination information on the living condition of the user to the communication terminal 50 of the watcher via the network 40. Transmission of the determination information to the communication terminal 50 is, for example, when the living condition is in an abnormal state, or at a predetermined cycle, at a predetermined time, or a request signal from the communication terminal 50. It is done according to.
  • the communication unit 17 may transmit the determination result of the determination unit 16 to the communication terminal 50 of the watcher via the external server 61 of the watching service center 60 from the network 40.
  • FIG. 2 (a) is a longitudinal sectional view schematically showing the structure of the refrigerator 10 according to Embodiment 1 (the cross-sectional structure taken along the line S2a-S2a in FIG. 2 (b)).
  • FIG.2 (b) is a front view which shows the example of the foodstuff in the refrigerator compartment 101 which the door 104 opens.
  • FIG.2 (c) is a figure which shows the bright part area where the light of the interior lighting 18 sees from the front (position of the inner surface of the door 104), and the dark part area (shadow area) where the light of the interior lighting 18 is interrupted by foodstuffs. It is.
  • the storage room of the refrigerator 10 is the refrigerator compartment 101
  • “in the refrigerator” and “in the refrigerator compartment 101” are used in the same meaning.
  • a food amount change pattern of the user is generated and used for the determination of the determination unit 16. Is also possible.
  • a shelf board 102 on which a food is placed is provided in the refrigerator compartment 101, and the interior lighting 18 for illuminating the inside of the refrigerator compartment 101 is the back side of the refrigerator compartment 101 (see FIG. 2 (a) is disposed on the left).
  • the light emitted from the interior light 18 directly or reflected from the wall and the surface of the food reaches the position of the inner surface of the door 104 indirectly.
  • An illumination sensor 12 is disposed on the inner surface of the door 104, and the light emitted from the interior lighting 18 directly or indirectly reaches the illumination sensor 12.
  • FIG.2 (b) is the figure which looked at the refrigerator 10 from the front, and has shown the state which the door 104 of the refrigerator compartment 101 opened.
  • various food materials are placed on the shelf board 102.
  • FIG. 2C shows how the inside of the refrigerator compartment 101 with the interior lighting 18 turned on by closing the door 104 of the refrigerator compartment 101 of FIG. 2B from the front (the door 104 side) It shows what you can see.
  • a part of the light emitted from the interior lighting 18 on the back side of the cold storage room 101 is reflected by the wall surface of the interior of the storage and the surface of the food, but when viewed from the door 104 side, the food is from the interior lighting 18 It blocks the light that has been emitted.
  • the area without food in the refrigerator compartment 101 forms a bright area (depicted as a white area), and the area with food is a dark area (grey area) Form).
  • interior lighting may be installed in the front position of the inner surface of the side wall of the refrigerator compartment 101.
  • the illuminance sensor 12 be disposed on the back side of the inner surface of the side wall in the diagonal direction sandwiching the food (that is, the back side of the inner surface facing the interior lighting).
  • the food content data value may be generated based on detection values of a plurality of illuminance sensors (for example, a total value, an average value, and the like of illuminance levels).
  • FIGS. 3A to 3C are diagrams showing a bright area where the light of the interior lighting 18 can be seen from the front (the position of the inner surface of the door 104) and a dark area where the light of the interior lighting 18 is blocked by food It is.
  • FIG. 3D is a graph showing the relationship between the amount of food in the refrigerator compartment 101 and the illuminance level detected by the illuminance sensor 12.
  • State SA in FIG. 3A is a case where the amount of food in the refrigerator compartment 101 is large.
  • the state SB in FIG. 3B is a case where the amount of the food in the refrigerator compartment 101 is about middle.
  • the state SC in FIG. 3C is a case where the amount of food in the refrigerator compartment 101 is small.
  • the illuminance level is low because the amount of light reaching the illuminance sensor 12 is small (the amount of light blocked by the food is large) in the state SA where the amount of food is large.
  • the amount of light reaching the illuminance sensor 12 is about middle (the amount of light blocked by the food is about middle), so the illuminance level is about middle.
  • the amount of light reaching the illuminance sensor 12 is large (the amount of light blocked by the food is small), which indicates that the illuminance level is high.
  • the illuminance level detected by the illuminance sensor 12 there is a negative correlation between the illuminance level detected by the illuminance sensor 12 and the amount of food in the refrigerator compartment 101.
  • FIGS. 4 (a) to 4 (c) are diagrams showing a bright area where the light of the interior light 18 can be seen from the front (the position of the inner surface of the door 104) and a dark area where the light of the interior light 18 is blocked by food. It is.
  • FIG. 4D is a graph showing the relationship between the illuminance level detected by the illuminance sensor 12 and the elapsed time.
  • FIG.4 (e) is a figure which shows the relationship between the quantity of the foodstuff which exists in the refrigerator compartment 101, and elapsed time by a graph.
  • FIGS. 4 (a) to 4 (c) the food in the refrigerator compartment 101 is consumed as time passes.
  • FIG. 4 (a) shows a state SA immediately after the food is purchased and the food is put into the refrigerator compartment 101 (immediately after replenishment).
  • FIG.4 (b) shows the state SB when taking out and consuming the foodstuff which exists in the refrigerator compartment 101 in everyday life.
  • FIG.4 (c) shows the state SC when the foodstuff in the cold storage room 101 is further taken out and consumed in daily life. That is, immediately after replenishing the food into the refrigerator compartment 101, as shown as a state SA in FIG. 4A, the amount of the food in the refrigerator compartment 101 is large.
  • each of the states SA, SB, and SC shows one scene in the process of changing the state in the cold storage room 101.
  • the change in the state in the refrigerator compartment 101 in the order of FIG. 4A, FIG. 4B, and FIG. 4C corresponds to the illuminance sensor 12. It is shown as a graph of the relationship between the illuminance level detected by. That is, the graph of FIG. 4 (d) shows that the illuminance level increases when the amount of food in the refrigerator compartment 101 decreases with the passage of time (by taking out the food). Since the change of the illumination level in the refrigerator compartment 101 is caused by the user taking out the food (consumption of the food), the illumination level rises stepwise at each timing of taking out the food.
  • the change in the state in the refrigerator compartment 101 in the order of FIG. 4 (a), (b) and (c), that is, the change in the order of the states SA, SB and SC It is shown as a graph of the relationship between the amount of food present and the elapsed time. That is, the graph of FIG. 4 (e) shows that the amount of the food in the refrigerator compartment 101 decreases with the passage of time (by taking out the food). Since the change in the amount of food in the cold storage room 101 is caused by the user taking out the food (consumption of the food), the amount of food decreases stepwise at each timing of taking out the food.
  • Fig.5 (a) is a figure which shows the example of the time change of the quantity of the foodstuff which exists in the refrigerator compartment 101 (example of purchasing a foodstuff once every 3rd, and replenishing it).
  • FIG.5 (b) is a figure which shows the other example (The example which purchases a foodstuff three times a week, and replenishes it) of the time change of the quantity of the foodstuff which exists in the refrigerator compartment 101 with a graph.
  • the changes in the amount of food shown in FIGS. 5 (a) and 5 (b) are only typical examples, and changes in the amount of different food may also occur.
  • the numerals "1" to “7” indicate the number of days elapsed
  • "B” indicates the time of breakfast
  • "L” indicates the time of lunch
  • "D” "Indicates the time of dinner. That is, in the example of FIG. 5 (a) and (b), the quantity of the foodstuff in the refrigerator compartment 101 reduces at the time of breakfast B, lunch L, and dinner D.
  • the scale with numerals “1” to “7” is located between lunch L and dinner D and indicates the time of day division. This means that the user purchases food between lunch L and dinner D and refills the cold storage room 101 with food.
  • the increase and decrease in the amount of food in the refrigerator compartment 101 has some degree of regularity peculiar to the user.
  • the ingredients of the refrigerator 10 may be consumed at a timing other than the breakfast B, the lunch L, and the dinner D, or the user's eating habits may include meals other than three meals a day .
  • the food content change pattern having regularity unique to the user is derived by the pattern deriving unit 15 described later.
  • FIG. 6A is a graph showing an example of the time change of the amount of food in the refrigerator compartment 101 (example of purchasing food once every three days and replenishing the food).
  • FIG. 6 (b) is a diagram showing food amount data values corresponding to the amount of the food of FIG. 6 (a) generated by the food amount data generation unit 13 by dots (circles).
  • FIG. 6 (a) has shown the relationship between the quantity of the same foodstuff as FIG. 5 (a), and an elapsed day.
  • FIG. 6 (b) shows food amount data values obtained by converting the amounts of the food shown in FIG. 6 (a) into data at predetermined sampling intervals.
  • the sampling interval interval between adjacent scales on the horizontal axis in FIG. 6B
  • excessive data generation is not performed in consideration of the time interval for taking out the food and the time interval for transmitting the determination result. For example, it is set to an appropriate time between several tens of minutes and several hours.
  • the amount-of-food data value is time-series data, if it is illustrated in the time axis direction, it becomes as shown in FIG.
  • the amount-of-food data value is sequentially output from the amount-of-food data generation unit 13 as a data value for each sampling.
  • the data storage unit 14 stores the food amount data values output from the food amount data generation unit 13.
  • the amount-of-food data value is desirably stored, for example, as an amount-of-food data history associated with time, or as an amount-of-food data history associated with a numerical value indicating the order of the data.
  • the pattern deriving unit 15 reads out the food amount data value for a certain period from the data storage unit 14 (that is, from the past food amount data value), and the pattern of temporal change of the food amount data value, that is, the user-specific rule Deriving the amount change pattern of food with the sex.
  • FIG. 7A is a graph showing a time change of three cycles PT1 to PT3 (one cycle from the time of increase to the time of next increase) of the amount of food in the refrigerator compartment 101.
  • FIG. 7 (b) is a drawing in which the time change of the three cycles of the amount of the food is made to coincide with the point of increase (starting point).
  • the portion where the amount data value of the food material greatly increases indicates the point of purchase of the food (ie, replenishment of the food), and from this point on, the next food is purchased (ie, the next One cycle is up to the point of supplementing the food).
  • the scale attached to the time axis indicates the sampling time point, and the value of the amount-of-food data changes every several samplings. This is because the sampling is set to be performed in a cycle shorter than the cycle for taking out the food from inside the storage.
  • FIG. 7 (b) changes in the food amount data values in a plurality of cycles are shown in an overlapping manner, with the points at which the food amount data values are increasing (that is, the points at which food is purchased and replenished) coincide. .
  • the amount of consumption (extraction amount) and the time interval of consumption (extraction) of the consumption of foodstuffs have some dispersion
  • variation in variation can be expressed as "variation in change in the amount of food value data" and "variation in period" as shown in FIG. 7B.
  • the “variation in change in the amount-of-foodstuff data value” can be represented by the difference between the values of the amount-of-foodstuff data in a plurality of cycles at a certain sampling time.
  • the “variation in period” can be represented by the difference between the periods of change in the amount data value of the plurality of periods.
  • FIG. 7 (c) the average value of the food amount data values in a plurality of cycles is shown by a solid curve. Since the curve of the continuous line of FIG.7 (c) is an average value of the foodstuffs amount data value of multiple periods, it shows the average foodstuffs amount change pattern of the user of the refrigerator 10. FIG. This change in the amount of foodstuffs varies in the daily life of the user. For this reason, as shown by the two broken line curves in FIG. 7C, the pattern deriving unit 15 has a shape in which the food content change pattern is added with “a change margin for food content data value” and “period margin”. Output with
  • FIGS. 8A to 8D are diagrams showing a method of setting the margin of the amount-of-foodstuff change pattern.
  • the pattern deriving unit 15 sets the “margin change data value change margin” and the “cycle margin” by adding the margin to the average value shown in FIG.
  • FIG. 8 (a) shows the time-dependent change of the amount data value of food in FIG. 7 (b), that is, the amount of food of plural cycles made coincident with the time point when the amount data value of food is greatly increased by purchasing and replenishing the food. It is a graph of data values overlaid. As shown in FIG. 8 (b), when it is assumed that the distribution of the change of the food content data value is a normal distribution, the center of the distribution corresponds to the average value. Therefore, the average value of the time change of the amount data value of food changes as shown by a solid curve in FIG. 8 (d). Similarly, as shown in FIG.
  • the center of the distribution corresponds to the average value. Therefore, the average value of the time change of the amount-of-food data value is like the end on the right side of the solid curve shown in FIG. Furthermore, if the standard deviation ⁇ of the distribution is obtained and, for example, “change margin of food content data value” and “cycle margin” are set as a range of ⁇ 2 ⁇ , the food content data value that is the origin of the food content change pattern 95% falls within the range of "the change margin of the amount data value of ingredients" and the "period margin", that is, between the two dashed curves in FIG. 8 (d).
  • margin of the foodstuffs amount change pattern of FIG.8 (d) is an example to the last, and "a change margin of a foodstuffs amount data value" and a “period margin” are not limited to the range of +/- 2 (sigma).
  • the determination unit 16 determines that the change amount of the latest (present) food amount data value output from the food amount data generation unit 13 is the change margin of the food amount data value of the food amount change pattern output from the pattern derivation unit 15 It is monitored (judged) whether or not it deviates more than a predetermined judgment standard from the range of “and“ period margin ”, and judgment information based on the monitoring result is generated.
  • FIGS. 9 (a) to 9 (d) are diagrams showing a method of judging whether the living condition of the watching target person is abnormal or not from the time change of the actual food content data value.
  • FIG. 9A shows an example when the watching target person's living condition is normal.
  • Two broken line curves indicate the upper limit and the lower limit of the allowable range of the food content change pattern.
  • the period between the purchase of food (refilling of food) and the purchase of the next food (refilling of the next food) is one cycle. If the actual food content data value (solid line) changes with time within the allowable range of the food content change pattern as shown in FIG. It is determined that the state is not abnormal, that is, the normal state.
  • FIG. 9B shows another example when the watching target person's living condition is normal.
  • the actual food content data value (solid line) is temporarily deviated from the allowable range of the food content change pattern.
  • the actual food content data value (solid line) returns to within the allowable range of the food content change pattern within the predetermined allowable time.
  • the determination unit 16 does not determine that the living situation is in the abnormal state, but determines that the living state is the normal state.
  • FIG. 9C shows an example when the life condition of the watching target is abnormal.
  • the actual food content data value deviates from the allowable range of the food content change pattern, and exceeds the predetermined allowable time and is outside the allowable range of the food content change pattern.
  • the determination unit 16 determines that the living situation is in an abnormal state.
  • FIG. 9D shows another example when the life condition of the watching target is abnormal.
  • the actual food amount data value deviates from the allowable range of the food amount change pattern, and the period until the next food purchase timing exceeds the predetermined allowable time.
  • the determination unit 16 determines that the living situation is in an abnormal state.
  • FIGS. 10 (a) to 10 (c) are diagrams showing a method of judging whether the living condition of the watching target person is abnormal or not from the time change of the actual food content data value.
  • FIG. 10 (a) shows an example when the watching target person's living condition is normal.
  • the actual food content data value (solid line) decreases rapidly, and is shifted earlier in time than the allowable range of the food content change pattern.
  • the actual food content data value (solid line) returns to within the allowable range of the food content change pattern within the predetermined allowable time.
  • the determination unit 16 does not determine that the living situation is in the abnormal state, but determines that the living state is the normal state.
  • FIG. 10 (b) shows an example when the life condition of the watching target is abnormal.
  • the actual decrease in the amount data value of the food is quick and deviates from the allowable range of the food amount change pattern, and exceeds the predetermined allowable time to be outside the allowable range of the food amount change pattern.
  • the determination unit 16 determines that the living situation of the user is abnormal.
  • FIG. 10C shows another example when the life condition of the watching target is abnormal.
  • the actual food content data value changes without falling out of the allowable range of the food content change pattern, but the timing for purchasing the next food is early, and the predetermined allowable time is exceeded. Period is continuing.
  • the determination unit 16 determines that the living situation of the user is in an abnormal state.
  • FIGS. 11 (a) to 11 (c) are diagrams showing another method of judging whether the living condition of the watching target person is abnormal or not from the time change of the actual food content data value.
  • FIG. 11 (a) is a diagram in which a plurality of periods PT1 to PT3 of temporal change of the food amount data value are overlapped and drawn, and the pattern deriving unit 15 obtains an average value based on them and changes the food amount change pattern (figure The average value of 11 (b) and (c) is derived.
  • the determination unit 16 determines in advance a deviation rate (permissible deviation rate) as a reference of determination of presence / absence of abnormality of the living condition of the user, and determines presence / absence of abnormality of the living condition of the user based thereon.
  • FIG. 11B shows an example when the life condition of the watching target is abnormal.
  • the change in the actual food content data value deviates from the average value by a value exceeding the allowable deviation rate.
  • the determination unit 16 determines that the living situation of the user is in an abnormal state.
  • FIG. 11C shows another example when the life condition of the watching target is abnormal.
  • the change of the actual food content data value is within the allowable deviation rate with respect to the average value, the timing for purchasing the next food is delayed, and the cycle is allowable deviation. The period exceeding the rate is deviated.
  • the determination unit 16 determines that the living situation of the user is in an abnormal state.
  • the deviation rate is calculated from the latest food content data value, that is, the actual food content data value according to the following equation.
  • FIGS. 12 (a) and 12 (b) are diagrams showing the characteristics of the week unit in the time change of the amount data of food.
  • FIGS. 12 (a) and 12 (b) show cases where food is purchased three times a week.
  • one cycle of the food content change pattern is one week, and the determination of the living condition of the user is based on the allowable range of the food content change pattern in FIG. 12 (b). It may be done. In this case, since the determination can be made in consideration of the deviation due to the day of the week, it is possible to improve the reliability of the determination as to whether or not the living condition of the user is abnormal.
  • FIGS. 13 (a) to 13 (c) are diagrams showing the characteristics of each season in the time change of the amount data of food.
  • the food content change pattern may change depending on the season. For example, seasons with high water intake (eg, summer) and low seasons (eg, winter), seasons where freshness of food products on the market can be maintained long (eg, winter) and seasons (eg, summer) that can not be maintained long, food ingredients
  • seasons with high water intake eg, summer
  • seasons where freshness of food products on the market can be maintained long eg, winter
  • food ingredients The features that appear in the food content change pattern vary depending on the season, such as the season when going out for purchase is easy (for example, spring and autumn) and the hard season (for example, summer and winter). For this reason, it is possible to improve the reliability of determination of the presence or absence of abnormality of a user's living condition by switching a foodstuffs amount change pattern for every season.
  • FIG. 13A shows the allowable range of the amount-of-change food pattern of season # 1, which is a season in which one cycle of the amount-of-food change pattern is long and the change of the amount of food is small.
  • FIG. 13B shows the allowable range of the amount-of-change food pattern of season # 2, which is a season in which one cycle of the amount-of-food change pattern is short and the amount of change in the amount of food is large.
  • FIG. 13 (c) shows the allowable range of the amount variation pattern of the season # 3, which is a season in which one cycle of the variation pattern of the amount of food is intermediate and the variation of the amount of food is intermediate.
  • the amount change pattern of foodstuffs amount which makes 1 week 1 week corresponding to the cause of the day a period is derived beforehand. It is necessary to accumulate in the data storage unit 14 food value data values to be processed.
  • the foodstuff of each season for deriving the amount change pattern of foodstuffs amount corresponding to the factor of season beforehand It is necessary to accumulate the quantity data value in the data storage unit 14.
  • the pattern deriving unit 15 obtains a plurality of types of food content change patterns, and the determination unit 16 uses the allowable range of the plurality of food content change patterns to determine whether the living condition of the user is abnormal. The determination may be made. In this case, it is possible to appropriately cope with individual differences in food content change patterns, and to improve the reliability of the determination.
  • ⁇ Communication unit 17 For example, when the life condition of the user is in an abnormal state, the communication unit 17 notifies the communication terminal 50 of the watcher of the situation via the network 40.
  • the illuminance is converted into the amount data value of food, the eating pattern is extracted from the change of the amount of food, and the presence or absence of the pattern is detected to detect the abnormality of the living condition of the user.
  • the determination is performed, the same determination may be performed using the illuminance data itself.
  • the amount of food is converted to the amount data of food, and the amount of food is Based on the history of increase and decrease of data values, the food content change pattern of the user of the refrigerator 10 is derived, and whether the latest food content data value changes according to the food content change pattern (generally changes within the allowable range) It is determined whether the living condition of the user of the refrigerator 10 is in an abnormal state based on. In this case, since it is not necessary to transmit large sized data such as image data, it is possible to suppress an increase in the cost of the apparatus. Moreover, since the image data is not transmitted, the privacy of the watching target who uses the refrigerator 10 can be appropriately protected. In addition, based on the amount of food in the refrigerator 10 closely related to the user's daily diet, the user's living situation is monitored to determine whether the living situation is abnormal or not. The reliability of the determination can be improved.
  • the amount of food is detected by the interior lighting 18 and the illumination sensor 12 and the camera is not necessary, so the privacy of the user is assured. Protected.
  • the monitoring system when the food content change pattern of the user of the refrigerator 10 is derived from the history of increase and decrease of the food content data value, Starting from the timing of the increase and configuring one cycle between the starting point and the next starting point, it is possible to acquire an appropriate food content change pattern, and improve the reliability of the judgment of the judgment unit. .
  • an average value and a standard deviation are obtained at the same time intervals from the starting point for one cycle of the time change of the food amount data value having the starting point aligned.
  • the center of the time change of the amount data value of food is defined by the average value, and the tolerance range (margin range) is defined by the standard deviation. Therefore, it is possible to define a statistically valid allowable range (margin range) as the user's food content change pattern.
  • the latest change in the amount data value of food is out of the allowance range of the amount change pattern of food and exceeds the predetermined allowable time.
  • the user's life situation is abnormal. For this reason, it is possible to appropriately determine the diverging situation with respect to the food content change pattern of the user, and it is possible to reduce the erroneous determination to determine the abnormal state even though the living condition is the normal state.
  • the latest change in the food amount data value exceeds a predetermined allowable deviation rate with respect to the average value as the food amount change pattern. It can be configured to determine that the living condition of the user is abnormal. In this case, it is possible to determine the presence or absence of an abnormality in the living condition based on the deviation situation with respect to the food content change pattern of the user.
  • the monitoring system, the monitoring method, and the refrigerator 10 when the food content change pattern of the user of the refrigerator 10 is derived from the history of increase and decrease of the food content data value, It is possible to construct so as to derive a food content change pattern indicating regularity of increase and decrease of the amount data value. In this case, it is possible to appropriately cope with the uneven tendency of increase and decrease of the amount data value of the food depending on the day of the week, and to improve the reliability of the determination of the presence or absence of the living condition.
  • the monitoring system, the monitoring method, and the refrigerator 10 according to the first embodiment when deriving the food content change pattern of the user of the refrigerator 10 from the history of increase and decrease of the food content data value, according to the current season. It is possible to configure so as to derive a food content change pattern indicating regularity of increase and decrease of the food content data value. In this case, it is possible to appropriately cope with the uneven tendency of increase or decrease of the amount data value of the food depending on the season, and to improve the reliability of the determination of the presence or absence of the living condition.
  • a plurality of types of food amount change patterns are derived from the history of increase and decrease of food amount data values, and a plurality of types of food amount change patterns are It can be used to determine the presence or absence of an abnormality in the living condition of the user. In this case, it becomes easy to cope with the individual difference in the food content change pattern, and it is possible to improve the reliability of the determination of the presence or absence of the living condition.
  • FIG. 14 is a block diagram schematically showing a configuration of a watching system according to a second embodiment of the present invention.
  • the sensing means for detecting the amount of food in the refrigerator 20 as a food storage includes weight sensors 22a and 22b and a weight sensor 22a and The point which has the foodstuffs amount data generation part 23 which produces
  • FIG. 15A is a longitudinal sectional view of the refrigerator 20.
  • FIG. 15B and 15C are cross-sectional views showing weight sensors 22a and 22b of the sensing means of the refrigerator 20. As shown in FIG.
  • FIG. 15 (a) the same or corresponding components as those shown in FIG. 2 (a) are denoted by the same reference numerals as those shown in FIG. 2 (a).
  • a shelf plate 108 for loading food is provided in the cold storage room 101 of the refrigerator 20, and in the freezing room 105 and the vegetable room 106, a case 109 is provided.
  • FIG. 15 (b) shows a cross section of the shelf plate 108
  • FIG. 15 (c) shows a cross section of the bottom of the case 109.
  • the shelf board 108 is configured of a shelf board main body 108a, a measuring board 108b, and a weight sensor 22a.
  • the case 109 includes a case main body 109a, a weighing plate 109b, and a weight sensor 22b.
  • the food is placed on the weighing plates 108b and 109b, and the weight of the food is measured by the weight sensors 22a and 22b.
  • the weight sensors 22a and 22b for example, a pressure-sensitive sensor or a strain gauge whose resistance value changes according to the magnitude of the pressure acting on the contact portion can be employed.
  • the weight can be calculated by adding the outputs of the plurality of weight sensors 22a or 22b.
  • the refrigerator 20 of Embodiment 2 measures the amount of food with high accuracy as compared to the refrigerator 10 of Embodiment 1. It is possible.
  • each of the some shelf board 108 in the refrigerator compartment 101 can be detected, Furthermore, each case 109 of the freezer compartment 105 or the vegetable compartment 106 Changes in the amount of food stored in the Thus, since the change of the amount of foodstuffs can be detected in detail, it is possible to improve the reliability of the judgment of the living conditions of the watching target.
  • the surveillance method, and the refrigerator 20 according to the second embodiment since it is not necessary to transmit large-sized data such as image data to the outside, an increase in the cost of the apparatus is suppressed. can do. In addition, since the image data is not transmitted to the outside, the privacy of the watching target who uses the refrigerator 20 can be appropriately protected. In addition, based on the amount of food in the refrigerator 20 closely related to the user's daily diet, the user's living condition is monitored to determine whether the living condition is abnormal or not. The reliability of the determination can be improved.
  • the detection values of the weight sensors 22a and 22b are used to detect the increase and decrease of the amount of the food, so the cost increase is suppressed.
  • the privacy of the watching target who uses the refrigerator 20 can be appropriately protected, and the living situation can be appropriately determined.
  • FIG. 16 is a block diagram schematically showing a configuration of a watching system according to a third embodiment of the present invention.
  • components that are the same as or correspond to components shown in FIG. 1 are given the same reference symbols as the reference symbols shown in FIG. 1.
  • a camera for sensing the amount of food in the refrigerator compartment 101 of the refrigerator 30 as a food storage is a camera for photographing the inside of the refrigerator compartment 101 32.
  • a watching system according to the first embodiment in that a food amount data generation unit 33 generates food amount data values indicating the amount of food in the refrigerator compartment 101 based on an image acquired by the camera 32. It is different from Except for this point, the third embodiment is the same as the first embodiment.
  • FIG. 17A is a longitudinal sectional view of the refrigerator 30.
  • FIG. FIGS. 17 (b) and (c) are diagrams showing a method of generating a food amount data value indicating the amount of food from the photographed image of the camera 32 of the sensing means of the refrigerator 30.
  • FIG. The camera 32 is provided on the inner surface of the door 104, but may be provided at another position. The number of cameras is not limited to one, and may be two or more.
  • FIG. 17 (a) the same or corresponding components as those shown in FIG. 2 (a) are denoted by the same reference numerals as those shown in FIG. 2 (a).
  • a camera 32 is provided in the refrigerator compartment 101 of the refrigerator 30, and a photographed image as shown in FIG. 17 (b) can be obtained.
  • FIG. 17 (b) shows a photographed image of the refrigerator compartment 101 by the camera 32, which is illuminated by the interior lighting 18 and is expressed in various gradations according to the detail of the position or the surface of the food.
  • FIG. 17C an image after threshold processing is performed on a captured image is binarized and displayed.
  • an average value of pixel values is calculated from the entire screen of the photographed image, and using the average value of pixel values as a threshold, pixels having a brightness above the threshold and pixels having a brightness below the threshold
  • the binarized image data (FIG. 17C) may be acquired, and the illuminance level may be acquired from the binarized image data.
  • the subsequent processing is the same as that of the first embodiment. In this case, it is possible to reduce the amount of calculation when obtaining the average brightness.
  • the surveillance method, and the refrigerator 30 according to the third embodiment since it is not necessary to transmit large-sized data such as image data to the outside, an increase in the cost of the apparatus is suppressed. can do. In addition, since the image data is not transmitted to the outside, the privacy of the watching target who uses the refrigerator 30 can be appropriately protected. In addition, based on the amount of food in the refrigerator 30 closely related to the user's daily diet, the user's living condition is monitored to determine whether the living condition is abnormal or not. The reliability of the determination can be improved.
  • the captured image by the camera 32 is digitized and used, so the privacy of the user is protected. It is possible to accurately grasp changes in the amount of food while doing so. Therefore, it is possible to improve the reliability of the determination of whether or not the living condition is abnormal.
  • FIG. 18 is a hardware configuration diagram showing a configuration of the external server 61 or the refrigerator 10, 20, 30 of the watching system of the modified example of the first to third embodiments.
  • All or part of the sensor control unit 11, the food content data generation units 13, 23, 33, the pattern derivation unit 15, and the determination unit 16 in the first to third embodiments are storage devices storing programs as software. It can be realized (for example, by a computer) using the memory 91 and the processor 92 as an information processing unit that executes a program stored in the memory 91.
  • the processor 92 of the watching system of the first to third embodiments and their variations is: Detecting the amount of food stored in the refrigerator 10, 20, 30 used by the watching target, and generating a food amount data value indicating the amount of food; Storing the food amount data value as the food amount data history in the data storage unit 14; Deriving a food quantity change pattern corresponding to a time change of the food quantity data value from the food quantity data history; Monitor whether the latest (current) food amount data value obtained by detecting the amount of food stored in the refrigerator 10, 20, 30 is within the allowable range based on the food amount change pattern Outputting judgment information based on the monitoring result, And a step of transmitting the judgment information to the communication terminal 50 of the watching person.
  • this monitoring method since it is not necessary to transmit large-sized data such as image data, an increase in the cost of the apparatus can be suppressed. In addition, since the image data is not transmitted, the privacy of the watching target who uses the refrigerator can be appropriately protected. In addition, based on the amount of food in the refrigerator closely related to the user's daily diet, the user's living situation is monitored to determine whether the living situation is abnormal or not, so the determination is made. Reliability can be improved.
  • ⁇ 5 Fourth Embodiment
  • the refrigerator 10 of FIG. 1, the refrigerator 20 of FIG. 14, and the refrigerator 30 of FIG. 16 perform detection of the amount of food to determination within the allowable range or out of the allowable range, respectively. And the structure which transmits to the watching service center 60 is shown.
  • the present invention is not limited to this mode, and it is possible to detect the amount of food and derive the pattern with a refrigerator, and monitor and send the result of detection of the amount of food and the result of pattern derivation to the service center 60.
  • FIG. 19 is a block diagram schematically showing a configuration of a watching system according to a fourth embodiment of the present invention.
  • components that are the same as or correspond to components shown in FIG. 1 are given the same reference symbols as the reference symbols shown in FIG. 1.
  • the watching system according to the fourth embodiment is different from the watching system according to the first embodiment in that the watching system according to the fourth embodiment is included in the external server 111 of the service center 110 watching the judging unit 116. Except for this point, the fourth embodiment is the same as the first embodiment.
  • the watching system according to the fourth embodiment is the information transmitted from the communication unit 17 of the refrigerator 70 via the refrigerator 70 as a food storage for storing food and the network 40 such as the Internet. And a communication terminal 50 capable of receiving information transmitted from the communication unit 113 of the monitoring service center 110.
  • the refrigerator 70 includes a sensor control unit 11, an interior lighting 18, an illuminance sensor 12, a food amount data generation unit 13, a data storage unit 14, a pattern derivation unit 15, and a communication unit 17.
  • the watching service center 110 includes communication units 112 and 113 and an external server 111.
  • the external server 111 is provided with a determination unit 116.
  • the latest (current) food amount data value output from the food amount data generation unit 13 is output to the communication unit 17. Further, “a change margin of the amount data value of the amount of food” and a “period margin” of the amount change pattern of the amount of food output from the pattern deriving unit 15 are output to the communication unit 17.
  • the communication unit 17 transmits the food content data value, the change margin of the food content data value, and the cycle margin of the food content data value to the communication unit 112 of the watching service center 110 via the network 40.
  • the determination unit 116 provided in the external server 111 of the watching service center 110 receives the food content data value, the change margin of the food content data value, and the cycle margin of the food content data value from the communication unit 112. As the timing of data transmission between the refrigerator 70 and the external server 111, it is appropriate to transmit every time when the amount data value of food is newly generated, but it is possible that the change occurs frequently for the pattern derivation result. Alternatively, it may be configured to transmit at a sparse interval than the transmission of the amount-of-food amount data value.
  • the determination unit 116 determines that “the change margin of the food amount data value of the food amount change pattern output from the pattern deriving unit 15 is the change of the latest (current) food amount data value output from the food amount data generation unit 13 It is monitored (judged) whether or not it deviates more than a predetermined judgment standard from the range of “and“ period margin ”, and judgment information based on the monitoring result is generated.
  • the communication unit 113 notifies the communication terminal 50 of the watcher of the situation.
  • FIG. 20 is a block diagram schematically showing another configuration of the watching system according to the fourth embodiment of the present invention. 20 differs from the watching system shown in FIG. 19 in that the communication terminal 120 can receive the information transmitted from the communication unit 17 of the refrigerator 70 via the network 40 instead of the watching service center in FIG.
  • the communication terminal 120 is provided with a communication unit 121 and a determination unit 126. As a form provided with the determination part 126 on the communication terminal 50 in this case, the method of installing the application of a smart phone can be considered.
  • the operation of the determination unit 126 is the same as described above.
  • the judgment unit may be provided in the service center, or the communication terminal may be provided with the judgment unit.
  • the surveillance system and the surveillance method according to the fourth embodiment since it is not necessary to transmit large-sized data such as image data to the outside, an increase in the cost of the apparatus can be suppressed. .
  • the image data since the image data is not transmitted to the outside, the privacy of the watching target who uses the refrigerator 70 can be appropriately protected.
  • the user's living situation is monitored to determine whether the living situation is abnormal or not. The reliability of the determination can be improved.
  • the watching system and monitoring method according to the fourth embodiment it is determined whether or not the living condition of the user is abnormal outside the refrigerator 70, so that living conditions such as usage conditions and weather of other home appliances It will be possible to add environmental information and make a decision.
  • ⁇ 6 Fifth Embodiment
  • the refrigerator 10 of FIG. 1, the refrigerator 20 of FIG. 14, and the refrigerator 30 of FIG. 16 perform detection of the amount of food to determination within the allowable range or out of the allowable range, respectively.
  • the structure which transmits to watching service center 60 is shown, it is not necessarily limited to this form, and it is good also as composition which performs detection of the amount of foodstuffs with a refrigerator, looks over a detection result, and sends to service center 60.
  • FIG. 21 is a block diagram schematically showing a configuration of a watching system according to a fifth embodiment of the present invention.
  • components that are the same as or correspond to components shown in FIG. 1 are given the same reference symbols as the reference symbols shown in FIG. 1.
  • the watching system according to the fifth embodiment differs from the watching system according to the first embodiment in that the watching system according to the fifth embodiment is arranged in the external server 131 of the service center 130 watching the data storage unit 134, the pattern deriving unit 135, and the determination unit 136. Except for this point, the fifth embodiment is the same as the first embodiment.
  • the watching system includes the information transmitted from the communication unit 17 of the refrigerator 80 via the refrigerator 80 as a food storage for storing food and the network 40 such as the Internet. And a communication terminal 50 capable of receiving information transmitted from the communication unit 133 of the monitoring service center 130.
  • the refrigerator 80 includes a sensor control unit 11, an interior lighting 18, an illuminance sensor 12, a food amount data generation unit 13, and a communication unit 17.
  • the watching service center 130 includes communication units 132 and 133, and an external server 131.
  • the external server 131 includes a data storage unit 134, a pattern derivation unit 135, and a determination unit 136.
  • the latest (current) food amount data value output from the food amount data generation unit 13 is output to the communication unit 17.
  • the communication unit 17 transmits the food content data value to the communication unit 132 of the monitoring service center 130 via the network 40.
  • the data storage unit 134 and the determination unit 136 provided in the external server 131 of the watching service center 130 receive the amount-of-food data value from the communication unit 132. As the timing of data transmission between the refrigerator 80 and the external server 131, it is appropriate to transmit whenever the amount data value of food is newly generated.
  • the operations of the data storage unit 134, the pattern derivation unit 135, and the determination unit 136 are the same as the operations described in the first embodiment.
  • the determination unit 136 determines that the change in the food amount data value is determined in advance from the range of “the change margin of the food amount data value” and the “period margin” of the food amount change pattern output from the pattern derivation unit 135 It is monitored (judged) whether or not it deviates as described above, and the judgment information based on the monitoring result is generated.
  • the communication unit 133 when the living condition of the user is in an abnormal state, notifies the communication terminal 50 of the watcher of the condition.
  • FIG. 22 is a block diagram schematically showing another configuration of the watching system according to Embodiment 5 of the present invention. 22 differs from the watching system shown in FIG. 21 in that the communication terminal 140 can receive the information transmitted from the communication unit 17 of the refrigerator 80 via the network 40 instead of the watching service center in FIG.
  • the communication terminal 140 includes a communication unit 141, a data storage unit 144, a pattern derivation unit 145, and a determination unit 146.
  • the determination part 146 on the communication terminal 140 in this case, the method of installing the application of a smart phone can be considered.
  • the operation of the determination unit 146 is the same as described above.
  • the data storage unit, the pattern derivation unit, and the determination unit are installed in the service center, or the data storage unit, the pattern derivation The unit and the determination unit may be provided in the communication terminal.
  • the surveillance system and the surveillance method according to the fifth embodiment since it is not necessary to transmit large-sized data such as image data to the outside, an increase in the cost of the apparatus can be suppressed. .
  • the image data since the image data is not transmitted to the outside, the privacy of the watching target who uses the refrigerator 80 can be appropriately protected.
  • the user's life situation is monitored to determine whether the life situation is abnormal or not. The reliability of the determination can be improved.
  • the watching system it is determined whether or not the living condition of the user is abnormal outside the refrigerator 80, so living conditions such as the usage condition and weather of other home appliances It will be possible to add environmental information and make a decision. Further, since it is possible to use a database of food quantity change patterns possessed by the watch service center or the communication terminal, change margins of food quantity data values, and cycle margins, derivation of food quantity change patterns and change margins of food quantity data values.
  • the cycle margin can be set optimally.
  • the food storage for storing food is described as a refrigerator in all the embodiments, the present invention may be applied to the case where food is stored in a storage other than a refrigerator.
  • the food storage there are a food storage having no refrigeration / freezing function, a food storage room installed indoors, a food storage shelf, and the like.
  • the food stored in these food storages has a long storage period, so the cycle of time change of the amount data of food is longer than when stored in the refrigerator, but the change pattern of the amount data of food is derived according to the application Do.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Thermal Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • General Physics & Mathematics (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
  • Devices That Are Associated With Refrigeration Equipment (AREA)
  • Emergency Alarm Devices (AREA)
  • Alarm Systems (AREA)

Abstract

見守りシステムは、コストの上昇を抑制しつつ、食品保管庫を使用する見守り対象者のプライバシーを適切に保護し、見守り対象者の生活状況を適切に判定する。見守りシステムは、食品保管庫である冷蔵庫(10)内に保管されている食材の量に対応する照度レベルを検出する照度センサ(12)と、照度レベルから食材の量を示す食材量データ値を生成する食材量データ生成部(13)と、食材量データ値を食材量データ履歴として保存するデータ保存部(14)と、食材量データ履歴から食材量データ値の時間変化に対応する食材量変化パターンを導出するパターン導出部(15)と、最新の食材量データ値が、食材量変化パターンに基づく許容範囲内にあるか否かを監視し、前記監視結果に基づく判定情報を出力する判定部(16)と、判定情報を見守り者の通信端末(50)に送信する通信部(17)とを備える。

Description

見守りシステム、見守り方法、冷蔵庫、及び通信端末
 本発明は、見守り対象者の生活状況を見守り者に通知する見守りシステム、見守り方法、冷蔵庫、及び通信端末に関する。
 少子高齢化と核家族化の進展に伴い、高齢者だけからなる世帯が増加している。そのため、互いに離れて生活する高齢者とその親族の双方に安心感を与えるための見守りシステムの需要が高まっている。従来の見守りシステムは、見守り対象者(例えば、高齢者)の居住空間の各所に取り付けられたセンサの検出信号に基づいて、見守り対象者の生活状況を見守り者(例えば、親族)に通知する。この見守りシステムでは、見守り対象者の行動が各所に取り付けられたセンサによって常時監視されているため、居住空間の全域で見守り対象者のプライバシーは保護されておらず、見守り対象者は常に監視されているという不快感を抱く。この点に着目して、見守り対象者が抱く不快感を緩和することが可能なシステム及び装置が提案されている(例えば、特許文献1、2、及び3参照)。
 特許文献1は、見守り対象者であるユーザーによって使用される容器(冷蔵庫を含む)の中身を撮影し、撮影情報を外部サーバに送信するユーザー側の装置と、容器の中身の現在の撮影情報と過去の撮影情報との差分に基づいてユーザーの安否を判定する外部サーバと、を有するシステムを提案している。
 特許文献2は、見守り対象者であるユーザーによって使用される冷蔵庫を提案している。この冷蔵庫は、庫外の音声を取得する音声取得手段又は庫外を撮像する撮像手段と、通信手段とを有し、庫外の音声又は映像に基づく音声情報又は映像情報を、通信手段からネットワークを介して外部装置に送信する。
 特許文献3は、所定のエリア内にある機器のエネルギー使用量に基づいて、見守り対象者であるユーザーの在・不在を判定し、判定結果を外部機関に送信する装置を提案している。
特開2014-038374号公報 特開2014-070739号公報 特開2015-139066号公報
 しかしながら、特許文献1のシステムは、容器の中身の撮影情報を外部サーバに送信するため、容器の中身が他人に見られるおそれがあり、プライバシーが適切に保護されないという課題がある。また、データサイズが大きい画像データを送信するので、大きな記憶容量を持つメモリと高い処理能力を持つ演算処理部とが必要になり、低コスト化が難しいという課題がある。
 また、特許文献2の装置は、冷蔵庫の周辺で取得された音声又は映像に基づく音声情報又は映像情報が外部装置に送信されるため、プライバシーが適切に保護されないという課題がある。また、映像情報を送信する場合は、低コスト化が難しいという課題がある。
 また、特許文献3の装置は、エネルギー使用量に基づいてユーザーの在・不在を判定するだけであり、ユーザーの生活状況を適切に判定することができないという課題がある。
 本発明は、上記課題を解決するためになされたものであり、コストの上昇を抑制しつつ、食品保管庫を使用する見守り対象者のプライバシーを適切に保護し、生活状況を適切に判定することができる見守りシステム、見守り方法、及び通信端末、並びに、コストの上昇を抑制しつつ、見守り対象者のプライバシーを適切に保護し、生活状況の適切な判定を可能にする冷蔵庫を提供することを目的とする。
 本発明に係る見守りシステムは、見守り対象者の生活状況を見守り者に通知する見守りシステムであって、前記見守り対象者が使用する食品保管庫内に保管されている食材の量を検出し、前記食材の量を示す食材量データ値を生成するセンシング手段と、前記センシング手段で生成された前記食材量データ値を食材量データ履歴として保存するデータ保存部と、前記食材量データ履歴から前記食材量データ値の時間変化に対応する食材量変化パターンを導出するパターン導出部と、前記センシング手段によって生成された最新の食材量データ値が、前記食材量変化パターンに基づく許容範囲内にあるか否かを監視し、監視結果に基づく判定情報を出力する判定部と、前記判定情報を前記見守り者の通信端末に送信する通信部とを備えたことを特徴とする。
 本発明に係る冷蔵庫は、見守り対象者の生活状況を見守り者に通知する冷蔵庫であって、前記冷蔵庫内に保管されている食材の量を検出し、前記食材の量を示す食材量データ値を生成するセンシング手段と、前記センシング手段で生成された前記食材量データ値を食材量データ履歴として保存するデータ保存部と、前記食材量データ履歴から前記食材量データ値の時間変化に対応する食材量変化パターンを導出するパターン導出部と、前記センシング手段によって生成された最新の食材量データ値が、前記食材量変化パターンに基づく許容範囲内にあるか否かを監視し、監視結果に基づく判定情報を出力する判定部と、前記判定情報を前記見守り者の通信端末に送信する通信部とを備えたことを特徴とする。
 本発明によれば、コストの上昇を抑制しつつ、食品保管庫又は冷蔵庫を使用する見守り対象者のプライバシーを適切に保護し、生活状況を適切に判定することができるという効果が得られる。
本発明の実施の形態1に係る見守りシステムの構成を概略的に示すブロック図である。 (a)は、実施の形態1に係る冷蔵庫の構造を概略的に示す縦断面図であり、(b)は、扉が開いている冷蔵室内にある食材の例を示す正面図であり、(c)は、庫内照明の光が正面(扉の内面の位置)から見える明部領域と庫内照明の光が食材によって遮られる暗部領域とを示す図である。 (a)から(c)は、庫内照明の光が正面から見える明部領域と庫内照明の光が食材によって遮られる暗部領域とを示す図であり、(d)は、冷蔵室内にある食材の量と照度センサによって検出される照度レベルとの関係をグラフで示す図である。 (a)から(c)は、庫内照明の光が正面から見える明部領域と庫内照明の光が食材によって遮られる暗部領域とを示す図であり、(d)は、照度センサによって検出される照度レベルと経過時間との関係をグラフで示す図であり、(e)は、冷蔵室内にある食材の量と経過時間との関係をグラフで示す図である。 (a)は、冷蔵室内にある食材の量の時間変化の例(3日に1度、食材を購入して補充する例)をグラフで示す図であり、(b)は、冷蔵室内にある食材の量の時間変化の他の例(1週間に3度、食材を購入して補充する例)をグラフで示す図である。 (a)は、冷蔵室内にある食材の量の時間変化の例(3日に1度、食材を購入して補充する例)をグラフで示す図であり、(b)は、食材量データ生成部によって生成された同図(a)の食材の量に対応する食材量データ値を点(丸印)で示す図である。 (a)は、冷蔵室内にある食材の量の時間変化の3周期(増加の時点から次の増加の時点までを1周期とする)の例をグラフで示す図であり、(b)は、食材の量の3周期の時間変化を増加の時点(起点)を一致させて描いた図であり、(c)は、食材の量の3周期の時間変化から算出された平均値(食材量変化パターン)とマージン(許容範囲)の上限と下限を示す図である。 (a)から(d)は、食材量変化パターンのマージンの設定方法を示す図である。 (a)から(d)は、実際の食材量データ値の時間変化から、見守り対象者の生活状況が異常な状態であるか否かを判定する方法を示す図である。 (a)から(c)は、実際の食材量データ値の時間変化から、見守り対象者の生活状況が異常な状態であるか否かを判定する方法を示す図である。 (a)から(c)は、実際の食材量データ値の時間変化から、見守り対象者の生活状況が異常な状態であるか否かを判定する他の方法を示す図である。 (a)及び(b)は、食材量データ値の時間変化における週単位の特徴を示す図である。 (a)から(c)は、食材量データ値の時間変化における季節毎の特徴を示す図である。 本発明の実施の形態2に係る見守りシステムの構成を概略的に示すブロック図である。 (a)から(c)は、実施の形態2に係る冷蔵庫のセンシング手段の重量センサを示す図である。 本発明の実施の形態3に係る見守りシステムの構成を概略的に示すブロック図である。 (a)から(c)は、実施の形態3に係る冷蔵庫のセンシング手段のカメラの撮影画像データから食材量を取得する方法を示す図である。 実施の形態1から3の変形例の見守りシステム又は冷蔵庫の構成を示すハードウェア構成図である。 本発明の実施の形態4に係る見守りシステムの構成を概略的に示すブロック図である。 本発明の実施の形態4に係る見守りシステムの別の構成を概略的に示すブロック図である。 本発明の実施の形態5に係る見守りシステムの構成を概略的に示すブロック図である。 本発明の実施の形態5に係る見守りシステムの別の構成を概略的に示すブロック図である。
 以下に、本発明の実施の形態に係る見守りシステム、見守り方法、冷蔵庫、及び通信端末を、添付図面を参照しながら説明する。以下の実施の形態は、例にすぎず、本発明の範囲内で種々の変更が可能である。
《1》実施の形態1
《1-1》実施の形態1の構成
 図1は、本発明の実施の形態1に係る見守りシステムの構成を概略的に示すブロック図である。図1に示される見守りシステムは、食品保管庫としての冷蔵庫10のユーザーである見守り対象者の生活状況を冷蔵庫10内(「庫内」ともいう)にある食材の量の変化に基づいて監視し、監視結果に基づく判定情報を見守り者の通信端末50に送信するシステムである。また、この見守りシステムは、実施の形態1に係る見守り方法を実施することができる。なお、見守り対象者は、例えば、高齢者などであり、見守り者は、例えば、見守り対象者の親族又は見守りサービスを行う企業などである。本実施の形態では、見守り者を見守りサービスセンタ60として説明する。
 図1に示されるように、実施の形態1に係る見守りシステムは、食材を収納する収納装置としての冷蔵庫10と、インターネットなどのネットワーク40を介して冷蔵庫10の通信部17から送信された情報を受信することができる通信端末(例えば、受信端末)50とを備えている。この見守りシステムは、見守りサービスセンタ60のサーバコンピュータ(外部サーバ)61を備えてもよい。外部サーバ61は、冷蔵庫10の通信部17からネットワーク40を介して送信された情報を受信し、この情報を見守り者の通信端末50にネットワークを介して送信する。なお、本出願において「食材」は、食品全般を含む。また、「食材」は、食品そのものだけでなく、食品を収納する容器及び包装なども含む。また、本実施の形態では、ユーザーが、正常な生活状況において、ある程度の規則性を備えた周期で食材を購入して冷蔵庫10内に入れる(補充する)ことを前提としている。また、ユーザーは、通常の生活状況において、冷蔵庫10内から食材を取り出して消費する行為を繰り返し行う。なお、本出願において、「食材の購入」は、冷蔵庫への食材の補充を伴う行為であるので、「食材の補充」と同じ意味で用いられる。また、本出願において、「食材の消費」は、冷蔵庫からの食材の取り出しを伴う行為であるので、「食材の取り出し」と同じ意味で用いられる。
 図1に示されるように、冷蔵庫10は、センサ制御部11と、庫内照明18と、照度センサ12と、食材量データ生成部13と、メモリなどの情報記憶手段であるデータ保存部14と、パターン導出部15と、判定部16と、通信部17とを備えている。実施の形態1において、庫内照明18、照度センサ12、及び食材量データ生成部13によって、冷蔵庫10内に収納されている食材の量を検出するセンシング手段が構成される。冷蔵庫10は、収納物としての食材を低温で保管する機能を実現するための冷却機構(例えば、モータ、コンプレッサ、ファン、冷風路、制御回路など)を持つが、冷却機構自体は、公知技術であるため図示していない。
 冷蔵庫10のセンサ制御部11は、予め決められたタイミングで庫内の食材の量を検出させるための制御信号を発生する。例えば、センサ制御部11は、予め決められた一定の時間間隔ごとに、庫内照明18を点灯させるための制御信号を発生すると共に、照度センサ12に庫内の照度レベルを検出させるための制御信号を送る。
 庫内照明18は、センサ制御部11から送信された制御信号に基づいて点灯して、庫内を照明する照明装置である。
 照度センサ12は、センサ制御部11から送信された制御信号に基づいて、庫内照明18が点灯しているときの、庫内の照度レベルを検出する。この照度レベルは、庫内の食材の量と負の相関関係(後述の図3(d)に示される)を持つ。したがって、照度レベルの検出によって、庫内の食材の量を測定することが可能である。
 食材量データ生成部13は、照度センサ12によって検出された照度レベルを受け取り、照度レベルに基づいて、庫内にある食材の量を表わす数値である食材量データ値を生成し、食材量データ値を食材量データ履歴としてデータ保存部14に保存する。
 パターン導出部15は、データ保存部14に蓄積された食材量データ履歴である過去の食材量データ値を読み込み、食材量データ値の時間変化の規則性を利用して、ユーザーに特有の規則性を備えた食材の量の変化パターンである食材量変化パターン(一例が、後述の図7(c)に実線の曲線で示される)を導出する。食材量変化パターンは、ユーザーの食生活パターンである。ここで、「食材量データ値の時間変化の規則性」とは、冷蔵庫10のユーザーに特有の周期で庫内の食材の量が増加し(即ち、食材を購入し)、このユーザーに特有のペースで庫内の食材が徐々に減少する(即ち、食材を消費する)ことである。
 判定部16は、食材量変化パターンに基づいて決められた許容範囲内に、最新の(実際の)食材量データ値が収まっている場合又は許容範囲から外れた時間が許容値以内であるか否かを判断し、この判断の結果から見守り対象者であるユーザーの生活状況が異常な状態にあるか否かを監視し、監視結果に基づく判定情報を出力する。判定部16の動作の一例は、後述の図9(a)から(d)、及び後述の図10(a)から(c)を用いて説明される。また、判定部16の動作の他の例は、後述の図11(a)から(c)を用いて説明される。
 通信部17は、判定部16から提供された判定情報を受けて、ネットワーク40を経由して見守り者の通信端末50にユーザーの生活状況に関する判定情報を送信する。通信端末50への判定情報の送信は、例えば、生活状況が異常な状態であるとき、又は、予め決められた周期で、又は、予め決められた時刻に、又は、通信端末50からの要求信号に応じて行われる。通信部17は、判定部16の判定結果を、ネットワーク40から見守りサービスセンタ60の外部サーバ61を経由して見守り者の通信端末50に送信してもよい。
《1-2》実施の形態1の動作
〈照度センサ12、庫内照明18〉
 次に、照度センサ12によって検出される照度レベルから庫内にある食材の量を示す食材量データ値を生成する動作を説明する。図2(a)は、実施の形態1に係る冷蔵庫10の構造(同図(b)のS2a-S2a線で切る断面構造)を概略的に示す縦断面図である。図2(b)は、扉104が開いている冷蔵室101内にある食材の例を示す正面図である。図2(c)は、庫内照明18の光が正面(扉104の内面の位置)から見える明部領域と庫内照明18の光が食材によって遮られる暗部領域(影領域)とを示す図である。
 なお、以下の説明では、冷蔵庫10の貯蔵室が冷蔵室101である場合を説明する。したがって、実施の形態において、「庫内」と「冷蔵室101内」とは同じ意味で用いられる。ただし、冷蔵室101以外の貯蔵室(例えば、野菜室106、冷凍室105)内にある食材の量に基づいて、ユーザーの食材量変化パターンを生成し、これを判定部16の判定に用いることも可能である。
 図2(a)に示されるように、冷蔵室101内には、食材が載せられる棚板102が備えられており、冷蔵室101内を照らす庫内照明18が冷蔵室101の奥側(図2(a)における左側)に配置されている。庫内照明18から照射された光は、直接的に又は壁面と食材の表面で反射されて間接的に、扉104の内面の位置まで到達する。扉104の内面には、照度センサ12が配置されており、庫内照明18から照射された光が直接的に又は間接的に照度センサ12に到達する。
 図2(b)は、冷蔵庫10を正面から見た図であり、冷蔵室101の扉104が開いた状態を示している。冷蔵室101内には、各種の食材が棚板102の上に載せられている。
 図2(c)は、図2(b)の冷蔵室101の扉104を閉じて、庫内照明18を点灯した状態での冷蔵室101の内部が正面(扉104側)から、どのように見えるかを示している。冷蔵室101の奥側にある庫内照明18から照射された光の一部は、庫内の壁面及び食材の表面で反射されるが、扉104側から見れば、食材は庫内照明18から照射された光を遮っている。このため、図2(c)に示されるように、冷蔵室101内の食材が無い領域が明部領域(白領域として描かれている)を形成し、食材が有る領域が暗部領域(グレー領域として描かれている)を形成する。
 なお、冷蔵庫10の仕様によっては、庫内照明が冷蔵室101の側壁の内面の前寄りの位置に設置される場合がある。この場合には、照度センサ12は、食材を挟んで対角方向の側壁の内面の奥側(即ち、庫内照明に向かい合う内面の奥側)に配置されることが望ましい。
 また、図2(a)から(c)には、1個の照度センサ12が示されているが、冷蔵室101内において、庫内照明18の設置位置と反対側の壁面に複数の照度センサを備え、複数の照度センサの検出値(例えば、照度レベルの合計値、平均値、など)に基づいて食材量データ値が生成されてもよい。
 図3(a)から(c)は、庫内照明18の光が正面(扉104の内面の位置)から見える明部領域と庫内照明18の光が食材によって遮られる暗部領域とを示す図である。図3(d)は、冷蔵室101内にある食材の量と照度センサ12によって検出される照度レベルとの関係をグラフで示す図である。
 図3(a)の状態SAは、冷蔵室101内にある食材の量が多い場合である。図3(b)の状態SBは、冷蔵室101内にある食材の量が中間程度である場合である。図3(c)の状態SCは、冷蔵室101内にある食材の量が少ない場合である。図3(d)のグラフは、食材の量が多い状態SAでは照度センサ12に到達する光の量が少ない(食材によって遮られる光の量が多い)ので照度レベルが低い。また、食材の量が中間である状態SBでは照度センサ12に到達する光の量が中間程度である(食材によって遮られる光の量が中間程度である)ので照度レベルが中間程度である。また、食材の量が少ない状態SCでは照度センサ12に到達する光の量が多い(食材によって遮られる光の量が少ない)ので照度レベルが高くなることを示している。このように、照度センサ12によって検出される照度レベルと、冷蔵室101内の食材の量との間には負の相関関係がある。
 図4(a)から(c)は、庫内照明18の光が正面(扉104の内面の位置)から見える明部領域と庫内照明18の光が食材によって遮られる暗部領域とを示す図である。図4(d)は、照度センサ12によって検出される照度レベルと経過時間との関係をグラフで示す図である。図4(e)は、冷蔵室101内にある食材の量と経過時間との関係をグラフで示す図である。
 図4(a)から(c)に示されるように、冷蔵室101内にある食材は、時間の経過に伴って消費される。具体的に言えば、図4(a)は、食材を購入し、その食材を冷蔵室101内に入れた直後(補充した直後)の状態SAを示す。図4(b)は、日常生活の中で冷蔵室101内にある食材を取り出して消費したときの状態SBを示す。図4(c)は、日常生活の中で冷蔵室101内にある食材をさらに取り出して消費されたときの状態SCを示す。つまり、冷蔵室101内に食材を補充した直後は、図4(a)に状態SAとして示されるように、冷蔵室101内にある食材の量は多い。時間が経過すると、図4(b)に状態SBと示されるように、冷蔵室101内の食材の量は減少する。さらに時間が経過すると、図4(c)に状態SCとして示されるように、冷蔵室101内の食材の量はさらに減少する。このように、状態SA、SB、SCの各々は、冷蔵室101内の状態の変化過程の中の、ある一場面を示している。
 図4(d)には、図4(a)、(b)、(c)の順の冷蔵室101内の状態の変化、すなわち、状態SA、SB、SCの順の変化が、照度センサ12によって検出される照度レベルと経過時間の関係のグラフとして示されている。つまり、図4(d)のグラフは、時間の経過に伴って(食材の取り出しによって)冷蔵室101内にある食材の量が減少する場合には、照度レベルが上昇することを示している。冷蔵室101内の照度レベルの変化は、ユーザーによる食材の取り出し(食材の消費)により生じるので、照度レベルは、食材の取り出しのタイミングごとにステップ状に上昇する。
 図4(e)には、図4(a)、(b)、(c)の順の冷蔵室101内の状態の変化、すなわち、状態SA、SB、SCの順の変化が、冷蔵室101内にある食材の量と経過時間の関係のグラフとして示されている。つまり、図4(e)のグラフは、時間の経過に伴って(食材の取り出しによって)冷蔵室101内にある食材の量が減少することを示している。冷蔵室101内の食材の量の変化は、ユーザーによる食材の取り出し(食材の消費)により生じるので、食材の量は、食材の取り出しのタイミングごとにステップ状に減少する。
〈食材量データ生成部13〉
 図5(a)は、冷蔵室101内にある食材の量の時間変化の例(3日に1度、食材を購入して補充する例)をグラフで示す図である。図5(b)は、冷蔵室101内にある食材の量の時間変化の他の例(1週間に3度、食材を購入して補充する例)をグラフで示す図である。図5(a)及び(b)に示される食材の量の変化は、典型的な例に過ぎず、異なる食材の量の変化も起こりうる。
 図5(a)及び(b)における横軸において、数字「1」から「7」は経過日数を示し、「B」は朝食の時刻を示し、「L」は昼食の時刻を示し、「D」は夕食の時刻を示している。即ち、図5(a)及び(b)の例では、朝食B、昼食L、夕食Dの時点で、冷蔵室101内にある食材の量が減る。数字「1」から「7」が付された目盛りは、昼食Lと夕食Dの間に位置しており、1日単位の区切りの時点を示している。このことは、ユーザーが、昼食Lと夕食Dの間に食材を購入し、冷蔵室101に食材を補充することを意味する。
 図5(a)及び(b)に示されるように、冷蔵室101内の食材の量の増加及び減少(即ち、食材の量の変化)は、ユーザーに特有のある程度の規則性を備えている。ただし、実際には、朝食B、昼食L、夕食D以外のタイミングで冷蔵庫10の食材が消費されたり、ユーザーの食生活が、1日3食以外の食事を含むものであったりすることがある。ユーザーに特有の規則性を備えた食材量変化パターンは、後述するパターン導出部15によって導出される。
 図6(a)は、冷蔵室101内にある食材の量の時間変化の例(3日に1度、食材を購入して補充する例)をグラフで示す図である。図6(b)は、食材量データ生成部13によって生成された図6(a)の食材の量に対応する食材量データ値を点(丸印)で示す図である。
 図6(a)は、図5(a)と同じ食材の量と経過日の関係を示している。図6(b)は、図6(a)に示される食材の量を、予め決められたサンプリングの間隔でデータ化することで得られた食材量データ値を示している。サンプリングの間隔(図6(b)の横軸の隣り合う目盛りの間隔)は、食材が取り出される時間間隔と判定結果の送信の時間間隔とを考慮して、過剰なデータ生成が行われないように、例えば、数十分から数時間の間の適切な時間に設定される。
 食材量データ値は、時系列データであるので、時間軸方向に図示すれば図6(b)のようになる。食材量データ値は、食材量データ生成部13から、サンプリングごとのデータ値として順次出力される。
 データ保存部14には、食材量データ生成部13から出力された食材量データ値が蓄積される。食材量データ値は、例えば、時刻と関連付けられた食材量データ履歴として、又は、データの順番を示す数値と関連付けられた食材量データ履歴として保存されることが望ましい。
〈パターン導出部15〉
 パターン導出部15は、データ保存部14からある一定期間の食材量データ値を読み出し(即ち、過去の食材量データ値から)、食材量データ値の時間変化のパターン、即ち、ユーザーに特有の規則性を備えた食材量変化パターンを導出する。図7(a)は、冷蔵室101内にある食材の量の3周期PT1~PT3(増加の時点から次の増加の時点までを1周期とする)の時間変化をグラフで示す図である。図7(b)は、食材の量の3周期の時間変化を増加の時点(起点)を一致させて描いた図である。図7(c)は、食材の量の3周期PT1~PT3の時間変化から算出された平均値(すなわち、ユーザーに特有の規則性を備えた食材量変化パターンの例)と、食材量変化パターンのマージン(許容範囲)の上限と下限を示す図である。
 図7(a)において、食材量データ値が大きく増加している部分は、食材の購入(即ち、食材の補充)の時点を示しており、この時点から次の食材の購入(即ち、次の食材の補充)の時点までを1周期としている。時間軸に付した目盛りは、サンプリングの時点を示しており、食材量データ値は、数回のサンプリングごとに値が変化している。これは、庫内から食材を取り出す周期より短い周期でサンプリングが行われるように設定されているからである。
 図7(b)では、複数周期の食材量データ値の変化を、食材量データ値が増加している時点(すなわち、食材を購入し補充する時点)を一致させて、重ねて示されている。食材の消費の量(取り出し量)と消費(取り出し)の時間間隔は、冷蔵庫10のユーザーが同じであったとしても、ある程度のばらつきがある。このばらつきは、図7(b)に示されるように、「食材量データ値の変化のばらつき」と「周期のばらつき」として現すことができる。図7(b)に示されるように、「食材量データ値の変化のばらつき」は、あるサンプリング時における複数周期の食材量データ値の差分で表すことができる。図7(b)に示されるように、「周期のばらつき」は、複数周期の食材量データ値の変化の周期の差分で表すことができる。
 図7(c)には、複数周期の食材量データ値の平均値が、実線の曲線で示されている。図7(c)の実線の曲線は、複数周期の食材量データ値の平均値であるので、冷蔵庫10のユーザーの平均的な食材量変化パターンを示す。この食材の量の変化は、ユーザーの日々の生活においてばらつくものである。このため、図7(c)に2本の破線の曲線で示されるように、パターン導出部15は、食材量変化パターンを「食材量データ値の変化マージン」と「周期マージン」を加味した形で出力する。
 図8(a)から(d)は、食材量変化パターンのマージンの設定方法を示す図である。パターン導出部15は、図8(d)に示される平均値、即ち、食材量変化パターンにマージンを加味することで「食材量データ値の変化マージン」と「周期マージン」を設定する。
 図8(a)は、図7(b)の食材量データ値の時間変化、即ち、食材を購入し補充することによって食材量データ値が大きく増加する時点を一致させた、複数周期の食材量データ値のグラフを重ね描きしたものである。図8(b)に示されるように、食材量データ値の変化の分布が正規分布であると仮定した場合、分布の中心は平均値に相当する。したがって、食材量データ値の時間変化の平均値は、図8(d)に実線の曲線で示されるように変化する。同様に、図8(c)に示されるように、食材量データ値の時間変化の周期が正規分布になると仮定した場合、分布の中心は平均値に相当する。したがって、食材量データ値の時間変化の平均値は、図8(d)に示される実線の曲線の右側の端部のようになる。さらに、分布の標準偏差σを求めて、例えば、「食材量データ値の変化マージン」と「周期マージン」を±2σの範囲と設定すると、食材量変化パターンの元になった食材量データ値の95%が、「食材量データ値の変化マージン」と「周期マージン」の範囲内、即ち、図8(d)の2本の破線の曲線の間に収まる。なお、図8(d)の食材量変化パターンのマージンは、あくまで一例であり、「食材量データ値の変化マージン」と「周期マージン」は、±2σの範囲に限定されない。
〈判定部16〉
 判定部16は、食材量データ生成部13から出力される最新の(現状の)食材量データ値の変化が、パターン導出部15から出力される食材量変化パターンの「食材量データ値の変化マージン」及び「周期マージン」の範囲から、予め決められた判断基準以上に乖離しているか否かを監視(判断)し、この監視結果に基づく判定情報を生成する。
 図9(a)から(d)は、実際の食材量データ値の時間変化から、見守り対象者の生活状況が異常な状態であるか否かを判定する方法を示す図である。
 図9(a)は、見守り対象者の生活状況が正常な状態であるときの例を示している。2本の破線の曲線は、食材量変化パターンの許容範囲の上限と下限を示している。また、食材の購入(食材の補充)と次の食材の購入(次の食材の補充)の間の期間を1周期とする。判定部16は、図9(a)に示されるように、実際の食材量データ値(実線)が、食材量変化パターンの許容範囲内で時間と共に推移する状況である場合には、生活状況が異常な状態ではない、即ち、正常な状態であると判定する。
 図9(b)は、見守り対象者の生活状況が正常な状態であるときの他の例を示している。図9(b)の例では、実際の食材量データ値(実線)が、食材量変化パターンの許容範囲から一時的にはずれている。しかし、予め決められた許容時間以内に、実際の食材量データ値(実線)が、食材量変化パターンの許容範囲内に復帰している。判定部16は、このような状況の場合、生活状況が異常な状態であると判定せず、正常な状態であると判定する。
 図9(c)は、見守り対象者の生活状況が異常な状態であるときの例を示している。図9(c)の例では、実際の食材量データ値が食材量変化パターンの許容範囲からはずれ、予め決められた許容時間を越えて食材量変化パターンの許容範囲外にある。判定部16は、このような状況の場合、生活状況が異常な状態であると判定する。
 図9(d)は、見守り対象者の生活状況が異常な状態であるときの他の例を示している。図9(d)の例では、実際の食材量データ値が食材量変化パターンの許容範囲からはずれ、次の食材の購入のタイミングまでの期間が予め決められた許容時間を超えている。判定部16は、このような状況の場合、生活状況が異常な状態であると判定する。
 図10(a)から(c)は、実際の食材量データ値の時間変化から、見守り対象者の生活状況が異常な状態であるか否かを判定する方法を示す図である。
 図10(a)は、見守り対象者の生活状況が正常な状態であるときの例を示している。図10(a)の例では、実際の食材量データ値(実線)の減少が早く、食材量変化パターンの許容範囲よりも時間的に早い側にはずれている。しかし、予め決められた許容時間以内に、実際の食材量データ値(実線)が、食材量変化パターンの許容範囲内に復帰している。判定部16は、このような状況の場合、生活状況が異常な状態であると判定せず、正常な状態であると判定する。
 図10(b)は、見守り対象者の生活状況が異常であるときの例を示している。図10(b)の例では、実際の食材量データ値の減少が早くて食材量変化パターンの許容範囲からはずれ、予め決められた許容時間を越えて食材量変化パターンの許容範囲外にある。判定部16は、このような状況の場合、ユーザーの生活状況が異常であると判定する。
 図10(c)は、見守り対象者の生活状況が異常であるときの他の例を示している。図10(c)の例では、実際の食材量データ値は、食材量変化パターンの許容範囲からはずれることなく推移するが、次の食材の購入のタイミングが早く、予め決められた許容時間を超えて周期はずれが継続している。判定部16は、このような状況の場合、ユーザーの生活状況が異常な状態であると判定する。
 図11(a)から(c)は、実際の食材量データ値の時間変化から、見守り対象者の生活状況が異常な状態であるか否かを判定する他の方法を示す図である。
 図11(a)は、食材量データ値の時間変化の複数周期PT1~PT3分を重ね描きしたものであり、パターン導出部15は、これらに基づいて平均値を求めて食材量変化パターン(図11(b)及び(c)の平均値)を導出する。判定部16では、予めユーザーの生活状況の異常の有無の判定の基準とする乖離率(許容乖離率)を決めておき、それに基づいてユーザーの生活状況の異常の有無の判定を行う。
 図11(b)は、見守り対象者の生活状況が異常であるときの例を示している。図11(b)の例では、実際の食材量データ値の変化が、平均値に対して許容乖離率を超える値はずれている。判定部16は、このような状況の場合、ユーザーの生活状況が異常な状態であると判定する。
 図11(c)は、見守り対象者の生活状況が異常であるときの他の例を示している。図11(b)の例では、実際の食材量データ値の変化が、平均値に対して許容乖離率以内で推移しているが、次の食材の購入のタイミングが遅くなり、周期が許容乖離率を超える周期はずれが生じている。判定部16は、このような状況の場合、ユーザーの生活状況が異常な状態であると判定する。
 乖離率は、最新の食材量データ値、即ち、実際の食材量データ値から、以下の式によって算出される。
Figure JPOXMLDOC01-appb-M000001
 図12(a)及び(b)は、食材量データ値の時間変化における週単位の特徴を示す図である。
 以上の例では、食材量データ値の増加のタイミング(「食材の購入」のタイミング)を一致させて複数周期の食材量データ値から食材量変化パターンを求める方法を用いたが、食材量変化パターンとしては、1週間単位の特徴(1週間単位の規則性)が生じる場合がある。例えば、食品を販売するスーパーマーケットでは、曜日ごとに特売の食品を設定している事例が多く、このことが、ユーザーの行動パターンに影響することが推測される。図12(a)及び(b)は、1週間に3度の食材の購入を行う場合を示している。図12(a)及び(b)に示されるように、食材量変化パターンの1周期を1週間とし、ユーザーの生活状況の判定を、図12(b)の食材量変化パターンの許容範囲に基づいて行ってもよい。この場合には、曜日による偏りを考慮した判定ができるので、ユーザーの生活状況が異常な状態であるか否かの判定の信頼性を向上させることが可能である。
 図13(a)から(c)は、食材量データ値の時間変化における季節毎の特徴を示す図である。
 食材量変化パターンは、季節に応じて変化することがある。例えば、水分摂取の多い季節(例えば、夏)と少ない季節(例えば、冬)、市場に出回る食材の鮮度が長く維持できる季節(例えば、冬)と長く維持できない季節(例えば、夏)、食材の購入のための外出が楽な季節(例えば、春及び秋)と辛い季節(例えば、夏及び冬)など、季節によって食材量変化パターンに現れる特徴が変化する。このため、季節ごとに食材量変化パターンを切り替えることによって、ユーザーの生活状況の異常の有無の判定の信頼性を向上させることが可能である。
 図13(a)は、食材量変化パターンの1周期が長く、食材の量の変化が小さい季節である季節#1の食材量変化パターンの許容範囲を示している。図13(b)は、食材量変化パターンの1周期が短く、食材の量の変化が大きい季節である季節#2の食材量変化パターンの許容範囲を示している。図13(c)は、食材量変化パターンの1周期が中間的であり、食材の量の変化が中間的である季節である季節#3の食材量変化パターンの許容範囲を示している。
 季節#1から季節#2に移行する途中に中間的な季節#3、季節#2から季節#1に移行する途中に中間的な季節#3の食材量変化パターンが現れる場合には、季節に合わせて複数の食材量変化パターンを順次切り替えることにより、食材量変化パターンの変化に対応可能になる。この場合には、ユーザーの生活状況の異常の有無の判定の信頼性を向上させることが可能である。
 なお、図12(a)及び(b)に示される曜日の要因に対応した食材量変化パターンを用いるためには、予め曜日の要因に対応した1週間を1周期とする食材量変化パターンを導出するための食材量データ値をデータ保存部14に蓄積しておく必要がある。また、図13(a)から(c)に示される季節の要因に対応した食材量変化パターンを用いるためには、予め季節の要因に対応した食材量変化パターンを導出するための各季節の食材量データ値をデータ保存部14に蓄積しておく必要がある。
 さらに、パターン導出部15が複数種類の食材量変化パターンを求め、判定部16が、複数種類の食材量変化パターンの許容範囲を用いて、ユーザーの生活状況が異常な状態であるか否かの判定を行うようにしてもよい。この場合には、食材量変化パターンの個人差に適切に対処することができ、判定の信頼性を向上させることができる。
〈通信部17〉
 通信部17は、例えば、ユーザーの生活状況が異常な状態にあるときには、ネットワーク40を介して見守り者の通信端末50に状況を通知する。
 本実施の形態1では、照度から食材量データ値に変換して、食材量の変化から食生活パターンを抽出し、そのパターンからのはずれの有無を検出することにより、ユーザーの生活状況の異常の判定を行っているが、照度データそのものを利用して同様の判定を行っても良い。
《1-3》実施の形態1の効果
 以上に説明したように、実施の形態1に係る見守りシステム、見守り方法、及び冷蔵庫10では、食材の量を食材量データ値に変換して、食材量データ値の増加及び減少の履歴から冷蔵庫10のユーザーの食材量変化パターンを導出し、最新の食材量データ値が食材量変化パターンに準じた変化(概ね許容範囲内の変化)をするか否かに基づいて、冷蔵庫10のユーザーの生活状況が異常な状態であるか否かを判定する。この場合には、画像データのようなサイズの大きいデータを送信する必要がないので、装置のコストの上昇を抑制することができる。また、画像データを送信していないので、冷蔵庫10を使用する見守り対象者のプライバシーを適切に保護することができる。また、ユーザーの日常の食生活に密接に関係している冷蔵庫10内の食材の量に基づいて、ユーザーの生活状況を監視し、生活状況が異常な状態であるか否かを判定するので、判定の信頼性を向上させることができる。
 また、実施の形態1に係る見守りシステム、見守り方法、及び冷蔵庫10では、食材の量を、庫内照明18と照度センサ12によって検出しており、カメラを必要としていないので、ユーザーのプライバシーは確実に保護される。
 また、実施の形態1に係る見守りシステム、見守り方法、及び冷蔵庫10では、食材量データ値の増加及び減少の履歴から冷蔵庫10のユーザーの食材量変化パターンを導出する際に、食材量データ値の増加のタイミングを起点とし、起点と次の起点の間を1周期とするように構成したので、適切な食材量変化パターンが取得可能であり、判定部の判定の信頼性を向上させることができる。
 また、実施の形態1に係る見守りシステム、見守り方法、及び冷蔵庫10では、起点を揃えた食材量データ値の時間変化の1周期分について、起点から同じ時間ごとに平均値及び標準偏差を求め、食材量データ値の時間変化の中心を平均値により定義し、許容範囲(余裕範囲)を標準偏差により定義するように構成している。このため、ユーザーの食材量変化パターンとして統計的に妥当な許容範囲(余裕範囲)を定義することができる。
 また、実施の形態1に係る見守りシステム、見守り方法、及び冷蔵庫10では、食材量データ値の最新の変化が食材量変化パターンの余裕範囲の外に、予め決められた許容時間を超えてはずれたときに、ユーザーの生活状況が異常な状態であると判断するように構成した。このため、ユーザーの食材量変化パターンに対する乖離状況を適切に判断することができ、生活状況が正常な状態であるにもかかわらず、異常な状態であると判定する誤判定を減らすことができる。
 また、実施の形態1に係る見守りシステム、見守り方法、及び冷蔵庫10では、食材量データ値の最新の変化が食材量変化パターンとしての平均値に対して、予め決められた許容乖離率を超えたときにユーザーの生活状況が異常な状態であると判断するように構成できる。この場合には、ユーザーの食材量変化パターンに対する乖離状況に基づいて生活状況の異常の有無を判定することができる。
 また、実施の形態1に係る見守りシステム、見守り方法、及び冷蔵庫10では、食材量データ値の増加及び減少の履歴から冷蔵庫10のユーザーの食材量変化パターンを導出する際に、1週間単位で食材量データ値の増減の規則性を示す食材量変化パターンを導出するように構成することが可能である。この場合には、曜日による食材量データ値の増減の偏り傾向に適切に対応することができ、生活状況の異常の有無の判定の信頼性を向上させることができる。
 また、実施の形態1に係る見守りシステム、見守り方法、及び冷蔵庫10では、食材量データ値の増加及び減少の履歴から冷蔵庫10のユーザーの食材量変化パターンを導出する際に、現在の季節に応じて食材量データ値の増減の規則性を示す食材量変化パターンを導出するように構成することができる。この場合には、季節による食材量データ値の増減の偏り傾向に適切に対応することができ、生活状況の異常の有無の判定の信頼性を向上させることができる。
 また、実施の形態1に係る見守りシステム、見守り方法、及び冷蔵庫10では、食材量データ値の増加及び減少の履歴から、複数種類の食材量変化パターンを導出し、複数種類の食材量変化パターンを用いて、ユーザーの生活状況の異常の有無の判定を行うことができる。この場合には、食材量変化パターンの個人差に対処し易くなり、生活状況の異常の有無の判定の信頼性を向上させることができる。
《2》実施の形態2
 図14は、本発明の実施の形態2に係る見守りシステムの構成を概略的に示すブロック図である。図14において、図1に示される構成要素と同一又は対応する構成要素には、図1に示される符号と同じ符号が付される。図14に示されるように、実施の形態2に係る見守りシステムは、食品保管庫としての冷蔵庫20の庫内にある食材の量を検出するセンシング手段が、重量センサ22a及び22bと重量センサ22a及び22bの出力から庫内の食材の量を示す食材量データ値を生成する食材量データ生成部23とを有する点が、実施の形態1に係る見守りシステムと異なる。この点を除いて、実施の形態2は、実施の形態1と同じである。
 図15(a)は、冷蔵庫20の縦断面図である。図15(b)及び(c)は、冷蔵庫20のセンシング手段の重量センサ22a及び22bを示す断面図である。
 図15(a)において、図2(a)に示される構成要素と同一又は対応する構成要素には、図2(a)に示される符号と同じ符号が付される。冷蔵庫20の冷蔵室101内には、食材を載せるための棚板108が備えられており、冷凍室105内及び野菜室106内にはケース109が備えられている。
 図15(b)には、棚板108の断面が示されており、図15(c)には、ケース109の底部の断面が示されている。棚板108は、棚板本体108aと、計量板108bと、重量センサ22aとにより構成されている。ケース109は、ケース本体109aと、計量板109bと、重量センサ22bとにより構成されている。食材は、計量板108b及び109bの上に置かれ、重量センサ22a及び22bにより食材の重量が測定される。重量センサ22a及び22bとしては、例えば、接触部分に作用する圧力の大きさに応じて抵抗値が変化する感圧センサ又は歪ゲージなどを採用することができる。1枚の計量板108b又は109bを複数の重量センサ22a又は22bで支持する場合には、複数の重量センサ22a又は22bの出力を加算することで、重量を算出することができる。
 食材の量の変化は、直接的に重量の変化で表すことが可能であるので、実施の形態2の冷蔵庫20は、実施の形態1の冷蔵庫10に比べ、食材の量を高精度に測定することが可能である。
 また、実施の形態2では、冷蔵室101内の複数の棚板108の各々に載置された食材の量の変化を検出することができ、さらに、冷凍室105又は野菜室106の各ケース109に収納された食材の量の変化を検出することができる。このように、食材の量の変化を、詳細に検出できるので、見守り対象者の生活状況の判定の信頼性を向上させることが可能である。
 以上に説明したように、実施の形態2に係る見守りシステム、見守り方法、及び冷蔵庫20では、画像データのようなサイズの大きいデータを外部に送信する必要がないので、装置のコストの上昇を抑制することができる。また、画像データを外部に送信していないので、冷蔵庫20を使用する見守り対象者のプライバシーを適切に保護することができる。また、ユーザーの日常の食生活に密接に関係している冷蔵庫20内の食材の量に基づいて、ユーザーの生活状況を監視し、生活状況が異常な状態であるか否かを判定するので、判定の信頼性を向上させることができる。
 さらに、実施の形態2に係る見守りシステム、見守り方法、及び冷蔵庫20では、食材の量の増加及び減少の検出に、重量センサ22a及び22bの検出値を用いるので、コストの上昇を抑制しつつ、冷蔵庫20を使用する見守り対象者のプライバシーを適切に保護し、生活状況を適切に判定することができる。
《3》実施の形態3
 図16は、本発明の実施の形態3に係る見守りシステムの構成を概略的に示すブロック図である。図16において、図1に示される構成要素と同一又は対応する構成要素には、図1に示される符号と同じ符号が付される。図16に示されるように、実施の形態3に係る見守りシステムは、食品保管庫としての冷蔵庫30の冷蔵室101内にある食材の量を検出するセンシング手段が、冷蔵室101内を撮影するカメラ32と、カメラ32によって取得された画像に基づいて冷蔵室101内の食材の量を示す食材量データ値を生成する食材量データ生成部33とを有する点が、実施の形態1に係る見守りシステムと異なる。この点を除いて、実施の形態3は、実施の形態1と同じである。
 図17(a)は、冷蔵庫30の縦断面図である。図17(b)及び(c)は、冷蔵庫30のセンシング手段のカメラ32の撮影画像から食材の量を示す食材量データ値を生成する方法を示す図である。カメラ32は、扉104の内面に備えられているが、他の位置に供えられてもよい。また、カメラの台数は1台に限らず、2台以上であってもよい。
 図17(a)において、図2(a)に示される構成要素と同一又は対応する構成要素には、図2(a)に示される符号と同じ符号が付される。冷蔵庫30の冷蔵室101内には、カメラ32が備えられており、図17(b)に示されるような撮影画像が得られる。
 図17(b)は、カメラ32による冷蔵室101の撮影画像を示しており、庫内照明18に照らされて、食材の位置又は表面のディテールに応じて色々な諧調で表現されている。図17(c)は、撮像画像に対して閾値処理をした後の画像を、2値化して表示している。
 実施の形態3においては、例えば、撮影画像の全画面から画素値の平均値を算出し、画素値の平均値を閾値として、閾値以上の明るさの画素と、閾値未満の明るさの画素とからなる、2値化された画像データ(図17(c))を取得し、2値化された画像データから照度レベルを取得してもよい。以降の処理は、実施の形態1の場合と同様である。この場合には、平均的明るさを求める際の演算量を削減することができる。
 以上に説明したように、実施の形態3に係る見守りシステム、見守り方法、及び冷蔵庫30では、画像データのようなサイズの大きいデータを外部に送信する必要がないので、装置のコストの上昇を抑制することができる。また、画像データを外部に送信していないので、冷蔵庫30を使用する見守り対象者のプライバシーを適切に保護することができる。また、ユーザーの日常の食生活に密接に関係している冷蔵庫30内の食材の量に基づいて、ユーザーの生活状況を監視し、生活状況が異常な状態であるか否かを判定するので、判定の信頼性を向上させることができる。
 さらに、実施の形態3に係る見守りシステム、見守り方法、及び冷蔵庫30では、食材の量を食材量データ値に変換する方法として、カメラ32による撮影画像を数値化して用いるので、ユーザーのプライバシーを保護しつつ正確に食材の量の変化を把握することができる。このため、生活状況が異常な状態であるか否かの判定の信頼性を向上させることができる。
《4》変形例
 図18は、実施の形態1から3の変形例の見守りシステムの外部サーバ61又は冷蔵庫10,20,30の構成を示すハードウェア構成図である。
 実施の形態1から3におけるセンサ制御部11、食材量データ生成部13,23,33、パターン導出部15、及び判定部16の全体又は一部は、ソフトウェアとしてのプログラムを格納する記憶装置としてのメモリ91と、メモリ91に格納されたプログラムを実行する情報処理部としてのプロセッサ92とを用いて(例えば、コンピュータにより)実現することができる。
 また、実施の形態1から3及びそれらの変形例の見守りシステムのプロセッサ92は、
 見守り対象者が使用する冷蔵庫10,20,30内に保管されている食材の量を検出し、食材の量を示す食材量データ値を生成するステップと、
 食材量データ値を食材量データ履歴としてデータ保存部14に保存するステップと、
 食材量データ履歴から食材量データ値の時間変化に対応する食材量変化パターンを導出するステップと、
 冷蔵庫10,20,30内に保管されている食材の量を検出して得られた最新の(現状の)食材量データ値が、食材量変化パターンに基づく許容範囲内にあるか否かを監視し、監視結果に基づく判定情報を出力するステップと、
 判定情報を見守り者の通信端末50に送信するステップと
 を有する見守り方法を実施することができる。
 この見守り方法によれば、画像データのようなサイズの大きいデータを送信する必要がないので、装置のコストの上昇を抑制することができる。また、画像データを送信していないので、冷蔵庫を使用する見守り対象者のプライバシーを適切に保護することができる。また、ユーザーの日常の食生活に密接に関係している冷蔵庫内の食材の量に基づいて、ユーザーの生活状況を監視し、生活状況が異常な状態であるか否かを判定するので、判定の信頼性を向上させることができる。
《5》実施の形態4
 図1の冷蔵庫10、図14の冷蔵庫20、図16の冷蔵庫30では、それぞれ食材量の検出から許容範囲内又は許容範囲外の判定までを行い、判定結果のみをネットワーク40を介して通信端末50及び見守りサービスセンタ60に送信する構成を示している。しかしながら、この形態に限定されるわけではなく、食材量の検出とパターン導出までを冷蔵庫で行い、食材量の検出結果とパターン導出結果を見守りサービスセンタ60に送付する構成としても良い。
 図19は、本発明の実施の形態4に係る見守りシステムの構成を概略的に示すブロック図である。図19において、図1に示される構成要素と同一又は対応する構成要素には、図1に示される符号と同じ符号が付される。実施の形態4に係る見守りシステムは、判定部116を見守りサービスセンタ110の外部サーバ111に備えている点が、実施の形態1に係る見守りシステムと異なる。この点を除いて、実施の形態4は、実施の形態1と同じである。
 図19に示されるように、実施の形態4に係る見守りシステムは、食材を収納する食品保管庫としての冷蔵庫70と、インターネットなどのネットワーク40を介して冷蔵庫70の通信部17から送信された情報を受信することができる見守りサービスセンタ110と、見守りサービスセンタ110の通信部113から送信された情報を受信することができる通信端末50とを備えている。
 冷蔵庫70は、センサ制御部11と、庫内照明18と、照度センサ12と、食材量データ生成部13と、データ保存部14と、パターン導出部15と、通信部17とを備えている。見守りサービスセンタ110は、通信部112,113、外部サーバ111とを備えている。外部サーバ111には判定部116が備えられている。
 食材量データ生成部13から出力される最新の(現状の)食材量データ値が通信部17に出力される。また、パターン導出部15から出力される食材量変化パターンの「食材量データ値の変化マージン」及び「周期マージン」が通信部17に出力される。通信部17は、食材量データ値、食材量データ値の変化マージン、及び食材量データ値の周期マージンを、ネットワーク40を介して見守りサービスセンタ110の通信部112に送信する。
 見守りサービスセンタ110の外部サーバ111に備えられた判定部116は、通信部112から食材量データ値、食材量データ値の変化マージン、及び食材量データ値の周期マージンを受け取る。冷蔵庫70と外部サーバ111との間のデータ送信のタイミングとしては、新たに食材量データ値を生成する度に送信するのが妥当であるが、パターン導出結果についてはその変化が頻繁に起こることはなく、食材量データ値の送信よりも疎らな間隔で送信するように構成しても良い。
 判定部116は、食材量データ生成部13から出力される最新の(現状の)食材量データ値の変化が、パターン導出部15から出力される食材量変化パターンの「食材量データ値の変化マージン」及び「周期マージン」の範囲から、予め決められた判断基準以上に乖離しているか否かを監視(判断)し、この監視結果に基づく判定情報を生成する。
 通信部113は、例えば、ユーザーの生活状況が異常な状態にあるときには、見守り者の通信端末50に状況を通知する。
 また、見守りサービスセンタを利用せず、通信端末上でユーザーの生活状況が異常であるか否かの判定を行ってもよい。図20は、本発明の実施の形態4に係る見守りシステムの別の構成を概略的に示すブロック図である。図20において、見守りサービスセンタの代わりに通信端末120がネットワーク40を介して冷蔵庫70の通信部17から送信された情報を受信することができる点が図19に示す見守りシステムと異なる。通信端末120には通信部121及び判定部126が備えられている。この場合の通信端末50上に判定部126を備える形態としては、スマートフォンのアプリをインストールするような方法が考えられる。判定部126の動作については前述と同様である。
 なお、実施の形態2及び実施の形態3で説明した見守りシステム、見守り方法、及び冷蔵庫においても、判定部を見守りサービスセンタに設置したり、判定部を通信端末に備えたりしてもよい。
 以上に説明したように、実施の形態4に係る見守りシステム、見守り方法では、画像データのようなサイズの大きいデータを外部に送信する必要がないので、装置のコストの上昇を抑制することができる。また、画像データを外部に送信していないので、冷蔵庫70を使用する見守り対象者のプライバシーを適切に保護することができる。また、ユーザーの日常の食生活に密接に関係している冷蔵庫70内の食材の量に基づいて、ユーザーの生活状況を監視し、生活状況が異常な状態であるか否かを判定するので、判定の信頼性を向上させることができる。
 また、実施の形態4に係る見守りシステム、見守り方法では、冷蔵庫70の外部でユーザーの生活状況が異常な状態であるか否かを判定するので、他の家電機器の使用状況や天候などの生活環境の情報を加えて判定することができるようになる。
《6》実施の形態5
 図1の冷蔵庫10、図14の冷蔵庫20、図16の冷蔵庫30では、それぞれ食材量の検出から許容範囲内又は許容範囲外の判定までを行い、判定結果のみをネットワーク40を介して通信端末50及び見守りサービスセンタ60に送信する構成を示しているが、この形態に限定されるわけではなく、食材量の検出までを冷蔵庫で行い、検出結果を見守りサービスセンタ60に送付する構成としても良い。
 図21は、本発明の実施の形態5に係る見守りシステムの構成を概略的に示すブロック図である。図21において、図1に示される構成要素と同一又は対応する構成要素には、図1に示される符号と同じ符号が付される。実施の形態5に係る見守りシステムは、データ保存部134、パターン導出部135、及び判定部136を見守りサービスセンタ130の外部サーバ131に配置する点が、実施の形態1に係る見守りシステムと異なる。この点を除いて、実施の形態5は、実施の形態1と同じである。
 図21に示されるように、実施の形態5に係る見守りシステムは、食材を収納する食品保管庫としての冷蔵庫80と、インターネットなどのネットワーク40を介して冷蔵庫80の通信部17から送信された情報を受信することができる見守りサービスセンタ130と、見守りサービスセンタ130の通信部133から送信された情報を受信することができる通信端末50とを備えている。
 冷蔵庫80は、センサ制御部11と、庫内照明18と、照度センサ12と、食材量データ生成部13と、通信部17とを備えている。見守りサービスセンタ130は、通信部132、133、外部サーバ131とを備えている。外部サーバ131には、データ保存部134と、パターン導出部135と、判定部136とが備えられている。
 食材量データ生成部13から出力される最新の(現状の)食材量データ値が通信部17に出力される。通信部17は、食材量データ値を、ネットワーク40を介して見守りサービスセンタ130の通信部132に送信する。
 見守りサービスセンタ130の外部サーバ131に備えられたデータ保存部134及び判定部136は、通信部132から食材量データ値を受け取る。冷蔵庫80と外部サーバ131との間のデータ送信のタイミングとしては、新たに食材量データ値を生成する度に送信するのが妥当である。
 データ保存部134と、パターン導出部135と、判定部136の動作については実施の形態1で説明した動作と同じである。判定部136は、食材量データ値の変化が、パターン導出部135から出力される食材量変化パターンの「食材量データ値の変化マージン」及び「周期マージン」の範囲から、予め決められた判断基準以上に乖離しているか否かを監視(判断)し、この監視結果に基づく判定情報を生成する。
 通信部133は、例えば、ユーザーの生活状況が異常な状態にあるときには、見守り者の通信端末50に状況を通知する。
 また、見守りサービスセンタを利用せず、通信端末上でユーザーの生活状況が異常であるか否かの判定を行ってよい。図22は、本発明の実施の形態5に係る見守りシステムの別の構成を概略的に示すブロック図である。図22において、見守りサービスセンタの代わりに通信端末140がネットワーク40を介して冷蔵庫80の通信部17から送信された情報を受信することができる点が図21に示す見守りシステムと異なる。通信端末140には、通信部141、データ保存部144、パターン導出部145と、及び判定部146が備えられている。この場合の通信端末140上に判定部146を備える形態としては、スマートフォンのアプリをインストールするような方法が考えられる。判定部146の動作については前述と同様である。
 なお、実施の形態2及び実施の形態3で説明した見守りシステム、見守り方法、及び冷蔵庫においても、データ保存部、パターン導出部及び判定部を見守りサービスセンタに設置したり、データ保存部、パターン導出部及び判定部を通信端末に備えたりしてもよい。
 以上に説明したように、実施の形態5に係る見守りシステム、見守り方法では、画像データのようなサイズの大きいデータを外部に送信する必要がないので、装置のコストの上昇を抑制することができる。また、画像データを外部に送信していないので、冷蔵庫80を使用する見守り対象者のプライバシーを適切に保護することができる。また、ユーザーの日常の食生活に密接に関係している冷蔵庫80内の食材の量に基づいて、ユーザーの生活状況を監視し、生活状況が異常な状態であるか否かを判定するので、判定の信頼性を向上させることができる。
 また、実施の形態5に係る見守りシステム、見守り方法では、冷蔵庫80の外部でユーザーの生活状況が異常な状態であるか否かを判定するので、他の家電機器の使用状況や天候などの生活環境の情報を加えて判定することができるようになる。また、見守りサービスセンタ又は通信端末が有する食材量変化パターン、食材量データ値の変化マージン及び周期マージンのデータベースを利用することがきるので、食材量変化パターンの導出や食材量データ値の変化マージン、周期マージンの設定を最適に行うことができる。
 なお、全ての実施の形態において、食品を保管する食品保管庫を冷蔵庫として説明したが、本発明を冷蔵庫以外の保管庫に食品を保管する場合にも適用してよい。食品保管庫としては、冷蔵・冷凍機能を有しない食品保管庫、屋内に設置する食品保管室や食品保管棚などがある。これらの食品保管庫に保存する食品は、保存期間が長いため、冷蔵庫に保管する場合に比べて食材量データの時間変化の周期が長くなるが、用途に合わせて食材量データの変化パターンを導出する。
 10,20,30,70,80 冷蔵庫、 11 センサ制御部、 12 照度センサ、 13,23,33 食材量データ生成部、 14,134,144 データ保存部、 15,135,145 パターン導出部、 16,116,126,136,146 判定部、 17,112,113,121,132,133,141 通信部、 18 庫内照明、 22a,22b 重量センサ、 32 カメラ、 40 ネットワーク、 50,120,140 通信端末、 60,110,130 見守りサービスセンタ、 61,111,131 外部サーバ、 101 冷蔵室、 102 棚板、 104 扉。

Claims (15)

  1.  見守り対象者の生活状況を見守り者に通知する見守りシステムであって、
     前記見守り対象者が使用する食品保管庫内に保管されている食材の量を検出し、前記食材の量を示す食材量データ値を生成するセンシング手段と、
     前記センシング手段で生成された前記食材量データ値を食材量データ履歴として保存するデータ保存部と、
     前記食材量データ履歴から前記食材量データ値の時間変化に対応する食材量変化パターンを導出するパターン導出部と、
     前記センシング手段によって生成された最新の食材量データ値が、前記食材量変化パターンに基づく許容範囲内にあるか否かを監視し、監視結果に基づく判定情報を出力する判定部と、
     前記判定情報を前記見守り者の通信端末に送信する通信部と
     を備えたことを特徴とする見守りシステム。
  2.  前記センシング手段は、
     前記食品保管庫内を照らす庫内照明と、
     前記食品保管庫内の照度レベルを検出する照度センサと、
     前記照度レベルから前記食材量データ値を生成する食材量データ生成部と、
     を有することを特徴とする請求項1に記載の見守りシステム。
  3.  前記センシング手段は、
     前記食品保管庫内を撮影し、撮影画像データを生成するカメラと、
     前記撮影画像データから前記食材量データ値を生成する食材量データ生成部と、
     を有することを特徴とする請求項1に記載の見守りシステム。
  4.  前記食材量データ生成部は、前記撮影画像データから前記食品保管庫内の照度レベルを算出し、前記照度レベルから前記食材量データ値を生成する
     ことを特徴とする請求項3に記載の見守りシステム。
  5.  前記センシング手段は、
     前記食品保管庫内にある食材の重量を検出して重量データを出力する重量センサと、
     前記重量データから前記食材量データ値を生成する食材量データ生成部と、
     を有することを特徴とする請求項1に記載の見守りシステム。
  6.  前記パターン導出部は、
     前記食材量データ値の増加の時点を起点とし前記増加の次の増加の時点を終点とする期間を1周期とし、
     複数周期の前記食材量データ値から前記食材量変化パターンを導出する
     ことを特徴とする請求項1から5のいずれか1項に記載の見守りシステム。
  7.  前記パターン導出部は、
     前記食材量データ値の増加の時点を起点とし前記起点から1週間の期間を1周期とし、
     複数周期の前記食材量データ値から前記食材量変化パターンを導出する
     ことを特徴とする請求項1から5のいずれか1項に記載の見守りシステム。
  8.  前記パターン導出部は、
     前記食材量データ値の増加の時点を起点とし前記起点から予め決められた期間を1周期とし、
     現在の季節に基づいて前記予め決められた期間を切り換え、
     複数周期の前記食材量データ値から前記食材量変化パターンを導出する
     ことを特徴とする請求項1から5のいずれか1項に記載の見守りシステム。
  9.  前記パターン導出部は、前記複数周期の前記食材量データ値の平均値から前記食材量変化パターンを導出する
     ことを特徴とする請求項6から8のいずれか1項に記載の見守りシステム。
  10.  前記パターン導出部は、前記複数周期の前記食材量データ値の標準偏差値から前記食材量変化パターンに基づく前記許容範囲を導出する
     ことを特徴とする請求項6から9のいずれか1項に記載の見守りシステム。
  11.  前記判定部は、前記最新の食材量データ値が前記パターン導出部により求められた前記許容範囲外にある時間が予め決められた許容時間以上であるときに、前記見守り対象者の生活状況が異常な状態であると判定する
     ことを特徴とする請求項1から10のいずれか1項に記載の見守りシステム。
  12.  前記パターン導出部は、前記平均値から前記食材量変化パターンに対する許容乖離率を導出し、前記許容範囲を前記許容乖離率以内の範囲とし、
     前記判定部は、前記最新の食材量データ値が前記許容乖離率以上の乖離率である時間が予め決められた許容時間以上であるときに、前記見守り対象者の生活状況が異常な状態であると判定する
     ことを特徴とする請求項9に記載の見守りシステム。
  13.  見守り対象者の生活状況を見守り者に通知する見守り方法であって、
     前記見守り対象者が使用する食品保管庫内に保管されている食材の量を検出し、前記食材の量を示す食材量データ値を生成するステップと、
     前記食材量データ値を食材量データ履歴としてデータ保存部に保存するステップと、
     前記食材量データ履歴から前記食材量データ値の時間変化に対応する食材量変化パターンを導出するステップと、
     前記食品保管庫内に保管されている食材の量を検出して得られた最新の食材量データ値が、前記食材量変化パターンに基づく許容範囲内にあるか否かを監視し、監視結果に基づく判定情報を出力するステップと、
     前記判定情報を前記見守り者の通信端末に送信するステップと
     を有することを特徴とする見守り方法。
  14.  見守り対象者の生活状況を見守り者に通知する冷蔵庫であって、
     前記冷蔵庫内に保管されている食材の量を検出し、前記食材の量を示す食材量データ値を生成するセンシング手段と、
     前記センシング手段で生成された前記食材量データ値を食材量データ履歴として保存するデータ保存部と、
     前記食材量データ履歴から前記食材量データ値の時間変化に対応する食材量変化パターンを導出するパターン導出部と、
     前記センシング手段によって生成された最新の食材量データ値が、前記食材量変化パターンに基づく許容範囲内にあるか否かを監視し、監視結果に基づく判定情報を出力する判定部と、
     前記判定情報を前記見守り者の通信端末に送信する通信部と
     を備えたことを特徴とする冷蔵庫。
  15.  見守り対象者が使用する食品保管庫と通信する通信端末であって、
     前記食品保管庫内に保管されている食材の量を示す食材量データ値を前記食品保管庫から受信する通信部と、
     前記食材量データ値を食材量データ履歴として保存するデータ保存部と、
     前記食材量データ履歴から前記食材量データ値の時間変化に対応する食材量変化パターンを導出するパターン導出部と、
     前記食品保管庫から受信する最新の食材量データ値が、前記食材量変化パターンに基づく許容範囲内にあるか否かを監視し、監視結果に基づく判定情報を出力する判定部と、
     を備えたことを特徴とする通信端末。
PCT/JP2018/007932 2017-09-20 2018-03-02 見守りシステム、見守り方法、冷蔵庫、及び通信端末 WO2019058590A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019542970A JP6710344B2 (ja) 2017-09-20 2018-03-02 見守りシステム、見守り方法、冷蔵庫、及び通信端末

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017179843 2017-09-20
JP2017-179843 2017-09-20

Publications (1)

Publication Number Publication Date
WO2019058590A1 true WO2019058590A1 (ja) 2019-03-28

Family

ID=65810692

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/007932 WO2019058590A1 (ja) 2017-09-20 2018-03-02 見守りシステム、見守り方法、冷蔵庫、及び通信端末

Country Status (2)

Country Link
JP (1) JP6710344B2 (ja)
WO (1) WO2019058590A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2020183692A1 (ja) * 2019-03-14 2021-11-18 三菱電機株式会社 見守りシステム、見守り方法、冷蔵庫、及び通信端末
CN114111203A (zh) * 2021-11-24 2022-03-01 广西成电智能制造产业技术有限责任公司 食材移动识别系统、方法、设备及电路

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008112267A (ja) * 2006-10-30 2008-05-15 Hitachi Ltd 電力使用量による生活見守り方法およびシステム
JP2014038374A (ja) * 2012-08-10 2014-02-27 Sharp Corp 見守りシステム、サーバ、容器、情報端末、プログラム、および記録媒体
JP2015065630A (ja) * 2013-08-27 2015-04-09 株式会社東芝 カメラシステム、冷蔵庫
WO2015097845A1 (ja) * 2013-12-27 2015-07-02 インフォメティス株式会社 信号処理システム、信号処理方法および信号処理プログラム

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6099921B2 (ja) * 2012-09-27 2017-03-22 東芝ライフスタイル株式会社 冷蔵庫
JP2015139066A (ja) * 2014-01-21 2015-07-30 株式会社デンソー 在不在判定装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008112267A (ja) * 2006-10-30 2008-05-15 Hitachi Ltd 電力使用量による生活見守り方法およびシステム
JP2014038374A (ja) * 2012-08-10 2014-02-27 Sharp Corp 見守りシステム、サーバ、容器、情報端末、プログラム、および記録媒体
JP2015065630A (ja) * 2013-08-27 2015-04-09 株式会社東芝 カメラシステム、冷蔵庫
WO2015097845A1 (ja) * 2013-12-27 2015-07-02 インフォメティス株式会社 信号処理システム、信号処理方法および信号処理プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
FURUTA, KAZUHIRO ET AL.: "Home Appliances Concierge", SERVICE FOR TOSHIBA SMART HOME APPLIANCES. TOSHIBA REVIEW, vol. 69, no. 4, 1 April 2014 (2014-04-01), pages 56 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2020183692A1 (ja) * 2019-03-14 2021-11-18 三菱電機株式会社 見守りシステム、見守り方法、冷蔵庫、及び通信端末
JP7090796B2 (ja) 2019-03-14 2022-06-24 三菱電機株式会社 見守りシステム、見守り方法、冷蔵庫、及び通信端末
CN114111203A (zh) * 2021-11-24 2022-03-01 广西成电智能制造产业技术有限责任公司 食材移动识别系统、方法、设备及电路

Also Published As

Publication number Publication date
JP6710344B2 (ja) 2020-06-17
JPWO2019058590A1 (ja) 2020-01-23

Similar Documents

Publication Publication Date Title
CN105513052B (zh) 一种冰箱内食物存量及变质信息探知系统及方法
CN105491147B (zh) 冰箱食材保鲜的提醒方法、系统、冰箱和云服务器
US8847781B2 (en) Building management system with privacy-guarded assistance mechanism and method of operation thereof
AU2010257615B2 (en) Detection and suppression of flicker in a sequence of images
US9491508B2 (en) Methods and apparatus to detect carrying of a portable audience measurement device
EP2581677A1 (en) Energy management apparatus
WO2019058590A1 (ja) 見守りシステム、見守り方法、冷蔵庫、及び通信端末
JP2007532904A5 (ja)
US20120011528A1 (en) Methods and apparatus to detect carrying of a portable audience measurement device
US20190110741A1 (en) Life rhythm measurement system and life rhythm measurement method
US11340273B2 (en) Presence-in-house determination system and presence-in-house determination method
US11176798B2 (en) Anomaly notification system and anomaly notification method
KR101185406B1 (ko) 소비 전력 감시 장치 및 감시 방법
KR20110035335A (ko) 열화상 카메라를 이용한 모니터링 방법 및 시스템
WO2017104044A1 (ja) 遠隔健康管理装置、遠隔健康管理方法、および遠隔健康管理システム
JP7090796B2 (ja) 見守りシステム、見守り方法、冷蔵庫、及び通信端末
JP2006146827A5 (ja)
JP5920933B2 (ja) 独居者見守りシステム、独居者見守り方法及びプログラム
JP2015089163A (ja) 行動評価装置、行動評価システム、行動評価方法、プログラム
Moshtaghi et al. Monitoring personal safety by unobtrusively detecting unusual periods of inactivity
TWI587251B (zh) The refrigerator uses a state detection system
JP2012226780A (ja) 独居者見守りシステム、独居者見守り方法及びプログラム
CN111528810B (zh) 体温检测方法及装置、可穿戴设备、计算机存储介质
JP7101218B2 (ja) 事故物件化防止システム
Harish et al. Smart refrigerator and vegetable identification system using image processing and IOT

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18859498

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019542970

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18859498

Country of ref document: EP

Kind code of ref document: A1