JP7340766B2 - 冷蔵庫 - Google Patents
冷蔵庫 Download PDFInfo
- Publication number
- JP7340766B2 JP7340766B2 JP2022082059A JP2022082059A JP7340766B2 JP 7340766 B2 JP7340766 B2 JP 7340766B2 JP 2022082059 A JP2022082059 A JP 2022082059A JP 2022082059 A JP2022082059 A JP 2022082059A JP 7340766 B2 JP7340766 B2 JP 7340766B2
- Authority
- JP
- Japan
- Prior art keywords
- food
- information
- image
- stored
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
Description
特許文献1に記載された冷蔵庫においては、食品画像データベースに記憶された情報を参照して、カメラによる撮像画像から抽出された各食品の画像に基づいて、冷蔵室に入出庫された食品の種類及び量を識別している。
そこで、食品の残量を認識するために、重量センサによって食品の重量の変化を検出することが考えられるが、重量センサにより個々の食品の重量を検出することは困難であり、また、重量センサを配置するためのスペース及び配線経路を確保するために、庫内の構成が複雑になる。
本発明はかかる背景に鑑みてなされたものであり、収容室から出庫された食品の再入庫を、簡易な構成により判断して、収容室に収容された食品の情報を管理することができる冷蔵庫を提供することを目的とする。
第1の発明によれば、食品情報管理部は、食品の入庫時画像が取得されたときに、庫内食品リストに基づいて、所定時間以内に収容室からの食品の出庫があったか否かを判断し、所定時間以内に収容室からの食品の出庫があり、且つ、庫内食品リストに記録された前回出庫された食品の情報と、入庫食品情報に記録された今回入庫された食品の情報との一致率が、所定値以上であるときには、前回出庫された食品と今回入庫された食品が同一物であると判断して、庫内食品リストに記録された前回出庫された食品の情報を、入庫食品情報に記録された今回入庫された食品の情報により更新する。そのため、収容室から出庫された食品の再入庫を、簡易な構成により判断して、収容室に収容された食品の情報を管理することができる。
第2の発明によれば、前回出庫された食品と今回入庫された食品とが同一の種別の食品であって、前回出庫された食品の情報と今回入庫された食品の情報の一致率が前記所定値以上であるが、今回入庫された食品の重量が前回出庫された食品の重量よりも増加したときに、今回入庫された食品は新たに入庫された食品であると判断することにより、庫内食品リストに記録された前回出庫された食品の情報が、入庫食品情報に記録された今回入庫された別の食品の情報により更新されることを回避することができる。
第3の発明によれば、庫内食品リストに基づいて、所定時間以内に収容室からの食品の出庫がなかったと判断したとき、又は、庫内食品リストに記録された前回出庫された食品の情報と、入庫食品情報に記録された今回入庫された食品の情報との一致率が、所定値未満であるときに、今回入庫された食品を庫内食品リストに新規登録することができる。
図1は、本実施形態の冷蔵庫の使用態様を示している。本実施形態の冷蔵庫1は、家屋Hに設置され、ゲートウェイ500及び通信ネットワーク510を介して管理サーバー520との間で通信を行う機能を有している。また、冷蔵庫1は、端末装置(スマートフォン、タブレット端末等)400との間で通信を行う機能を有している。端末装置400は、ゲートウェイ500及び通信ネットワーク510を介して管理サーバー520との間で通信を行う機能を有している。
図2~図6を参照して、冷蔵庫1の構成について説明する。図2は冷蔵庫1の外観を示した説明図である。図2に示したように、冷蔵庫1は前面に開口した主箱体2を備え、主箱体2内には、冷蔵室10(本発明の収容室に相当する)、製氷室30、製氷室30に併設されて庫内の温度が変更できる切換室20、冷凍室40、及び野菜室50が形成されている。
次に、図7~図12に示したフローチャートに従って、制御ユニット100により実行される冷蔵室10に収容された食品の管理に関する処理について説明する。
図8に示したフローチャートに従って、「撮像処理」の実行手順について説明する。「撮像処理」は、食品画像取得部111、及び撮像時点設定部116により実行される。食品画像取得部111は、ステップS10で、開閉センサ18a,18bの検出信号により、冷蔵室10の右ドア11と左ドア12の一方が又は両方が閉状態から開状態に切り替わったことを認識した時から、ステップS15で、右ドア11と左ドア12の両方が閉状態になったことを認識するまでの間に、第1撮像時点及び第2撮像時点でカメラ60a,60b,60cによる撮像を行う。
(2)照度センサ17bの検出照度が、「中基準照度」から「中基準照度-α」以下に変化した。
(3)照度センサ17cの検出照度が、「下基準照度」から「下基準照度-α」以下に変化した。
(5)照度センサ17bの検出照度が、「中基準照度-β」以下から「中基準照度」以上に変化した。
(6)照度センサ17cの検出照度が、「下基準照度-β」以下から「下基準照度」以上に変化した。
次に、図9、図10に示したフローチャートに従って、「画像分析処理」の実行手順について説明する。「画像分析処理」は、食品サイズ認識部112、食品種別認識部113、及び食品量認識部114により実行される。図9は、冷蔵室10に入庫された食品について、「入庫時画像」から情報を取得する処理である。また、図10は、冷蔵室10から出庫された食品について、「出庫時画像」から情報を取得する処理である。
図11及び図12に示したフローチャートに従って、冷蔵室10に収容された食品の情報を管理するための「庫内食品管理処理」の実行手順について説明する。「庫内食品管理処理」は、食品情報管理部115により実行される。食品情報管理部115は、本発明の在庫量管理部と在庫位置管理部の機能を含んでいる。
上記実施形態においては、複数のカメラとして、左カメラ60a、右カメラ60b、及び側面カメラ60cを備えたが、異なる方向から食品を撮像する少なくとも2台のカメラを備えれば、本発明の適用が可能である。また、3台以上のカメラを備える構成としてもよい。
10 冷蔵室
10a 開口部
11 右ドア
12 左ドア
16a、16b、16c、16d、16r、16f 照明部
17a、17b、17c 照度センサ
18a、18b 開閉センサ
20 切換室
30 製氷室
40 冷凍室
50 野菜室
60a 右カメラ
60b 左カメラ
60c 側面カメラ
61 圧縮機
62 冷却ファン
63 冷却器
64 凝縮器
100 制御ユニット
110 CPU
111 食品画像取得部
112 食品サイズ認識部
113 食品種別認識部
114 食品量認識部
115 食品情報管理部
116 撮像時点設定部
117 食品密度情報取得部
120 画像処理部
121 画像メモリ
130 記憶部
131 庫内食品リスト
132 入庫食品情報
133 出庫食品情報
134 サンプル画像
135 賞味期限リスト
136 食品密度テーブル
140 無線通信部
141 日時認識部
400 端末装置
500 ゲートウェイ
510 通信ネットワーク
520 管理サーバー
Claims (5)
- 食品の収容室と、
前記収容室の開口部を含む範囲を撮像するカメラと、
前記カメラにより、前記収容室に入庫される入庫食品の画像である入庫時画像と、前記収容室から出庫される出庫食品の画像である出庫時画像とを取得する食品画像取得部と、
前記入庫時画像に基づく前記入庫食品の情報が記録された入庫食品情報と、前記出庫時画像に基づく前記出庫食品の情報が記録された出庫食品情報とに基づいて、前記収容室に収容された各食品の情報と入出庫日時が記録された庫内食品リストを生成する食品情報管理部と、
を備える冷蔵庫であって、
前記入庫食品情報には、前記入庫時画像から抽出された文字情報を分析して取得された複数種類の情報が含まれ、前記出庫食品情報には、前記出庫時画像から抽出された文字情報を分析して取得された前記複数種類の情報が含まれ、
前記食品情報管理部は、前記食品画像取得部により前記入庫時画像が取得されたときに、前記庫内食品リストに基づいて、所定時間以内に前記収容室からの食品の出庫があったか否かを判断し、前記所定時間以内に前記収容室からの食品の出庫があり、且つ、前記庫内食品リストに記録された前回出庫された食品の前記複数種類の情報と、前記入庫食品情報に記録された今回入庫された食品の前記複数種類の情報との一致率が、所定値以上であるときには、前回出庫された食品と今回入庫された食品が同一物であると判断して、前記庫内食品リストに記録された前回出庫された食品の情報を、前記入庫食品情報に記録された今回入庫された食品の情報により更新する
冷蔵庫。 - 前記複数種類の情報には、食品名と、賞味期限とが含まれる
請求項1に記載の冷蔵庫。 - 前記食品情報管理部は、前記入庫時画像から抽出された文字情報により、前記入庫食品の食品名は取得できたが賞味期限は取得できなかった場合に、食品名と食品の一般的な賞味期限とを対応付けた賞味期限リストを検索して取得した、前記入庫食品の食品名に対応した一般的な賞味期限を、前記入庫食品の賞味期限として前記庫内食品リストに記録する
請求項2に記載の冷蔵庫。 - 前記食品の情報には、食品の種別と重量が含まれ、
前記食品情報管理部は、前回出庫された食品と今回入庫された食品とが同一の種別の食品であって、前回出庫された食品の情報と今回入庫された食品の情報の一致率が前記所定値以上であるが、今回入庫された食品の重量が前回出庫された食品の重量よりも増加したときには、今回入庫された食品は新たに入庫された食品であると判断して、前記庫内食品リストに記録された前回出庫された食品の情報の、前記入庫食品情報に記録された今回入庫された食品の情報による更新を行わない
請求項1から請求項3のうちいずれか1項に記載の冷蔵庫。 - 前記食品情報管理部は、前記食品画像取得部により前記入庫時画像が取得されたときに、前記庫内食品リストに基づいて、所定時間以内に前記収容室からの食品の出庫がなかったと判断したとき、又は、前記庫内食品リストに記録された前回出庫された食品の情報と、前記入庫食品情報に記録された今回入庫された食品の情報との一致率が、前記所定値未満であるときには、前記入庫食品情報に記録された今回入庫された食品の情報に基づいて、今回入庫された食品を前記庫内食品リストに新規登録する
請求項1から請求項4のうちいずれか1項に記載の冷蔵庫。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022082059A JP7340766B2 (ja) | 2017-12-20 | 2022-05-19 | 冷蔵庫 |
JP2023129791A JP2023138720A (ja) | 2017-12-20 | 2023-08-09 | 冷蔵庫 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017243462A JP7113281B2 (ja) | 2017-12-20 | 2017-12-20 | 冷蔵庫 |
JP2022082059A JP7340766B2 (ja) | 2017-12-20 | 2022-05-19 | 冷蔵庫 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017243462A Division JP7113281B2 (ja) | 2017-12-20 | 2017-12-20 | 冷蔵庫 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023129791A Division JP2023138720A (ja) | 2017-12-20 | 2023-08-09 | 冷蔵庫 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022103368A JP2022103368A (ja) | 2022-07-07 |
JP7340766B2 true JP7340766B2 (ja) | 2023-09-08 |
Family
ID=67179455
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017243462A Active JP7113281B2 (ja) | 2017-12-20 | 2017-12-20 | 冷蔵庫 |
JP2022082059A Active JP7340766B2 (ja) | 2017-12-20 | 2022-05-19 | 冷蔵庫 |
JP2023129791A Pending JP2023138720A (ja) | 2017-12-20 | 2023-08-09 | 冷蔵庫 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017243462A Active JP7113281B2 (ja) | 2017-12-20 | 2017-12-20 | 冷蔵庫 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023129791A Pending JP2023138720A (ja) | 2017-12-20 | 2023-08-09 | 冷蔵庫 |
Country Status (1)
Country | Link |
---|---|
JP (3) | JP7113281B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7137369B2 (ja) * | 2018-06-21 | 2022-09-14 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
JP7142225B2 (ja) * | 2020-09-03 | 2022-09-27 | パナソニックIpマネジメント株式会社 | 食品管理システム、及び冷蔵庫 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003185327A (ja) | 2001-12-18 | 2003-07-03 | Hitachi Ltd | 食品保存庫、食品管理装置および食品管理方法 |
JP2016180577A (ja) | 2015-03-25 | 2016-10-13 | 東芝ライフスタイル株式会社 | 食品管理方法および食品管理システム |
JP2017215067A (ja) | 2016-05-30 | 2017-12-07 | シャープ株式会社 | 在庫管理装置および在庫管理方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3639408B2 (ja) * | 1997-05-21 | 2005-04-20 | 株式会社日立製作所 | 保管庫 |
JP2010061382A (ja) | 2008-09-03 | 2010-03-18 | Nikon Corp | 自動レシピ作成装置およびプログラム |
JP6498866B2 (ja) | 2013-03-12 | 2019-04-10 | 東芝ライフスタイル株式会社 | 冷蔵庫、カメラ装置 |
JP6303127B2 (ja) | 2013-03-29 | 2018-04-04 | パナソニックIpマネジメント株式会社 | 冷蔵庫 |
JP6242537B2 (ja) | 2015-03-25 | 2017-12-06 | 三菱電機株式会社 | 冷蔵庫 |
-
2017
- 2017-12-20 JP JP2017243462A patent/JP7113281B2/ja active Active
-
2022
- 2022-05-19 JP JP2022082059A patent/JP7340766B2/ja active Active
-
2023
- 2023-08-09 JP JP2023129791A patent/JP2023138720A/ja active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003185327A (ja) | 2001-12-18 | 2003-07-03 | Hitachi Ltd | 食品保存庫、食品管理装置および食品管理方法 |
JP2016180577A (ja) | 2015-03-25 | 2016-10-13 | 東芝ライフスタイル株式会社 | 食品管理方法および食品管理システム |
JP2017215067A (ja) | 2016-05-30 | 2017-12-07 | シャープ株式会社 | 在庫管理装置および在庫管理方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7113281B2 (ja) | 2022-08-05 |
JP2019109026A (ja) | 2019-07-04 |
JP2022103368A (ja) | 2022-07-07 |
JP2023138720A (ja) | 2023-10-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7012263B2 (ja) | 冷蔵庫 | |
JP7340766B2 (ja) | 冷蔵庫 | |
JP7466117B2 (ja) | 冷蔵庫、管理システム、及びプログラム | |
JP7386459B2 (ja) | 冷蔵庫 | |
JP7012261B2 (ja) | 冷蔵庫 | |
JP6745872B2 (ja) | 冷蔵庫及びそれを含むネットワークシステム | |
JP7164296B2 (ja) | 冷蔵庫 | |
JP6584178B2 (ja) | 制御装置、冷蔵庫およびプログラム | |
US11335010B2 (en) | Methods for viewing and tracking stored items | |
WO2021057769A1 (zh) | 用于查看并跟踪所储存的物品的方法 | |
US11288506B2 (en) | Refrigerator appliances and methods for tracking stored items | |
JP7289083B2 (ja) | 冷蔵庫 | |
JP7289084B2 (ja) | 冷蔵庫 | |
JP7142225B2 (ja) | 食品管理システム、及び冷蔵庫 | |
JP2023099664A (ja) | 冷蔵庫 | |
CN111488831B (zh) | 一种食材联想识别方法及冰箱 | |
US20240230216A1 (en) | Produce ripening detection in a refrigerator appliance | |
WO2022073430A1 (zh) | 制冷电器和用户识别的方法 | |
TW202140973A (zh) | 冰箱 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220526 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230317 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230328 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230525 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230711 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230810 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7340766 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |