JP7142226B2 - 食品管理システム - Google Patents
食品管理システム Download PDFInfo
- Publication number
- JP7142226B2 JP7142226B2 JP2020148480A JP2020148480A JP7142226B2 JP 7142226 B2 JP7142226 B2 JP 7142226B2 JP 2020148480 A JP2020148480 A JP 2020148480A JP 2020148480 A JP2020148480 A JP 2020148480A JP 7142226 B2 JP7142226 B2 JP 7142226B2
- Authority
- JP
- Japan
- Prior art keywords
- food
- refrigerator
- camera
- unit
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D29/00—Arrangement or mounting of control or safety devices
- F25D29/005—Mounting of control devices
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D29/00—Arrangement or mounting of control or safety devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/68—Food, e.g. fruit or vegetables
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D2400/00—General features of, or devices for refrigerators, cold rooms, ice-boxes, or for cooling or freezing apparatus not covered by any other subclass
- F25D2400/36—Visual displays
- F25D2400/361—Interactive visual displays
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D2500/00—Problems to be solved
- F25D2500/06—Stock management
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D2700/00—Means for sensing or measuring; Sensors therefor
- F25D2700/02—Sensors detecting door opening
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D2700/00—Means for sensing or measuring; Sensors therefor
- F25D2700/04—Sensors detecting the presence of a person
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D2700/00—Means for sensing or measuring; Sensors therefor
- F25D2700/06—Sensors detecting the presence of a product
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Combustion & Propulsion (AREA)
- Thermal Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Mechanical Engineering (AREA)
- Chemical & Material Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- Computing Systems (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Development Economics (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
Description
上記従来技術は、静止画で撮影をするため、入出庫される食品の速度や、食品を入出庫する手の角度等によっては、冷蔵庫に入出庫される食品が撮影結果に含まれない虞があるため、冷蔵庫に収容される食品を精度良く管理できない場合がある。
そこで、本開示は、冷蔵庫に収容される食品を精度良く管理できる食品管理システムを提供する。
なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することを意図していない。
図1は、食品管理システム1000の構成を示す図である。
以下の説明において、左ドア11A及び右ドア11Bを区別しない場合、「ドア」といい「11C」の符号を付して総称する。また、以下の説明において、引出12A、13A、14A、15Aを区別しない場合、「引出」といい「16A」の符号を付して総称する。
図2は、冷蔵庫1及び食品検出装置2を前方側からみた図である。図2に示す冷蔵庫1は、左ドア11A及び右ドア11Bが開状態である。図3は、冷蔵庫1及び食品検出装置2を右側からみた図である。図3に示す冷蔵庫1は、引出15Aが、開状態、すなわち引き出された状態である。
また、図3では、引出用測距センサー25、引出用カメラ22、及び冷蔵室用カメラ21が前後方向においてこの順番で並んで設けられているように図示している。しかしながら、これは、食品検出装置2のための図示であり、図3のように設けられていなくてもよい。
以下の説明では、冷蔵庫1に収容される食品を管理するためのアプリケーションプログラムを、「食品管理用アプリ」といい「323」の符号を付す。
食品検出装置2は、センサーモジュール210、カメラモジュール220、及び電力供給部230を備える。
食品管理データベース423は、冷蔵庫1が収容する食品に係る各種情報を格納するデータベースである。
食品認識部4100は、食品検出装置2が検出した食品を認識する。食品認識部4100の詳細については、図9を参照して説明する。
端末装置3は、端末制御部30、端末通信部31、及びタッチパネル32を備える。
アプリ実行部3100は、端末通信部31を制御して、食品管理サーバー4と各種情報を送受信する。アプリ実行部3100は、端末装置3と通信装置5とが通信接続が可能である場合、通信装置5を介して食品管理サーバー4と各種情報を送受信し、そうでない場合、通信装置5を介さず食品管理サーバー4と各種情報を送受信する。このため、ユーザーPが自宅H内或いは自宅Hの周辺に位置しなくても、端末装置3は、食品管理用アプリ323の機能によって、食品管理サーバー4と各種情報を送受信できる。
次に、食品管理システム1000の各部の動作について説明する。
本実施の形態では、食品検出装置2が冷蔵庫1と別体である場合を例示している。そのため、食品検出装置2は、ユーザーPによって冷蔵庫1の上面に取り付けられる。
取付用画面TGは、撮影結果表示領域HA1が設けられる。撮影結果表示領域HA1は、矩形の領域であり、冷蔵室用カメラ21及び引出用カメラ22のいずれかの撮影結果を表示する領域である。撮影結果表示領域HA1には、図中の左右方向における略中央に、上下方向に延びる線L1が設けられている。
食品検出装置2のカメラモジュール220のカメラモジュール制御部221は、カメラモジュール通信部223により要求情報を受信すると、冷蔵室用カメラ21及び引出用カメラ22のいずれかの撮影結果を、カメラモジュール通信部223により端末装置3に送信する。
そして、アプリ実行部3100は、受信した撮影結果を撮影結果表示領域HA1に表示する。
図8は、食品検出装置2の動作を示すフローチャートである。
図8に示す動作では、センサー部212が有する各種センサーの検出値を、センサーモジュール210がセンサー側モジュール間通信部213によってカメラモジュール220に送信し、且つ、カメラモジュール220がカメラ側モジュール間通信部224によって当該検出値を受信している。そして、図8に示す動作では、検出値処理部221Aがセンサーモジュール210から受信した各種の検出値に基づいて処理を実行している。
図9は、食品検出装置2及び食品管理サーバー4の動作を示すフローチャートである。図9において、フローチャートFBは、食品検出装置2の動作を示す。また、図9において、フローチャートFCは、食品管理サーバー4の動作を示す。
<第1の方法>
第1の方法は、フレームに対応付く開閉状態情報による判定である。
食品検出部221Dは、有効フレームの判定において、開状態を示す開閉状態情報が対応付くフレームを有効フレームと判定し、閉状態を示す開閉状態情報が対応付くフレームを有効フレームでないと判定する。
第2の方法は、画像の差分抽出による判定である。
食品検出部221Dは、動画像を構成するフレームの差分抽出を行うことで、左ドア11A、右ドア11B、引出12A、13A、14A、15Aのいずれかが開状態である場合の像が写るフレームを特定する。そして、食品検出部221Dは、特定したフレームを有効フレームと判定し、特定したフレーム以外のフレームを有効フレームでないと判定する。例えば、食品検出部221Dは、閉状態のフレームに対して差分抽出を行っていき、左ドア11A、右ドア11B、引出12A、13A、14A、15Aのいずれかに差分があるフレームを、有効フレームと判定する。なお、差分抽出の基準となる閉状態のフレームは、例えば、動画像を構成するフレームのうち最も古いフレームである。
第3の方法は、第1の方法と第2の方法とに基づく判定である。
食品検出部221Dは、開状態を示す開閉状態情報が対応付くフレームを有効フレームと判定する。次いで、食品検出部221Dは、閉状態を示す開閉状態情報が対応付くフレームを対象に、閉状態のフレームに対する差分抽出を行い、左ドア11A、右ドア11B、引出12A、13A、14A、15Aのいずれかに差分があるフレームを、有効フレームと判定する。
ステップSB3において検出に必要なデータは、カメラモジュール制御部221が取得可能な記憶領域に記憶されている。
例えば、食品検出部221Dは、入出庫判定処理において、ステップSB3で検出できた食品の像の動画像における移動方向を、有効フレームに基づいて判定する。食品検出部221Dは、食品の像の移動方向が、後方、すなわち冷蔵庫1に近づく方向である場合、検出した食品が冷蔵庫1から入庫された食品であると判定する。また、食品検出部221Dは、食品の像の移動方向が、前方、すなわち冷蔵庫1から離れる方向である場合、検出した食品が冷蔵庫1から出庫された食品であると判定する。
また、食品管理サーバー4に送信される食品管理要求情報は、動画像の撮影が行われた日時を示す日時情報を含む。
また、食品管理サーバー4に送信される食品管理要求情報は、ステップSB3において検出された食品ごとに、切り出し食品画像の画像データ、入出庫判定処理の判定結果を示す入出庫判定結果情報、検出した入庫先又は出庫先を示す保存場所情報4234、及び検出した食品の種類を示す食品種類情報を含む。
食品認識部4100は、食品情報データベースに格納される食品画像FGから、切り出し食品画像と最も一致度の高い食品画像FGを特定する。一致度は、例えば、形状や、色等の特徴量に基づいて所定のアルゴリズムにより算出される。そして、食品認識部4100は、特定した食品画像FGが示す食品が、切り出し食品画像が示す食品であると認識する。
まず、食品認識部4100は、食品管理要求情報に含まれる食品検出装置ID2125を有するレコードRを食品管理データベース423から特定する。
より具体的には、食品認識部4100は、残量情報4233が示す残量を減らす処理を行う。減らす数量は、例えば食品認識処理の際に、食品管理要求情報に含まれる食品画像FGに基づいて算出される。ここで、更新後の残量情報4233がゼロを示す場合、食品認識部4100は、保存開始日情報4235が示す保存開始日、及び期限日情報4236が示す期限日をブランクにしてもよい。
より具体的には、食品認識部4100は、残量情報4233が示す残量を増やす処理を行う。増やす数量は、例えば食品認識処理の際に、食品管理要求情報に含まれる切り出し食品画像に基づいて算出される。また、食品認識部4100は、食品管理要求情報に含まれる日時情報が示す日付を、保存開始日情報4235が示す保存開始日に変更する処理を行う。また、食品認識部4100は、演算や問い合わせ等の所定の方法によって、食品管理要求情報に含まれる日時情報が示す日付に基づく期限日を取得し、期限日情報4236が示す期限日を取得した期限日に変更する処理を行う。
ここで、食品名情報4232は、食品認識処理の際に取得した食品名情報4232である。
また、残量情報4233は、例えば、食品認識処理の際に、食品管理要求情報に含まれる切り出し食品画像に基づいて算出された残量を示す。
また、保存場所情報4234は、食品管理要求情報に含まれる保存場所情報4234である。
また、保存開始日情報4235は、食品管理要求情報に含まれる日時情報が示す日付を示す。
また、期限日情報4236は、食品管理要求情報に含まれる日時情報が示す日付に基づく期限日、或いはブランクを示す。
また、期限日通知タイミング情報4237及び新規通知タイミング情報4238は、デフォルトのタイミング、或いはブランクを示す。
また、食品画像データ4239は、食品認識処理の際に取得した食品画像FGを示す。
図10は、食品管理画面SKGの一例を示す図である。
また、図10に示すオブジェクトOB2は、ビールを示す食品画像FG2、ビールの残量を示す残量情報4233、ビールの保存開始日を示す保存開始日情報4235、及び新規収容明示情報MJを含む。
また、図10に示すオブジェクトOB3は、卵を示す食品画像FG3、卵の残量を示す残量情報4233、及び卵の保存開始日を示す保存開始日情報4235を含む。
また、例えば、アプリ実行部3100は、食品管理画面SKGにおいて更新ボタンB3がタッチ操作された場合、ステップSD1において肯定判別する。
次いで、アプリ実行部3100は、牛乳を示す食品名情報4232に対応付く保存開始日情報4235が示す保存開始日が、牛乳を示す食品名情報4232に対応付く新規通知タイミング情報4238示すタイミングに該当するか否かを判別する。図10のオブジェクトOBの生成では、アプリ実行部3100は、否定判別し、新規収容明示情報MJを生成しない。なお、肯定判別した場合、アプリ実行部3100は、新規収容明示情報MJを生成する。
アプリ実行部3100は、生成した期限日警告情報KJ、牛乳を示す食品名情報4232に対応付く食品画像データ4239が示す食品画像FGと、及び牛乳を示す食品名情報4232に対応付く保存開始日情報4235を含むオブジェクトOB1を生成する。
なお、アプリ実行部3100は、期限日警告情報KJを生成していない場合、オブジェクトOB1に期限日警告情報KJを含めず、新規収容明示情報MJを生成している場合、オブジェクトOB1に新規収容明示情報MJを含める。
以上、説明したように、食品管理システム1000は、冷蔵庫1に収容される食品を管理する。食品管理システム1000は、冷蔵室用カメラ21及び引出用カメラ22と、冷蔵室用カメラ21及び引出用カメラ22の撮影により得られた動画像に基づいて、冷蔵庫1に入出庫される食品を検出する食品検出部221Dと、を備える。
次に、本実施の形態の変形例を複数説明する。
実施の形態1は、食品検出装置2が、撮影結果の動画像から有効フレームを判定し、有効フレームから食品を検出し、検出した食品の食品画像を有効フレームから切り出し、切り出し食品画像を食品管理サーバー4に送信する。そして、実施の形態1は、食品管理サーバー4が、切り出し食品画像に基づいて食品認識処理と食品管理データベース423の更新を行う。
変形例1は、食品検出装置2が、食品の検出を行うことなく有効フレームを食品管理サーバー4に送信し、食品管理サーバー4が、有効フレームに基づいて、食品の検出、食品認識処理、及び食品管理データベース423の更新を行う構成である。
以上のように、本出願において開示する例示として、上記実施の形態を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施の形態にも適用できる。また、上記実施の形態で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
そこで、以下、他の実施の形態を例示する。
カメラが1台の場合、冷蔵室用カメラ21及び引出用カメラ22の撮影結果に変わって、当該カメラの撮影結果に基づいて、食品検出装置2、端末装置3、及び食品管理サーバー4が、上述した実施の形態1と同様の動作を実行する。
2 食品検出装置
3 端末装置
4 食品管理サーバー
7 商用交流電源(商用電源)
11 冷蔵室
11A 左ドア(ドア)
11B 右ドア(ドア)
11C ドア
12A、13A、14A、15A、16A 引出
21 冷蔵室用カメラ(カメラ)
22 引出用カメラ(カメラ)
23 左ドア用測距センサー(開閉センサー)
24 右ドア用測距センサー(開閉センサー)
25 引出用測距センサー(開閉センサー)
26 照度センサー
27 人感センサー
28 開閉用測距センサー(開閉センサー)
210 センサーモジュール
220 カメラモジュール
221A 検出値処理部
221B 撮影制御部
221C 動画像処理部
221D 食品検出部
230 電力供給部
4100 食品認識部
Claims (6)
- 冷蔵室を有する冷蔵庫に収容される食品を管理する食品管理システムであって、
少なくとも前記冷蔵室の開口部を動画像により撮影するカメラと、
前記カメラの撮影により得られた前記動画像に基づいて、前記冷蔵庫に入出庫される前記食品を検出する食品検出部と、を備え、
前記カメラは、前記冷蔵庫の周囲に人物が存在する場合に撮影を開始し、
前記動画像を構成するフレームには、前記冷蔵庫のドア及び引出のいずれかが開状態であることを示す開閉状態情報が対応付くフレームと、前記冷蔵庫のドア及び引出のいずれも閉状態であることを示す開閉状態情報が対応付くフレームとが含まれ、
前記食品検出部は、
前記動画像を構成するフレームから、フレームに対応付く前記開閉状態情報に基づいて、前記冷蔵庫のドア及び引出の少なくともいずれが開状態の像が写る特定フレームを抽出し、
抽出した前記特定フレームに含まれる前記食品を検出する、
食品管理システム。 - 前記食品検出部は、
前記動画像に基づいて、検出した前記食品の前記冷蔵庫への入出庫を判定する、
請求項1に記載の食品管理システム。 - 前記食品検出部が検出した前記食品を認識する食品認識部を備える、
請求項1又は2に記載の食品管理システム。 - 前記食品検出部と前記食品認識部とは通信可能であり、
前記食品検出部は、
検出した前記食品について、抽出した前記特定フレームから画像を切り出し、
切り出した前記画像を前記食品認識部に送信し、
前記食品認識部は、
受信した前記画像に基づいて、前記食品検出部が検出した前記食品を認識する、
請求項3に記載の食品管理システム。 - 前記冷蔵庫のドア及び引出の少なくともいずれかの開閉状態を検出する開閉センサーを備え、
前記食品検出部は、
前記動画像を構成するフレームの比較、及び前記開閉センサーの検出結果に基づいて前記特定フレームを抽出する、
請求項4に記載の食品管理システム。 - 前記カメラは、前記冷蔵庫の前上方から撮影する、
請求項1から5のいずれか一項に記載の食品管理システム。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020148480A JP7142226B2 (ja) | 2020-09-03 | 2020-09-03 | 食品管理システム |
PCT/JP2021/027567 WO2022049921A1 (ja) | 2020-09-03 | 2021-07-26 | 食品管理システム |
CN202180053958.5A CN116057336A (zh) | 2020-09-03 | 2021-07-26 | 食品管理系统 |
EP21863979.7A EP4209735A4 (en) | 2020-09-03 | 2021-07-26 | FOOD MANAGEMENT SYSTEM |
US18/042,563 US20230332830A1 (en) | 2020-09-03 | 2021-07-26 | Food management system |
JP2022132940A JP2022162054A (ja) | 2020-09-03 | 2022-08-24 | 食品管理システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020148480A JP7142226B2 (ja) | 2020-09-03 | 2020-09-03 | 食品管理システム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022132940A Division JP2022162054A (ja) | 2020-09-03 | 2022-08-24 | 食品管理システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022042854A JP2022042854A (ja) | 2022-03-15 |
JP7142226B2 true JP7142226B2 (ja) | 2022-09-27 |
Family
ID=80491947
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020148480A Active JP7142226B2 (ja) | 2020-09-03 | 2020-09-03 | 食品管理システム |
JP2022132940A Pending JP2022162054A (ja) | 2020-09-03 | 2022-08-24 | 食品管理システム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022132940A Pending JP2022162054A (ja) | 2020-09-03 | 2022-08-24 | 食品管理システム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20230332830A1 (ja) |
EP (1) | EP4209735A4 (ja) |
JP (2) | JP7142226B2 (ja) |
CN (1) | CN116057336A (ja) |
WO (1) | WO2022049921A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024089973A1 (ja) * | 2022-10-27 | 2024-05-02 | パナソニックIpマネジメント株式会社 | 入出庫管理システム、及び、入出庫管理方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015111025A (ja) | 2013-03-12 | 2015-06-18 | 株式会社東芝 | 冷蔵庫、カメラ装置 |
JP2015125535A (ja) | 2013-12-26 | 2015-07-06 | ソフトバンクモバイル株式会社 | 管理システム及びプログラム |
JP2016023854A (ja) | 2014-07-18 | 2016-02-08 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | 判定装置、および、判定方法 |
CN105841434A (zh) | 2016-05-25 | 2016-08-10 | 海信(山东)冰箱有限公司 | 一种冰箱及其控制方法 |
JP2019070467A (ja) | 2017-10-06 | 2019-05-09 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
JP2019070476A (ja) | 2017-10-06 | 2019-05-09 | パナソニックIpマネジメント株式会社 | 冷蔵庫 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6391943B2 (ja) * | 2013-03-12 | 2018-09-19 | 東芝ライフスタイル株式会社 | 冷蔵庫、カメラ装置、庫内画像表示プログラム |
JP2015014401A (ja) * | 2013-07-04 | 2015-01-22 | 日立アプライアンス株式会社 | 冷蔵庫 |
JP6571407B2 (ja) * | 2015-06-23 | 2019-09-04 | シャープ株式会社 | 庫内撮影装置 |
JP7164835B2 (ja) | 2019-03-11 | 2022-11-02 | Tdk株式会社 | 圧力センサ |
-
2020
- 2020-09-03 JP JP2020148480A patent/JP7142226B2/ja active Active
-
2021
- 2021-07-26 CN CN202180053958.5A patent/CN116057336A/zh active Pending
- 2021-07-26 US US18/042,563 patent/US20230332830A1/en active Pending
- 2021-07-26 EP EP21863979.7A patent/EP4209735A4/en active Pending
- 2021-07-26 WO PCT/JP2021/027567 patent/WO2022049921A1/ja unknown
-
2022
- 2022-08-24 JP JP2022132940A patent/JP2022162054A/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015111025A (ja) | 2013-03-12 | 2015-06-18 | 株式会社東芝 | 冷蔵庫、カメラ装置 |
JP2015125535A (ja) | 2013-12-26 | 2015-07-06 | ソフトバンクモバイル株式会社 | 管理システム及びプログラム |
JP2016023854A (ja) | 2014-07-18 | 2016-02-08 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | 判定装置、および、判定方法 |
CN105841434A (zh) | 2016-05-25 | 2016-08-10 | 海信(山东)冰箱有限公司 | 一种冰箱及其控制方法 |
JP2019070467A (ja) | 2017-10-06 | 2019-05-09 | 東芝ライフスタイル株式会社 | 冷蔵庫 |
JP2019070476A (ja) | 2017-10-06 | 2019-05-09 | パナソニックIpマネジメント株式会社 | 冷蔵庫 |
Also Published As
Publication number | Publication date |
---|---|
EP4209735A4 (en) | 2024-02-21 |
EP4209735A1 (en) | 2023-07-12 |
CN116057336A (zh) | 2023-05-02 |
US20230332830A1 (en) | 2023-10-19 |
JP2022042854A (ja) | 2022-03-15 |
JP2022162054A (ja) | 2022-10-21 |
WO2022049921A1 (ja) | 2022-03-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7182139B2 (ja) | 食品検出装置、及び食品管理システム | |
CN112984913B (zh) | 物品显示系统 | |
JP2024088755A (ja) | プログラム、端末装置、及び食品管理システム | |
US20200041200A1 (en) | Artificial intelligence refrigerator | |
JP2017015298A (ja) | 食材位置提示方法及び冷蔵庫 | |
JP2022162054A (ja) | 食品管理システム | |
JP2022103368A (ja) | 冷蔵庫 | |
JP7281755B2 (ja) | 冷蔵庫 | |
WO2023095526A1 (ja) | プログラム、端末装置、およびレシピ表示システム | |
US20210133442A1 (en) | Element operation division device, element operation division method, storage medium, and element operation division system | |
JP6124257B2 (ja) | 冷蔵庫内記録システム、制御装置、および、冷蔵庫内記録方法 | |
WO2023095536A1 (ja) | 検出装置、検出装置の制御方法、及びプログラム | |
WO2023095533A1 (ja) | 検出システム、プログラム及び入出庫管理方法 | |
JP2024058085A (ja) | 物品管理システム、物品管理システムの制御方法、物品管理装置、及びプログラム | |
WO2023095529A1 (ja) | プログラム、端末装置、端末装置の制御方法、及び表示システム | |
JP7289083B2 (ja) | 冷蔵庫 | |
JP7289084B2 (ja) | 冷蔵庫 | |
JP2022094416A (ja) | 貯蔵庫、貯蔵システム及び画像認識方法 | |
JP2022130059A (ja) | プログラム、端末装置、及び端末装置の制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220418 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220418 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220510 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220707 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220726 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220825 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7142226 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |