JP5918210B2 - 管理システム及びプログラム - Google Patents

Description

本発明は、管理システム及びプログラムに関する。

食品に付されたＲＦ−ＩＤタグから食品情報を読み取ることによって、冷蔵庫内に収容された食品を管理する冷蔵庫が知られていた（例えば、特許文献１参照）。
［先行技術文献］
［特許文献］
［特許文献１］特開２００１−３１９０４３号公報

ＩＣタグが付されている物品に加えて、ＩＣタグが付されていない物品も管理できるシステムが望まれていた。

本発明の第１の態様によれば、庫内の物品を管理する管理システムであって、物品に付されたＩＣタグに格納されたタグ情報を読み取るタグ読取部と、庫内に入庫される物品及び庫内から出庫される物品を撮像する撮像部と、庫内に収納されている物品の重量を測定する重量測定部と、庫内に収納されている物品を管理する物品管理情報を格納する物品管理情報格納部と、物品管理情報を更新する物品管理情報更新部とを備え、物品管理情報更新部が、タグ読取部によるタグ情報の読み取り及び撮像部による物品の撮像の後、重量測定部が測定する重量が増加した場合に、物品の入庫と判定して、タグ情報と物品の画像とを対応付けて物品管理情報に追加することにより物品管理情報を更新し、撮像部による物品の撮像の後、重量測定部が測定する重量が増加し、かつ、タグ読取部によるタグ情報の読み取りがなかった場合、物品の入庫と判定して、物品の画像を物品管理情報に追加することにより物品管理情報を更新し、重量測定部が測定する重量が減少した後、タグ読取部によるタグ情報の読み取り及び撮像部による物品の撮像が実行された場合、タグ情報に対応する物品の出庫と判定して、物品管理情報を更新し、重量測定部が測定する重量が減少した後、撮像部による物品の撮像が実行され、かつ、タグ読取部によるタグ情報の読み取りがなかった場合、撮像部が撮像した物品の画像に対応する物品の出庫と判定して、物品管理情報を更新する管理システムが提供される。

上記管理システムは、タグ情報に基づいて、ＩＣタグが付された物品の物品名を特定するＩＣタグ物品特定部と、撮像部により撮像された画像に基づいて、物品の物品名を特定する画像物品特定部とをさらに備えてよく、物品管理情報更新部は、タグ読取部によるタグ情報の読み取り及び撮像部による物品の撮像の後、重量測定部が測定する重量が増加した場合に、タグ情報に基づいて特定された物品名と物品の画像とを対応付けて物品管理情報に追加してよく、撮像部による物品の撮像の後、重量測定部が測定する重量が増加し、かつ、タグ読取部によるタグ情報の読み取りがなかった場合であって、物品の画像に基づいて物品の物品名が特定できた場合、物品の画像と物品名とを対応付けて物品管理情報に追加し、物品の画像に基づいて物品の物品名が特定できなかった場合、物品の画像と、物品の物品名が不明であることを示す不明情報とを対応付けて物品管理情報に追加してよい。上記冷蔵庫内管理システムは、不明情報が対応付けられた物品の画像を出力する不明物品出力部と、不明物品出力部が出力した物品の画像に対して入力された物品名を取得する物品名取得部とをさらに備えてよく、物品管理情報更新部は、不明情報と物品名取得部が取得した物品名とを置換することにより、物品管理情報を更新してよい。

上記管理システムは、庫内に収納されている物品の状態に基づいて、警告の要否を判定する警告要否判定部と、警告要否判定部によって警告要と判定された場合に、警告情報を出力する警告情報出力部とをさらに備えてよい。上記管理システムは、庫内に収納されているべき物品を登録する収納物品登録部をさらに備えてよく、警告要否判定部は、収納物品登録部によって登録された物品が、庫内に収納されていない場合に、警告要と判定してよい。上記管理システムにおいて、収納物品登録部は、庫内に収納されているべき物品の、収納されているべき重量を登録してよく、物品管理情報更新部は、タグ読取部によるタグ情報の読み取り及び撮像部による物品の撮像の後、重量測定部が測定する重量が増加した場合に、タグ情報及び物品の画像と、重量測定部によって測定された物品の重量とを対応付けて物品管理情報に追加し、撮像部による物品の撮像の後、重量測定部が測定する重量が増加し、かつ、タグ読取部によるタグ情報の読み取りがなかった場合に、タグ情報及び物品の画像と、重量測定部によって測定された物品の重量とを対応付けて物品管理情報に追加し、警告要否判定部は、収納物品登録部によって登録された物品の重量が、登録された収納されているべき重量よりも少ない場合に、警告要と判定してよい。上記管理システムにおいて、物品は食品であってよく、物品管理情報更新部は、タグ読取部によるタグ情報の読み取り及び撮像部による物品の撮像の後、重量測定部が測定する重量が増加した場合に、タグ情報に含まれる物品の物品名及び物品の賞味期限と、物品の画像とを対応付けて物品管理情報に追加し、警告要否判定部は、物品管理情報に含まれる賞味期限に基づいて、警告の要否を判定してよい。

本発明の第２の態様によれば、コンピュータを、上記管理システムとして機能させるためのプログラムが提供される。

なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。

管理システムの一例を概略的に示す。 冷蔵庫の一例を概略的に示す。 冷蔵庫の機能構成の一例を概略的に示す。 テーブル形式の物品管理情報の一例を概略的に示す 収納物品情報の一例を概略的に示す。 冷蔵庫による処理の流れの一例を概略的に示す。 管理サーバの機能構成の一例を概略的に示す。

以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。

図１は、管理システム１００の一例を概略的に示す。本実施形態では、冷蔵庫２００の庫内に収納された物品１０を管理する管理システム１００を例に挙げて説明するが、これに限らない。管理システム１００は、冷蔵庫２００以外の庫内に収納された物品１０を管理してもよい。本実施形態に係る管理システム１００は、冷蔵庫２００及び管理サーバ３００を含んでよい。冷蔵庫２００と管理サーバ３００とは、ネットワーク５０を介して通信する。ネットワーク５０は、例えば、インターネット及び電話網を含む。なお、冷蔵庫２００は、後述する通信端末４００を使用する使用者３０の自宅にある冷蔵庫を例に挙げて説明するが、これに限らず、使用者３０の自宅以外、例えば、使用者３０の友人宅や知人宅にある冷蔵庫でもよい。

冷蔵庫２００は、ＩＣタグリーダ２１２を有する。ＩＣタグリーダ２１２は、物品１０に付されたＩＣタグ２０から、ＩＣタグ２０に格納されたタグ情報を読み取る。タグ情報は、ＩＣタグ２０を識別するタグＩＤを含んでよい。また、タグ情報は、ＩＣタグ２０が付された物品１０の情報を含んでよい。

例えば、タグ情報は、物品１０の物品名を含む。物品名は、物品１０のカテゴリであってよく、物品１０の製品名であってもよい。例えば、物品１０が牛乳である場合、物品名は「牛乳」というカテゴリであってよい。また、物品１０の製品名が「○○牛乳」である場合、物品名は「○○牛乳」であってよい。タグ情報は、カテゴリ及び製品名の両方を含んでもよい。タグ情報は、物品１０の賞味期限又は消費期限を含んでよい。

冷蔵庫２００を使用する使用者３０は、例えば、冷蔵庫２００に物品１０を入出庫するときに、物品１０をＩＣタグリーダ２１２にかざす。これにより、ＩＣタグリーダ２１２は、物品１０に付されたＩＣタグ２０からタグ情報を読み取る。

冷蔵庫２００は、ＩＣタグ２１４を有する。冷蔵庫２００は、ＩＣタグ２１４を介して、通信端末４００と通信してよい。通信端末４００は、例えば、携帯電話、タブレット端末、及びノートパソコン等である。通信端末４００は、ＩＣタグ２１４からデータを読み取る機構を内蔵してよい。また、通信端末４００は、ＩＣタグ２１４からデータを読み取る機構を有する機器を外付けで備えてもよい。

冷蔵庫２００は、ＩＣタグリーダ２１２によってＩＣタグ２０から読み取ったタグ情報を、通信端末４００を介して管理サーバ３００に送信してよい。通信端末４００は、冷蔵庫２００からタグ情報を受信して、ネットワーク５０を介して管理サーバ３００に送信してよい。なお、ここでは、冷蔵庫２００が通信端末４００を介して管理サーバ３００にデータを送信する例を挙げて説明するが、これに限らない。冷蔵庫２００は、３Ｇ、ＬＴＥ、及び４Ｇ等の移動通信システム、ＷｉＦｉ通信、並びに有線通信等で通信する通信機能を備えて良く、当該通信機能を用いて、ネットワーク５０を介して管理サーバ３００と通信してもよい。

冷蔵庫２００は、庫内に入庫される物品１０の情報と、庫内から出庫される物品１０の情報とを管理サーバ３００に送信する。これにより、管理サーバ３００は、冷蔵庫２００の庫内に収納されている物品１０の情報を管理できる。

管理サーバ３００は、通信端末４００からの問い合わせに対して、冷蔵庫２００の庫内に収納されている物品１０の情報を通信端末４００に送信してよい。これにより、例えば、通信端末４００を所持する使用者３０は、スーパーマーケット等で食材を購入するときに、通信端末４００を用いて管理サーバ３００に問い合わせることにより、自宅の冷蔵庫２００に収納されている物品１０を確認することができる。

管理サーバ３００は、通信端末４００に限らず、他の通信端末に対して、冷蔵庫２００の庫内に収納されている物品１０の情報を送信してよい。例えば、管理サーバ３００は、使用者３０の家族である他の使用者３２が所持する通信端末４１０に対して、管理サーバ３００の庫内に収納されている物品１０の情報を送信する。管理サーバ３００は、予め登録された通信端末に対してのみ、冷蔵庫２００の庫内に収納されている物品１０の情報を送信してもよい。

図２は、冷蔵庫２００の一例を概略的に示す。図２では、冷蔵室２０２、野菜室２０４、及び冷凍室２０６を備える冷蔵庫２００を例示しているが、これに限らず、冷蔵庫２００の構成はどのような構成であってもよい。

冷蔵庫２００は、開閉センサ２０８、カメラ２１６及び重量センサ２１８を備える。開閉センサ２０８は、冷蔵室扉２０３、野菜室２０４、及び冷凍室２０６のそれぞれに設置されており、それぞれの開閉センサ２０８が冷蔵室扉２０３の開閉、野菜室２０４の開閉、及び冷凍室２０６の開閉を検知する。

カメラ２１６は、冷蔵庫２００の天板の上方に設置され、冷蔵庫２００の庫内に入庫される物品１０及び冷蔵庫２００の庫内から出庫される物品１０を上方から撮像する。カメラ２１６は、冷蔵室２０２、野菜室２０４、冷凍室２０６、及び冷蔵室扉２０３に対して入出庫される物品１０を撮像する。

重量センサ２１８は、冷蔵庫２００の庫内に収納されている物品１０の重量を測定する。重量センサ２１８は、冷蔵室２０２内の各棚、冷蔵室扉２０３の各棚、野菜室２０４、及び冷凍室２０６に設置されてよい。例えば、冷蔵室２０２内の一の棚に設置された重量センサ２１８が測定する重量が１ｋｇ増加した場合、当該一の棚の上に重量１ｋｇの物品１０が収納されたと判定できる。また、例えば、冷蔵室２０２の一の棚に設置された重量センサ２１８が測定する重量が１ｋｇ減少した場合、当該棚の上に収納された重量１ｋｇの物品１０が持ち上げられたと判定できる。

図３は、冷蔵庫２００の機能構成の一例を概略的に示す。冷蔵庫２００は、タグ読取部２２０、開閉検知部２２２、撮像部２２４、重量測定部２２６、物品管理情報格納部２３０、物品管理情報更新部２３２、ＩＣタグ物品特定部２３４、画像物品特定部２３６、物品管理情報送信部２３８、不明物品出力部２４２、物品名取得部２４４、収納物品登録部２４６、警告要否判定部２５０、及び警告情報出力部２５２を備える。なお、冷蔵庫２００がこれらのすべての構成を備えることは必須とは限らない。

タグ読取部２２０は、物品１０に付されたＩＣタグ２０に格納されたタグ情報を読み取る。タグ読取部２２０は、例えば、ＩＣタグリーダ２１２である。

開閉検知部２２２は、冷蔵庫２００の扉の開閉を検知する。開閉検知部２２２は、例えば、開閉センサ２０８である。

撮像部２２４は、冷蔵庫２００の庫内に入庫される物品１０及び庫内から出庫される物品１０を撮像する。撮像部２２４は、例えば、カメラ２１６である。撮像部２２４は、冷蔵庫２００の庫内に入庫される物品１０及び庫内から出庫される物品を撮像できれば、冷蔵庫２００の任意の位置に配置されてよい。また、撮像部２２４は複数のカメラを有してもよい。例えば、撮像部２２４は、冷蔵室２０２、野菜室２０４、及び冷凍室２０６のそれぞれに対して入庫される物品１０及び出庫される物品１０を撮像する複数のカメラを有する。

撮像部２２４は、開閉検知部２２２によって冷蔵室扉２０３、野菜室２０４又は冷凍室２０６の開扉が検知されたときに撮像範囲の動画撮像を開始して、撮像範囲を通過する物品１０の静止画像を、物品１０の画像として取得してよい。また、撮像部２２４は、冷蔵庫２００の任意の位置に設置された不図示の指示ボタン等の指示部に対する指示に応じて、静止画の撮像を実行してよい。例えば、使用者３０が、物品１０を撮像部２２４の撮像範囲内に移動させた後、指示ボタンによる指示を行うことによって、物品１０を撮像部２２４に撮像させることができる。

重量測定部２２６は、冷蔵庫２００の庫内に収納されている物品の重量を測定する。重量測定部２２６は、例えば、重量センサ２１８である。すなわち、重量測定部２２６は、冷蔵室２０２の複数の棚に設置された重量センサ２１８、冷蔵室扉２０３の複数の棚に設置された重量センサ２１８、野菜室２０４に設置された重量センサ２１８、及び冷凍室２０６に設置された重量センサ２１８を有してよい。また、重量測定部２２６は、冷蔵庫２００の全体の重量を測定する重量センサであってもよい。重量測定部２２６は、測定した冷蔵庫２００の全体の重量から、物品１０が１つも収納されていない状態の冷蔵庫２００の重量を減算することによって、冷蔵庫２００の庫内に収納されている物品１０の重量を判断してよい。

物品管理情報格納部２３０は、冷蔵庫２００の庫内に収納されている物品１０を管理する物品管理情報を格納する。物品管理情報は、物品１０毎に、物品１０に関連する情報が対応付けられたデータ構造を有してよい。例えば、物品管理情報は、物品１０毎に、物品名と、賞味期限又は消費期限と、画像と、対応するタグＩＤがある場合にはタグＩＤとが対応付けられたデータ構造を有する。物品管理情報更新部２３２は、物品管理情報格納部２３０が格納する物品管理情報を更新する。

物品管理情報更新部２３２は、例えば、タグ読取部２２０によるタグ情報の読み取り及び撮像部２２４による物品１０の撮像の後、重量測定部２２６が測定する重量が増加した場合に、ＩＣタグ２０が付された物品１０の入庫と判定する。物品管理情報更新部２３２は、タグ読取部２２０によるタグ情報の読み取り、開閉検知部２２２による冷蔵室扉２０３、野菜室２０４又は冷凍室２０６の開扉検知、撮像部２２４による物品１０の撮像、及び重量測定部２２６が測定する重量の増加の後、開閉検知部２２２が、冷蔵室扉２０３、野菜室２０４又は冷凍室２０６の閉扉を検知した場合に、ＩＣタグ２０が付された物品１０の入庫と判定してもよい。

そして、物品管理情報更新部２３２は、タグ読取部２２０が読み取ったタグ情報と、撮像部２２４が撮像した物品１０の画像とを対応付けて物品管理情報に追加する。これにより、ＩＣタグ２０が付された物品１０を、タグ情報及び画像によって管理できる。

物品管理情報更新部２３２は、タグ読取部２２０が読み取ったタグ情報に物品名が含まれている場合、物品管理情報に物品名を追加してよい。タグ読取部２２０が読み取ったタグ情報に物品名が含まれていない場合、ＩＣタグ物品特定部２３４が、タグ情報に含まれるタグＩＤに基づいて、物品名を特定してよい。例えば、ＩＣタグ物品特定部２３４は、複数のタグＩＤと複数の物品名とを対応付けた対応付けデータを参照することにより、タグ情報に含まれるタグＩＤに対応する物品名を取得する。また、ＩＣタグ物品特定部２３４は、タグＩＤを管理サーバ３００に送信して、管理サーバ３００から、タグＩＤに対応する物品名を取得してもよい。物品管理情報更新部２３２は、タグ読取部２２０が読み取ったタグ情報に賞味期限又は消費期限が含まれている場合、賞味期限及び消費期限を物品管理情報に追加してよい。

また、物品管理情報更新部２３２は、例えば、撮像部２２４による物品１０の撮像の後、重量測定部２２６が測定する重量が増加し、かつ、タグ読取部２２０によるタグ情報の読み取りがなかった場合に、物品１０の入庫と判定する。物品管理情報更新部２３２は、開閉検知部２２２による冷蔵室扉２０３、野菜室２０４又は冷凍室２０６の開扉検知、撮像部２２４による物品１０の撮像、及び重量測定部２２６が測定する重量の増加の後、タグ読取部２２０によるタグ情報の読み取りが実行されることなく、開閉検知部２２２が冷蔵室扉２０３、野菜室２０４又は冷凍室２０６の閉扉を検知した場合に、物品１０の入庫と判定してもよい。

そして、物品管理情報更新部２３２は、撮像部２２４が撮像した物品１０の画像を物品管理情報に追加する。これにより、ＩＣタグ２０が付されていない物品１０を、画像によって管理できる。ＩＣタグ２０が付されていない物品１０とは、例えば、ＩＣタグ２０が付されずに販売されている物品１０である。また、ＩＣタグ２０が付されていない物品１０とは、例えば、ＩＣタグ２０が取り外された物品１０及びＩＣタグ２０が付されずに販売されている物品１０を入れたタッパー等の容器である。

物品管理情報更新部２３２は、撮像部２２４が撮像した物品１０の画像に基づいて、画像物品特定部２３６が物品１０の物品名を特定できた場合、物品名を物品管理情報に追加してよい。画像物品特定部２３６は、例えば、複数の物品名と複数の画像とを対応付けた対応付けデータにおける複数の画像に対して、撮像部２２４が撮像した物品１０の画像をもとに類似画像検索を実行する。そして、画像物品特定部２３６は、類似度が最も高い画像の類似度が予め定められた閾値より大きい場合に、当該画像に対応付けられた物品名を取得して、物品管理情報更新部２３２に通知する。物品管理情報更新部２３２は、通知された物品名を物品管理情報に追加してよい。

画像物品特定部２３６は、類似度が最も高い画像の類似度が予め定められた閾値より小さい場合、物品を特定できなかったことを物品管理情報更新部２３２に通知してよい。物品管理情報更新部２３２は、物品を特定できなかったことを通知された場合、物品１０の画像と、物品１０の物品名が不明であることを示す不明情報とを対応付けて物品管理情報に追加してよい。

なお、類似画像検索は、管理サーバ３００が実行してもよい。例えば、画像物品特定部２３６は、撮像部２２４が撮像した物品１０の画像を管理サーバ３００に送信する。管理サーバ３００は、複数の物品名と複数の画像とを対応付けた対応付けデータにおける複数の画像に対して、受信した画像をもとに類似画像検索を実行する。そして、管理サーバ３００は、類似度が最も高い画像の類似度が予め定められた閾値より大きい場合に、当該画像に対応付けられた物品名を取得して、冷蔵庫２００に送信する。また、管理サーバ３００は、類似度が最も高い画像の類似度が予め定められた閾値より小さい場合、物品を特定できなかったことを冷蔵庫２００に通知する。

また、物品管理情報更新部２３２は、例えば、重量測定部２２６が測定する重量が減少した後、撮像部２２４による物品１０の撮像及びタグ読取部２２０によるタグ情報の読み取りが実行された場合、ＩＣタグ２０が付された物品１０の出庫と判定する。物品管理情報更新部２３２は、開閉検知部２２２による冷蔵室扉２０３、野菜室２０４又は冷凍室２０６の開扉検知、重量測定部２２６が測定する重量の減少、撮像部２２４による物品１０の撮像、開閉検知部２２２による冷蔵室扉２０３、野菜室２０４及び冷凍室２０６の閉扉検知、及びタグ読取部２２０によるタグ情報の読み取りが実行された場合に、ＩＣタグ２０が付された物品１０の出庫と判定してもよい。

そして、物品管理情報更新部２３２は、物品管理情報を更新する。例えば、物品管理情報更新部２３２は、タグ読取部２２０が読み取ったタグ情報に対応する物品１０の情報を、物品管理情報から削除する。物品管理情報更新部２３２は、タグ読取部２２０が読み取ったタグ情報に対応する物品１０の情報に、物品１０が出庫されたことを示すデータを追加してもよい。

また、物品管理情報更新部２３２は、例えば、重量測定部２２６が測定する重量が減少した後、撮像部２２４による物品１０の撮像が実行され、かつ、タグ読取部２２０によるタグ情報の読み取りがなかった場合に、物品１０の出庫と判定する。物品管理情報更新部２３２は、開閉検知部２２２による冷蔵室扉２０３、野菜室２０４又は冷凍室２０６の開扉検知、重量測定部２２６が測定する重量の減少、撮像部２２４による物品１０の撮像、開閉検知部２２２による冷蔵室扉２０３、野菜室２０４及び冷凍室２０６の閉扉検知が実行され、かつ、タグ読取部２２０によるタグ情報の読み取りが実行されなかった場合に、物品１０の出庫と判定してもよい。

そして、物品管理情報更新部２３２は、物品管理情報を更新する。物品管理情報更新部２３２は、画像物品特定部２３６による物品特定結果に基づいて、物品管理情報を更新してよい。例えば、画像物品特定部２３６は、物品管理情報に含まれる複数の物品１０の画像に対して、撮像部２２４により撮像された物品１０の画像をもとに、類似画像検索を実行する。そして、画像物品特定部２３６は、物品管理情報に含まれる複数の物品１０の画像のうち、撮像部２２４により撮像された物品１０の画像との類似度が最も高い画像を特定して、物品管理情報更新部２３２に通知する。物品管理情報更新部２３２は、通知された画像に対応する物品１０の情報を、物品管理情報から削除する。これにより、ＩＣタグ２０が付されていない物品１０が庫内から出庫された場合に、出庫されたことを管理できる。なお、類似画像検索は、管理サーバ３００によって実行されてもよい。

物品管理情報送信部２３８は、物品管理情報格納部２３０が格納する物品管理情報を送信する。物品管理情報送信部２３８は、例えば、ＩＣタグ２１４である。物品管理情報送信部２３８は、通信端末４００に対して、物品管理情報を送信してよい。物品管理情報送信部２３８は、通信端末４００と通信する毎に、最新の物品管理情報を通信端末４００に送信してよい。通信端末４００は、ＩＣタグ２１４から受信した物品管理情報を管理サーバ３００に送信してよい。物品管理情報送信部２３８は、３Ｇ、ＬＴＥ、及び４Ｇ等の移動通信システム、ＷｉＦｉ（登録商標）通信、及び有線通信等の通信機能を用いて、管理サーバ３００に物品管理情報を送信してもよい。物品管理情報送信部２３８は、物品管理情報更新部２３２によって物品管理情報が更新される毎に、更新後の物品管理情報を管理サーバ３００に送信してよい。

不明物品出力部２４２は、物品管理情報に含まれる複数の物品１０の画像のうち、不明情報が対応付けられた物品１０の画像を出力する。不明物品出力部２４２は、例えば、通信端末４００が備えるディスプレイに、不明情報が対応付けられた物品１０の画像を表示させるべく、当該物品１０の画像を通信端末４００に送信する。

不明物品出力部２４２は、例えば、冷蔵庫２００に収納されている物品１０の情報を要求する要求データを通信端末４００等から受信したことに応じて、不明情報を含む物品管理情報を送信する。不明物品出力部２４２は、不明情報が対応付けられた物品１０の画像と、不明情報が対応付けられていない物品１０の画像とを識別表示させるべく、通信端末４００等を制御してよい。例えば、不明物品出力部２４２は、不明情報が対応付けられている物品１０の画像を、物品名が不明であることが強調されるように、通信端末４００のディスプレイに表示させてよい。

また、不明物品出力部２４２は、不明情報が対応付けられた物品１０の画像を、管理サーバ３００を介して、通信端末４００等が備えるディスプレイに表示させてもよい。例えば、不明物品出力部２４２は、不明情報が対応付けられた物品１０の画像を管理サーバ３００に送信する。そして、管理サーバ３００は、冷蔵庫２００に収納されている物品１０の情報を要求する要求データを通信端末４００等から受信したことに応じて、不明情報を含む物品管理情報を送信する。このとき、管理サーバ３００は、不明情報が対応付けられた物品１０の画像と、不明情報が対応付けられていない物品１０の画像とを識別表示させるべく、通信端末４００等を制御してよい。

物品名取得部２４４は、不明物品出力部２４２が出力した物品１０の画像に対して入力された物品名を取得する。物品名取得部２４４は、例えば、通信端末４００が有するディスプレイに表示された物品１０の画像に対して、使用者３０によって入力された物品名を、通信端末４００から取得する。例えば、物品１０が、牛肉が入れられたタッパーなどの容器である場合、使用者３０は、容器の画像を見て、物品名「牛肉」を入力する。これにより、ＩＣタグ２０が付されておらず、画像認識によっても特定できない物品１０であっても、物品名を特定して管理することができる。

ここで、不明物品出力部２４２は、不明情報が対応付けられた物品１０の画像と、不明情報に対して物品名を入力することを促す情報とを、通信端末４００等に送信してもよい。例えば、不明物品出力部２４２は、不明情報が対応付けられた物品１０の画像と、不明情報に対して物品名を入力するための入力欄とを、通信端末４００等に送信してよい。これにより、冷蔵庫２００に収納されている複数の物品１０のうち、特定されていない物品１０を、効率的に特定できる。

収納物品登録部２４６は、冷蔵庫２００の庫内に収納されているべき物品１０を登録する。収納物品登録部２４６は、例えば、冷蔵庫２００の庫内に収納されているべき物品１０の情報を通信端末４００等から受信して、登録する。また、収納物品登録部２４６は、冷蔵庫２００が入力部を備える場合には、冷蔵庫２００が備える入力部を介して入力された、冷蔵庫２００の庫内に収納されているべき物品１０の情報を登録してもよい。

警告要否判定部２５０は、冷蔵庫２００の庫内に収納されている物品１０の状態に基づいて、警告の要否を判定する。警告情報出力部２５２は、警告要否判定部２５０によって警告要と判定された場合に、警告情報を出力する。

警告要否判定部２５０は、例えば、収納物品登録部２４６によって登録された物品１０が、冷蔵庫２００の庫内に収納されていない場合に、警告要と判定する。警告情報出力部２５２は、冷蔵庫２００に収納されている物品１０の情報を要求する要求データを受信したことに応じて、登録された物品１０が冷蔵庫２００の庫内に収納されていないことを示す警告情報を通信端末４００に送信してよい。これにより、例えば、使用者３０がスーパーマーケット等で食材を購入する際に通信端末４００を用いて、冷蔵庫２００に収納されている物品１０の情報を閲覧しようとしたときに、冷蔵庫２００に収納されているべき物品１０が冷蔵庫２００に収納されていないことを知らせることができる。警告情報出力部２５２は、収納物品登録部２４６によって登録された複数の物品１０のうち、冷蔵庫２００の庫内に収納されていない物品１０の物品名を警告情報に含めてよい。これにより、警告情報に含めた物品名の物品１０を購入すべきであることを使用者３０に知らせることができる。

収納物品登録部２４６は、冷蔵庫２００の庫内に収納されているべき物品１０の、収納されているべき重量をさらに登録してもよい。そして、警告要否判定部２５０は、収納物品登録部２４６によって登録された物品１０の重量が、登録されている収納されているべき重量よりも少ない場合に、警告要と判定してよい。これにより、収納されているべき物品１０の分量が、必要な分量に満たないような場合に、使用者３０にそのことを通知できる。

警告要否判定部２５０は、物品管理情報格納部２３０に格納された物品管理情報に含まれる賞味期限又は消費期限に基づいて、警告の要否を判定してもよい。例えば、警告要否判定部２５０は、物品管理情報に含まれる賞味期限又は消費期限が経過している物品１０が収納されている場合に、警告要と判定する。また、警告要否判定部２５０は、物品管理情報に含まれる賞味期限又は消費期限までの日数が、予め定められた日数よりも少なくなっている場合に、警告要と判定してよい。

警告情報出力部２５２は、冷蔵庫２００に収納されている物品１０の情報を要求する要求データを通信端末４００等から受信したことに応じて、賞味期限若しくは消費期限が経過している物品１０又は賞味期限若しくは消費期限までの日数が予め定められた日数よりも少なくなっている物品１０の情報を含む警告情報を、通信端末４００に送信してよい。これにより、例えば、使用者３０が買い物中に通信端末４００を用いて、冷蔵庫２００に収納されている物品１０の情報を閲覧しようとしたときに、冷蔵庫２００に収納されているべき物品１０の賞味期限若しくは消費期限が経過していること又は賞味期限若しくは消費期限までの日数が予め定められた日数よりも少なくなっていることを知らせることができる。なお、警告要否判定部２５０は、収納物品登録部２４６によって登録された複数の物品１０について、賞味期限若しくは消費期限が経過している又は賞味期限若しくは消費期限までの日数が予め定められた日数よりも少なくなっている場合に、警告要と判定してもよい。

図４は、テーブル形式の物品管理情報２６０の一例を概略的に示す。物品管理情報２６０は、物品名欄２６２、期限欄２６８、測定重量欄２７０、画像欄２７２、タグＩＤ欄２７４、及び収納日欄２７６を含む。物品名欄２６２は、カテゴリ欄２６４及び製品名欄２６６を含む。

カテゴリ欄２６４及び製品名欄２６６には、ＩＣタグ物品特定部２３４若しくは画像物品特定部２３６によって特定された物品名又は物品名取得部２４４が取得した物品名が登録される。期限欄２６８には、タグ読取部２２０によって読み取られたタグ情報に含まれる賞味期限又は消費期限が登録される。測定重量欄２７０には、重量測定部２２６によって測定された重量が登録される。画像欄２７２には、撮像部２２４によって撮像された物品１０の画像が登録される。画像欄２７２には、物品１０の画像へのリンク情報が登録されてよい。タグＩＤ欄２７４には、タグ読取部２２０によって読み取られたタグ情報に含まれるタグＩＤが登録される。収納日欄２７６には、物品１０が冷蔵庫２００の庫内に収納された日付が登録される。

警告情報出力部２５２は、例えば、「○○牛乳」の賞味期限又は消費期限が経過していた場合に、「○○牛乳」の賞味期限又は消費期限が経過していることを示す警告情報を通信端末４００等に送信する。これにより、牛乳を購入する必要があることを、使用者３０等に知らせることができる。

不明物品出力部２４２は、不明情報が対応付けられた上から４番目の物品１０について、対応付けられた画像「ｄｄｄ．ｊｐｇ」を通信端末４００等に送信する。不明物品出力部２４２は「ｄｄｄ．ｊｐｇ」とともに、物品名を入力するための入力欄を通信端末４００等に送信してよい。物品名取得部２４４は、「ｄｄｄ．ｊｐｇ」に対して入力された物品名を取得して、物品管理情報更新部２３２に通知してよい。物品管理情報更新部２３２は、物品名取得部２４４から通知された物品名を「ｄｄｄ．ｊｐｇ」に対応する物品名欄２６２の不明情報と置換してよい。これにより、ＩＣタグ物品特定部２３４によっても、画像物品特定部２３６によっても特定できなかった物品名を登録することができる。

図５は、収納物品登録部２４６によって登録された収納物品情報２８０の一例を概略的に示す。収納物品情報２８０は、物品名欄２８２、登録重量欄２８８、及び登録期限欄２９０を含む。物品名欄２８２は、カテゴリ欄２８４及び製品名欄２８６を含む。

警告要否判定部２５０は、収納物品情報２８０に登録されている物品１０が、冷蔵庫２００に収納されていない場合に、警告要と判定してよい。また、警告要否判定部２５０は、収納物品情報２８０に登録されている物品１０の重量が、登録重量欄２８８に登録されている重量よりも少ない場合に、警告要と判定してよい。

警告要否判定部２５０は、カテゴリ名が登録されており、かつ、製品名が登録されていない場合には、同一カテゴリの物品１０の重量の合計が登録重量欄２８８に登録された重量より少ないか否かで、警告の要否を判定してもよい。例えば、物品管理情報に、カテゴリ「牛乳」、製品名「○○牛乳」の物品１０と、カテゴリ「牛乳」、製品名「□□牛乳」が含まれる場合、これらの物品１０に対応付けられた測定重量の合計が、登録重量欄２８８に登録された重量より少ない場合に、警告要否判定部２５０は警告要と判定する。また、警告要否判定部２５０は、同一製品名の物品１０が物品管理情報に登録されている場合に、同一製品名の物品１０に対応付けられた測定重量の合計が、登録重量欄２８８に登録された重量より少ない場合に、警告要と判定してよい。

また、警告要否判定部２５０は、カテゴリが「牛乳」の物品１０に対応付けられた賞味期限又は消費期限までの日数が、登録期限欄２９０に登録された日数よりも少ない場合に、警告要と判定する。図５に示す収納物品情報２８０によれば、警告要否判定部２５０は、カテゴリが「牛乳」の物品１０に対応付けられた賞味期限又は消費期限までの日数が２日よりも少ない場合に、警告要と判定する。

図６は、冷蔵庫２００による処理の流れの一例を概略的に示す。図６に示す処理は、タグ読取部２２０がタグ情報の読み取りを待ち受けている状態を開始状態として説明する。図６に示す各処理は、冷蔵庫２００が有する制御部が主体となって実行されてよい。

ステップ６０２（ステップをＳと省略して表記する場合がある。）では、タグ読取部２２０がＩＣタグ２０に格納されたタグ情報を読み取ったか否かを判定する。タグ読取部２２０がタグ情報を読み取ったと判定された場合、Ｓ６０４に進む。

Ｓ６０４では、重量測定部２２６が測定する重量に変化があったか否かを判定する。変化があったと判定された場合、Ｓ６０６に進み、変化がないと判定された場合、Ｓ６４０に進む。冷蔵庫２００の制御部は、Ｓ６０２でタグ情報が読み取られてから、予め定められた時間が経過するまでに、重量測定部２２６が測定する重量に変化がなかった場合に、重量変化がないと判定してよい。また、冷蔵庫２００の制御部は、Ｓ６０２でタグ情報を読み取り、開閉検知部２２２が冷蔵室扉２０３、野菜室２０４、又は冷凍室２０６の開扉を検知した後、開閉検知部２２２が冷蔵室扉２０３、野菜室２０４、又は冷凍室２０６の閉扉を検知するまでの間に、重量測定部２２６が測定する重量に変化がなかった場合に、重量変化がないと判定してよい。

Ｓ６０６では、重量測定部２２６が測定する重量の変化が重量増加であるか、重量減少であるかを判定する。重量増加であると判定された場合、Ｓ６０８に進み、重量減少であると判定された場合、Ｓ６１４に進む。

Ｓ６０８では、物品管理情報更新部２３２が、撮像部２２４によって撮像された物品１０の画像を取得する。Ｓ６１０では、物品管理情報更新部２３２が、Ｓ６０２で読み取ったタグ情報に基づいてＩＣタグ物品特定部２３４によって特定された物品名を取得する。Ｓ６１２では、物品管理情報更新部２３２が、Ｓ６０８で取得した撮像画像と、Ｓ６１０で特定された物品名とを物品管理情報格納部２３０に格納された物品管理情報に登録する。これにより、ＩＣタグ２０が付された物品の入庫を管理できる。

Ｓ６１４では、エラー処理を実行する。冷蔵庫２００は、例えば、エラーが発生したことを通信端末４００等に通知する。これにより、例えば、タグ情報を読み取り、冷蔵室扉２０３、野菜室２０４、又は冷凍室２０６の開扉を検知したにもかかわらず、物品１０の入庫がされずに、庫内の物品１０が出庫されてしまった場合等に、エラーを通知することができる。

Ｓ６１６では、Ｓ６０２でタグ情報が読み取られたと判定されていない状態で、重量測定部２２６が測定する重量に変化があったか否かを判定する。Ｓ６１６で、重量変化があったと判定された場合、Ｓ６１８に進み、重量変化がないと判定された場合、Ｓ６４０に進む。冷蔵庫２００の制御部は、例えば、開閉検知部２２２が冷蔵室扉２０３、野菜室２０４、又は冷凍室２０６の開扉を検知した後、開閉検知部２２２が冷蔵室扉２０３、野菜室２０４、又は冷凍室２０６の閉扉を検知するまでの間に、重量測定部２２６が測定する重量に変化がなかった場合に、重量変化がないと判定する。

Ｓ６１８では、重量測定部２２６が測定する重量の変化が重量増加であるか、重量減少であるかを判定する。重量増加であると判定された場合、Ｓ６２０に進み、重量減少であると判定された場合、Ｓ６２８に進む。

Ｓ６２０では、物品管理情報更新部２３２が、撮像部２２４によって撮像された物品１０の画像を取得する。Ｓ６２２では、Ｓ６２０で取得した画像に基づいて、画像物品特定部２３６が物品を特定できたか否かを判定する。物品名が特定できたと判定された場合、Ｓ６２４に進み、特定できなかったと判定された場合、Ｓ６２６に進む。

Ｓ６２４では、物品管理情報更新部２３２が、物品管理情報格納部２３０に格納された物品管理情報に、Ｓ６２０で取得した画像と、特定された物品名とを対応付けて登録する。Ｓ６２６では、物品管理情報更新部２３２が、物品管理情報格納部２３０に格納された物品管理情報に、Ｓ６２０で取得した画像と、不明情報とを対応付けて登録する。

Ｓ６２８では、撮像部２２４によって物品１０の画像が撮像されたか否かを判定する。Ｓ６２８で物品１０の画像が撮像されたと判定された場合、Ｓ６３０に進み、撮像されていないと判定された場合、Ｓ６４０に進む。

Ｓ６３０では、タグ読取部２２０がＩＣタグ２０からタグ情報を読み取ったか否かを判定する。Ｓ６３０でタグ情報を読み取ったと判定された場合、Ｓ６３２に進み、読み取っていないと判定された場合、Ｓ６３６に進む。

Ｓ６３２では、ＩＣタグ物品特定部２３４が、タグ情報に基づいて物品名を特定する。Ｓ６３４では、物品管理情報更新部２３２が、物品管理情報を更新する。物品管理情報更新部２３２は、例えば、Ｓ６３２で特定した物品名に対応する物品１０の情報を、物品管理情報から削除する。

Ｓ６３６では、物品管理情報更新部２３２が、撮像部２２４によって撮像された画像を取得する。Ｓ６３８では、画像物品特定部２３６が、Ｓ６３６で取得した画像に基づいて、物品管理情報に含まれる複数の物品名のうちの一の物品名を特定する。画像物品特定部２３６は、Ｓ６３６で取得した画像に最も類似する画像が対応付けられた物品１０を特定する。Ｓ６３４では、物品管理情報更新部２３２が、物品管理情報を更新する。物品管理情報更新部２３２は、例えば、Ｓ６３８で特定した物品名に対応する物品１０の情報を、物品管理情報から削除する。

Ｓ６４０では、冷蔵庫２００による庫内管理が完了したか否かを判定する。完了していないと判定された場合、Ｓ６０２に戻り、完了したと判定された場合、処理を終了する。

図７は、管理サーバ３００の機能構成の一例を概略的に示す。管理サーバ３００は、物品管理情報受信部３０２、物品管理情報格納部３０４、不明物品出力部３１２、物品名取得部３１４、及び収納物品登録部３１６、警告要否判定部３２０、及び警告情報出力部３２２を備える。なお、管理サーバ３００がこれらのすべての構成を備えることは必須とは限らない。

物品管理情報受信部３０２は、冷蔵庫２００から物品管理情報を受信する。物品管理情報受信部３０２は、物品管理情報送信部２３８によって送信された物品管理情報を受信してよい。物品管理情報格納部３０４は、物品管理情報受信部３０２が受信した物品管理情報を格納する。

不明物品出力部３１２は、不明物品出力部２４２と同様の処理を実行してよい。例えば、不明物品出力部３１２は、冷蔵庫２００に収納されている物品１０の情報を要求する要求データを通信端末４００等から受信したことに応じて、不明情報を含む物品管理情報を送信する。不明物品出力部３１２は、不明情報が対応付けられた物品１０の画像と、不明情報が対応付けられていない物品１０の画像とを識別表示させるべく、通信端末４００等を制御してよい。

物品名取得部３１４は、物品名取得部２４４と同様の処理を実行してよい。例えば、物品名取得部３１４は、不明物品出力部３１２が出力した物品１０の画像に対して入力された物品名を取得する。物品名取得部３１４は、例えば、通信端末４００が有するディスプレイに表示された物品１０の画像に対して、使用者３０によって入力された物品名を、通信端末４００から取得する。不明物品出力部３１２は、不明情報が対応付けられた物品１０の画像と、不明情報に対して物品名を入力することを促す情報とを、通信端末４００等に送信してもよい。例えば、不明物品出力部３１２は、不明情報が対応付けられた物品１０の画像と、不明情報に対して物品名を入力するための入力欄とを、通信端末４００等に送信してよい。

収納物品登録部３１６は、収納物品登録部２４６と同様の処理を実行してよい。例えば、収納物品登録部３１６は、冷蔵庫２００の庫内に収納されているべき物品１０を登録する。収納物品登録部３１６は、例えば、冷蔵庫２００の庫内に収納されているべき物品１０の情報を通信端末４００等から受信して、登録する。

警告要否判定部３２０は、警告要否判定部２５０と同様の処理を実行してよい。例えば、警告要否判定部３２０は、冷蔵庫２００の庫内に収納されている物品１０の状態に基づいて、警告の要否を判定する。警告情報出力部３２２は、警告情報出力部２５２と同様の処理を実行してよい。例えば、警告情報出力部３２２は、警告要否判定部３２０によって警告要と判定された場合に、警告情報を出力する。

警告要否判定部３２０は、例えば、収納物品登録部３１６によって登録された物品１０が、冷蔵庫２００の庫内に収納されていない場合に、警告要と判定する。警告情報出力部３２２は、冷蔵庫２００に収納されている物品１０の情報を要求する要求データを受信したことに応じて、登録された物品１０が冷蔵庫２００の庫内に収納されていないことを示す警告情報を通信端末４００に送信してよい。警告情報出力部３２２は、収納物品登録部３１６によって登録された複数の物品１０のうち、冷蔵庫２００の庫内に収納されていない物品１０の物品名を警告情報に含めてよい。

収納物品登録部３１６は、冷蔵庫２００の庫内に収納されているべき物品１０の、収納されているべき重量をさらに登録してもよい。そして、警告要否判定部３２０は、収納物品登録部３１６によって登録された物品１０の重量が、登録されている収納されているべき重量よりも少ない場合に、警告要と判定してよい。

警告要否判定部３２０は、物品管理情報格納部３０４に格納された物品管理情報に含まれる賞味期限又は消費期限に基づいて、警告の要否を判定してもよい。例えば、警告要否判定部３２０は、物品管理情報に含まれる賞味期限又は消費期限が経過している物品１０が収納されている場合に、警告要と判定する。また、警告要否判定部３２０は、物品管理情報に含まれる賞味期限又は消費期限までの日数が、予め定められた日数よりも少なくなっている場合に、警告要と判定してよい。

警告情報出力部３２２は、冷蔵庫２００に収納されている物品１０の情報を要求する要求データを通信端末４００等から受信したことに応じて、賞味期限若しくは消費期限が経過している物品１０、又は賞味期限若しくは消費期限までの日数が予め定められた日数よりも少なくなっている物品１０の情報を含む警告情報を、通信端末４００に送信してよい。

以上の説明において、冷蔵庫２００の各部は、ハードウエアにより実現されてもよく、ソフトウエアにより実現されてもよい。また、ハードウエアとソフトウエアとの組み合わせにより実現されてもよい。また、プログラムが実行されることにより、コンピュータが、冷蔵庫２００として機能してもよい。プログラムは、コンピュータ読み取り可能な媒体又はネットワークに接続された記憶装置から、冷蔵庫２００の少なくとも一部を構成するコンピュータにインストールされてよい。

コンピュータにインストールされ、コンピュータを本実施形態に係る冷蔵庫２００として機能させるプログラムは、ＣＰＵ等に働きかけて、コンピュータを、冷蔵庫２００の各部としてそれぞれ機能させる。これらのプログラムに記述された情報処理は、コンピュータに読込まれることにより、ソフトウエアと冷蔵庫２００のハードウエア資源とが協働した具体的手段として機能する。

また、管理サーバ３００の各部は、ハードウエアにより実現されてもよく、ソフトウエアにより実現されてもよい。また、ハードウエアとソフトウエアとの組み合わせにより実現されてもよい。また、プログラムが実行されることにより、コンピュータが、管理サーバ３００として機能してもよい。プログラムは、コンピュータ読み取り可能な媒体又はネットワークに接続された記憶装置から、管理サーバ３００の少なくとも一部を構成するコンピュータにインストールされてよい。

コンピュータにインストールされ、コンピュータを本実施形態に係る管理サーバ３００として機能させるプログラムは、ＣＰＵ等に働きかけて、コンピュータを、管理サーバ３００の各部としてそれぞれ機能させる。これらのプログラムに記述された情報処理は、コンピュータに読込まれることにより、ソフトウエアと管理サーバ３００のハードウエア資源とが協働した具体的手段として機能する。

上記実施形態では、管理システム１００が冷蔵庫２００及び管理サーバ３００を含む場合を例に挙げて説明したが、これに限らない。管理システム１００は、管理サーバ３００の機能を有する冷蔵庫２００であってもよい。

以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。

特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階などの各処理の実行順序は、特段「より前に」、「先立って」などと明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」などを用いて説明したとしても、この順で実施することが必須であることを意味するものではない。

１０ 物品、２０ ＩＣタグ、３０ 使用者、３２ 使用者、５０ ネットワーク、１００ 管理システム、２００ 冷蔵庫、２０２ 冷蔵室、２０３ 冷蔵室扉、２０４ 野菜室、２０６ 冷凍室、２１２ ＩＣタグリーダ、２１４ ＩＣタグ、２１６ カメラ、２１８ 重量センサ、２２０ タグ読取部、２２２ 開閉検知部、２２４ 撮像部、２２６ 重量測定部、２３０ 物品管理情報格納部、２３２ 物品管理情報更新部、２３４ ＩＣタグ物品特定部、２３６ 画像物品特定部、２３８ 物品管理情報送信部、２４２ 不明物品出力部、２４４ 物品名取得部、２４６ 収納物品登録部、２５０ 警告要否判定部、２５２ 警告情報出力部、２６０ 物品管理情報、２６２ 物品名欄、２６４ カテゴリ欄、２６６ 製品名欄、２６８ 期限欄、２７０ 測定重量欄、２７２ 画像欄、２７４ タグＩＤ欄、２７６ 収納日欄、２８０ 収納物品情報、２８２ 物品名欄、２８４ カテゴリ欄、２８６ 製品名欄、２８８ 登録重量欄、２９０ 登録期限欄、３００ 管理サーバ、３０２ 物品管理情報受信部、３０４ 物品管理情報格納部、３１２ 不明物品出力部、３１４ 物品名取得部、３１６ 収納物品登録部、３２０ 警告要否判定部、３２２ 警告情報出力部、４００ 通信端末、４１０ 通信端末

Claims (8)

1. 庫内の物品を管理する管理システムであって、
   前記物品に付されたＩＣタグに格納されたタグ情報を読み取るタグ読取部と、
   前記庫内に入庫される物品及び前記庫内から出庫される物品を撮像する撮像部と、
   前記庫内に収納されている物品の重量を測定する重量測定部と、
   前記庫内に収納されている物品を管理する物品管理情報を格納する物品管理情報格納部と、
   前記物品管理情報を更新する物品管理情報更新部と
   を備え、
   前記物品管理情報更新部は、
   前記タグ読取部による前記タグ情報の読み取り及び前記撮像部による前記物品の撮像の後、前記重量測定部が測定する重量が増加した場合に、物品の入庫と判定して、前記タグ情報と前記物品の画像とを対応付けて前記物品管理情報に追加することにより前記物品管理情報を更新し、
   前記撮像部による前記物品の撮像の後、前記重量測定部が測定する重量が増加し、かつ、前記タグ読取部による前記タグ情報の読み取りがなかった場合、物品の入庫と判定して、前記物品の画像を前記物品管理情報に追加することにより前記物品管理情報を更新し、
   前記重量測定部が測定する重量が減少した後、前記タグ読取部による前記タグ情報の読み取り及び前記撮像部による前記物品の撮像が実行された場合、前記タグ情報に対応する物品の出庫と判定して、前記物品管理情報を更新し、
   前記重量測定部が測定する重量が減少した後、前記撮像部による前記物品の撮像が実行され、かつ、前記タグ読取部による前記タグ情報の読み取りがなかった場合、前記撮像部が撮像した前記物品の画像に対応する物品の出庫と判定して、前記物品管理情報を更新する、
   管理システム。
2. 前記タグ情報に基づいて、前記ＩＣタグが付された物品の物品名を特定するＩＣタグ物品特定部と、
   前記撮像部により撮像された画像に基づいて、前記物品の物品名を特定する画像物品特定部と、
   をさらに備え、
   前記物品管理情報更新部は、
   前記タグ読取部による前記タグ情報の読み取り及び前記撮像部による前記物品の撮像の後、前記重量測定部が測定する重量が増加した場合に、前記タグ情報に基づいて特定された物品名と前記物品の画像とを対応付けて前記物品管理情報に追加し、
   前記撮像部による前記物品の撮像の後、前記重量測定部が測定する重量が増加し、かつ、前記タグ読取部による前記タグ情報の読み取りがなかった場合であって、前記物品の画像に基づいて前記物品の物品名が特定できた場合、前記物品の画像と前記物品名とを対応付けて前記物品管理情報に追加し、前記物品の画像に基づいて前記物品の物品名が特定できなかった場合、前記物品の画像と、前記物品の物品名が不明であることを示す不明情報とを対応付けて前記物品管理情報に追加する、請求項１に記載の管理システム。
3. 前記不明情報が対応付けられた前記物品の画像を出力する不明物品出力部と、
   前記不明物品出力部が出力した前記物品の画像に対して入力された物品名を取得する物品名取得部と
   をさらに備え、
   前記物品管理情報更新部は、前記不明情報と前記物品名取得部が取得した物品名とを置換することにより、前記物品管理情報を更新する、請求項２に記載の管理システム。
4. 前記庫内に収納されている前記物品の状態に基づいて、警告の要否を判定する警告要否判定部と、
   前記警告要否判定部によって前記警告要と判定された場合に、警告情報を出力する警告情報出力部と
   をさらに備える、請求項１から３のいずれか一項に記載の管理システム。
5. 前記庫内に収納されているべき物品を登録する収納物品登録部
   をさらに備え、
   前記警告要否判定部は、前記収納物品登録部によって登録された物品が、前記庫内に収納されていない場合に、警告要と判定する、請求項４に記載の管理システム。
6. 前記収納物品登録部は、前記庫内に収納されているべき物品の、収納されているべき重量を登録し、
   前記物品管理情報更新部は、
   前記タグ読取部による前記タグ情報の読み取り及び前記撮像部による前記物品の撮像の後、前記重量測定部が測定する重量が増加した場合に、前記タグ情報及び前記物品の画像と、前記重量測定部によって測定された前記物品の重量とを対応付けて前記物品管理情報に追加し、
   前記撮像部による前記物品の撮像の後、前記重量測定部が測定する重量が増加し、かつ、前記タグ読取部による前記タグ情報の読み取りがなかった場合に、前記タグ情報及び前記物品の画像と、前記重量測定部によって測定された前記物品の重量とを対応付けて前記物品管理情報に追加し、
   前記警告要否判定部は、前記収納物品登録部によって登録された物品の重量が、登録された収納されているべき重量よりも少ない場合に、警告要と判定する、請求項５に記載の管理システム。
7. 前記物品は食品であり、
   前記物品管理情報更新部は、前記タグ読取部による前記タグ情報の読み取り及び前記撮像部による前記物品の撮像の後、前記重量測定部が測定する重量が増加した場合に、前記タグ情報に含まれる前記物品の物品名及び前記物品の賞味期限と、前記物品の画像とを対応付けて前記物品管理情報に追加し、
   前記警告要否判定部は、前記物品管理情報に含まれる前記賞味期限に基づいて、警告の要否を判定する、請求項４から６のいずれか一項に記載の管理システム。
8. コンピュータを、請求項１から７のいずれか一項に記載の管理システムとして機能させるためのプログラム。

Images