JP2024058083A - 撮像システム、撮像装置、及び冷蔵庫 - Google Patents

Abstract

【課題】カメラにより撮影された画像から冷蔵庫の庫内状況を適切に撮像した撮影画像を選定する。【解決手段】撮像システム７は、上面に開口が形成された引出２４Ａを有する冷凍室２４を備える冷蔵庫２を撮影し、冷蔵庫２の天面２０Ａに配置された挟角カメラ３０２と、引出２４Ａの上端部に配置され、引出２４Ａの引出量に応じて挟角カメラ３０２による撮影状態が変化する被撮影体ＰＳ２と、引出２４Ａの所定の引出量における被撮影体ＰＳ２の挟角カメラ３０２による撮影状態である第２撮影状態ＣＤ２を記憶する状態記憶部３６４と、第２撮影状態ＣＤ２に基づいて、挟角カメラ３０２により撮影された撮像画像ＰＢ２から引出２４Ａが引き出された状態である場合の撮影画像である第２撮影画像Ｐ２を選定する生成部３５６と、を備える。【選択図】図８

Description

本開示は、撮像システム、撮像装置、及び冷蔵庫に関する。

特許文献１は、冷蔵庫の上部にカメラを設け、冷蔵庫の開口部を通過する物体を検出した際に撮影を実行し、撮影結果に基づいて冷蔵庫に収容される食品を管理する技術を開示する。

特開２０１９－０７０４７６号公報

本開示は、カメラにより撮影された画像から冷蔵庫の庫内状況を適切に撮像した撮影画像を選定する撮像システム、撮像装置、及び冷蔵庫を提供する。

本開示における撮像システムは、上面に開口が形成された引出を有する貯蔵室を備える冷蔵庫を撮影し、前記冷蔵庫の上面に配置されたカメラと、前記引出の上端部に配置され、前記引出の引出量に応じて前記カメラによる撮影状態が変化する被撮影体と、前記引出の所定の引出量における前記被撮影体の前記カメラによる撮影状態を記憶する状態記憶部と、前記状態記憶部が記憶した前記被撮影体の前記カメラによる撮影状態に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する選定部と、を備える。

また、本開示における撮像装置は、上面に開口が形成された引出を有する貯蔵室を備える冷蔵庫を撮影し、前記冷蔵庫の上面に配置されたカメラと、前記引出の所定の引出量における被撮影体の前記カメラによる撮影状態を記憶する状態記憶部と、前記状態記憶部が記憶した前記被撮影体の前記カメラによる撮影状態に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する選定部と、を備え、前記被撮影体は、前記引出の上端部に配置され、前記引出の引出量に応じて前記カメラによる撮影状態が変化する。

また、本開示における冷蔵庫は、上面に開口が形成された引出を有する貯蔵室を備える冷蔵庫を撮影し、前記冷蔵庫の上面に配置されたカメラと、前記引出の上端に配置され、前記引出の引出量に応じて前記カメラによる撮影状態が変化する被撮影体と、前記引出の所定の引出量における前記被撮影体の前記カメラによる撮影状態を記憶する状態記憶部と、前記状態記憶部が記憶した前記被撮影体の前記カメラによる撮影状態に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する選定部と、を備える。

本開示における撮像システム、撮像装置、及び冷蔵庫は、状態記憶部が記憶した被撮影体のカメラによる撮影状態に基づいて、カメラにより撮影された画像から引出が引き出された状態である場合の撮影画像を選定できる。したがって、カメラにより撮影された画像から貯蔵室の引出の収納状況を適切に撮像した撮影画像を選定できる。

実施の形態１における物品管理システムの構成を示す図 実施の形態１における冷蔵庫の斜視図 実施の形態１における撮影装置を右方からみた側面図 実施の形態１における主箱体の前端縁に当接している規制部材を左前方から見た斜視図 実施の形態１における冷蔵庫及び撮影装置を前方から見た正面図 実施の形態１における冷蔵庫及び撮影装置を右方から見た側面図 実施の形態１における冷蔵庫に取り付けられた撮影装置を上方から見た平面図 実施の形態１における撮影装置の構成を示すブロック図 実施の形態１における被撮影体の第１実施例の構成を示す図 実施の形態１における被撮影体の第２実施例の構成を示す図 実施の形態１における被撮影体の第２実施例の構成を示す図 実施の形態１における被撮影体の撮影対象画像の第１実施例を示す図 実施の形態１における被撮影体の撮影対象画像の第２実施例を示す図 実施の形態１における端末装置及び物品管理サーバの構成を示すブロック図 実施の形態１における撮影装置の動作を示すフローチャート 実施の形態１における撮影装置及び物品管理サーバの動作を示すフローチャート 実施の形態１における端末装置及び物品管理サーバの動作を示すフローチャート 実施の形態２における物品管理システムの構成を示す図 実施の形態２における冷蔵庫の構成を示すブロック図 撮像装置の動作を示すフローチャート

（本開示の基礎となった知見等）
発明者らが本開示に想到するに至った当時には、冷蔵庫の開口部を通過する物体を検出した際に撮影を実行し、撮影結果に基づいて冷蔵庫に収容される食品を管理するという技術があった。
冷蔵庫の庫内状況を適切に撮像した撮影画像を選定するという課題を発明者らは発見し、その課題を解決するために、本開示の主題を構成するに至った。
そこで、本開示は、カメラにより撮影された画像から冷蔵庫の庫内状況を適切に撮像した撮影画像を選定する撮像システム、撮像装置、及び冷蔵庫を提供する。

以下、図面を参照しながら実施の形態を詳細に説明する。但し、必要以上に詳細な説明を省略する場合がある。例えば、既によく知られた事項の詳細説明、または、実質的に同一の構成に対する重複説明を省略する場合がある。
なお、添付図面および以下の説明は、当業者が本開示を充分に理解するために提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することを意図していない。

（実施の形態１）
［１－１．構成］
［１－１－１．物品管理システムの構成］
図１は、実施の形態１における物品管理システム１の構成を示す図である。
物品管理システム１は、冷蔵庫２が収容する物品を管理するシステムである。本実施の形態の物品管理システム１は、物品の管理の一例として、冷蔵庫２が収容する物品が写る画像を管理する。

本実施の形態において、冷蔵庫２に収容される物品は、食品や、食品を収容する容器などを含む。物品には、所定のマーカーが付されていてもよい。

物品管理システム１は、冷蔵庫２を備える。
冷蔵庫２は、前面が開口した主箱体２０を備える。主箱体２０には、冷蔵室２１、製氷室２２、新鮮凍結室２３、冷凍室２４、及び野菜室２５が形成される。これらの収容室は、冷気で冷却される。冷蔵室２１の前面の開口２０１には、回転式のドア２１Ａが設置される。ドア２１Ａは、回転式の右ドア２１Ｂと回転式の左ドア２１Ｃとを含む。製氷室２２、新鮮凍結室２３、冷凍室２４、及び野菜室２５の各々には、物品を収容可能な引出２２Ａ、引出２３Ａ、引出２４Ａ、引出２５Ａがそれぞれ設置される。引出２２Ａ～２５Ａの各々は、設置状態において上面が開口する。以下、引出２２Ａ、引出２３Ａ、引出２４Ａ、及び引出２５Ａを区別せずに総称する場合には、「２６Ａ」の符号を付して、「引出２６Ａ」と記載する。また、製氷室２２、新鮮凍結室２３、冷凍室２４、及び野菜室２５の各々を区別せずに総称する場合には、「２６」の符号を付して、貯蔵室２６と記載する。
製氷室２２、新鮮凍結室２３、冷凍室２４、及び野菜室２５の各々は、本開示の「貯蔵室」の一例に対応する。
実施の形態１では、本開示の「貯蔵室」が冷凍室２４である場合について説明する。

物品管理システム１は、撮像装置３を備える。撮像装置３は、冷蔵庫２の主箱体２０の天面２０Ａに設けられる。なお、主箱体２０の天面２０Ａは、金属で構成される。撮像装置３は、冷蔵庫２を撮影する。
天面２０Ａは、本開示の「上面」の一例に対応する。

物品管理システム１は、端末装置４を備える。端末装置４は、スマートフォンなどの携帯型のコンピュータである。端末装置４は、冷蔵庫２が収容する物品の管理に係わるアプリケーションプログラムがインストールされており、このアプリケーションプログラムの機能によって物品管理サーバ５と通信する。
以下の説明では、このアプリケーションプログラムを、「物品管理アプリ」と記載し、「４１１」の符号を付す。

図１では、在宅するユーザＰを実線で示し、自宅Ｈから外出したユーザＰを点線で示す。端末装置４は、在宅するユーザＰに使用される場合には、通信装置６を介して、或いは通信装置６を介さずに、物品管理サーバ５と通信する。また、端末装置４は、自宅Ｈから外出したユーザＰに使用され、且つ、通信装置６と通信接続を確立できない場合に、通信装置６を介すことなく物品管理サーバ５と通信する。

通信装置６は、公衆回線網などで構成されたネットワークＮＷに接続し、ネットワークＮＷを介して物品管理サーバ５と通信する。通信装置６は、冷蔵庫２、撮像装置３、及び端末装置４をネットワークＮＷに接続するためのインターフェイス装置として機能する。通信装置６は、自宅Ｈにローカルネットワークを構築する。

物品管理システム１は、物品管理サーバ５を備える。物品管理サーバ５は、冷蔵庫２が収容する物品を管理する装置である。物品管理サーバ５は、物品の管理として、物品が写る画像を保管する。物品管理サーバ５は、ネットワークＮＷに接続する。なお、各図では、物品管理サーバ５を、１つのブロックによって表現するが、これは必ずしも物品管理サーバ５が単一の装置により構成されることを意味していない。

［１－１－２．冷蔵庫の構成］
図２は、設置状態における冷蔵庫２の斜視図である。
図２では、Ｘ軸、Ｙ軸、及びＺ軸を図示している。Ｘ軸、Ｙ軸、及びＺ軸は互いに直交する。Ｚ軸は、上下方向を示し、冷蔵庫２の高さ方向に相当する。Ｘ軸及びＹ軸は、水平方向と平行である。Ｘ軸は左右方向を示す。左右方向は、冷蔵庫２の幅方向に相当する。Ｙ軸は前後方向を示す。Ｘ軸の正方向は右方向を示す。Ｙ軸の正方向は前方向を示す。Ｚ軸の正方向は上方向を示す。

冷蔵庫２は、主箱体２０、ドア２１Ａ、及び引出２６Ａを備える。
主箱体２０は、冷蔵庫２の本体を形成する箱状部材である。主箱体２０は、前面に開口する外箱２０２と、外箱２０２の内部に収められ、前面に開口する内箱２０３と、外箱２０２と内箱２０３との間の空間に充填された断熱材とを備える。外箱２０２は、例えば、鉄などの金属やＡＢＳなどの硬質樹脂等で形成される。外箱２０２の上面、すなわち主箱２０の天面２０Ａは、金属で形成される。内箱２０３は、例えばＡＢＳなどの硬質樹脂で形成される。断熱材は、例えば硬質ウレタンフォームが採用される。なお、断熱材は、これに限らず、断熱性を有し、外箱２０２と内箱２０３との間の空間に充填可能な材料であればよい。

内箱２０３の内部空間は、仕切り部材によって複数の空間に仕切られる。本実施形態では、内箱２０３の内部空間は、５つの空間に仕切られ、５つの空間が、それぞれ、冷蔵室２１、製氷室２２、新鮮凍結室２３、冷凍室２４、及び野菜室２５として機能する。

右ドア２１Ｂは、右ドアヒンジ部材２０４によって、回転可能に軸支される。右ドアヒンジ部材２０４は、主箱体２０の天面２０Ａに設置されるヒンジ部材である。左ドア２１Ｃは、左ドアヒンジ部材２０５によって、回転可能に軸支される。左ドアヒンジ部材２０５は、主箱体２０の天面２０Ａに設置されたヒンジ部材である。

右ドアヒンジ部材２０４には、第２無線通信モジュール２０６が設置される。第２無線通信モジュール２０６は、冷蔵庫２を制御する制御データを外部装置から受信したり、外部装置に所定のデータを送信したりするモジュールである。

［１－１－３．撮影装置の構成］
図３－図７を参照して撮像装置３について説明する。
図３－図７では、図２に示すＸ軸、Ｙ軸、及びＺ軸と同じＸ軸、Ｙ軸、及びＺ軸を図示する。Ｘ軸方向は、撮像装置３の幅方向、及び撮像装置３の左右方向に対応する。Ｙ軸方向は、撮像装置３の前後方向に対応する。Ｚ軸方向は、撮像装置３の上下方向に対応する。

図３は、冷蔵庫２に取り付けられた撮像装置３を右方から見た側面図である。図４は、主箱体２０の前端縁２０Ｂに当接している規制部材３４を左前方から見た斜視図である。

図３及び図４で示すように、撮像装置３は、主箱体２０の天面２０Ａに設置される本体３０と、本体３０から前方に延在する撮影部材３１と、を備える。撮影部材３１は、本体３０の前部上方に設けられる。

本体３０は、前面において、撮像装置３の電源をオンオフするための電源ボタン３２を備える。電源ボタン３２には、所定の情報を通知する第１ＬＥＤ（Light emitting diode）３３が設けられる。

本体３０は、規制部材３４を備える。規制部材３４は、主箱体２０の前端縁２０Ｂに当接することで、冷蔵庫２の前後方向における撮影部材３１の位置を規制する。規制部材３４は、本体３０の底面３０Ａから下方に延びる板状部材である。規制部材３４は、本体３０の前面において本体３０の幅方向（撮像装置３の幅方向）に延在し、本体３０の幅方向の中央にマーク３５を有する。マーク３５は、撮像装置３の幅方向の中央を示す。規制部材３４は、底面３０Ａから延びる長さが、主箱体２０の天面２０Ａから、ドア２１Ａの内面上部において天面２０Ａと略並行に設けられたドアパッキンまでの長さよりも短く形成される。

図５は、冷蔵庫２と冷蔵庫２に取り付けられた撮像装置３とを前方からみた正面図である。図５に示す冷蔵庫２は、ドア２１Ａが開状態である。図６は、冷蔵庫２と冷蔵庫２に取り付けられた撮像装置３とを右方からみた側面図である。図６に示す冷蔵庫２は、引出２５Ａが、開状態、すなわち引き出された状態である。図７は、冷蔵庫２に取り付けられた撮像装置３を上方からみた平面図である。

撮像装置３は、広角カメラ３０１及び狭角カメラ３０２を備える。広角カメラ３０１及び狭角カメラ３０２は、撮影部材３１の底面３１Ａの前端部に設置される。広角カメラ３０１及び狭角カメラ３０２は、撮像装置３が冷蔵庫２に取り付けられた状態であって且つドア２１Ａが閉状態である場合に、ドア２１Ａの前方に位置する。

広角カメラ３０１は、狭角カメラ３０２よりも広角のカメラである。広角カメラ３０１は、撮像装置３が冷蔵庫２に取り付けられた状態において、冷蔵庫２の前上方から冷蔵室２１を撮影する。
例えば、広角カメラ３０１の撮影範囲は、冷蔵庫２の前方からみて、図５に示す範囲Ａ１を含む。範囲Ａ１は、右ドア２１Ｂ及び左ドア２１Ｃが最大開度で開状態である場合に、右ドア２１Ｂ及び左ドア２１Ｃのドアポケット２１Ｅ、及び冷蔵室２１の開口２０１を含む範囲である。また、広角カメラ３０１の撮影範囲は、冷蔵庫２の右方からみて、図６に示す範囲Ａ３を含む。範囲Ａ３は、前後方向において、開状態の右ドア２１Ｂ及び左ドア２１Ｃの前端部から棚２１Ｆの前端部までを含む範囲であり、且つ、上下方向において、冷蔵室２１の開口２０１を含む範囲である。

狭角カメラ３０２は、広角カメラ３０１よりも狭角のカメラである。狭角カメラ３０２は、撮像装置３が冷蔵庫２に取り付けられた状態において、冷蔵庫２の前上方から引出２６Ａを撮影する。
例えば、狭角カメラ３０２の撮影範囲は、冷蔵庫２の前方からみて、図５に示す範囲Ａ２を含む。範囲Ａ２は、冷蔵庫２の前方からみて、引出２６Ａを含む範囲である。また、例えば、狭角カメラ３０２の撮影範囲は、冷蔵庫２の右方からみて、図６に示す範囲Ａ４を含む。範囲Ａ４は、前後方向において、最も引き出された状態の引出２６Ａを含む範囲である。なお、狭角カメラ３０２の撮影範囲は、冷蔵室２１内に設けられた引出を含む範囲でもよい。
狭角カメラ３０２は、本開示の「カメラ」の一例に対応する。

図５－図７に示すように、狭角カメラ３０２は、実施の形態１における撮像システム７の一部を構成する。実施の形態１における撮像システム７は、狭角カメラ３０２と、被撮影体ＰＳと、状態記憶部３６４と、生成部３５６と、を含む。換言すれば、撮像システム７は、被撮影体ＰＳを備える冷蔵庫２と、狭角カメラ３０２、状態記憶部３６４、及び生成部３５６を備える撮像装置３と、を含む。
被撮影体ＰＳ、状態記憶部３６４、及び生成部３５６については、図８を参照して説明する。

撮像装置３は、第１フォトセンサ３０３、及び第２フォトセンサ３０４を備える。第１フォトセンサ３０３、及び第２フォトセンサ３０４は、本体３０に設置される。
第１フォトセンサ３０３は、右ドア２１Ｂの開閉を検知するセンサである。第１フォトセンサ３０３は、反射型のフォトセンサである。第１フォトセンサ３０３は、撮像装置３が冷蔵庫２に取り付けられた状態において、右ドア２１Ｂの所定箇所に投光する。そして、第１フォトセンサ３０３は、受光量を示す信号を出力する。
第２フォトセンサ３０４は、左ドア２１Ｃの開閉を検知するセンサである。第２フォトセンサ３０４は、反射型のフォトセンサである。第２フォトセンサ３０４は、撮像装置３が冷蔵庫２に取り付けられた状態において、左ドア２１Ｃの所定箇所に投光する。そして、第２フォトセンサ３０４は、受光量を示す検出値を出力する。

撮像装置３は、サーモパイル３０５を備える。サーモパイル３０５は、引出２６Ａの開閉を検知するセンサである。サーモパイル３０５は、撮影部材３１の底面３１Ａの前端部に設置される。サーモパイル３０５は、検出した温度を示す検出値を出力する。

撮像装置３は、人感センサ３０６を備える。人感センサ３０６は、赤外線式のセンサでも超音波式のセンサでもよい。人感センサ３０６は、検出値を出力する。人感センサ３０６は、撮影部材３１の底面３１Ａの前端部に設置される。

撮像装置３は、照度センサ３０７を備える。照度センサ３０７は、広角カメラ３０１及び狭角カメラ３０２の露出を調整するためのセンサである。照度センサ３０７は、検出値を出力する。照度センサ３０７は、撮影部材３１の前端部に設置される。

撮像装置３は、第２ＬＥＤ３０８、及び第３ＬＥＤ３０９を備える。第２ＬＥＤ３０８は、撮影部材３１の底面３１Ａの右前端部に設置される。第３ＬＥＤ３０９は、撮影部材３１の底面３１Ａの左前端部に設置される。第２ＬＥＤ３０８、及び第３ＬＥＤ３０９は、撮像装置３が取り付けられた冷蔵庫２を上方から照らす。

図７に示すように、撮像装置３は、第１制御基板３１１、及び第２制御基板３１２を含む。

第１制御基板３１１は、撮像装置３が具備する各種センサ、及び撮像装置３の電源を制御する基板である。第１制御基板３１１は、撮像装置３の内部に設置される。第１制御基板３１１には、電源ボタン３２、第１ＬＥＤ３３、第１フォトセンサ３０３、第２フォトセンサ３０４、サーモパイル３０５、人感センサ３０６、及び照度センサ３０７が接続する。そして、第１制御基板３１１は、これらデバイスを制御する。第１制御基板３１１は、第２制御基板３１２及び第１無線通信モジュール３１３の後方に設置される。

第２制御基板３１２は、広角カメラ３０１と狭角カメラ３０２を制御し、また、第１無線通信モジュール３１３を制御する基板である。第２制御基板３１２は、撮像装置３の内部に設置される。第２制御基板３１２には、広角カメラ３０１、狭角カメラ３０２、及び第１無線通信モジュール３１３が接続する。そして、第２制御基板３１２は、これらデバイスを制御する。第２制御基板３１２は、第１制御基板３１１の前方に第１制御基板３１１と並んで設置される。

第１無線通信モジュール３１３は、アンテナや無線通信回路などのハードウェアを備える装置である。第１無線通信モジュール３１３は、撮影部材３１の内部において、第２制御基板３１２の左方に設置される。第１無線通信モジュール３１３は、撮像装置３が冷蔵庫２に取り付けられた状態において主箱体２０の開口２０１より前方に位置するように、撮像装置３に設置される。より具体的には、第１無線通信モジュール３１３は、撮像装置３において規制部材３４よりも前方に設置される。

図７に示すように、撮像装置３が冷蔵庫２に取り付けられた状態において、左右方向における第１無線通信モジュール３１３と第２無線通信モジュール２０６との間には、金属板３１４が設置される。

図８は、撮像装置３の構成を示すブロック図である。
図８に示すように、第１制御基板３１１は、ＣＰＵ（Central Processing Unit）などの第１プロセッサ３２０、第１メモリ３３０、第１通信モジュール３４０、及び他の装置やセンサ類が接続されるインターフェイス回路を備える。

第１メモリ３３０は、第１プロセッサ３２０が実行するプログラムやデータを記憶する記憶装置である。第１メモリ３３０は、例えばＲＯＭ（Read Only Memory）などの不揮発性の記憶装置により構成される。第１メモリ３３０は、例えばＲＡＭ（Random Access Memory）などの、第１プロセッサ３２０のワークエリアを構成する揮発性の記憶装置を含んでもよい。第１メモリ３３０は、第１プロセッサ３２０により処理されるデータや、第１プロセッサ３２０が実行する制御プログラム３３１を記憶する。

第１通信モジュール３４０は、所定の有線通信規格に従った通信回路やコネクタなどのハードウェアを備え、第１プロセッサ３２０の制御に従って第２制御基板３１２と通信する。

第１プロセッサ３２０は、制御プログラム３３１を読み出して実行することにより、電源ボタン３２の操作に応じて、撮像装置３の電源のオンオフを行う。
また、第１プロセッサ３２０は、制御プログラム３３１を読み出して実行することにより、第１ＬＥＤ３３、第２ＬＥＤ３０８、及び第３ＬＥＤ３０９の点灯及び消灯を行う。
また、第１プロセッサ３２０は、制御プログラム３３１を読み出して実行することにより、第１制御基板３１１に接続する各センサが出力した検出値を、第１通信モジュール３４０を介して第２制御基板３１２に送信する。

第２制御基板３１２は、ＣＰＵなどの第２プロセッサ３５０、第２メモリ３６０、第２通信モジュール３７０、及び他の装置やセンサ類が接続されるインターフェイス回路を備える。

第２メモリ３６０は、第２プロセッサ３５０が実行するプログラムやデータを記憶する記憶装置である。第２メモリ３６０は、例えばＲＯＭなどの不揮発性の記憶装置により構成される。また、第２メモリ３６０は、例えばＲＡＭなどの、第２プロセッサ３５０のワークエリアを構成する揮発性の記憶装置を含んでもよい。第２メモリ３６０は、第２プロセッサ３５０により処理されるデータや、第２プロセッサ３５０が実行する制御プログラム３６１や撮影装置ＩＤ（Identification）３６２を記憶する。
撮影装置ＩＤ３６２は、撮像装置３を一意に特定する情報である。

第２通信モジュール３７０は、所定の有線通信規格に従った通信回路やコネクタなどのハードウェアを備え、第２プロセッサ３５０の制御に従って第１制御基板３１１と通信する。

第２プロセッサ３５０は、第２メモリ３６０に記憶された制御プログラム３６１を読み出して実行することにより、第１通信制御部３５１、第２通信制御部３５２、開閉判定部３５３、撮影制御部３５４、録画制御部３５５、及び生成部３５６として機能する。また、第２プロセッサ３５０は、第２メモリ３６０に記憶された制御プログラム３６１を読み出して実行することによって、第２メモリ３６０を、状態記憶部３６４として機能させる。

第１通信制御部３５１は、第１無線通信モジュール３１３を介して、物品管理サーバ５と通信する。

第２通信制御部３５２は、第２通信モジュール３７０を介して、第１制御基板３１１と通信する。第２通信制御部３５２は、第１制御基板３１１に接続される各種センサの検出値を第１制御基板３１１から受信する。

開閉判定部３５３は、第２通信制御部３５２が受信する第１フォトセンサ３０３の検出値に基づいて、右ドア２１Ｂが開状態か閉状態かを判定する。開閉判定部３５３は、閉状態に対応する検出値と異なる検出値を、第２通信制御部３５２が受信した場合には、右ドア２１Ｂが開状態であると判定する。一方、開閉判定部３５３は、閉状態に対応する検出値を第２通信制御部３５２が受信した場合に、右ドア２１Ｂが閉状態であると判定する。

開閉判定部３５３は、右ドア２１Ｂについての判定と同様に、第２通信制御部３５２が第２フォトセンサ３０４の検出値に基づいて、左ドア２１Ｃが開状態か閉状態かを判定する。

開閉判定部３５３は、第２通信制御部３５２が受信するサーモパイル３０５の検出値に基づいて、引出２６Ａが開状態か閉状態かを判定する。開閉判定部３５３は、所定温度以下の温度を示すサーモパイル３０５の検出値を、第２通信制御部３５２が受信した場合には、引出２６Ａが開状態であると判定する。一方、開閉判定部３５３は、所定温度を上回る温度を示すサーモパイル３０５の検出値を第２通信制御部３５２が受信した場合には、引出２６Ａが閉状態であると判定する。

撮影制御部３５４は、ドア２１Ａ又は引出２６Ａが開状態になったと開閉判定部３５３が判定した場合に、広角カメラ３０１及び狭角カメラ３０２に撮影を開始させる。なお、第２通信制御部３５２は、撮影制御部３５４が広角カメラ３０１及び狭角カメラ３０２に撮影を開始させると、第１制御基板３１１に点灯要求情報を送信する。点灯要求情報は、第２ＬＥＤ３０８及び第３ＬＥＤ３０９の点灯を要求する情報である。第１プロセッサ３２０は、点灯要求情報を受信すると、第２ＬＥＤ３０８及び第３ＬＥＤ３０９を点灯させ、撮影を開始したことをユーザＰに通知する。

撮影制御部３５４は、ドア２１Ａ及び引出２６Ａが閉状態になったと開閉判定部３５３が判定した場合には、広角カメラ３０１及び狭角カメラ３０２に撮影を終了させる。なお、第２通信制御部３５２は、撮影制御部３５４が広角カメラ３０１及び狭角カメラ３０２に撮影を終了させると、第１制御基板３１１に消灯要求情報を送信する。消灯要求情報は、第２ＬＥＤ３０８及び第３ＬＥＤ３０９の消灯を要求する情報である。第１プロセッサ３２０は、消灯要求情報を受信すると、第２ＬＥＤ３０８及び第３ＬＥＤ３０９を消灯させ、撮影を終了したことをユーザＰに通知する。

録画制御部３５５は、ドア２１Ａ又は引出２６Ａが開状態になったと開閉判定部３５３が判定した場合に、広角カメラ３０１及び狭角カメラ３０２の撮影結果の録画を開始する。すなわち、録画制御部３５５は、第２メモリ３６０に対して、録画データ３６３の記録を開始する。録画データ３６３には、広角カメラ３０１の撮影結果を示す第１録画データＤＶ１と、狭角カメラ３０２の撮影結果を示す第２録画データＤＶ２とが含まれる。

録画制御部３５５は、ドア２１Ａ及び引出２６Ａが閉状態になったと開閉判定部３５３が判定した場合には、広角カメラ３０１及び狭角カメラ３０２の撮影結果の録画を終了する。

状態記憶部３６４は、第１撮影状態ＣＤ１と第２撮影状態ＣＤ２とを、予め記憶する。第１撮影状態ＣＤ１は、ドア２１Ａの所定の開閉角度における被撮影体ＰＳ１の広角カメラ３０１による撮影状態を示す。開閉角度が零度の場合に、ドア２１Ａは、閉状態であることを示す。開閉角度が大きい程、ドア２１Ａは、大きく開いていることを示す。所定の開閉角度は、例えば、６０度～１００度の範囲に含まれる。所定の開閉角度は、例えば、９０度である。以下の説明では、ドア２１Ａが所定の開閉角度（例えば、６０度～１００度）の状態を、「第１基準状態」と記載する。
第１撮影状態ＣＤ１は、例えば、第１基準状態で広角カメラ３０１によって撮像された撮像画像ＰＡ１において、被撮影体ＰＳ１に対応する画像の位置、サイズ、及び形状の少なくとも１つを含む。実施の形態１では、第１撮影状態ＣＤ１は、例えば、第１基準状態で広角カメラ３０１によって撮像された撮像画像ＰＡ１において、被撮影体ＰＳ１に対応する画像のサイズを含む。
被撮影体ＰＳ１については、図９を参照して更に説明する。

第２撮影状態ＣＤ２は、引出２６Ａの所定の引出量における被撮影体ＰＳ２の狭角カメラ３０２による撮影状態を示す。引出量が零の場合に、引出２６Ａは、閉状態であることを示す。所定の引出量が大きい程、引出２６Ａは、大きく開いていることを示す。引出量が１００％であることは、引出２６Ａが全開状態であることを示す。所定の引出量は、例えば、７０％～１００％の範囲に含まれる。所定の引出量は、例えば、８０％である。以下の説明では、引出２６Ａが所定の引出量（例えば、７０％～１００％）の状態を、「第２基準状態」と記載する。
第２撮影状態ＣＤ２は、例えば、第２基準状態で狭角カメラ３０２によって撮像された撮像画像ＰＡ２において、被撮影体ＰＳ２に対応する画像の位置、サイズ、及び形状の少なくとも１つを含む。実施の形態１、及び実施の形態２では、第２撮影状態ＣＤ２は、例えば、第２基準状態で狭角カメラ３０２によって撮像された撮像画像ＰＡ２において、被撮影体ＰＳ２に対応する画像のサイズを含む。
第２撮影状態ＣＤ２は、本開示の「引出の所定の引出量における被撮影体のカメラによる撮影状態」の一例に対応する。

被撮影体ＰＳ２は、貯蔵室２６の引出２６Ａの上端部に配置され、引出２６Ａの引出量に応じて狭角カメラ３０２による撮影状態が変化する。なお、引出２６Ａの引出量とは、引出２６Ａの貯蔵室２６に対する引出量である。実施の形態１では、貯蔵室２６が冷凍室２４であり、引出２６Ａが引出２４Ａである場合について説明する。
被撮影体ＰＳ２は、例えば、引出２４Ａの上端部に配置され、引出２４Ａの引出量に応じて狭角カメラ３０２による撮影状態が変化する。
被撮影体ＰＳ２については、図１１を参照して更に説明する。

生成部３５６は、録画データ３６３の第１録画データＤＶ１が示す動画像に含まれる撮像画像ＰＢ１から、第１撮影状態ＣＤ１に基づいて、第１撮影画像Ｐ１を選定する。第１撮影画像Ｐ１は、ドア２１Ａが開状態である場合の撮像画像ＰＡ１である。
また、生成部３５６は、録画データ３６３の第２録画データＤＶ２が示す動画像に含まれる撮像画像ＰＢ２から、第２撮影状態ＣＤ２に基づいて、第２撮影画像Ｐ２を選定する。第２撮影画像Ｐ２は、引出２６Ａが開状態である場合の撮像画像ＰＡ２である。
そして、生成部３５６は、第１撮影画像Ｐ１及び第２撮影画像Ｐ２から管理用データＤ１を生成する。管理用データＤ１は、物品管理サーバ５にアップロードするデータであり、冷蔵庫２が収容する物品を管理するためのデータである。第１通信制御部３５１は、生成部３５６が生成した管理用データＤ１を物品管理サーバ５に送信する。
生成部３５６は、本開示の「選定部」の一例に対応する。
撮像画像ＰＢ２は、本開示の「カメラにより撮影された画像」の一例に対応する。
第２撮影画像Ｐ２は、本開示の「引出が引き出された状態である場合の撮影画像」の一例に対応する。
本実施形態では、撮像装置３が生成部３５６を備える場合について説明するが、これに限定されない。例えば、物品管理サーバ５が、生成部３５６を備える形態でもよい。この場合には、管理用データＤ１は、第１録画データＤＶ１、及び第２録画データＤＶ２を含む。

なお、実施の形態１では、生成部３５６は、録画データ３６３の第１録画データＤＶ１が示す動画像に含まれる撮像画像ＰＢ１から、第１撮影状態ＣＤ１に基づいて、第１撮影画像Ｐ１を選定するが、これに限定されない。生成部３５６は、録画データ３６３の第１録画データＤＶ１が示す動画像に含まれる撮像画像ＰＢ１から、第１撮影状態ＣＤ１に基づいて、且つ、ユーザＰの映り込みが最も少ない撮像画像ＰＢ１を第１撮影画像Ｐ１として選定してもよい。
この場合には、生成部３５６は、第１撮影状態ＣＤ１に基づいて選定された第１撮影画像Ｐ１の中から、以下のようにして、更に第１撮影画像Ｐ１を選定する。すなわち、生成部３５６は、例えば、パターンマッチングなどの方法によってユーザＰの画像を認識し、認識したユーザＰの画像の面積が最も少ない撮像画像ＰＢ１を第１撮影画像Ｐ１として選定する。

同様に、実施の形態１では、生成部３５６は、録画データ３６３の第２録画データＤＶ２が示す動画像に含まれる撮像画像ＰＢ２から、第２撮影状態ＣＤ２に基づいて、第２撮影画像Ｐ２を選定するが、これに限定されない。生成部３５６は、録画データ３６３の第２録画データＤＶ２が示す動画像に含まれる撮像画像ＰＢ２から、第２撮影状態ＣＤ２に基づいて、且つ、ユーザＰの映り込みが最も少ない撮像画像ＰＢ２を第２撮影画像Ｐ２として選定してもよい。

［１－１－４．被撮影体の構成］
次に、図９を参照して、被撮影体ＰＳの構成の一例について説明する。図９は、実施の形態１における被撮影体ＰＳの第１実施例の構成を示す図である。以下の説明において、第１実施例の被撮影体ＰＳを、被撮影体ＰＳ１と記載する。被撮影体ＰＳ１は、右ドア２１Ｂの左端と、冷蔵室２１の開口の右端との間を連結する連結部材で構成される。被撮影体ＰＳ１は、右ドア２１Ｂの開閉角度が大きくなる程、左右方向の長さＬＤが増大する。

この場合には、状態記憶部３６４は、第１撮影状態ＣＤ１の一例として、開閉角度を６０度～１００度にしたときの広角カメラ３０１によって撮像された撮像画像ＰＡ１における長さＬＤを記憶する。また、生成部３５６は、状態記憶部３６４が記憶した撮像画像ＰＡ１における長さＬＤに基づいて、録画データ３６３の第１録画データＤＶ１が示す動画像に含まれる撮像画像ＰＢ１から右ドア２１Ｂが開状態である場合の第１撮影画像Ｐ１を選定する。

なお、生成部３５６は、状態記憶部３６４が記憶した撮像画像ＰＡ１における被撮影体ＰＳ１の面積に基づいて、録画データ３６３の第１録画データＤＶ１が示す動画像に含まれる撮像画像ＰＢ１から右ドア２１Ｂが開状態である場合の第１撮影画像Ｐ１を選定してもよい。この場合には、状態記憶部３６４は、第１撮影状態ＣＤ１の一例として、開閉角度を６０～１００度にしたときの広角カメラ３０１によって撮像された撮像画像ＰＡ１における被撮影体ＰＳ１の面積を記憶してもよい。

図９では、被撮影体ＰＳ１が、右ドア２１Ｂの左端と、冷蔵室２１の開口の右端との間を連結する連結部材で構成される場合について説明したが、被撮影体ＰＳ２が、左ドア２１Ｃの右端と、冷蔵室２１の開口の左端との間を連結する連結部材で構成されてもよい。
なお、図９、図１０、及び図１１には、図２に示すＸ軸、Ｙ軸、及びＺ軸と同じＸ軸、Ｙ軸、及びＺ軸を図示する。

次に、図１０－図１１を参照して、被撮影体ＰＳの構成について説明する。なお、以下の説明では、被撮影体ＰＳが、引出２４Ａの上端部に配置され、引出２４Ａの引出量に応じて狭角カメラ３０２による撮影状態が変化する場合について説明する。
なお、以下の説明では、状態記憶部３６４が、第２撮影状態ＣＤ２として、撮影対象画像ＭＫを記憶する場合について説明する。
また、撮影対象画像ＭＫについては、図１２－図１３を参照して説明する。

図１０－図１１は、実施の形態１における被撮影体ＰＳの第２実施例の構成を示す図である。以下の説明において、第２実施例の被撮影体ＰＳを、被撮影体ＰＳ２と記載する。図１０は、引出２４Ａを１００％引き出した状態を示す斜視図である。換言すれば、図１０は、最も引き出された状態、すなわち全開状態の引出２４Ａを示す斜視図である。

図１０に示すように、引出２４Ａには、第１トレイＴＲ１と、第２トレイＴＲ２とが配置される。
第２トレイＴＲ２は、例えば、引出２４Ａの一対の側面部材の上端部に対して、前後方向、すなわち、Ｙ軸方向に摺動自在に構成される。引出２４Ａの一対の側面部材は、Ｙ－Ｚ平面と平行に配置される。また、第２トレイＴＲ２のうち冷凍室２４内に配置されている部分は、冷凍室２４を構成する内箱２０３の側面に配置されるガイドレールによって、摺動自在に支持される。

第１トレイＴＲ１は、第２トレイＴＲ２の上方に配置され、例えば、第２トレイＴＲ２の一対の側面部材ＴＳ１の上端部に対して、前後方向、すなわち、Ｙ軸方向に摺動自在に構成される。第２トレイＴＲ２の一対の側面部材ＴＳＡは、Ｙ－Ｚ平面と平行に配置される。また、側面部材ＴＳＡの上端部は、Ｙ軸方向に延びる。また、第１トレイＴＲ１のうち冷凍室２４内に配置されている部分は、冷凍室２４を構成する内箱２０３の側面に配置されるガイドレールによって、摺動自在に支持される。
第１トレイＴＲ１は、「収納ケース」の一例に対応する。

図１０に示すように、被撮影体ＰＳ２は、第１トレイＴＲ１の一対の側面部材ＴＳ１の上端部に配置される。第１トレイＴＲ１は、一対の側面部材ＴＳ１と、前面部材ＴＳ２と、背面部材ＴＳ３と、底面部材ＴＳ４とで上面が開口した箱状に構成される。一対の側面部材ＴＳ１の各々は、第１トレイＴＲ１の側面を構成する。前面部材ＴＳ２は、第１トレイＴＲ１の前面を構成する。背面部材ＴＳ３は、第１トレイＴＲ１の背面を構成する。底面部材ＴＳ４は、第１トレイＴＲ１の底面を構成する。

被撮影体ＰＳ２は、第１トレイＴＲ１の引き出し方向、すなわち、Ｙ軸方向において、奥側の端部の位置が、所定の引出量に対応する位置に配置される。距離ＬＡは、第１トレイＴＲ１の引き出し方向、すなわち、Ｙ軸方向のサイズである。距離ＬＢは、第１トレイＴＲ１の前面部材ＴＳ２と、被撮影体ＰＳ２の後端との距離である。被撮影体ＰＳ２の後端は、被撮影体ＰＳ２のＹ軸の負方向端である。距離ＬＢは、例えば、距離ＬＡの８０％に設定される。すなわち、第１トレイＴＲ１の引出量が８０％以上である場合に、被撮影体ＰＳ２は、狭角カメラ３０２で撮像可能な位置に配置される。なお、距離ＬＢは、第１トレイＴＲ１の前面部材ＴＳ２と、被撮影体ＰＳ２の中心や前端との距離でもよい。

また、撮影面ＰＦ２は、固定部材ＡＴの上面に対応する。固定部材ＡＴは、断面が直角三角形の柱状に形成される。固定部材ＡＴは、第１トレイＴＲ１の側面部材ＴＳ１に固定される。側面部材ＴＳ１は、第１トレイＴＲ１の左側面を構成する左側面部材ＴＳ１１と、第１トレイＴＲ１の右側面を構成する右側面部材ＴＳ１２とで構成される。固定部材ＡＴは、左側面部材ＴＳ１１及び右側面部材ＴＳ１２の各々の内面側に固定される。なお、固定部材ＡＴは、左側面部材ＴＳ１１及び右側面部材ＴＳ１２の少なくとも一方の内面側に固定されてもよい。

図１０に示すように、固定部材ＡＴの上面の長辺方向が側面部材ＴＳ１と平行になるように固定部材ＡＴが配置される。よって、固定部材ＡＴが第１トレイＴＲ１の内部に突出する長さを抑制できる。したがって、第１トレイＴＲ１に物品を収納する場合、及び第１トレイＴＲ１に収納された物品を取り出す場合に、固定部材ＡＴが邪魔になることを抑制できる。

図１１は、右側面部材ＴＳ１２に固定される固定部材ＡＴの斜視図である。図１１に示すように、固定部材ＡＴは、嵌合部材ＡＴ１と、柱状部材ＡＴ２と、で構成される。
嵌合部材ＡＴ１は、第１トレイＴＲ１の右側面部材ＴＳ１２の上端部に形成された図略の孔に挿入され、第１トレイＴＲ１の右側面部材ＴＳ１２と嵌合する。

柱状部材ＡＴ２は、断面が直角三角形の柱状に形成される。柱状部材ＡＴ２は、上面部材ＡＴ２１と、第１側面部材ＡＴ２２と、一対の第２側面部材ＡＴ２３と、を有する。上面部材ＡＴ２１は、被撮影体ＰＳ２に対応する。また、上面部材ＡＴ２１の上面は、撮影面ＰＦ２に対応する。撮影面ＰＦ２は、被撮影体ＰＳ１のうち、狭角カメラ３０２によって撮像される面である。撮影面ＰＦ２には、破線で示すように、冷凍室２４に収納される物品の種類を示す識別情報を含む撮影対象画像ＭＫが形成される。例えば、撮影対象画像ＭＫが形成されたシールが、撮影面ＰＦ１に貼付される。

状態記憶部３６４は、撮影対象画像ＭＫを記憶する。撮影対象画像ＭＫは、第１撮影状態ＣＤ１の一例に対応する。
生成部３５６は、状態記憶部３６４が記憶した撮影対象画像ＭＫに基づいて、録画データ３６３の第２録画データＤＶ２が示す動画像に含まれる撮像画像ＰＢ２から引出２４Ａが引き出された状態である場合の第２撮影画像Ｐ２を選定する。
第１撮影対象画像ＭＫ１については、図１２－図１３を参照して更に説明する。

第１側面部材ＡＴ２２は、上面部材ＡＴ２１に対して直角になるように形成される。第１側面部材ＡＴ２２には、一対の嵌合部材ＡＴ１が立設される。一対の嵌合部材ＡＴ１は、前後方向、すなわち、Ｙ軸方向に沿って、第１側面部材ＡＴ２２に配列される。右側面部材ＴＳ１２に形成された一対の孔に、嵌合部材ＡＴ１が嵌合することによって、固定部材ＡＴが右側面部材ＴＳ１２に固定される。固定部材ＡＴが右側面部材ＴＳ１２に固定された状態では、第１側面部材ＡＴ２２は、右側面部材ＴＳ１２に当接する。

一対の第２側面部材ＡＴ２３は、柱状部材ＡＴ２のＹ軸方向の両端、すなわち、手前側端、及び奥側端、に配置される。一対の第２側面部材ＡＴ２３は、第１側面部材ＡＴ２２及び第１側面部材ＡＴ２２と一体に構成される。一対の第２側面部材ＡＴ２３は、第１側面部材ＡＴ２２と第１側面部材ＡＴ２２とが互いに直角をなすように、第１側面部材ＡＴ２２及び第１側面部材ＡＴ２２を固定する。

図１０では、被撮影体ＰＳ２が第１トレイＴＲ１の一対の側面部材ＴＳ１の上端部に配置される場合について説明するが、被撮影体ＰＳ２が第２トレイＴＲ２の一対の側面部材ＴＳＡの上端部に配置されてもよい。また、被撮影体ＰＳ２が引出２４Ａの一対の側面部材２４Ｓの上端部に配置されてもよい。
例えば、冷凍室２４において第１トレイＴＲ１、第２トレイＴＲ２、及び引出２４Ａに被撮影体ＰＳ２を配置する場合には、撮影対象画像ＭＫは、冷蔵庫２における冷凍室２４に収納される物品の種類を示す識別情報に加えて、被撮影体ＰＳ２が配置されている領域情報を含むことが好ましい。
第１トレイＴＲ１に配置される被撮影体ＰＳ２の撮影対象画像ＭＫは、例えば、第１トレイＴＲ１を示す領域情報を有する。また、第２トレイＴＲ２に配置される被撮影体ＰＳ２の撮影対象画像ＭＫは、例えば、第２トレイＴＲ２を示す領域情報を有する。また、引出２４Ａに配置される被撮影体ＰＳ２の撮影対象画像ＭＫは、例えば、引出２４Ａを示す領域情報を有する。

図１０に示すように、被撮影体ＰＳ２は、第１トレイＴＲ１の一対の側面部材ＴＳ１の上端部に配置されるため、狭角カメラ３０２と被撮影体ＰＳ１との距離を、例えば、被撮影体ＰＳ２が第１トレイＴＲ１の他の位置（例えば、底面部材ＴＳ４）に配置される場合と比較して、短くできる。その結果、狭角カメラ３０２は、第２基準状態で、被撮影体ＰＳ２の撮影面ＰＦ２に形成される撮影対象画像ＭＫを適切に撮像できる。
また、図１０に示すように、被撮影体ＰＳ２は、第１トレイＴＲ１の一対の側面部材ＴＳ１の上端部に配置されるため、冷蔵庫２に収納される物品等によって、狭角カメラ３０２と被撮影体ＰＳ２との間が遮られることを抑制できる。その結果、狭角カメラ３０２は、第２基準状態で、被撮影体ＰＳ２の撮影面ＰＦ２に形成される撮影対象画像ＭＫを適切に撮像できる。

次に、図１２－図１３を参照して、撮影対象画像ＭＫについて説明する。図１２は、実施の形態１における被撮影体ＰＳ２の第１撮影対象画像ＭＫ１の第１実施例を示す図である。
図１２に示すように、撮影対象画像ＭＫは、矩形の外枠画像ＭＦと、外枠画像ＭＦの内部に形成される識別画像ＭＤとを含む。識別画像ＭＤは、冷蔵庫２における冷凍室２４に収納される物品の種類を示す識別情報に対応する。外枠画像ＭＦは、例えば、黒色で形成される。

識別画像ＭＤは、第１色の第１矩形画像ＰＤ１と、第１色と異なる第２色の第２矩形画像ＰＤ２とで構成され、第１矩形画像ＰＤ１と第２矩形画像ＰＤ２との配置のパターンが、識別情報を示す。第１色は、例えば、白色であり、第２色は、例えば、黒色である。
第１矩形画像ＰＤ１のサイズは、第２矩形画像ＰＤ２のサイズと同一であり、第１矩形画像ＰＤ１及び第２矩形画像ＰＤ２の各々は、例えば、正方形である。換言すれば、第１矩形画像ＰＤ１の幅ＷＰ１と第２矩形画像ＰＤ２の幅ＷＰ２とは、第１矩形画像ＰＤ１及びと第２矩形画像ＰＤ２の高さＨＰと同一である。

外枠画像ＭＦの短辺方向（上下方向）の太さＨＦ、外枠画像ＭＦの長辺方向（左右方向）の太さＷＦの各々は、例えば、第１矩形画像ＰＤ１の幅ＷＰ１、第２矩形画像ＰＤ２の幅ＷＰ２、第１矩形画像ＰＤ１の高さＨＰ及び第２矩形画像ＰＤ２の高さＨＰと同一である。
外枠画像ＭＦの短辺方向（上下方向）の太さＨＦ、外枠画像ＭＦの長辺方向（左右方向）の太さＷＦの各々は、狭角カメラ３０２の解像度、及び、引出２４Ａの所定の引出量（例えば、９０％）における狭角カメラ３０２と撮影対象画像ＭＫとの距離に基づいて決定される。また、外枠画像ＭＦの短辺方向（上下方向）の太さＨＦ、外枠画像ＭＦの長辺方向（左右方向）の太さＷＦの各々は、狭角カメラ３０２の撮像範囲、又は画角に基づいて決定される。
例えば、狭角カメラ３０２の解像度が大きい程、外枠画像ＭＦの長辺方向の太さＨＦ、及び外枠画像ＭＦの短辺方向の太さＷＦを小さくすることができる。また、引出２４Ａの所定の引出量（例えば、９０％）における狭角カメラ３０２と撮影対象画像ＭＫとの距離が長い程、外枠画像ＭＦの長辺方向の太さＨＦ、及び外枠画像ＭＦの短辺方向の太さＷＦを大きくする必要がある。また、狭角カメラ３０２の撮像範囲、又は画角が大きい程、外枠画像ＭＦの長辺方向の太さＨＦ、及び外枠画像ＭＦの短辺方向の太さＷＦを大きくする必要がある。
図１２に示す撮影対象画像ＭＫでは、外枠画像ＭＦの長辺方向の太さＨＦ、外枠画像ＭＦの短辺方向の太さＷＦの各々は、例えば、６ｍｍである。

第１矩形画像ＰＤ１と第２矩形画像ＰＤ２とは、外枠画像ＭＦの長手方向（ここでは、左右方向）に沿って配列される。図１２では、識別画像ＭＤとして、５個の第１矩形画像ＰＤ１と、４個の第２矩形画像ＰＤ２が配列される。第１矩形画像ＰＤ１は、例えば、「０」を示し、第２矩形画像ＰＤ２は、例えば「１」を示す。すなわち、識別画像ＭＤは、９桁の二進数を示す。
識別画像ＭＤは、情報画像ＭＤＡと、符号画像ＭＤＢとで構成される。情報画像ＭＤＡは、５個の矩形画像ＰＤで構成され、符号画像ＭＤＢは、４個の矩形画像ＰＤで構成される。矩形画像ＰＤは、第１矩形画像ＰＤ１又は第２矩形画像ＰＤ２である。情報画像ＭＤＡは、冷蔵庫２における冷蔵室２１に収納される物品の種類を示す識別情報に対応する。符号画像ＭＤＢは、情報画像ＭＤＡが示す識別情報の誤り訂正用の符号を示す。
情報画像ＭＤＡは、５個の矩形画像ＰＤで構成されるため、５桁の２進数を示す。すなわち、情報画像ＭＤＡは、２の５乗、すなわち３２種類の識別情報を示す。例えば、図１２に示す情報画像ＭＤＡは、「０１０１０」という５桁の２進数を示す。

第１矩形画像ＰＤ１のサイズ、及び第２矩形画像ＰＤ２のサイズは、狭角カメラ３０２の解像度、及び、引出２４Ａの所定の引出量（例えば、９０％）における狭角カメラ３０２と撮影対象画像ＭＫとの距離に基づいて決定される。また、第１矩形画像ＰＤ１のサイズ、及び第２矩形画像ＰＤ２のサイズは、狭角カメラ３０２の撮像範囲、又は画角に基づいて決定される。
例えば、狭角カメラ３０２の解像度が大きい程、第１矩形画像ＰＤ１のサイズ、及び第２矩形画像ＰＤ２のサイズを小さくすることができる。また、引出２４Ａの所定の引出量（例えば、９０％）における狭角カメラ３０２と撮影対象画像ＭＫとの距離が長い程、第１矩形画像ＰＤ１のサイズ、及び第２矩形画像ＰＤ２のサイズを大きくする必要がある。また、狭角カメラ３０２の撮像範囲、又は画角が大きい程、第１矩形画像ＰＤ１のサイズ、及び第２矩形画像ＰＤ２のサイズを大きくする必要がある。
図１２に示す撮影対象画像ＭＫでは、第１矩形画像ＰＤ１のサイズ、及び第２矩形画像ＰＤ２のサイズは、１辺が６ｍｍの正方形である。

図１３は、実施の形態１における被撮影体ＰＳの撮影対象画像ＭＫの第２実施例を示す図である。図１３に示す撮影対象画像ＭＫは、識別画像ＭＤが上下方向に２列の矩形画像ＰＤを有する点で、図１２に示す撮影対象画像ＭＫと相違する。

情報画像ＭＤＡは、１０個の矩形画像ＰＤで構成され、符号画像ＭＤＢは、８個の矩形画像ＰＤで構成される。符号画像ＭＤＢを構成する８個の矩形画像ＰＤのうち、上段の４個の矩形画像ＰＤは、情報画像ＭＤＡを構成する１０個の矩形画像ＰＤのうち、上段の５個の矩形画像ＰＤが示す識別情報の誤り訂正用の符号を示す。また、符号画像ＭＤＢを構成する８個の矩形画像ＰＤのうち、下段の４個の矩形画像ＰＤは、情報画像ＭＤＡを構成する１０個の矩形画像ＰＤのうち、下段の５個の矩形画像ＰＤの示す識別情報の誤り訂正用の符号を示す。

図１３では、識別画像ＭＤが上下方向に２列の矩形画像ＰＤを有する場合について説明するが、これに限定されない。識別画像ＭＤが上下方向に３列以上の矩形画像ＰＤを有してもよい。

図１２－図１３では、外枠画像ＭＦが黒色で形成される場合について説明するが、これに限定されない。例えば、外枠画像ＭＦが青色で形成されてもよい。また、第１色が白色であり、第２色が黒色である場合について説明するが、これに限定されない。例えば、第１色が黄色であり、第２色が青色でもよい。

図１０－図１１を参照して説明した被撮影体ＰＳ２は、撮影対象画像ＭＫを備える。また、図１２－図１３に示すように、撮影対象画像ＭＫは、矩形の外枠画像ＭＦと、外枠画像ＭＦの内部に形成される識別画像ＭＤとを含む。そこで、生成部３５６は、以下の処理を実行する。

すなわち、生成部３５６は、まず、録画データ３６３の第２録画データＤＶ２が示す動画像に含まれる撮像画像ＰＢ２の各々から外枠画像ＭＦを検出できるか否かを判定する。そして、撮像画像ＰＢ２から外枠画像ＭＦを検出できた場合に、生成部３５６は、検出した外枠画像ＭＦの内部の識別画像ＭＤの示す識別情報を読み取ることができるか否かを判定する。次に、識別画像ＭＤの示す識別情報を読み取ることができ、且つ、読み取った識別情報が、状態記憶部３６４に記憶された撮影対象画像ＭＫに含まれる識別情報と一致する場合に、生成部３５６は、撮像画像ＰＢ２を、第２撮影画像Ｐ２として選定する。
また、生成部３５６は、例えば、第２録画データＤＶ２が示す動画像に含まれる撮像画像ＰＢ１の各々から外枠画像ＭＦを検出できた場合に、被撮影体ＰＳを狭角カメラ３０２が撮影したことを、ＬＥＤの点灯、点滅、又は音声等でユーザＰに通知する。
撮像画像ＰＢ２の各々から外枠画像ＭＦを検出できた場合は、「前記カメラが前記被撮影体を撮影したと判定した場合」の一例に対応する。

また、生成部３５６が、第２録画データＤＶ２が示す動画像に含まれる撮像画像ＰＢ２の各々から外枠画像ＭＦを容易に検出可能にするために、外枠画像ＭＦの色は、冷凍室２４の内側面の色、及び冷凍室２４に収納される物品の色と相違することが好ましい。そこで、外枠画像ＭＦの色は、例えば、黒色、青色等が好ましい。

［１－１－５．物品管理サーバの構成］
図１４は、端末装置４及び物品管理サーバ５の構成を示すブロック図である。
物品管理サーバ５は、ＣＰＵなどのプロセッサであるサーバプロセッサ５０、サーバメモリ５１、及びサーバ通信モジュール５２を備える。サーバプロセッサ５０には、サーバメモリ５１及びサーバ通信モジュール５２が接続される。

サーバメモリ５１は、サーバプロセッサ５０が実行するプログラムやデータを記憶する記憶装置である。サーバメモリ５１は、不揮発性の記憶装置により構成される。また、サーバメモリ５１は、サーバプロセッサ５０のワークエリアを構成する不揮発性の記憶装置を含んでもよい。サーバメモリ５１は、サーバプロセッサ５０により処理されるデータや、サーバプロセッサ５０が実行する制御プログラム５１１、物品管理ＤＢ（database）５１２を記憶する。
物品管理ＤＢ５１２は、撮像装置３ごとに１件のレコードを有する。この１件のレコードには、撮影装置ＩＤ３６２、第１撮影画像Ｐ１の画像データ、及び第２撮影画像Ｐ２の画像データが含まれる。

サーバ通信モジュール５２は、所定の通信規格に従った通信回路やコネクタなどを備え、ネットワークＮＷを介して冷蔵庫２、撮像装置３、及び端末装置４と通信する。

サーバプロセッサ５０は、サーバメモリ５１が記憶する制御プログラム５１１を読み出して実行することにより、サーバ通信制御部５０１及びサーバ処理部５０２として機能する。
サーバ通信制御部５０１は、サーバ通信モジュール５２を介して冷蔵庫２、撮像装置３、及び端末装置４と通信する。
サーバ処理部５０２は、撮像装置３及び端末装置４をクライアントとして各種の情報処理を行う。サーバ処理部５０２は、冷蔵庫２もクライアントとしてもよい。

［１－１－６．端末装置の構成］
次に、端末装置４の構成について説明する。
端末装置４は、ＣＰＵなどのプロセッサである端末プロセッサ４０、端末メモリ４１、端末通信モジュール４２、及びタッチパネル４３を備える。

端末メモリ４１は、端末プロセッサ４０が実行するプログラムやデータを不揮発的に記憶する記憶装置である。端末メモリ４１は、不揮発性記憶装置により構成される。また、端末メモリ４１は、端末プロセッサ４０のワークエリアを構成するＲＡＭを含んでもよい。端末メモリ４１は、端末プロセッサ４０により処理されるデータや、端末プロセッサ４０が実行する制御プログラム、物品管理アプリ４１１を記憶する。

端末通信モジュール４２は、所定の通信規格に従った通信回路やコネクタなどを備え、端末プロセッサ４０の制御に従って物品管理サーバ５と通信する。
タッチパネル４３は、表示パネルと、表示パネルに重ねて或いは一体に設けられたタッチセンサとを備える。

端末プロセッサ４０は、アプリ実行部４００として機能する。
アプリ実行部４００は、端末通信モジュール４２を介して、物品管理サーバ５と通信する。
アプリ実行部４００は、冷蔵庫２が収容する物品の管理に係るユーザーインターフェースを、タッチパネル４３に表示させる。以下の説明において、このユーザーインターフェースを、「アプリＵＩ」という。本実施の形態の表示制御部４０２は、アプリＵＩを表示させることで、冷蔵庫２が収容する物品の画像などを表示する。
アプリ実行部４００は、アプリＵＩを介して各種入力をユーザＰから受け付ける。

［１－２．動作］
次に、物品管理システム１の各部の動作について説明する。

［１－２－１．録画に係わる動作］
まず、録画に係わる撮像装置３の動作について説明する。
図１５は、撮像装置３の動作を示すフローチャートＦＡである。

開閉判定部３５３は、ドア２１Ａ又は引出２６Ａが開状態になったか否かを判定する（ステップＳＡ１）。

開閉判定部３５３が、ドア２１Ａ又は引出２６Ａが開状態になっていないと判定した場合（ステップＳＡ１：ＮＯ）、第２プロセッサ３５０は、処理をステップＳＡ１に戻す。

開閉判定部３５３が、ドア２１Ａ又は引出２６Ａが開状態になったと判定した場合（ステップＳＡ１：ＹＥＳ）、撮影制御部３５４は、広角カメラ３０１及び狭角カメラ３０２に撮影を開始させる（ステップＳＡ２）。

次いで、録画制御部３５５は、広角カメラ３０１及び狭角カメラ３０２の撮影結果の録画を開始する（ステップＳＡ３）。

次いで、開閉判定部３５３は、ドア２１Ａ及び引出２６Ａが閉状態になったか否か判定する（ステップＳＡ４）。開閉判定部３５３は、ドア２１Ａ及び引出２６Ａが閉状態になっていないと判定した場合（ステップＳＡ４：ＮＯ）には、再度、ステップＳＡ４の判定を行う。

一方、ドア２１Ａ及び引出２６Ａが閉状態になったと判定した場合（ステップＳＡ４：ＹＥＳ）には、録画制御部３５５は、撮影結果の録画を終了する（ステップＳＡ５）。これにより、第２メモリ３６０には、録画データ３６３が生成される。

次いで、撮影制御部３５４は、広角カメラ３０１及び狭角カメラ３０２に撮影を終了させる（ステップＳＡ６）。

［１－２－２．管理用データの送信に係わる動作］
次に、管理用データＤ１の送信に係わる動作について説明する。
図１６は、撮像装置３、及び物品管理サーバ５の動作を示すフローチャートである。
図１６において、フローチャートＦＢは撮像装置３の動作を示し、フローチャートＦＣは物品管理サーバ５の動作を示す。

生成部３５６は、第２メモリ３６０に、録画データ３６３が記憶されたか否かを判定する（ステップＳＢ１）。生成部３５６は、録画データ３６３が記憶されていないと判定した場合（ステップＳＢ１：ＮＯ）、再度、ステップＳＢ１の判定を行う。

一方、生成部３５６は、録画データ３６３が記憶されたと判定した場合（ステップＳＢ１：ＹＥＳ）、第２メモリ３６０が記憶する録画データ３６３の第１録画データＤＶ１が示す動画像に含まれる撮像画像ＰＢ１から、状態記憶部３６４に記憶された第１撮影状態ＣＤ１に基づいて、第１撮影画像Ｐ１を選定する（ステップＳＢ２）。

ステップＳＢ２について詳述する。
第１撮影画像Ｐ１は、右ドア２１Ｂ又は左ドア２１Ｃが所定の開閉角度（例えば、９０度）で開いている場合の撮影画像である。

生成部３５６は、状態記憶部３６４が記憶した撮像画像ＰＡ１における長さＬＤに基づいて、録画データ３６３の第１録画データＤＶ１が示す動画像に含まれる撮像画像ＰＢ１から右ドア２１Ｂが開状態である場合の第１撮影画像Ｐ１を選定する。

フローチャートＦＢの説明に戻り、生成部３５６は、記憶された録画データ３６３の第２録画データＤＶ２が示す動画像に含まれる撮像画像ＰＢ２の各々から、第２撮影画像Ｐ２を選定する（ステップＳＢ３）。

ステップＳＢ３について詳述する。
第２撮影画像Ｐ２は、引出２６Ａが開状態である場合の撮影画像である。

生成部３５６は、まず、録画データ３６３の第２録画データＤＶ２が示す動画像に含まれる撮像画像ＰＢ２の各々から外枠画像ＭＦを検出できるか否かを判定する。そして、撮像画像ＰＢ２から外枠画像ＭＦを検出できた場合に、生成部３５６は、検出した外枠画像ＭＦの内部の識別画像ＭＤの示す識別情報を読み取ることができるか否かを判定する。次に、識別画像ＭＤの示す識別情報を読み取ることができ、且つ、読み取った識別情報が、状態記憶部３６４に記憶された撮影対象画像ＭＫに含まれる識別情報と一致する場合に、生成部３５６は、撮像画像ＰＢ２を、第２撮影画像Ｐ２として選定する。

生成部３５６は、第１撮影画像Ｐ１及び第２撮影画像Ｐ２の少なくとも一方を選定できたか否かを判定する（ステップＳＢ４）。

生成部３５６は、第１撮影画像Ｐ１及び第２撮影画像Ｐ２を選定できなかったと判定した場合（ステップＳＢ４：ＮＯ）には、ステップＳＢ７の処理を行う。

一方、生成部３５６は、第１撮影画像Ｐ１及び第２撮影画像Ｐ２の少なくとも一方を選定できたと判定した場合（ステップＳＢ４：ＹＥＳ）には、管理用データＤ１を生成する（ステップＳＢ５）。

第１撮影画像Ｐ１及び第２撮影画像Ｐ２を選定できた場合には、生成部３５６は、第１撮影画像Ｐ１の画像データ、第２撮影画像Ｐ２の画像データ、及び撮影装置ＩＤ３６２を含む管理用データＤ１を生成する。
第１撮影画像Ｐ１を選定できた一方で第２撮影画像Ｐ２を選定できなかった場合には、生成部３５６は、第１撮影画像Ｐ１の画像データ、及び撮影装置ＩＤ３６２を含む管理用データＤ１を生成する。
第２撮影画像Ｐ２を選定できた一方で第１撮影画像Ｐ１を選定できなかった場合には、生成部３５６は、第２撮影画像Ｐ２の画像データ、及び撮影装置ＩＤ３６２を含む管理用データＤ１を生成する。

次いで、第１通信制御部３５１は、生成部３５６が生成した管理用データＤ１を物品管理サーバ５に送信する（ステップＳＢ６）。

次いで、生成部３５６は、ステップＳＢ２以降で処理対象とした録画データ３６３を第２メモリ３６０から消去する（ステップＳＢ７）。

フローチャートＦＣで示すように、サーバ通信制御部５０１は、撮像装置３から管理用データＤ１を受信したか否かを判定する（ステップＳＣ１）。サーバ通信制御部５０１が、管理用データＤ１を受信したと判定した場合（ステップＳＣ１：ＹＥＳ）には、サーバ処理部５０２は、サーバ通信制御部５０１が受信した管理用データＤ１に基づいて物品管理ＤＢ５１２を更新する（ステップＳＣ２）。

ステップＳＣ２について詳述する。
サーバ処理部５０２は、管理用データＤ１に含まれる撮影装置ＩＤ３６２を含むレコードを物品管理ＤＢ５１２から特定し、特定したレコードの第１撮影画像Ｐ１の画像データを、管理用データＤ１が含む第１撮影画像Ｐ１の画像データに更新する。
サーバ処理部５０２は、管理用データＤ１に含まれる撮影装置ＩＤ３６２を含むレコードを物品管理ＤＢ５１２から特定し、特定したレコードの第２撮影画像Ｐ２の画像データを、管理用データＤ１が含む第２撮影画像Ｐ２の画像データに更新する。

［１－２－３．アプリＵＩに係わる動作］
次に、アプリＵＩに係わる物品管理システム１の動作について説明する。
図１７は、端末装置４及び物品管理サーバ５の動作を示すフローチャートである。図１７において、フローチャートＦＤは端末装置４の動作を示し、フローチャートＦＥは物品管理サーバ５の動作を示す。

フローチャートＦＤで示すように、アプリ実行部４００は、物品管理サーバ５から、物品管理ＤＢ５１２に格納されている画像データを要求するか否かを判定する（ステップＳＤ１）。例えば、端末通信制御部４０１は、物品管理アプリ４１１が立ち上がった場合に、ステップＳＤ１において肯定判定する。

アプリ実行部４００は、物品管理ＤＢ５１２に格納されている画像データを要求すると判定した場合（ステップＳＤ１：ＹＥＳ）には、画像データを要求する要求データを、物品管理サーバ５に送信する（ステップＳＤ２）。要求データには、端末メモリ４１が記憶する撮影装置ＩＤ３６２が含まれる。なお、端末装置４は、所定のタイミングで撮影装置ＩＤ３６２を取得している。

フローチャートＦＥで示すように、サーバ通信制御部５０１は、要求データを受信する（ステップＳＥ１）。次いで、サーバ処理部５０２は、サーバ通信制御部５０１が受信した要求データに含まれる撮影装置ＩＤ３６２に対応する画像データを、物品管理ＤＢ５１２から取得する（ステップＳＥ２）。次いで、サーバ通信制御部５０１は、サーバ処理部５０２が取得した画像データを、要求データの応答として、端末装置４に送信する（ステップＳＥ３）。

フローチャートＦＤを参照して、アプリ実行部４００は、画像データを物品管理サーバ５から受信する（ステップＳＤ３）。次いで、アプリ実行部４００は、ステップＳＤ３で受信された画像データが示す画像を含むアプリＵＩをタッチパネル４３に表示させる（ステップＳＤ４）。

［１－３．効果等］
以上、図１－図１７を参照して説明したように、実施の形態１における撮像システム７は、上面に開口が形成された引出２４Ａを有する冷凍室２４を備える冷蔵庫２を撮影し、冷蔵庫２の天面２０Ａに配置された挟角カメラ３０２と、引出２４Ａの上端部に配置され、引出２４Ａの引出量に応じて挟角カメラ３０２による撮影状態が変化する被撮影体ＰＳ２と、引出２４Ａの所定の引出量における被撮影体ＰＳ２の挟角カメラ３０２による撮影状態である第２撮影状態ＣＤ２を記憶する状態記憶部３６４と、第２撮影状態ＣＤ２に基づいて、挟角カメラ３０２により撮影された撮像画像ＰＢ２から引出２４Ａが引き出された状態である場合の撮影画像である第２撮影画像Ｐ２を選定する生成部３５６と、を備える。

これによれば、引出２４Ａの所定の引出量における被撮影体ＰＳ２の挟角カメラ３０２による撮影状態である第２撮影状態ＣＤ２に基づいて、挟角カメラ３０２により撮影された撮像画像ＰＢ２から引出２４Ａが引き出された状態である場合の第２撮影画像Ｐ２を選定する。したがって、所定の引出量を適正に設定することによって、引出２４Ａが引き出された状態であるである場合の撮影画像である第２撮影画像Ｐ２として、冷凍室２４の引出２４Ａの収納状況を適切に撮像した撮像画像を選定できる。所定の引出量は、例えば、８０％～１００％である。

また、撮像システム７において、引出２４Ａが所定の引出量において、被撮影体ＰＳ２の撮影面ＰＦ２が挟角カメラ３０２の撮像領域に含まれるように、被撮影体ＰＳ２は引出２４Ａに配置される。

これによれば、引出２４Ａが所定の引出量において、被撮影体ＰＳ２の撮影面ＰＦ２を挟角カメラ３０２が撮像できる。

また、撮像システム７において、引出２４Ａは、引出可能に構成された第１トレイＴＲ１が配置され、被撮影体ＰＳ２は、第１トレイＴＲ１に配置され、被撮影体ＰＳ２を第１トレイＴＲ１の側面の上端部に固定する固定部材ＡＴを備える。

これによれば、被撮影体ＰＳ２は、第１トレイＴＲ１に配置されるため、引出２４Ａの引出量に応じて挟角カメラ３０２による撮影状態が変化する。したがって、被撮影体ＰＳ２を適正な位置に配置できる。

また、撮像システム７において、被撮影体ＰＳ２の撮影面ＰＦ２には、冷凍室２４に収納される物品の種類、及び物品が収納される冷凍室２４の少なくとも一方を示す識別情報を含む撮影対象画像ＭＫが形成され、状態記憶部３６４は、撮影対象画像ＭＫを記憶し、生成部３５６は、状態記憶部３６４が記憶した撮影対象画像ＭＫに基づいて、挟角カメラ３０２により撮影された撮像画像ＰＢ２から引出２４Ａが引き出された状態である場合の第２撮影画像Ｐ２を選定する。

これによれば、挟角カメラ３０２により撮影された撮像画像ＰＢ２から、例えば、撮影対象画像ＭＫが適切に撮像された撮像画像ＰＢ１を第２撮影画像Ｐ２として選定することによって、第２撮影画像Ｐ２を適正に選定できる。

また、撮像システム７において、撮影対象画像ＭＫは、矩形の外枠画像ＭＦと、外枠画像ＭＦの内部に形成され、冷蔵庫２における冷凍室２４に収納される物品の種類を示す識別情報に対応する識別画像ＭＤと、を含む。

これによれば、挟角カメラ３０２により撮影された撮像画像ＰＢ２から、例えば、外枠画像ＭＦ及び識別画像ＭＤが適切に撮像された撮像画像ＰＢ２を第２撮影画像Ｐ２として選定することによって、第２撮影画像Ｐ２を適正に選定できる。

また、撮像システム７において、識別画像ＭＤは、第１色の第１矩形画像ＰＤ１と、第１色と異なる第２色の第２矩形画像ＰＤ２とで構成され、第１矩形画像ＰＤ１と第２矩形画像ＰＤ２との配置のパターンは、前記識別情報を示す。

これによれば、第１色及び第２色の各々を適正に設定することによって、第１矩形画像ＰＤ１と第２矩形画像ＰＤ２との配置のパターンが示す識別情報を正確に検出できる。

また、撮像システム７において、第１矩形画像ＰＤ１のサイズは、第２矩形画像ＰＤ２のサイズと同一であり、第１矩形画像ＰＤ１と第２矩形画像ＰＤ２とは、外枠画像ＭＦの長手方向に沿って配列される。

これによれば、第１矩形画像ＰＤ１のサイズは、第２矩形画像ＰＤ２のサイズと同一であるため、識別情報を第１矩形画像ＰＤ１と第２矩形画像ＰＤ２との配置のパターンで効率的に表現できる。また、第１矩形画像ＰＤ１と第２矩形画像ＰＤ２とは、外枠画像ＭＦの長手方向に沿って配列されるため、第１矩形画像ＰＤ１と第２矩形画像ＰＤ２とをコンパクトに配置できる。

また、撮像システム７において、第１矩形画像ＰＤ１のサイズ、及び第２矩形画像ＰＤ２のサイズは、挟角カメラ３０２の解像度、及び、引出２４Ａの所定の引出量における挟角カメラ３０２と撮影対象画像ＭＫとの距離に基づいて決定される。

これによれば、例えば、挟角カメラ３０２の解像度が高い程、第１矩形画像ＰＤ１のサイズ、及び第２矩形画像ＰＤ２のサイズを小さくする。また、例えば、引出２４Ａの所定の引出量における挟角カメラ３０２と撮影対象画像ＭＫとの距離が長い程、第１矩形画像ＰＤ１のサイズ、及び第２矩形画像ＰＤ２のサイズを大きくする。このようにして、第１矩形画像ＰＤ１のサイズ、及び第２矩形画像ＰＤ２のサイズを適正に決定できる。

また、撮像システム７において、生成部３５６は、挟角カメラ３０２により撮影された撮像画像ＰＢ２に含まれる外枠画像ＭＦを検出することができ、且つ、挟角カメラ３０２により撮影された撮像画像ＰＢ２に含まれる撮影対象画像ＭＫの識別画像ＭＤが示す識別情報が、状態記憶部３６４が記憶した撮影対象画像ＭＫの識別画像ＭＤが示す識別情報と一致した場合に、撮像画像ＰＢ１を第２撮影画像Ｐ２として選定する。

これによれば、挟角カメラ３０２により撮影された撮像画像ＰＢ２に含まれる外枠画像ＭＦを検出することができる場合には、撮像画像ＰＢ２が適切に撮像された画像である。また、撮像画像ＰＢ２に含まれる撮影対象画像ＭＫの識別画像ＭＤが示す識別情報が、状態記憶部３６４が記憶した撮影対象画像ＭＫの識別画像ＭＤが示す識別情報と一致した場合には、撮像画像ＰＢ２は更に適切に撮像された画像である。したがって、第２撮影画像Ｐ２を容易に、且つ、適切に選定できる。

また、撮像システム７において、生成部３５６は、挟角カメラ３０２が被撮影体ＰＳを撮影したと判定した場合に、挟角カメラ３０２が被撮影体ＰＳを撮影したことをユーザに通知する。

これによれば、挟角カメラ３０２が被撮影体ＰＳを撮影したことをユーザに通知するため、ユーザは、挟角カメラ３０２が被撮影体ＰＳを撮影したことを容易に認識できる。したがって、ユーザの利便性を向上できる。

また、実施の形態１における撮像装置３は、上面に開口が形成された引出２４Ａを有する冷凍室２４を備える冷蔵庫２を撮影し、冷蔵庫２の天面２０Ａに配置された挟角カメラ３０２と、引出２４Ａの所定の引出量における被撮影体ＰＳ２の挟角カメラ３０２による撮影状態である第２撮影状態ＣＤ２を記憶する状態記憶部３６４と、第２撮影状態ＣＤ２に基づいて、挟角カメラ３０２により撮影された撮像画像ＰＢ２から引出２４Ａが引き出された状態である場合の撮影画像である第２撮影画像Ｐ２を選定する生成部３５６と、を備え、被撮影体ＰＳ２は、引出２４Ａの上端部に配置され、引出２４Ａの引出量に応じて挟角カメラ３０２による撮影状態が変化する。

これによれば、実施の形態１における撮像装置３は、実施の形態１における撮像システム７と同様の効果を奏する。

（実施の形態２）
次に、実施の形態２について説明する。実施の形態２の説明では、実施の形態１の物品管理システム１の各部の構成要素と同じ構成要素については、同一の符号を付して詳細な説明を適宜に省略する。

［２－１．構成］
図１８は、実施の形態２における物品管理システム１Ａの構成を示す図である。
実施の形態２における物品管理システム１Ａは、冷蔵庫２Ａ、物品管理サーバ５、及び端末装置４を備える。上述した実施の形態１の冷蔵庫２と撮像装置３とは、別体であるが、実施の形態２における冷蔵庫２Ａは、撮像装置３Ａを備える。すなわち、本実施の形態における冷蔵庫２Ａと撮像装置３Ａとは、別体ではない。

図１９は、本実施の形態における冷蔵庫２Ａの構成を示すブロック図である。
冷蔵庫２Ａは、第３制御基板２２０を備える。第３制御基板２２０は、ＣＰＵなどの第３プロセッサ２３０、第３メモリ２４０、第３通信モジュール２５０、及び他の装置やセンサ類が接続されるインターフェイス回路を備える。

第３メモリ２４０は、第３プロセッサ２３０が実行するプログラムやデータを記憶する記憶装置である。第３メモリ２４０は、不揮発性の記憶装置により構成される。また、第３メモリ２４０は、第３プロセッサ２３０のワークエリアを構成する揮発性の記憶装置を含んでもよい。第３メモリ２４０は、第３プロセッサ２３０により処理されるデータや、第３プロセッサ２３０が実行する制御プログラム２４１を記憶する。

第３通信モジュール２５０は、所定の有線通信規格に従った通信回路やコネクタなどの通信ハードウェアを備え、第３プロセッサ２３０の制御に従って第１制御基板３１１Ａと通信する。

第３制御基板２２０には、第２無線通信モジュール２０６、冷却部２０７、第１開閉センサ２０８、第２開閉センサ２０９、第３開閉センサ２１０、第４開閉センサ２１１、第５開閉センサ２１２、及び第６開閉センサ２１３が接続する。

冷却部２０７は、圧縮機や、凝縮器、キャピラリーチューブ、冷却器、冷却器が生成した冷気を各収容室に送る冷却ファン、及び、冷却ファンにより送られる冷気を分流するダンパー等の冷蔵庫２Ａの各収容室を冷却する機構を備える。冷却部２０７は、第３制御基板２２０の制御に従って、冷蔵庫２Ａの各収容室を冷却する。

第１開閉センサ２０８～第６開閉センサ２１３は、例えばホールＩＣで構成される。
第１開閉センサ２０８は、右ドア２１Ｂの開閉センサを検出するためのセンサである。
第２開閉センサ２０９は、左ドア２１Ｃの開閉センサを検出するためのセンサである。
第３開閉センサ２１０は、引出２２Ａの開閉センサを検出するためのセンサである。
第４開閉センサ２１１は、引出２３Ａの開閉センサを検出するためのセンサである。
第５開閉センサ２１２は、引出２４Ａの開閉センサを検出するためのセンサである。
第６開閉センサ２１３は、引出２５Ａの開閉センサを検出するためのセンサである。
各開閉センサは、検出値を第３制御基板２２０に出力する。

第３プロセッサ２３０は、制御プログラム２４１を読み出して実行することにより、第２無線通信モジュール２０６を介して、外部機器と通信する。
また、第３プロセッサ２３０は、制御プログラム２４１を読み出して実行することにより、冷却部２０７によって冷蔵庫２Ａの各収容室を冷却する。
また、第３プロセッサ２３０は、制御プログラム２４１を読み出して実行することにより、第１開閉センサ２０８～第６開閉センサ２１３の各々が出力した検出値を第１制御基板３１１Ａに送信する。

冷蔵庫２Ａは、撮像装置３Ａを備える。撮像装置３Ａは、撮像装置３と比較して、第１フォトセンサ３０３、第２フォトセンサ３０４、サーモパイル３０５、人感センサ３０６、第２ＬＥＤ３０８、及び第３ＬＥＤ３０９を備えていない。

また、被撮影体ＰＳは、冷蔵庫２Ａの冷蔵室２１の開口の近傍、右ドア２１Ｂ、又は左ドア２１Ｃに配置され、右ドア２１Ｂ及び左ドア２１Ｃの開閉角度に応じて広角カメラ３０１による撮影状態が変化する。
また、被撮影体ＰＳは、本開示に係る冷蔵庫２Ａの一部を構成する。

実施の形態２の撮像装置３Ａは、第１制御基板３１１の代わりに第１制御基板３１１Ａを備える。第１制御基板３１１Ａには、電源ボタン３２、第１ＬＥＤ３３、及び照度センサ３０７が接続する。また、実施の形態２における撮像装置３Ａは、第２制御基板３１２の代わりに第２制御基板３１２Ａを備える。第２制御基板３１２Ａには、広角カメラ３０１、狭角カメラ３０２、及び第１無線通信モジュール３１３が接続する。

第１制御基板３１１Ａは、撮像装置３Ａにおいて、撮像装置３における第１制御基板３１１の設置位置と同様の位置に設置される。
また、第２制御基板３１２Ａは、撮像装置３Ａにおいて、撮像装置３における第２制御基板３１２の設置位置と同様の位置に設置される。
また、本実施の形態において、広角カメラ３０１、狭角カメラ３０２、電源ボタン３２、第１ＬＥＤ３３、照度センサ３０７、及び第１無線通信モジュール３１３は、実施の形態１における設置位置と同じ位置に設置される。

第１制御基板３１１Ａは、ＣＰＵなどの第１プロセッサ３２０Ａ、第１メモリ３３０Ａ、第１通信モジュール３４０Ａ、及び他の装置やセンサ類が接続されるインターフェイス回路を備える。

第１メモリ３３０Ａは、第１メモリ３３０と同様のメモリである。第１メモリ３３０Ａは、第１プロセッサ３２０Ａにより処理されるデータや、第１プロセッサ３２０Ａが実行する制御プログラム３３１Ａを記憶する。

第１通信モジュール３４０Ａは、所定の有線通信規格に従った通信回路やコネクタなどの通信ハードウェアを備え、ケーブルを介して第２制御基板３１２Ａ及び第３制御基板２２０と通信する。

第１プロセッサ３２０Ａは、制御プログラム３３１Ａを読み出して実行することにより、電源ボタン３２の操作に応じて撮像装置３Ａの電源のオンオフを行う。
第１プロセッサ３２０Ａは、制御プログラム３３１Ａを読み出して実行することにより、第１ＬＥＤ３３の点灯及び消灯を行う。
第１プロセッサ３２０Ａは、制御プログラム３３１Ａを読み出して実行することにより、第１通信モジュール３４０Ａを介して、照度センサ３０７が出力した検出値を、第２制御基板３１２Ａに送信する。
第１プロセッサ３２０Ａは、制御プログラム３３１Ａを読み出して実行することにより、第１通信モジュール３４０Ａを介して、第３制御基板２２０から受信した第１開閉センサ２０８～第６開閉センサ２１３の検出値を、第２制御基板３１２Ａに送信する。

第２制御基板３１２Ａは、ＣＰＵなどの第２プロセッサ３５０Ａ、第２メモリ３６０Ａ、第２通信モジュール３７０Ａ、及び他の装置やセンサ類が接続されるインターフェイス回路を備える。

第２メモリ３６０Ａは、第１メモリ３３０と同様のメモリである。第２メモリ３６０Ａは、第２プロセッサ３５０Ａにより処理されるデータや、第２プロセッサ３５０Ａが実行する制御プログラム３６１Ａを記憶する。

第２通信モジュール３７０Ａは、所定の通信規格に従った通信回路やコネクタなどの通信ハードウェアを備え、第２プロセッサ３５０Ａの制御に従って第１制御基板３１１Ａと通信する。

第２プロセッサ３５０Ａは、第２メモリ３６０Ａに記憶された制御プログラム３６１Ａを読み出して実行することによって、第１通信制御部３５１、第２通信制御部３５２Ａ、開閉判定部３５３Ａ、撮影制御部３５４、録画制御部３５５、及び生成部３５６として機能する。また、第２プロセッサ３５０Ａは、第２メモリ３６０Ａに記憶された制御プログラム３６１Ａを読み出して実行することによって、第２メモリ３６０Ａを状態記憶部３６４として機能させる。

実施の形態２における冷蔵庫２Ａは、広角カメラ３０１と、被撮影体ＰＳと、状態記憶部３６４と、生成部３５６と、を含む。

第２通信制御部３５２Ａは、第２通信モジュール３７０Ａを介して、第１制御基板３１１Ａと通信する。第２通信制御部３５２Ａは、各種センサの検出値を第１制御基板３１１Ａから受信する。

開閉判定部３５３Ａは、第２通信制御部３５２Ａが受信する第１開閉センサ２０８の検出値に基づいて、右ドア２１Ｂが開状態か閉状態かを判定する。開閉判定部３５３は、閉状態に対応する検出値と異なる検出値を、第２通信制御部３５２Ａが受信した場合には、右ドア２１Ｂが開状態であると判定する。一方、開閉判定部３５３は、閉状態に対応する検出値を第２通信制御部３５２が受信した場合には、右ドア２１Ｂが閉状態であると判定する。

開閉判定部３５３Ａは、右ドア２１Ｂについての判定と同様に、第２通信制御部３５２が第２開閉センサ２０９の検出値に基づいて、左ドア２１Ｃが開状態か閉状態かを判定する。

開閉判定部３５３Ａは、第２通信制御部３５２が受信する第３開閉センサ２１０～第６開閉センサ２１３の検出値に基づいて、引出２６Ａが開状態か閉状態かを判定する。開閉判定部３５３Ａは、右ドア２１Ｂの判定と同様に判定を行う。

［２－２．動作］
実施の形態２における物品管理システム１Ａの各部の動作は、実施の形態１の物品管理システム１の各部の動作と同じである。すなわち、録画に係わる撮像装置３Ａの動作は、実施の形態１における撮像装置３の動作と同じである。また、管理用データＤ１に係わる撮像装置３Ａの動作は、実施の形態１における撮像装置３の動作と同じである。

［２－３．効果等］
以上、図１８－図１９を参照して説明したように、実施の形態２における冷蔵庫２Ａは、上面に開口が形成された引出２４Ａを有する冷凍室２４を備える冷蔵庫２を撮影し、冷蔵庫２の天面２０Ａに配置された挟角カメラ３０２と、引出２４Ａの上端部に配置され、引出２４Ａの引出量に応じて挟角カメラ３０２による撮影状態が変化する被撮影体ＰＳ２と、引出２４Ａの所定の引出量における被撮影体ＰＳ２の挟角カメラ３０２による撮影状態である第２撮影状態ＣＤ２を記憶する状態記憶部３６４と、第２撮影状態ＣＤ２に基づいて、挟角カメラ３０２により撮影された撮像画像ＰＢ２から引出２４Ａが引き出された状態である場合の撮影画像である第２撮影画像Ｐ２を選定する生成部３５６と、を備える。

これによれば、実施の形態２における冷蔵庫２Ａは、実施の形態１における撮像システム７と同様の効果を奏する。

（他の実施の形態）
以上のように、本出願において開示する例示として、上記実施の形態１、２を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施の形態にも適用できる。また、上記実施の形態１、２で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。そこで、以下、他の実施の形態を例示する。

上述した実施の形態１、２では、被撮影体ＰＳ２が、冷凍室２４に配置される場合について説明したが、被撮影体ＰＳ２が、製氷室２２、新鮮凍結室２３、又は野菜室２５に配置されてもよい。

上述した実施の形態１、２では、被撮影体ＰＳ２が、冷凍室２４の第１トレイＴＲ１に配置される場合について説明したが、被撮影体ＰＳ２が、冷凍室２４の第２トレイＴＲ２又は引出２４Ａに配置されてもよい。

上述した実施の形態１、２では、被撮影体ＰＳ２が、固定部材ＡＴの嵌合部材ＡＴ１によって第１トレイＴＲ１の一対の側面部材ＴＳ１に固定される場合について説明したが、被撮影体ＰＳ２が、第１トレイＴＲ１の一対の側面部材ＴＳ１の上端部に配置されればよい。例えば、固定部材ＡＴの柱状部材ＡＴ２が第１トレイＴＲ１の一対の側面部材ＴＳ１の上端部に、接着剤等で、貼り付けられてもよい。

上述した実施の形態１、２では、識別画像ＭＤが、情報画像ＭＤＡと、符号画像ＭＤＢとで構成されるが、識別画像ＭＤが情報画像ＭＤＡだけで構成されてもよい。換言すれば、識別画像ＭＤが、符号画像ＭＤＢを含まなくてもよい。

上述した実施の形態１、２では、第１矩形画像ＰＤ１及び第２矩形画像ＰＤ２が正方形である場合について説明したが、第１矩形画像ＰＤ１及び第２矩形画像ＰＤ２が長方形でもよい。

上述した実施の形態１、２では、外枠画像ＭＦが黒色で形成される場合について説明するが、これに限定されない。例えば、外枠画像ＭＦが青色で形成されてもよい。また、第１色が白色であり、第２色が黒色である場合について説明するが、これに限定されない。例えば、第１色が黄色であり、第２色が青色でもよい。
生成部３５６が、第１録画データＤＶ１が示す動画像に含まれる撮像画像ＰＢ１の各々から外枠画像ＭＦを容易に検出可能にするために、外枠画像ＭＦの色は、冷蔵室２１の内側面の色、及び冷蔵室２１に収納される物品の色と相違することが好ましい。そこで、外枠画像ＭＦの色は、例えば、黒色、青色等が好ましい。

上述した実施の形態２では、第１フォトセンサ３０３、第２フォトセンサ３０４、サーモパイル３０５、人感センサ３０６、第２ＬＥＤ３０８、及び第３ＬＥＤ３０９を備えていない構成である。実施の形態２に係わる他の実施の形態では、これらデバイスのうち任意のデバイスを備えていてもよい。

上述した実施の形態１、２では、右ドア２１Ｂと左ドア２１Ｃとの幅が異なる場合を例示した。他の実施の形態では、右ドア２１Ｂと左ドア２１Ｃとの幅は同じでもよいし、右ドア２１Ｂの幅より左ドア２１Ｃの幅のほうが長くてもよい。

上述した実施の形態１、２では、第２ＬＥＤ３０８と第３ＬＥＤ３０９とを撮像装置３、３Ａが具備する構成である。他の実施の形態では、第２ＬＥＤ３０８及び第３ＬＥＤ３０９が一つのＬＥＤで構成されてもよい。

上述した実施の形態１では、引出２６Ａの開閉を検知するためのセンサがサーモパイル３０５で構成される場合を例示した。しかしながら、引出２６Ａの開閉を検知するためのセンサは、測距センサでもよい。この場合、開閉判定部３５３は、測距センサの検出値に基づいて、引出２６Ａが開状態か閉状態かを判定する。引出２６Ａが引き出されたときに動きがあったと検出する。なお、測距センサは赤外線方式でも超音波方式でもよい。

上述した実施の形態２では、第１開閉センサ２０８～第６開閉センサ２１３がホールＩＣで構成される場合を例示した。しかしながら、第１開閉センサ２０８、及び第２開閉センサ２０９は、角度センサ、カメラ、温度センサなどの他のセンサでもよい。また、第３開閉センサ２１０～第６開閉センサ２１３は、加速度センサや、機械式スイッチ、角度センサ、カメラ、温度センサなどの他のセンサでもよい。

他の実施の形態では、生成部３５６は、カメラにより撮影された画像と予め記憶された引出が引き出された状態である画像を比較して、引出が引き出された状態である画像を選定してもよい。

他の実施の形態では、撮像装置３は、被撮影体検出部を備えてもよい。この場合、被撮影体検出部が被撮影体を検出できたことに基づいて、録画制御部３５５は、録画の開始と終了を制御してもよい。これにより、録画データの容量を小さくできる。また、処理速度を向上できる。
被撮影体検出部は、「選定部」の一例に対応する。
被撮影体に基づいた録画に係わる撮像装置３の動作について説明する。図２０は、撮像装置３の動作を示すフローチャートＦＦである。

開閉判定部３５３は、ドア２１Ａ又は引出２６Ａが開状態になったか否かを判定する（ステップＳＦ１）。

開閉判定部３５３が、ドア２１Ａ又は引出２６Ａが開状態になっていないと判定した場合（ステップＳＦ１：ＮＯ）、第２プロセッサ３５０は、処理をステップＳＦ１に戻す。

開閉判定部３５３が、ドア２１Ａ又は引出２６Ａが開状態になったと判定した場合（ステップＳＦ１：ＹＥＳ）、撮影制御部３５４は、広角カメラ及び狭角カメラ３０２に撮影を開始させる（ステップＳＦ２）。

次いで、被撮影体検出部は、被撮影体を検出できたか否かを判定する（ステップＳＦ３）。

被撮影体検出部が、被撮影体を検出できないと判定した場合（ステップＳＦ３：ＮＯ）、第２プロセッサ３５０は、処理をステップＳＦ７に進める。

被撮影体検出部が、被撮影体を検出できたと判定した場合（ステップＳＦ３：ＹＥＳ）、録画制御部３５５は、広角カメラ３０１及び狭角カメラ３０２の撮影結果の録画を開始する（ステップＳＦ４）。なお、広角カメラ３０１に対応する被撮影体に基づいて、広角カメラ３０１のみの撮影結果の録画を開始してもよい。また同様に、狭角カメラ３０２に対応する被撮影体に基づいて、狭角カメラ３０２のみの撮影結果の録画を開始してもよい。また、被撮影体検出部が、被撮影体を検出できたと判定した場合、被撮影体検出部は、被撮影体を検出できた（撮影結果の録画を開始した）ことをユーザに通知してもよい。これによれば、被撮影体を検出した（撮影結果の録画を開始した）ことをユーザに通知するため、ユーザは、撮影結果の録画を開始したことを容易に認識できる。したがって、撮影のノイズを減らすことにつながり、ユーザの利便性を向上できる。

録画制御部３５５が、広角カメラ３０１及び狭角カメラ３０２の撮影結果の録画を開始した後、被撮影検出部は、被撮影体を検出できたか否かを判定する（ステップＳＦ５）。

被撮影体検出部は、被撮影体を検出できたと判定した場合（ステップＳＦ５：ＹＥＳ）には、再度、ステップＳＦ５の判定を行う。

一方、被撮影体検出部が、被撮影体を検出できなかったと判定した場合（ステップＳＦ５：ＮＯ）には、録画制御部３５５は、撮影結果の録画を終了する（ステップＳＦ６）。これにより、第２メモリ３６０には、録画データ３６３が生成される。なお、録画データ３６３は複数の録画データを含んでいてもよい。例えば、一回の撮影で、複数の録画データを第２メモリ３６０に生成してもよい。この場合、生成部３５６は、複数の録画データそれぞれに対して、ステップＳＢ１～ステップＳＢ７の処理を行ってもよい。また、被撮影体検出部が、被撮影体を検出できなかったと判定した場合、被撮影体検出部は、被撮影体を検出できなかった（撮影結果の録画を終了した）ことをユーザに通知してもよい。これによれば、被撮影体を検出できなかった（撮影結果の録画を終了した）ことをユーザに通知するため、ユーザは、撮影結果の録画を終了したことを容易に認識できる。したがって、ユーザの利便性を向上できる。

次いで、開閉判定部３５３は、ドア２１Ａ及び引出２６Ａが閉状態になったか否か判定する（ステップＳＦ７）。開閉判定部３５３が、ドア２１Ａ及び引出２６Ａが閉状態になっていないと判定した場合（ステップＳＦ７：ＮＯ）には、第２プロセッサ３５０は、処理をステップＳＦ３に戻す。

一方、開閉判定部３５３が、ドア２１Ａ及び引出２６Ａが閉状態になったと判定した場合（ステップＳＦ７：ＹＥＳ）には、撮影制御部３５４は、広角カメラ３０１及び狭角カメラ３０２に撮影を終了させる（ステップＳＦ８）。

他の実施の形態では、生成部３５６は、カメラにより撮影された画像と予め記憶された引出が開状態である画像を比較して、引出が開状態である画像を選定してもよい。

他の実施の形態では、録画制御部３５５は、撮影結果の録画を開始してから所定時間（例えば、１分）経過後に撮影結果の録画を終了させてもよい。これによれば、撮影装置３の不具合にも対応できる。

他の実施の形態では、撮影装置３は、撮影装置確認部を備えてもよい。撮影装置確認部は、ユーザが撮影装置３を冷蔵庫２に設置する際に、撮影装置３が冷蔵庫２の所定の位置に設置できていることを確認するためのものである。この場合、撮影装置確認部は、被撮影体を予め記憶された領域内で検出できたときに、撮影装置３が冷蔵庫２の所定の位置（例えば、冷蔵庫２の左右方向における中心位置）に設置できていることをＬＥＤの点灯、点滅、又は音声や、端末装置４への通知等でユーザに通知してもよい。これによれば、ユーザは、撮影装置３を冷蔵庫２の所定の位置に設置できていることを容易に認識でき、次の設定作業に移ることができる。したがって、ユーザの利便性を向上できる。
また、撮影装置確認部は、被撮影体を予め記憶された領域内で検出できなかったときに、撮影装置３が冷蔵庫２の所定の位置に設置できていないことを、ＬＥＤの点灯、点滅、又は音声や、端末装置４への通知等でユーザに通知してもよい。これによれば、ユーザは、撮影装置３を冷蔵庫２の所定の位置に設置できていないことを容易に認識できる。したがって、ユーザの利便性を向上できる。また、撮影装置確認部は、撮影装置３が冷蔵庫２の所定の位置に設置できているときと、冷蔵庫２の所定の位置に設置できていないときとでユーザへの通知態様を異ならせてもよい。例えば、撮影装置３を冷蔵庫２の所定の位置に設置できているときにはＬＥＤを点灯させ、冷蔵庫２の所定の位置に設置できていないときにはＬＥＤを点滅させてもよい。これによれば、ユーザは、撮影装置３を冷蔵庫２の所定の位置に設置できていること、及び、冷蔵庫２の所定の位置に設置できてないことを容易に認識できる。したがって、ユーザの利便性を向上できる。

他の実施の形態では、撮影装置３は、被撮影体確認部を備えてもよい。被撮影体確認部は、ユーザが被撮影体を冷蔵庫２に設置する際に、被撮影体が冷蔵庫２の所定の位置に設置できていることを確認するためのものである。この場合、被撮影体確認部は、被撮影体の情報（撮影された被撮影体から得られた情報）と予め記憶された貯蔵室の情報とが一致していたときに、被撮影体が冷蔵庫２の所定の位置に設置できていることをＬＥＤの点灯、点滅、又は音声や、端末装置４への通知等でユーザに通知してもよい。これによれば、例えば、野菜室に冷凍室用の被撮影体を設置していないか、又は上段ケースに下段ケース用の被撮影体を設置していないか等をユーザは容易に認識できる。すなわち、ユーザは、被撮影体を冷蔵庫２の所定の位置に設置できていることを容易に認識でき、次の設定作業に移ることができる。したがって、ユーザの利便性を向上できる。
また、被撮影体確認部は、被撮影体の情報（撮影された被撮影体から得られた情報）と、予め記憶された貯蔵室の情報とが一致していないときに、被撮影体が冷蔵庫２の所定の位置に設置できていないことを、ＬＥＤの点灯、点滅、又は音声や、端末装置４への通知（例えば、被撮影体の情報を表示する）等でユーザに通知してもよい。これによれば、ユーザは、被撮影体を冷蔵庫２の所定の位置に設置できていないことを容易に認識できる。したがって、ユーザの利便性を向上できる。また、被撮影体確認部は、被撮影体が冷蔵庫２の所定の位置に設置できているときと、冷蔵庫２の所定の位置に設置できていないときとでユーザへの通知態様を異ならせてもよい。例えば、被撮影体を冷蔵庫２の所定の位置に設置できているときにはＬＥＤを点灯させ、冷蔵庫２の所定の位置に設置できていないときにはＬＥＤを点滅させてもよい。これによれば、ユーザは、被撮影体を冷蔵庫２の所定の位置に設置できていること、及び、冷蔵庫２の所定の位置に設置できていないことを容易に認識できる。したがって、ユーザの利便性を向上できる。

また、被撮影体が収納ケースの側面のうち一方のみに設置される場合には、被撮影体確認部は、予め登録された情報（どちらの側面に設置したか）と被撮影体の情報（撮影された被撮影体から得られた側面の情報）とが一致していたときに、被撮影体が冷蔵庫２の所定の位置に設置できていることをＬＥＤの点灯、点滅、又は音声や、端末装置４への通知等でユーザに通知してもよい。これによれば、ユーザは、被撮影体を冷蔵庫２の所定の位置に設置できていることを容易に認識でき、次の設定作業に移ることができる。したがって、ユーザの利便性を向上できる。
また、被撮影体確認部は、予め登録された情報と被撮影体の情報とが一致していないときに、被撮影体が冷蔵庫２の所定の位置に設置できていないことをＬＥＤの点灯、点滅、又は音声や、端末装置４への通知（例えば、被撮影体の情報を表示する）等でユーザに通知してもよい。これによれば、ユーザは、被撮影体を冷蔵庫２の所定の位置に設置できていないことを容易に認識できる。したがって、ユーザの利便性を向上できる。また、被撮影体確認部は、被撮影体が冷蔵庫２の所定の位置に設置できているときと、冷蔵庫２の所定の位置に設置できていないときとで、ユーザへの通知態様を異ならせてもよい。例えば、被撮影体を冷蔵庫２の所定の位置に設置できているときにはＬＥＤを点灯させ、冷蔵庫２の所定の位置に設置できていないときにはＬＥＤを点滅させてもよい。これによれば、ユーザは、被撮影体を冷蔵庫２の所定の位置に設置できていること、及び、冷蔵庫２の所定の位置に設置できていないことを容易に認識できる。したがって、ユーザの利便性を向上できる。

被撮影体は、設置すべき貯蔵室又は収納ケースの情報がわかる文字やイラスト等（例えば、野菜室上段ケースという文字、野菜室上段ケースのイラストや、果物のマーク）を含んでいてもよい。これによれば、ユーザが被撮影体を冷蔵庫２に設置する際に、設置すべき貯蔵室又は収納ケースを容易に認識できる。したがって、ユーザの設置ミスを抑制でき、ユーザの利便性を向上できる。

他の実施の形態では、実施の形態１、２における第２プロセッサ３５０、３５０Ａの各機能部に加えて、第２プロセッサ３５０、３５０Ａは、物品を検出する検出部として機能してもよい。録画制御部３５５が広角カメラ３０１及び狭角カメラ３０２の録画を開始してから終了するまでの間に、検出部は、冷蔵室２１に出し入れされる物品の画像を動画像から切り出してもよい。また、物品にマーカーが付されている場合には、検出部は、マーカー付の物品を検出してもよい。

他の実施の形態では、実施の形態１における第２プロセッサ３５０の各機能部に加えて、第２プロセッサ３５０は人物存在判定部として機能してもよい。人物存在判定部は、人感センサ３０６の検出値に基づいて、冷蔵庫２の周辺に人が存在するか否かを判定する。より具体的に、人物存在判定部は、人感センサ３０６の検出値が、人が存在することに対応する検出値の場合には、冷蔵庫２の周辺に人が存在すると判定し、そうでない場合には、冷蔵庫２の周辺に人が存在しないと判定する。
第２プロセッサ３５０が人物存在判定部として機能する場合には、撮影制御部３５４は、人が存在すると人物存在判定部が判定した場合に、広角カメラ３０１及び狭角カメラ３０２に撮影を開始させ、人が存在しないと人物存在判定部が判定した場合に、広角カメラ３０１及び狭角カメラ３０２に撮影を終了させる。また、第２プロセッサ３５０が人物存在判定部として機能する場合には、録画制御部３５５は、人が存在すると人物存在判定部が判定した場合に、録画を開始し、人が存在しないと人物存在判定部が判定した場合に、録画を終了する。これにより、開閉判定部３５３が誤判定した場合でも、適切に広角カメラ３０１及び狭角カメラ３０２の撮影結果を録画できる。

他の実施の形態では、実施の形態１、２における第２プロセッサ３５０、３５０Ａの各機能部に加えて、第２プロセッサ３５０、３５０Ａは、入出庫判定部として機能してもよい。この場合には、左ドア２１Ｃ及び右ドア２１Ｂの開閉角度に応じて、入出庫判定部は、入出庫の判定に用いる境界線を変更し、物品の入出庫を判定する。また、引出２６Ａの引出し度合いに応じて、入出庫判定部は、入出庫の判定に用いる境界線を変更し、物品の入出庫を判定する。

他の実施の形態では、第１撮影画像Ｐ１が画像補正されて物品管理サーバ５にアップロードされてもよい。画像補正としては、視点変換の補正が例に挙げられる。

上述した実施の形態では、第１撮影画像Ｐ１と第２撮影画像Ｐ２とが端末装置４の表示の用途に使用される場合を例示した。しかしながら、第１撮影画像Ｐ１及び第２撮影画像Ｐ２は、例えば、冷蔵庫２、２Ａに収容される物品の検出など、他の用途に使用されてもよい。

他の実施の形態では、冷蔵庫２、２Ａの主箱体２０に形成される部屋は、上述した５種以外の収容室があってもよいし少なくてもよい。また、他の実施の形態では、冷蔵庫２、２Ａの主箱体２０に形成される引出型の貯蔵室は、１つでもよい。

第１プロセッサ３２０、３２０Ａ、第２プロセッサ３５０、３５０Ａ、サーバプロセッサ５０、及び端末プロセッサ４０は、単一のプロセッサにより構成されてもよいし、複数のプロセッサにより構成されていてもよい。これらプロセッサは、対応する機能部を実現するようプログラムされたハードウェアでもよい。すなわち、これらプロセッサは、例えば、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）で構成されてもよい。

図８、図１４、及び図１９に示した撮像装置３、３Ａ、冷蔵庫２、２Ａ、端末装置４、及び物品管理サーバ５の構成は一例であって、具体的な実装形態は特に限定されない。つまり、必ずしも各部に個別に対応するハードウェアが実装される必要はなく、一つのプロセッサがプログラムを実行することで各部の機能を実現する構成とすることも可能である。また、上述した実施の形態においてソフトウェアで実現される機能の一部をハードウェアとしてもよく、或いは、ハードウェアで実現される機能の一部をソフトウェアで実現してもよい。

図１５、図１６、図１７及び図２０に示す動作のステップ単位は、動作の理解を容易にするために、主な処理内容に応じて分割したものであり、処理単位の分割の仕方や名称によって、動作が限定されることはない。処理内容に応じて、さらに多くのステップ単位に分割してもよい。また、１つのステップ単位がさらに多くの処理を含むように分割してもよい。また、そのステップの順番は、本開示の趣旨に支障のない範囲で適宜に入れ替えてもよい。

なお、上述の実施の形態は、本開示における技術を例示するためのものであるから、特許請求の範囲またはその均等の範囲において種々の変更、置き換え、付加、省略などを行うことができる。

（付記）
以上の実施の形態の記載により、下記の技術が開示される。

（技術１）上面に開口が形成された引出を有する貯蔵室を備える冷蔵庫を撮影し、前記冷蔵庫の上面に配置されたカメラと、前記引出の上端部に配置され、前記引出の引出量に応じて前記カメラによる撮影状態が変化する被撮影体と、前記引出の所定の引出量における前記被撮影体の前記カメラによる撮影状態を記憶する状態記憶部と、前記状態記憶部が記憶した前記被撮影体の前記カメラによる撮影状態に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する選定部と、を備える、撮像システム。
この構成によれば、引出の所定の引出量における被撮影体のカメラによる撮影状態に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する。したがって、所定の引出量を適正に設定することによって、前記引出が引き出された状態である場合の撮影画像として、冷蔵庫の庫内状況を適切に撮像した撮像画像を選定できる。

（技術２）前記引出が所定の引出量において、前記被撮影体の撮影面が前記カメラの撮像領域に含まれるように、前記被撮影体は前記引出に配置される、技術１に記載の撮像システム。
この構成によれば、前記引出が所定の引出量において、前記被撮影体を前記カメラが撮像できる。

（技術３）前記引出は、引出可能に構成された収納ケースが配置され、前記被撮影体は、前記収納ケースに配置され、前記被撮影体を前記収納ケースの側面の上端部に固定する固定部材を備える、技術２に記載の撮像システム。
この構成によれば、前記被撮影体は、前記収納ケースの側面の上端部に固定されるため、前記引出の引出量に応じて前記被撮影体の前記カメラによる撮影状態が変化する。したがって、前記被撮影体を適正な位置に配置できる。

（技術４）前記被撮影体の撮影面には、前記貯蔵室に収納される物品の種類、又は物品が収納される前記貯蔵室を示す識別情報を含む撮影対象画像が形成され、前記状態記憶部は、前記撮影対象画像を記憶し、前記選定部は、前記状態記憶部が記憶した前記撮影対象画像に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する、技術１から技術３のいずれか１つに記載の撮像システム。
この構成によれば、前記カメラにより撮影された画像から、例えば、前記撮影対象画像が適切に撮像された撮像画像を、前記引出が引き出された状態である場合の撮影画像として選定することによって、前記引出が引き出された状態である場合の撮影画像を適正に選定できる。

（技術５）前記撮影対象画像は、矩形の外枠画像と、前記外枠画像の内部に形成され、前記冷蔵庫における前記貯蔵室に収納される物品の種類、又は物品が収納される前記貯蔵室を示す識別情報に対応する識別画像と、を含む、技術４に記載の撮像システム。
この構成によれば、前記カメラにより撮影された画像から、例えば、前記外枠画像、及び前記識別画像が適切に撮像された撮像画像を、前記引出が引き出された状態である場合の撮影画像として選定することによって、前記引出が引き出された状態である場合の撮影画像を適正に選定できる。

（技術６）前記識別画像は、第１色の第１矩形画像と、第１色と異なる第２色の第２矩形画像とで構成され、前記第１矩形画像と前記第２矩形画像との配置のパターンは、前記識別情報を示す、技術５に記載の撮像システム。
この構成によれば、第１色及び第２色の各々を適正に設定することによって、前記第１矩形画像と前記第２矩形画像との配置のパターンが示す前記識別情報を正確に検出できる。

（技術７）前記第１矩形画像のサイズは、前記第２矩形画像のサイズと同一であり、前記第１矩形画像と前記第２矩形画像とは、前記外枠画像の長手方向に沿って配列される、技術６に記載の撮像システム。
この構成によれば、前記第１矩形画像のサイズは、前記第２矩形画像のサイズと同一であるため、識別情報を前記第１矩形画像と前記第２矩形画像との配置のパターンで効率的に表現できる。また、前記第１矩形画像と前記第２矩形画像とは、前記外枠画像の長手方向に沿って配列されるため、前記第１矩形画像と前記第２矩形画像とをコンパクトに配置できる。

（技術８）前記第１矩形画像のサイズ、及び前記第２矩形画像のサイズは、前記カメラの解像度、及び、前記引出の所定の引出量における前記カメラと前記撮影対象画像との距離に基づいて決定される、技術６又は技術７に記載の撮像システム。
この構成によれば、例えば、前記カメラの解像度が高い程、前記第１矩形画像のサイズ、及び前記第２矩形画像のサイズを小さくする。また、例えば、前記引出の所定の引出量における前記カメラと前記撮影対象画像との距離が長い程、前記第１矩形画像のサイズ、及び前記第２矩形画像のサイズを大きくする。このようにして、前記第１矩形画像のサイズ、及び前記第２矩形画像のサイズを適正に決定できる。

（技術９）前記選定部は、前記カメラにより撮影された画像に含まれる前記外枠画像を検出することができ、且つ、前記カメラにより撮影された画像に含まれる前記撮影対象画像の識別画像が示す識別情報が、前記状態記憶部が記憶した前記撮影対象画像の識別画像が示す識別情報と一致した場合に、前記カメラにより撮影された画像を前記引出が引き出された状態である場合の撮影画像として選定する、技術５から技術８のいずれか１つに記載の撮像システム。
この構成によれば、前記カメラにより撮影された画像に含まれる前記外枠画像を検出することができる場合には、前記カメラにより撮影された画像が、適切に撮像された画像である。また、前記カメラにより撮影された画像に含まれる前記撮影対象画像の識別画像が示す識別情報が、前記状態記憶部が記憶した前記撮影対象画像の識別画像が示す識別情報と一致した場合には、前記カメラにより撮影された画像が、更に適切に撮像された画像である。したがって、前記引出が引き出された状態である場合の撮影画像を容易に、且つ、適切に選定できる。

（技術１０）前記選定部は、前記カメラが前記被撮影体を撮影したと判定した場合に、前記カメラが前記被撮影体を撮影したことをユーザに通知する、技術１から技術９のいずれか１つに記載の撮像システム。
この構成によれば、前記カメラが前記被撮影体を撮影したと判定した場合に、前記カメラが前記被撮影体を撮影したことをユーザに通知するため、ユーザは、前記カメラが前記被撮影体を撮影したことを容易に認識できる。したがって、ユーザの利便性を向上できる。

（技術１１）上面に開口が形成された引出を有する貯蔵室を備える冷蔵庫を撮影し、前記冷蔵庫の上面に配置されたカメラと、前記引出の所定の引出量における被撮影体の前記カメラによる撮影状態を記憶する状態記憶部と、前記状態記憶部が記憶した前記被撮影体の前記カメラによる撮影状態に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する選定部と、を備え、前記被撮影体は、前記貯蔵室の上端部に配置され、前記引出の引出量に応じて前記カメラによる撮影状態が変化する、撮像装置。
この構成によれば、技術１に記載の撮像システムと同様の効果を奏する。

（技術１２）上面に開口が形成された引出を有する貯蔵室を備える冷蔵庫を撮影し、前記冷蔵庫の上面に配置されたカメラと、前記引出の上端に配置され、前記引出の引出量に応じて前記カメラによる撮影状態が変化する被撮影体と、前記引出の所定の引出量における前記被撮影体の前記カメラによる撮影状態を記憶する状態記憶部と、前記状態記憶部が記憶した前記被撮影体の前記カメラによる撮影状態に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する選定部と、を備える、冷蔵庫。
この構成によれば、技術１に記載の撮像システムと同様の効果を奏する。

以上のように、本発明に係る撮像システム、撮像装置、及び冷蔵庫は、カメラにより撮影された画像から冷蔵庫の庫内状況を適切に撮像した撮影画像を選定する用途に利用可能である。

１、１Ａ 物品管理システム
２、２Ａ 冷蔵庫
３、３Ａ 撮影装置
４ 端末装置
５ 物品管理サーバ
７ 撮像システム
２０Ａ 天面（上面）
２２ 製氷室（貯蔵室）
２３ 新鮮凍結室（貯蔵室）
２４ 冷凍室（貯蔵室）
２５ 野菜室（貯蔵室）
２６ 貯蔵室
２２Ａ、２３Ａ、２４Ａ、２５Ａ、２６Ａ 引出
３０１ 広角カメラ
３０２ 挟角カメラ（カメラ）
３５０、３５０Ａ 第２プロセッサ
３５１ 第１通信制御部
３５２、３５２Ａ 第２通信制御部
３５３、３５３Ａ 開閉判定部
３５４ 撮影制御部
３５５ 録画制御部
３５６ 生成部（選定部）
３６０、３６０Ａ 第２メモリ
３６１、３６１Ａ 制御プログラム
３６２ 撮影装置ＩＤ
３６３ 録画データ
３６４ 状態記憶部
ＡＴ 固定部材
ＡＴ１ 嵌合部材
ＡＴ２ 柱状部材
ＣＤ１ 第１撮影状態
ＣＤ２ 第２撮影状態（引出の所定の引出量における被撮影体のカメラによる撮影状態）
Ｄ１ 管理用データ
ＤＶ１ 第１録画データ
ＤＶ２ 第２録画データ
ＭＫ 撮影対象画像
ＭＤ 識別画像
ＭＤＡ 情報画像
ＭＤＢ 符号画像
ＰＤ１ 第１矩形画像
ＰＤ２ 第２矩形画像
ＭＦ 外枠画像
Ｐ１ 第１撮影画像
Ｐ２ 第２撮影画像（引出が引き出された状態である場合の撮影画像）
ＰＢ２ 撮像画像（カメラにより撮影された画像）
ＰＦ２ 撮影面
ＰＳ１、ＰＳ２、ＰＳ 被撮影体
ＴＲ１ 第１トレイ（収納ケース）
ＴＲ２ 第２トレイ

Claims (12)

1. 上面に開口が形成された引出を有する貯蔵室を備える冷蔵庫を撮影し、前記冷蔵庫の上面に配置されたカメラと、
   前記引出の上端部に配置され、前記引出の引出量に応じて前記カメラによる撮影状態が変化する被撮影体と、
   前記引出の所定の引出量における前記被撮影体の前記カメラによる撮影状態を記憶する状態記憶部と、
   前記状態記憶部が記憶した前記被撮影体の前記カメラによる撮影状態に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する選定部と、
   を備える、撮像システム。
2. 前記引出が所定の引出量において、前記被撮影体の撮影面が前記カメラの撮像領域に含まれるように、前記被撮影体は前記引出に配置される、
   請求項１に記載の撮像システム。
3. 前記引出は、引出可能に構成された収納ケースが配置され、
   前記被撮影体は、前記収納ケースに配置され、
   前記被撮影体を前記収納ケースの側面の上端部に固定する固定部材を備える、請求項２に記載の撮像システム。
4. 前記被撮影体の撮影面には、前記貯蔵室に収納される物品の種類、又は物品が収納される前記貯蔵室を示す識別情報を含む撮影対象画像が形成され、
   前記状態記憶部は、前記撮影対象画像を記憶し、
   前記選定部は、前記状態記憶部が記憶した前記撮影対象画像に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する、
   請求項１に記載の撮像システム。
5. 前記撮影対象画像は、
   矩形の外枠画像と、
   前記外枠画像の内部に形成され、前記貯蔵室に収納される物品の種類、又は物品が収納される前記貯蔵室を示す識別情報に対応する識別画像と、
   を含む、請求項４に記載の撮像システム。
6. 前記識別画像は、第１色の第１矩形画像と、第１色と異なる第２色の第２矩形画像とで構成され、
   前記第１矩形画像と前記第２矩形画像との配置のパターンは、前記識別情報に対応する、
   請求項５に記載の撮像システム。
7. 前記第１矩形画像のサイズは、前記第２矩形画像のサイズと同一であり、
   前記第１矩形画像と前記第２矩形画像とは、前記外枠画像の長手方向に沿って配列される、
   請求項６に記載の撮像システム。
8. 前記第１矩形画像のサイズ、及び前記第２矩形画像のサイズは、前記カメラの解像度、及び、前記貯蔵室が所定の引出量における前記カメラと前記撮影対象画像との距離に基づいて決定される、
   請求項７に記載の撮像システム。
9. 前記選定部は、前記カメラにより撮影された画像に含まれる前記外枠画像を検出することができ、且つ、前記カメラにより撮影された画像に含まれる前記撮影対象画像の識別画像が示す識別情報が、前記状態記憶部が記憶した前記撮影対象画像の識別画像が示す識別情報と一致した場合に、前記カメラにより撮影された画像を前記引出が引き出された状態である場合の撮影画像として選定する、
   請求項５から請求項８のいずれか１項に記載の撮像システム。
10. 前記選定部は、前記カメラが前記被撮影体を撮影したと判定した場合に、前記カメラが前記被撮影体を撮影したことをユーザに通知する、
    請求項１に記載の撮像システム。
11. 上面に開口が形成された引出を有する貯蔵室を備える冷蔵庫を撮影し、前記冷蔵庫の上面に配置されたカメラと、
    前記引出の所定の引出量における被撮影体の前記カメラによる撮影状態を記憶する状態記憶部と、
    前記状態記憶部が記憶した前記被撮影体の前記カメラによる撮影状態に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する選定部と、
    を備え、
    前記被撮影体は、前記引出の上端部に配置され、前記引出の引出量に応じて前記カメラによる撮影状態が変化する、撮像装置。
12. 上面に開口が形成された引出を有する貯蔵室を備える冷蔵庫を撮影し、前記冷蔵庫の上面に配置されたカメラと、
    前記引出の上端に配置され、前記引出の引出量に応じて前記カメラによる撮影状態が変化する被撮影体と、
    前記引出の所定の引出量における前記被撮影体の前記カメラによる撮影状態を記憶する状態記憶部と、
    前記状態記憶部が記憶した前記被撮影体の前記カメラによる撮影状態に基づいて、前記カメラにより撮影された画像から前記引出が引き出された状態である場合の撮影画像を選定する選定部と、
    を備える、冷蔵庫。