JP2015210059A - 冷蔵庫 - Google Patents

Abstract

【課題】人に関する特定情報を検知し、特定情報に応じた制御を行うことでユーザに利便性を提供することができる冷蔵庫を提供する。
【解決手段】実施形態の冷蔵庫１は、カメラ１５を有し、カメラ１５で撮像された画像に含まれている人に関する特定情報を検知すると、当該特定情報に応じた制御を行う。撮像した画像に前記特定情報が含まれているか否かを前記カメラ自身が検知する。
【選択図】図１

Description

本発明の実施形態は、冷蔵庫に関する。

従来、例えば特許文献１のように、庫内を撮像するカメラを備えた冷蔵庫が提案されている。このようなカメラを用いると、庫内の様子を確認することができ、利便性が向上すると考えられる。

特開２００２−２６７３３７号公報

しかしながら、例えば表情などの人に関する特定情報を検知することは行われていなかった。つまり、従来は撮像された画像に基づいてユーザ自身が判断を行っていただけであり、冷蔵庫側からユーザに対して利便性を提供することは行われていなかった。
そこで、人に関する特定情報を検知し、特定情報に応じた制御を行うことでユーザに利便性を提供することができる冷蔵庫を提供する。

実施形態の冷蔵庫は、カメラを有し、前記カメラで撮像された画像に含まれている人に関する特定情報を検知すると、当該特定情報に応じた制御を行う。

第１実施形態の冷蔵庫の構成を模式的に示す縦断断面図 第１実施形態の冷蔵庫にて行われる処理の流れを模式的に示す図 第１実施形態における冷蔵庫と人との関係を模式的に示す図で、（Ａ）は手の位置を模式的に示す図、（Ｂ）は手の形状を模式的に示す図 第２実施形態の冷蔵庫にて行われる処理の流れを模式的に示す図 第２実施形態の冷蔵庫に登録されている設定を示す図で、（Ａ）は認証結果と、利用頻度、物品、表示内容およびアドバイスとの対応関係を示す図、（Ｂ）は認証結果と、ロックの非解除条件および表示内容との対応関係を示す図 第３実施形態の冷蔵庫を適用した家電ネットワークの構成を模式的に示す図 第３実施形態の冷蔵庫にて行われる処理の流れを模式的に示す図

以下、複数の実施形態について図面を参照しながら説明する。なお、複数の実施形態において実質的に共通する部位には同一の符号を付し、その詳細な説明は省略する。
（第１実施形態）
以下、第１実施形態について図１から図３を参照しながら説明する。

図１に示すように、実施形態の冷蔵庫１は、本体２の内部に、上部から順に、食材を貯蔵するための貯蔵庫である冷蔵温度帯の冷蔵室３および野菜室４と、冷凍温度帯の製氷室５および冷凍室６とが設けられている。野菜室４と製氷室５との間は、断熱仕切壁により仕切られている。冷蔵室３は、図１に示すように、扉３ａによって開閉され、野菜室４、製氷室５および冷凍室６は、それぞれ引き出し式の扉４ａ、扉５ａおよび扉６ａによってそれぞれ開閉される。なお、図示は省略するが、冷蔵庫１には、製氷室５に隣り合うように上部冷凍室が配置されている。これらの貯蔵庫の構成は一例であり、各貯蔵庫の配置順が異なっていたりしてもよい。

冷蔵庫１には、扉をロックするためのロック機構が設けられている。具体的には、扉３ａにはロック機構３ｂが設けられており、扉４ａにはロック機構４ｂが設けられており、扉５ａにはロック機構５ｂが設けられており、扉６ａにはロック機構６ｂが設けられている。また、冷蔵庫１には、扉の開放を検知する開扉センサが設けられている。具体的には、扉３ａには開扉センサ３ｃが設けられており、扉４ａには開扉センサ４ｃが設けられており、扉５ａには開扉センサ５ｃが設けられており、扉６ａには開扉センサ６ｃが設けられている。

また、扉３ａの庫内側には、冷蔵室３内の情報を取得する庫内情報取得部３ｄが設けられている。この庫内情報取得部３ｄは、本実施形態では、庫内を撮像するための庫内用カメラと、貯蔵されている食品の温度を検知する食品温度センサとを備えており、冷蔵室３内の画像および食材の温度を庫内情報として取得する。また、扉４ａおよび扉６ａの庫内側にも、それぞれ庫内情報取得部４ｄおよび庫内情報取得部６ｄが設けられており、野菜室４および冷凍室６の庫内情報を取得する。これら庫内情報取得部３ｄ、４ｄ、６ｄは、庫内情報取得手段を構成する。なお、上部冷凍室にもロック手段や開扉センサおよび庫内情報取得部を設けてもよい。

この冷蔵庫１は本体２内に設けられている制御回路７によって冷凍サイクルが制御されている。また、この制御回路７によって、上記したロック手段のロックを解除する制御、開扉センサにより扉の開放状態を検知する制御、庫内情報取得部により庫内情報を取得する制御が行われる。また、制御回路７は、現在時刻を取得するためのタイマ機能も備えている。
冷蔵庫１の扉３ａの前面側には、画像やメッセージ等を表示してユーザに視覚的な報知を行う表示部１０と、音声を出力してユーザに聴覚的な報知を行うスピーカ１１とが設けられている。これら表示部１０およびスピーカ１１は、報知手段を構成する。

また、冷蔵庫１の前面側には、冷蔵庫１に対する操作を行う操作パネル２４（図６参照）、照度センサ１２、人感センサ１３および周囲温度センサ１４が設けられている。照度センサ１２は、庫外の照度を検知する。人感センサ１３は、例えば赤外線センサ等により構成されており、冷蔵庫１の周囲に存在する人を検知する。周囲温度センサ１４は、庫外の温度を検知する。これら照度センサ１２、人感センサ１３および周囲温度センサ１４は、庫外情報取得手段を構成している。

これら照度センサ１２、人感センサ１３および周囲温度センサ１４は、本実施形態に関連して、冷蔵庫１の近傍に存在する人を検知する人検知手段を構成している。人感センサ１３であれば、直接的に人を検知することができる。照度センサ１２であれば、夜間等の暗い時間帯において検知した照度が所定の基準値を超えた場合には照明機器が点灯したと判断することができ、もって、人が冷蔵庫１の近傍にいることを間接的に検知することができる。温度センサであれば、室温が所定の基準値を超えた場合には例えば暖房が行われていると判断することができ、もって、人が冷蔵庫１の近傍にいることを間接的に検知することができる。

また、扉３ａの前面側には、カメラ１５が設けられている。このカメラ１５は、主に冷蔵庫１の正面側の画像を撮像する。カメラ１５の電源は冷蔵庫１と連動しており、冷蔵庫１が通電されているときにはカメラ１５にも通電されている。ただし、カメラ１５は、基本的には省電力状態で待機しており、後述するように冷蔵庫１の近傍に人が存在することが検知されると動作状態に移行する。

そして、カメラ１５は、動作状態に移行すると、自動で撮像を行うとともに、撮像した画像に含まれている人に関する特定情報（以下、便宜的に人情報とも称する）を検知する。つまり、本実施形態の場合、特定情報の検知は、カメラ１５によって行われている。そして、カメラ１５により検知された特定情報が制御回路７に送信され、特定情報を受信した制御回路７によって、後述するように特定情報に応じた制御が行われる。このカメラ１５は、言わば人情報を検知する人情報検知手段として機能する。

ここで、人検知手段としての照度センサ１２、人感センサ１３および周囲温度センサ１４等による人の検知と、人情報検知手段としてのカメラ１５により行われる人に関する特定情報の検知との違いについて説明する。
人検知手段は、上記したように冷蔵庫１の周囲に存在する人を検知するものであり、必ずしも冷蔵庫１を利用する場合だけでなく、冷蔵庫１が設置されている例えばキッチン等に人が存在することも検知する。本実施形態では、カメラ１５は通常は省電力状態となっており、人検知手段により人が検知されたときに、カメラ１５を撮像動作が可能な動作状態に移行させている。つまり、人検知手段は、カメラ１５の動作を開始する起因となる人の存在を検知する。

これに対して、人情報検知手段としてのカメラ１５は、人を撮像し、その画像に写っている人に関する各種の情報を検知する。具体的には、カメラ１５は、撮像した画像に基づいて、人が存在するか否かの情報、手の位置や指の向きあるいは手のひらが見えているかなどの人の手に関する情報、表情や視線などの人の顔に関する情報などを、特定情報として検知する。また、カメラ１５は、人の顔の情報に基づいて個人の認証も行う。なお、人が存在するか否かの情報を利用すればカメラ１５を人検知手段として用いることもできるが、本実施形態では、省電力化を図るため、カメラ１５とは別に人検知手段を設けている。

次に上記した冷蔵庫１の作用について説明する。
冷蔵庫１は、人検知手段により冷蔵庫１の周囲に人が存在することが検知されると、カメラ１５を動作状態に移行させ、図２に示す処理を実行する。冷蔵庫１は、カメラ１５により人を検知したか否かを判定している（Ｓ１）。このステップＳ１では、冷蔵庫１は人が存在するという情報が検知されたこと、より具体的には、冷蔵庫１の正面近傍に人が存在するという情報をカメラ１５によって検知している。これは、冷蔵庫１の正面近傍に人が存在する場合、その人が冷蔵庫１を使用する可能性が高いと判断できるためである。このステップＳ１の処理は、上記した人情報の検知に相当する。
冷蔵庫１は、人を検知していない場合には（Ｓ１：ＮＯ）、処理を終了する。つまり、人を検知していない場合には、後述するステップＳ６における扉のロックの解除を行わない。

これに対して、冷蔵庫１は、人を検知した場合には（Ｓ１：ＹＥＳ）、表示部１０の表示を開始する（Ｓ２）。つまり、冷蔵庫１の場合、カメラ１５と表示部１０とは互いに連動して動作する。このとき、人を検知した後に表示部１０の表示を開始するのは、通常は表示部１０を省電力状態にしておき、電力消費を抑制するためである。なお、上記したようにカメラ１５は動作状態に移行すると自動で撮像を行うため、ステップＳ２と後述するステップＳ３とは実際にはほぼ同時に行われることになる。

冷蔵庫１は、カメラ１５により人を撮像すると（Ｓ３）、現在時刻に応じたメッセージを報知する（Ｓ４）。より具体的には、冷蔵庫１は、メッセージを表示部１０に表示するとともに、スピーカ１１から音声出力する。ここで、報知されるメッセージは、例えば現在時刻が朝であれば「おはようございます」のようなメッセージであり、夜であれば「こんばんは」のようなメッセージである。つまり、冷蔵庫１を擬人化している。なお、メッセージの表示は、以下のステップＳ５およびＳ６の処理と前後してもよいし、同時に行ってもよい。このステップＳ４の処理は、特定情報に応じた制御に相当する。

そして、冷蔵庫１は、カメラ１５で撮像した画像に基づいて、人の手に関する情報、手の位置を検知する（Ｓ５）。冷蔵庫１には、カメラ１５から受信した手の位置と、冷蔵庫１の貯蔵庫の高さとの関係が予め設定されている。具体的には、冷蔵庫１には、図３（Ａ）に示すような各貯蔵室の扉の位置に応じた領域Ｒ１〜Ｒ４が設定されており、カメラ１５で撮像した画像において、人Ｍ１（ユーザ）の手Ｍ２がどの領域に位置しているかを検知する。

手Ｍ２の位置を検知すると、冷蔵庫１は、対応する扉のロックを解除する。例えば、手Ｍ２が領域Ｒ１に位置している場合、人Ｍ１は冷蔵室３の扉３ａを開放しようとしていると想定される。そのため、冷蔵庫１は、手Ｍ２が領域Ｒ１に位置している場合には、扉３ａのロック機構３ｂを解除して、扉３ａを開放可能な状態とする。同様に、冷蔵庫１は、手Ｍ２が領域Ｒ２に位置している場合には、扉４ａのロック機構４ｂを解除し、手Ｍ２が領域Ｒ３に位置している場合には、扉５ａのロック機構５ｂを解除し、手Ｍ２が領域Ｒ４に位置している場合には、扉６ａのロック機構６ｂを解除する。このステップＳ６の処理は、特定情報に応じた制御に相当する。

このとき、冷蔵庫１の構成によっては、例えば冷蔵室３の取手が扉３ａの下部に設けられ、野菜室４の取手が扉４ａの上部に設けられるなど、両者の位置が近い場合がある。そのため、例えば、手Ｍ２が領域Ｒ１の下端側に検知されたときには扉３ａと扉４ａの双方のロックを解除してもよい。また、各領域の下端側と上端側とをオーバーラップさせるような構成としてもよい。

また、人Ｍ１が冷凍室６の扉６ａを開放しようとしているとき、カメラ１５の取り付け位置や視野角の大きさ等によっては、手Ｍ２が領域Ｒ３と領域Ｒ４のいずれに位置しているのかを正確に検知できない可能性がある。そのため、手Ｍ２の形を検知する構成とし、図３（Ｂ）に示すように例えば手Ｍ２に対して指Ｍ３（例えば親指）が上方に向かって伸びていれば冷蔵室３の扉３ａのロックを解除し、指Ｍ３が下方に向かって伸びていれば冷凍室６の扉６ａのロックを解除するようにしてもよい。
このように、冷蔵庫１は、カメラ１５により特定情報を検知し、その特定情報に応じた制御を行っている。

以上説明した実施形態によれば、次のような効果を得ることができる。
冷蔵庫１は、カメラ１５を有し、そのカメラ１５で撮像された画像に含まれている人に関する特定情報を検知すると、当該特定情報に応じた制御を行う。つまり、冷蔵庫１は、冷蔵庫１を利用するユーザに応じた制御を行う。これにより、ユーザに利便性を提供することができる。

冷蔵庫１は、撮像した画像に特定情報が含まれているか否かを、カメラ１５にて検知する。換言すると、カメラ１５自身が、特定情報を検知する機能を備えている。このため、冷蔵庫１の制御回路７に大きな変更を加えることなく、また、制御回路７の処理負荷が大幅に増加するような状況を避けつつ、人情報を検知することができる。
冷蔵庫１は、貯蔵室の扉をロックするロックを備え、特定情報として当該冷蔵庫１の正面側に位置する人を検知するとともに、人が検知されていないときには扉のロックを解除しない制御を行う。これにより、不要に冷蔵庫１の扉が開放されるおそれを低減することができる。

また、冷蔵庫１は、検知した人の手の位置に応じた扉のロックを解除する制御を行う。これにより、不要な扉の開閉を抑制しつつも、ユーザが所望する扉は開放可能とすることができる。
冷蔵庫１では、人検知手段により人が検知されたとき、カメラ１５が動作状態になる。換言すると、カメラ１５は、人検知手段により人が検知されていない場合には省電力モードで待機している。これにより、省電力化を図ることができるとともに、人検知手段により人が検知された時点で動作状態となることで起動時間を確保でき、人が冷蔵庫１の正面つまりはカメラ１５の正面に来たときに迅速に撮像することができる。
冷蔵庫１は、報知手段としての表示部１０を備えており、特定情報に応じた報知を行う。本実施形態の場合、時刻に応じた挨拶を表示出力および音声出力する。これにより、冷蔵庫１をあたかも擬人化させることができる。
冷蔵庫１は、特定情報として、人の手を検知する。ユーザが冷蔵庫１を利用する場合、手で扉を開けることが想定される。そのため、特定情報として人の手を検知することにより、ユーザの希望に応じた制御を行うことができる。

また、特定情報として手のひらを検知し、手のひらが検知されたとき、つまり、ユーザが冷蔵庫１に対して手のひらを見せているとき、その時刻に応じた報知を行ってもよい。例えばユーザが手のひらを明示的に冷蔵庫１側に向けた場合、ユーザが冷蔵庫１に挨拶していると考えられる。そのため、手のひらを検知したときに冷蔵庫１側から挨拶を報知することで、冷蔵庫１を擬人化させることができる。なお、上記したロックの解除との区別を付けるため、例えば人の顔の付近で手のひらを検知した場合等に挨拶をするようにしてもよい。
また、本実施形態ではカメラ１５を１つ設けた構成を例示したが、各扉にそれぞれカメラ１５を設けたり、扉３ａと扉４ａとにカメラ１５を設けたりする構成としてもよい。これにより、例えば小さい子供であっても正面から撮像すること等が可能となり、より細やかな対応を行うことができる。

（第２実施形態）
以下、第２実施形態について図４および図５を参照しながら説明する。第２実施形態では、特定情報の種類が第１実施形態と異なっている。なお、冷蔵庫１の構成は第１実施形態と共通するので、図１も参照しながら説明する。
第２実施形態の冷蔵庫１は、特定情報として人の顔を検知する。なお、本実施形態の人の顔の検知と、第１実施形態で示した人の手の検知とを同時に行ってもよい。
冷蔵庫１は、人検知手段により冷蔵庫１の周囲に人が存在することが検知されると、カメラ１５を動作状態に移行させ、図４に示す処理を実行する。冷蔵庫１は、カメラ１５により人を検知すると（Ｓ１１）、表示部１０の表示を開始する（Ｓ１２）。続いて、冷蔵庫１は、人を撮像し（Ｓ１３）、顔認証できたか否かを判定する（Ｓ１４）。このとき、認証用のデータは予め冷蔵庫１に登録されている。

冷蔵庫１は、顔認証できなかった場合には（Ｓ１４：ＮＯ）、処理を終了する。なお、上記したように顔認証自体はカメラ１５により行われるため、ステップＳ１４においては、冷蔵庫１の制御回路７は、認証ができた旨の認証結果をカメラ１５から受信したか否かを判定することになる。また、ステップＳ１４では、顔が検知できない状態、つまり、顔が撮像できなかった状態も顔認証できなかった場合に含めて判定している。

これに対して、冷蔵庫１は、顔認証できた場合には（Ｓ１４：ＹＥＳ）、つまり、カメラ１５から認証結果を受信した場合には、庫内情報を取得する（Ｓ１５）。このとき、冷蔵庫１は、冷蔵庫１は、図５（Ａ）に示す設定に基づいて、庫内情報を取得する。この図５（Ａ）には認証した人とその人の過去の利用状況とが対応付けられて記憶されている。そのため、冷蔵庫１は、ステップＳ１４における認証結果が「父」であれば、過去の利用状況に鑑みて、利用頻度の高い扉が冷蔵室３の扉３ａであり、取り出すと品物がビールであると予想して、表示部１０に表示する内容として庫内情報取得部３ｄで取得したビールの温度（ビールの冷え具合）、合わせて表示するアドバイスとして「飲み過ぎに注意しましょう」を設定する。

なお、認証結果が「母」であった場合には、過去の利用状況に鑑みて、利用頻度の高い扉が野菜室４の扉４ａであり、取り出すと品物が野菜であると予想して、表示部１０に表示する内容として野菜の種類つまり庫内情報取得部３ｄで取得した野菜室４の内部の画像、合わせて表示するアドバイスとして「緑黄色野菜をとりましょう」を設定する。また、認証結果が「子供」であった場合には、過去の利用状況に鑑みて、利用頻度の高い扉が冷凍室６の扉６ａであり、取り出すと品物がアイスクリーム（図５には単に「アイス」と示す）であると予想して、表示部１０に表示する内容としてアイスクリームの種類つまり庫内情報取得部６ｄで取得した冷凍室６の内部の画像、合わせて表示するアドバイスとして「食べ過ぎないでね」を設定する。

その後、冷蔵庫１は、認証した人に応じたメッセージを報知する（Ｓ１６）。具体的には、認証した人が父であれば、上記したようにビールの温度と「飲み過ぎに注意しましょう」といったアドバイスとを表示する。そして、冷蔵庫１は、対応する扉のロックを解除する（Ｓ１７）。
なお、図５には示していないが、冷蔵庫１は、実際の利用状況を記憶する。例えば、上記したように父に対して冷蔵室３の扉３ａのロックを解除したとき、実際に扉３ａが開閉されたか否かを開扉センサ３ｃにより検知する。また、他の扉が開放されたか否かを開扉センサ４ｃ〜６ｃ等により検知する。そして、「父」の認証結果と実際に開閉された扉とを対応付けて記憶することで、利用頻度の高い扉を学習する。
このように、冷蔵庫１は、カメラ１５により特定情報として人の顔を検知し、その特定情報に応じた制御を行っている。

以上説明した実施形態によれば、次のような効果を得ることができる。
冷蔵庫１は、特定情報として、人の顔を検知する。冷蔵庫１を利用するユーザが異なれば、その利用状況も異なると予想される。そこで、人の顔を検知し、それに応じた制御を行うことで個別のユーザごとへの対応が可能となり、ユーザに取ってより利便性の高い制御を行うことができる。

冷蔵庫１は、特定情報に基づいて人を認証したとき、認証した人に応じた報知を行う。冷蔵庫１は、例えばユーザがよく使う貯蔵室の状況を報知したり、アドバイスを提示したりする。これにより、より冷蔵庫１を擬人化させることができる。

そして、冷蔵庫１は、認証した人の該冷蔵庫の利用状況を収集する制御を行う。これにより、費用頻度の高い扉を学習すること等ができ、より細かな応答を行うことができる。
冷蔵庫１は、貯蔵庫内の情報を取得する庫内情報取得部を備え、認証した人の利用頻度の高い貯蔵庫の状況を表示部１０に表示する制御を行う。これにより、扉を開けなくても庫内の様子を把握することができ、庫内の温度が過度に上昇することを防止でき、省電力化に貢献することができる。

冷蔵庫１は、人の顔が検知されていないときもふくめて、顔認証できなかったときには扉のロックを解除しない制御を行う。これにより、不要な扉の開閉を制限することができる。
特定情報に応じた制御として、人の顔を検知したとき、その時刻に応じた報知を行う制御を行ってもよい。例えば第１実施形態で示したように、朝であれば「おはようございます」といったメッセージを表示や音声にて出力してもよい。

特定情報に応じた制御として、認証した人に応じて扉のロックを解除するか否かを判断する制御を行ってもよい。また、時刻に応じてロックを解除するか否かを判断してもよい。例えば、図５（Ｂ）に示すように、認証した人と、ロックを解除しない条件（非解除条件）とを対応付けて記憶しておき、例えば「父」であれば２３時以降に認証された場合（つまり、冷蔵庫１を利用しようとした場合）には、ロックを解除せず、例えば「メタボに注意しましょう」といったアドバイスを表示させるとよい。あるいは、「子供」であれば、例えば１６時から１８時といった夕食前の時間にはアイスクリームを食べないように、「食事前は食べてはだめです」といったアドバイスを表示させるとよい。もちろん、いわゆるチャイルドロック機能として利用することもできる。これらにより、健康への気配りを推奨することができる等、冷蔵庫１の利用価値を向上させることができる。

特定情報に応じた制御として、認証した人に応じて扉が開放されてから閉鎖するように注意を促すまでの時間を変更する制御を行ってもよい。例えば、認証した人が「子供」であれば、閉め忘れが考えられるため、注意を促すための時間を通常よりも短くしてもよい。あるいは、認証した人が「母」であれば、献立の検討中であったり、まとめ買いした食材を入れていたりすること等が考えられるため、注意を促すための時間を通常よりも長くしてもよい。これにより、不必要に注意を促すようなことを抑制できるとともに、扉の閉め忘れにも対応することができる。

特定情報に応じた制御として、認証した人の顔の位置に応じた棚の位置を提案する制御を行ってもよい。人の顔の位置が検知できれば、おおよその身長を把握することができる。そして、冷蔵庫１には、図１に示したように冷蔵室３内に高さの異なる棚８ａ〜８ｄが存在しているため、認証した人の身長に応じて使いやすい棚を提案することで、冷蔵庫１の使い勝手を向上させることができる。

特定情報に応じた制御として、人の顔を検知したとき、該冷蔵庫１の操作パネル２４（図６参照）を操作可能状態にする制御を行ってもよい。人の顔を検知できたと言うことは、人が冷蔵庫１にほぼ正対している状態であり、冷蔵庫１と使う可能性が高いと考えられる。そのため、人の顔を検知したときに操作パネルを点灯させる等の動作可能状態とすることで、冷蔵庫１が使用されないときの省電力化を図ることができるとともに、冷蔵庫１が使用されるときにはユーザを待たせることがない。

同様に、特定情報に応じた制御として、人の顔を検知したとき、表示部１０やスピーカ１１等の報知手段を動作可能状態にする制御を行ってもよい。この場合も、冷蔵庫１が使用されないときの省電力化を図ることができる。
また、特定情報として、人の顔を検知したとき、人の目線を合わせて検知してもよい。そして、特定情報に応じた制御として人の目線が示す位置に応じた扉のロックを解除する制御を行ってもよい。
また、特定情報に応じた制御として、人の目線が示す位置の照度を上げる制御を行ってもよい。例えば目線が冷蔵室３の下方に向いている場合、下方側の照度を上げることで庫内を見やすくすることができる。

（第３実施形態）
以下、第３実施形態について図６および図７を参照しながら説明する。第３実施形態では、特定情報の種類が第１実施形態と異なっている。なお、冷蔵庫１の構成は第１実施形態と共通するので、図１も参照しながら説明する。
第３実施形態の冷蔵庫１は、特定情報として人の表情を検知する。なお、人の表情は、第２実施形態で例示した人の顔の検知と合わせて行ってもよいし、第１実施形態で示した人の手の検知とを同時に行ってもよい。

図５に示すように、本実施形態の冷蔵庫１は、アクセスポイント２０を介して例えばインターネット等のネットワーク２１に接続されている。このネットワーク２１には、サーバ２２、および、ユーザが所有する携帯端末２３等も接続されている。なお、携帯端末２３は冷蔵庫１のユーザが所有するものに限らず、ユーザの家族が所有するものであってもよい。また、ネットワーク２１には、例えば遠隔地に住む祖父母宅に設置されている他の冷蔵庫が接続されていてもよい。

冷蔵庫１は、人検知手段により冷蔵庫１の周囲に人が存在することが検知されると、カメラ１５を動作状態に移行させ、図７に示す処理を実行する。冷蔵庫１は、カメラ１５により人を検知すると（Ｓ２１）、表示部１０の表示を開始する（Ｓ２２）。続いて、冷蔵庫１は、人を撮像し（Ｓ２３）、表情を認識する（Ｓ２４）。この表情の認識も、カメラ１５により行われる。このとき、カメラ１５は、例えば明るい表情や暗い表情といった喜怒哀楽を含めて人の表情を検知（認識）する。

続いて、冷蔵庫１は、表情に関する情報をサーバ２２に送信し、サーバ２２から表情に応じたデータを取得する（Ｓ２５）。このとき、サーバ２２には、その表情に対応するメッセージが、時刻に対応付けてデータとして設定されている。具体的には、例えば、暗い表情で時刻が朝であれば、「スマイルで行きましょう」といった文章がデータとして設定されている。あるいは、サーバ２２には、疲れた表情で時刻が夜であれば「リラックスしてお休みなさい」といった文章がデータとして設定されている。なお、設定されるデータとしては、例えば気分を高揚させるような画像あるいは音楽や、リラックスさせるような画像あるいは音楽等であってもよい。

冷蔵庫１は、サーバ２２からデータを受信すると、データや時刻に応じたメッセージを報知する（Ｓ２６）。このとき、冷蔵庫１は、例えば表示部１０に「スマイルで行きましょう」といった文章を表示出力し、スピーカ１１から「いってらっしゃい」といった音声を出力する。
このように、冷蔵庫１は、特定情報として人の表情を検知し、その特定情報に応じた制御を行っている。

以上説明した実施形態によれば、次のような効果を得ることができる。
冷蔵庫１は、特定情報として人の表情を検知し、その表情に応じた制御を行っている。これにより、単なる貯蔵庫として以上の役割を冷蔵庫１に与えることができる。
冷蔵庫１は、例えば暗い表情であれば明るくするためのメッセージを報知すること等により、ユーザの気分を向上させることができる。つまり、冷蔵庫１を擬人化させることができ、簡易的な人工知能として機能させることができる。

特定情報に応じた制御として、前記特定情報に基づいて認証した人の表情を表示部１０に表示する制御を行ってもよい。具体的には、例えば子供が喜んでいる表情や落ち込んでいる表情などを表示部１０に表示することで、家族が子供の様子を把握することができる。このとき、第２実施形態で例示した顔認証と組み合わせて、子供の暗い表情であれば両親に対して表示するようにしたり、父の疲れた表情であれば子供には見せずに母に対してだけ表示するようにしたりしてもよい。これらにより、冷蔵庫１にて家族を想うきっかけを提供することができる。もちろん、遠隔地の祖父母等の表情であっても同様である。

（その他の実施形態）
本発明は、上記した一実施形態にて例示したものに限定されることなく、その範囲を逸脱しない範囲で任意に例えば以下のように変形あるいは拡張することができる。
各実施形態で示したメッセージ等は一例であり、それらに限定されるものではない。
各実施形態の構成を組み合わせてもよい。例えば、第１実施形態と第２実施形態とを組み合わせて、人の顔と手との双方を検知したときに、冷蔵庫１を利用しようとしていると判断してロックを解除する構成としてもよい。

カメラ１５で撮像した画像を表示部１０に表示してもよい。そのとき、第３実施形態で例示したようにサーバ２２から表情に対応するデータを取得し、そのデータを合わせて表示してもよい。
冷蔵庫１で撮像した画像を、例えば祖父母宅の冷蔵庫に送信可能としてもよい。また、例えば母から子供へのメッセージを伝える伝言板の機能を冷蔵庫１に持たせてもよい。
サーバ２２に携帯端末２３等から送信された電子メール等を記憶させ、第２実施形態にて顔認証した際に該当する電子メール等を表示させてもよい。

各実施形態において人を検知したときや、第２実施形態にて顔認証できなかったときなどに撮像した画像を保存可能としてもよい。これにより、防犯カメラの機能を冷蔵庫１に持たせることができる。
ロック機構により扉のロックおよびロックの解除を行う代わりに、特定情報を検知するとソレノイドの駆動により冷蔵庫の筺体に設けられた棒が扉側に押し出されることにより、扉を自動で開放する扉開放手段を設けてもよい。そして、特定情報に応じた制御として、扉を自動で開放する制御を行ってもよい。

各実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。本実施形態およびその変形は、発明の範囲および要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

図面中、１は冷蔵庫、３ａ〜６ａは扉、３ｂ〜６ｂはロック機構、３ｃ〜６ｃは開扉センサ、３ｄ〜６ｄは庫内情報取得部（庫内情報取得手段）、８ａ〜８ｄは棚、１０は表示部（報知手段）、１１はスピーカ（報知手段）、１５はカメラ、２４は操作パネル、Ｍ１は人、Ｍ２は人の手、Ｍ３は指を示す。

Claims (24)

1. カメラを有し、前記カメラで撮像された画像に含まれている人に関する特定情報を検知すると、当該特定情報に応じた制御を行うことを特徴とする冷蔵庫。
2. 撮像した画像に前記特定情報が含まれているか否かを前記カメラ自身が検知することを特徴とする請求項１記載の冷蔵庫。
3. 貯蔵室の扉をロックするロック機構を備え、
   前記特定情報として、当該冷蔵庫の正面側に位置する人を検知し、
   前記特定情報に応じた制御として、人が検知されていないときには扉のロックを解除しない制御を行うことを特徴とする請求項１または２記載の冷蔵庫。
4. 報知手段を備え、
   前記特定情報に応じた制御として、前記特定情報に応じた報知を行う制御を行うことを特徴とする請求項１から３のいずれか一項記載の冷蔵庫。
5. 前記特定情報として、人の手を検知することを特徴とする請求項１から４のいずれか一項記載の冷蔵庫。
6. 貯蔵室の扉をロックするロック機構を備え、
   前記特定情報に応じた制御として、前記特定情報に基づいて検知した人の手の位置に応じた扉のロックを解除する制御を行うことを特徴とする請求項５記載の冷蔵庫。
7. 報知手段を備え、
   前記特定情報に応じた制御として、前記特定情報に基づいて人の手のひらを検知したとき、その時刻に応じた報知を行う制御を行うことを特徴とする請求項５または６記載の冷蔵庫。
8. 前記特定情報として、人の顔を検知することを特徴とする請求項１から７のいずれか一項記載の冷蔵庫。
9. 報知手段を備え、
   前記特定情報に応じた制御として、前記特定情報に基づいて人を認証したとき、認証した人に応じた報知を行う制御を行うことを特徴とする請求項８記載の冷蔵庫。
10. 報知手段を備え、
    前記特定情報に応じた制御として、人の顔を検知したとき、その時刻に応じた報知を行う制御を行うことを特徴とする請求項８または９記載の冷蔵庫。
11. 前記特定情報に応じた制御として、前記特定情報に基づいて人を認証したとき、認証した人の該冷蔵庫の利用状況を収集する制御を行うことを特徴とする請求項１０記載の冷蔵庫。
12. 表示部と、
    貯蔵庫内の情報を取得する庫内情報取得手段と、を備え、
    前記特定情報に応じた制御として、認証した人の利用頻度の高い貯蔵庫の状況を前記表示部に表示する制御を行うことを特徴とする請求項８から１１のいずれか一項記載の冷蔵庫。
13. 貯蔵室の扉をロックするロック機構を備え、
    前記特定情報に応じた制御として、人の顔が検知されていないときには扉のロックを解除しない制御を行うことを特徴とする請求項８から１２のいずれか一項記載の冷蔵庫。
14. 貯蔵室の扉をロックするロック機構を備え、
    前記特定情報に応じた制御として、前記特定情報に基づいて認証した人に応じて扉のロックを解除するか否かを判断する制御を行うことを特徴とする請求項８から１３のいずれか一項記載の冷蔵庫。
15. 前記特定情報に応じた制御として、前記特定情報に基づいて認証した人に応じて、扉が開放されてから注意を促すまでの時間を変更する制御を行うことを特徴とする請求項８から１４のいずれか一項記載の冷蔵庫。
16. 前記特定情報に応じた制御として、前記特定情報に基づいて認証した人の顔の位置に応じた棚の位置を提案する制御を行うことを特徴とする請求項８から１５のいずれか一項記載の冷蔵庫。
17. 前記特定情報に応じた制御として、前記特定情報に基づいて人の顔を検知したとき、該冷蔵庫の操作パネルを操作可能状態にする制御を行うことを特徴とする請求項８から１６のいずれか一項記載の冷蔵庫。
18. 報知手段を備え、
    前記特定情報に応じた制御として、人の顔を検知したとき、前記報知手段を動作可能状態にする制御を行うことを特徴とする請求項８から１７記載の冷蔵庫。
19. 前記特定情報として、人の目線を検知することを特徴とする請求項１から１８のいずれか一項記載の冷蔵庫。
20. 貯蔵室の扉をロックするロック機構を備え、
    前記特定情報に応じた制御として、前記特定情報に基づいて検知した人の目線が示す位置に応じた扉のロックを解除する制御を行うことを特徴とする請求項１９記載の冷蔵庫。
21. 前記特定情報に応じた制御として、前記特定情報に基づいて検知した人の目線が示す位置の照度を上げる制御を行うことを特徴とする請求項１９または２０記載の冷蔵庫。
22. 前記特定情報として、人の表情を検知することを特徴とする請求項１から２１のいずれか一項記載の冷蔵庫。
23. 報知手段を備え、
    前記特定情報に応じた制御として、前記特定情報に基づいて検知した人の表情に応じたメッセージを報知する制御を行うことを特徴とする請求項２２記載の冷蔵庫。
24. 表示部を備え、
    前記特定情報に応じた制御として、前記特定情報に基づいて検知した人の表情を前記表示部に表示する制御を行うことを特徴とする請求項２２または２３記載の冷蔵庫。

Images