JP6673498B2 - Refrigerator system - Google Patents

Refrigerator system Download PDF

Info

Publication number
JP6673498B2
JP6673498B2 JP2018551002A JP2018551002A JP6673498B2 JP 6673498 B2 JP6673498 B2 JP 6673498B2 JP 2018551002 A JP2018551002 A JP 2018551002A JP 2018551002 A JP2018551002 A JP 2018551002A JP 6673498 B2 JP6673498 B2 JP 6673498B2
Authority
JP
Japan
Prior art keywords
image
storage room
refrigerator
storage
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018551002A
Other languages
Japanese (ja)
Other versions
JPWO2018092310A1 (en
Inventor
毅 内田
毅 内田
伊藤　敬
敬 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of JPWO2018092310A1 publication Critical patent/JPWO2018092310A1/en
Application granted granted Critical
Publication of JP6673498B2 publication Critical patent/JP6673498B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00—Arrangement or mounting of control or safety devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Thermal Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
  • Devices That Are Associated With Refrigeration Equipment (AREA)

Description

この発明は、冷蔵庫システムに関するものである。   The present invention relates to a refrigerator system.

庫内を撮像する撮像手段を備えた食品保存庫と、食品保存庫内の撮像画像を蓄積し、かつ情報ネットワークに接続されたローカルデータベースとを有するホームネットワーク装置を備え、携帯情報端末によりインターネット等の情報ネットワークを通じてホームネットワーク装置にアクセスし、ローカルデータベースに保持されている食品保存庫内の撮像画像をダウンロードしてディスプレイに表示する冷蔵庫システムが知られている（例えば、特許文献１参照）。   A home storage device having a food storage provided with imaging means for imaging the inside of the storage, and a local database connected to an information network for storing the captured images in the food storage; A refrigerator system is known in which a home network device is accessed through an information network, and a captured image in a food storage kept in a local database is downloaded and displayed on a display (for example, see Patent Document 1).

日本特開２００２−２４３３３５号公報Japanese Patent Application Laid-Open No. 2002-243335

しかしながら、特許文献１に示されるような冷蔵庫システムにおいては、携帯情報端末であるユーザ端末で、食品保存庫である冷蔵庫の貯蔵室内の画像（以下、「貯蔵室画像」という）を確認する際、ユーザ端末から常にインターネット等の外部の情報ネットワークを通じて、ホームネットワーク内のローカルデータベースに接続することになる。このため、まず第１に、冷蔵庫本体が設置された宅内の通信装置と宅外の機器との通信機会が多くなり、通信負荷及び通信費用が増大してしまう。また、第２には、宅内の通信装置と宅外の機器との通信機会が多くなることで、インターネット上への情報流出のリスク及びセキュリティホールの発生等のセキュリティリスクが大きくなることが懸念される。   However, in a refrigerator system as disclosed in Patent Document 1, when a user terminal as a portable information terminal checks an image in a storage room of a refrigerator as a food storage (hereinafter, referred to as a “storage room image”), The user terminal always connects to a local database in the home network through an external information network such as the Internet. For this reason, first, communication opportunities between the communication device in the house where the refrigerator main body is installed and the equipment outside the house increase, and the communication load and communication cost increase. Second, there is a concern that the increased communication opportunities between the in-home communication device and the out-of-home device will increase the risk of information leakage onto the Internet and the risk of security such as the occurrence of security holes. You.

この発明は、このような課題を解決するためになされたものである。その目的は、冷蔵庫本体が設置された宅内及び宅外の両方のユーザ端末から、冷蔵庫本体の最新の貯蔵室画像を確認でき、かつ、宅内の通信装置と宅外の機器との通信が必要な機会を極力減らし、通信負荷及び通信費用の削減、並びに、インターネット上への情報流出のリスク及びセキュリティホールの発生等のセキュリティリスクの低減を図ることが可能である冷蔵庫システムを得ることにある。   The present invention has been made to solve such a problem. The purpose is to be able to check the latest storage room image of the refrigerator main unit from both the in-home and out-of-home user terminals where the refrigerator main unit is installed, and to communicate between the in-home communication device and the equipment outside the home. An object of the present invention is to provide a refrigerator system capable of minimizing an opportunity, reducing a communication load and a communication cost, and reducing a risk of leaking information onto the Internet and a security risk such as generation of a security hole.

この発明に係る冷蔵庫システムは、宅内に設置され、食品を収納する貯蔵室が形成された冷蔵庫本体と、前記貯蔵室の内部を撮影し、貯蔵室画像として出力するカメラと、前記宅内に設置され、前記カメラから出力された最新の貯蔵室画像を一時的に記憶する第１の画像記憶部と、前記宅内に設置され、前記第１の画像記憶部に記憶された貯蔵室画像を取得し、撮影時刻順に並べて記憶する第２の画像記憶部と、外部と通信可能な通信装置と、前記通信装置と通信可能な端末装置と、を備え、前記通信装置は、前記第１の画像記憶部に記憶された貯蔵室画像を宅外に設置された外部サーバに送信する第１の通信方式と、前記第２の画像記憶部に記憶された貯蔵室画像を前記端末装置に送信する第２の通信方式とを切り換え可能であり、前記端末装置は、前記通信装置が前記第１の通信方式を選択している場合に、前記外部サーバから貯蔵室画像を受信し、前記通信装置が前記第２の通信方式を選択している場合に、前記第２の画像記憶部に記憶された貯蔵室画像を前記通信装置から受信する。
A refrigerator system according to the present invention is installed in a house, a refrigerator main body in which a storage room for storing food is formed, a camera that takes an image of the inside of the storage room, and outputs the image as a storage room image, and is installed in the house. A first image storage unit that temporarily stores the latest storage room image output from the camera, and a storage room image that is installed in the house and stored in the first image storage unit, A second image storage unit that stores the images arranged in the order of photographing time, a communication device that can communicate with the outside, and a terminal device that can communicate with the communication device, wherein the communication device is provided in the first image storage unit. a first communication scheme for transmitting the stored storage chamber image installed at an external server outside the home, second to transmit the storage room image stored in the second image storage unit before Symbol end terminal device allow der switch between communication systems is, the end The apparatus, when the communication device has selected the first communication method, receives a storage room image from the external server, and when the communication device has selected the second communication method, that will receive storage room image stored in the second image storage unit from the communication device.

この発明に係る冷蔵庫システムにおいては、冷蔵庫本体が設置された宅内及び宅外の両方のユーザ端末から、冷蔵庫本体の最新の貯蔵室画像を確認でき、かつ、宅内の通信装置と宅外の機器との通信が必要な機会を極力減らし、通信負荷及び通信費用の削減、並びに、インターネット上への情報流出のリスク及びセキュリティホールの発生等のセキュリティリスクの低減を図ることが可能であるという効果を奏する。   In the refrigerator system according to the present invention, the user can check the latest storage room image of the refrigerator body from both the user terminal inside and outside the house where the refrigerator body is installed, and the communication device in the house and the equipment outside the house. It is possible to reduce the opportunity for communication as much as possible, reduce the communication load and communication cost, and reduce the risk of information leakage onto the Internet and the security risk such as occurrence of security holes. .

この発明の実施の形態１に係る冷蔵庫システムが備える冷蔵庫の正面図である。It is a front view of the refrigerator with which the refrigerator system concerning Embodiment 1 of this invention is provided. この発明の実施の形態１に係る冷蔵庫システムの宅内側の構成と冷蔵庫の冷蔵室の構成とを模式的に示す図である。It is a figure which shows typically the structure inside a house of the refrigerator system which concerns on Embodiment 1 of this invention, and the structure of the refrigerator compartment of a refrigerator. この発明の実施の形態１に係る冷蔵庫システムの第１の通信方式を説明する図である。It is a figure explaining the 1st communication system of the refrigerator system concerning Embodiment 1 of this invention. この発明の実施の形態１に係る冷蔵庫システムの第２の通信方式を説明する図である。FIG. 3 is a diagram illustrating a second communication method of the refrigerator system according to Embodiment 1 of the present invention. この発明の実施の形態１に係る冷蔵庫システムの動作を説明するフロー図である。FIG. 3 is a flowchart illustrating the operation of the refrigerator system according to Embodiment 1 of the present invention. この発明の実施の形態２に係る冷蔵庫システムにおいて複数のユーザ端末に貯蔵室画像を送信する場合について説明する図である。It is a figure explaining the case where the storage room image is transmitted to a plurality of user terminals in the refrigerator system according to Embodiment 2 of the present invention. この発明の実施の形態２に係る冷蔵庫システムにおいて複数の冷蔵庫の貯蔵室画像をユーザ端末に送信する場合について説明する図である。It is a figure explaining the case where the storage room image of several refrigerators is transmitted to a user terminal in the refrigerator system which concerns on Embodiment 2 of this invention. この発明の実施の形態３に係る冷蔵庫システムの宅内側の構成と冷蔵庫の冷蔵室の構成とを模式的に示す図である。It is a figure which shows typically the structure inside a house of the refrigerator system which concerns on Embodiment 3 of this invention, and the structure of the refrigerator compartment of a refrigerator. この発明の実施の形態３に係る冷蔵庫システムの貯蔵室画像の一例を示す図である。It is a figure which shows an example of the storage room image of the refrigerator system which concerns on Embodiment 3 of this invention. この発明の実施の形態３に係る冷蔵庫システムの加工後の貯蔵室画像の第１の例を示す図である。It is a figure which shows the 1st example of the storage room image after processing of the refrigerator system which concerns on Embodiment 3 of this invention. この発明の実施の形態３に係る冷蔵庫システムの加工後の貯蔵室画像の第２の例を示す図である。It is a figure which shows the 2nd example of the storage room image after processing of the refrigerator system which concerns on Embodiment 3 of this invention. この発明の実施の形態３に係る冷蔵庫システムの加工後の貯蔵室画像の第３の例を示す図である。It is a figure which shows the 3rd example of the storage room image after processing of the refrigerator system which concerns on Embodiment 3 of this invention. この発明の実施の形態３に係る冷蔵庫システムの動作を説明するフロー図である。FIG. 13 is a flowchart illustrating an operation of a refrigerator system according to Embodiment 3 of the present invention.

この発明を実施するための形態について添付の図面を参照しながら説明する。各図において、同一又は相当する部分には同一の符号を付して、重複する説明は適宜に簡略化又は省略する。なお、本発明は以下の実施の形態に限定されることなく、本発明の趣旨を逸脱しない範囲で種々変形することが可能である。   An embodiment for carrying out the present invention will be described with reference to the accompanying drawings. In the drawings, the same or corresponding portions are denoted by the same reference numerals, and redundant description will be appropriately simplified or omitted. The present invention is not limited to the following embodiments, and can be variously modified without departing from the gist of the present invention.

実施の形態１．
図１から図５は、この発明の実施の形態１に係るもので、図１は冷蔵庫システムが備える冷蔵庫の正面図、図２は冷蔵庫システムの宅内側の構成と冷蔵庫の冷蔵室の構成とを模式的に示す図、図３は冷蔵庫システムの第１の通信方式を説明する図、図４は冷蔵庫システムの第２の通信方式を説明する図、図５は冷蔵庫システムの動作を説明するフロー図である。Embodiment 1 FIG.
1 to 5 relate to a first embodiment of the present invention. FIG. 1 is a front view of a refrigerator provided in a refrigerator system, and FIG. 2 shows a configuration of a refrigerator system inside a house and a configuration of a refrigerator compartment of the refrigerator. FIG. 3 schematically illustrates a first communication method of the refrigerator system, FIG. 3 illustrates a second communication method of the refrigerator system, and FIG. 5 illustrates a flow chart illustrating the operation of the refrigerator system. It is.

この発明の実施の形態１に係る冷蔵庫システムは、冷蔵庫１０００を備えている。冷蔵庫１０００は、この発明の実施の形態１に係る冷蔵庫システムにおける冷蔵庫本体である。この実施の形態１においては、冷蔵庫１０００には、冷蔵室１００、製氷室２００、切替室３００、冷凍室４００及び野菜室５００が形成されている。これらの冷蔵室１００、製氷室２００、切替室３００、冷凍室４００及び野菜室５００は、食品を収納する貯蔵室である。   The refrigerator system according to Embodiment 1 of the present invention includes a refrigerator 1000. Refrigerator 1000 is a refrigerator main body in the refrigerator system according to Embodiment 1 of the present invention. In the first embodiment, the refrigerator 1000 includes a refrigerator compartment 100, an ice making compartment 200, a switching compartment 300, a freezing compartment 400, and a vegetable compartment 500. The refrigerating room 100, the ice making room 200, the switching room 300, the freezing room 400, and the vegetable room 500 are storage rooms for storing food.

これらの貯蔵室は、図１に示すように、上から冷蔵室１００、製氷室２００及び切替室３００、冷凍室４００、野菜室５００の順で配置されている。製氷室２００と切替室３００とは、同じ上下位置において左右に並んで配置されている。冷蔵室１００の前面には、冷蔵室１００を開閉する冷蔵室扉１０１が設けられている。冷蔵室扉１０１は、貯蔵室を開閉する扉の一例である。また、製氷室２００、切替室３００、冷凍室４００及び野菜室５００は、それぞれの前面に設けられた扉と共に、冷蔵庫１０００の手前側に引き出すことができるように構成されている。   As shown in FIG. 1, these storage rooms are arranged in this order from the top in a refrigerator room 100, an ice making room 200, a switching room 300, a freezing room 400, and a vegetable room 500. The ice making room 200 and the switching room 300 are arranged side by side at the same vertical position. In the front of the refrigerator compartment 100, a refrigerator compartment door 101 for opening and closing the refrigerator compartment 100 is provided. The refrigerator compartment door 101 is an example of a door that opens and closes a storage room. In addition, the ice making room 200, the switching room 300, the freezing room 400, and the vegetable room 500 are configured so as to be able to be pulled out to the near side of the refrigerator 1000 together with the doors provided on the front surfaces thereof.

冷蔵室扉１０１の前面には、操作パネル１が設けられている。操作パネル１は、パネル表示部１ａを備えている。パネル表示部１ａは、情報を表示可能な本体表示部である。パネル表示部１ａには、例えば、各貯蔵室の設定温度及び現在の温度等の庫内情報を表示可能である。パネル表示部１ａは、例えば液晶ディスプレイ等を備えている。操作パネル１は、例えばタッチパネル、ボタン、スイッチ等の操作部を備えている。ユーザは、操作パネル１の操作部を操作することにより、必要な情報を入力することができるようになっている。なお、操作パネル１の設置位置は、冷蔵室１００の扉に限るものではなく、他の貯蔵室の扉、冷蔵庫１０００の側面等であってもよい。   An operation panel 1 is provided on the front surface of the refrigerator compartment door 101. The operation panel 1 includes a panel display section 1a. The panel display section 1a is a main body display section capable of displaying information. The panel display unit 1a can display, for example, in-chamber information such as the set temperature of each storage room and the current temperature. The panel display section 1a includes, for example, a liquid crystal display or the like. The operation panel 1 includes an operation unit such as a touch panel, buttons, and switches. The user can input necessary information by operating the operation unit of the operation panel 1. The installation position of the operation panel 1 is not limited to the door of the refrigerator compartment 100, but may be a door of another storage room, a side surface of the refrigerator 1000, or the like.

図２に示すように、冷蔵室１００は、前面側（同図に向かって左側）を冷蔵室扉１０１によって塞がれている。なお、図２に示す断面図は、図１中の断面Ａ−Ａ’によるものである。冷蔵室１００の内部には、複数の冷蔵室棚板１０２が設けられている。冷蔵室１００の内部は、これらの冷蔵室棚板１０２によって、上下方向に複数の空間（棚）に仕切られている。最下段の冷蔵室棚板１０２の下側の空間は、チルド室１１０である。チルド室１１０の内部には、チルドケース１１１が設置されている。チルドケース１１１は、レール等の案内部材（図示せず）に沿って、前方へ引き出すことができる。また、冷蔵室１００の背面側（図に向かって右側）には、冷却風路１０１０が形成されている。   As shown in FIG. 2, the refrigerating compartment 100 is closed by a refrigerating compartment door 101 on the front side (left side in FIG. 2). The cross-sectional view shown in FIG. 2 is based on the cross section A-A 'in FIG. Inside the refrigerator compartment 100, a plurality of refrigerator compartment shelves 102 are provided. The interior of the refrigerator compartment 100 is partitioned into a plurality of spaces (shelf) in the vertical direction by these refrigerator compartment shelves 102. The space below the refrigerator compartment shelf plate 102 at the bottom is a chilled room 110. A chilled case 111 is provided inside the chilled chamber 110. The chilled case 111 can be pulled out forward along a guide member (not shown) such as a rail. Further, a cooling air passage 1010 is formed on the rear side (the right side in the drawing) of the refrigerator compartment 100.

冷蔵室扉１０１の内側の面には、庫内撮影装置２が設置されている。庫内撮影装置２は、貯蔵室（ここでは冷蔵室１００）の内部を撮影して貯蔵室画像を出力するカメラである。庫内撮影装置２は、冷蔵室１００の内部の天井面からチルド室１１０までを視野範囲としている。すなわち、庫内撮影装置２は、冷蔵室扉１０１側から冷蔵室１００の内部を見たユーザと同じ視点から、冷蔵室１００の内部を撮影することができる。   On the inner surface of the refrigerator compartment door 101, an in-compartment photographing device 2 is installed. The in-compartment photographing device 2 is a camera that photographs the inside of a storage room (here, the refrigerator room 100) and outputs a storage room image. The in-compartment photographing device 2 has a view range from the ceiling surface inside the refrigerator compartment 100 to the chilled room 110. That is, the in-compartment photographing apparatus 2 can photograph the inside of the refrigerator compartment 100 from the same viewpoint as the user who views the inside of the refrigerator compartment 100 from the refrigerator compartment door 101 side.

庫内撮影装置２は、例えば、冷蔵室扉１０１が開閉された時に冷蔵室１００内を撮影する。冷蔵室扉１０１が開閉されると、冷蔵室１００内の食品が出し入れされ、冷蔵室１００内の収納状態が変化する可能性があるためである。冷蔵庫１０００は、扉の開閉を検知可能なセンサを備えている。このセンサは、例えば、一般的なマグネット方式のセンサである。すなわち、このセンサは、例えば、冷蔵室扉１０１に埋め込まれた磁石の近接を、冷蔵庫１０００本体側に設置された一対のリードスイッチによって検出する。庫内撮影装置２は、例えば、開かれていた冷蔵室扉１０１が閉じられたことを検知した後、冷蔵室１００内が照明されている間に撮影を行う。   The refrigerator imaging apparatus 2 captures an image of the refrigerator compartment 100 when the refrigerator compartment door 101 is opened and closed, for example. This is because when the refrigerator compartment door 101 is opened and closed, food in the refrigerator compartment 100 is taken in and out, and the storage state in the refrigerator compartment 100 may change. Refrigerator 1000 includes a sensor capable of detecting opening and closing of a door. This sensor is, for example, a general magnet type sensor. That is, this sensor detects, for example, the proximity of a magnet embedded in the refrigerator compartment door 101 by a pair of reed switches installed on the refrigerator 1000 main body side. For example, after detecting that the opened refrigerator compartment door 101 is closed, the in-compartment photographing device 2 performs photography while the interior of the refrigerator compartment 100 is illuminated.

なお、庫内撮影装置２の設置位置は、図２に示すような冷蔵室扉１０１の内側の面に限られない。庫内撮影装置２は、冷蔵室棚板１０２に載置される食品等の収納物を撮影できる位置であればどこに設置してもよい。また、庫内撮影装置２の設置数は１つに限られない。すなわち、複数の庫内撮影装置２を設置してもよい。庫内撮影装置２を複数設置することで、冷蔵室１００内に収納された食品等により視野が遮られて死角が生じることを抑制することができる。   Note that the installation position of the in-compartment photographing device 2 is not limited to the inner surface of the refrigerator compartment door 101 as shown in FIG. The in-compartment photographing device 2 may be installed at any position as long as it can photograph stored items such as foods placed on the refrigerator compartment shelf plate 102. Further, the number of installation of the in-compartment imaging device 2 is not limited to one. That is, a plurality of in-compartment photographing devices 2 may be installed. By installing a plurality of in-compartment photographing devices 2, it is possible to suppress the occurrence of blind spots due to food or the like stored in the refrigerator compartment 100 obstructing the visual field.

冷蔵庫１０００は、制御基板１００１を備えている。制御基板１００１は、例えば、冷蔵庫１０００の背面側の上部に収容されている。制御基板１００１には、冷蔵庫１０００の動作に必要な各種の制御を実施するための制御回路等が備えられている。制御基板１００１は、例えばマイクロコンピュータを備えており、すなわち、プロセッサ及びメモリを備えている。制御基板１００１は、メモリに記憶されたプログラムをプロセッサが実行することにより、予め設定された処理を実行し、冷蔵庫１０００を制御する。   The refrigerator 1000 includes a control board 1001. The control board 1001 is housed, for example, in the upper part on the back side of the refrigerator 1000. The control board 1001 is provided with a control circuit and the like for performing various controls necessary for the operation of the refrigerator 1000. The control board 1001 includes, for example, a microcomputer, that is, includes a processor and a memory. The control board 1001 controls the refrigerator 1000 by executing a preset process by the processor executing a program stored in the memory.

この発明の実施の形態１に係る冷蔵庫システムは、画像サーバ３を備えている。画像サーバ３は、貯蔵室画像の保存、管理及び外部への送信を行うためのものである。画像サーバ３は、冷蔵庫１０００が設置された宅内（以下、単に「宅内」という）であって、かつ、冷蔵庫１０００の貯蔵室の外側に設置される。図１及び図２に示すのは、画像サーバ３を冷蔵庫１０００の天井部の外面部に配置した例である。なお、画像サーバ３の設置位置は、冷蔵庫１０００の天井部に限られない。画像サーバ３を、冷蔵庫１０００の貯蔵室の外であれば、冷蔵庫１０００の側面、背面又は貯蔵室の扉に設置してもよい。また、制御基板１００１に画像サーバ３を実装してもよい。   The refrigerator system according to Embodiment 1 of the present invention includes an image server 3. The image server 3 stores and manages storage room images and transmits the images to the outside. The image server 3 is installed in the house where the refrigerator 1000 is installed (hereinafter, simply referred to as “house”) and outside the storage room of the refrigerator 1000. FIGS. 1 and 2 show examples in which the image server 3 is arranged on the outer surface of the ceiling of the refrigerator 1000. The installation position of the image server 3 is not limited to the ceiling of the refrigerator 1000. If the image server 3 is outside the storage room of the refrigerator 1000, it may be installed on the side surface, the back surface of the refrigerator 1000, or on the door of the storage room. Further, the image server 3 may be mounted on the control board 1001.

画像サーバ３は、前述した制御基板１００１と同様に例えばマイクロコンピュータを備えており、すなわち、プロセッサ及びメモリを備えている。また、画像サーバ３は、図２に示すように、貯蔵室画像記憶部４、貯蔵室画像管理部５及び無線通信部６を備えている。これらの各部の機能は、例えば、画像サーバ３のマイクロコンピュータにおいて、メモリに記憶されたプログラムをプロセッサが実行し、予め設定された処理を行うことで実現される。なお、画像サーバ３は、例えば、制御基板１００１と接続され、制御基板１００１から電力の供給を受けて動作する。   The image server 3 includes, for example, a microcomputer, like the control board 1001 described above, that is, includes a processor and a memory. The image server 3 includes a storage room image storage unit 4, a storage room image management unit 5, and a wireless communication unit 6, as shown in FIG. The functions of these units are realized, for example, in a microcomputer of the image server 3, in which a processor executes a program stored in a memory and performs a preset process. The image server 3 is connected to, for example, the control board 1001 and operates by receiving power supply from the control board 1001.

貯蔵室画像記憶部４は、庫内撮影装置２から出力された貯蔵室画像を記憶する第１の画像記憶部である。前述したように、冷蔵室扉１０１の開閉が検知されると、庫内撮影装置２は、冷蔵室１００内の全体を撮影する。庫内撮影装置２は、撮影した冷蔵室１００内の全体画像（貯蔵室画像）を、貯蔵室画像記憶部４に出力する。庫内撮影装置２から出力された貯蔵室画像は、貯蔵室画像記憶部４に入力される。したがって、貯蔵室画像記憶部４には、冷蔵室扉１０１が開閉される毎（すなわち、冷蔵室１００内の収納状態が変化する可能性がある毎）に、庫内撮影装置２から出力された貯蔵室画像が入力されることになる。こうして、貯蔵室画像記憶部４には常に最新の状態の貯蔵室画像が入力される。   The storage room image storage unit 4 is a first image storage unit that stores a storage room image output from the in-compartment photographing device 2. As described above, when the opening and closing of the refrigerator compartment door 101 is detected, the in-compartment photographing device 2 photographs the entire inside of the refrigerator compartment 100. The in-compartment photographing device 2 outputs the photographed whole image (storage room image) in the refrigerator compartment 100 to the storage room image storage unit 4. The storage room image output from the in-compartment photographing device 2 is input to the storage room image storage unit 4. Therefore, every time the refrigerator compartment door 101 is opened and closed (that is, every time the storage state in the refrigerator compartment 100 may change), the storage room image storage unit 4 outputs the information from the in-compartment photographing device 2. The storage room image will be input. Thus, the latest storage room image is always input to the storage room image storage unit 4.

貯蔵室画像記憶部４は、入力された最新の貯蔵室画像を一時的に記憶する。この際、貯蔵室画像記憶部４は、貯蔵室画像が貯蔵室画像記憶部４に入力された時刻を、撮影時刻情報として当該貯蔵室画像とともに一時的に記憶する。なお、撮影時刻情報には、撮影された日にち（月日又は年月日）の情報も含まれている。   The storage room image storage unit 4 temporarily stores the latest input storage room image. At this time, the storage room image storage unit 4 temporarily stores the time at which the storage room image was input to the storage room image storage unit 4 together with the storage room image as shooting time information. Note that the shooting time information also includes information on the shooting date (month or date).

貯蔵室画像管理部５は、第１の画像記憶部である貯蔵室画像記憶部４に記憶された貯蔵室画像を記憶する第２の画像記憶部である。貯蔵室画像管理部５は、貯蔵室画像記憶部４に一時的に記憶されている貯蔵室画像及び撮影時刻情報を、貯蔵室画像記憶部４から取得する。   The storage room image management unit 5 is a second image storage unit that stores the storage room image stored in the storage room image storage unit 4 that is the first image storage unit. The storage room image management unit 5 acquires the storage room image and the photographing time information temporarily stored in the storage room image storage unit 4 from the storage room image storage unit 4.

そして、貯蔵室画像管理部５は、取得した貯蔵室画像を撮影時刻情報に基づいて撮影時刻順に並び換えて記憶する。このようにして、庫内撮影装置２により撮影された貯蔵室画像は、貯蔵室画像記憶部４に一時的に記憶された後、貯蔵室画像管理部５へと移動されて、管理される。なお、貯蔵室画像管理部５において管理及び記憶されている貯蔵室画像は、操作パネル１のパネル表示部１ａに撮影時刻情報とともに表示することが可能である。   Then, the storage room image management unit 5 stores the acquired storage room images rearranged in the order of the shooting time based on the shooting time information. In this way, the storage room image photographed by the in-compartment photographing device 2 is temporarily stored in the storage room image storage unit 4 and then moved to the storage room image management unit 5 and managed. The storage room image managed and stored in the storage room image management unit 5 can be displayed together with the shooting time information on the panel display unit 1a of the operation panel 1.

無線通信部６は、外部と通信可能な通信装置である。無線通信部６は、例えば周知の無線通信技術を用いて、冷蔵庫１０００の画像サーバ３とルータ装置７との間で情報の相互通信を行う。なお、画像サーバ３とルータ装置７との通信は無線方式に限られず、有線方式であってもよい。   The wireless communication unit 6 is a communication device that can communicate with the outside. The wireless communication unit 6 performs information mutual communication between the image server 3 of the refrigerator 1000 and the router device 7 using, for example, a well-known wireless communication technology. The communication between the image server 3 and the router device 7 is not limited to the wireless system, but may be a wired system.

図３及び図４に示すように、この発明の実施の形態１に係る冷蔵庫システムは、ユーザ端末１０を備えている。ユーザ端末１０は、通信装置である無線通信部６と通信可能に設けられた端末装置である。ユーザ端末１０は、具体的に例えば、ＰＣ、スマートフォン、タブレット端末等である。なお、ユーザ端末１０は、１以上設けられ、望ましくは複数設けられる。   As shown in FIGS. 3 and 4, the refrigerator system according to Embodiment 1 of the present invention includes a user terminal 10. The user terminal 10 is a terminal device provided so as to be able to communicate with the wireless communication unit 6 as a communication device. The user terminal 10 is specifically, for example, a PC, a smartphone, a tablet terminal, or the like. In addition, one or more user terminals 10 are provided, and preferably a plurality of user terminals 10 are provided.

ユーザ端末１０は、図示しない端末表示部を備えている。端末表示部は、例えば、液晶ディスプレイ等を備えている。また、端末表示部をタッチパネルで構成し、情報を表示するとともに、ユーザからの操作を受け付けることができるようにしてもよい。ユーザ端末１０の端末表示部は、貯蔵室画像及び撮影時刻情報を含む各種の情報を表示可能である。   The user terminal 10 includes a terminal display unit (not shown). The terminal display unit includes, for example, a liquid crystal display or the like. In addition, the terminal display unit may be configured with a touch panel to display information and receive an operation from a user. The terminal display unit of the user terminal 10 can display various information including the storage room image and the photographing time information.

次に、ユーザ端末１０の端末表示部への冷蔵庫１０００の貯蔵室画像の表示について説明する。ユーザ端末１０に貯蔵室画像を表示するためには、ユーザ端末１０が貯蔵室画像を受信する必要がある。ユーザ端末１０が貯蔵室画像を受信できるようにする際に、無線通信部６は、２つの通信方式を切り換えることができるように構成されている。すなわち、通信装置である無線通信部６は、第１の通信方式と第２の通信方式とを切り換え可能である。   Next, the display of the storage room image of the refrigerator 1000 on the terminal display unit of the user terminal 10 will be described. In order to display the storage room image on the user terminal 10, the user terminal 10 needs to receive the storage room image. When enabling the user terminal 10 to receive the storage room image, the wireless communication unit 6 is configured to be able to switch between the two communication methods. That is, the wireless communication unit 6 as a communication device can switch between the first communication method and the second communication method.

第１の通信方式は、第１の画像記憶部である貯蔵室画像記憶部４に記憶された貯蔵室画像を外部サーバに送信する通信方式である。図３に示すように、冷蔵庫１０００、画像サーバ３及びルータ装置７は、宅内に設置されている。ルータ装置７は、例えばインターネット８を介して、クラウドサーバ９と通信可能に接続されている。クラウドサーバ９は、前述した外部サーバである。同図では外部サーバとして、インターネット８に接続された複数のサーバ（サーバ群）からなるクラウドサーバ９を用いた場合を例示している。しかしながら、外部サーバはクラウドサーバ９に限られず、１台のサーバであってもよい。インターネット８及びクラウドサーバ９は、冷蔵庫１０００が設置された宅内の外側の宅外（以下、単に「宅外」という）にある。   The first communication method is a communication method for transmitting the storage room image stored in the storage room image storage unit 4 as the first image storage unit to an external server. As shown in FIG. 3, the refrigerator 1000, the image server 3, and the router device 7 are installed in a house. The router device 7 is communicably connected to the cloud server 9 via, for example, the Internet 8. The cloud server 9 is the external server described above. FIG. 2 illustrates a case where a cloud server 9 including a plurality of servers (server group) connected to the Internet 8 is used as an external server. However, the external server is not limited to the cloud server 9 and may be a single server. The Internet 8 and the cloud server 9 are outside the house where the refrigerator 1000 is installed (hereinafter simply referred to as “outside the house”).

第２の通信方式は、図４に示すように、第２の画像記憶部である貯蔵室画像管理部５に記憶された貯蔵室画像をユーザ端末１０に送信する通信方式である。   The second communication method is a communication method for transmitting the storage room image stored in the storage room image management unit 5 as the second image storage unit to the user terminal 10, as shown in FIG.

無線通信部６は、初期設定では、第１の通信方式を選択している。したがって、図３に示すように、無線通信部６は、貯蔵室画像記憶部４に一時的に記憶されている最新の貯蔵室画像を、ルータ装置７及びインターネット８を介して、宅外のクラウドサーバ９へと送信する。そして、クラウドサーバ９は、受信した貯蔵室画像を記憶する。なお、この際、当該貯蔵室画像に対応する撮影時刻情報も併せて送信し、クラウドサーバ９が貯蔵室画像及び撮影時刻情報を記憶するようにするとよい。   The wireless communication unit 6 selects the first communication method in the initial setting. Accordingly, as shown in FIG. 3, the wireless communication unit 6 transmits the latest storage room image temporarily stored in the storage room image storage unit 4 to the cloud outside the home via the router device 7 and the Internet 8. Send it to server 9. Then, the cloud server 9 stores the received storage room image. At this time, it is preferable that the photographing time information corresponding to the storage room image is also transmitted, and the cloud server 9 stores the storage room image and the photographing time information.

この際、クラウドサーバ９への通信が混雑し、貯蔵室画像を１回でアップロード（送信）できない場合を想定して、無線通信部６からクラウドサーバ９への貯蔵室画像のアップロードの最大リトライ数を設定するようにしてもよい。そして、無線通信部６は、最大リトライ数に到達した場合には、即時にアップロードするようにしてもよい。   At this time, the maximum number of retries for uploading the storage room image from the wireless communication unit 6 to the cloud server 9 is performed on the assumption that the communication to the cloud server 9 is congested and the storage room image cannot be uploaded (transmitted) at one time. May be set. Then, when the maximum number of retries is reached, the wireless communication unit 6 may upload the data immediately.

無線通信部６が第１の通信方式を選択している場合は、ユーザ端末１０は、外部サーバから貯蔵室画像を受信する。すなわち、この場合、宅外のユーザ端末１０は、インターネット８を介してクラウドサーバ９へとアクセスする。ユーザが、ユーザ端末１０において貯蔵室画像の表示操作を行うと、ユーザ端末１０は、貯蔵室画像送信要求を送信する。貯蔵室画像送信要求を受信したクラウドサーバ９は、自身に記憶している貯蔵室画像及び撮影時刻情報をユーザ端末１０へと送信する。ユーザ端末１０は、クラウドサーバ９からインターネット８を介して貯蔵室画像及び撮影時刻情報を受信する。そして、ユーザ端末１０は、受信した貯蔵室画像及び撮影時刻情報を端末表示部に表示する。   When the wireless communication unit 6 has selected the first communication method, the user terminal 10 receives the storage room image from the external server. That is, in this case, the user terminal 10 outside the home accesses the cloud server 9 via the Internet 8. When the user performs a storage room image display operation on the user terminal 10, the user terminal 10 transmits a storage room image transmission request. The cloud server 9 that has received the storage room image transmission request transmits the storage room image and the photographing time information stored therein to the user terminal 10. The user terminal 10 receives the storage room image and the shooting time information from the cloud server 9 via the Internet 8. Then, the user terminal 10 displays the received storage room image and the photographing time information on the terminal display unit.

無線通信部６は、第１の通信方式を選択している場合に、宅内にあるユーザ端末１０からの要求により第２の通信方式へと切り換えることができるように構成されている。宅内にあるユーザ端末１０からの要求により第２の通信方式に切り換えた場合、図４に示すように、無線通信部６は、貯蔵室画像管理部５に記憶されている貯蔵室画像を、宅内のルータ装置７を介して、宅内のユーザ端末１０へと送信する。なお、この際、前述した第１の通信方式の場合と同様に、当該貯蔵室画像に対応する撮影時刻情報も併せて送信するとよい。   When the first communication method is selected, the wireless communication unit 6 is configured to be able to switch to the second communication method in response to a request from the user terminal 10 located at home. When switching to the second communication method in response to a request from the user terminal 10 located in the house, the wireless communication unit 6 converts the storage room image stored in the storage room image management unit 5 into the house, as shown in FIG. Via the router device 7 to the user terminal 10 in the house. Note that, at this time, similarly to the case of the above-described first communication method, the photographing time information corresponding to the storage room image may be transmitted together.

無線通信部６が第２の通信方式を選択している場合は、ユーザ端末１０は、貯蔵室画像管理部５に記憶された貯蔵室画像を無線通信部６から受信する。すなわち、この場合、ユーザが、ユーザ端末１０において貯蔵室画像の表示操作を行うと、ユーザ端末１０は、貯蔵室画像送信要求を送信する。貯蔵室画像送信要求を受信した無線通信部６は、貯蔵室画像管理部５に記憶されている貯蔵室画像及び撮影時刻情報を、宅内のユーザ端末１０へと送信する。宅内のユーザ端末１０は、無線通信部６から送信された貯蔵室画像及び撮影時刻情報を、宅内のルータ装置７を介して受信する。そして、ユーザ端末１０は、受信した貯蔵室画像及び撮影時刻情報を端末表示部に表示する。   When the wireless communication unit 6 has selected the second communication method, the user terminal 10 receives the storage room image stored in the storage room image management unit 5 from the wireless communication unit 6. That is, in this case, when the user performs a storage room image display operation on the user terminal 10, the user terminal 10 transmits a storage room image transmission request. Upon receiving the storage room image transmission request, the wireless communication unit 6 transmits the storage room image and the shooting time information stored in the storage room image management unit 5 to the user terminal 10 in the house. The in-home user terminal 10 receives the storage room image and the photographing time information transmitted from the wireless communication unit 6 via the in-home router device 7. Then, the user terminal 10 displays the received storage room image and the photographing time information on the terminal display unit.

ここで、ルータ装置７には、画像サーバ３の無線通信部６等との無線通信接続の設定を自動で行う機能を備えたものを使用することが好ましい。しかしながら、そのような自動設定機能を備えないルータ装置７を使用する場合に備えて、無線通信部６は、第２の通信方式において、ユーザがユーザ端末１０を操作することにより、手動でルータ装置７と画像サーバ３の無線通信部６との無線通信接続の設定を行えるようにしておくのがよい。   Here, it is preferable to use a router device having a function of automatically setting a wireless communication connection with the wireless communication unit 6 or the like of the image server 3. However, in preparation for using the router device 7 not having such an automatic setting function, the wireless communication unit 6 manually operates the router device by operating the user terminal 10 in the second communication method. It is preferable that the wireless communication connection between the wireless communication unit 7 and the wireless communication unit 6 of the image server 3 can be set.

なお、前述したように、宅内では冷蔵庫１０００の操作パネル１でも貯蔵室画像を確認可能である。このため、実際には、第２の通信方式で使用される場合よりも、第１の通信方式で使用される場合の方が多いと考えられる。このため、前述したように、無線通信部６は、初期設定では、第１の通信方式を選択するようにしておくのがよい。   As described above, the storage room image can be confirmed on the operation panel 1 of the refrigerator 1000 in the house. For this reason, it is considered that there are actually more cases where the first communication method is used than cases where the second communication method is used. Therefore, as described above, it is preferable that the wireless communication unit 6 selects the first communication method in the initial setting.

また、無線通信部６は、第２の通信方式を選択した後、予め設定された一定時間が経過した場合に、第１の通信方式を選択するようにするとよい。例えば、宅内からの閲覧に限定された第２の通信方式に設定したままユーザが外出した場合には、貯蔵室画像記憶部４に記憶された最新の貯蔵室画像が、クラウドサーバ９にアップロードされない。このため、ユーザは宅外から最新の貯蔵室画像を確認できないことになる。このような場合に備え、宅内で貯蔵室画像を確認するために第２の通信方式に設定した場合も、一定時間が経過した後に自動的に第１の通信方式に変更されるようにするのがよい。   In addition, after selecting the second communication method, the wireless communication unit 6 may select the first communication method when a predetermined time has elapsed. For example, when the user goes out while setting the second communication method limited to browsing from the house, the latest storage room image stored in the storage room image storage unit 4 is not uploaded to the cloud server 9. . For this reason, the user cannot confirm the latest storage room image from outside the house. In order to prepare for such a case, even when the second communication method is set to check the storage room image in the house, the method is automatically changed to the first communication method after a certain time has elapsed. Is good.

なお、無線通信部６は、当該貯蔵室画像送信要求を送信したユーザ端末１０が、宅外にあるのか宅内にあるのかに応じて、第１の通信方式及び第２の通信方式のいずれを選択するのかを決定するようにしてもよい。この場合、ユーザ端末１０からの貯蔵室画像送信要求を受信した無線通信部６は、当該貯蔵室画像送信要求を送信したユーザ端末１０が、宅内にあるのか宅外にあるのかを確認する。この確認は、例えば、当該貯蔵室画像送信要求の送信経路を確認し、当該貯蔵室画像送信要求が宅内から送信されたのか、あるいは、宅外から送信されたのかを確認することにより可能である。また、貯蔵室画像送信要求の送信経路は、例えば周知のネットワーク管理コマンド等を利用することにより確かめることができる。   The wireless communication unit 6 selects either the first communication method or the second communication method according to whether the user terminal 10 that has transmitted the storage room image transmission request is outside the house or inside the house. It may be determined whether to do so. In this case, the wireless communication unit 6 that has received the storage room image transmission request from the user terminal 10 checks whether the user terminal 10 that has transmitted the storage room image transmission request is inside or outside the house. This confirmation can be made, for example, by confirming the transmission path of the storage room image transmission request and confirming whether the storage room image transmission request was transmitted from inside the house or from outside the house. . The transmission path of the storage room image transmission request can be confirmed by using, for example, a well-known network management command or the like.

宅外にあるユーザ端末１０からの貯蔵室画像送信要求を受けた場合、無線通信部６は、第１の通信方式を選択する。したがって、無線通信部６は、貯蔵室画像記憶部４に記憶されている最新の貯蔵室画像をクラウドサーバ９に送信する。そして、宅外のユーザ端末１０は、クラウドサーバ９から貯蔵室画像を受信する。   When receiving a storage room image transmission request from the user terminal 10 outside the house, the wireless communication unit 6 selects the first communication method. Therefore, the wireless communication unit 6 transmits the latest storage room image stored in the storage room image storage unit 4 to the cloud server 9. Then, the user terminal 10 outside the house receives the storage room image from the cloud server 9.

一方、宅内にあるユーザ端末１０からの貯蔵室画像送信要求を受けた場合には、無線通信部６は、第２の通信方式を選択する。したがって、無線通信部６は、貯蔵室画像管理部５に記憶されている貯蔵室画像を宅内のユーザ端末１０へと送信する。そして、宅内のユーザ端末１０へは、ルータ装置７を介して無線通信部６から貯蔵室画像を受信する。   On the other hand, when receiving a storage room image transmission request from the user terminal 10 in the house, the wireless communication unit 6 selects the second communication method. Therefore, the wireless communication unit 6 transmits the storage room image stored in the storage room image management unit 5 to the user terminal 10 in the house. Then, the storage room image is received from the wireless communication unit 6 to the user terminal 10 in the house via the router device 7.

以上のような第１の通信方式により、ユーザは、宅外であっても、インターネット８及びクラウドサーバ９を介して、冷蔵庫１０００の貯蔵室画像を確認することができる。また、以上のような第２の通信方式では宅内で閉じているローカルな通信ネットワークのみを利用する。このため、ユーザは、ルータ装置７のアクセスコード及び画像サーバ３のアドレス（ＵＲＬ）をユーザ端末１０に入力することにより、画像サーバ３に記憶された貯蔵室画像等の情報を、宅内のユーザ端末１０から閲覧することが可能である。   According to the first communication method as described above, the user can check the storage room image of the refrigerator 1000 via the Internet 8 and the cloud server 9 even outside the house. In the second communication method as described above, only a local communication network closed in the house is used. Therefore, the user inputs the access code of the router device 7 and the address (URL) of the image server 3 to the user terminal 10 so that the information such as the storage room image stored in the image server 3 can be transmitted to the user terminal in the house. 10 is available.

なお、画像サーバ３及びクラウドサーバ９の一方又は両方に、ユーザ端末１０が貯蔵室画像を受信する権限を有しているか否かを認証する認証部を設けてもよい。図３に示すのは、クラウドサーバ９に認証部としての個人認証装置１１を設けた例である。個人認証装置１１は、ユーザ端末１０について冷蔵庫１０００の貯蔵室画像を受信する権限を有しているか否かを認証する。   Note that one or both of the image server 3 and the cloud server 9 may be provided with an authentication unit that authenticates whether the user terminal 10 has the authority to receive the storage room image. FIG. 3 shows an example in which the cloud server 9 is provided with a personal authentication device 11 as an authentication unit. The personal authentication device 11 authenticates whether or not the user terminal 10 has authority to receive the storage room image of the refrigerator 1000.

このため、クラウドサーバ９の個人認証装置１１は、冷蔵庫１０００のＩＤに対して、当該冷蔵庫１０００への接続権限を有するユーザ端末１０の端末装置ＩＤを予め記憶している。冷蔵庫１０００のＩＤとは、インターネット８に接続された複数の冷蔵庫１０００を一意に識別可能な冷蔵庫識別情報である。また、端末装置ＩＤとは、インターネット８に接続された複数のユーザ端末１０を一意に識別可能な端末装置識別情報である。   For this reason, the personal authentication device 11 of the cloud server 9 stores in advance the terminal device ID of the user terminal 10 having the authority to connect to the refrigerator 1000 with respect to the ID of the refrigerator 1000. The ID of the refrigerator 1000 is refrigerator identification information capable of uniquely identifying the plurality of refrigerators 1000 connected to the Internet 8. The terminal device ID is terminal device identification information capable of uniquely identifying a plurality of user terminals 10 connected to the Internet 8.

個人認証装置１１は、ユーザ端末１０の携帯端末ＩＤが、冷蔵庫１０００のＩＤに対して当該冷蔵庫１０００の貯蔵室画像の受信権限を有するものとして記憶されているか否かを確認する。ユーザ端末１０の携帯端末ＩＤが冷蔵庫１０００のＩＤに対して当該冷蔵庫１０００の貯蔵室画像の受信権限を有するものとして記憶されていれば、個人認証装置１１は、当該ユーザ端末１０は当該冷蔵庫１０００の貯蔵室画像を受信する権限があることを認証する。   The personal authentication device 11 checks whether or not the portable terminal ID of the user terminal 10 is stored as having the right to receive the storage room image of the refrigerator 1000 with respect to the ID of the refrigerator 1000. If the portable terminal ID of the user terminal 10 is stored as having the right to receive the storage room image of the refrigerator 1000 with respect to the ID of the refrigerator 1000, the personal authentication device 11 Authenticate that you are authorized to receive storage room images.

貯蔵室画像は、当該貯蔵室画像が撮影された冷蔵庫１０００のＩＤと対応付けられて貯蔵室画像管理部５及びクラウドサーバ９の一方又は両方に記憶される。ここでは、例えば、クラウドサーバ９に記憶される貯蔵室画像は、当該貯蔵室画像が撮影された冷蔵庫１０００のＩＤと対応付けられている。   The storage room image is stored in one or both of the storage room image management unit 5 and the cloud server 9 in association with the ID of the refrigerator 1000 from which the storage room image was captured. Here, for example, the storage room image stored in the cloud server 9 is associated with the ID of the refrigerator 1000 from which the storage room image was captured.

クラウドサーバ９は、冷蔵庫１０００の貯蔵室画像の受信権限を有することが個人認証装置１１により認証されたユーザ端末１０が、当該冷蔵庫１０００の貯蔵室画像を受信することを許可する。逆に言えば、クラウドサーバ９は、冷蔵庫１０００の貯蔵室画像の受信権限を有することが個人認証装置１１により認証されていないユーザ端末１０が、当該冷蔵庫１０００の貯蔵室画像を受信することを制限する。   The cloud server 9 permits the user terminal 10 that has been authenticated by the personal authentication device 11 to have the right to receive the storage room image of the refrigerator 1000 to receive the storage room image of the refrigerator 1000. Conversely, the cloud server 9 restricts the user terminal 10 that has not been authenticated by the personal authentication device 11 to have the right to receive the storage room image of the refrigerator 1000 from receiving the storage room image of the refrigerator 1000. I do.

このような、個人認証装置１１を備えることで、たとえルータ装置７のアクセスコード（例えばＳＳＩＤと暗号化キー）が漏洩しても、登録されたユーザ端末１０以外の端末が、クラウドサーバ９又は画像サーバ３にアクセスして貯蔵室画像を受信することを防止できる。   By providing such a personal authentication device 11, even if an access code (for example, an SSID and an encryption key) of the router device 7 is leaked, a terminal other than the registered user terminal 10 can be used by the cloud server 9 or the image server. Access to the server 3 and reception of the storage room image can be prevented.

なお、以上で説明した個人認証装置１１はＩＤを用いて権限を認証するものであった。この認証方法については、これに限定されない。ＩＤの他に、例えば、指紋、静脈、目の虹彩等の生体認証、又は、パスワードによる認証、もしくは、これらの認証方法の組み合わせによって、権限を認証するようにしてもよい。   The personal authentication device 11 described above authenticates the authority using the ID. This authentication method is not limited to this. In addition to the ID, for example, the authority may be authenticated by biometric authentication of a fingerprint, a vein, an iris of an eye, or the like, authentication by a password, or a combination of these authentication methods.

次に、以上のように構成された冷蔵庫システムの動作の流れの一例を、図５を参照しながら説明する。まず、ユーザにより冷蔵室扉１０１が開閉されると、前述したセンサが冷蔵室扉１０１の開閉を検知する。冷蔵室扉１０１の開閉が検知されると、処理はステップＳ１１からステップＳ１２へと進む。   Next, an example of an operation flow of the refrigerator system configured as described above will be described with reference to FIG. First, when the refrigerator compartment door 101 is opened and closed by the user, the above-described sensor detects the opening and closing of the refrigerator compartment door 101. When the opening and closing of the refrigerator compartment door 101 is detected, the process proceeds from step S11 to step S12.

ステップＳ１２においては、庫内撮影装置２は、貯蔵室である冷蔵室１００の内部を撮影する。ステップＳ１２の後は、処理はステップＳ１３へと進む。ステップＳ１３においては、庫内撮影装置２は、ステップＳ１２で撮影した冷蔵室１００の内部の画像を、貯蔵室画像として貯蔵室画像記憶部４に送信する。貯蔵室画像記憶部４は、ステップＳ１２で庫内撮影装置２が撮影した貯蔵室画像を、撮影時刻情報とともに記憶する。ステップＳ１３の後は、処理はステップＳ１４へと進む。   In step S12, the in-compartment photographing device 2 photographs the inside of the refrigerator compartment 100, which is a storage room. After step S12, the process proceeds to step S13. In step S13, the in-compartment photographing device 2 transmits the image inside the refrigerator compartment 100 photographed in step S12 to the storage room image storage unit 4 as a storage room image. The storage room image storage unit 4 stores the storage room image photographed by the in-fridge photographing device 2 in step S12 together with photographing time information. After step S13, the process proceeds to step S14.

ステップＳ１４においては、貯蔵室画像記憶部４は、ステップＳ１３で受信した貯蔵室画像及び撮影時刻情報を貯蔵室画像管理部５に送信する。ステップＳ１４の後は、処理はステップＳ１５へと進む。ステップＳ１５においては、貯蔵室画像管理部５は、貯蔵室画像記憶部４から送信された貯蔵室画像を、撮影時刻情報に基づいて撮影時刻順に並び換えて記憶する。ステップＳ１５の後は、処理はステップＳ１６へと進む。   In step S14, the storage room image storage unit 4 transmits the storage room image and the photographing time information received in step S13 to the storage room image management unit 5. After step S14, the process proceeds to step S15. In step S15, the storage room image management unit 5 stores the storage room images transmitted from the storage room image storage unit 4 in the order of the shooting time based on the shooting time information. After step S15, the process proceeds to step S16.

ステップＳ１６においては、貯蔵室画像管理部５は、貯蔵室画像及び撮影時刻情報を操作パネル１へと送信する。操作パネル１は、受信した貯蔵室画像及び撮影時刻情報を、パネル表示部１ａに表示する。ステップＳ１６の後は、処理はステップＳ１７へと進む。   In step S16, the storage room image management unit 5 transmits the storage room image and the photographing time information to the operation panel 1. The operation panel 1 displays the received storage room image and the photographing time information on the panel display section 1a. After step S16, the process proceeds to step S17.

ステップＳ１７においては、無線通信部６は、第１の通信方式が現在選択されているか否かを確認する。第１の通信方式が選択されている場合は、処理はステップＳ１８へと進む。ステップＳ１８においては、無線通信部６は、貯蔵室画像記憶部４に一時的に記憶されている貯蔵室画像及び撮影時刻情報を、ルータ装置７及びインターネット８を介して、宅外のクラウドサーバ９へとアップロードする。ステップＳ１８の後は、処理はステップＳ１９へと進む。   In step S17, the wireless communication unit 6 checks whether the first communication method is currently selected. If the first communication method has been selected, the process proceeds to step S18. In step S18, the wireless communication unit 6 transmits the storage room image and the shooting time information temporarily stored in the storage room image storage unit 4 to the cloud server 9 outside the home via the router device 7 and the Internet 8. Upload to. After step S18, the process proceeds to step S19.

一方、ステップＳ１７で第１の通信方式が選択されていない場合、第２の通信方式が現在選択されていることになる。この場合は、ステップＳ１８を経ることなくステップＳ１７から直接ステップＳ１９へと処理が進む。   On the other hand, if the first communication method is not selected in step S17, it means that the second communication method is currently selected. In this case, the process proceeds directly from step S17 to step S19 without going through step S18.

ステップＳ１９及び続くステップＳ２０では、ステップＳ１８の処理が実行されているか否かで処理を行う主体が異なる。ステップＳ１８の処理が実行されて、クラウドサーバ９に貯蔵室画像がアップロードされている場合、すなわち、第１の通信方式が選択されている場合は、クラウドサーバ９は、ユーザ端末１０からの貯蔵室画像送信要求を受信したか否かを確認する。   In step S19 and the subsequent step S20, the entity that performs the process differs depending on whether or not the process of step S18 is being executed. When the processing of step S18 is executed and the storage room image is uploaded to the cloud server 9, that is, when the first communication method is selected, the cloud server 9 stores the storage room image from the user terminal 10. Check whether an image transmission request has been received.

これに対し、ステップＳ１８の処理が実行されていない場合、すなわち、第２の通信方式が選択されている場合は、無線通信部６が、ユーザ端末１０からの貯蔵室画像送信要求を受信したか否かを確認する。   On the other hand, if the process of step S18 has not been performed, that is, if the second communication method has been selected, whether the wireless communication unit 6 has received the storage room image transmission request from the user terminal 10. Check whether or not.

ユーザ端末１０からの貯蔵室画像送信要求を受信しない場合は、処理はステップＳ１１へと戻る。一方、ユーザ端末１０からの貯蔵室画像送信要求を受信した場合は、処理はステップＳ２０へと進む。   When the storage room image transmission request from the user terminal 10 is not received, the process returns to step S11. On the other hand, if a storage room image transmission request has been received from the user terminal 10, the process proceeds to step S20.

ステップＳ２０においては、第１の通信方式が選択されている場合、クラウドサーバ９が、ユーザ端末１０に貯蔵室画像及び撮影時刻情報を送信する。一方、第２の通信方式が選択されている場合、無線通信部６がユーザ端末１０に貯蔵室画像及び撮影時刻情報を送信する。そして、ユーザ端末１０は、受信した貯蔵室画像及び撮影時刻情報を端末表示部に表示する。ステップＳ２０の後は、処理はステップＳ１１へと戻る。   In step S20, when the first communication method is selected, the cloud server 9 transmits the storage room image and the photographing time information to the user terminal 10. On the other hand, when the second communication method is selected, the wireless communication unit 6 transmits the storage room image and the shooting time information to the user terminal 10. Then, the user terminal 10 displays the received storage room image and the photographing time information on the terminal display unit. After step S20, the process returns to step S11.

なお、以上においては、庫内撮影装置２を冷蔵室１００に設けた場合を例に挙げて説明した。しかしながら、庫内撮影装置２の設置箇所はこの例に限定されるものではない。庫内撮影装置２を、冷蔵室１００以外の貯蔵室に設けてもよく、複数の貯蔵室に同時に設置してもよい。例えば、野菜室５００は、他の貯蔵室に比べて内部の状況を把握しにくいうえ、劣化しやすい野菜が収納される貯蔵室である。そこで、野菜室５００に、庫内撮影装置２を設置することで、ユーザは、野菜室５００の内部を撮影した画像を宅外から確認できるようになる。したがって、ユーザは、野菜室５００に在庫された食品の消費期限を容易に把握でき、消費期限を徒過して食品を廃棄する可能性を低減することができる。   In the above, the case where the in-compartment photographing device 2 is provided in the refrigerator compartment 100 has been described as an example. However, the installation location of the in-compartment photographing device 2 is not limited to this example. The in-compartment imaging device 2 may be provided in a storage room other than the refrigerator room 100, or may be installed in a plurality of storage rooms at the same time. For example, the vegetable room 500 is a storage room in which vegetables that are more difficult to grasp the internal state than other storage rooms and that easily deteriorate are stored. Therefore, by installing the in-compartment photographing device 2 in the vegetable room 500, the user can confirm an image of the inside of the vegetable room 500 taken from outside the house. Therefore, the user can easily grasp the expiration date of the food stocked in the vegetable room 500, and can reduce the possibility of discarding the food after the expiration date.

また、冷凍室４００に庫内撮影装置２を設けることで、ユーザは、食事のメインとなる食材である冷凍した肉、ご飯等の収納状況を把握できる。さらに、冷凍食品は、購入した場合には冷凍室４００に収納する必要がある。冷凍室４００に庫内撮影装置２があれば、冷凍室４００の収納量を家族等の複数のユーザで共有できるため、ユーザは、冷凍食品を買う量を宅外から判断することが可能となる。   Further, by providing the in-fridge photographing device 2 in the freezing room 400, the user can grasp the storage state of frozen meat, rice, and the like, which are main ingredients of meals. Further, when the frozen food is purchased, it is necessary to store the frozen food in the freezing room 400. If the freezer compartment 400 has the in-fridge photographing device 2, the storage amount of the freezer compartment 400 can be shared by a plurality of users such as family members, so that the user can determine the amount of buying frozen food from outside the home. .

以上のように構成された冷蔵庫システムは、食品を収納する貯蔵室が形成された冷蔵庫１０００と、貯蔵室の内部を撮影し、貯蔵室画像として出力する庫内撮影装置２と、庫内撮影装置２から出力された貯蔵室画像を記憶する貯蔵室画像記憶部４と、貯蔵室画像記憶部４に記憶された貯蔵室画像を記憶する貯蔵室画像管理部５と、外部と通信可能な無線通信部６と、無線通信部６と通信可能なユーザ端末１０と、を備えている。   The refrigerator system configured as described above includes a refrigerator 1000 in which a storage room for storing food is formed, an in-compartment photographing device 2 that photographs the inside of the storage room and outputs the image as a storage room image, and an in-compartment photographing device. A storage room image storage unit 4 for storing the storage room image output from the storage room image storage unit 2; a storage room image management unit 5 for storing the storage room image stored in the storage room image storage unit 4; And a user terminal 10 that can communicate with the wireless communication unit 6.

そして、無線通信部６は、貯蔵室画像記憶部４に記憶された貯蔵室画像をクラウドサーバ９に送信する第１の通信方式と、貯蔵室画像管理部５に記憶された貯蔵室画像をユーザ端末１０に送信する第２の通信方式とを切り換え可能である。また、ユーザ端末１０は、無線通信部６が第１の通信方式を選択している場合に、クラウドサーバ９から貯蔵室画像を受信し、無線通信部６が第２の通信方式を選択している場合に、貯蔵室画像管理部５に記憶された貯蔵室画像を無線通信部６から受信する。   The wireless communication unit 6 transmits the storage room image stored in the storage room image storage unit 4 to the cloud server 9 and transmits the storage room image stored in the storage room image management unit 5 to the user. It is possible to switch between the second communication method for transmitting to the terminal 10. When the wireless communication unit 6 has selected the first communication method, the user terminal 10 receives the storage room image from the cloud server 9 and the wireless communication unit 6 selects the second communication method. If it is, the storage room image stored in the storage room image management unit 5 is received from the wireless communication unit 6.

このため、宅内のユーザ端末１０からは、インターネット８等の宅外の通信ネットワークを経由することなく、貯蔵室画像管理部５で管理されている全ての貯蔵室画像を確認することができる。そして、宅外のユーザ端末１０でも、クラウドサーバ９を介して最新の貯蔵室画像を確認することが可能である。   For this reason, all the storage room images managed by the storage room image management unit 5 can be confirmed from the in-home user terminal 10 without passing through a communication network outside the home such as the Internet 8. Then, even the user terminal 10 outside the house can check the latest storage room image via the cloud server 9.

したがって、冷蔵庫本体が設置された宅内及び宅外の両方のユーザ端末から、冷蔵庫本体の最新の貯蔵室画像を確認でき、かつ、宅内の無線通信部６と宅外の機器との通信が必要な機会を極力減らし、通信負荷及び通信費用の削減、並びに、インターネット上への情報流出のリスク及びセキュリティホールの発生等のセキュリティリスクの低減を図ることが可能である。   Therefore, the latest storage room image of the refrigerator main body can be confirmed from both the user terminal inside and outside the home where the refrigerator main body is installed, and communication between the wireless communication unit 6 in the home and the equipment outside the home is required. Opportunities can be reduced as much as possible, and the communication load and communication cost can be reduced, and the risk of information leakage onto the Internet and the security risk such as the occurrence of security holes can be reduced.

また、特に以下の２つの理由により、宅内の無線通信部６と宅外の機器との通信の機会を大きく減らすことができる。第１に、ユーザ端末１０の数にかかわらず、宅内の無線通信部６が通信を行う宅外の機器はクラウドサーバ９だけである。第２に、宅外のユーザ端末は貯蔵室画像が更新されたか否かを外部サーバにアクセスして確認するため、最新の貯蔵室画像を一度外部サーバにアップロードすれば、次に貯蔵室画像が更新されるまでは、宅内の画像サーバと宅外の外部サーバとの間で通信を行う必要がない。
In particular, for the following two reasons, the opportunity of communication between the wireless communication unit 6 in the home and the device outside the home can be greatly reduced. First, irrespective of the number of user terminals 10, the only device outside the home with which the wireless communication unit 6 in the home communicates is the cloud server 9. Second, since the user terminal outside the home may be checked by accessing whether the storage chamber image is updated in the external server, if upload the latest storage chamber picture image once in an external server, then the storage chamber image Until is updated, there is no need to perform communication between the in-home image server and the external server outside the home.

実施の形態２．
図６及び図７は、この発明の実施の形態２に係るもので、図６は冷蔵庫システムにおいて複数のユーザ端末に貯蔵室画像を送信する場合について説明する図、図７は冷蔵庫システムにおいて複数の冷蔵庫の貯蔵室画像をユーザ端末に送信する場合について説明する図である。Embodiment 2 FIG.
6 and 7 relate to Embodiment 2 of the present invention. FIG. 6 is a diagram for explaining a case where a storage room image is transmitted to a plurality of user terminals in a refrigerator system, and FIG. It is a figure explaining the case where a storage room image of a refrigerator is transmitted to a user terminal.

ここで説明する実施の形態２は、前述した実施の形態１の構成において、画像サーバに対し、複数の画像サーバから当該画像サーバを一意に識別可能な画像サーバ識別情報を割り当てるようにしたものである。以下、この実施の形態２に係る冷蔵庫システムについて、実施の形態１との相違点を中心に説明する。   In the second embodiment described here, in the configuration of the first embodiment described above, image server identification information capable of uniquely identifying the image server is assigned to the image server from a plurality of image servers. is there. Hereinafter, the refrigerator system according to the second embodiment will be described focusing on differences from the first embodiment.

図６は、１つの画像サーバ３から宅内にある複数のユーザ端末１０に貯蔵室画像を送信する状況の一例を示している。同図に示すように、冷蔵庫１０００に対応する画像サーバ３には、画像サーバ識別番号１２が割り当られている。画像サーバ識別番号１２は、複数の画像サーバ３から特定の画像サーバ３を一意に識別可能な画像サーバ識別情報である。   FIG. 6 shows an example of a situation in which a storage room image is transmitted from one image server 3 to a plurality of user terminals 10 in the house. As shown in the figure, the image server 3 corresponding to the refrigerator 1000 is assigned an image server identification number 12. The image server identification number 12 is image server identification information capable of uniquely identifying a specific image server 3 from a plurality of image servers 3.

ユーザ端末１０は、画像サーバ識別情報である画像サーバ識別番号１２を用いて、当該画像サーバ識別番号１２により特定される画像サーバ３に接続することができる。この例における冷蔵庫システムは、第１のユーザ端末１０ａ、第２のユーザ端末１０ｂ及び第３のユーザ端末１０ｃの複数のユーザ端末１０を備えている。   The user terminal 10 can connect to the image server 3 specified by the image server identification number 12 using the image server identification number 12 that is the image server identification information. The refrigerator system in this example includes a plurality of user terminals 10, a first user terminal 10a, a second user terminal 10b, and a third user terminal 10c.

第２の通信方式が選択されている場合、画像サーバ３には、宅内にある複数のユーザ端末１０が同時に接続することができる。そして、第２の通信方式において、これらの第１のユーザ端末１０ａ、第２のユーザ端末１０ｂ及び第３のユーザ端末１０ｃのそれぞれが、画像サーバ３から冷蔵庫１０００の貯蔵室画像を受信する場合、第１のユーザ端末１０ａ、第２のユーザ端末１０ｂ及び第３のユーザ端末１０ｃは、共通する同一の画像サーバ識別番号１２を指定して、画像サーバ３に接続する。   When the second communication method is selected, a plurality of user terminals 10 at home can simultaneously connect to the image server 3. In the second communication method, when each of the first user terminal 10a, the second user terminal 10b, and the third user terminal 10c receives the storage room image of the refrigerator 1000 from the image server 3, The first user terminal 10a, the second user terminal 10b, and the third user terminal 10c connect to the image server 3 by specifying the same and identical image server identification number 12.

このようにして、同一の冷蔵庫１０００の画像サーバ３に対して、複数のユーザ端末１０を接続する場合に、共通する同一の画像サーバ識別番号１２を使用することで、例えば、ユーザ端末１０から画像サーバ３への通信接続設定を行う際に、同一の設定内容にすることができ、容易に設定作業を行うことが可能である。また、通常使用しているユーザとは別のユーザ、例えば、修理に訪れたサービスマンが画像サーバ３に接続する場合にも、共通の画像サーバ識別番号１２を用いることができる。ただし、この場合には、冷蔵庫１０００を所有するユーザとは異なる、サービスマン専用のアクセスコードを設定しておくことが望ましい。   In this way, when a plurality of user terminals 10 are connected to the image server 3 of the same refrigerator 1000, the same image server identification number 12 is used, for example, so that the user terminal 10 When the communication connection setting to the server 3 is performed, the same setting content can be set, and the setting operation can be easily performed. The common image server identification number 12 can also be used when a user different from the user who normally uses the device, for example, a serviceman who has visited for repair connects to the image server 3. However, in this case, it is desirable to set an access code dedicated to service personnel different from the user who owns refrigerator 1000.

次に、図７は、宅内にある１つのユーザ端末１０が複数の画像サーバ３に記憶されている貯蔵室画像を取得する状況の一例を示している。同図に示すように、この例では、宅内に第１の冷蔵庫１０００ａと第２の冷蔵庫１０００ｂの複数の冷蔵庫１０００が設置されている。そして、第１の冷蔵庫１０００ａに対応して第１の画像サーバ３ａが設けられている。また、第２の冷蔵庫１０００ｂに対応して第２の画像サーバ３ｂが設けられている。   Next, FIG. 7 illustrates an example of a situation in which one user terminal 10 in a house acquires storage room images stored in a plurality of image servers 3. As shown in the figure, in this example, a plurality of refrigerators 1000 of a first refrigerator 1000a and a second refrigerator 1000b are installed in the house. Further, a first image server 3a is provided corresponding to the first refrigerator 1000a. Further, a second image server 3b is provided corresponding to the second refrigerator 1000b.

第１の冷蔵庫１０００ａに対応する第１の画像サーバ３ａには、第１の画像サーバ識別番号１２ａが割り当てられている。第２の冷蔵庫１０００ｂに対応する第２の画像サーバ３ｂには、第２の画像サーバ識別番号１２ｂが割り当てられている。第１の画像サーバ識別番号１２ａ及び第２の画像サーバ識別番号１２ｂは、いずれも前述した画像サーバ識別情報である。   The first image server 3a corresponding to the first refrigerator 1000a is assigned a first image server identification number 12a. The second image server 3b corresponding to the second refrigerator 1000b is assigned a second image server identification number 12b. Each of the first image server identification number 12a and the second image server identification number 12b is the above-described image server identification information.

図６の例と同じく、ユーザ端末１０は、画像サーバ識別情報である画像サーバ識別番号１２を用いて、当該画像サーバ識別番号１２により特定される画像サーバ３に接続することができる。この図７の例では、ユーザ端末１０が第１の画像サーバ３ａから第１の冷蔵庫１０００ａの貯蔵室画像を受信する場合、ユーザ端末１０は、第１の画像サーバ識別番号１２ａを指定して、第１の画像サーバ３ａに接続する。また、ユーザ端末１０が第２の画像サーバ３ｂから第１の冷蔵庫１０００ａの貯蔵室画像を受信する場合、ユーザ端末１０は、第２の画像サーバ識別番号１２ｂを指定して、第２の画像サーバ３ｂに接続する。   As in the example of FIG. 6, the user terminal 10 can connect to the image server 3 specified by the image server identification number 12 using the image server identification number 12 that is the image server identification information. In the example of FIG. 7, when the user terminal 10 receives the storage room image of the first refrigerator 1000a from the first image server 3a, the user terminal 10 specifies the first image server identification number 12a, Connect to the first image server 3a. When the user terminal 10 receives the storage room image of the first refrigerator 1000a from the second image server 3b, the user terminal 10 specifies the second image server identification number 12b and 3b.

このようにして、例えば、製品出荷前の工場のライン検査において、複数の冷蔵庫１０００の貯蔵室画像を確認する場合、又は、複数の冷蔵庫１０００が設置された店頭デモ等において、１つのユーザ端末１０で複数の冷蔵庫１０００の貯蔵室画像を表示することができる。   In this way, for example, in the case of checking the storage room images of a plurality of refrigerators 1000 in a line inspection of a factory before product shipment, or in a store demonstration where a plurality of refrigerators 1000 are installed, one user terminal 10 Thus, the storage room images of the plurality of refrigerators 1000 can be displayed.

なお、以上は宅内の画像サーバ３に関してであったが、宅外のクラウドサーバ９についても、複数のユーザ端末１０が同時に接続できるようにしてもよい。このようにすることで、例えば、遠方に住む親の冷蔵庫１０００の貯蔵室画像を、親自身のユーザ端末１０以外に、子のユーザ端末１０からも確認することができる。また、子のユーザ端末１０から、親の冷蔵庫１０００の貯蔵室画像と、子自身の冷蔵庫１０００の貯蔵室画像の両方を確認することも可能である。   Although the above description has been made with respect to the image server 3 in the house, a plurality of user terminals 10 may be connected to the cloud server 9 outside the house at the same time. In this way, for example, the storage room image of the refrigerator 1000 of the parent who lives far away can be checked not only from the user terminal 10 of the parent but also from the user terminal 10 of the child. It is also possible to confirm both the storage room image of the parent refrigerator 1000 and the storage room image of the child refrigerator 1000 from the child user terminal 10.

他の構成については実施の形態１と同様であり、ここでは、その説明を省略する。   Other configurations are the same as those in the first embodiment, and a description thereof will not be repeated.

以上のように構成された冷蔵庫システムにおいても、実施の形態１と同様の効果を奏することができる。さらに、システムが、複数の冷蔵庫１０００、又は、複数のユーザ端末１０を備える場合であっても、容易かつ確実に通信設定及び貯蔵室画像の送受信を行うことが可能である。   In the refrigerator system configured as described above, the same effect as in the first embodiment can be obtained. Further, even when the system includes a plurality of refrigerators 1000 or a plurality of user terminals 10, it is possible to easily and reliably perform communication setting and transmission / reception of a storage room image.

実施の形態３．
図８から図１３は、この発明の実施の形態３に係るもので、図８は冷蔵庫システムの宅内側の構成と冷蔵庫の冷蔵室の構成とを模式的に示す図、図９は冷蔵庫システムの貯蔵室画像の一例を示す図、図１０から図１２は、冷蔵庫システムの加工後の貯蔵室画像の第１から第３の例をそれぞれ示す図、図１３は冷蔵庫システムの動作を説明するフロー図である。Embodiment 3 FIG.
8 to 13 relate to the third embodiment of the present invention. FIG. 8 is a diagram schematically showing a configuration of a refrigerator system inside a house and a configuration of a refrigerator room, and FIG. FIGS. 10 to 12 show examples of the storage room image after processing the refrigerator system, respectively. FIGS. 10 to 12 show first to third examples of the storage room image, and FIG. 13 is a flowchart illustrating the operation of the refrigerator system. It is.

ここで説明する実施の形態３は、前述した実施の形態１又は実施の形態２の構成において、第１の通信方式が選択されている場合に、第１の画像記憶部に記憶された貯蔵室画像を加工した後に通信装置が外部サーバに送信するようにしたものである。以下、この実施の形態３に係る冷蔵庫システムについて、実施の形態１の構成をもとにした場合を例に挙げ、実施の形態１との相違点を中心に説明する。   In the third embodiment described here, the storage room stored in the first image storage unit when the first communication method is selected in the configuration of the first or second embodiment described above. After processing the image, the communication device transmits the image to an external server. Hereinafter, the refrigerator system according to the third embodiment will be described focusing on differences from the first embodiment, taking as an example a case based on the configuration of the first embodiment.

この実施の形態３に係る冷蔵庫システムにおいては、図８に示すように、画像サーバ３は画像処理部１３及び処理画像記憶部１４を備えている。画像処理部１３は、第１の画像記憶部である貯蔵室画像記憶部４に記憶されている貯蔵室画像を加工する。画像処理部１３は、画像加工処理を円滑に行うため、画像の高速処理可能なプロセッサを備えていることが望ましい。このようなプロセッサの動作周波数は、具体的に例えば、４００ＭＨｚ以上である。画像処理部１３は、加工処理した貯蔵室画像及び当該貯蔵室画像の撮影時刻情報を、処理画像記憶部１４に送信する。画像処理部１３による貯蔵室画像の加工処理の具体的な内容については後述する。   In the refrigerator system according to the third embodiment, as shown in FIG. 8, the image server 3 includes an image processing unit 13 and a processed image storage unit 14. The image processing unit 13 processes the storage room image stored in the storage room image storage unit 4 that is the first image storage unit. It is preferable that the image processing unit 13 includes a processor capable of processing images at high speed in order to smoothly perform image processing. The operating frequency of such a processor is specifically, for example, 400 MHz or more. The image processing unit 13 transmits the processed storage room image and the shooting time information of the storage room image to the processed image storage unit 14. Specific contents of the processing of the storage room image by the image processing unit 13 will be described later.

処理画像記憶部１４は、画像処理部１３により加工された後の貯蔵室画像を、無線通信部６が送信するまで記憶しておくためのものである。処理画像記憶部１４は、画像処理部１３による加工後の貯蔵室画像及び撮影時刻情報を取得する。そして、処理画像記憶部１４は、取得した加工後の貯蔵室画像を撮影時刻情報に基づいて撮影時刻順に並び換えて記憶する。この際、処理画像記憶部１４は、取得した加工後の貯蔵室画像を、画像処理部１３による加工処理の方法毎に分類して記憶するようにしてもよい。   The processed image storage unit 14 is for storing the storage room image processed by the image processing unit 13 until the wireless communication unit 6 transmits the image. The processed image storage unit 14 acquires the storage room image and the photographing time information after the processing by the image processing unit 13. Then, the processed image storage unit 14 stores the acquired processed storage room images rearranged in the order of the photographing time based on the photographing time information. At this time, the processed image storage unit 14 may classify and store the acquired processed storage room images for each processing method by the image processing unit 13.

無線通信部６は、第１の通信方式を選択されている場合に、処理画像記憶部１４に記憶されている貯蔵室画像をルータ装置７及びインターネット８を介して、宅外のクラウドサーバ９へと送信する。したがって、通信装置である無線通信部６は、貯蔵室画像記憶部４に記憶された貯蔵室画像を画像処理部１３が加工した後の画像を、外部サーバであるクラウドサーバ９へと送信する。   The wireless communication unit 6 transmits the storage room image stored in the processed image storage unit 14 to the cloud server 9 outside the home via the router device 7 and the Internet 8 when the first communication method is selected. And send. Therefore, the wireless communication unit 6 that is a communication device transmits the image obtained by processing the storage room image stored in the storage room image storage unit 4 by the image processing unit 13 to the cloud server 9 that is an external server.

クラウドサーバ９は、無線通信部６から送信された加工後の貯蔵室画像を受信する。そして、クラウドサーバ９は、受信した加工後の貯蔵室画像を記憶する。宅外のユーザ端末１０は、クラウドサーバ９からインターネット８を介して加工後の貯蔵室画像を受信する。   The cloud server 9 receives the processed storage room image transmitted from the wireless communication unit 6. The cloud server 9 stores the received processed storage room image. The user terminal 10 outside the house receives the processed storage room image from the cloud server 9 via the Internet 8.

次に、画像処理部１３による貯蔵室画像の加工処理の具体的な内容について、図９から図１２を参照し具体例を挙げながら説明する。まず、図９に示すのは、貯蔵室画像記憶部４に一時的に記憶されている貯蔵室画像の一例である。すなわち、図９は、画像処理部１３による加工が行われる前の貯蔵室画像の例を示している。   Next, specific contents of the processing of processing the storage room image by the image processing unit 13 will be described with reference to FIGS. 9 to 12 and specific examples. First, FIG. 9 shows an example of a storage room image temporarily stored in the storage room image storage unit 4. That is, FIG. 9 illustrates an example of the storage room image before the image processing unit 13 performs the processing.

図１０に示すのは、図９の貯蔵室画像を画像処理部１３が加工処理した後の貯蔵室画像の第１の例である。この第１の例では、画像処理部１３は、貯蔵室画像の解像度を低くする加工を行う。画像処理部１３は、例えば、図９のような貯蔵室全体の画像に対し、一定範囲内の画素間で平均化処理し画像サイズを縮小した後に、縮小後の解像度を保ったまま元の画像サイズに引きのばすことで、貯蔵室画像の解像度を下げる加工を行う。図１０に示す例は、図９のような全体画像を１／８の画像サイズに圧縮し、解像度を元の画像の１／８にしたものである。   FIG. 10 shows a first example of the storage room image after the image processing unit 13 processes the storage room image of FIG. 9. In the first example, the image processing unit 13 performs processing to lower the resolution of the storage room image. The image processing unit 13, for example, reduces the image size by averaging the pixels in a certain range with respect to the image of the entire storage room as shown in FIG. 9, and then retains the original image while maintaining the reduced resolution. The process of reducing the resolution of the storage room image is performed by extending it to the size. In the example shown in FIG. 10, the entire image as shown in FIG. 9 is compressed to an image size of 1/8, and the resolution is reduced to 1/8 of the original image.

このような低解像度の画像であっても、ユーザは冷蔵室１００等の貯蔵室内の状況のおおよそを把握できる。図９の全体画像をインターネット８を介してそのままクラウドサーバ９にアップロードした場合と比較して、図１０の加工後の画像では、通信データ量を削減できる。したがって、解解像の低減率を調整することにより、画像アップロード時の通信速度を向上させ、例えば遠隔地等においても、貯蔵室画像送信要求を送信してから貯蔵室画像を受信するまでのタイムラグを短くすることができる。   Even with such a low-resolution image, the user can grasp the approximate situation in the storage room such as the refrigerator compartment 100. As compared with the case where the whole image of FIG. 9 is uploaded to the cloud server 9 via the Internet 8 as it is, the amount of communication data can be reduced in the processed image of FIG. Therefore, by adjusting the reduction rate of the resolution, the communication speed at the time of uploading the image is improved. For example, even in a remote place, the time lag from the transmission of the storage room image transmission request to the reception of the storage room image is received. Can be shortened.

次に、図１１に示すのは、画像処理部１３による加工処理後の貯蔵室画像の第２の例である。この第２の例は、画像処理部１３が貯蔵室画像を複数に分割する加工を行うものである。画像処理部１３は、図９のような貯蔵室全体の画像を、例えば、予め設定された分割数で分割する。又は、画像処理部１３は、分割後の画像サイズが予め設定された値以下となるように、貯蔵室画像を分割するようにしてもよい。図１０に示す例は、図９のような全体画像を、１６個の等面積の領域に分割したしたものである。   Next, FIG. 11 shows a second example of the storage room image after the processing by the image processing unit 13. In the second example, the image processing unit 13 performs a process of dividing the storage room image into a plurality. The image processing unit 13 divides the image of the entire storage room as shown in FIG. 9 by, for example, a preset number of divisions. Alternatively, the image processing unit 13 may divide the storage room image so that the image size after the division is equal to or smaller than a preset value. The example shown in FIG. 10 is obtained by dividing the entire image as shown in FIG. 9 into 16 equal-area regions.

図９の全体画像をインターネット８を介してそのままクラウドサーバ９にアップロードした場合と比較して、図１１の加工後の画像では、分割後の画像を１つずつ順番に送信することで、１回すなわち分割後の１個の画像を送信する際の通信データ量を削減できる。したがって、画像アップロード時の通信速度を向上させることが可能である。また、例えば、貯蔵室の最下段のみ、左側のみ等、特定の領域を含む分割画像のみを送信させるようにすることで、少ない通信データ量で、画像の解像度を維持したまま、所望の領域の収納状況をユーザが確認することが可能となる。   Compared to the case where the entire image of FIG. 9 is uploaded to the cloud server 9 via the Internet 8 as it is, the processed images of FIG. 11 are transmitted once by sequentially transmitting the divided images one by one. That is, the amount of communication data when transmitting one image after division can be reduced. Therefore, it is possible to improve the communication speed at the time of uploading an image. Also, for example, by transmitting only a divided image including a specific area, such as only the lowermost row of the storage room, only the left side, etc., with a small amount of communication data, while maintaining the resolution of the image, The user can check the storage status.

そして、図１２に示すのは、画像処理部１３による加工処理後の貯蔵室画像の第３の例である。この第３の例は、画像処理部１３が、貯蔵室画像から貯蔵室内の食品が撮影された部分を抽出する加工を行うものである。この第３の例においては、例えば、画像処理部１３は、食品が全く収納されていない状態で庫内撮影装置２が貯蔵室内を撮影した初期画像を予め記憶している。画像処理部１３は、庫内撮影装置２が撮影した貯蔵室画像と初期画像との差分を演算する。そして、画像処理部１３は、初期画像から変化があった部分を、食品が配置されている部分として抽出する。   FIG. 12 shows a third example of the storage room image after the processing by the image processing unit 13. In the third example, the image processing unit 13 performs a process of extracting a portion where food in the storage room is photographed from the storage room image. In the third example, for example, the image processing unit 13 previously stores an initial image of the inside of the storage room captured by the in-compartment photographing device 2 in a state where no food is stored. The image processing unit 13 calculates a difference between the storage room image captured by the in-compartment imaging device 2 and the initial image. Then, the image processing unit 13 extracts a portion that has changed from the initial image as a portion where the food is arranged.

図９の全体画像をインターネット８を介してそのままクラウドサーバ９にアップロードした場合と比較して、図１２の加工後の画像では、食品抽出後の画像を１つずつ順番に送信することで、１回すなわち食品が抽出された１個の画像を送信する際の通信データ量を削減できる。したがって、画像アップロード時の通信速度を向上させることが可能である。また、ユーザは、冷蔵庫１０００の貯蔵室内に在庫している在庫食品の画像のみを入手できる。このため、ユーザは、素早く容易に在庫食品を確認することができる。したがって、例えば買い物先において、ユーザは、食品抽出画像から在庫状況を把握して、食材の買い過ぎ又は買い忘れを防止することが可能となる。   Compared to the case where the whole image of FIG. 9 is uploaded to the cloud server 9 via the Internet 8 as it is, the processed images of FIG. It is possible to reduce the amount of communication data at the time of transmitting one image from which the food is extracted. Therefore, it is possible to improve the communication speed at the time of uploading an image. Further, the user can obtain only the image of the stock food in stock in the storage room of the refrigerator 1000. Therefore, the user can quickly and easily check the stock food. Therefore, for example, at the shopping destination, the user can grasp the stock status from the food extraction image and prevent over-purchase or forget-to-purchase of the ingredients.

なお、他の構成については実施の形態１又は実施の形態２と同様であり、ここでは、その説明を省略する。   The other configuration is the same as that of the first or second embodiment, and the description is omitted here.

次に、以上のように構成された実施の形態３に係る冷蔵庫システムの動作の流れの一例を、図１３を参照しながら説明する。この図１３のフロー図にあるステップＳ１１からＳ１７の内容は、実施の形態１で説明した図５のフロー図にあるステップＳ１１からＳ１７の内容と同じである。このため、これらのステップの説明はここでは省略する。そして、この実施の形態３の図１３の動作フローにおいては、ステップＳ１７で第１の通信方式が現在選択されている場合、処理はステップＳ２１へと進む。   Next, an example of an operation flow of the refrigerator system according to Embodiment 3 configured as described above will be described with reference to FIG. The contents of steps S11 to S17 in the flowchart of FIG. 13 are the same as the contents of steps S11 to S17 in the flowchart of FIG. 5 described in the first embodiment. Therefore, description of these steps is omitted here. Then, in the operation flow of FIG. 13 of the third embodiment, if the first communication method is currently selected in step S17, the process proceeds to step S21.

ステップＳ２１においては、貯蔵室画像記憶部４は、自身に記憶している最後の貯蔵室画像及び撮影時刻情報を、画像処理部１３に送信する。ステップＳ２１の後は、処理はステップＳ２２へと進む。   In step S21, the storage room image storage unit 4 transmits the last storage room image and the shooting time information stored therein to the image processing unit 13. After step S21, the process proceeds to step S22.

ステップＳ２２においては、画像処理部１３は、貯蔵室画像記憶部４から受信した貯蔵室画像に、予め設定された画像加工処理を施す。そして、画像処理部１３は、加工処理した貯蔵室画像及び当該貯蔵室画像の撮影時刻情報を、処理画像記憶部１４に送信する。ステップＳ２２の後は、処理はステップＳ１８へと進む。   In step S22, the image processing unit 13 performs a preset image processing process on the storage room image received from the storage room image storage unit 4. Then, the image processing unit 13 transmits the processed storage room image and the shooting time information of the storage room image to the processed image storage unit 14. After step S22, the process proceeds to step S18.

ステップＳ１８においては、無線通信部６は、処理画像記憶部１４に記憶されている加工後の貯蔵室画像及び撮影時刻情報を、ルータ装置７及びインターネット８を介して、宅外のクラウドサーバ９へとアップロードする。ステップＳ１８の後は、処理はステップＳ１９へと進む。   In step S18, the wireless communication unit 6 transmits the processed storage room image and the photographing time information stored in the processed image storage unit 14 to the cloud server 9 outside the home via the router device 7 and the Internet 8. And upload. After step S18, the process proceeds to step S19.

一方、ステップＳ１７で第１の通信方式が選択されていない場合、第２の通信方式が現在選択されていることになる。この場合は、ステップＳ２１、Ｓ２２及びＳ１８を経ることなく、ステップＳ１７からに直接ステップＳ１９へと処理が進む。   On the other hand, if the first communication method is not selected in step S17, it means that the second communication method is currently selected. In this case, the process directly proceeds from step S17 to step S19 without going through steps S21, S22 and S18.

ステップＳ１９及び続くステップＳ２０では、ステップＳ２１、Ｓ２２及びＳ１８の処理が実行されているか否かで処理を行う主体が異なる。ステップＳ２１、Ｓ２２及びＳ１８の処理が実行されて、クラウドサーバ９に加工後の貯蔵室画像がアップロードされている場合、すなわち、第１の通信方式が選択されている場合は、クラウドサーバ９は、ユーザ端末１０からの貯蔵室画像送信要求を受信したか否かを確認する。   In step S19 and the subsequent step S20, the entity that performs the processing differs depending on whether or not the processing in steps S21, S22, and S18 is being performed. When the processing in steps S21, S22 and S18 is executed and the processed storage room image is uploaded to the cloud server 9, that is, when the first communication method is selected, the cloud server 9 It is confirmed whether or not the storage room image transmission request from the user terminal 10 has been received.

これに対し、ステップＳ２１、Ｓ２２及びＳ１８の処理が実行されていない場合、すなわち、第２の通信方式が選択されている場合は、無線通信部６が、ユーザ端末１０からの貯蔵室画像送信要求を受信したか否かを確認する。   On the other hand, when the processing of steps S21, S22, and S18 is not performed, that is, when the second communication method is selected, the wireless communication unit 6 transmits the storage room image transmission request from the user terminal 10. Check whether or not was received.

ユーザ端末１０からの貯蔵室画像送信要求を受信しない場合は、処理はステップＳ１１へと戻る。一方、ユーザ端末１０からの貯蔵室画像送信要求を受信した場合は、処理はステップＳ２０へと進む。   When the storage room image transmission request from the user terminal 10 is not received, the process returns to step S11. On the other hand, if a storage room image transmission request has been received from the user terminal 10, the process proceeds to step S20.

ステップＳ２０においては、第１の通信方式が選択されている場合、クラウドサーバ９が、ユーザ端末１０に加工後の貯蔵室画像及び撮影時刻情報を送信する。一方、第２の通信方式が選択されている場合、無線通信部６がユーザ端末１０に貯蔵室画像及び撮影時刻情報を送信する。そして、ユーザ端末１０は、受信した加工後の又は未加工の貯蔵室画像及び撮影時刻情報を端末表示部に表示する。ステップＳ２０の後は、処理はステップＳ１１へと戻る。   In step S20, when the first communication method is selected, the cloud server 9 transmits the processed storage room image and the photographing time information to the user terminal 10. On the other hand, when the second communication method is selected, the wireless communication unit 6 transmits the storage room image and the shooting time information to the user terminal 10. Then, the user terminal 10 displays the received processed or unprocessed storage room image and the shooting time information on the terminal display unit. After step S20, the process returns to step S11.

以上のように構成された冷蔵庫システムは、実施の形態１又は実施の形態２と同様の効果を奏することができるのに加えて、第１通信方式において、撮影した貯蔵室画像を画像処理部１３により加工した後の画像を外部サーバに送信することで、通信負荷を低減することができる。よって、インターネット８を介したクラウドサーバ９への接続所要時間を短縮することが可能である。   The refrigerator system configured as described above can provide the same effects as those of the first or second embodiment, and can also store the captured storage room image in the first communication method in the image processing unit 13. By transmitting the processed image to the external server, the communication load can be reduced. Therefore, it is possible to reduce the time required to connect to the cloud server 9 via the Internet 8.

この発明は、食品を収納する貯蔵室が形成された冷蔵庫本体と、貯蔵室の内部を撮影し、貯蔵室画像として出力するカメラと、を備え、カメラから出力された貯蔵室画像を端末装置に表示させる冷蔵庫システムに利用できる。   The present invention includes a refrigerator main body in which a storage room for storing food is formed, and a camera that photographs the inside of the storage room and outputs the image as a storage room image, and outputs the storage room image output from the camera to a terminal device. It can be used for refrigerator systems to display.

１ 操作パネル
１ａ パネル表示部
２ 庫内撮影装置
３ 画像サーバ
３ａ 第１の画像サーバ
３ｂ 第２の画像サーバ
４ 貯蔵室画像記憶部
５ 貯蔵室画像管理部
６ 無線通信部
７ ルータ装置
８ インターネット
９ クラウドサーバ
１０ ユーザ端末
１０ａ 第１のユーザ端末
１０ｂ 第２のユーザ端末
１０ｃ 第３のユーザ端末
１１ 個人認証装置
１２ 画像サーバ識別番号
１２ａ 第１の画像サーバ識別番号
１２ｂ 第２の画像サーバ識別番号
１３ 画像処理部
１４ 処理画像記憶部
１００ 冷蔵室
１０１ 冷蔵室扉
１０２ 冷蔵室棚板
１１０ チルド室
１１１ チルドケース
２００ 製氷室
３００ 切替室
４００ 冷凍室
５００ 野菜室
１０００ 冷蔵庫
１０００ａ 第１の冷蔵庫
１０００ｂ 第２の冷蔵庫
１００１ 制御基板
１０１０ 冷却風路DESCRIPTION OF SYMBOLS 1 Operation panel 1a Panel display part 2 In-room imaging device 3 Image server 3a First image server 3b Second image server 4 Storage room image storage part 5 Storage room image management part 6 Wireless communication part 7 Router device 8 Internet 9 Cloud Server 10 User terminal 10a First user terminal 10b Second user terminal 10c Third user terminal 11 Personal authentication device 12 Image server identification number 12a First image server identification number 12b Second image server identification number 13 Image processing Unit 14 processed image storage unit 100 refrigeration room 101 refrigeration room door 102 refrigeration room shelf 110 chilled room 111 chilled case 200 ice making room 300 switching room 400 freezing room 500 vegetable room 1000 refrigerator 1000a first refrigerator 1000b second refrigerator 1001 control Substrate 1010 Cooling air path

Claims (13)

宅内に設置され、食品を収納する貯蔵室が形成された冷蔵庫本体と、
前記貯蔵室の内部を撮影し、貯蔵室画像として出力するカメラと、
前記宅内に設置され、前記カメラから出力された最新の貯蔵室画像を一時的に記憶する第１の画像記憶部と、
前記宅内に設置され、前記第１の画像記憶部に記憶された貯蔵室画像を取得し、撮影時刻順に並べて記憶する第２の画像記憶部と、
外部と通信可能な通信装置と、
前記通信装置と通信可能な端末装置と、を備え、
前記通信装置は、
前記第１の画像記憶部に記憶された貯蔵室画像を宅外に設置された外部サーバに送信する第１の通信方式と、前記第２の画像記憶部に記憶された貯蔵室画像を前記端末装置に送信する第２の通信方式とを切り換え可能であり、
前記端末装置は、
前記通信装置が前記第１の通信方式を選択している場合に、前記外部サーバから貯蔵室画像を受信し、
前記通信装置が前記第２の通信方式を選択している場合に、前記第２の画像記憶部に記憶された貯蔵室画像を前記通信装置から受信する冷蔵庫システム。 A refrigerator body installed in the house and formed with a storage room for storing food,
A camera that photographs the inside of the storage room and outputs the image as a storage room image,
A first image storage unit that is installed in the house and temporarily stores the latest storage room image output from the camera;
A second image storage unit that is installed in the house and acquires storage room images stored in the first image storage unit, and stores the images in the order of shooting time;
A communication device capable of communicating with the outside,
A terminal device capable of communicating with the communication device ,
The communication device,
The first communication method and the second image storage compartment image stored in the storage unit before Symbol of the storage room image stored in the first image storing unit to send to the installed external server outside the home Ri can der switched and the second communication method to be transmitted to the end terminal device,
The terminal device,
When the communication device has selected the first communication method, receiving a storage room image from the external server,
Wherein when the communication apparatus has selected the second communication scheme, a refrigerator system that receives a storage room image stored in the second image storage unit from the communication device. 前記宅内かつ前記冷蔵庫本体の前記貯蔵室の外側に設置された画像サーバをさらに備え、
前記第１の画像記憶部、前記第２の画像記憶部及び前記通信装置は、前記画像サーバに設けられる請求項１に記載の冷蔵庫システム。 Further comprising an image server installed in the house and outside the storage room of the refrigerator body,
The refrigerator system according to claim 1 , wherein the first image storage unit, the second image storage unit, and the communication device are provided in the image server. 前記画像サーバ及び前記外部サーバの一方又は両方に設けられ、前記端末装置が貯蔵室画像を受信する権限を有しているか否かを認証する認証部をさらに備えた請求項２に記載の冷蔵庫システム。 The refrigerator system according to claim 2 , further comprising: an authentication unit provided in one or both of the image server and the external server, and configured to authenticate whether the terminal device has a right to receive a storage room image. . 前記画像サーバは、複数の前記画像サーバから当該画像サーバを一意に識別可能な画像サーバ識別情報が割り当てられるともに、前記第２の通信方式が選択されている場合に複数の前記端末装置が同時に接続可能であり、
複数の前記端末装置が前記画像サーバに同時に接続する際に、複数の前記端末装置が用いる前記画像サーバ識別情報は同一である請求項２又は請求項３に記載の冷蔵庫システム。 The image server is assigned image server identification information capable of uniquely identifying the image server from the plurality of image servers, and simultaneously connects the plurality of terminal devices when the second communication method is selected. Is possible,
When a plurality of the terminal apparatuses connected simultaneously to said image server, refrigerator system of claim 2 or claim 3 wherein the image server identification information used by the plurality of the terminal devices is the same. 前記通信装置は、初期設定で前記第１の通信方式を選択している請求項１から請求項４のいずれか一項に記載の冷蔵庫システム。 The communication device is a refrigerator system according to any one of claims 1 to 4, in the initial setting is selected the first communication method. 前記通信装置は、前記第１の通信方式を選択している場合に、前記宅内にある前記端末装置からの要求により前記第２の通信方式へと切り換え可能である請求項５に記載の冷蔵庫システム。 The refrigerator system according to claim 5 , wherein the communication device is capable of switching to the second communication method in response to a request from the terminal device in the house when the first communication method is selected. . 前記通信装置は、前記第２の通信方式を選択した後、予め設定された一定時間が経過した場合に、前記第１の通信方式を選択する請求項６に記載の冷蔵庫システム。 The refrigerator system according to claim 6 , wherein the communication device selects the first communication method when a predetermined time has elapsed after selecting the second communication method. 前記通信装置は、
前記宅内にある前記端末装置からの貯蔵室画像送信要求を受けた場合に、前記第２の通信方式を選択し、
前記宅外にある前記端末装置からの貯蔵室画像送信要求を受けた場合に、前記第１の通信方式を選択する請求項１から請求項４のいずれか一項に記載の冷蔵庫システム。 The communication device,
When receiving a storage room image transmission request from the terminal device in the house, select the second communication method,
Wherein when receiving a storage compartment image transmission request from the terminal device, a refrigerator system according to any one of claims 1 to 4 for selecting the first communication method that is outside the house. 前記貯蔵室画像は、複数の前記冷蔵庫本体のうちから当該貯蔵室画像が撮影された前記冷蔵庫本体を一意に識別可能な冷蔵庫識別情報と対応付けられて前記第２の画像記憶部及び前記外部サーバの一方又は両方に記憶される請求項１から請求項８のいずれか一項に記載の冷蔵庫システム。 The storage room image is associated with refrigerator identification information capable of uniquely identifying the refrigerator main body from which the storage room image was taken out of the plurality of refrigerator main bodies, the second image storage unit and the external server refrigerator system according to any one of claims 1 to 8 which is one or both the storage of. 前記第１の画像記憶部に記憶された貯蔵室画像を加工する画像処理部をさらに備え、
前記通信装置は、前記第１の通信方式が選択されている場合に、前記第１の画像記憶部に記憶された貯蔵室画像を前記画像処理部が加工した後の画像を前記外部サーバに送信する請求項１から請求項９のいずれか一項に記載の冷蔵庫システム。 An image processing unit that processes the storage room image stored in the first image storage unit;
The communication device transmits an image obtained by processing the storage room image stored in the first image storage unit by the image processing unit to the external server when the first communication method is selected. refrigerator system according to any one of claims 1 to 9 for. 前記画像処理部は、貯蔵室画像の解像度を低くする加工を行う請求項１０に記載の冷蔵庫システム。 The refrigerator system according to claim 10 , wherein the image processing unit performs processing for lowering the resolution of the storage room image. 前記画像処理部は、貯蔵室画像を複数に分割する加工を行う請求項１０に記載の冷蔵庫システム。 The refrigerator system according to claim 10 , wherein the image processing unit performs a process of dividing the storage room image into a plurality. 前記画像処理部は、貯蔵室画像から前記貯蔵室内の食品が撮影された部分を抽出する加工を行う請求項１０に記載の冷蔵庫システム。 The refrigerator system according to claim 10 , wherein the image processing unit performs a process of extracting a portion where the food in the storage room is photographed from the storage room image.
JP2018551002A 2016-11-21 2016-11-21 Refrigerator system Active JP6673498B2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/084458 WO2018092310A1 (en) 2016-11-21 2016-11-21 Refrigerator system

Publications (2)

Publication Number Publication Date
JPWO2018092310A1 JPWO2018092310A1 (en) 2019-04-18
JP6673498B2 true JP6673498B2 (en) 2020-03-25

Family

ID=62146362

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018551002A Active JP6673498B2 (en) 2016-11-21 2016-11-21 Refrigerator system

Country Status (5)

Country Link
EP (1) EP3543630A4 (en)
JP (1) JP6673498B2 (en)
CN (1) CN109952480B (en)
TW (1) TWI638126B (en)
WO (1) WO2018092310A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102118156B1 (en) * 2016-07-28 2020-06-02 삼성전자주식회사 Refrigerator

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002243335A (en) 2001-02-21 2002-08-28 Toshiba Corp Food preservation chamber, home network device, portable information terminal, food information provision server, menu information provision server, and information provision server containing in preservation chamber
JP2003271561A (en) * 2002-03-18 2003-09-26 Sony Corp Information processing system, information processor and method, and program
CN102183120A (en) * 2011-03-31 2011-09-14 四川长虹电器股份有限公司 Long-range food inquiring refrigerator based on video technology and work method of long-range food inquiring refrigerator
JP6391943B2 (en) * 2013-03-12 2018-09-19 東芝ライフスタイル株式会社 Refrigerator, camera device, internal image display program
JP6498866B2 (en) * 2013-03-12 2019-04-10 東芝ライフスタイル株式会社 Refrigerator, camera device
JP6322803B2 (en) * 2013-03-29 2018-05-16 パナソニックＩｐマネジメント株式会社 Refrigerator and refrigerator system
JP6402353B2 (en) * 2013-03-29 2018-10-10 パナソニックＩｐマネジメント株式会社 Refrigerator and refrigerator system
JP6240891B2 (en) * 2013-04-12 2017-12-06 パナソニックＩｐマネジメント株式会社 refrigerator
TWI518293B (en) * 2013-04-24 2016-01-21 Panasonic Taiwan Co Ltd A method of controlling the cooling stroke by the image recognition, and a refrigerator
JP6313014B2 (en) * 2013-08-27 2018-04-18 東芝ライフスタイル株式会社 Camera system, refrigerator
EP2843337A1 (en) * 2013-09-03 2015-03-04 Panasonic Corporation Refrigerator and refrigerator system for monitoring food
JP6305207B2 (en) * 2014-05-22 2018-04-04 三菱電機株式会社 Refrigerator and network system
CN105674677A (en) * 2014-11-20 2016-06-15 无锡美诺塑业有限公司 Intelligent refrigerator capable of being remotely monitored
WO2016151814A1 (en) * 2015-03-25 2016-09-29 三菱電機株式会社 Refrigerator
CN105120226B (en) * 2015-09-09 2018-03-16 合肥美的智能科技有限公司 image collecting device, method and refrigerator
CN106059867A (en) * 2016-07-14 2016-10-26 广东格兰仕集团有限公司 Communication mechanism for intelligent household appliances

Also Published As

Publication number Publication date
TW201819832A (en) 2018-06-01
EP3543630A4 (en) 2019-11-06
EP3543630A1 (en) 2019-09-25
CN109952480A (en) 2019-06-28
TWI638126B (en) 2018-10-11
JPWO2018092310A1 (en) 2019-04-18
WO2018092310A1 (en) 2018-05-24
CN109952480B (en) 2021-10-15

Similar Documents

Publication Publication Date Title
JP6642713B2 (en) Refrigerator system
JP2019174106A (en) System, and method
US20170213187A1 (en) Storage apparatus and control method thereof
JP6305207B2 (en) Refrigerator and network system
US20140118123A1 (en) Method and apparatus for controlling home device based on service logic in home network system
TWI693370B (en) Refrigerator and network system containing the same
JP6655908B2 (en) Refrigerators and programs
US20180120019A1 (en) Refrigerator
JP2015169412A (en) Refrigerator and network system including refrigerator
JP2016130609A (en) refrigerator
JP2015014401A (en) Refrigerator
US20180197395A1 (en) Controlling electronic device alerts by operating head mounted display
KR102508201B1 (en) Refrigerator and control method thereof
WO2018033956A1 (en) Refrigerator
JP6673498B2 (en) Refrigerator system
JP6167330B2 (en) Refrigerator and refrigerator system
JP6592970B2 (en) refrigerator
JP2000055533A (en) Cooling storage cabinet and its managing system
JP2014196834A (en) Refrigerator
JP6167288B2 (en) refrigerator
US10353459B2 (en) Controlling graphic field of view by operating head mounted display
WO2023162312A1 (en) Image management system, image management server, image management method, and method for producing image management system
US11768031B1 (en) Refrigerator appliance and methods for responding to ambient humidity levels
US20210195143A1 (en) Smart Refrigerator
KR20230020276A (en) Refrigerator and controlling method of refrigerator

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181116

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191112

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191205

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200204

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200217

R150 Certificate of patent or registration of utility model

Ref document number: 6673498

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250