JP2012251722A - Refrigerator - Google Patents

Refrigerator Download PDF

Info

Publication number
JP2012251722A
JP2012251722A JP2011124815A JP2011124815A JP2012251722A JP 2012251722 A JP2012251722 A JP 2012251722A JP 2011124815 A JP2011124815 A JP 2011124815A JP 2011124815 A JP2011124815 A JP 2011124815A JP 2012251722 A JP2012251722 A JP 2012251722A
Authority
JP
Japan
Prior art keywords
refrigerator
camera
food
image
storage room
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2011124815A
Other languages
Japanese (ja)
Inventor
Masaharu Kamei
正治 亀井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Priority to JP2011124815A priority Critical patent/JP2012251722A/en
Publication of JP2012251722A publication Critical patent/JP2012251722A/en
Withdrawn legal-status Critical Current

Links

Landscapes

  • Devices That Are Associated With Refrigeration Equipment (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a refrigerator that is configured at a low cost by simplifying image processing by a camera and can save energy.SOLUTION: The refrigerator includes: a refrigeration compartment 15 for cooling and storing foodstuffs; a door 22 for opening/closing the opening of the refrigeration compartment 15; a camera 16 disposed in the refrigeration compartment 15 to photograph the inside of the refrigeration compartment 15; a control device for arithmetically processing the image photographed by the camera 16; an in-refrigerator fan 14 for sending cold air from a cooler 13 constituting a refrigeration cycle to the refrigeration compartment 15; and a compressor 11. In the refrigerator, as the result of the image processing by the control device, the revolution speeds of the in-refrigerator fan 14 and the compressor 11 are increased or decreased correspondingly to the stored state of the foodstuffs in the refrigerator.

Description

本発明は、庫内を撮影するカメラを備えた冷蔵庫に関するものである。   The present invention relates to a refrigerator provided with a camera for photographing the interior.

従来、この種の冷蔵庫は、冷蔵庫内に置かれている食品をCCDカメラと画像処理手段によって画像を認識して、庫内食品の管理を行うものがある(例えば、特許文献1参照)。   Conventionally, there is a refrigerator of this type that recognizes an image of food placed in the refrigerator by a CCD camera and an image processing means and manages food in the refrigerator (see, for example, Patent Document 1).

図11〜図15は、特許文献1に記載された従来の冷蔵庫を示すものである。図11は冷凍冷蔵庫の横からみた断面図であり、図に示す位置に複数のCCDカメラが取りつけられている。各CCDカメラにはレンズ部分に発露しないように近傍にヒータが取りつけられていて、本体部分は冷蔵庫の断熱材部分にうめこまれている(図12)。図13は簡単なシステムブロック図であり、図14は庫内管理を中心とした処理のフローチャートであり、更に図15は扉の開閉毎にCCDカメラから入力した画像の一例である。   11 to 15 show a conventional refrigerator described in Patent Document 1. As shown in FIG. FIG. 11 is a cross-sectional view seen from the side of the refrigerator-freezer, and a plurality of CCD cameras are attached at the positions shown in the figure. Each CCD camera is provided with a heater in the vicinity so as not to cause the lens portion to be exposed, and the main body portion is embedded in the heat insulating material portion of the refrigerator (FIG. 12). FIG. 13 is a simple system block diagram, FIG. 14 is a flowchart of processing centering on the inside management, and FIG. 15 is an example of an image input from the CCD camera every time the door is opened and closed.

図14のフローチャートに従って説明すると、ステップS1では、あらかじめ庫内の画像をCCDカメラより入力しておく(画像1)。ステップS2では食品を入れられた状態で画像を入力し(画像2)、ステップS3で画像1と画像2の差部をとり、庫内の食品のみを抽出し(画像3)、ステップS4で縮退、膨張をくり返すことにより、ゴミ等を除去し、それぞれの食品の特徴を抽出してステップS5でラベリング(画像3の3つの食品を各々a,b,cとする)を行う。マイコンは内部メモリに抽出された各食品a,b,c毎のその食品が保存されているというフラグ及び保存期間をカウントするカウンタをそれぞれ設定する。   Explaining in accordance with the flowchart of FIG. 14, in step S1, an image in the cabinet is input in advance from the CCD camera (image 1). In step S2, an image is input with the food in it (image 2). In step S3, the difference between image 1 and image 2 is taken to extract only the food in the cabinet (image 3). In step S4, the image is degenerated. By repeating the expansion, dust and the like are removed, the characteristics of each food are extracted, and labeling is performed in step S5 (the three foods in the image 3 are a, b, and c, respectively). The microcomputer sets a flag indicating that the food for each food a, b, c extracted in the internal memory is stored and a counter for counting the storage period.

以上の動作により、現時点で庫内に保存されている食品が入力される。次に、ステップS6でドアスイッチ7によりドアが開閉されたかどうかをチェックし、開閉されていなければ時間の経過に従ってステップS14にて保存されている食品(a,b,c)のそれぞれのタイマーをカウントアップし、ステップS15にて、一定期間を過ぎている食品があれば液晶表示素子等よりなる表示装置6にて一定期間が過ぎたタイマーに対応する食品を画像3より選択して表示または点滅表示したり、もしくはその食品の中心付近を表示または点滅表示したりすることによって一定期間が経過していることを示す。   With the above operation, the food currently stored in the warehouse is input. Next, in step S6, it is checked whether or not the door is opened and closed by the door switch 7. If the door is not opened and closed, the respective timers of the food (a, b, c) stored in step S14 as time elapses are set. In step S15, if there is a food that has passed a certain period of time, the food corresponding to the timer that has passed the certain period is selected from the image 3 on the display device 6 comprising a liquid crystal display element or the like and displayed or blinked. It indicates that a certain period of time has elapsed by displaying or by displaying or blinking the vicinity of the center of the food.

ドアが開閉された場合、食品の出入があったことが予想されるのでステップS7〜S10に示すように、再び庫内の画像の入力を行い、各食品毎にラベリングを行う。S7〜S10はS2〜S5と同一の処理である。ステップS11にて前回入力した画像3と今回入力した画像5との差分をとり(画像6)、ステップS12にて画像3と6の差分をとることにより食品bが庫内から取り出されたことを認識にマイコンメモリ内の食品bに対応するフラグ及びカウンタをクリアする。ステップS13にて画像5と画像6の差分をとり、新たに入れられた食品dを抽出してこれに対応するフラグ及びカウンタをマイコンメモリ内に新たに設定する。以後、S6〜S15をくり返すことにより庫内食品の在庫管理を行う。   When the door is opened and closed, it is expected that food has entered and exited. Therefore, as shown in steps S7 to S10, the image in the cabinet is input again, and labeling is performed for each food. S7 to S10 are the same processes as S2 to S5. In step S11, the difference between the image 3 input last time and the image 5 input this time is taken (image 6), and the difference between the images 3 and 6 is taken in step S12 to confirm that the food b has been taken out of the warehouse. For recognition, the flag and counter corresponding to the food b in the microcomputer memory are cleared. In step S13, the difference between the image 5 and the image 6 is obtained, the newly added food d is extracted, and a flag and counter corresponding to this are newly set in the microcomputer memory. Thereafter, the stock management of food in the warehouse is performed by repeating S6 to S15.

特開平5−45041号公報JP-A-5-45041

しかしながら、前記従来の構成では、CCDカメラで撮影された画像に対して、庫内の食品のみを抽出し、縮退、膨張をくり返すことにより、ゴミ等を除去し、それぞれの食品の特徴を抽出してラベリングを行っているので、画像処理が複雑となって、処理時間が長く、処理能力の高いマイコンが必要になり、CCDカメラを含めると、相当なコストアップに繋がるという課題を有していた。   However, in the conventional configuration, only the food in the warehouse is extracted from the image photographed by the CCD camera, and debris and expansion are repeated to remove dust and extract the characteristics of each food. Since labeling is performed, image processing becomes complicated, processing time is long, and a microcomputer with high processing capability is required. If a CCD camera is included, there is a problem that the cost is considerably increased. It was.

本発明は、前記従来の課題を解決するもので、カメラによる画像処理を単純化することで安価な構成にできるとともに、冷蔵庫の省エネを図ることを目的とする。   SUMMARY OF THE INVENTION The present invention solves the above-described conventional problems, and an object of the present invention is to simplify the image processing by a camera so as to make an inexpensive configuration and to save energy in a refrigerator.

前記従来の課題を解決するために、本発明の冷蔵庫は、食品を冷却して保存する貯蔵室と、前記貯蔵室の開口部を開閉する扉と、前記貯蔵室に設けられ前記貯蔵室の内部を撮影するカメラと、前記カメラで撮影した画像を演算処理する制御装置と、冷凍サイクルを構成する冷却器からの冷気を前記貯蔵室へと送出する庫内ファンと、圧縮機を備える冷蔵庫において、前記制御装置による画像処理の結果、庫内の食品の収納状態に対応して、前記庫内ファン、及び、前記圧縮機の回転数を増減させるものである。   In order to solve the conventional problems, a refrigerator according to the present invention includes a storage room for cooling and storing food, a door for opening and closing an opening of the storage room, an interior of the storage room provided in the storage room. In a refrigerator provided with a compressor, a control device that performs arithmetic processing on an image captured by the camera, an internal fan that sends cold air from a cooler constituting a refrigeration cycle to the storage chamber, and a compressor As a result of the image processing by the control device, the number of rotations of the internal fan and the compressor is increased or decreased in accordance with the state of storage of food in the internal storage.

これによって、制御装置による画像処理の結果、庫内の食品の収納状態が少ない場合には、前記庫内ファン、及び、前記圧縮機の回転数を減少させるという省エネ運転を行うことができ、庫内の食品の収納状態が多い場合には、前記庫内ファン、及び、前記圧縮機の回転数を増加させることにより庫内を冷却でき、冷蔵庫の庫内温度を最適に制御できる。   As a result, when the storage state of the food in the warehouse is small as a result of the image processing by the control device, it is possible to perform an energy saving operation of reducing the rotation speed of the internal fan and the compressor. When the food storage state is large, the inside of the refrigerator can be cooled by increasing the number of rotations of the internal fan and the compressor, and the internal temperature of the refrigerator can be optimally controlled.

また、省エネ運転を行うことで制御装置及びカメラによる冷蔵庫のコストアップ分について、使用者に理解を得られ易くなる。   Moreover, it becomes easy for a user to understand the cost increase of the refrigerator by a control apparatus and a camera by performing an energy saving operation.

また、本発明の冷蔵庫は、前記制御装置は、前記貯蔵室に収納物の無い状態で撮影された初期画像が記憶されており、食品が収納されている時に前記カメラで撮影された画像は、前記制御装置に電送されて画像が画素単位に分割され、前記貯蔵室の同じ範囲を撮影した前記初期画像の画素単位と色を比較し、同じ色であれば「0」をカウントし、異なる色であれば「1」をカウントし、そのカウント数を全ての画素単位で足し算し、合計のカウント数が前記カメラの撮影画素数の所定値A以上であれば、冷蔵庫内に食品が詰まっていると判断し、前記カメラの撮影画素数の所定値B以下であれば、冷蔵庫内に食品があまり入ってないと判断して、庫内設定温度、前記庫内ファン、及び、前記圧縮機の回転数を増減するものである。   Further, in the refrigerator of the present invention, the control device stores an initial image photographed with no storage in the storage room, and an image photographed by the camera when food is stored is The image is divided into pixel units by being transmitted to the control device, and the color is compared with the pixel unit of the initial image obtained by photographing the same range of the storage room. If it is, “1” is counted, and the count number is added in units of all pixels. If the total count number is equal to or greater than a predetermined value A of the number of pixels photographed by the camera, food is clogged in the refrigerator. If the number of pixels taken by the camera is equal to or less than the predetermined value B, it is determined that there is not much food in the refrigerator, and the set temperature in the refrigerator, the fan in the refrigerator, and the rotation of the compressor Increase or decrease the number.

これによって、庫内の食品の収納状態を、カメラで撮影した画像の画素単位の色で判別するようにしたので、画像処理が単純化されて処理速度も速くなり、且つ、安価なマイコンで省エネ運転を行うことが可能となり、冷蔵庫のコストアップ分も大幅に抑制できる。   As a result, the storage state of the food in the storage is determined by the color of the pixel unit of the image taken by the camera, so that the image processing is simplified, the processing speed is increased, and the energy saving is achieved with an inexpensive microcomputer. It becomes possible to operate, and the cost increase of the refrigerator can be greatly suppressed.

本発明の冷蔵庫は、庫内の食品の収納状態を、カメラで撮影した画像の画素単位の色で判別するようにしたので、画像処理が単純化されて処理速度も速くなり、また、カメラの総画素数は安価なものでも100万画素以上有しているので、個々の画素単位の比較で稀に発生するであろう「0」と「1」の認識誤差も、全体を通して見ると吸収され、精度の高い判定が可能となり、庫内の食品の収納状態に対応して、庫内ファン、及び、圧縮機の回転数を増減させるので、冷蔵庫の庫内温度を最適に制御でき、省エネ運転を行うことができる。   In the refrigerator of the present invention, the storage state of the food in the warehouse is determined by the color of the pixel unit of the image photographed by the camera, so that the image processing is simplified and the processing speed is increased, and the camera Even though the total number of pixels is cheap, it has more than 1 million pixels, so the recognition errors of “0” and “1” that would rarely occur when comparing individual pixel units are absorbed throughout. High-precision judgment is possible, and the number of rotations of the internal fan and compressor is increased or decreased according to the storage state of food in the storage, so that the refrigerator internal temperature can be optimally controlled and energy-saving operation It can be performed.

本発明の実施の形態1における冷蔵庫の正面図Front view of the refrigerator in Embodiment 1 of the present invention 本発明の実施の形態1における冷蔵庫の縦断面図The longitudinal cross-sectional view of the refrigerator in Embodiment 1 of this invention 本発明の実施の形態1における冷蔵庫の要部断面図Sectional drawing of the principal part of the refrigerator in Embodiment 1 of this invention 本発明の実施の形態1における冷蔵庫の制御に関するフローチャートThe flowchart regarding control of the refrigerator in Embodiment 1 of this invention. 本発明の実施の形態1における冷蔵庫の制御に関するフローチャートThe flowchart regarding control of the refrigerator in Embodiment 1 of this invention. 本発明の実施の形態1における冷蔵庫の要部断面図Sectional drawing of the principal part of the refrigerator in Embodiment 1 of this invention 本発明の実施の形態1における冷蔵庫の要部断面図Sectional drawing of the principal part of the refrigerator in Embodiment 1 of this invention 本発明の実施の形態1における冷蔵庫のダクト内部の模式図Schematic view inside the duct of the refrigerator in Embodiment 1 of the present invention 本発明の実施の形態2の冷蔵庫の縦断面図The longitudinal cross-sectional view of the refrigerator of Embodiment 2 of this invention 本発明の実施の形態2の冷蔵庫の縦断面図The longitudinal cross-sectional view of the refrigerator of Embodiment 2 of this invention 従来の冷蔵庫の冷凍冷蔵庫の断面図Cross-sectional view of a conventional refrigerator 従来の冷蔵庫の冷凍冷蔵庫の要部断面図Cross-sectional view of the main parts of a conventional refrigerator refrigerator 従来の冷蔵庫のシステムブロック図Conventional refrigerator system block diagram 従来の冷蔵庫の画像処理フローチャートConventional refrigerator image processing flowchart 従来の冷蔵庫のCCDカメラ画像図CCD camera image of a conventional refrigerator

第1の発明は、食品を冷却して保存する貯蔵室と、前記貯蔵室の開口部を開閉する扉と、前記貯蔵室に設けられ前記貯蔵室の内部を撮影するカメラと、前記カメラで撮影した画像を演算処理する制御装置と、冷凍サイクルを構成する冷却器からの冷気を前記貯蔵室へと送出する庫内ファンと、圧縮機を備える冷蔵庫において、前記制御装置による画像処理の結果、庫内の食品の収納状態に対応して、前記庫内ファン、及び、前記圧縮機の回転数を増減させることにより、省エネ運転を行うことができ、制御装置及びカメラによる冷蔵庫のコストアップ分を、省エネ運転による電力使用量の削減効果分で、相殺、或いは、それ以上の効果を生み出すことが可能となり、使用者に理解を得られ易くなるとともに、環境負荷(電力消費量)に対する低減効果も有している。   A first invention is a storage room for cooling and storing food, a door for opening and closing an opening of the storage room, a camera provided in the storage room for photographing the inside of the storage room, and photographing by the camera In a refrigerator provided with a control device that performs arithmetic processing on the processed image, an internal fan that sends cold air from a cooler constituting the refrigeration cycle to the storage chamber, and a compressor, as a result of image processing by the control device, By increasing or decreasing the number of rotations of the internal fan and the compressor corresponding to the storage state of the food in the interior, energy saving operation can be performed, and the cost increase of the refrigerator by the control device and the camera is reduced. With the effect of reducing the amount of power used by energy-saving operation, it is possible to create an effect that offsets or exceeds that, making it easier for the user to understand and reducing environmental impact (power consumption). Reducing effect also has.

第2の発明は、前記カメラを前記貯蔵室の背面壁に設けたものであり、貯蔵室全体の食品の収納状態を撮影することが可能となり、安価な構成で省エネ運転を実現できる。   According to a second aspect of the present invention, the camera is provided on the back wall of the storage room, and it is possible to photograph the food storage state of the entire storage room, and an energy saving operation can be realized with an inexpensive configuration.

第3の発明は、前記カメラを前記貯蔵室の扉の内壁に設けたものであり、棚に載置された食品によって、カメラのレンズ部が塞がれるのを防止することができ、庫内に食品が大量に収納されている場合でも、信頼性の高いカメラ撮影が可能となる。   3rd invention provides the said camera in the inner wall of the door of the said store room, can prevent that the lens part of a camera is blocked by the food laid on the shelf, Even when a large amount of food is stored, reliable camera photography is possible.

第4の発明は、前記貯蔵室の内壁に複数のカメラを設けたものであり、冷蔵室内を撮影するカメラを貯蔵室内の背面壁、或いは、貯蔵室扉の内壁だけでなく、貯蔵室内のどちらか一方の側壁、或いは、冷蔵室内の両方の側壁に設け、複数のカメラで異なる方向から、冷蔵室内を撮影することで、食品の収納状態を精度良く判別することが可能となる。   According to a fourth aspect of the present invention, a plurality of cameras are provided on the inner wall of the storage room, and the camera for photographing the refrigeration room is not limited to the rear wall of the storage room or the inner wall of the storage room door, It is possible to accurately determine the food storage state by providing images on the one side wall or both side walls in the refrigeration room and photographing the refrigeration room from different directions with a plurality of cameras.

第5の発明は、前記制御装置は、前記貯蔵室に収納物の無い状態で撮影された初期画像が記憶されており、食品が収納されている時に前記カメラで撮影された画像は、前記制御装置に電送されて画像が画素単位に分割され、前記貯蔵室の同じ範囲を撮影した前記初期画像の画素単位と色を比較し、同じ色であれば「0」をカウントし、異なる色であれば「1」をカウントし、そのカウント数を全ての画素単位で足し算し、合計のカウント数が前記カメラの撮影画素数の所定値A以上であれば、冷蔵庫内に食品が詰まっていると判断し、前記カメラの撮影画素数の所定値B以下であれば、冷蔵庫内に食品があまり入ってないと判断して、庫内設定温度、前記庫内ファン、及び、前記圧縮機の回転数を増減するものであり、庫内の食品の収納状態を、カメラで撮影した画像の画素単位の色で判別するようにしたので、画像処理が単純化されて処理速度も速くなり、且つ、安価なマイコンで省エネ運転を行うことが可能となり、冷蔵庫のコストアップ分を大幅に抑制しつつ、環境負荷
(電力消費量)に対する低減効果も有している。
According to a fifth aspect of the present invention, the control device stores an initial image taken in the storage room with no stored items, and an image taken by the camera when food is stored is stored in the control device. The image is divided into pixel units by being sent to the apparatus, and the color is compared with the pixel unit of the initial image obtained by photographing the same range of the storage room. If the total count is equal to or greater than a predetermined value A of the number of pixels taken by the camera, it is determined that food is clogged in the refrigerator. If the number of captured pixels of the camera is less than or equal to a predetermined value B, it is determined that there is not much food in the refrigerator, and the set temperature in the refrigerator, the fan in the refrigerator, and the rotation speed of the compressor are determined. Increase / decrease, food storage condition in the warehouse Since the discrimination is based on the color of each pixel of the image taken by the camera, the image processing is simplified, the processing speed is increased, and the energy saving operation can be performed with an inexpensive microcomputer. It has a reduction effect on the environmental load (power consumption) while significantly suppressing the up-load.

第6の発明は、前記貯蔵室内の温度を検知する温度センサを備え、前記温度センサの値による前記庫内ファン及び前記圧縮機の回転数制御と、前記カメラによる画像処理の判定による前記庫内ファン及び圧縮機の回転数制御が異なる場合には、前記画像処理の判定を優先するものであり、貯蔵室内の温度検知に基づく制御では、食品(負荷)の大小による最適な制御を時間遅れなしに実行するのは困難であるが、画像処理の判定にて食品(負荷)の大小を直接認識することで、常に最適な制御をリアルタイムに実行することができる。   6th invention is equipped with the temperature sensor which detects the temperature in the said storage chamber, The rotation speed control of the said fan and the said compressor by the value of the said temperature sensor, and the said inside by the determination of the image processing by the said camera When the rotational speed control of the fan and the compressor is different, priority is given to the determination of the image processing. In the control based on the temperature detection in the storage chamber, the optimal control depending on the size of the food (load) is not delayed in time. However, it is always difficult to execute optimal control in real time by directly recognizing the size of the food (load) in the image processing determination.

以下、本発明の実施の形態について、図面を参照しながら説明する。なお、この実施の形態によって本発明が限定されるものではない。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. Note that the present invention is not limited to the embodiments.

(実施の形態1)
図1は、本発明の第1の実施の形態における冷蔵庫の正面図を示すものである。図2は、本発明の第1の実施の形態における冷蔵庫の縦断面図を示すものである。図3は、本発明の第1の実施の形態における冷蔵庫の要部断面図である。図4は、本発明の第1の実施の形態における冷蔵庫の制御に関するフローチャートである。図5は、本発明の第1の実施の形態における冷蔵庫の制御に関するフローチャートである。図6は、本発明の第1の実施の形態における冷蔵庫の要部断面図である。図7は、本発明の第1の実施の形態における冷蔵庫の要部断面図である。図8は、本発明の第1の実施の形態における冷蔵庫のダクト内部の模式図である。
(Embodiment 1)
FIG. 1 shows a front view of a refrigerator in the first embodiment of the present invention. FIG. 2 shows a longitudinal sectional view of the refrigerator in the first embodiment of the present invention. FIG. 3 is a cross-sectional view of a main part of the refrigerator in the first embodiment of the present invention. FIG. 4 is a flowchart relating to the control of the refrigerator in the first embodiment of the present invention. FIG. 5 is a flowchart relating to the control of the refrigerator in the first embodiment of the present invention. FIG. 6 is a cross-sectional view of a main part of the refrigerator in the first embodiment of the present invention. FIG. 7 is a cross-sectional view of an essential part of the refrigerator in the first embodiment of the present invention. FIG. 8 is a schematic diagram of the inside of the refrigerator duct in the first embodiment of the present invention.

図1〜図8において、冷蔵庫本体10の上部に圧縮機11が配設され、冷凍室12の背面側には冷却器13で生成される冷気を庫内へ送風する庫内ファン14が設けられている。そして、冷蔵室15の内部に庫内を撮影するカメラ16が配設され、カメラ16には透明カバー17が設けられている。また、冷蔵室15の内部には食品を載置するための棚18が複数枚配設されている。棚18と対向する背面壁に凹部19が設けられ、凹部19内にカメラ16が収納される。冷蔵室15内の背面壁に配置されているダクト20の略中央部には中空円筒状の枠体21が設けられ、枠体21の内部にカメラが配設される。   1-8, the compressor 11 is arrange | positioned at the upper part of the refrigerator main body 10, and the internal fan 14 which ventilates the cold air | gas produced | generated with the cooler 13 in the refrigerator at the back side of the freezer compartment 12 is provided. ing. A camera 16 for photographing the inside of the refrigerator is disposed inside the refrigerator compartment 15, and the camera 16 is provided with a transparent cover 17. In addition, a plurality of shelves 18 for placing food are arranged inside the refrigerator compartment 15. A recess 19 is provided in the back wall facing the shelf 18, and the camera 16 is accommodated in the recess 19. A hollow cylindrical frame 21 is provided at a substantially central portion of the duct 20 disposed on the back wall in the refrigerator compartment 15, and a camera is disposed inside the frame 21.

以上のように構成された冷蔵庫について、以下その動作、作用を説明する。   About the refrigerator comprised as mentioned above, the operation | movement and an effect | action are demonstrated below.

まず、冷蔵室15内の背面壁の略中央に冷蔵室15内を撮影するカメラ16が配設され、
冷蔵室扉の開閉を検知するドアスイッチと連動して、撮影動作を行う。冷蔵室15内に設置されたカメラ16で撮影された画像は、制御装置に電送され、画像処理が行われる。制御装置には、冷蔵室15内に食品が収納されていない空状態の画像が、予め初期データとして記憶されている。制御装置は、冷蔵室15内のカメラ16で撮影された画像を画素単位に分割整理し、予め記憶している初期データの該当する部位の画素と比較を行う(S3)。
First, a camera 16 for photographing the inside of the refrigerator compartment 15 is disposed in the approximate center of the back wall in the refrigerator compartment 15,
The shooting operation is performed in conjunction with a door switch that detects opening and closing of the refrigerator door. An image taken by the camera 16 installed in the refrigerator compartment 15 is transmitted to the control device, and image processing is performed. In the control device, an empty image in which no food is stored in the refrigerator compartment 15 is stored in advance as initial data. The control device divides and organizes the image captured by the camera 16 in the refrigerator compartment 15 in units of pixels, and compares it with the pixels in the corresponding portion of the initial data stored in advance (S3).

比較する方法として、画素単位の色の相違を用いた場合(S4)、初期データの画像と同じであれば「0」をカウントし(S5)、違う色であれば「1」をカウントする(S6)。   As a comparison method, when a difference in color in pixel units is used (S4), “0” is counted if it is the same as the initial data image (S5), and “1” is counted if the color is different (S5). S6).

そして、カウントされた「0」と「1」を全て積算した値が(S8)、カメラ16の撮影総画素数の30%以下であれば、冷蔵室15内に空のスペースが十分にあると判断して、圧縮機11の回転数、及び、庫内ファン14の回転数を下げる制御を実施する(S10)。逆に、カウントされた「0」と「1」を全て積算した値が(S8)、カメラ16の撮
影総画素数の70%以上であれば、圧縮機11の回転数、及び、庫内ファン14の回転数を、現状維持、或いは、上昇させる制御を実施する(S12)。ここで、カメラ16の総画素数を400万画素とすると、冷蔵室15内空間を、縦2000×横2000の領域に分割して撮影するので、冷蔵室15内の状態を詳細に撮影することができる。
Then, if the value obtained by integrating all the counted “0” and “1” is (S8) and is 30% or less of the total number of pixels taken by the camera 16, it is assumed that there is sufficient empty space in the refrigerator compartment 15. Judgment is made and control which lowers the rotation speed of the compressor 11 and the rotation speed of the internal fan 14 is implemented (S10). Conversely, if the value obtained by adding all the counted “0” and “1” (S8) is 70% or more of the total number of pixels taken by the camera 16, the rotation speed of the compressor 11 and the internal fan Control is performed to maintain or increase the rotational speed of 14 (S12). Here, assuming that the total number of pixels of the camera 16 is 4 million pixels, the space inside the refrigerator compartment 15 is divided into 2000 × 2000 areas, and the state inside the refrigerator 15 is taken in detail. Can do.

また、庫内に食品が一杯に詰め込まれた状態においても、冷蔵室15内の背面壁の略中央に配設されたカメラ16に半円形上の透明カバー17を設けているので、カメラ16の近傍に載置された食品によって、カメラ16のレンズ部が完全に覆われるのを防止することができる。この半円形上の透明カバー17により、カメラ16のレンズ部と載置された食品との間に所定の空間を設けることができ、カメラ16により撮影した画像データの信頼性が向上する。   Further, even when the food is fully packed in the cabinet, the semi-circular transparent cover 17 is provided on the camera 16 disposed substantially at the center of the back wall in the refrigerator compartment 15, so that the camera 16 It is possible to prevent the lens portion of the camera 16 from being completely covered by the food placed in the vicinity. The semi-circular transparent cover 17 can provide a predetermined space between the lens portion of the camera 16 and the food placed thereon, and the reliability of the image data photographed by the camera 16 is improved.

また、カメラ16の近傍に載置された食品によって、カメラ16のレンズ部が少なからず塞がれる可能性があるが、この場合には、カメラ16を上下左右に角度を変えれるように、手動、或いは、自動で調整できるように構成しても良い。この方法を用いる場合には、冷蔵室15内の初期データを、カメラ16を上下左右に角度を変えたときの各々についての画像データを、制御部に記憶させておく必要がある。   In addition, the food placed in the vicinity of the camera 16 may block the lens portion of the camera 16 to some extent. In this case, the camera 16 is manually operated so that the angle can be changed vertically and horizontally. Or you may comprise so that it can adjust automatically. When this method is used, it is necessary to store initial data in the refrigerator compartment 15 and image data for each of the angles when the camera 16 is moved up, down, left, and right in the control unit.

そして、画像処理の速度を考慮すると、カメラ16の上下左右の移動は4〜8地点に絞った方が望ましい。さらに、冷蔵室15内を撮影するカメラ16を冷蔵室15内の背面壁だけでなく、冷蔵室15内のどちらか一方の側壁、或いは、冷蔵室15内の両方の側壁に設け、複数のカメラ16で異なる方向から、冷蔵室15内を撮影すれば、精度の高い認識が可能となる。この場合の制御装置における比較方法としては、冷蔵室15内の背面壁のカメラ16で撮影した画像について、初期データの画像と同じ色であれば「0」をカウントし、違う色であれば「1」をカウントする。そして、カウントされた「0」と「1」を全て積算する。同様に冷蔵室15内の側壁に設けたカメラで撮影した画像について、初期データの画像と同じ色であれば「0」をカウントし、違う色であれば「1」をカウントする。そして、カウントされた「0」と「1」を全て積算する。   Then, considering the speed of image processing, it is desirable to limit the movement of the camera 16 up, down, left, and right to 4 to 8 points. Further, the camera 16 for photographing the inside of the refrigerator compartment 15 is provided not only on the rear wall in the refrigerator compartment 15 but also on one side wall in the refrigerator compartment 15 or on both sidewalls in the refrigerator compartment 15, and a plurality of cameras. If the inside of the refrigerator compartment 15 is imaged from a different direction at 16, the recognition can be performed with high accuracy. As a comparison method in the control device in this case, an image taken by the camera 16 on the back wall in the refrigerator compartment 15 is counted as “0” if it is the same color as the initial data image, and “ 1 "is counted. Then, all the counted “0” and “1” are integrated. Similarly, “0” is counted if the image is the same color as the image of the initial data, and “1” is counted if the color is different from the image taken by the camera provided on the side wall in the refrigerator compartment 15. Then, all the counted “0” and “1” are integrated.

そして、冷蔵室内の背面壁に設けたカメラ16で撮影した画像の積算値と、冷蔵室内の側壁に設けたカメラ16で撮影した画像の積算値を足し算して、W(冷蔵室15内のカメラ16の設置台数)で割った値がカメラ16の総画素数の何%になるかで、圧縮機11の回転数、及び、庫内ファン14の回転数を制御する。   Then, the integrated value of the images photographed by the camera 16 provided on the back wall in the refrigerator compartment and the integrated value of the images photographed by the camera 16 provided on the sidewall of the refrigerator compartment are added to obtain W (camera in the refrigerator compartment 15). The number of rotations of the compressor 11 and the number of rotations of the internal fan 14 are controlled according to how many percent of the total number of pixels of the camera 16 is divided by the number of 16).

具体的には、30%以下であれば、冷蔵室15内に空のスペースが十分にあると判断して、圧縮機11の回転数、及び、庫内ファン14の回転数を下げる制御を実施する。逆に、70%以上であれば、圧縮機11の回転数、及び、冷蔵室15内の庫内ファン14の回転数を、現状維持、或いは、上昇させる制御を行う。   Specifically, if it is 30% or less, it is determined that there is sufficient empty space in the refrigerator compartment 15, and control is performed to reduce the rotational speed of the compressor 11 and the rotational speed of the internal fan 14. To do. On the other hand, if it is 70% or more, control is performed to maintain the current state or increase the rotational speed of the compressor 11 and the rotational speed of the internal fan 14 in the refrigerator compartment 15.

また好ましくは、冷蔵室15内の棚18と対向する背面壁に円錐状の凹部19を設け、凹部19の中心に冷蔵室15内を撮影するカメラ16を設けることで、カメラ16のレンズ部と棚18の間に空間が形成され、棚18の上下に収納された食品を撮影することができる。   Preferably, a conical recess 19 is provided on the back wall facing the shelf 18 in the refrigerator compartment 15, and a camera 16 for photographing the interior of the refrigerator compartment 15 is provided in the center of the recess 19. A space is formed between the shelves 18 so that foods stored above and below the shelves 18 can be photographed.

そして、棚18の上方の棚18、棚18の下方の棚18に載置された食品も、上方と下方の棚18を高透明な材料で構成することにより、上方と下方の棚18を透かして、載置されている食品の分布状態を撮影することができるので、冷蔵室15内の食品の分布状態の精度の高い画像を得ることができる。   And the food placed on the shelf 18 above the shelf 18 and the shelf 18 below the shelf 18 is also made up of the upper and lower shelves 18 by configuring the upper and lower shelves 18 with a highly transparent material. Thus, since the distribution state of the placed food can be photographed, an image with high accuracy of the distribution state of the food in the refrigerator compartment 15 can be obtained.

また、一般に冷蔵室15内の背面壁には冷却器13からの冷気が供給されるダクト20
が配設されているが、ダクト20の略中央部にカメラ16を設置するための中空円筒状の枠体21を設けることで、ダクト20内の冷気を一部迂回させ、該中空円筒状の枠体21の内部にカメラ16を設置することが可能となる。
In general, a duct 20 to which cold air from the cooler 13 is supplied to the rear wall in the refrigerator compartment 15.
However, by providing a hollow cylindrical frame 21 for installing the camera 16 at a substantially central portion of the duct 20, a part of the cool air in the duct 20 is bypassed, and the hollow cylindrical shape is provided. The camera 16 can be installed inside the frame body 21.

また、カメラを広角・魚眼レンズ仕様にすることで、カメラの台数を最小限にして食品検知の精度を高めることができる。   In addition, by using a wide-angle, fish-eye lens for the camera, the number of cameras can be minimized and food detection accuracy can be increased.

なお、冷蔵室15内の天面にカメラを設置するのは、冷蔵室15内に設けられている複数の棚18が邪魔となるので、正確な冷蔵室15内の食品収納状態を把握するのが困難であり、仮に棚18を透明な部材で構成したとしても、上段の棚18に載置されている食品の影によって、下段の棚18に収納されている食品の分布状態を正確に撮影できないという課題を有する。   It should be noted that installing the camera on the top surface of the refrigerator compartment 15 is obstructed by the plurality of shelves 18 provided in the refrigerator compartment 15, so that the accurate food storage state in the refrigerator compartment 15 is grasped. Even if the shelf 18 is made of a transparent member, the distribution state of the food stored in the lower shelf 18 is accurately photographed by the shadow of the food placed on the upper shelf 18. It has a problem that it cannot be done.

同様に、冷蔵室15内の底面にカメラを設置するのは、冷蔵室内の天面にカメラを設置する場合と同様の課題を有するとともに、カメラが食品によって塞がれる、或いは、カメラの透明カバー部が邪魔となって、食品の出し入れがしにくいという課題がある。   Similarly, installing the camera on the bottom surface in the refrigerator compartment 15 has the same problem as installing the camera on the top surface in the refrigerator compartment, and the camera is blocked by food, or the transparent cover of the camera There is a problem that it is difficult for food to be taken in and out of the part.

以上のように、本実施の形態においては、食品を冷却して保存する冷蔵室15と、冷蔵室15の開口部を開閉する扉22と、冷蔵室15に設けられ冷蔵室15の内部を撮影するカメラ16と、カメラ16で撮影した画像を演算処理する制御装置と、冷凍サイクルを構成する冷却器13からの冷気を冷蔵室15へと送出する庫内ファン14と、圧縮機11を備える冷蔵庫において、制御装置による画像処理の結果、庫内の食品の収納状態に対応して、庫内ファン14、及び、圧縮機11の回転数を増減させるものであり、制御装置による画像処理の結果、庫内の食品の収納状態が少ない場合には、前記庫内ファン、及び、前記圧縮機の回転数を減少させるという省エネ運転を行うことができ、庫内の食品の収納状態が多い場合には、前記庫内ファン、及び、前記圧縮機の回転数を増加させることにより庫内を冷却でき、冷蔵庫の庫内温度を最適に制御できる。   As described above, in the present embodiment, the refrigerator compartment 15 that cools and stores food, the door 22 that opens and closes the opening of the refrigerator compartment 15, and the interior of the refrigerator compartment 15 provided in the refrigerator compartment 15 are photographed. A refrigerator including a camera 16 that performs processing, a control device that performs arithmetic processing on an image captured by the camera 16, an internal fan 14 that sends cold air from the cooler 13 that constitutes the refrigeration cycle to the refrigerator compartment 15, and a compressor 11. The number of rotations of the internal fan 14 and the compressor 11 is increased or decreased in accordance with the storage state of the food in the storage as a result of the image processing by the control device. As a result of the image processing by the control device, When the food storage state in the warehouse is small, an energy-saving operation of reducing the number of rotations of the internal fan and the compressor can be performed, and when the food storage state in the warehouse is large , Emissions, and can cool the inside of the refrigerator by increasing the rotational speed of the compressor can be optimally controlled refrigerator inside temperature.

また、省エネ運転を行うことで制御装置及びカメラによる冷蔵庫のコストアップ分について、使用者に理解を得られ易くなる。   Moreover, it becomes easy for a user to understand the cost increase of the refrigerator by a control apparatus and a camera by performing an energy saving operation.

また、本実施の形態では、制御装置は、冷蔵室15に収納物の無い状態で撮影された初期画像が記憶されており、冷蔵庫に食品が収納されている時にカメラ16で撮影された画像は、制御装置に電送されて画像が画素単位に分割され、冷蔵庫内の同じ範囲を撮影した前記初期画像の画素単位と色を比較し、同じ色であれば「0」をカウントし、異なる色であれば「1」をカウントし、そのカウント数を全ての画素単位で足し算し、合計のカウント数がカメラ16の撮影画素数の70%以上であれば、冷蔵庫内に食品が詰まっていると判断し、カメラ16の撮影画素数の30%以下であれば、冷蔵庫内に食品があまり入ってないと判断して、庫内設定温度、庫内ファン14、及び、前記圧縮機11の回転数を増減するものであり、庫内の食品の収納状態を、カメラ16で撮影した画像の画素単位の色で判別するようにしたので、画像処理が単純化されて処理速度も速くなり、且つ、安価なマイコンで省エネ運転を行うことが可能となり、冷蔵庫のコストアップ分も大幅に抑制できる。   In the present embodiment, the control device stores an initial image taken in the refrigerator compartment 15 with no stored items, and the image taken by the camera 16 when food is stored in the refrigerator. The image is divided into pixel units by being transmitted to the control device, and the color is compared with the pixel unit of the initial image obtained by photographing the same range in the refrigerator. If there is, “1” is counted, and the count number is added in units of all pixels. If the total count number is 70% or more of the number of pixels captured by the camera 16, it is determined that food is clogged in the refrigerator. If the number of pixels taken by the camera 16 is 30% or less, it is determined that there is not much food in the refrigerator, and the internal set temperature, the internal fan 14, and the rotation speed of the compressor 11 are determined. Increase or decrease, the food in the warehouse Since the delivery state is determined by the color of each pixel of the image taken by the camera 16, the image processing is simplified and the processing speed is increased, and an energy saving operation can be performed with an inexpensive microcomputer. The cost increase of the refrigerator can be greatly suppressed.

(実施の形態2)
図9は、本発明の第2の実施の形態の冷蔵庫の縦断面図を示すものである。図10は、本発明の第2の実施の形態の冷蔵庫の縦断面図を示すものである。なお、実施の形態1と同じ部分にはこれと同じ符号を付し、一部の説明を省略する。
(Embodiment 2)
FIG. 9 shows a longitudinal sectional view of a refrigerator according to the second embodiment of the present invention. FIG. 10 shows a longitudinal sectional view of a refrigerator according to the second embodiment of the present invention. The same parts as those in the first embodiment are denoted by the same reference numerals, and a part of the description is omitted.

図9、図10において、冷蔵室15の扉22の内壁に凹部19を設け、凹部19内に庫
内を撮影するカメラ16が配設されている。また、冷蔵室15内には庫内の温度を検知するための温度センサ23が配設されている。
9 and 10, a recess 19 is provided on the inner wall of the door 22 of the refrigerator compartment 15, and a camera 16 for photographing the inside of the cabinet is disposed in the recess 19. A temperature sensor 23 for detecting the temperature inside the refrigerator is disposed in the refrigerator compartment 15.

以上のように構成された冷蔵庫について、以下その動作、作用を説明する。   About the refrigerator comprised as mentioned above, the operation | movement and an effect | action are demonstrated below.

まず、冷蔵室15の扉22の開閉を検知するドアスイッチと連動して、撮影動作を行う。冷蔵室15の扉22内面側に設置されたカメラ16で撮影された画像は、制御装置に電送され、画像処理が行われる。制御装置には、冷蔵室15内に食品が収納されていない空状態の画像が、予め初期データとして記憶されている。制御装置は、冷蔵室15の扉22内面側のカメラで撮影された画像を画素単位に分割整理し、予め記憶している初期データの該当する部位の画素と比較を行う。比較する方法として、画素単位の色の相違を用いた場合、初期データの画像と同じであれば「0」をカウントし、違う色であれば「1」をカウントする。そして、カウントされた「0」と「1」を全て積算した値が、カメラ16の撮影総画素数の30%以下であれば、冷蔵室内に空のスペースが十分にあると判断して、圧縮機11の回転数、及び、庫内ファン14の回転数を下げる制御を実施する。   First, a photographing operation is performed in conjunction with a door switch that detects opening and closing of the door 22 of the refrigerator compartment 15. An image photographed by the camera 16 installed on the inner surface side of the door 22 of the refrigerator compartment 15 is transmitted to the control device, and image processing is performed. In the control device, an empty image in which no food is stored in the refrigerator compartment 15 is stored in advance as initial data. The control device divides and arranges an image taken by the camera on the inner surface side of the door 22 of the refrigerator compartment 15 in units of pixels, and compares it with the pixels in the corresponding portion of the initial data stored in advance. As a comparison method, when the difference in color in pixel units is used, “0” is counted if it is the same as the initial data image, and “1” is counted if the color is different. If the sum of all the counted “0” and “1” is 30% or less of the total number of captured pixels of the camera 16, it is determined that there is sufficient empty space in the refrigerator compartment, and compression is performed. Control which lowers the rotation speed of the machine 11 and the rotation speed of the internal fan 14 is performed.

逆に、カウントされた「0」と「1」を全て積算した値が、カメラの撮影総画素数の70%以上であれば、圧縮機11の回転数、及び、庫内ファン14の回転数を、現状維持、或いは、上昇させる制御を実施する。   On the contrary, if the value obtained by adding up all the counted “0” and “1” is 70% or more of the total number of captured pixels of the camera, the rotation speed of the compressor 11 and the rotation speed of the internal fan 14 The current state is maintained or controlled to be raised.

このように、冷蔵室15内を撮影するカメラ16を扉22内面側に設けることにより、カメラ16と冷蔵室15内の複数の棚18との間に十分なスペースを設けることができ、複数の棚18に載置された食品によって、カメラ16を塞がれることもなく、広角のカメラ16の作用とも相まって、冷蔵室15内の食品の分布状態を精度の高い画像として撮影することができる。   Thus, by providing the camera 16 for photographing the inside of the refrigerator compartment 15 on the inner surface side of the door 22, a sufficient space can be provided between the camera 16 and the plurality of shelves 18 in the refrigerator compartment 15. The camera 16 is not blocked by the food placed on the shelf 18, and in combination with the action of the wide-angle camera 16, the distribution state of the food in the refrigerator compartment 15 can be taken as a highly accurate image.

また、冷蔵室15の扉22内面側に凹部19を設け、凹部19の略中央にカメラを設置し、カメラ16が冷蔵室15の扉22内面の平面から少し窪んで配設されるようにすることで、冷蔵室15内への食品の出入れ等に伴って、食品がカメラに接触して、カメラが破損するといった事態を未然に防止することができる。   In addition, a recess 19 is provided on the inner surface side of the door 22 of the refrigerating chamber 15, and a camera is installed in the approximate center of the recess 19 so that the camera 16 is slightly recessed from the plane of the inner surface of the door 22 of the refrigerating chamber 15. Thus, it is possible to prevent a situation in which food is brought into contact with the camera and the camera is damaged as food is put in and out of the refrigerator compartment 15.

また、冷蔵室15の扉22内面側にカメラが突出することがないので、外観的にも優れた特徴を有する。この場合、カメラを保護する半円形状のカバーは付けなくてもよい。   Further, since the camera does not protrude on the inner surface side of the door 22 of the refrigerating room 15, it has an excellent appearance. In this case, a semicircular cover that protects the camera may not be attached.

また、カメラの設置場所は、扉内面側のポケット部に設けてもよく、カメラをポケット部に埋設、或いは、ポケット部の庫内側に張り出して設置してもよい。   Further, the camera installation location may be provided in a pocket portion on the inner surface side of the door, or the camera may be embedded in the pocket portion, or may be installed overhanging the inside of the pocket portion.

また、冷蔵室15内の温度を検知する温度センサ23の値による庫内ファン14及び圧縮機11の回転数制御と、カメラ16による画像処理の判定による庫内ファン14及び圧縮機11の回転数制御が異なる場合には、画像処理の判定を優先するようにしており、冷蔵室15内の実際の食品(負荷)の大小に応じて、庫内ファン14及び圧縮機11の回転数制御を行うので、無駄な電力を消費することなく、負荷の変動に素早く対応することが可能となる。   Further, the rotational speed of the internal fan 14 and the compressor 11 is controlled by the value of the temperature sensor 23 that detects the temperature in the refrigerator compartment 15, and the rotational speed of the internal fan 14 and the compressor 11 is determined based on image processing determination by the camera 16. When the control is different, priority is given to the determination of image processing, and the rotational speed control of the internal fan 14 and the compressor 11 is performed according to the size of the actual food (load) in the refrigerator compartment 15. As a result, it is possible to quickly respond to load fluctuations without consuming unnecessary power.

以上のように、本実施の形態においては、カメラ16を冷蔵室15の扉22の内壁に設けることにより、棚18に載置された食品によって、カメラ16のレンズ部が塞がれるのを防止することができ、庫内に食品が大量に収納されている場合でも、信頼性の高いカメラ撮影が可能となる。   As described above, in the present embodiment, by providing the camera 16 on the inner wall of the door 22 of the refrigerator compartment 15, it is possible to prevent the lens portion of the camera 16 from being blocked by food placed on the shelf 18. Therefore, even when a large amount of food is stored in the cabinet, highly reliable camera photography is possible.

以上のように、本発明にかかる冷蔵庫は、庫内の食品の収納状態を、カメラで撮影した画像の画素単位の色で判別するようにしたので、画像処理が単純化されて安価なマイコンでも必要十分な処理速度が得られるため、業務用の大型冷蔵庫やショーケース等の用途にも適用できる。   As described above, the refrigerator according to the present invention discriminates the storage state of the food in the warehouse by the color of the pixel unit of the image photographed by the camera, so that even an inexpensive microcomputer with simplified image processing. Since a necessary and sufficient processing speed can be obtained, it can also be applied to uses such as commercial large refrigerators and showcases.

10 冷蔵庫本体
11 圧縮機
12 冷凍室
13 冷却器
14 庫内ファン
15 冷蔵室
16 カメラ
17 透明カバー
18 棚
19 凹部
20 ダクト
21 枠体
22 扉
23 温度センサ
DESCRIPTION OF SYMBOLS 10 Refrigerator body 11 Compressor 12 Freezer compartment 13 Cooler 14 Fan in refrigerator 15 Refrigerator compartment 16 Camera 17 Transparent cover 18 Shelf 19 Recess 20 Duct 21 Frame 22 Door 23 Temperature sensor

Claims (6)

食品を冷却して保存する貯蔵室と、前記貯蔵室の開口部を開閉する扉と、前記貯蔵室に設けられ前記貯蔵室の内部を撮影するカメラと、前記カメラで撮影した画像を演算処理する制御装置と、冷凍サイクルを構成する冷却器からの冷気を前記貯蔵室へと送出する庫内ファンと、圧縮機を備える冷蔵庫において、前記制御装置による画像処理の結果、庫内の食品の収納状態に対応して、前記庫内ファン、及び、前記圧縮機の回転数を増減させることを特徴とする冷蔵庫。   A storage room that cools and stores food, a door that opens and closes an opening of the storage room, a camera that is provided in the storage room and photographs the inside of the storage room, and an image processed by the camera is processed. In a refrigerator provided with a control device, an internal fan that sends cold air from a cooler constituting the refrigeration cycle to the storage chamber, and a compressor, as a result of image processing by the control device, the storage state of food in the storage Correspondingly, the number of rotations of the internal fan and the compressor is increased or decreased. 前記カメラを前記貯蔵室の背面壁に設けたことを特徴とする請求項1に記載の冷蔵庫。   The refrigerator according to claim 1, wherein the camera is provided on a back wall of the storage room. 前記カメラを前記貯蔵室の扉の内壁に設けたことを特徴とする請求項1または2に記載の冷蔵庫。   The refrigerator according to claim 1 or 2, wherein the camera is provided on an inner wall of a door of the storage room. 前記貯蔵室の内壁に複数のカメラを設けたことを特徴とする請求項1〜3のいずれか1項に記載の冷蔵庫。   The refrigerator according to any one of claims 1 to 3, wherein a plurality of cameras are provided on an inner wall of the storage room. 前記制御装置は、前記貯蔵室に収納物の無い状態で撮影された初期画像が記憶されており、食品が収納されている時に前記カメラで撮影された画像は、前記制御装置に電送されて画像が画素単位に分割され、前記貯蔵室の同じ範囲を撮影した前記初期画像の画素単位と色を比較し、同じ色であれば「0」をカウントし、異なる色であれば「1」をカウントし、そのカウント数を全ての画素単位で足し算し、合計のカウント数が前記カメラの撮影画素数の所定値A以上であれば、冷蔵庫内に食品が詰まっていると判断し、前記カメラの撮影画素数の所定値B以下であれば、冷蔵庫内に食品があまり入ってないと判断して、庫内設定温度、前記庫内ファン、及び、前記圧縮機の回転数を増減することを特徴とする請求項1〜4のいずれか1項に記載の冷蔵庫。   The control device stores an initial image photographed in the storage room with no stored items, and an image photographed by the camera when food is stored is sent to the control device as an image. Is divided into pixel units, and the color is compared with the pixel unit of the initial image obtained by photographing the same range of the storage room. If the color is the same, “0” is counted, and if the color is different, “1” is counted. If the total number of counts is equal to or greater than a predetermined value A of the number of pixels photographed by the camera, it is determined that food is clogged in the refrigerator, and the camera is photographed. If the number of pixels is equal to or less than a predetermined value B, it is determined that there is not much food in the refrigerator, and the set temperature in the refrigerator, the fan in the refrigerator, and the number of rotations of the compressor are increased or decreased. To any one of claims 1 to 4 Refrigerator. 前記貯蔵室内の温度を検知する温度センサを備え、前記温度センサの値による前記庫内ファン及び前記圧縮機の回転数制御と、前記カメラによる画像処理の判定による前記庫内ファン及び圧縮機の回転数制御が異なる場合には、前記画像処理の判定を優先することを特徴とする請求項1〜5のいずれか1項に記載の冷蔵庫。   A temperature sensor for detecting the temperature in the storage chamber; rotation speed control of the internal fan and the compressor based on a value of the temperature sensor; and rotation of the internal fan and the compressor based on determination of image processing by the camera The refrigerator according to any one of claims 1 to 5, wherein when the number control is different, priority is given to the determination of the image processing.
JP2011124815A 2011-06-03 2011-06-03 Refrigerator Withdrawn JP2012251722A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011124815A JP2012251722A (en) 2011-06-03 2011-06-03 Refrigerator

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011124815A JP2012251722A (en) 2011-06-03 2011-06-03 Refrigerator

Publications (1)

Publication Number Publication Date
JP2012251722A true JP2012251722A (en) 2012-12-20

Family

ID=47524701

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011124815A Withdrawn JP2012251722A (en) 2011-06-03 2011-06-03 Refrigerator

Country Status (1)

Country Link
JP (1) JP2012251722A (en)

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58104689A (en) * 1981-12-16 1983-06-22 Nippon Kokan Kk <Nkk> Disposition of mercury-contg. aqueous solution
JP2014196837A (en) * 2013-03-29 2014-10-16 パナソニック株式会社 Refrigerator
JP2014196834A (en) * 2013-03-29 2014-10-16 パナソニック株式会社 Refrigerator
WO2015029582A1 (en) 2013-08-27 2015-03-05 株式会社 東芝 Camera system and refrigerator
JP2015068525A (en) * 2013-09-27 2015-04-13 三菱電機株式会社 Refrigerator
JP2015081762A (en) * 2013-10-24 2015-04-27 三菱電機株式会社 Refrigerator
JP2015169412A (en) * 2014-03-10 2015-09-28 三菱電機株式会社 Refrigerator and network system including refrigerator
KR20150127560A (en) * 2015-10-28 2015-11-17 엘지전자 주식회사 Refrigerator and Controlling Method for the same
JP2016023892A (en) * 2014-07-23 2016-02-08 株式会社東芝 refrigerator
JP2016180577A (en) * 2015-03-25 2016-10-13 東芝ライフスタイル株式会社 Food management method and food management system
US9528756B2 (en) 2013-04-23 2016-12-27 Lg Electronics Inc. Refrigerator with camera and control method for the same
JP2016223726A (en) * 2015-06-02 2016-12-28 三菱電機株式会社 refrigerator
JP2017106715A (en) * 2017-02-16 2017-06-15 パナソニックIpマネジメント株式会社 refrigerator
JP2018036049A (en) * 2017-12-08 2018-03-08 東芝ライフスタイル株式会社 refrigerator
JP2018124059A (en) * 2013-03-29 2018-08-09 パナソニックIpマネジメント株式会社 Refrigerator and in-refrigerator display system
JP2018128251A (en) * 2018-04-16 2018-08-16 東芝ライフスタイル株式会社 refrigerator
JP2019095816A (en) * 2019-03-18 2019-06-20 東芝ライフスタイル株式会社 Camera device for storage house and storage house including the same
JP2019148418A (en) * 2013-03-12 2019-09-05 東芝ライフスタイル株式会社 refrigerator
US10694154B2 (en) 2013-08-28 2020-06-23 Toshiba Lifestyle Products & Services Corporation Camera device for refrigerator and refrigerator comprising same
KR20200106473A (en) * 2014-04-15 2020-09-14 엘지전자 주식회사 Refrigerator and Controlling Method for the same
KR20200106474A (en) * 2014-04-15 2020-09-14 엘지전자 주식회사 Refrigerator and Controlling Method for the same
US10951863B2 (en) 2013-03-12 2021-03-16 Toshiba Lifestyle Products & Services Corporation Refrigerator, camera device, refrigerator door pocket, and home appliance network system
KR20210035125A (en) * 2014-04-15 2021-03-31 엘지전자 주식회사 Refrigerator and Controlling Method for the same
KR20210036887A (en) * 2014-04-15 2021-04-05 엘지전자 주식회사 Refrigerator and Controlling Method for the same
JP2021081184A (en) * 2021-02-25 2021-05-27 東芝ライフスタイル株式会社 Food management method, food management system and refrigerator
US11143450B2 (en) 2013-03-12 2021-10-12 Toshiba Lifestyle Products & Services Corporation Refrigerator and camera device
CN114485034A (en) * 2022-02-07 2022-05-13 海信(山东)冰箱有限公司 Refrigerator and control method thereof

Cited By (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58104689A (en) * 1981-12-16 1983-06-22 Nippon Kokan Kk <Nkk> Disposition of mercury-contg. aqueous solution
US11143450B2 (en) 2013-03-12 2021-10-12 Toshiba Lifestyle Products & Services Corporation Refrigerator and camera device
US10951863B2 (en) 2013-03-12 2021-03-16 Toshiba Lifestyle Products & Services Corporation Refrigerator, camera device, refrigerator door pocket, and home appliance network system
JP2019148418A (en) * 2013-03-12 2019-09-05 東芝ライフスタイル株式会社 refrigerator
JP2014196837A (en) * 2013-03-29 2014-10-16 パナソニック株式会社 Refrigerator
JP2014196834A (en) * 2013-03-29 2014-10-16 パナソニック株式会社 Refrigerator
JP2021050909A (en) * 2013-03-29 2021-04-01 パナソニックIpマネジメント株式会社 Notification method, system
JP2019143967A (en) * 2013-03-29 2019-08-29 パナソニックIpマネジメント株式会社 Refrigerator and notification method
JP2018124059A (en) * 2013-03-29 2018-08-09 パナソニックIpマネジメント株式会社 Refrigerator and in-refrigerator display system
US10036587B2 (en) 2013-04-23 2018-07-31 Lg Electronics Inc. Refrigerator with camera and control method for the same
US10228187B2 (en) 2013-04-23 2019-03-12 Lg Electronics Inc. Refrigerator with camera and control method for the same
US9528756B2 (en) 2013-04-23 2016-12-27 Lg Electronics Inc. Refrigerator with camera and control method for the same
US10215483B2 (en) 2013-04-23 2019-02-26 Lg Electronics Inc. Refrigerator with camera and control method for the same
US9546812B2 (en) 2013-04-23 2017-01-17 Lg Electronics Inc. Refrigerator with camera and control method for the same
US9568241B2 (en) 2013-04-23 2017-02-14 Lg Electronics Inc. Refrigerator with camera and control method for the same
US10184715B2 (en) 2013-04-23 2019-01-22 Lg Electronics Inc. Refrigerator with camera and control method for the same
US9739526B2 (en) 2013-04-23 2017-08-22 Lg Electronics Inc. Refrigerator with heated camera module
US9851139B2 (en) 2013-04-23 2017-12-26 Lg Electronics Inc. Refrigerator and control method for the same
US9890994B2 (en) 2013-04-23 2018-02-13 Lg Electronics Inc. Refrigerator with camera and control method for the same
US9920980B2 (en) 2013-04-23 2018-03-20 Lg Electronics Inc. Refrigerator with camera and control method for the same
US9915471B2 (en) 2013-04-23 2018-03-13 Lg Electronics Inc. Refrigerator with camera and control method for the same
US9920982B2 (en) 2013-04-23 2018-03-20 Lg Electronics Inc. Refrigerator camera module
US9920981B2 (en) 2013-04-23 2018-03-20 Lg Electronics Inc. Refrigerator with camera and control thereof
WO2015029582A1 (en) 2013-08-27 2015-03-05 株式会社 東芝 Camera system and refrigerator
KR20180088760A (en) 2013-08-27 2018-08-06 도시바 라이프스타일 가부시키가이샤 Camera system and refrigerator
KR20200009146A (en) 2013-08-27 2020-01-29 도시바 라이프스타일 가부시키가이샤 Camera system and refrigerator
US10694154B2 (en) 2013-08-28 2020-06-23 Toshiba Lifestyle Products & Services Corporation Camera device for refrigerator and refrigerator comprising same
JP2015068525A (en) * 2013-09-27 2015-04-13 三菱電機株式会社 Refrigerator
JP2015081762A (en) * 2013-10-24 2015-04-27 三菱電機株式会社 Refrigerator
JP2015169412A (en) * 2014-03-10 2015-09-28 三菱電機株式会社 Refrigerator and network system including refrigerator
KR20210036887A (en) * 2014-04-15 2021-04-05 엘지전자 주식회사 Refrigerator and Controlling Method for the same
KR102259582B1 (en) 2014-04-15 2021-06-01 엘지전자 주식회사 Refrigerator and Controlling Method for the same
KR102417850B1 (en) * 2014-04-15 2022-07-05 엘지전자 주식회사 Refrigerator and Controlling Method for the same
KR102377310B1 (en) 2014-04-15 2022-03-21 엘지전자 주식회사 Refrigerator and Controlling Method for the same
KR102347134B1 (en) 2014-04-15 2022-01-03 엘지전자 주식회사 Refrigerator and Controlling Method for the same
KR20210035125A (en) * 2014-04-15 2021-03-31 엘지전자 주식회사 Refrigerator and Controlling Method for the same
KR20200106473A (en) * 2014-04-15 2020-09-14 엘지전자 주식회사 Refrigerator and Controlling Method for the same
KR20200106474A (en) * 2014-04-15 2020-09-14 엘지전자 주식회사 Refrigerator and Controlling Method for the same
JP2016023892A (en) * 2014-07-23 2016-02-08 株式会社東芝 refrigerator
JP2016180577A (en) * 2015-03-25 2016-10-13 東芝ライフスタイル株式会社 Food management method and food management system
JP2016223726A (en) * 2015-06-02 2016-12-28 三菱電機株式会社 refrigerator
KR101678444B1 (en) 2015-10-28 2016-11-22 엘지전자 주식회사 Refrigerator and Controlling Method for the same
KR20150127560A (en) * 2015-10-28 2015-11-17 엘지전자 주식회사 Refrigerator and Controlling Method for the same
JP2017106715A (en) * 2017-02-16 2017-06-15 パナソニックIpマネジメント株式会社 refrigerator
JP2018036049A (en) * 2017-12-08 2018-03-08 東芝ライフスタイル株式会社 refrigerator
JP2018128251A (en) * 2018-04-16 2018-08-16 東芝ライフスタイル株式会社 refrigerator
JP2019095816A (en) * 2019-03-18 2019-06-20 東芝ライフスタイル株式会社 Camera device for storage house and storage house including the same
JP2021081184A (en) * 2021-02-25 2021-05-27 東芝ライフスタイル株式会社 Food management method, food management system and refrigerator
JP7084517B2 (en) 2021-02-25 2022-06-14 東芝ライフスタイル株式会社 Food management method, food management system, refrigerator
CN114485034A (en) * 2022-02-07 2022-05-13 海信(山东)冰箱有限公司 Refrigerator and control method thereof

Similar Documents

Publication Publication Date Title
JP2012251722A (en) Refrigerator
JP2012251724A (en) Refrigerator
JP6307698B2 (en) refrigerator
TWI710739B (en) Refrigerator
JP6305122B2 (en) Refrigerator and network system equipped with refrigerator
EP3441700B1 (en) Refrigerator and partition control method
JP6305207B2 (en) Refrigerator and network system
JP6323279B2 (en) Cold storage room and its management system
KR20140121684A (en) Refrigerator
KR20120117464A (en) A refrigerator and a control method the same
CN112136014B (en) Refrigerator system
US20140168396A1 (en) Method for viewing contents of a refrigerator appliance
JP2015068525A (en) Refrigerator
KR101659937B1 (en) Refrigerator and method for controlling the same
WO2021212993A1 (en) Camera module in refrigeration appliance and method for preventing lens from fogging
JP6799958B2 (en) refrigerator
JP2015135206A (en) refrigerator
JP2017040425A (en) Cold storage and program
EP3048399A1 (en) Refrigerator and method for controlling the same
JP6592970B2 (en) refrigerator
KR102197963B1 (en) Refrigerator
JP6167327B2 (en) refrigerator
JP6361014B2 (en) Refrigerator and refrigerator system
JP2017020697A (en) refrigerator
JP2018013273A (en) refrigerator

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20140805