JP6518958B2 - refrigerator - Google Patents

refrigerator Download PDF

Info

Publication number
JP6518958B2
JP6518958B2 JP2018036088A JP2018036088A JP6518958B2 JP 6518958 B2 JP6518958 B2 JP 6518958B2 JP 2018036088 A JP2018036088 A JP 2018036088A JP 2018036088 A JP2018036088 A JP 2018036088A JP 6518958 B2 JP6518958 B2 JP 6518958B2
Authority
JP
Japan
Prior art keywords
storage
refrigerator
door
image
display terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018036088A
Other languages
Japanese (ja)
Other versions
JP2018124054A (en
Inventor
雅至 中川
雅至 中川
上迫 豊志
豊志 上迫
元城 中村
元城 中村
川口 寛史
寛史 川口
英嗣 市野
英嗣 市野
靖弘 樋口
靖弘 樋口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2018036088A priority Critical patent/JP6518958B2/en
Publication of JP2018124054A publication Critical patent/JP2018124054A/en
Application granted granted Critical
Publication of JP6518958B2 publication Critical patent/JP6518958B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Exposure Control For Cameras (AREA)
  • Devices That Are Associated With Refrigeration Equipment (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)
  • Studio Devices (AREA)

Description

本発明は、貯蔵庫内の食材を撮像して収納状況を表示端末等で確認することができる冷蔵庫システムに好適な冷蔵庫に関する。   BACKGROUND OF THE INVENTION Field of the Invention The present invention relates to a refrigerator suitable for a refrigerator system capable of imaging a food in a storage and checking a storage state with a display terminal or the like.

一般にこの種の冷蔵庫は数多くのものが提案されている。例えば、特許文献1に記載されている冷蔵庫は、貯蔵庫内に小型カメラを設け、この小型カメラで撮像した貯蔵庫内の食材収納状況を、インターネット回線を介して携帯電話等の表示端末により確認できるように構成してある。   Generally, many refrigerators of this type have been proposed. For example, in the refrigerator described in Patent Document 1, a small camera is provided in the storage, and the food storage situation in the storage imaged by the small camera can be confirmed by a display terminal such as a mobile phone via the Internet line. Is configured.

また、特許文献2にも特許文献1と同様の冷蔵庫が開示してあり、この特許文献2に記載のものは冷蔵庫の扉を閉じたときに小型カメラで貯蔵庫内の食材状態を撮像するように構成してある。   Moreover, the refrigerator similar to patent document 1 is disclosed also to patent document 2, and as for the thing of this patent document 2, when the door of a refrigerator is closed, it images a foodstuff state in a storage with a small camera. It is configured.

さらに、特許文献3に記載されている冷蔵庫は、特許文献1記載の構成に加えて、更に冷蔵庫の表面に表示端末を設け、この表示端末は冷蔵庫表面に組み込んだ固定端末機と冷蔵庫表面から取り外して持ち歩ける携帯電話等の表示端末とで構成し、前記両端末はインターネット回線を介して小型カメラで撮像した貯蔵庫内の食材収納状況をその表示部に表示可能としてあり、出かけているときはもちろん在宅時にも冷蔵庫の扉を開くことなく貯蔵庫内の食材収納状況を知ることができるように構成してある。   Furthermore, in addition to the configuration described in Patent Document 1, the refrigerator described in Patent Document 3 further provides a display terminal on the surface of the refrigerator, and this display terminal is removed from the fixed terminal incorporated in the refrigerator surface and the refrigerator surface The display unit can be configured with a display terminal such as a portable cellular phone, and the two terminals can display the food storage status in the storage taken by the small camera through the Internet line on the display unit, and when they go out, they are at home. It is configured to be able to know the food storage situation in the storage without opening the door of the refrigerator sometimes.

特開2002−236798号公報Japanese Patent Application Laid-Open No. 2002-236798 特開2007−46833号公報JP 2007-46833 A 特開2002−81818号公報JP 2002-81818 A

前記したようにこの種の冷蔵庫、すなわち、貯蔵庫内の食材を撮像して収納状況を表示端末等で確認できるようにした冷蔵庫は数多く提案されているが、未だ実用化されたものはない。   As described above, many refrigerators have been proposed which are of this type, i.e., the ones in which the food in the storage is imaged and the storage condition can be confirmed with a display terminal or the like, but none have been put to practical use.

そこで発明者らは上記のような冷蔵庫の実用化に向けて検討を進め、実用化検証を行ってきた。その結果、この種の冷蔵庫は、実用化していく上で解決していかなければならない幾つかの課題を見出した。   Therefore, the inventors have made studies for practical use of the above-mentioned refrigerator and conducted practical verification. As a result, this type of refrigerator has found some problems that must be solved in putting it to practical use.

その一つに小型カメラによる撮像制御において、食品の収納状況によって、庫内画像の色が撮像のたびに大きく異なり、表示端末で食材収納状況を確認する際に、使用者に違和感を与える画像となってしまうことがあり、撮像毎の色のばらつきを低減することが大きな課題となることである。すなわち、冷蔵庫内の閉空間で撮像を行う場合には、カメラと収納食品とが近距離であり、カメラ周辺の食品が撮像領域内を占める割合が大きく、食品の色影響を受けやすいなどの事態が引き起こされるということも見いだされた。   One of them is the image control by the small camera, the color of the image in the storage greatly differs depending on the storage condition of the food, and the image giving discomfort to the user when confirming the food storage condition on the display terminal In some cases, it is a major issue to reduce color variations in each imaging. That is, when imaging is performed in a closed space in a refrigerator, the camera and the stored food are at a short distance, and the ratio of food around the camera is large in the imaging area, and the color of food is easily affected Was also found to be triggered.

本発明はこのような点に鑑みてなしたもので、食品の収納状況に関わらず、撮像毎のばらつきを低減する安定した画像を提供する冷蔵庫とすることを目的としたものである。   The present invention has been made in view of these points, and it is an object of the present invention to provide a refrigerator that provides a stable image that reduces variations in each imaging regardless of the storage condition of food.

本発明は上記目的を達成するため、冷蔵庫本体と、前記冷蔵庫本体内に形成した収納室と、前記収納室を開閉する断熱扉と、前記収納室を照らす照明装置と、前記収納室内の撮像に用いるカメラ部と、前記カメラ部を制御する制御基板を有し、前記制御基板は、収納室内照明色温度から±500Kの範囲でホワイトバランスを制御するものである。   In order to achieve the above object, the present invention provides a refrigerator body, a storage room formed in the refrigerator body, a heat insulation door for opening and closing the storage room, a lighting device for illuminating the storage room, and imaging of the storage room A camera unit to be used and a control substrate for controlling the camera unit are included, and the control substrate controls white balance within a range of ± 500 K from the storage room illumination color temperature.

これにより、冷蔵庫内のカメラ部と食品の距離が極めて近い収納状況であっても、収納食品の色影響を抑制できるので、撮像毎のばらつきを低減する安定した画像を提供できる。   Thereby, even in the storage situation where the distance between the camera unit in the refrigerator and the food is extremely close, the influence of the color of the stored food can be suppressed, and a stable image can be provided which reduces the variation for each imaging.

本発明は、収納食品の色影響を抑制できるので、食品の収納状況に関わらず、撮像毎のばらつきを低減する安定した画像を提供できる。   The present invention can suppress the color influence of stored food, and therefore can provide a stable image in which the variation for each imaging is reduced regardless of the storage condition of the food.

本発明の実施の形態における冷蔵庫の斜視図The perspective view of the refrigerator in the embodiment of the present invention 同冷蔵庫の概略断面図Schematic cross section of the same refrigerator 同冷蔵庫の収納室扉を開いたときの内部を示す斜視図The perspective view which shows the inside when the storage room door of the same refrigerator is opened (a)同冷蔵庫に表示端末を一体的に装備させた斜視図、(b)同冷蔵庫に 表示端末を着脱自在に装備させた斜視図(A) A perspective view in which the display terminal is integrally equipped with the refrigerator, (b) a perspective view in which the display terminal is detachably equipped with the refrigerator 同冷蔵庫に用いる表示端末の装着構成例を示し、(a)は表示端末を一体的 に取り付けた場合の断面図、(b)は表示端末を着脱自在に装着した場合の断面図The mounting structural example of the display terminal used for the same refrigerator is shown, (a) is a cross-sectional view at the time of attaching a display terminal integrally, (b) is a cross-sectional view at the time of mounting a display terminal detachably. 同冷蔵庫に用いる表示端末のディスプレイ視認構成例を示し、(a)(b) は扉の外被パネルをガラスとした場合の概略断面図、(c)は扉の外被パネルをマジックミラーで構成した場合の概略断面図The example of display visual recognition structure of the display terminal used for the same refrigerator is shown, (a) and (b) are schematic sectional views at the time of using the cover panel of a door as glass, (c) comprises the cover panel of a door with a magic mirror. Outline cross section in the case of 同冷蔵庫の撮像ユニット取り付け例を示す縦断面図Longitudinal sectional view showing an example of mounting an imaging unit of the same refrigerator 同冷蔵庫の撮像ユニット取り付け例を示し、(a)は扉を閉じた状態の冷蔵庫扉部分の横断面図、(b)は同扉を開いたときの扉内面側の正面図The example of imaging unit attachment of the refrigerator is shown, (a) is a cross-sectional view of the refrigerator door part of the state which closed the door, (b) is a front view of the door inner surface side when the door is opened. 同実施の形態における冷蔵庫の撮像ユニット取り付け部を示す平面概略説明図Plane schematic explanatory drawing which shows the imaging unit attachment part of the refrigerator in the embodiment 同実施の形態における冷蔵庫に取り付けた撮像ユニットの説明図Explanatory drawing of the imaging unit attached to the refrigerator in the same embodiment 同実施の形態における撮像ユニットの撮像制御を示すブロック図Block diagram showing imaging control of the imaging unit in the embodiment 同実施の形態における冷蔵庫システムのシステム構成図System configuration diagram of the refrigerator system in the same embodiment 同冷蔵庫システムの冷蔵庫構成を示すブロック図Block diagram showing the refrigerator configuration of the same refrigerator system 同冷蔵庫システムのサーバ構成を示すブロック図Block diagram showing server configuration of same refrigerator system 同冷蔵庫システムのレシピ抽出構成を示すブロック図Block diagram showing the recipe extraction configuration of the same refrigerator system 同冷蔵庫システムの撮像〜データ記憶動作を示すフローチャートFlowchart showing imaging to data storage operation of the same refrigerator system 同冷蔵庫システムにおける庫内画像表示のフローチャートFlowchart of image display in storage in same refrigerator system 同冷蔵庫システムにおける画像合成処理を説明するための図Diagram for explaining the image composition processing in the same refrigerator system

以下、本発明の具体的かつ詳細な実施の形態を説明するが、まず本発明の実施の形態の要点を記載する。   Hereinafter, specific and detailed embodiments of the present invention will be described. First, the main points of the embodiments of the present invention will be described.

本発明は上記目的を達成するため、冷蔵庫本体と、前記冷蔵庫本体内に形成した収納室と、前記収納室を開閉する断熱扉と、前記収納室を照らす照明装置と、前記収納室内の撮像に用いるカメラ部と、前記カメラ部を制御する制御基板を有し、前記制御基板は、収納室内照明色温度から±500Kの範囲でホワイトバランスを制御するものである。   In order to achieve the above object, the present invention provides a refrigerator body, a storage room formed in the refrigerator body, a heat insulation door for opening and closing the storage room, a lighting device for illuminating the storage room, and imaging of the storage room A camera unit to be used and a control substrate for controlling the camera unit are included, and the control substrate controls white balance within a range of ± 500 K from the storage room illumination color temperature.

これにより、冷蔵庫内のカメラ部と食品の距離が極めて近い収納状況であっても、収納食品の色影響を抑制できるので、食品の収納状況に関わらず、撮像毎のばらつきを低減する安定した画像を提供できる。   As a result, even if the camera unit in the refrigerator and the food are in an extremely close storage condition, the influence of the color of the stored food can be suppressed. Therefore, a stable image for reducing variation in each imaging regardless of the food storage condition. Can provide

また、前記制御基板は冷蔵庫内の照度に合わせて自動で露出を調整する露出調整部を有するので、これにより、食品の収納状況による庫内画像の明るさばらつきを低減するので、使用者が庫内画像から収納状況を確認する際に違和感を与えることがない。   In addition, since the control board has the exposure adjustment unit that automatically adjusts the exposure according to the illuminance in the refrigerator, the brightness variation of the image in the storage due to the storage condition of the food is reduced, so the user can store the storage There is no sense of incongruity when checking the storage status from the inside image.

以下、本発明の実施の形態1について、図面を用いて説明する。尚、本発明は以下の実施の形態に限定されるものではない。   Hereinafter, Embodiment 1 of the present invention will be described using the drawings. The present invention is not limited to the following embodiments.

[実施の形態1]
<1.構成>
1−1.冷蔵庫の構成
図1〜図3を用いてフレンチドアタイプの冷蔵庫の場合の構成例についてまず説明する。
First Embodiment
<1. Configuration>
1-1. Configuration of Refrigerator A configuration example in the case of a French door type refrigerator will first be described using FIGS. 1 to 3.

図1〜図3において、冷蔵庫本体1は、前方に開口する金属製(例えば鉄板)の外箱2と、硬質樹脂製(例えばABS)の内箱3と、これら外箱2と内箱3との間に発泡充填した硬質発泡ウレタン等の断熱材4からなる。上記冷蔵庫本体1はその内部に複数の収納室を仕切形成してある。この収納室は、冷蔵庫本体1の上部から、冷蔵室5、冷蔵室5の下に位置する切替室6及び切替室6に並設した製氷室7、切替室6及び製氷室7の下部に位置する冷凍室8と、冷凍室8の下部に位置する野菜室9となっている。また、前記冷蔵室5の前面は、観音開き式の扉10により開閉自由に閉塞し、切替室6及び製氷室7と冷凍室8と野菜室9の前面部は引き出し式の扉11,12,13,14(以下、引き出し式扉と称す)によって開閉自由に閉塞してある。   In FIGS. 1 to 3, the refrigerator main body 1 includes an outer case 2 made of metal (for example, iron plate) opened forward, an inner case 3 made of hard resin (for example, ABS), the outer case 2 and the inner case 3 And a heat insulating material 4 such as hard urethane foam filled with foam. The refrigerator main body 1 has a plurality of storage compartments partitioned therein. This storage room is located from the upper part of the refrigerator main body 1 to the cold storage room 5, the switching room 6 located below the cold storage room 5, and the ice making room 7, the switching room 6 and the lower part of the ice making room 7 And a vegetable room 9 located below the freezing room 8. Further, the front of the refrigerator compartment 5 is closed freely by the double door 10, and the switching compartment 6, the ice making room 7, the freezer compartment 8 and the front part of the vegetable compartment 9 are drawn out doors 11, 12, 13 , 14 (hereinafter referred to as a drawer type door) closed freely open and close.

冷蔵庫本体1の背面には冷却室16があり、冷気を生成する冷却器17と、冷気を各室に供給する送風ファン18と、冷蔵室への風量を調整するためのダンパ(風量調整手段)22とが設けてある。また、上記冷蔵庫本体1の本体天面奥部にはコンプレッサ19が設けてあり、コンデンサ(図示せず)と、放熱用の放熱パイプ20と、キャピラリーチューブ21と、前記した冷却器17とを順次環状に接続してなる冷凍サイクルに冷媒を封入し、冷却運転を行うように構成してある。   There is a cooling chamber 16 on the back of the refrigerator body 1, and a cooler 17 for generating cold air, a blower fan 18 for supplying cold air to each chamber, and a damper (air volume adjusting means) for adjusting the air volume to the refrigerator compartment 22 are provided. Further, a compressor 19 is provided at the back of the top surface of the main body 1 of the refrigerator, and a condenser (not shown), a heat radiation pipe 20 for heat radiation, a capillary tube 21 and the cooler 17 described above are sequentially Refrigerant is sealed in the annularly connected refrigeration cycle so as to perform a cooling operation.

ここで、上記各扉10〜14は冷蔵庫本体1と同様硬質発泡ウレタンを充填して断熱性を持たせてあり、この冷蔵庫では、上記扉10〜14のうち、冷蔵室となる収納室5の扉10の一方の前面に表示手段としての表示端末15が装備してある。この表示端末15は後述するインターネット等と通信可能なスマートフォン、タブレットPC等で形成し、液晶パネル等のディスプレイ部とそれを制御する制御部を一体に有していて、図4(a)に示すように扉10に一体的に取付けたり、あるいは、図4(b)に示すように扉10に着脱自在としてあり、いずれかの方式で装備させてある。   Here, each of the doors 10 to 14 is filled with hard urethane foam as in the refrigerator main body 1 to provide heat insulation, and in this refrigerator, of the doors 10 to 14 of the storage chamber 5 which becomes the refrigerator compartment A display terminal 15 as display means is provided on one of the front faces of the door 10. The display terminal 15 is formed of a smartphone, tablet PC or the like that can communicate with the Internet, which will be described later, and integrally has a display unit such as a liquid crystal panel and a control unit that controls the display unit. As shown in FIG. 4 (b), the door 10 can be integrally attached to the door 10 as one piece, or can be detachably attached to the door 10, and the door 10 is equipped with any method.

図5(a)、(b)は扉10に対する表示端末15の装着構成例を示し、図5(a)は表示端末15を一体的に取り付けた場合、図5(b)は表示端末15を着脱自在に装着した場合を示す。   5 (a) and 5 (b) show an example of the mounting configuration of the display terminal 15 to the door 10. FIG. 5 (a) shows the display terminal 15 when the display terminal 15 is integrally attached. It shows the case where it is detachably attached.

図5(a)、(b)において、扉10は、主に、冷蔵庫の前面側に面する外被パネル10aと、冷蔵庫の庫内側に面する内側板10bと、外被パネル10aと内側板10bとの間に充填した断熱材4とで構成してある。外被パネル10aはカラー鋼板などの金属製の部材或いはガラス板等の透明の部材で構成してあり、内側板10bは真空成型により形成した合成樹脂部材である。内側板10bの周囲部分には、庫内側から見てロの字状で庫内側に突出する隆起壁部10b−1が設けてある。また、断熱材4にはすでに述べたように例えば硬質発泡ウレタンなどが用いてある。   5 (a) and 5 (b), the door 10 mainly includes a cover panel 10a facing the front side of the refrigerator, an inner plate 10b facing the inner side of the refrigerator, a cover panel 10a and an inner plate 10b and the heat insulating material 4 filled in between. The outer cover panel 10a is formed of a metallic member such as a color steel plate or a transparent member such as a glass plate, and the inner plate 10b is a synthetic resin member formed by vacuum molding. A raised wall portion 10b-1 is provided on the periphery of the inner side plate 10b so as to be protruded in the shape of a U when viewed from the inside of the storage. Further, as described above, for example, hard urethane foam is used for the heat insulating material 4.

また、表示端末15を一体化した図5(a)の扉10においては、扉10の前面側に、外被パネル10aと連続して断熱材4を覆う樹脂製の収納枠体23が設けてある(外被パネル10aがガラス板である場合はガラス板に一体的に接着して設けてある)。表示端末15は、端末保持体24を介して収納枠体23に固定されている。また、表示端末15の前面側には、タッチパネル25を設けている。表示端末15とタッチパネル25間は隙間26が設けてあり、表示端末15からのノイズによってタッチパネル25が誤作動を起さないようにしてある。表示端末15、タッチパネル25はその外周縁を覆う枠体27を扉10表面に取り付けて固定してある。このように、収納枠体23を設けることで、断熱材4が表示端末15に直接ふれることがないため、断熱材4を発泡する際に、表示端末15が高温に曝されたり、変形したりするなどの不具合を防止することができる。一方、表示端末15を着脱自在とした図5(b)の扉10では、扉10の前面部に収納枠体23を設けることで、凹部28を形成し、この凹部28に表示端末15を着脱するように構成してある。   Moreover, in the door 10 of FIG. 5 (a) which integrated the display terminal 15, the resin-made storage frame 23 which covers the heat insulating material 4 continuously with the covering panel 10a is provided in the front side of the door 10. (If the cover panel 10a is a glass plate, it is integrally attached to the glass plate). The display terminal 15 is fixed to the storage frame 23 via the terminal holder 24. Further, a touch panel 25 is provided on the front side of the display terminal 15. A gap 26 is provided between the display terminal 15 and the touch panel 25 so that noise from the display terminal 15 does not cause the touch panel 25 to malfunction. The display terminal 15 and the touch panel 25 are fixed by attaching a frame 27 covering the outer peripheral edge thereof to the surface of the door 10. As described above, since the heat insulating material 4 does not directly touch the display terminal 15 by providing the storage frame body 23, the display terminal 15 is exposed to high temperature or deformed when the heat insulating material 4 is foamed. Can be prevented. On the other hand, in the door 10 of FIG. 5 (b) in which the display terminal 15 is detachable, a recess 28 is formed by providing the storage frame 23 on the front surface of the door 10, and the display terminal 15 is detached in this recess 28 Configured to

図6(a)、(b)、(c)は、扉10と表示端末15のディスプレイ透視構成の一例を示し、図6(a)、(b)は扉10の外被パネル10aがガラス板10a−1の場合、図3(c)は扉10の外被パネル10aをマジックミラー10a−2で構成した場合を示す。   6 (a), (b) and (c) show an example of the display see-through configuration of the door 10 and the display terminal 15, and FIGS. 6 (a) and 6 (b) show that the cover panel 10a of the door 10 is a glass plate In the case of 10a-1, FIG.3 (c) shows the case where the outer cover panel 10a of the door 10 is comprised by the magic mirror 10a-2.

図6(a)においては、扉10に埋設した表示端末15とガラス板10a−1との間に、表示端末15と対向する部分のみ透明としたスモークシート29が設けてあり、表示端末15がオフで黒っぽく見える時でも、表示端末15以外のガラス板10a−1部分もスモークシート29によって黒っぽく見えて表示端末15との境界が目立つことがなくなり、外観を良好に維持することができる。また、図6(b)においては、表示端末15の表示部として透明液晶表示部を用い全体が黒いスモークシート29aを透明液晶表示部の裏面に沿うように敷設したもので、この形態によっても外観を良好なものとすることができる。更に、図6(c)では図6(a)、(b)のガラス板10a−1をマジックミラー10a−2とし、スモークシート29を不要としたもので、この場合も外観を良好に維持することができる。いずれも表示端末15を扉10に一体的に取り付けた場合の例を示す。なお、スモークシート29の代わりにガラス板10a−1の背面側に黒っぽく見えるよう塗装を行ってもよい。   In FIG. 6A, a smoke sheet 29 is provided between the display terminal 15 embedded in the door 10 and the glass plate 10a-1 so that only the portion facing the display terminal 15 is transparent, and the display terminal 15 is Even when the display terminal 15 looks blackish, the glass sheet 10a-1 other than the display terminal 15 does not look blackish with the smoke sheet 29, and the boundary with the display terminal 15 does not stand out, so that the appearance can be maintained well. Further, in FIG. 6B, a transparent liquid crystal display unit is used as the display unit of the display terminal 15, and a smoke sheet 29a of a black whole is laid along the back surface of the transparent liquid crystal display unit. Can be made good. Furthermore, in FIG. 6C, the glass plate 10a-1 in FIGS. 6A and 6B is used as the magic mirror 10a-2 and the smoked sheet 29 is unnecessary, and in this case also, the appearance is maintained favorably. be able to. All show an example at the time of attaching display terminal 15 to door 10 in one. In addition, you may perform coating so that it may look dark on the back side of glass plate 10a-1 instead of the smoked sheet 29. FIG.

図7、図8(a)、(b)は庫内撮像用のカメラと庫内照明灯の取り付け例を示すもので、図7は扉を閉じた状態の冷蔵庫の縦断面図、図8(a)は同扉を閉じた状態の冷蔵庫における扉内面部を示す横断面図、図8(b)は同扉を開いたときの扉内面部の正面図である。   7 and 8 (a) and 8 (b) show an example of installation of the camera for imaging in the storage and the illumination in the storage, and FIG. 7 is a longitudinal sectional view of the refrigerator with the door closed. a) is a cross-sectional view showing the inside of the door in the refrigerator with the door closed, and FIG. 8 (b) is a front view of the inside of the door when the door is opened.

図7、図8(a)、(b)において、冷蔵庫の収納室5には上下複数段に棚板30−1〜30−4が設けてある。この棚板30−1〜30−4は周囲の枠を除き、透明な合成樹脂材やガラスなどの透過性を有する材料で形成してある。   In FIG. 7, FIG. 8 (a), (b), the shelf boards 30-1 to 30-4 are provided in the storage chamber 5 of a refrigerator in multiple steps up and down. The shelf plates 30-1 to 30-4 are formed of a transparent material such as transparent synthetic resin or glass, except for the surrounding frame.

31は最下段の棚板30−4の下方に引き出し自在に設けた収納容器である。最下段の棚板30−4は収納容器31の上面を構成することから固定されているものの、棚板30−1〜30−3は、それぞれ収納室5の両側壁部に設けられた側壁凸部32−1〜32−4に載せられており、脱着自在となっている。特に、最下段の棚板30−4を除いた棚板30−1〜30−3のうち中央の棚板30−2には、対応する側壁凸部32−2が異なる高さに複数、設けられており、棚の高さを調節できるようになっている。   A storage container 31 is provided below the lowermost shelf plate 30-4 so as to be freely drawn out. Although the shelf board 30-4 of the lowermost stage is fixed because it constitutes the upper surface of the storage container 31, the shelf boards 30-1 to 30-3 have the side wall convex provided on the both side walls of the storage room 5, respectively. It is placed on the sections 32-1 to 32-4 and is detachable. In particular, the shelf plate 30-2 at the center among the shelf plates 30-1 to 30-3 excluding the lowermost shelf plate 30-4 is provided with a plurality of corresponding side wall convex portions 32-2 at different heights. The height of the shelf can be adjusted.

33−1〜33−3は前記収納室5の開口を開閉する扉10の内面部に設けた扉収納棚で、上下複数段設けてある。この扉収納棚33−1〜33−3も透過性を有する材料で形成してある。   Reference numerals 33-1 to 33-3 denote door storage shelves provided on the inner surface of the door 10 for opening and closing the opening of the storage chamber 5, and are provided in a plurality of upper and lower stages. The door storage racks 33-1 to 33-3 are also formed of a transparent material.

34−1,34−2は庫内照明灯で、前記各棚板30−1〜30−4の前端より前方の前記収納室5の前面開口両側壁部と前面開口上面壁面部に設けてある。なお、この庫内照明灯34−1,34−2は省エネの関係から複数のLEDを配置した基板を例えば上下方向に渡り設けて透光性のカバーで覆ってある。   Reference numerals 34-1 and 34-2 denote interior lighting lamps, which are provided on the front opening side walls and the front opening top wall of the storage room 5 in front of the front ends of the shelf plates 30-1 to 30-4. . From the relationship of energy saving, the interior lamps 34-1 and 34-2 are provided with a substrate on which a plurality of LEDs are arranged, for example, vertically extending and covered with a translucent cover.

35−1,35−2は前記庫内照明灯34−1,34−2と同様収納室5の前面側に位置するように設けた撮像ユニットで、収納室内を撮像するものである。   The image pickup units 35-1 and 35-2 are provided on the front side of the storage room 5 similarly to the interior lamps 34-1 and 34-2, and pick up an image of the storage room.

この撮像ユニット35−1,35−2は、図10に示すように、前記収納室内の撮像に用いられるカメラ部37と、前記カメラ部37に接続されている制御基板38と、前記カメラ部37と前記制御基板38とを内部の空間に収めた収納ケース39とより構成されている。   The imaging units 35-1 and 35-2 are, as shown in FIG. 10, a camera unit 37 used for imaging in the storage room, a control board 38 connected to the camera unit 37, and the camera unit 37. And the control board 38 in an internal space.

カメラ部37は例えば、CCDカメラやCMOSカメラ等で構成してあり、その種類は特に限定するものではないが、結露等に強いものであるのが好ましい。   The camera unit 37 is formed of, for example, a CCD camera or a CMOS camera, and the type is not particularly limited, but it is preferable that the camera unit 37 be resistant to condensation and the like.

制御基板38は前記カメラ部37を制御するもので、帯状リード線38aによって前記カメラ部37に接続してあり、外部の冷蔵庫制御部に接続する外部接続部38bを有している。この外部接続部38bは例えばUSB接続口で構成してある。   The control board 38 controls the camera unit 37, and is connected to the camera unit 37 by a strip lead 38a, and has an external connection unit 38b connected to an external refrigerator control unit. The external connection unit 38 b is configured of, for example, a USB connection port.

収納ケース39は略直方体状のケース本体39aとケース蓋体39bとで構成してあり、ケース本体39a内に収納した前記カメラ部37と制御基板38の上からケース蓋体39bを装着して構成してある。そして、前記ケース蓋体39bに設けた第1の開口40aからカメラ部37を外部に臨ませるとともに、ケース本体39a側に設けた第2の開口40bから外部接続部38bを外部に臨ませてある。   The storage case 39 is composed of a substantially rectangular case body 39a and a case lid 39b, and the case lid 39b is mounted on the camera unit 37 and the control board 38 housed in the case body 39a. Yes. And while making camera part 37 face outside from the 1st opening 40a provided in the case lid 39b, external connection part 38b is made to face outside from the 2nd opening 40b provided in the case main body 39a side. .

また、前記制御基板38は図10からも明らかなように帯状リード線38aを折り返して前記カメラ部37と背中合わせに対向させてその光軸と直交するように配置し、収納ケース39の上下方向寸法の小型化を図っている。   Further, as is apparent from FIG. 10, the control board 38 is folded back from the strip lead wires 38a to face the camera portion 37 back to back and disposed orthogonal to the optical axis thereof. We are trying to miniaturize the

上記のように構成した撮像ユニット35−1,35−2はこの実施の形態では収納室内に二つ設けてあって、そのそれぞれは図8(b)、図9に示すように扉10の扉収納棚33−1,33−2の横の扉開放端側Yに新設したスペース10cに配置してある。すなわち、扉収納棚33−1,33−2はその横幅寸法を若干短くして扉開放端側Yにスペース10cを新設してある。そしてこのスペースの扉収納棚33−1,33−2の横端側に上下縦長の凸部41を扉内面から一体に隆起させて形成し、この凸部41の前記扉収納棚33−1,33−2とは反対側部分に撮像ユニット35−1,35−2を配置してある。なお、上記凸部41は扉10の断熱材4が入り込んだ形の断熱構成となっており、前記扉収納棚33−1,33−2の横端を支持する支持部ともなっている。   In this embodiment, two imaging units 35-1 and 35-2 configured as described above are provided in the storage chamber, and each of them is a door of the door 10 as shown in FIG. 8 (b) and FIG. It arrange | positions in the space 10c newly provided in the door open end side Y of the side of storage shelf 33 -1,33-2. That is, the width of the door storage racks 33-1 and 33-2 is slightly shortened, and a space 10c is newly provided on the door open end side Y. Then, vertically elongated convex portions 41 are integrally raised from the inner surface of the door at the lateral end sides of the door storage shelves 33-1 and 33-2 in this space, and the door storage shelves 33-1 of the convex portions 41, Imaging units 35-1 and 35-2 are disposed on the side opposite to 33-2. In addition, the said convex part 41 becomes a heat insulation structure of the shape which the heat insulating material 4 of the door 10 entrapped, and also serves as a support part which supports the side edge of said door storage shelf 33 -1,33-2.

そして前記両撮像ユニット35−1,35−2は図9に示す様に扉10の内壁面との間に所定の空間Tを形成するように配置し、カメラ部37が収納室内部に臨むように取り付けてある。この実施の形態では前記撮像ユニット35−1,35−2の背面側の扉内壁面に冷蔵庫制御部のリード線(図示せず)との接続用となる開口42を設け、この開口42の裏側に金属板等からなる補強板材43を配置し、この部分の強度を補強してある。なお、この補強板材43は扉10に充填した断熱材4で扉内壁面裏側に圧接固定されている。   The two imaging units 35-1 and 35-2 are arranged to form a predetermined space T with the inner wall surface of the door 10 as shown in FIG. 9, so that the camera unit 37 faces the inside of the storage chamber. Attached to In this embodiment, an opening 42 for connection with a lead (not shown) of the refrigerator control unit is provided on the inner wall of the door on the back side of the imaging units 35-1 and 35-2, and the back side of the opening 42 is provided. A reinforcing plate 43 made of a metal plate or the like is disposed on the upper side to reinforce the strength of this portion. The reinforcing plate material 43 is press-fixed on the rear side of the inner wall surface of the door by the heat insulating material 4 filled in the door 10.

また、上記撮像ユニット35−1,35−2は扉収納棚33−1,33−2の撮像ユニット35−1,35−2寄り部分の収納室内側の面を傾斜33aさせるか、扉収納棚35−1,35−2の前後寸法内の収納室内側寄り部分に設けて、カメラ部37の撮像範囲が収納室横幅全体に及ぶようにしてある。この実施の形態では扉収納棚33−1,33−2の撮像ユニット寄り部分の収納室内側の面を傾斜33aさせる構成としてある。   Further, the image pickup units 35-1 and 35-2 may have the surface on the storage room side of the portion close to the image pickup units 35-1 and 35-2 of the door storage racks 33-1 and 33-2 inclined 33a, or the door storage rack The image pickup range of the camera unit 37 is made to extend over the entire width of the storage room by providing the storage section closer to the storage compartment side in the front-rear dimension of 35-1, 35-2. In this embodiment, the surface on the storage chamber side of the portion near the imaging unit of the door storage racks 33-1 and 33-2 is configured to be inclined 33a.

また、前記した撮像ユニット35−1,35−2は図7に示すようにそれぞれ収納室内の棚板と対向する前方位置に設けてある。すなわち、上方のカメラ35−1は最上段の棚板30−1の略前方位置に、下方のカメラ35−2は図中三段目の棚板30−3の前方位置に設けてある。なお、この実施の形態では、いずれのカメラも、高さ調節を前提にして設けられている複数の側壁凸部32−2に載せられる棚板30−2ではなく、脱着可能ではあるが高さ調整を前提としていない棚板30−1、棚板30−3の略前方位置に設けてある。   Further, as shown in FIG. 7, the above-described imaging units 35-1 and 35-2 are respectively provided at front positions facing the shelf in the storage room. That is, the upper camera 35-1 is provided substantially forward of the uppermost shelf plate 30-1, and the lower camera 35-2 is provided forward of the third shelf 30-3 in the drawing. In this embodiment, any camera is removable, not the shelf plate 30-2 mounted on the plurality of side wall convex portions 32-2 provided on the premise of height adjustment, but the height is possible. It is provided in the approximate front position of shelf board 30-1 and shelf board 30-3 which do not assume adjustment.

そして、いずれの撮像ユニット35−1,35−2も、このフレンチドアの例の場合は大きい面積の扉10側に設けて、冷蔵庫51の略中央部に位置するように設定してある。また、この例では、撮像ユニット35−1,35−2はセンターピラー36(図3参照)が設けられていない扉10側に設けて、冷蔵庫51の略中央部に位置するように設定してある。なお、センターピラー36とは、周知の如くフレンチドアの場合に、2枚の扉10のいずれか一方の側面に設けられ、2枚の扉10の間に生じる隙間から収納室5内の冷気が漏れるのを防止するために設けられた部材である。   And in the case of this example of this French door, any imaging unit 35-1, 35-2 is provided in the door 10 side of a large area, and it is set so that it may be located in the approximate-central part of the refrigerator 51. FIG. Further, in this example, the imaging units 35-1 and 35-2 are provided on the side of the door 10 where the center pillar 36 (see FIG. 3) is not provided, and set to be positioned substantially at the center of the refrigerator 51. is there. As is well known, in the case of a French door, the center pillar 36 is provided on one of the side surfaces of the two doors 10, and the cold air in the storage chamber 5 is generated from the gap generated between the two doors 10. It is a member provided to prevent leakage.

また、前記庫内照明灯34−1,34−2は、図7から明らかなように撮像ユニット35−1,35−2より収納室奥側の位置に設け、庫内照明灯34−1,34−2の光が直接撮像ユニット35−1,35−2の撮像部に入り込まないように設けてある。   Further, the interior lighting lamps 34-1 and 34-2 are provided at a position on the rear side of the storage room with respect to the imaging units 35-1 and 35-2, as is apparent from FIG. The light 34-2 is provided so as not to directly enter the imaging units of the imaging units 35-1 and 35-2.

なお、これは、図示しないが、庫内照明灯34−1,34−2のカメラ側に遮光部を設けたり、或いは庫内照明灯34−1,34−2を構成するLED等の光源を斜め後方向きに傾斜配置するなどの構成とすることによって、庫内照明灯34−1,34−2の光が直接撮像ユニット35−1,35−2の撮像部に入り込まないようにしてもよいものであり、カメラの設置条件等に応じて適切に選択すればよい。   In addition, although this does not show in figure, a light-shielding part is provided in the camera side of interior lighting 34-1, 34-2, or light sources, such as LED which comprises interior lighting 34-1 and 34-2, The light of the interior lighting lamps 34-1 and 34-2 may not directly enter the imaging unit of the imaging units 35-1 and 35-2 by arranging to be inclined obliquely backward and so on. It may be selected appropriately according to the installation conditions of the camera.

冷蔵庫に撮像ユニット35−1、35−2を設けて撮像を行うにあたり、これまで述べてきたような撮像ユニット35−1、35−2、庫内照明灯34−1,34−2の配置構成に加えて、カメラ部37の仕様、制御基板38の撮像制御が重要となる。   Arrangement of the imaging units 35-1 and 35-2 and the interior lighting lamps 34-1 and 34-2 as described above in imaging by providing the imaging units 35-1 and 35-2 in the refrigerator In addition to the above, the specification of the camera unit 37 and the imaging control of the control board 38 are important.

本実施の形態におけるカメラ部37は、広角レンズを搭載しており、棚板30−1〜30−4上の食品を広範囲に撮像することを可能にしている。つまり、冷蔵庫内の閉空間で撮像を行う場合、カメラ部37と棚板30−1〜30−4上の食品とが近距離となって、撮像範囲が限定されるのを防ぐことができるので、撮像ユニット35−1、35−2の数を最小限にでき、構成が簡素化できる。広角レンズの画角は120°〜150°程度が望ましい。   The camera unit 37 in the present embodiment is equipped with a wide-angle lens, which enables imaging of food on the shelf plates 30-1 to 30-4 in a wide range. That is, when imaging is performed in a closed space in the refrigerator, the camera unit 37 and the food on the shelf plates 30-1 to 30-4 can be prevented from being in a short distance, and the imaging range can be prevented from being limited. The number of imaging units 35-1 and 35-2 can be minimized, and the configuration can be simplified. The angle of view of the wide-angle lens is preferably about 120 ° to 150 °.

図11に撮像ユニット35−1、35−2の撮像制御に関するブロック図を示す。   The block diagram regarding imaging control of imaging unit 35-1, 35-2 in FIG. 11 is shown.

制御基板38は、所定の距離にフォーカスを制御するフォーカス制御部70と、所定の制御値にホワイトバランスを制御するホワイトバランス制御部71と、冷蔵庫内の照度に合わせて自動で露出を調整する露出制御部72を有している。   The control board 38 controls the focus to a predetermined distance, the white balance control 71 that controls the white balance to a predetermined control value, and the exposure that automatically adjusts the exposure according to the illuminance in the refrigerator. A control unit 72 is provided.

本実施の形態におけるフォーカス制御部70はフォーカスを一定距離に固定している。冷蔵庫の扉を閉じた状態で撮像を行う場合、カメラ部37と棚板30−1〜30−4の距離は常に一定であり、10cm〜50cmにフォーカスを固定するのが望ましい。これにより、撮像時に複雑な制御を行うことなく、撮像制御を簡素化することができる。   The focus control unit 70 in the present embodiment fixes the focus at a constant distance. When imaging is performed with the door of the refrigerator closed, the distance between the camera unit 37 and the shelf plates 30-1 to 30-4 is always constant, and it is desirable to fix the focus to 10 cm to 50 cm. Thereby, imaging control can be simplified without performing complicated control at the time of imaging.

また、本発明のホワイトバランス制御部71は、制御値を庫内照明色温度から±500Kの範囲に設定している。ここで、ホワイトバランスとは、様々な色を含む光源のもとで、白色を正確に白く映し出す機能のことである。例えば、周囲環境の色温度が3000Kのもとで、制御値を7000Kに設定し、撮像を行うと、黄色味がかった画像となる。反対に、周囲環境の色温度が7000Kのもとで、制御値を3000Kに設定し、撮像を行うと、青味がかった画像となる。つまり、ホワイトバランス制御部71の制御値は、周囲環境の色温度とより近い値に設定するのが望ましい。   Further, the white balance control unit 71 of the present invention sets the control value in the range of ± 500 K from the interior illumination color temperature. Here, the white balance is a function of accurately making white appear white under a light source containing various colors. For example, when the color temperature of the surrounding environment is 3000 K, the control value is set to 7000 K, and imaging is performed, a yellowish image is obtained. On the other hand, when the color temperature of the surrounding environment is 7000K, the control value is set to 3000K and imaging is performed, the image becomes bluish. That is, it is desirable to set the control value of the white balance control unit 71 to a value closer to the color temperature of the surrounding environment.

しかしながら、冷蔵庫内の閉空間で撮像を行う場合には、カメラ部37と棚板30−1〜30−4上の食品とが近距離であり、カメラ部37周辺の食品が撮像領域内を占める割合が大きく、食品の色影響を受けやすい。   However, when imaging is performed in a closed space in a refrigerator, the camera unit 37 and the food on the shelf plates 30-1 to 30-4 are at a short distance, and the food around the camera unit 37 occupies the imaging region. Large proportion, susceptible to food color.

例えば、庫内照明色温度が7000Kにおいて、カメラ部37周辺に黄色のバナナが配置されているときは、撮像領域内の色相は黄色の占める割合が高く、周囲環境の光色を黄色が強い、すなわち光の色温度が低いと誤検知する可能性があり、黄色を白色に補正するようにホワイトバランスが動作する恐れがある。また、これにより、他収納物の色も影響を受け、全体的に青みがかった色味に仕上がる。   For example, when the yellow illumination color temperature is 7000K and the yellow banana is arranged around the camera unit 37, the proportion of yellow in the imaging area is high, and the light color of the surrounding environment is strong yellow. That is, if the color temperature of light is low, false detection may occur, and the white balance may operate to correct yellow to white. In addition, this also affects the color of the other items, resulting in an overall bluish color.

そこで、ホワイトバランス制御部の制御値を庫内照明色温度からマイナス500K以上の範囲に設定することで、周囲環境の光の色温度が低いと誤検知する可能性を低減し、カメラ部37周辺の収納食品の色味に関わらず、青味がかった画像となることを抑制でき、庫内画像から収納状況を確認する際に違和感を与えることがない。   Therefore, by setting the control value of the white balance control unit to a range of -500 K or more from the interior illumination color temperature, the possibility of false detection when the color temperature of the light of the surrounding environment is low is reduced, and around the camera unit 37 Regardless of the color of the stored food, it can be suppressed that it becomes a bluish image, and does not give a sense of incongruity when confirming the storage condition from the in-chamber image.

また、例えば、庫内照明色温度が7000Kにおいて、カメラ部37周辺に青色のパッケージの収納物が配置されているときは、周囲環境の光色を青色が強い、すなわち光の色温度が高いと誤検知する可能性があり、他収納物は黄色味がかった色味に仕上がる。   Also, for example, when the storage color of the blue package is arranged around the camera unit 37 when the interior illumination color temperature is 7000K, the blue of the light color of the surrounding environment is strong, that is, the color temperature of the light is high. There is a possibility of false detection, and the other stored items are finished in a yellowish color.

そこで、ホワイトバランス制御部71の制御値を庫内照明色温度からプラス500K以下の範囲に設定することで、周囲環境の光の色温度が高いと誤検知する可能性を低減し、カメラ部37周辺の収納食品の色味に関わらず、黄色味がかった画像となることを抑制でき、庫内画像から収納状況を確認する際に違和感を与えることがない。   Therefore, by setting the control value of the white balance control unit 71 to a range of plus 500 K or less from the interior illumination color temperature, the possibility of erroneous detection that the color temperature of the light of the surrounding environment is high is reduced. Regardless of the color of the stored food in the vicinity, it can be suppressed that the image becomes yellowish, and does not give a sense of discomfort when confirming the storage condition from the in-storage image.

これにより、ホワイトバランス制御部71は、制御値を庫内照明色温度から±500Kの範囲に設定することで、使用者が扉を開閉するときに実際に見る映像に近い庫内画像を提供できるので、使用者が庫内画像から収納状況を確認する際に違和感を与えることがないとともに、収納食品の色影響を抑制できるので、食品の収納状況に関わらず、撮像毎の色のばらつきを低減する安定した画像を提供できる。   Thereby, the white balance control unit 71 can provide an in-compartment image close to the image actually viewed by the user when opening and closing the door by setting the control value in the range of ± 500 K from the in-compartment illumination color temperature. As a result, the user does not feel discomfort when confirming the storage condition from the image in the storage, and the color influence of the stored food can be suppressed, so the variation in color for each imaging is reduced regardless of the storage condition of the food. Provide a stable image.

なお、ホワイトバランス制御部71は、周囲環境の光の色温度を判断し、自動で上記色温度範囲内で制御値の設定を行うオートホワイトバランス機能を有してもよい。これによって、照明装置から照射される光の色温度の個体ばらつきや、経年劣化による色温度の変化などを補正できるので、更に安定した画像を提供できる。   The white balance control unit 71 may have an auto white balance function of determining the color temperature of the light of the surrounding environment and automatically setting the control value within the color temperature range. This makes it possible to correct individual variations in color temperature of light emitted from the lighting device, changes in color temperature due to aging, and the like, thereby providing a more stable image.

また、制御基板38は、冷蔵庫内の照度に合わせて自動で露出を調整する露出制御部72を有している。ここで、露出とは、カメラ部37に入射する光の量を示す。   The control board 38 also has an exposure control unit 72 that automatically adjusts the exposure according to the illuminance in the refrigerator. Here, the exposure indicates the amount of light incident on the camera unit 37.

これにより、冷蔵庫内の照度に合わせて、カメラ部37に入射する光の量を制御することで、撮影ごとの庫内画像の明るさを均一に保つことを可能にしている。   Thus, by controlling the amount of light incident on the camera unit 37 in accordance with the illuminance in the refrigerator, it is possible to keep the brightness of the in-chamber image uniform for each photographing.

庫内の明るさは収納量によって大きく変化し、例えば、庫内の収納量が少ない場合には、庫内照明灯34−1,34−2から照射された光は、高反射率の内壁での反射が支配的で、光の減衰が少なく、庫内が明るいのに対し、収納量が多い場合には、多くの食品は反射率が低いため、収納量の増加に伴い、閉空間での反射を繰り返すことで、光は減衰し、庫内が暗くなる傾向にある。   The brightness of the interior largely changes depending on the storage amount. For example, when the storage amount in the interior is small, the light emitted from the interior lighting lamps 34-1 and 34-2 has an inner wall with high reflectance. Reflection is dominant, there is little light attenuation, and the interior is bright, but when the amount of storage is large, the reflectance of many foods is low, so with the increase in storage amount, By repeating the reflection, the light is attenuated and the inside of the cabinet tends to be dark.

つまり、露出制御部72は、冷蔵庫内の照度に合わせてカメラ部37の露出を調整することで、食品の収納状況による庫内画像の明るさばらつきを低減するので、使用者が扉を開閉するときに実際に見る映像に近い庫内画像を提供でき、使用者が庫内画像から収納状況を確認する際に違和感を与えることがない。   That is, the exposure control unit 72 adjusts the exposure of the camera unit 37 according to the illuminance in the refrigerator to reduce the brightness variation of the image in the storage due to the storage condition of the food, so the user opens and closes the door. It is possible to provide an in-compartment image close to the image to be actually viewed when the user does not give a sense of incongruity when confirming the storage situation from the in-compartment image.

また、庫内照明灯34−1,34−2は、輝度に個体ばらつきや、経年劣化の可能性があるため、冷蔵庫ごとによって庫内画像の明るさが異なるのを防ぐことができ、安定した画像を提供できる。   In addition, since there is a possibility of individual variation in luminance and deterioration with age, the interior lighting lamps 34-1 and 34-2 can prevent the brightness of the interior image from being different depending on the refrigerator, which is stable Can provide images.

なお、収納量に伴って庫内の明るさが変化することを利用し、カメラ部37の露出から庫内の収納状況を予測し、収納状況の予測結果に応じて、収納空間の冷却量を変化させるなどの冷却制御を行ってもよい。   In addition, using the change of the brightness in the storage according to the storage amount, the storage status in the storage is predicted from the exposure of the camera unit 37, and the cooling amount of the storage space is calculated according to the prediction result of the storage status. Cooling control such as changing may be performed.

1−2.冷蔵庫システムの全体構成
次にこれまでに述べてきたような冷蔵庫を用いて構築した冷蔵庫システムの全体像について図12〜図14を用いて説明する。
1-2. Overall Configuration of Refrigerator System Next, an overview of a refrigerator system constructed using a refrigerator as described above will be described using FIGS. 12 to 14.

図12は上記した冷蔵庫を用いた冷蔵庫システム50の全体構成を示す。図12に示すように、この冷蔵庫システム50は、表示端末15等によって、冷蔵庫51内の食材状況を確認するシステムである。   FIG. 12 shows the overall configuration of a refrigerator system 50 using the above-described refrigerator. As shown in FIG. 12, the refrigerator system 50 is a system for confirming the food condition in the refrigerator 51 by the display terminal 15 and the like.

この冷蔵庫システム50は、冷蔵庫51と、表示端末15とを備え、さらに、無線アダプタ(通信装置)53、ゲートウェイ装置(中継装置)54、ルーター装置55、インターネット等の公衆通信網56、サーバ装置57を含む。   The refrigerator system 50 includes a refrigerator 51 and a display terminal 15, and further includes a wireless adapter (communication device) 53, a gateway device (relay device) 54, a router device 55, a public communication network 56 such as the Internet, a server device 57. including.

冷蔵庫51は、使用者の住居A内に配置され、例えば、住居A内のキッチンルームに配置される。   The refrigerator 51 is disposed in the residence A of the user, and is disposed, for example, in a kitchen room in the residence A.

無線アダプタ(通信装置)53は、冷蔵庫51の後述する制御部に電気的に接続し、ゲートウェイ装置(中継装置)54を介してルーター装置55と通信するように構成される。無線アダプタ53は、ルーター装置55から送信される信号を受信し、受信した信号を冷蔵庫51の制御部に出力する。この信号に基づいて、冷蔵庫51は、対応する動作を実行するように構成される。   The wireless adapter (communication device) 53 is electrically connected to a control unit, which will be described later, of the refrigerator 51, and is configured to communicate with the router device 55 via the gateway device (relay device) 54. The wireless adapter 53 receives the signal transmitted from the router device 55, and outputs the received signal to the control unit of the refrigerator 51. Based on this signal, the refrigerator 51 is configured to perform a corresponding operation.

無線アダプタ53は、また、冷蔵庫51の識別情報(例えば、製造番号や型番等)や後述する庫内画像データ等を冷蔵庫51の記憶部から取得し、ゲートウェイ装置(中継装置)54を介してルーター装置55に送信するように構成される。なお、無線アダプタ53は、冷蔵庫51に一体に設けてもよいし、着脱可能に構成してもよい。   The wireless adapter 53 also acquires identification information (for example, serial number, model number, etc.) of the refrigerator 51, internal image data to be described later, etc. from the storage unit of the refrigerator 51, and the router via the gateway device (relay device) 54. It is configured to transmit to the device 55. The wireless adapter 53 may be integrally provided in the refrigerator 51 or may be configured to be removable.

無線アダプタ53は、「接続」ボタン53aを備える。「接続」ボタン53aは、ゲートウェイ装置(中継装置)54と新規に接続するためのものである。「接続」ボタン53aが使用者によって操作されると、無線アダプタ53は、冷蔵庫51の記憶部から冷蔵庫51の識別情報(例えば製造番号や型番)を取得するように構成される。   The wireless adapter 53 includes a "connect" button 53a. The “connect” button 53 a is for newly connecting with the gateway device (relay device) 54. When the “connect” button 53 a is operated by the user, the wireless adapter 53 is configured to acquire identification information (for example, a serial number or a model number) of the refrigerator 51 from the storage unit of the refrigerator 51.

表示端末15は、既述した如く、例えば、スマートフォン、タブレットPC(パーソナルコンピュータ)などの汎用の携帯型の端末であって、本実施の形態の場合、すでに述べた冷蔵庫51の扉10に着脱自在に装備可能なもので、インターネット等の公衆通信網56に接続する機能(手段)と、後述するゲートウェイ装置54と通信する機能(手段)とを備える。   As described above, the display terminal 15 is, for example, a general-purpose portable terminal such as a smartphone and a tablet PC (personal computer), and can be detachably attached to the door 10 of the refrigerator 51 described above in the case of the present embodiment. And a function (means) for connecting to a public communication network 56 such as the Internet, and a function (means) for communicating with a gateway device 54 described later.

表示端末15(例えばスマートフォン)は、電話回線網(例えば3G回線網)を介して、インターネット等の公衆通信網56に接続するように構成されている。それに加えてまたは代わりとして、例えば、表示端末15は、Wi−Fi通信機能によって公衆無線LANを介してインターネット等の公衆通信網56に接続するように構成されている。   The display terminal 15 (for example, a smart phone) is configured to be connected to a public communication network 56 such as the Internet via a telephone line network (for example, a 3G line network). Additionally or alternatively, for example, the display terminal 15 is configured to connect to a public communication network 56 such as the Internet via a public wireless LAN by a Wi-Fi communication function.

インターネット等の公衆通信網56に接続することにより、例えば、表示端末15は、本発明の対象となる冷蔵庫内の食材の画像データや省エネ運転をさせるためのデータ(例えば扉の開閉回数等のデータ)を取得するプログラムを、インターネット等の公衆通信網56を介して冷蔵庫51の製造メーカのホームページから取得することができる。この取得したプログラムを表示端末15にインストールし、インストールしたプログラムを起動させることにより、表示端末15は、冷蔵庫内の食材の画像データ等を取得することが可能になる。即ち、表示端末15はそのディスプレイ15aの操作画面を操作することにより、冷蔵庫51の画像データを取得するための操作信号を生成し、送信することが可能になる。詳細については、後述する。   By connecting to a public communication network 56 such as the Internet, for example, the display terminal 15 displays image data of food in the refrigerator which is an object of the present invention and data for energy saving operation (for example, data such as the number of times of opening and closing of a door) Can be obtained from the home page of the manufacturer of the refrigerator 51 via the public communication network 56 such as the Internet. By installing the acquired program on the display terminal 15 and activating the installed program, the display terminal 15 can acquire image data and the like of the food in the refrigerator. That is, the display terminal 15 can generate and transmit an operation signal for acquiring the image data of the refrigerator 51 by operating the operation screen of the display 15a. Details will be described later.

表示端末15はまた、例えば、Wi−Fi通信、Bluetooth(登録商標)通信、赤外線通信などのインターネット等の公衆通信網56を介さない汎用の通信によってルーター装置55と接続し、そのルーター装置55を介してゲートウェイ装置54に通信接続するように構成されている。そのためのデバイス(例えばWi−Fiアンテナ等)が表示端末15に組み込まれている。   The display terminal 15 also connects with the router 55 by general-purpose communication not via the public communication network 56 such as the Internet such as Wi-Fi communication, Bluetooth (registered trademark) communication, infrared communication, etc. A communication connection is configured to the gateway device 54 via the communication device. A device (for example, a Wi-Fi antenna or the like) for that purpose is incorporated in the display terminal 15.

ゲートウェイ装置(中継装置)54は、無線アダプタ53と表示端末15との通信を中継する装置であって、例えば、無線アダプタ53と、特定小電力無線特別小型周波数帯(924.0〜928.0MHz)の信号を用いて通信するように構成される。ゲートウェイ装置54と無線アダプタ53間の通信の周波数帯は、遠距離まで届く低周波数帯が好ましく、ルーター装置55とともに冷蔵庫51が設置された使用者の住居A内に設置されている。   The gateway device (relay device) 54 is a device that relays communication between the wireless adapter 53 and the display terminal 15, and, for example, the wireless adapter 53 and the specified low power wireless special small frequency band (924.0 to 928.0 MHz To communicate using the signal of. The frequency band of communication between the gateway device 54 and the wireless adapter 53 is preferably a low frequency band which can reach a long distance, and is installed in the user's residence A where the refrigerator 51 is installed together with the router device 55.

ゲートウェイ装置54はまた、表示端末15とルーター装置55を介して通信接続するように構成されている。すなわち、表示端末15とインターネット等の公衆通信網56を介さずにルーター装置55のみを介して通信(第1の通信)が実行できるように、ゲートウェイ装置54は構成されている。   The gateway device 54 is also configured to establish communication connection with the display terminal 15 via the router device 55. That is, the gateway device 54 is configured such that communication (first communication) can be performed only via the router device 55 without passing through the display terminal 15 and the public communication network 56 such as the Internet.

ゲートウェイ装置54はさらに、ルーター装置55を介してインターネット等の公衆通信網56に接続可能に構成されている。これにより、ゲートウェイ装置54は、インターネット等の公衆通信網56およびルーター装置55を介して、表示端末15と通信(第2の通信)することができるとともにサーバ装置57にも通信することができる。   The gateway device 54 is further configured to be connectable to a public communication network 56 such as the Internet via the router device 55. Thus, the gateway device 54 can communicate (second communication) with the display terminal 15 via the public communication network 56 such as the Internet and the router device 55, and can also communicate with the server device 57.

したがって、ゲートウェイ装置54は、表示端末15に対して、インターネット等の公衆通信網56を介さない通信(すなわちルーター装置55のみを介する第1の通信)と、インターネット等の公衆通信網56を介する通信(すなわちインターネット等の公衆通信網56およびルーター装置55を介する第2の通信)とが実行できるように構成されている。このように構成する理由については後述する。   Therefore, the gateway device 54 communicates with the display terminal 15 not via the public communication network 56 such as the Internet (that is, the first communication via only the router device 55) and communication via the public communication network 56 such as the Internet. (That is, second communication via the public communication network 56 such as the Internet and the router device 55) can be performed. The reason for this configuration will be described later.

サーバ装置57は、例えば、冷蔵庫51の製造メーカにより用意される。サーバ装置57は、表示端末15、冷蔵庫51、無線アダプタ53に関し、アクセスや認証に必要な情報等を管理する。例えば、サーバ装置57は、通信要求信号に含まれる表示端末15の識別情報と、無線アダプタ53に対応付けされて記憶(登録)されている表示端末15の識別情報とが一致するか否かを認証(判別)する。そして、サーバ装置57は、これらが一致する場合には、アクセスする表示端末15を、正規の表示端末として認証し、住居A内の冷蔵庫51との通信を許可する。   The server device 57 is prepared, for example, by the manufacturer of the refrigerator 51. The server device 57 manages information and the like necessary for access and authentication for the display terminal 15, the refrigerator 51, and the wireless adapter 53. For example, the server device 57 determines whether the identification information of the display terminal 15 included in the communication request signal matches the identification information of the display terminal 15 stored (registered) in association with the wireless adapter 53. Authenticate (determine). Then, the server device 57 authenticates the display terminal 15 to be accessed as a regular display terminal, and permits communication with the refrigerator 51 in the residence A, when the two match.

また、サーバ装置57は、前記した、冷蔵庫51より送信される冷蔵庫内の食材の画像データや省エネ運転をさせるためのデータ等を保存する。これらのデータは表示端末15からのデータ呼び出し信号に基づき表示端末15に送信する。すなわち、使用者は表示端末15を操作することによって冷蔵庫内の食材画像データをディスプレイに表示させて確認することができる。   Further, the server device 57 stores the image data of the food in the refrigerator transmitted from the refrigerator 51, the data for performing the energy saving operation, and the like. These data are transmitted to the display terminal 15 based on the data call signal from the display terminal 15. That is, the user can operate the display terminal 15 to display and check the food image data in the refrigerator on the display.

1−3.冷蔵庫のシステム部構成
図13は上記冷蔵システムに用いる冷蔵庫のシステム部構成を示す。
1-3. System Unit Configuration of Refrigerator FIG. 13 shows a system unit configuration of a refrigerator used for the above-described refrigeration system.

図13において、この冷蔵庫51は、インターフェイス(I/F)58、制御演算部59、記憶部60、及び扉開閉検出部61、庫内照明灯34−1,34−2、撮像ユニット35−1,35−2、ファン駆動回路62、コンプレッサ駆動回路63、送風ファン18、及びコンプレッサ19を備え、例えば住居A内の商用電源等の交流電源64から電力の供給を受ける。   13, the refrigerator 51 includes an interface (I / F) 58, a control calculation unit 59, a storage unit 60, a door open / close detection unit 61, interior lighting lamps 34-1 and 34-2, an imaging unit 35-1. , 35-2, a fan drive circuit 62, a compressor drive circuit 63, a blower fan 18, and a compressor 19, for example, receive power supply from an AC power supply 64 such as a commercial power supply in the residence A.

インターフェイス(I/F)58は、無線アダプタ53と冷蔵庫51の制御演算部59との間のデータ等のやり取りを行う。   The interface (I / F) 58 exchanges data etc. between the wireless adapter 53 and the control operation unit 59 of the refrigerator 51.

制御演算部59は、冷蔵庫の動作を制御する。また、この制御演算部59は、撮像ユニット35−1,35−2と庫内照明灯34−1,34−2を制御して冷蔵庫内の食材を撮像するとともに、画像データは記憶部60に一旦記憶させ、かつ、インターネット等の公衆通信網56のサーバ装置57に送信する。更に、表示端末15からサーバ装置57を介して画像データ等の事前送信の要求信号があれば食材撮像後に直ちにサーバ装置57を介して表示端末15に送信実行するように指示する。その詳細については、後述する。   Control operation unit 59 controls the operation of the refrigerator. Further, the control calculation unit 59 controls the imaging units 35-1 and 35-2 and the in-compartment illumination lights 34-1 and 34-2 to image the food in the refrigerator, and the image data is stored in the storage unit 60. Once stored, it is transmitted to the server device 57 of the public communication network 56 such as the Internet. Furthermore, if there is a request signal for prior transmission of image data etc. from the display terminal 15 via the server device 57, it instructs the display terminal 15 to execute transmission via the server device 57 immediately after imaging food. The details will be described later.

記憶部60は、識別記号や制御プログラムのほかに、撮像ユニット35−1,35−2撮像した庫内食材の画像データや省エネ運転をさせるためのデータを時間情報とともに一定期間分書き換え記憶する。   The storage unit 60 rewrites and stores, for a certain period, image data of in-house food taken by the imaging units 35-1 and 35-2 and data for performing an energy saving operation along with time information, in addition to identification symbols and control programs.

庫内照明灯34−1,34−2は、扉開閉検出部61からの信号に基づき制御演算部59によって点灯・消灯が制御され、扉10が開かれると点灯し、扉10が閉じられると数秒の遅延時間をおいて消灯する。   The interior lightings 34-1 and 34-2 are controlled to be turned on / off by the control calculation unit 59 based on a signal from the door open / close detection unit 61, turned on when the door 10 is opened, and closed when the door 10 is closed. Turn off after a few seconds delay time.

撮像ユニット35−1,35−2は、扉開閉検出部61からの信号に基づき制御演算部59よって制御され、扉10が閉じられると冷蔵庫内の食材を撮像する。その詳細は後述する。   The imaging units 35-1 and 35-2 are controlled by the control calculation unit 59 based on the signal from the door open / close detection unit 61, and when the door 10 is closed, they image food in the refrigerator. The details will be described later.

ファン駆動回路62は、制御演算部59からの制御信号を受け、送風ファン18の回転の駆動を制御する。   The fan drive circuit 62 receives a control signal from the control calculation unit 59 and controls driving of the rotation of the blower fan 18.

コンプレッサ駆動回路63は、制御演算部59からの制御信号を受け、コンプレッサ19の回転数等の駆動を制御する。   The compressor drive circuit 63 receives a control signal from the control calculation unit 59 and controls the driving of the compressor 19 such as the number of revolutions.

送風ファン18は、ファン駆動回路62の制御に従い動作して、冷気を循環させるための気流を発生する。   The blower fan 18 operates according to the control of the fan drive circuit 62 to generate an air flow for circulating cold air.

コンプレッサ19は、コンプレッサ駆動回路63の制御に従い、冷蔵庫51内を循環する冷媒(図示せず)を圧縮する。   The compressor 19 compresses a refrigerant (not shown) circulating in the refrigerator 51 according to the control of the compressor drive circuit 63.

1−4.サーバ装置の構成
次に、図14を用い、実施の形態1における冷蔵庫システムのサーバ装置の構成例について説明する。ここでは、前記図9中のサーバ装置57の構成を一例に挙げる。
1-4. Configuration of Server Device Next, a configuration example of the server device of the refrigerator system according to the first embodiment will be described with reference to FIG. Here, the configuration of the server device 57 in FIG. 9 is taken as an example.

図14に示すように、このサーバ装置57は、サーバ用インターフェイス65、サーバ制御部66、及びデータ記憶部67を備える。   As shown in FIG. 14, the server device 57 includes a server interface 65, a server control unit 66, and a data storage unit 67.

サーバ用インターフェイス65は、サーバ制御部66の制御に従い、インターネット等の公衆通信網56を介した表示端末15及びルーター装置55とサーバ装置57との間のデータ等のやり取りを行う通信部である。   The server interface 65 is a communication unit that exchanges data etc. between the display terminal 15 and the router device 55 and the server device 57 via the public communication network 56 such as the Internet under the control of the server control unit 66.

サーバ制御部66は、このサーバ装置57の全体の動作を制御する。サーバ制御部66は、また冷蔵庫51から送信される食材の画像データを結合処理し、データ記憶部67に時間情報とともに記憶させるとともに、表示端末15から画像データの事前送信要求の信号があると、データ記憶部67に記憶している画像データの最新画像データを、当該画像データが冷蔵庫51から送信されてくる都度、表示端末15に送信し、表示端末15に時間情報とともに一定期間分記憶させ書き換え更新させる。もちろん、画像データの事前送信要求の信号がない状態で表示端末15からデータ呼び出し信号が送信されてくると、データ記憶部67に記憶している最新の画像データを表示端末15に送信する。   The server control unit 66 controls the overall operation of the server device 57. The server control unit 66 combines the image data of the food material transmitted from the refrigerator 51 and stores the data together with the time information in the data storage unit 67, and when there is a signal of the prior transmission request of the image data from the display terminal 15, The latest image data of the image data stored in the data storage unit 67 is transmitted to the display terminal 15 each time the image data is transmitted from the refrigerator 51, and stored in the display terminal 15 for a predetermined period together with time information Make it updated. Of course, when the data call signal is transmitted from the display terminal 15 in a state where there is no signal of the advance transmission request of the image data, the latest image data stored in the data storage unit 67 is transmitted to the display terminal 15.

データ記憶部67は、冷蔵庫システムを実行するための管理プログラムやアプリケーションプログラム等の必要なデータを記憶している。更にデータ記憶部67は、サーバ制御部66の制御に従い、冷蔵庫51より送信されてくる食材画像データの最新データを時間情報を追加して書き換え記憶している。なお、データ記憶部67は、例えば、HDD(Hard Disc Drive)やSSD(Solid State Drive)等により構成される。   The data storage unit 67 stores necessary data such as a management program and an application program for executing the refrigerator system. Further, under the control of the server control unit 66, the data storage unit 67 rewrites and stores the latest data of the food image data transmitted from the refrigerator 51 by adding time information. The data storage unit 67 is configured of, for example, an HDD (Hard Disc Drive) or an SSD (Solid State Drive).

なお、サーバ装置57は単一の大型コンピュータで構成されるサーバ、或いは、多数のコンピュータ群で構成されるクラウド型サーバのいずれでも構築できるものである。   The server device 57 can be constructed as either a server constituted by a single large computer or a cloud type server constituted by a large number of computer groups.

<2.動作>
次に上記構成からなる冷蔵庫及び冷蔵システムの動作について図15〜図17を用い説明する。なお、以下の各説明において同じ動作については同一のステップ番号を付記して説明する。
<2. Operation>
Next, the operation of the refrigerator and the refrigeration system configured as described above will be described with reference to FIGS. In the following description, the same operations will be described with the same step numbers.

冷蔵庫の収納室内に設けた撮像ユニット35−1,35−2は収納室内を撮像するが、この撮像は食材を出し入れするために扉を開閉した時、あるいは使用者が表示端末15を操作して撮像を指示した時に行われる。   The imaging units 35-1 and 35-2 provided in the storage compartment of the refrigerator capture images of the storage compartment, but this imaging is performed when the door is opened or closed in order to put food in and out, or the user operates the display terminal 15 It is performed when imaging is instructed.

その動作を図15のフローチャートを用いて説明する。   The operation will be described with reference to the flowchart of FIG.

まず使用者が食材の出し入れのために扉10を開くと(ステップ1−Y)、扉開閉検出部61がこれを検知して収納室内の庫内照明灯34−1,34−2が点灯し(ステップ2)、撮像ユニット35−1,35−2が収納室内を撮像する(ステップ4)。この画像データは無線アダプタ(通信装置)53、ゲートウェイ装置(中継装置)54、ルーター装置55、インターネット等の公衆通信網56を介してサーバ装置57に送信され(ステップ5)、サーバ装置57のデータ記憶部67に記憶される(ステップ6)。そして、表示端末15からインターネット等の公衆通信網56に混雑があってもスピーディに画像を確認できるようにすべく画像データの事前送信要求があると(ステップ7−Y)、サーバ装置57に記憶した画像データを表示端末15に送信し(ステップ8)、表示端末15に画像データを記憶しておく(ステップ9)。   First, when the user opens the door 10 for taking in and out food (step 1-Y), the door open / close detection unit 61 detects this, and the interior lighting lights 34-1 and 34-2 in the storage room light up. (Step 2) The imaging units 35-1 and 35-2 image the storage room (Step 4). The image data is transmitted to the server device 57 via the wireless adapter (communication device) 53, the gateway device (relay device) 54, the router device 55, and the public communication network 56 such as the Internet (step 5). It is stored in the storage unit 67 (step 6). Then, if there is a request for prior transmission of image data so that the image can be checked quickly even if there is congestion in the public communication network 56 such as the Internet from the display terminal 15 (step 7-Y), the server device 57 stores The transmitted image data is transmitted to the display terminal 15 (step 8), and the image data is stored in the display terminal 15 (step 9).

一方、食材出し入れのための扉開閉はないものの、使用者が食材買い出し先のお店等から収納室内の食材収納状況を確認すべく表示端末15を操作して撮像指示が送信されると(ステップ10−Y)、インターネット等の公衆通信網56、ルーター装置55、ゲートウェイ装置(中継装置)54、無線アダプタ(通信装置)53を介して庫内照明灯34−1,34−2が駆動されて点灯(ステップ11)するとともに、撮像ユニット35−1,35−2が作動して収納室内を撮像する(ステップ4)。以降は前記扉開閉時の撮像後と同じ動作を行う。   On the other hand, although there is no door opening and closing for taking out food, when the user operates the display terminal 15 to check the food storage situation in the storage room from the food purchase destination shop etc. and the imaging instruction is transmitted (step 10-Y), the indoor lightings 34-1 and 34-2 are driven through the public communication network 56 such as the Internet, the router 55, the gateway (relay) 54, and the wireless adapter (communication) 53. The light is turned on (step 11), and the imaging units 35-1 and 35-2 operate to image the storage room (step 4). From then on, the same operation as after the door opening and closing is performed.

また、上記のように送信された画像データは表示端末15で再生して確認する。   Further, the image data transmitted as described above is reproduced and confirmed on the display terminal 15.

図16は通常の庫内画像表示のフローチャートを示す。使用者は表示端末15から表示したい庫内画像の表示期間または日時を任意に設定し表示端末15の画像取得操作を行う。例えば表示端末15から事前送信要求を行い、指定期間内の庫内画像取得を行う。画像データの取得の流れは図14で示した通りである。前記庫内画像は表示端末15に保存され(ステップ12)、表示端末15は、保存された画像の中から指定期間内の画像データの有無を確認し(ステップ13)、その画像データを時系列に読み込み表示端末15の表示部に出力する(ステップ14)。使用者が再生ボタンを押すと、表示端末15の表示部に時系列に読み込みこまれた画像データを自動的に切り替えて(ステップ15)表示を行う事で連続再生を行う。画像切り替えのタイミングは、表示時間が一定時間経過後、もしくは、使用者による画像送り操作があった場合に、画像切り替えを行う(ステップ16−Y)。使用者による画像送り操作は、表示端末15に表示される送りボタンの押下や、シークバーを利用し、画像を時間幅でスキップしながら閲覧する事ができる。これによって、日時指定による庫内画像検索、また時系列庫内画像の連続的な閲覧を可能にし、画像検索に要する時間を大幅に短縮する事ができ、しかも、シークバーを利用することでこれによって効果的に目的の画像を見つけ出すことが可能となる。   FIG. 16 shows a flow chart of a normal in-compartment image display. The user arbitrarily sets the display period or the date and time of the in-storage image to be displayed from the display terminal 15 and performs the image acquisition operation of the display terminal 15. For example, an advance transmission request is issued from the display terminal 15, and an in-storage image acquisition within a designated period is performed. The flow of acquisition of image data is as shown in FIG. The in-storage image is stored in the display terminal 15 (step 12), and the display terminal 15 confirms the presence or absence of image data within a designated period from the stored images (step 13), and the image data is time-series To the display unit of the display terminal 15 (step 14). When the user presses the play button, the image data read in time series on the display unit of the display terminal 15 is automatically switched (step 15) and display is performed to perform continuous play. As for the timing of image switching, image switching is performed after the display time has passed a predetermined time or when there is an image feed operation by the user (step 16-Y). The image feed operation by the user can be browsed while skipping the image in a time width by pressing a feed button displayed on the display terminal 15 or using a seek bar. This makes it possible to search in-chamber images by specifying a date and time, and to continuously browse images in a time-series chamber, significantly reducing the time required for image retrieval, and by using a seek bar, It becomes possible to find out the target image effectively.

図17は、庫内画像の変化検出を行うとともに、庫内画像の連続再生を行う場合のフローチャートを示す。表示端末15に保存されその表示部に画像データが出力され(ステップ21)、使用者は表示されている庫内画像を指でなぞり食材または庫内の領域を指定し(ステップ22)自動再生を行うことにより、前回表示していた画像と現在表示している画像との特定領域を比較し(ステップ23)、使用者による画像送り操作があると(ステップ16−Y)、画像切り替えを行い(ステップ15)、変化を検出すると自動再生を停止する(ステップ24)。これによって、使用者は画像データを一枚ずつ確認することなく、自動再生を行う事で庫内の特定領域、または食材の有無の変化を容易に知ることができ、在庫管理を容易に行うことができる。さらに、特定の領域を指定することにより画像変化の検出処理量も減少し一定の処理速度を保つことも可能となる。なお、前記前回表示画像と現在表示画像との特定領域を比較してその変化有無を検出するのは冷蔵庫の制御演算部59あるいはサーバ装置57のサーバ制御部66で行わせるのがよい。   FIG. 17 shows a flowchart in the case of performing change detection of the in-chamber image and performing continuous reproduction of the in-chamber image. The image data is output to the display unit and stored in the display terminal 15 (step 21), and the user traces the displayed in-storage image with a finger to specify the food or the in-storage area (step 22) and performs automatic reproduction By doing this, the specific area of the image displayed at the previous time and the image currently displayed are compared (step 23), and when there is an image sending operation by the user (step 16-Y), the image is switched ( Step 15), when a change is detected, the automatic reproduction is stopped (step 24). By this, the user can easily know the change of the specific area in the storage or the presence or absence of the food by performing the automatic reproduction without checking the image data one by one, and the inventory control can be easily performed. Can. Furthermore, by designating a specific area, the amount of processing for detecting an image change can be reduced, and a constant processing speed can be maintained. It is preferable that the control calculation unit 59 of the refrigerator or the server control unit 66 of the server apparatus 57 detects the presence or absence of the change by comparing the specific area of the previous display image and the current display image.

以上のようにこの冷蔵庫及び冷蔵庫システムは収納室内の食材収納状況を確認することができるのであるが、次に本発明の要点である撮像ユニット35−1,35−2及びその取り付け構成に伴う効果について説明する。   As described above, the refrigerator and the refrigerator system can confirm the food storage condition in the storage room, but next, the effects associated with the imaging units 35-1 and 35-2 and the attachment configuration that are the main points of the present invention Will be explained.

まずこの実施の形態で説明した撮像ユニット35−1,35−2は、カメラ部37と制御基板38とカメラ接続部38cを収納ケース39の内部空間に収納しているから、カメラ部37及び制御基板38は収納ケース39に内部に位置して、それ自身が発する熱が収納ケース空間内に留められるようになる。したがって、カメラ部37及び制御基板38が発する熱がその近傍に収納された食材に対して影響を与える度合いがきわめて少ないものとなる。しかも上記カメラ部37及び制御基板38を収納した収納ケース39はその外面全体が収納室内の空気によって冷却されるような形となるため、収納ケース39自体の温度も低く維持でき、この収納ケース39自体の温度も低く維持できる作用が加わることもあって収納室内に収納されている食材がカメラ部37等からの熱によって影響を受けることはほとんど回避することができ、撮像ユニット35−1,35−2を設けたことによってそれが発する熱により食材が劣化する懸念も払拭することができる。   First, since the imaging units 35-1 and 35-2 described in this embodiment store the camera unit 37, the control board 38, and the camera connection unit 38c in the internal space of the storage case 39, the camera unit 37 and the control are controlled. The substrate 38 is located inside the storage case 39 so that heat generated by itself can be confined within the storage case space. Therefore, the degree to which the heat generated by the camera unit 37 and the control substrate 38 affects the food stored in the vicinity thereof is extremely small. Moreover, since the storage case 39 storing the camera unit 37 and the control board 38 is shaped such that the entire outer surface is cooled by the air in the storage room, the temperature of the storage case 39 itself can be maintained low. Since the temperature of the food itself can be kept low, the food stored in the storage room can be almost prevented from being affected by the heat from the camera unit 37 etc. Due to the provision of -2, it is possible to wipe out the concern that the heat of the food causes the food to deteriorate.

また、上記カメラ部37・制御基板38等は収納ケース39によって保護されることになるから、缶ビール等の収納物が当たるようなことがあってもカメラ部37・制御基板38等自体が損傷することを防止でき、耐久性の高いものとすることができる。   In addition, since the camera unit 37, the control substrate 38, etc. are protected by the storage case 39, the camera unit 37, the control substrate 38, etc. are damaged even if the stored matter such as canned beer hits the case. Can be prevented and the durability can be made high.

特にこの実施の形態では扉収納棚33−1,33−2の横の扉開放端Y側にスペース10cを新設してこのスペース10cに撮像ユニット35−1,35−2を設置してあるから、この撮像ユニット35−1,35−2は扉収納棚33−1,33−2や凸部41の出っ張りによっても保護されることになり、損傷等の恐れを極めて少ないものとすることができる。   In particular, in this embodiment, the space 10c is newly provided on the side of the door open end Y on the side of the door storage racks 33-1 and 33-2, and the imaging units 35-1 and 35-2 are installed in the space 10c. The imaging units 35-1 and 35-2 are also protected by the door storage racks 33-1 and 33-2 and the protrusion of the convex portion 41, and the risk of damage or the like can be extremely reduced. .

しかも上記スペース10cに設置する撮像ユニット35−1,35−2は、カメラ部37に接続する帯状リード線38aの接続部、すなわちカメラ接続部38cと冷蔵庫側制御部へ接続する外部接続部38bとは、前記制御基板38の上下相対向する部分、すなわち制御基板38において、互いに逆側になるように配置してあるから、撮像ユニット35−1,35−2トを縦長形状としてコンパクト化できる。したがって、これに伴い撮像ユニット35−1,35−2を収納するスペース10cも小型化でき、撮像ユニット35−1,35−2を設置するために大きなスペース10cを必要としないので、収納空間を無駄にすることもない。   In addition, the imaging units 35-1 and 35-2 installed in the space 10c are the connection portions of the strip lead wires 38a connected to the camera unit 37, that is, the external connection portions 38b connected to the camera connection portion 38c and the refrigerator side control unit. The image pickup units 35-1 and 35-2 can be compacted into a vertically long shape because they are disposed on opposite sides of the control substrate 38, that is, on opposite sides of the control substrate 38. Accordingly, the space 10c for housing the imaging units 35-1 and 35-2 can be miniaturized along with this, and a large space 10c is not required for installing the imaging units 35-1 and 35-2, so the storage space is reduced. There is no need to waste it.

さらに、前記制御基板38は、帯状リード線38aを折り返して前記カメラ部37の光軸と直交するように配置してあるから、撮像ユニット35−1,35−2のさらなるコンパクト化が促進でき、さらにコンパクトな収納と強固な保護、そして収納空間の無駄排除が可能となる。加えて、収納室内に配置した撮像ユニット35−1,35−2はそのカメラ部37が庫内側に向くことによってこれと直交する制御基板38は扉10の内壁面に対向するようになり、扉内壁面からの冷輻射により冷却されやすくなって、信頼性が向上する。   Furthermore, since the control board 38 is disposed so that the strip-like lead wire 38a is folded back and is orthogonal to the optical axis of the camera unit 37, further downsizing of the imaging units 35-1 and 35-2 can be promoted. In addition, compact storage, strong protection, and elimination of storage space can be achieved. In addition, when the camera unit 37 of the imaging units 35-1 and 35-2 disposed in the storage chamber faces the inside of the storage chamber, the control board 38 orthogonal to this comes to face the inner wall surface of the door 10, It becomes easy to be cooled by cold radiation from the inner wall surface, and the reliability is improved.

また、前記収納ケース39はその背面と前記扉10の内壁面との間に所定の空間を有するように配置してあるから、前記空間Tに存する冷気からの冷却も加わってより強く冷却されるようになり、さらに信頼性が向上する。   Further, since the storage case 39 is disposed so as to have a predetermined space between the back surface thereof and the inner wall surface of the door 10, cooling from cold air existing in the space T is also added to further cool the storage case 39. As a result, the reliability is further improved.

また、前記収納室は棚板30−1〜30−4によって区切られる複数の収納空間を備え、前記撮像ユニット35−1,35−2のカメラ部37は前記棚板30−1,30−2に対向する位置に配置される構成としてある。これにより、撮像ユニット35−1,35−2は棚板上下の収納空間に跨って位置することになって、少なくとも上下いずれかの収納空間からの冷気によって冷却、例えば上下収納空間の一方に収納物が詰まっていても他方の収納空間からの冷気によって冷却されるようになり、常に良好な冷却が確保できてさらに信頼性が向上する。   Further, the storage room is provided with a plurality of storage spaces divided by the shelf boards 30-1 to 30-4, and the camera unit 37 of the imaging units 35-1 and 35-2 is the shelf boards 30-1 and 30-2. It is configured to be disposed at a position opposite to. As a result, the imaging units 35-1 and 35-2 are positioned across the upper and lower storage spaces of the shelf board and cooled by cold air from at least one of the upper and lower storage spaces, for example, stored in one of the upper and lower storage spaces Even if things are clogged, they will be cooled by the cold air from the other storage space, so that good cooling can always be ensured and the reliability is further improved.

また、本実施の形態における撮像ユニット35−1,35−2は、扉収納棚33−1,33−2の横の扉開放端Y側にスペース10cを新設してこのスペース10cに撮像ユニット35−1,35−2を設置してあるが、その際、前記扉10の内面壁の前記収納棚33−1,33−2と前記撮像ユニット35−1,35−2との間に凸部41が設けてあるから、撮像ユニット35−1,35−2が損傷したり傾いたりすることを防止することができる。すなわち、上記扉収納棚33−1,33−2に重量収納物が収納されたときに衝撃や振動が生じても扉収納棚33−1,33−2と撮像ユニット35−1,35−2との間には凸部41が位置していて、この凸部41が受けとなって撮像ユニット35−1,35−2への影響を極力低減させる。これにより、撮像ユニット35−1,35−2が損傷したり傾いたりすることを防止することができるのである。   Further, in the imaging units 35-1 and 35-2 in the present embodiment, a space 10c is newly provided on the side of the door open end Y on the side of the door storage racks 33-1 and 33-2, and the imaging unit 35 is formed in this space 10c. -1, 35-2 are installed, in which case a convex portion is formed between the storage racks 33-1, 33-2 of the inner wall of the door 10 and the imaging units 35-1, 35-2. Since 41 is provided, it is possible to prevent the imaging units 35-1 and 35-2 from being damaged or tilted. That is, even if an impact or vibration occurs when a weight storage item is stored in the door storage shelf 33-1, 33-2, the door storage shelf 33-1, 33-2 and the imaging unit 35-1, 35-2 The convex portion 41 is positioned between the two and is received to reduce the influence on the imaging units 35-1 and 35-2 as much as possible. This can prevent the imaging units 35-1 and 35-2 from being damaged or tilted.

また、前記重量収納物収納時の衝撃や振動の影響を低減できるところから、扉収納棚33−1,33−2はそのまま断熱扉内面に設置しておくことができ、扉収納棚33−1,33−2を廃止して扉10における収納量を低下させてしまうようなことも回避できる。   Further, the door storage racks 33-1 and 33-2 can be installed as they are on the inner surface of the heat insulation door as they can reduce the influence of shock and vibration at the time of storing the weight storage objects, and the door storage rack 33-1 33-2 can be abolished to reduce the storage amount of the door 10.

よって、扉収納量確保と撮像ユニット35−1,35−2の設置及び損傷、傾き防止を両立させて、使い勝手の良い冷蔵庫を提供することができる。   Therefore, a user-friendly refrigerator can be provided by achieving both the storage of the door storage amount, the installation of the imaging units 35-1 and 35-2, and the prevention of damage and inclination.

加えてこの実施の形態では、扉収納棚33−1,33−2の横の扉開放端Y側にスペース10cを新設してこのスペース10cに撮像ユニット35−1,35−2を設置してあるから、この撮像ユニット35−1,35−2は扉収納棚33−1,33−2の出っ張りによって扉収納棚33−1,33−2に収納されることの多い缶ビール等が当たったりすることからも保護されることになり、損傷等の恐れをさらに少ないものとすることができる。   In addition, in this embodiment, a space 10c is newly provided on the door open end Y side of the door storage racks 33-1 and 33-2, and the imaging units 35-1 and 35-2 are installed in the space 10c. Because of this, the imaging units 35-1 and 35-2 are hit by canned beer or the like that is often stored in the door storage shelves 33-1 and 33-2 by the protrusion of the door storage shelves 33-1 and 33-2. It is possible to be protected from the risk of damage and the like.

また、前記扉収納棚33−1,33−2と前記撮像ユニット35−1,35−2とは別部材で構成した別体物としてあるから、扉収納棚33−1,33−2に重量収納物を収納したときに生じる衝撃や振動が直接撮像ユニット35−1,35−2に伝わることはなく、撮像ユニット35−1,35−2に対する衝撃や振動の影響を大きく低減できて、撮像ユニット35−1,35−2の損傷や傾き等をさらに確実に防止することができる。   Further, since the door storage racks 33-1 and 33-2 and the imaging units 35-1 and 35-2 are separate members configured as separate members, the weight of the door storage racks 33-1 and 33-2 is large. The impact or vibration generated when the stored item is stored is not directly transmitted to the imaging units 35-1 and 35-2, and the influence of the impact and vibration on the imaging units 35-1 and 35-2 can be greatly reduced, and imaging is performed. Damage and inclination of the units 35-1 and 35-2 can be further reliably prevented.

さらに、前記扉内壁面に設けた凸部41はその内部に断熱材4が充填しているから、強度が向上し、前記した衝撃や振動の影響をさらに低減できると同時に、断熱性能も向上するため、撮像ユニット35−1,35−2に対する熱影響も低減することができ、撮像ユニット35−1,35−2の信頼性を高めることができる。   Further, since the heat insulating material 4 is filled in the convex portion 41 provided on the inner wall surface of the door, the strength is improved, and the influence of the impact and the vibration can be further reduced and at the same time the heat insulation performance is also improved. Therefore, the thermal effects on the imaging units 35-1 and 35-2 can also be reduced, and the reliability of the imaging units 35-1 and 35-2 can be enhanced.

また、前記撮像ユニット35−1,35−2の背面側に補強板材43を備えた構成としてあるから、撮像ユニット35−1,35−2は補強板材43により背面側を固定されて扉収納棚側からの衝撃や振動を強力に抑制されるようになり、撮像ユニット35−1,35−2の損傷や傾き等を確実に防止してその信頼性をさらに向上させることができる。   Further, since the reinforcing plate material 43 is provided on the back side of the imaging units 35-1 and 35-2, the imaging units 35-1 and 35-2 are fixed on the back side by the reinforcing plate 43 and the door storage shelf Impact and vibration from the side can be strongly suppressed, and damage and inclination of the imaging units 35-1 and 35-2 can be reliably prevented to further improve the reliability.

また、前記補強板材43は断熱材4により扉内壁面に圧接されており、これにより補強板材43も固定されることから撮像ユニット35−1,35−2への衝撃や振動等をより強力に抑制することができ、さらに撮像ユニットの信頼性を向上させることができる。   Further, since the reinforcing plate 43 is pressed against the inner wall surface of the door by the heat insulating material 4 and the reinforcing plate 43 is also fixed by this, the impact on the imaging units 35-1 and 35-2 and vibration etc. are made stronger. Therefore, the reliability of the imaging unit can be further improved.

なお、本発明の上記実施の形態で例示した冷蔵庫及び冷蔵庫システムは次のような利点も併せ持っているので、記載しておく。   In addition, since the refrigerator and the refrigerator system illustrated by the said embodiment of this invention have the following advantages, they are described.

すなわち、この実施の形態の冷蔵庫では、撮像ユニット35−1,35−2は収納室5の前面側から収納室5内の食材を撮像するが、このとき庫内照明灯13−0,34−2も収納室5の前面側に設けてあって、収納室5内の食材を撮像ユニット35−1,35−2による撮像方向と同じ前面側から照射している。したがって、その撮像画像は庫内照明灯34−1,34−2が収納室5の奥壁に設けてある場合のような暗さや見にくさはなく、鮮明な画像となる。また、撮像した画像を明るくし、鮮明にする画像処理をサーバ装置57に求める必要もなくなる。   That is, in the refrigerator of this embodiment, the imaging units 35-1 and 35-2 pick up the food in the storage room 5 from the front side of the storage room 5, but at this time the interior lighting lights 13-0 and 34-. 2 is also provided on the front side of the storage room 5, and the food in the storage room 5 is irradiated from the same front side as the imaging direction by the imaging units 35-1 and 35-2. Therefore, the captured image is clear and inconspicuous as in the case where the in-compartment lamps 34-1 and 34-2 are provided at the back wall of the storage room 5, and becomes a clear image. In addition, it is not necessary to require the server device 57 to perform image processing to brighten and sharpen the captured image.

また、上記撮像ユニット35−1,35−2と庫内照明灯34−1,34−2とは前記棚板30−1〜30−4の前端より前方側に位置するように設けてあるから、撮像ユニット35−1,35−2で撮像した収納室5内の画像は、使用者が冷蔵庫51の扉10を開いて実際に見る状態と同じとなる。したがって、使用者が表示端末15に画像データを表示させてみたときに何ら違和感を持つことなく収納室5内の食材状況を確認することができる。しかも、庫内照明灯34−1,34−2は棚板30−1〜30−4の前端前方から棚板上の食材を照らすので、棚板30−1〜30−4の前端部に載置されている食材も明るく、かつ、鮮明に撮像することができる。   Further, since the imaging units 35-1 and 35-2 and the indoor lighting lamps 34-1 and 34-2 are provided on the front side of the front end of the shelf boards 30-1 to 30-4. The image in the storage room 5 captured by the imaging units 35-1 and 35-2 is the same as the state in which the user opens the door 10 of the refrigerator 51 and actually looks. Therefore, when the user tries to display the image data on the display terminal 15, it is possible to confirm the food condition in the storage room 5 without any discomfort. Moreover, since the interior lighting lamps 34-1 and 34-2 illuminate the food on the shelf board from the front end front of the shelf boards 30-1 to 30-4, they are mounted on the front end portions of the shelf boards 30-1 to 30-4. Foods placed can also be imaged brightly and clearly.

また、上記撮像ユニット35−1,35−2は冷蔵庫51の扉10内面部に設けるとともに、庫内照明灯34−1,34−2は収納室5の開口縁両側壁部に設けてあるから、撮像ユニット35−1,35−2はまず収納室5の左右略中央部に位置することになる。したがって、当該撮像ユニット35−1,35−2で撮像した画像を使用者が冷蔵庫51の扉10を開いて実際に見る状態により近い形とすることができる。加えて、上記撮像ユニット35−1,35−2と棚板上の食材との間の距離を大きくとって収納室5内の広い範囲を撮像することができ、より広範囲の食材の収納状況を表示端末15で確認することが可能となる。   In addition, the imaging units 35-1 and 35-2 are provided on the inner surface of the door 10 of the refrigerator 51, and the interior illumination lights 34-1 and 34-2 are provided on the both sides of the opening edge of the storage room 5 The imaging units 35-1 and 35-2 are first positioned at substantially the center of the storage chamber 5 at the left and right. Therefore, it is possible for the user to open the door 10 of the refrigerator 51 and make the image captured by the imaging units 35-1 and 35-2 closer to a state in which the user actually opens the door 10. In addition, the distance between the imaging units 35-1 and 35-2 and the food on the shelf can be increased to capture a wide range in the storage room 5, and the storage condition of the food in a wider range can be obtained. It becomes possible to confirm on the display terminal 15.

また、撮像ユニット35−1,35−2は扉内面の扉収納棚33−1,33−2の前後方向の略中央部分に位置するように設けてあるから、収納室5内の食材のみならず扉収納棚33−1,33−2に収納している食材、例えば牛乳パック等をもその一部を撮像することができる。使用者は自分で収納したものであるから、その一部が写っているだけでもそれが何であるかを認識することができる。よって、収納室内のほぼ全ての食材を撮像することが可能となる。   In addition, since the imaging units 35-1 and 35-2 are provided so as to be positioned substantially at the center of the door storage racks 33-1 and 33-2 on the inner surface of the door in the front-rear direction, The food stored in the door storage racks 33-1, 33-2, for example, a milk pack can be partially imaged. Since the user stores it by himself, even if only a part of it is shown, he can recognize what it is. Therefore, it becomes possible to image almost all the foodstuffs in a storage room.

一方、前記庫内照明灯34−1,34−2は、撮像ユニット35−1,35−2より奥側の位置に設け、庫内照明灯34−1,34−2の光が直接撮像ユニット35−1,35−2の撮像部に入り込まないように設けてあるから、庫内照明灯34−1,34−2の光が撮像ユニット35−1,35−2に入って撮像ユニット35−1,35−2の写りが悪くなることを防止でき、常に良好な画像を得ることができる。これは、庫内照明灯35−1,35−2のカメラ側に遮光部を設けたり、或いは庫内照明灯34−1,34−2を構成するLED等の光源を斜め後方向きに傾斜配置するなどの構成を採用しても同様の効果が得られる。   On the other hand, the in-compartment lamps 34-1 and 34-2 are provided at positions behind the imaging units 35-1 and 35-2, and the light of the in-compartment lamps 34-1 and 34-2 is directly captured by the imaging unit Since the image pickup units 35-1 and 35-2 are provided so as not to enter the image pickup unit, the lights of the interior illumination lights 34-1 and 34-2 enter the image pickup units 35-1 and 35-2, and the image pickup unit 35- It is possible to prevent the deterioration of the reflection of 1, 35-2 and always obtain a good image. In this case, a light shielding portion may be provided on the camera side of the interior lighting lamps 35-1 and 35-2, or the light sources such as LEDs constituting the interior lighting lamps 34-1 and 34-2 may be inclined obliquely backward. The same effect can be obtained by adopting a configuration such as

また、上記撮像ユニット35−1,35−2で撮像した収納室5内の画像は、それぞれの撮像ユニット35−1,35−2の画像をサーバ装置57に送信してサーバ装置57、或いは冷蔵庫51、或いは表示端末15内で結合処理し合成するが、この実施の形態では上記画像の合成処理が容易になる。   Moreover, the image in the storage room 5 imaged by the said imaging unit 35-1 and 35-2 transmits the image of each imaging unit 35-1 and 35-2 to the server apparatus 57, and the server apparatus 57 or a refrigerator Although the combining process and combining are performed in the display terminal 15 or 51, the combining process of the image is facilitated in this embodiment.

すなわち、上記撮像ユニット35−1,35−2は、棚板30−1〜30−4の前端と対応する扉内面部、この例では上段の棚板30−1と3段目の棚板30−3の前端と対応する扉内面部に設けてあるから、それぞれの撮像ユニット35−1,35−2の撮像は図17中の線Zが境界線となるように棚板30−1,30−3を中心として撮像することになる。   That is, the imaging units 35-1 and 35-2 have inner door portions corresponding to the front ends of the shelf plates 30-1 to 30-4, and in this example, the upper shelf plate 30-1 and the third shelf plate 30. Since the image pickup units 35-1 and 35-2 are provided on the inner surface portion of the door corresponding to the front end of the -3, the shelf boards 30-1 and 30 so that the line Z in FIG. It will be imaged centering on -3.

したがって、二つの撮像ユニット35−1,35−2で撮像した収納室5内の画像データは、境界線Zとなる2段目の棚板30−2部分で結合処理することを可能とする。すなわち、図18の「撮像生画像」に示すように上下それぞれの画像には棚板30−2が共通して写っており、この「撮像生画像」の湾曲を修正して「湾曲修正処理後画像」にした後、前記上下の画像に移っている共通の棚板30−2を合致させれば収納室全体の撮像画像となる。その結果、画像の結合処理時に棚板の上に置かれている各食材を、各食材ごとに位置合わせして結合するきわめて困難な補正処理をする必要がなくなって、画像の結合処理は容易となる。よって、画像結合のための処理プログラムも簡素なものとすることができ、画像結合処理のためのサーバ装置57、或いは冷蔵庫51、或いは表示端末15の制御部分の容量も大容量のものを必要としなくなり、処理速度のスピーディ化に貢献できる。   Therefore, the image data in the storage room 5 imaged by the two imaging units 35-1 and 35-2 can be combined and processed by the shelf plate 30-2 of the second stage which is the boundary line Z. That is, as shown in the “captured raw image” of FIG. 18, the shelf board 30-2 is common to each of the upper and lower images, and the curvature of the “captured raw image” is corrected When the common shelf board 30-2 transferred to the upper and lower images is made to coincide with the image, the captured image of the entire storage room is obtained. As a result, it is not necessary to perform extremely difficult correction processing in which each food placed on the shelf during image combining processing is aligned and combined for each food, and image combining processing is easy. Become. Therefore, the processing program for image combination can be simplified, and the server device 57 for image combination processing, the refrigerator 51, or the control portion of the display terminal 15 also needs a large capacity. Can contribute to speeding up of processing speed.

さらに、二つの撮像ユニット35−1,35−2は、高さ調整ができない棚板30−1、棚板30−3の略前方位置に設けてあることから、高さ調節可能な棚板30−2の高さが変更された場合でも、画像の結合処理時に、棚板30−2の高さに応じて結合処理する範囲を調整することで、容易に画像の結合処理が可能となる。   Further, since the two imaging units 35-1 and 35-2 are provided substantially at the front position of the shelf board 30-1 and the shelf board 30-3 which can not be adjusted in height, the height adjustable shelf board 30 can be adjusted. Even when the height of −2 is changed, the image combining process can be easily performed by adjusting the range of the combining process according to the height of the shelf plate 30-2 at the time of the image combining process.

以上、本発明に係る冷蔵庫及び冷蔵庫システムについて、上記実施の形態を用いて説明してきたが、本発明は、これに限定されるものではない。すなわち、今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。つまり、本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。   As mentioned above, although the refrigerator and refrigerator system concerning the present invention have been explained using the above-mentioned embodiment, the present invention is not limited to this. That is, it should be understood that the embodiments disclosed herein are illustrative and non-restrictive in every respect. That is, the scope of the present invention is indicated not by the above description but by the scope of claims, and is intended to include all modifications within the scope and meaning equivalent to the scope of claims.

例えば、冷蔵庫はフレンチドアタイプの冷蔵庫を例示したが、シングルドアタイプの冷蔵庫であってもよく、また、撮像ユニット35−1,35−2は冷蔵室に設けた場合のみで説明したが、野菜室や冷凍室にも設けて、これら各室に収納保存されている食材も撮影して送信するようにすればよく、これによって各室の収納状況を知ることができる。   For example, although the refrigerator illustrated the French door type refrigerator, it may be a single door type refrigerator and the imaging units 35-1 and 35-2 have been described only in the case of being provided in a refrigerator, but vegetables It may be provided in a room or a freezing room, and the food stored and stored in each room may be photographed and transmitted, whereby the storage situation of each room can be known.

また、撮像ユニット35−1,35−2は一つの収納室に二つ設けた場合を例示したが、これに限られるものではなく、この実施の形態のように複数設けた場合は各撮像ユニット35−1,35−2で撮像した撮像画像をサーバ装置57で一つの画像に合成して表示端末15に表示させるなどすればよく、また野菜室や冷蔵室等別々の収納室にそれぞれ設けた場合はそれぞれの画像を選択して表示できるようにすれば食材収納状況の表示もわかりやすいものとすることができる。   Although two imaging units 35-1 and 35-2 are provided in one storage chamber, the present invention is not limited to this. When a plurality of imaging units are provided as in this embodiment, each imaging unit is provided. The captured images captured by 35-1 and 35-2 may be combined into one image by the server device 57 and displayed on the display terminal 15, or may be provided in separate storage rooms such as a vegetable room and a refrigerator room. In this case, if it is possible to select and display each image, it is possible to make the display of the food storage status easy to understand.

さらにまた、撮像ユニット35−1,35−2による収納室内の撮像は扉を閉じた状態で行うものを例示したが、これは扉を一定角度開いた状態で撮像するようにしてもよいものである。   Furthermore, although an example in which the imaging in the storage room by the imaging units 35-1 and 35-2 is performed in a state where the door is closed has been illustrated, this may be performed in a state where the door is opened at a certain angle is there.

また、通信形態も、前記実施の形態では表示端末15と冷蔵庫51の無線アダプタ53、インターネット等の公衆通信網56との通信経路にゲートウェイ装置54を介在させる
ものを例示したが、このゲートウェイ装置54は必ずしも必要でなく、ルーター装置55を介して直接に表示端末15及び冷蔵庫51の無線アダプタ53、インターネット等の公衆通信網56と通信するように構成してもよく、このようにすることによってシステム構成の簡素化が図れる。
Also, as to the communication mode, in the embodiment described above, the gateway device 54 is interposed in the communication path between the display terminal 15 and the wireless adapter 53 of the refrigerator 51 and the public communication network 56 such as the Internet. It is not always necessary, and it may be configured to communicate directly with the display terminal 15 and the wireless adapter 53 of the refrigerator 51, the public communication network 56 such as the Internet, etc., via the router device 55. The configuration can be simplified.

また前記実施の形態では使用者が住居A外に居るときにはサーバ装置57から画像データを取得するようにしたが、サーバ装置57を介さずに、表示端末15からインターネット等の公衆通信網56およびルーター装置55、ゲートウェイ装置54と通信し、冷蔵庫51の記憶部60に記憶されている画像データを冷蔵庫51から直接取り込むように構成してもよい。この場合及びダイレクト通信を行う場合は、冷蔵庫51の記憶部60で画像の結合処理を行い、この結合処理後の画像データを送信するのが好ましい。   In the above embodiment, when the user is outside the residence A, the image data is acquired from the server device 57, but the public communication network 56 such as the Internet and the router from the display terminal 15 and the router are not used. It may be configured to communicate with the device 55 and the gateway device 54 and to directly fetch the image data stored in the storage unit 60 of the refrigerator 51 from the refrigerator 51. In this case and in the case of direct communication, it is preferable to combine the images in the storage unit 60 of the refrigerator 51 and to transmit the image data after the combining process.

本発明は、収納室内照明色温度から±500Kの範囲でホワイトバランスを制御することで、収納食品の色影響を抑制し、食品の収納状況に関わらず、撮像毎のバラツキを低減する安定した画像を提供できるので、家庭用の冷蔵庫をはじめとして各種の冷蔵庫に適用すると効果的である。   The present invention controls the white balance in the range of ± 500 K from the storage room illumination color temperature, thereby suppressing the color influence of the stored food, and reducing the variation for each imaging regardless of the storage condition of the food. It is effective to apply it to household refrigerators and various refrigerators.

1 冷蔵庫本体
4 断熱材
5 冷蔵室(収納室)
6 切替室
7 製氷室
8 冷凍室
9 野菜室
10 扉
T 空間
11〜14 引き出し式扉(扉)
15 表示端末(表示手段)
16 冷却室
17 冷却器
18 送風ファン
19 コンプレッサ
20 放熱パイプ
21 キャピラリーチューブ
22 ダンパ
30−1〜30−4 棚板
31 収納容器
32−1〜32−4 側壁凸部
33−1〜33−8 扉収納棚
33a 傾斜
34−1,34−2 庫内照明灯
35−1,35−2 撮像ユニット
37 カメラ部
38 制御基板
38a 帯状リード線
38b 外部接続部
38c カメラ接続部
39 収納ケース
39a ケース本体
39b ケース蓋体
40a,40b 開口
41 凸部
42 開口
43 補強板材
50 冷蔵庫システム
51 冷蔵庫
53 無線アダプタ(通信装置)
53a 「接続」ボタン
54 ゲートウェイ装置(中継装置)
55 ルーター装置
56 インターネット等の公衆通信網
57 サーバ装置
59 制御演算部
60 記憶部
61 扉開閉検出部
62 ファン駆動回路
63 コンプレッサ駆動回路
64 交流電源
65 サーバ用インターフェイス
66 サーバ制御部
67 データ記憶部
T 空間
70 フォーカス制御部
71 ホワイトバランス制御部
72 露出制御部
1 refrigerator main body 4 heat insulating material 5 cold storage room (storage room)
6 switching room 7 ice making room 8 freezing room 9 vegetable room 10 door T space 11-14 drawer type door (door)
15 Display terminal (display means)
DESCRIPTION OF SYMBOLS 16 cooling chamber 17 cooler 18 ventilation fan 19 compressor 20 thermal radiation pipe 21 capillary tube 22 damper 30-1 to 30-4 shelf board 31 storage container 32-1 to 32-4 side wall convex part 33-1 to 33-8 door storage Shelf 33a Inclination 34-1, 34-2 Interior lighting 35-1, 35-2 Imaging unit 37 Camera 38 Control board 38a Striped lead 38b External connection 38c Camera connection 39 Storage case 39a Case body 39b Case lid Body 40a, 40b Opening 41 Convex part 42 Opening 43 Reinforcing plate material 50 Refrigerator system 51 Refrigerator 53 Wireless adapter (communication device)
53a "Connect" button 54 Gateway device (relay device)
55 router device 56 public communication network such as Internet 57 server device 59 control arithmetic unit 60 storage unit 61 door open / close detection unit 62 fan drive circuit 63 AC power supply 65 server interface 66 server control unit 67 data storage unit T space 70 focus control unit 71 white balance control unit 72 exposure control unit

Claims (2)

冷蔵庫本体と、前記冷蔵庫本体内に形成した収納室と、前記収納室を開閉する断熱扉と、前記収納室を照らす照明装置と、前記収納室内の撮像に用いるカメラ部と、前記カメラ部を制御する制御基板を有し、前記制御基板は、収納室内照明色温度から±500Kの範囲でホワイトバランスを制御する冷蔵庫。 A refrigerator body, a storage room formed in the refrigerator body, a heat insulation door for opening and closing the storage room, a lighting device for illuminating the storage room, a camera unit used for imaging in the storage room, and the camera unit The control board has a control board, and the control board controls the white balance in the range of ± 500 K from the storage room illumination color temperature. 前記制御基板部は、冷蔵庫内の照度に合わせて自動で露出を調整する露出調整部を有することを特徴とする請求項1記載の冷蔵庫。 The refrigerator according to claim 1, wherein the control substrate unit includes an exposure adjustment unit that automatically adjusts the exposure according to the illuminance in the refrigerator.
JP2018036088A 2018-03-01 2018-03-01 refrigerator Active JP6518958B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018036088A JP6518958B2 (en) 2018-03-01 2018-03-01 refrigerator

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018036088A JP6518958B2 (en) 2018-03-01 2018-03-01 refrigerator

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2014006552A Division JP6307702B2 (en) 2014-01-17 2014-01-17 refrigerator

Publications (2)

Publication Number Publication Date
JP2018124054A JP2018124054A (en) 2018-08-09
JP6518958B2 true JP6518958B2 (en) 2019-05-29

Family

ID=63109593

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018036088A Active JP6518958B2 (en) 2018-03-01 2018-03-01 refrigerator

Country Status (1)

Country Link
JP (1) JP6518958B2 (en)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001133410A (en) * 1999-11-04 2001-05-18 Active Kt:Kk Grain photographing apparatus and grain trading system using it
JP2005303400A (en) * 2004-04-07 2005-10-27 Ricoh Co Ltd Imaging apparatus, image processing apparatus, illumination light source, and illumination apparatus
JP2006262083A (en) * 2005-03-17 2006-09-28 Matsushita Electric Ind Co Ltd White balance controller
JP2012193873A (en) * 2011-03-15 2012-10-11 Nikon Corp Storage device

Also Published As

Publication number Publication date
JP2018124054A (en) 2018-08-09

Similar Documents

Publication Publication Date Title
JP6307698B2 (en) refrigerator
JP6307702B2 (en) refrigerator
JP6229142B2 (en) Refrigerator and refrigerator system
JP6240890B2 (en) refrigerator
JP6303127B2 (en) refrigerator
JP2014206321A (en) Refrigerator
JP6322803B2 (en) Refrigerator and refrigerator system
JP6167330B2 (en) Refrigerator and refrigerator system
KR20160089725A (en) Refrigerator and Contorlling Method for the same
JP6167327B2 (en) refrigerator
JP6361014B2 (en) Refrigerator and refrigerator system
JP6485678B2 (en) Refrigerator and refrigerator system
JP6518958B2 (en) refrigerator
JP6681555B2 (en) refrigerator
JP6167288B2 (en) refrigerator
JP6500251B2 (en) refrigerator
JP6201142B2 (en) refrigerator
JP6671002B2 (en) refrigerator
JP6145701B2 (en) refrigerator
JP6167328B2 (en) refrigerator
JP2021096066A (en) Refrigerator and system
JP6145702B2 (en) refrigerator
JP2019074310A (en) refrigerator
JP2018179500A (en) Refrigerator

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20190123

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190312

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190325

R151 Written notification of patent or utility model registration

Ref document number: 6518958

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151