WO2023042504A1 - 冷蔵庫 - Google Patents

冷蔵庫 Download PDF

Info

Publication number
WO2023042504A1
WO2023042504A1 PCT/JP2022/024639 JP2022024639W WO2023042504A1 WO 2023042504 A1 WO2023042504 A1 WO 2023042504A1 JP 2022024639 W JP2022024639 W JP 2022024639W WO 2023042504 A1 WO2023042504 A1 WO 2023042504A1
Authority
WO
WIPO (PCT)
Prior art keywords
photographing
door
refrigerator
unit
control unit
Prior art date
Application number
PCT/JP2022/024639
Other languages
English (en)
French (fr)
Inventor
慎太郎 草野
謙治 塩野
貴史 山▲崎▼
匠 大谷
貴之 平子
厚司 森野
進太郎 小池
隆人 関根
勝 青山
浩俊 渡邊
芳輝 菊地
禎多 関口
Original Assignee
日立グローバルライフソリューションズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2021149849A external-priority patent/JP7337889B2/ja
Priority claimed from JP2021170612A external-priority patent/JP2023060927A/ja
Priority claimed from JP2021170613A external-priority patent/JP7353340B2/ja
Application filed by 日立グローバルライフソリューションズ株式会社 filed Critical 日立グローバルライフソリューションズ株式会社
Priority to CN202280009335.2A priority Critical patent/CN116724207A/zh
Publication of WO2023042504A1 publication Critical patent/WO2023042504A1/ja

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D23/00General constructional features
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00Arrangement or mounting of control or safety devices

Definitions

  • This disclosure relates to refrigerators.
  • Patent Document 1 describes "a door pocket photographing switch used when photographing a door pocket on an operation panel provided in front of the door of the refrigerator compartment. is provided.”
  • Patent Document 1 does not describe the operability of the photographing switch when photographing the storeroom of a refrigerator, and there is room for more appropriate photographing with the camera.
  • the refrigerator according to the present disclosure is a housing having a storage chamber; a pivoting door that closes the opening of the storage chamber; a photographing unit provided outside the housing for photographing at least the storage chamber; and a shooting button provided on the door, The shooting button is provided on the side of the door opposite to the side of the door on which the hinge is provided.
  • FIG. 6B is a cross-sectional view taken along line II-II of FIG. 6A in the refrigerator according to the first embodiment.
  • FIG. 1 is a system configuration diagram including a camera unit of a refrigerator according to a first embodiment
  • FIG. 4 is a flowchart of automatic photographing processing executed by the control unit of the refrigerator according to the first embodiment
  • 4 is a flowchart of automatic photographing processing executed by the control unit of the refrigerator according to the first embodiment
  • It is explanatory drawing which shows the process in which the refrigerator compartment door of the refrigerator which concerns on 1st Embodiment is opened and closed in time series. It is an example of a state in which image processing is not performed, which is an imaging result of the camera unit of the refrigerator according to the first embodiment. It is an example of the image processing result of the camera unit of the refrigerator according to the first embodiment, in which image processing has been performed.
  • FIG. 4 is a flowchart of automatic photographing processing executed by the control unit of the refrigerator according to the first embodiment
  • 4 is a flowchart of automatic photographing processing executed by the control unit of the refrigerator according to the first embodiment
  • It is explanatory drawing which shows the process in which the
  • FIG. 10 is an explanatory diagram showing candidate regions that serve as a reference when performing exposure adjustment in the refrigerator according to the first embodiment
  • FIG. 11 is an explanatory diagram showing a reference region for exposure adjustment in a refrigerator according to a comparative example
  • It is the front view and bottom view of the refrigerator compartment door on either side with which the refrigerator which concerns on 2nd Embodiment is provided.
  • It is a cross-sectional perspective view of the lower part of the right-side refrigerator compartment door with which the refrigerator which concerns on 2nd Embodiment is provided.
  • It is sectional drawing of the lower part of the refrigerator compartment door of the right side with which the refrigerator which concerns on 2nd Embodiment is equipped.
  • FIG. 1 is a front view of refrigerator 100 according to the first embodiment.
  • Refrigerator 100 is a device that cools food and the like, and includes housing 1 , doors such as refrigerating chamber doors 211 and 212 , and camera unit 3 .
  • the housing 1 has a plurality of storage chambers inside.
  • the storage compartments of the refrigerator 100 include, from top to bottom, a refrigerating compartment 21, an ice making compartment 22, an upper freezing compartment 23, a vegetable compartment 24, and a lower freezing compartment 25. ing.
  • the housing 1 is configured such that a heat insulating material (not shown) such as urethane foam is filled between an outer box 11 made of steel plate and an inner box (not shown) made of resin.
  • a plurality of openings 10 (see FIGS. 2 and 4) corresponding to the respective chambers are provided on the front side (front side) of the housing 1 .
  • the refrigerator compartment doors 211 and 212 are opened.
  • the opening 10 of the refrigerator compartment 21 is closed.
  • the refrigerator compartment doors 211 and 212 have functions such as closing the opening 10 of the housing 1 .
  • the refrigerator 100 includes left and right refrigerator compartment doors 211 and 212 as French doors that form a refrigerator compartment 21 together with the housing 1 .
  • the left refrigerating compartment door 211 (left door) is rotatable around the axis of the left end hinge 211a (see FIG. 4).
  • Refrigerator 100 also includes an icemaker door 221 and an upper freezer compartment door 231, as well as a vegetable compartment door 241 and a lower freezer compartment door 251, as drawer doors.
  • the refrigerator compartment 21 is provided with a plurality of shelf plates 213 (see FIG. 3) that partition the refrigerator compartment 21 in a predetermined manner.
  • a plurality of door pockets 211c (see FIG. 3) for storing food and the like are provided inside the refrigerator compartment door 211 on the left side (the same applies to the refrigerator compartment door 212 on the right side).
  • the ice making chamber 22 is provided with an ice making chamber container (not shown) that is pulled out integrally with the ice making chamber door 221 .
  • the upper freezer compartment 23 is provided with an upper freezer compartment container (not shown), and the vegetable compartment 24 is provided with a vegetable compartment container (not shown).
  • a lower freezer compartment container (not shown) is provided.
  • the refrigerator 100 includes a compressor, a radiator (condenser), a capillary tube (throttle mechanism), and an evaporator.
  • the refrigerant circulates sequentially through the compressor, radiator, capillary tube, and evaporator, and the air in the storage room is cooled by heat exchange with the refrigerant flowing through the evaporator.
  • the camera unit 3 shown in FIG. 1 is for taking an image of the storage room of the refrigerator 100 and the like, and is installed on the upper surface of the housing 1 .
  • FIG. 2 is a side view of refrigerator 100 .
  • the camera unit 3 includes a body portion 31 and a support portion 32.
  • the body part 31 has a function of capturing an image of a storage room or the like.
  • the support portion 32 supports the body portion 31 and is installed on the upper surface of the housing 1 .
  • a lens 31a (see also FIG. 5) is provided near the front end of the main body 31.
  • the lens 31a is an optical element that refracts and converges light.
  • a fish-eye lens for example, is used as such a lens 31a.
  • the lens 31a is positioned forward of the front end of the housing 1 (the opening 10 of the housing 1). More preferably, the lens 31a is positioned further forward than the front surfaces of the refrigerator compartment doors 211 and 212 (see FIG. 1) in the closed state. As a result, for example, when the refrigerator compartment doors 211 and 212 are opened, the refrigerator compartment 21 can easily enter the field of view of the lens 31a. It is also possible to take an image of the vegetable compartment 24 and the like (see FIG. 1) with the camera unit 3 in a state where the drawer-type door such as the vegetable compartment door 241 is opened. In this manner, the lens 31a is provided at a position where each storage chamber can be viewed from above.
  • FIG. 3 is a front view of refrigerator 100 with left and right refrigerator compartment doors 211 and 212 opened.
  • the inner plate 211b of the left refrigerating compartment door 211 is provided with a plurality of door pockets 211c for storing foodstuffs and the like (the same applies to the right refrigerating compartment door 212).
  • the left and right refrigerator compartment doors 211 and 212 are opened, food items in the refrigerator compartment 21 and the door pockets 211c and 212c enter the field of vision of the lens 31a of the camera unit 3 (FIG. 10). see also).
  • a rotary partition 211d shown in FIG. 3 is a partition for suppressing cold air leakage from the gap between the refrigerator compartment doors 211 and 212.
  • a rotating partition 211d is provided at the end opposite to the shaft of the hinge 211a (see FIG. 4), and rotates as the refrigerator compartment door 211 opens and closes. It is designed to
  • the left and right refrigerator compartment doors 211 and 212 are each provided with a shooting button 7 that is pressed by the user.
  • a photographing button 7 is provided at the bottom of the surface opposite to the hinge 211a (see FIG. 4) of the refrigerator compartment door 211 (right side).
  • the left and right refrigerator compartment doors 211 and 212 are closed (see FIG. 1), one of the refrigerator compartment doors 211 and 212 faces the other (rotating partition 211d in FIG. 3). ) is provided with a shooting button 7 .
  • the shooting button 7 By arranging the shooting button 7 in this way, for example, when the user puts his or her hand on the handle portion 212e when opening the right refrigerator compartment door 212, the shooting button 7 is prevented from being unintentionally pressed. can be prevented. In addition, since the user can take an image in a state in which the refrigerator door 212 is opened in a predetermined manner and the rotation of the refrigerator door 212 is stopped, blurring of the photographed image can be suppressed. In addition, compared to the case where the shooting button 7 is provided on the inside plates 211b and 212b of the refrigerator compartment doors 211 and 212, the front surface of the outside of the refrigerator, the wall surface of the refrigerator compartment 21, etc., the user's hand appears in the photographed image. can be suppressed.
  • FIG. 4 is a plan view of refrigerator 100 with left and right refrigerator compartment doors 211 and 212 opened.
  • the main body portion 31 of the camera unit 3 is arranged slightly to the left of the center of the housing 1 of the refrigerator 100 in the horizontal direction. More specifically, the main body 31 of the camera unit 3 is arranged directly above the seam between the refrigerator compartment doors 211 and 212 in the closed state (see also FIG. 1).
  • the body portion 31 in this way, for example, when the refrigerator compartment doors 211 and 212 are opened, food items in the door pockets 211c and 212c can easily enter the field of view of the camera unit 3, for example.
  • the user when using the refrigerator 100, the user is often conscious of the seam (boundary) between the refrigerator compartment doors 211 and 212. Therefore, by arranging the body part 31 directly above the seam of the refrigerator compartment doors 211 and 212, the user does not feel uncomfortable compared to the case where the body part 31 is displaced from the seam in the left-right direction. can be suppressed.
  • FIG. 5 is a perspective view of the camera unit 3 as viewed obliquely from below.
  • a body portion 31 of the camera unit 3 shown in FIG. 5 includes a case 31b and a camera LED 31c (Light Emitting Diode: illumination portion) in addition to the lens 31a (see also FIG. 2).
  • the case 31b of the main body 31 has a substantially rectangular parallelepiped shape elongated in the front-rear direction.
  • a circular hole (not shown) is provided on the lower surface near the front end of the case 31b, through which the lens 31a is exposed.
  • a camera LED 31c is provided on the rear side (deep side) of the lens 31a.
  • the camera LED 31c illuminates the refrigerator compartment 21 and the like so that the camera unit 3 can photograph the refrigerator compartment 21 (see FIG. 3) and the door pockets 211c and 212c (see FIG. 3) under moderate brightness.
  • the camera LED 31c (illumination unit) is provided outside the housing 1 (see FIG. 2) of the refrigerator 100. As shown in FIG. Although the details will be described later, in the first embodiment, while the interior light 4 (see FIG. 7) of the refrigerator 100 is turned off, the camera unit 3 is turned on while the camera LED 31c is turned on. reference).
  • the camera LED 31c is positioned in front of the front end (the opening 10 of the housing 1) of the housing 1 (see FIG. 2) of the refrigerator 100. As shown in FIG. This makes it easier for the light emitted from the camera LED 31c to enter the refrigerating compartment 21 and the like, thereby making it easier to obtain a clear photographing result.
  • FIG. 6A is a front view of the camera unit 3.
  • the body portion 31 of the camera unit 3 is installed above the support portion 32 . Further, the body portion 31 is installed near the center of the support portion 32 in the left-right direction.
  • FIG. 6B is a cross-sectional view taken along line II-II of FIG. 6A.
  • the camera unit 3 includes a lens 31a (see also FIG. 5), a camera LED 31c (see also FIG. 5), a case 31b, and a circuit board 31d.
  • the circuit board 31d is a printed board on which an imaging device 31e (see FIG. 7) and a camera/communication control SoC 31f (System-on-a-Chip: see FIG. 7) are mounted.
  • the lens 31a, the camera LED 31c, and the circuit board 31d in one case 31b in this way, the camera unit 3 can be made smaller and the wiring length can be shortened compared to the case where these are provided separately. can.
  • FIG. 7 is a system configuration diagram including the camera unit 3 of the refrigerator 100.
  • the refrigerator 100 includes an interior light 4 , a buzzer 5 , a door sensor 6 , a photographing button 7 , and a control section 8 in addition to the camera unit 3 .
  • the interior light 4 is a light source that irradiates the interior of the refrigerator 100 with light, and is provided inside the housing 1 .
  • the buzzer 5 is, for example, sounded when the interior light 4 is turned off during photographing by the camera unit 3 , and is installed at a predetermined location on the housing 1 .
  • the door sensor 6 outputs a predetermined signal indicating the open/closed state of the refrigerator compartment doors 211 and 212 to the controller 8 .
  • FIG. 7 shows one door sensor 6, it actually corresponds to the door sensor 6 corresponding to the left refrigerating compartment door 211 (see FIG. 1) and the right refrigerating compartment door 212 (see FIG. 1).
  • the left refrigerator compartment door 211 is opened, the door sensor 6 corresponding to this refrigerator compartment door 211 outputs an open signal to the controller 8 .
  • the shooting button 7 (see also FIG. 3) is a button that is pressed by the user when shooting manually using the camera unit 3, as described above.
  • the control unit 8 is, for example, a microcomputer, and includes electronic circuits such as a CPU (Central Processing Unit), ROM (Read Only Memory), RAM (Random Access Memory), and various interfaces (not shown). . Then, the program stored in the ROM is read out and developed in the RAM, and the CPU executes various processes. The control unit 8 performs "automatic shooting” as described above, and also performs “manual shooting” when the shooting button 7 is pressed. Details of the processing performed by the control unit 8 will be described later.
  • the camera unit 3 includes a lens 31a (see also FIG. 5), a camera LED 31c (see also FIG. 5), an imaging element 31e, a camera/communication control SoC 31f, and a wireless LAN unit 31g.
  • the imaging device 31e is a device that photoelectrically converts light incident through the lens 31a to generate captured image data.
  • a CCD sensor Charge Coupled Device
  • CMOS sensor Complementary Metal Oxide Semiconductor
  • the camera/communication control SoC 31f is an integrated circuit designed to integrate circuits with microcomputer functions and other applied functions on a single chip and work together.
  • the camera/communication control SoC 31f performs predetermined communication with the control unit 8 and outputs a photographing command to the image sensor 31e.
  • captured image data is input from the image sensor 31e to the camera/communication control SoC 31f.
  • the camera/communication control SoC 31f is an example of an integrated circuit, and other types may be used.
  • the photographing unit 30 shown in FIG. 7 has a function of photographing at least the refrigerator compartment 21 (storage room), and is provided outside the housing 1 (see FIG. 1) of the refrigerator 100 .
  • the photographing unit 30 includes a lens 31a, an imaging device 31e, and a camera/communication control SoC 31f.
  • the wireless LAN unit 31g transmits the captured image data output from the camera/communication control SoC 31f to the router 51.
  • the router 51 is a communication relay device, and transmits captured image data received from the wireless LAN unit 31 g to the server 53 via the network 52 .
  • the server 53 performs predetermined processing on the captured image data, and stores the processed image data in association with the identification information of the refrigerator 100 .
  • server 53 receives a request signal for an image of the inside of refrigerator 100 from mobile terminal 54 of the user, server 53 transmits captured image data to mobile terminal 54 .
  • a mobile terminal 54 a tablet, a wearable terminal, or the like is used in addition to a mobile phone or a smart phone.
  • FIGS. 8A and 8B are flowcharts of automatic photographing processing executed by the control unit of the refrigerator (see FIG. 7 as needed).
  • the camera unit 3 takes an image of the refrigerator compartment 21 when at least one of the refrigerator compartment doors 211 and 212 (see FIG. 3) is opened. It is assumed that the left and right refrigerator compartment doors 211 and 212 (see FIG. 3) are closed at the time of "START" in FIG. 8A. Further, the user can switch on/off the setting of automatic shooting and on/off the setting of manual shooting by operating the portable terminal 54 (see FIG. 7).
  • FIGS. 8A and 8B it is assumed that automatic shooting is set to ON (automatic shooting is possible), and manual shooting is also set to ON (manual shooting is possible).
  • step S101 the control unit 8 determines whether or not an open signal has been input from the door sensor 6. That is, the control unit 8 determines whether or not at least one of the left and right refrigerator compartment doors 211 and 212 (see FIG. 3) is opened.
  • step S101 when there is no open signal input from the door sensor 6 (S101: No), the control section 8 repeats the process of step S101.
  • step S101 when an open signal is input from the door sensor 6 (S101: Yes), the process of the control section 8 proceeds to step S102.
  • step S102 the control unit 8 turns on the interior light 4 of the refrigerator 100 and turns on the camera LED 31c. That is, immediately after at least one of the refrigerator compartment doors 211 and 212 (door) is opened, the control section 8 turns on the interior light 4 and also turns on the camera LED 31c (illumination section). As will be described later, the controller 8 turns off the interior light 4 after a predetermined period of time has elapsed since the door sensor 6 input the open signal (S103: Yes, S104). light up. As a result, the refrigerator compartment 21 is illuminated with light, which makes it easier for the user to visually recognize the refrigerator compartment 21 . Moreover, compared with the case where the interior light 4 is turned off when the user opens at least one of the refrigerator compartment doors 211 and 212, it is possible to prevent the user from feeling uncomfortable.
  • control unit 8 turns on the camera LED 31c as well as the interior light 4 (S102) to prepare for the subsequent photographing (S106).
  • the control unit 8 turns on the camera LED 31c as well as the interior light 4 (S102) to prepare for the subsequent photographing (S106).
  • the time required for exposure adjustment during photography can be shortened. Note that the camera LED 31c continues to be lit until both the left and right refrigerator compartment doors 211 and 212 are closed.
  • step S103 the control unit 8 determines whether or not a predetermined time has passed since the door sensor 6 received an open signal.
  • This predetermined time (for example, several seconds) is the time until the interior light 4 is turned off (S104), and is set in advance.
  • S104 the time until the interior light 4 is turned off
  • S105 the subsequent exposure adjustment time
  • a predetermined time is set in advance.
  • step S103 if the predetermined time has not passed since the door sensor 6 input the open signal (S103: No), the control unit 8 repeats the process of step S103. On the other hand, if the predetermined time has passed since the door sensor 6 input the open signal (S103: Yes), the process of the control unit 8 proceeds to step S104.
  • the control unit 8 turns off the interior light 4 and sounds the buzzer 5. That is, the control unit 8 sounds the buzzer 5 when turning off the interior light 4 after at least one of the refrigerator compartment doors 211 and 212 (doors) is opened. By sounding the buzzer 5 in this way, it is possible to reduce the sense of discomfort felt by the user when the interior light 4 is turned off, and it is possible for the user to easily recognize that the lighting is being turned off for photographing.
  • step S105 the control unit 8 performs exposure adjustment. That is, the control unit 8 adjusts the gain (sensitivity to brightness) when amplifying the electrical signal output from the imaging element 31e, and also adjusts the shutter speed of the camera unit 3 and the like. For example, the control unit 8 adjusts the gain so that the average value of the brightness of the captured image data is within a predetermined range. By adjusting the exposure in this way, it is possible to suppress blown-out highlights (halation) and blocked-up shadows in the captured image. Note that image input and exposure adjustment may be repeated in a predetermined manner from when at least one of the refrigerator compartment doors 211 and 212 is opened until both of the refrigerator compartment doors 211 and 212 are closed.
  • step S106 the control unit 8 outputs a shooting command. That is, the control unit 8 takes in an electric signal output from the image sensor 31e by photoelectric conversion and further amplified by a predetermined gain as photographed image data. In this way, after at least one of the refrigerator compartment doors 211 and 212 (doors) is opened (S101: Yes), the controller 8 turns off the interior light 4 and turns on the camera LED 31c (illumination part). Then, the photographing unit 30 is caused to photograph (S102, S104, S106).
  • the control unit 8 causes the image capturing unit 30 to perform image capturing. is preferred. By setting a predetermined time between turning off the interior light 4 and photographing in this way, the exposure adjustment (S105) can be performed appropriately.
  • control unit 8 may take an image every time a predetermined time elapses from the time of the first image capturing.
  • the length of this predetermined period of time may be the same as the predetermined period of time in step S103, or may be different.
  • step S107 the control unit 8 recognizes the opening angles of the refrigerator compartment doors 211 and 212.
  • the control unit 8 recognizes the opening angle of the opened one of the refrigerator compartment doors 211 and 212 by performing image processing such as edge detection.
  • the "opening angle" is the angle at which the refrigerator compartment doors 211 and 212 are opened, and is recognized based on, for example, the front end of the housing 1 (see FIG. 4) when the refrigerator 100 is viewed from above.
  • step S108 of FIG. 8B the control unit 8 determines whether or not the opening angle of the refrigerator compartment doors 211, 212 is equal to or greater than a predetermined value.
  • This predetermined value is a threshold value of the opening angle that serves as a criterion for selecting whether to save the photographed result (S109) or discard it (S110), and is set in advance.
  • step S108 if the opening angle of at least one of the refrigerator compartment doors 211 and 212 is greater than or equal to the predetermined value (S108: Yes), the processing of the control unit 8 proceeds to step S109.
  • step S109 the control unit 8 saves the imaging result, and proceeds to the process of step S112. This is because when the opening angle of the refrigerator compartment doors 211 and 212 is equal to or greater than a predetermined value, there is a high possibility that the refrigerator compartment 21 and the like are properly photographed.
  • the imaging result when only the left refrigerator compartment door 211 is open the imaging result when only the right refrigerator compartment door 212 is open, and the imaging results when both the left and right refrigerator compartment doors 211 and 212 are open.
  • the photographing result obtained when the camera is being held may be saved in a different storage area.
  • step S108 if the opening angles of the refrigerator compartment doors 211 and 212 are both less than the predetermined value (S108: No), the processing of the control unit 8 proceeds to step S110.
  • step S110 the control unit 8 discards the photographed result. This is because when the opening angle of the refrigerator compartment doors 211 and 212 is less than the predetermined value, there is a high possibility that the refrigerator compartment 21 and the like are not properly imaged.
  • step S111 the control unit 8 sounds the buzzer 5. That is, when the photographing is performed in a state where the opening angle of the refrigerator compartment doors 211 and 212 (doors) is less than the predetermined value (S108: No), the control unit 8 sounds the buzzer 5 (S111). This makes it possible to inform the user that the photographing result of this time has been discarded.
  • the sound of the buzzer 5 in step S111 and the sound of the buzzer 5 in step S104 may be made different so that the user can distinguish between them.
  • the process of the control part 8 progresses to step S112. Instead of ringing the buzzer 5, the refrigerator or the mobile terminal 54 used by the user may be caused to output an output that can be perceived by the user, such as light or vibration.
  • the control unit 8 turns on the interior light 4.
  • the control unit 8 turns on the interior light 4 while keeping the camera LED 31c turned on.
  • the interior light 4 is turned on (S112 in FIG. 8B).
  • the refrigerator compartment 21 is brightly illuminated, making it easier for the user to visually recognize the refrigerator compartment 21 .
  • step S113 the control unit 8 determines whether or not a close signal has been input from the door sensor 6. If there is no close signal input from the door sensor 6 (S113: No), the controller 8 returns to step S102. Step S113 may be repeated. On the other hand, if the close signal is input from the door sensor 6 (S113: Yes), the process of the control section 8 proceeds to step S114.
  • step S114 the controller 8 turns off the interior light 4 and turns off the camera LED 31c.
  • step S115 the control unit 8 selects the photographing result. For example, the control unit 8 selects the latest photographed result from among the plurality of stored photographed results as the photographed result for transmission to the server 53 . In this way, by completing the saving or discarding of photographing results for each photographing, the amount of storage required by the control unit 8 can be reduced, the amount of data required to be transmitted to the server 53 can be reduced, or the The user can be notified to that effect. Of course, in the case of saving, the fact may be notified. It suffices if the user can recognize whether the photographed result is saved or discarded.
  • the photographing time interval can be, for example, 3 seconds or longer. This makes it easier for the user to understand that the output is for the photographed result when the output is made to recognize a certain photographed result. For example, if the duration is less than 3 seconds, it may be difficult for the user to distinguish whether the output is for a certain photographed result or for one or more preceding or later photographed results. On the other hand, if the time interval is too long, the opening time of the refrigerating compartment doors 211 and 212 will be long, and a large amount of cold air will flow out from the refrigerating compartment. .
  • step S106 may be performed to continuously perform multiple times of photographing. In this case, in steps S108 to S110, processing can be executed for all of the multiple image data.
  • step S116 the control unit 8 transmits the imaging result to the server 53. That is, the control unit 8 sequentially transmits the captured image data to the server 53 via the wireless LAN unit 31g, the router 51, and the network 52 shown in FIG. After performing the process of step S116, the control unit 8 ends the series of processes (END).
  • the server 53 for example, in addition to the right and left regions of the refrigerating chamber 21 (see FIG. 3), the left refrigerating chamber door 211 (see FIG. 3) and the right refrigerating chamber door A region 212 (see FIG. 3) is extracted. Then, in the server 53, the image of each area is individually updated to the latest one. Further, in response to a request signal from the mobile terminal 54 , the captured image data is transmitted from the server 53 to the mobile terminal 54 and displayed on the display (not shown) of the mobile terminal 54 in a predetermined manner.
  • FIG. 9 is an explanatory diagram showing the process of opening and closing the refrigerator compartment doors 211 and 212 in chronological order.
  • the states of the interior light 4 and the camera LED 31c are shown in alphabetical order of A, B, C, . clearly shown.
  • the interior light 4 of the refrigerator 100 is illustrated when the interior light 4 is on (for example, state B), and when the interior light 4 is off, the The interior light 4 is not shown (for example, state A).
  • the camera LED 31c is illustrated when the camera LED 31c is lit (for example, state B), and the camera LED 31c is not illustrated when the camera LED 31c is extinguished. (eg state A).
  • the user opens the left refrigerator compartment door 211 from the state A in which both the left and right refrigerator compartment doors 211 and 212 are closed (states B, C, and D).
  • the camera LED 31c is kept lit until both the left and right refrigerator compartment doors 211 and 212 are closed (S102 in FIG. 8A).
  • a predetermined time elapses after the left refrigerating compartment door 211 is opened S103: No
  • both the interior light 4 and the camera LED 31c are lit.
  • S102 when a predetermined time has passed since the left refrigerator door 211 started to be opened.
  • states E and F the left refrigerator door 211 is closed and the right refrigerator door 212 is opened.
  • automatic photographing is performed again with the interior light 4 turned off and the camera LED 31c turned on (S104 to S106 in FIG. 8A).
  • states G, H, and I in the example of FIG. 9 the user once closed the left refrigerator compartment door 211 and then opened it again.
  • the control unit 8 performs manual shooting.
  • the control unit 8 performs the following processing. That is, when the shooting button 7 is pressed after at least one of the refrigerator compartment doors 211 and 212 (doors) is opened, the control unit 8 turns off the interior light 4, furthermore, the camera LED 31c (illumination unit) is turned on (state K). When the interior light 4 is turned off, the control unit 8 may sound the buzzer 5 in order to reduce the discomfort of the user. After performing manual photography, the control unit 8 turns on the interior light 4 as shown in state L again.
  • the control unit 8 controls the portable terminal 54 (FIG. 7). See) is preferably used for display. Thereby, the user can confirm the result of photographing by pressing the photographing button 7 on his own portable terminal 54 (see FIG. 7).
  • control unit 8 restarts photography (automatically It is preferable not to take photographs. This is because when the result of manual shooting is preferentially transmitted, there is no particular need to perform automatic shooting thereafter.
  • FIG. 10 shows an example of a state in which image processing has not been performed, which is the photographing result of the camera unit.
  • the upper side of the paper surface is the front side
  • the lower side of the paper surface is the rear side, so the left and right are reversed with respect to FIG.
  • both the left and right refrigerating compartment doors 211 and 212 are open, and in addition to the refrigerating compartment 21, the door pocket 211c of the left refrigerating compartment door 211 and the door pocket 212c of the right refrigerating compartment door 212 are opened. is also filmed.
  • FIG. 11 shows an example of a photographing result of the camera unit 3 after image processing.
  • the server 53 by performing predetermined image processing in the server 53 (see FIG. 7) based on the imaging result of FIG. converted to a simple image.
  • the user can grasp at a glance what kind of food is stored in the refrigerator compartment 21 or the like.
  • FIG. 12A first embodiment
  • FIG. 12B comparative example
  • FIG. 12A is an explanatory diagram showing candidate regions that serve as references for exposure adjustment in the refrigerator according to the first embodiment.
  • the gain is adjusted when amplifying the electrical signal output from the image sensor 31e (see FIG. 7).
  • at least one of the three rectangular areas 61 to 63 shown in FIG. 12A is used as a reference indicating the degree of image brightness in exposure adjustment. That is, at least one of the area 61 of the left refrigerator compartment door 211, the area 62 of the right refrigerator compartment door 212, and the predetermined area 63 between these areas 61 and 62 is used.
  • the positions and sizes of the regions 61 to 63 may be appropriately changed based on the opening angles of the refrigerator compartment doors 211 and 212 .
  • the left refrigerator compartment door 211 is open, but the right refrigerator compartment door 212 is closed.
  • the controller 8 adjusts the exposure based on the average brightness of the area 61 corresponding to the left refrigerator door 211 . That is, the control unit 8 adjusts the gain when amplifying the electrical signal output from the imaging device 31e (see FIG. 7) so that the average value of the brightness of the region 61 is within a predetermined range.
  • the area 62 of the closed right refrigerator compartment door 212 and the area 63 partially deviated from the left refrigerator compartment door 211 are excluded from the reference for gain adjustment. Therefore, even when the surroundings of the refrigerator compartment are dark, the control section 8 can appropriately adjust the exposure without increasing the gain too much.
  • control unit 8 controls the above-described inside the field of view of the imaging unit 30 when one of the right refrigerator compartment door 212 (right door) and the left refrigerator compartment door 211 (left door) is opened. Using the area corresponding to one as a reference, the gain of the exposure at the time of photographing is adjusted. Signals indicating whether the left and right refrigerator compartment doors 211 and 212 are open or closed are output to the control unit 8 from the left and right door sensors 6 (see FIG. 7).
  • the exposure adjustment may be performed with reference to the one having the highest average luminance value of the image among the three regions 61 to 63 . That is, the control unit 8 adjusts the gain of the exposure at the time of photographing with reference to the region having the highest average luminance value of the image among the plurality of regions 61 to 63 included in the field of view of the photographing unit 30 . As a result, it is possible to prevent the gain from becoming too high, and furthermore, to prevent overexposure (halation) in the captured image.
  • the exposure is adjusted based on the area including at least a part of the left and right refrigerating compartment doors 211 and 212 to which the open signal is input from the door sensor 6 and the one having the highest average luminance value of the image. may be performed.
  • the control unit 8 can appropriately set the gain in the exposure adjustment, for example, even in a situation where the light emitted from the outside of the refrigerator 100 is reflected on the surface of the refrigerator compartment door 212 in the closed state. As a result, it is possible to suppress the occurrence of blown-out highlights and blocked-up shadows in the captured image.
  • FIG. 12B is an explanatory diagram showing a region serving as a luminance reference when performing exposure adjustment in the refrigerator according to the comparative example.
  • one rectangular area 60 is set as a reference for exposure adjustment.
  • a rectangular area 60 is set to include both the left and right refrigerator compartment doors 211 and 212 when the left and right refrigerator compartment doors 211 and 212 are opened.
  • the right refrigerator door 212 appears dark when photographed when the surroundings of the refrigerator 100 are dark, so the gain is set high in order to increase the sensitivity to light.
  • blown-out highlights are likely to occur in the open left refrigerator compartment door 211 and the left half of the refrigerator compartment 21 .
  • the control unit 8 selects a reference area for exposure adjustment. there is As a result, it is possible to suppress overexposure in the captured image, and display a clear image that is easy for the user to visually recognize on the mobile terminal 54 (see FIG. 7).
  • the wall surface of the refrigerator compartment 21 (storage compartment) and the inner plates 211b and 212b (see FIG. 3) of the refrigerator compartment doors 211 and 212 (doors) may be white.
  • white is a color that is reflected with a reflectance of 50% or more over substantially the entire spectrum of visible light. From another point of view, "white” means that the brightness of each element of R (Red), G (Green), and B (Blue) is substantially the same in the RGB color system, and the reflectance is 50% or more. It is a color that is reflected in
  • the camera unit 3 can be used to properly photograph the refrigerator compartment 21 and the like. Therefore, it becomes easier for the user to visually recognize the state of the refrigerator compartment 21 and the like by looking at the portable terminal 54 .
  • a shooting button 7A (see FIG. 13) is provided in the vicinity of handles 211e and 212e (see FIG. 13) provided on the lower surfaces of left and right refrigerator compartment doors 211 and 212 (see FIG. 13). is different from the first embodiment. In addition, about others, it is the same as that of 1st Embodiment. Therefore, the portions different from the first embodiment will be described, and the description of the overlapping portions will be omitted.
  • FIGS. 13A and 13B are a front view and a bottom view of right and left refrigerator compartment doors 211 and 212 provided in the refrigerator 100A according to the second embodiment.
  • a bottom view thereof is illustrated below the front view of the refrigerating compartment doors 211 and 212 .
  • a grip portion 211e recessed upward is provided on the lower surface of the left refrigerator compartment door 211 over a predetermined length in the horizontal direction.
  • a photographing button 7A that is pressed by the user when manual photographing is performed. That is, the shooting button 7A is provided outside the handle portion 211e of the refrigerator compartment door 211 (door) and near the handle portion 211e.
  • the lower surface of the refrigerator compartment door 212 on the right side is also provided with a handle portion 212e and a shooting button 7A.
  • the shooting button 7A By arranging the shooting button 7A in this way, for example, when the user puts his or her hand on the handle portion 212e when opening the right refrigerator compartment door 212, it is possible to prevent the shooting button 7A from being unintentionally pressed by mistake. can be prevented.
  • the shooting button 7A is provided inside (on the left side) of the handle portion 212e. Therefore, it is possible to prevent the thumb of the right hand from erroneously touching the shooting button 7A when the user puts the right hand on the handle 212e. The same can be said for the shooting button 7A on the left refrigerator compartment door 211.
  • the shooting button 7A is provided near the handle portion 212e, the user can press the shooting button 7A by touching the refrigerator compartment door 212 and moving the hand. . Therefore, when the user presses the shooting button 7A, there is no particular need to temporarily release the hand from the refrigerator compartment door 212, so that operability can be enhanced. In addition, since the user can take an image in a state in which the refrigerator door 212 is opened in a predetermined manner and the rotation of the refrigerator door 212 is stopped, blurring of the photographed image can be suppressed.
  • the shooting button 7A is provided on the inside plates 211b and 212b of the refrigerator compartment door 212, the front surface of the outside of the refrigerator, and the wall surface of the refrigerator compartment 21, it is possible to prevent the user's hand from appearing in the photographed image. can be suppressed. Also, by providing the shooting button 7A near the handle 212e, it is possible to share the wiring of the rotary partition 211d (see FIG. 3) and the operation panel (not shown) with the wiring of the shooting button 7A. Note that the processing of the control unit 8 (see FIG. 7) based on the operation of the shooting button 7A is the same as that of the first embodiment (see FIGS. 8A and 8B), so description thereof will be omitted.
  • FIG. 14A is a cross-sectional perspective view of the lower portion of the right refrigerator compartment door 212 of the refrigerator. Note that the configuration of FIG. 14A corresponds to FIG.
  • the photographing button 7A on the right refrigerator compartment door 212 includes a resin switch portion 71A that is pressed by the user, a laminate film 72A that is attached to the outside of the switch portion 71A, and a switch portion 71A. and a switch board 73A for generating a predetermined electrical signal.
  • a plurality of wirings 80 are connected to the switch substrate 73A. These wirings 80 include power lines and signal lines.
  • the left refrigerator compartment door 211 (see FIG. 13) has the same structure.
  • FIG. 14B is a cross-sectional view of the lower portion of the right refrigerator compartment door 212 of the refrigerator. Note that the configuration of FIG. 14B corresponds to FIGS. 13 and 14A.
  • a partition wall 92 is provided inside the refrigerator compartment door 212 (door).
  • the partition wall 92 is provided with an insertion hole 93 for the wiring 80 connected to the shooting button 7A.
  • a seal member 94 is installed in the insertion hole 93 to close the insertion hole 93 .
  • Urethane foam, for example, is used as such a sealing member 94 .
  • the wiring 80 is inserted through the sealing member 94 . That is, the insertion hole 93 is closed by the seal member 94 while the wiring 80 is inserted through the insertion hole 93 .
  • the refrigerator 100 and the like according to the present disclosure have been described according to each embodiment, but the invention is not limited to these descriptions, and various modifications can be made.
  • the configuration in which the camera unit 3 is provided on the upper surface of the housing 1 of the refrigerator 100 (see FIG. 2) has been described, but the configuration is not limited to this. That is, the camera unit 3 may be provided at another predetermined position outside the housing 1 .
  • the configuration in which the camera LED 31c (see FIG. 5) is arranged behind the lens 31a (see FIG. 5) has been described, but the present invention is not limited to this.
  • the camera LED may be arranged in front of the lens 31a.
  • a plurality of camera LEDs may be arranged in a predetermined manner.
  • the present invention is not limited to this.
  • the camera unit 3 may be used to photograph one of them.
  • the present invention is not limited to this.
  • at least one of the drawer-type ice making compartment door 221 (see FIG. 1), the upper freezer compartment door 231, the vegetable compartment door 241, and the lower freezer compartment door 251 is provided with a shooting button (not shown). You may do so.
  • the controller 8 when at least one of the refrigerator compartment doors 211 and 212 is opened (S101 in FIG. 8A: Yes), the controller 8 turns on the interior light 4 and turns on the camera LED 31c.
  • processing (S102) has been described, the present invention is not limited to this. That is, when at least one of the refrigerator compartment doors 211 and 212 is opened, the controller 8 may cause the interior light 4 and the camera LED 31c to turn on at predetermined different timings.
  • control unit 8 keeps the camera LED 31c lit until both the left and right refrigerator doors 211 and 212 are closed after at least one of the left and right refrigerator doors 211 and 212 is opened. Illustrated, but not limited to. For example, when the exposure adjustment (S105 in FIG. 8A) is not performed, the control unit 8 may turn off the camera LED 31c at a predetermined timing.
  • the refrigerator compartment doors 211 and 212 may be provided with predetermined door handles (not shown).
  • a photographing button may be provided outside the door handle, or a photographing button (not shown) may be provided at a predetermined location on the door handle itself.
  • each embodiment can be applied to other types of refrigerators or storages.
  • each embodiment can be applied to a refrigerator with a single-opening refrigerator compartment door (not shown) and a portable refrigerator (not shown). It is possible to receive information from an arithmetic unit or a sensor provided in the storage by priority or by wireless communication, and to execute the shooting, and the imaging device may be separate from the storage.
  • each embodiment is described in detail in order to explain the present invention in an easy-to-understand manner, and is not necessarily limited to those having all the described configurations. Moreover, it is possible to add, delete, or replace a part of the configuration of the embodiment with another configuration. Further, the mechanisms and configurations described above show those considered necessary for explanation, and do not necessarily show all the mechanisms and configurations on the product.

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Thermal Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

貯蔵室等を適切に撮影する冷蔵庫を提供する。冷蔵庫(100A)は、貯蔵室を有する筐体と、貯蔵室の開口を塞ぐ、回動式の冷蔵室ドア(211,212)と、筐体の外側に設けられ、少なくとも貯蔵室を撮影する撮影部と、冷蔵室ドア(211,212)に設けられる撮影ボタン(7A)と、を備え、撮影ボタン(7A)は、冷蔵室ドア(211,212)において、冷蔵室ドア(211,212)のヒンジが設けられた側の反対側に設けられる。

Description

冷蔵庫
 本開示は、冷蔵庫に関する。
 冷蔵庫の貯蔵室等をカメラで撮影する技術として、例えば、特許文献1には、「冷蔵室の扉の前面に設けられた操作パネルに、ドアポケットを撮影する際に使用するドアポケット撮影用スイッチが設けられている」ことが記載されている。
特開2003-42626号公報
 特許文献1には、例えば、冷蔵庫の貯蔵室等を撮影する際の撮影用スイッチの操作性については記載されておらず、カメラによる撮影をさらに適切に行う余地がある。
 本開示に係る冷蔵庫は、
 貯蔵室を有する筐体と、
 前記貯蔵室の開口を塞ぐ、回動式の扉と、
 前記筐体の外側に設けられ、少なくとも前記貯蔵室を撮影する撮影部と、
 前記扉に設けられる撮影ボタンと、を備え、
 前記撮影ボタンは、前記扉において、当該扉のヒンジが設けられた側の反対側に設けられる。
第1実施形態に係る冷蔵庫の正面図である。 第1実施形態に係る冷蔵庫の側面図である。 第1実施形態に係る冷蔵庫の左右の冷蔵室ドアが開かれた状態の正面図である。 第1実施形態に係る冷蔵庫の左右の冷蔵室ドアが開かれた状態の平面図である。 第1実施形態に係る冷蔵庫のカメラユニットを斜め下から見上げた場合の斜視図である。 第1実施形態に係る冷蔵庫のカメラユニットの正面図である。 第1実施形態に係る冷蔵庫における図6AのII-II線矢視断面図である。 第1実施形態に係る冷蔵庫のカメラユニットを含むシステム構成図である。 第1実施形態に係る冷蔵庫の制御部が実行する自動撮影の処理のフローチャートである。 第1実施形態に係る冷蔵庫の制御部が実行する自動撮影の処理のフローチャートである。 第1実施形態に係る冷蔵庫の冷蔵室ドアが開閉される過程を時系列的に示す説明図である。 第1実施形態に係る冷蔵庫のカメラユニットの撮影結果であって、画像処理が行われていない状態の例である。 第1実施形態に係る冷蔵庫のカメラユニットの撮影結果であって、画像処理が行われた状態の例である。 第1実施形態に係る冷蔵庫において、露光調整を行う際の基準となる領域の候補を示す説明図である。 比較例に係る冷蔵庫において、露光調整を行う際の基準となる領域を示す説明図である。 第2実施形態に係る冷蔵庫が備える左右の冷蔵室ドアの正面図及び下面図である。 第2実施形態に係る冷蔵庫が備える右側の冷蔵室ドアの下部の断面斜視図である。 第2実施形態に係る冷蔵庫が備える右側の冷蔵室ドアの下部の断面図である。
≪第1実施形態≫
 図1は、第1実施形態に係る冷蔵庫100の正面図である。
 冷蔵庫100は、食品等を冷やす機器であり、筐体1の他、冷蔵室ドア211,212等の各ドア(扉)と、カメラユニット3と、を備えている。筐体1は、その内部に複数の貯蔵室を有している。図1の例では、冷蔵庫100の貯蔵室として、上から順に、冷蔵室21と、左右に並ぶ製氷室22・上段冷凍室23の他、野菜室24と、下段冷凍室25と、が設けられている。
 筐体1は、鋼板製の外箱11と、樹脂製の内箱(図示せず)と、の間に発泡ウレタン等の断熱材(図示せず)が充填された構成になっている。筐体1の前側(正面側)には、各室に対応する複数の開口10(図2、図4参照)が設けられている。例えば、冷蔵室21の開口10を介して食品等が入れられる際には、冷蔵室ドア211,212が開けられる。また、冷蔵室ドア211,212が閉じられると、冷蔵室21の開口10が閉塞された状態になる。このように、冷蔵室ドア211,212(扉)は、筐体1の開口10を塞ぐ機能等を有している。なお、他の各ドアについても同様である。
 冷蔵庫100は、筐体1とともに冷蔵室21を形成するフレンチ式ドアとして、左右の冷蔵室ドア211,212を備えている。左側の冷蔵室ドア211(左ドア)は、左端のヒンジ211a(図4参照)の軸を中心として、回動可能になっている。なお、右側の冷蔵室ドア212(右ドア)についても同様である。また、冷蔵庫100は、引出し式のドアとして、製氷室ドア221や上段冷凍室ドア231の他、野菜室ドア241や下段冷凍室ドア251を備えている。
 冷蔵室21には、この冷蔵室21を所定に仕切る複数の棚板213(図3参照)が設けられている。左側の冷蔵室ドア211の庫内側には、食品等を収容するための複数のドアポケット211c(図3参照)が設けられている(右側の冷蔵室ドア212も同様)。製氷室22には、製氷室ドア221と一体に引き出される製氷室容器(図示せず)が設けられている。同様に、上段冷凍室23には上段冷凍室容器(図示せず)が設けられ、また、野菜室24には野菜室容器(図示せず)が設けられている他、下段冷凍室25には下段冷凍室容器(図示せず)が設けられている。
 また、冷蔵庫100は、図示はしないが、圧縮機と、放熱器(凝縮器)と、キャピラリチューブ(絞り機構)と、蒸発器と、を備えている。そして、圧縮機、放熱器、キャピラリチューブ、及び蒸発器を順次に介して冷媒が循環し、蒸発器を通流する冷媒との間の熱交換で、貯蔵室の空気が冷やされるようになっている。図1に示すカメラユニット3は、冷蔵庫100の貯蔵室等を撮像するものであり、筐体1の上面に設置されている。
 図2は、冷蔵庫100の側面図である。
 図2に示すように、カメラユニット3は、本体部31と、支持部32と、を備えている。本体部31は、貯蔵室等を撮像する機能を有している。支持部32は、本体部31を支持するものであり、筐体1の上面に設置されている。
 本体部31の前端付近には、レンズ31a(図5も参照)が設けられている。レンズ31aは、光を屈折させて集束させる光学素子である。このようなレンズ31aとして、例えば、魚眼レンズが用いられる。そして、冷蔵室ドア211,212(図1参照)が開かれた場合に、カメラユニット3で冷蔵室21(図1参照)を撮像できるように、レンズ31aが下側に臨んだ状態になっている。
 図2に示すように、レンズ31aは、筐体1の前端(筐体1の開口10)よりも前側に位置している。より好ましくは、レンズ31aは、閉状態の冷蔵室ドア211,212(図1参照)の前面よりもさらに前側に位置している。これによって、例えば、冷蔵室ドア211,212が開けられた際、レンズ31aの視野に冷蔵室21が入りやすくなる。なお、野菜室ドア241等の引出し式のドアが開かれた状態で、カメラユニット3によって野菜室24等(図1参照)を撮像することも可能である。このように、それぞれの貯蔵室を上から見下ろせる位置にレンズ31aが設けられている。
 図3は、冷蔵庫100の左右の冷蔵室ドア211,212が開かれた状態の正面図である。
 前記したように、左側の冷蔵室ドア211の内板211bには、食品等を収容するための複数のドアポケット211cが設けられている(右側の冷蔵室ドア212も同様)。そして、左右の冷蔵室ドア211,212が開けられると、冷蔵室21やドアポケット211c,212cの食品等が、カメラユニット3のレンズ31aの視野に俯瞰的に入るようになっている(図10も参照)。
 図3に示す回転仕切211dは、冷蔵室ドア211,212の間の隙間からの冷気漏れを抑制するための仕切体である。図3の例では、左側の冷蔵室ドア211において、ヒンジ211a(図4参照)の軸とは反対側の端部に回転仕切211dが設けられ、冷蔵室ドア211の開閉に伴って所定に回転するようになっている。
 また、カメラユニット3を用いて冷蔵室21を手動で撮影する際、ユーザによって押される撮影ボタン7が、左右の冷蔵室ドア211,212にひとつずつ設けられている。図3の例では、左側の冷蔵室ドア211(扉)において、この冷蔵室ドア211のヒンジ211a(図4参照)とは反対側の面の下部に、撮影ボタン7が設けられている(右側の冷蔵室ドア212も同様)。別の観点から説明すると、左右の冷蔵室ドア211,212が閉まっている状態(図1参照)において、冷蔵室ドア211,212の一方が他方と対向している面(図3の回転仕切211dの付近)に撮影ボタン7が設けられている。このように撮影ボタン7を配置することで、例えば、ユーザが右側の冷蔵室ドア212を開ける際に取手部212eに手をかけたとき、意図せずに誤って撮影ボタン7を押してしまうことを防止できる。また、ユーザが、冷蔵室ドア212を所定に開いて、冷蔵室ドア212の回動を止めた状態で撮影を行えるため、撮影画像のブレを抑制できる。また、撮影ボタン7を冷蔵室ドア211,212の庫内側の内板211b,212b、庫外側の前面、冷蔵室21の壁面などに設ける場合に比べて、撮影画像上でユーザの手が写り込むことを抑制できる。
 これら2つの撮影ボタン7のうち少なくとも一方がユーザによって押された場合に行う撮影を「手動撮影」という。また、冷蔵室ドア211,212の開き始めのタイミングからの経過時間に基づいて、制御部8(図7参照)が行う撮影を「自動撮影」という。
 図4は、冷蔵庫100の左右の冷蔵室ドア211,212が開かれた状態の平面図である。
 図4の例では、左右方向において、冷蔵庫100の筐体1の中央よりも若干左側にカメラユニット3の本体部31が配置されている。より詳しく説明すると、閉状態の冷蔵室ドア211,212の合わせ目の真上にカメラユニット3の本体部31が配置されている(図1も参照)。このように本体部31を配置することで、例えば、冷蔵室ドア211,212が開けられた場合に、ドアポケット211c,212cの食品等がカメラユニット3の視野に入りやすくなる。
 また、冷蔵庫100を使用する際、ユーザは、冷蔵室ドア211,212の合わせ目(境界部)を意識することが多い。したがって、冷蔵室ドア211,212の合わせ目の真上に本体部31を配置することで、本体部31の左右方向の位置が合わせ目から外れている場合に比べて、ユーザが違和感を感じることを抑制できる。
 図5は、カメラユニット3を斜め下から見上げた場合の斜視図である。
 図5に示すカメラユニット3の本体部31は、前記したレンズ31a(図2も参照)の他に、ケース31bと、カメラLED31c(Light Emitting Diode:照明部)と、を備えている。図5の例では、本体部31のケース31bは、概ね、前後方向に細長い直方体状を呈している。ケース31bの前端付近の下面には、円形状の孔(符号は図示せず)が設けられ、この孔を介してレンズ31aが露出している。また、レンズ31aの後側(奥側)にカメラLED31cが設けられている。
 カメラLED31cは、カメラユニット3が冷蔵室21(図3参照)やドアポケット211c,212c(図3参照)を適度な明るさのもとで撮影できるように、冷蔵室21等に光を照射する光源である。また、カメラLED31c(照明部)は、冷蔵庫100の筐体1(図2参照)の外側に設けられている。詳細については後記するが、第1実施形態では、冷蔵庫100の庫内灯4(図7参照)を消灯しつつ、カメラLED31cを点灯させた状態で、カメラユニット3が冷蔵室21等(図3参照)を撮影するようにしている。
 図5に示すように、カメラLED31cの前側にレンズ31aを設けることで、冷蔵室ドア211,212が開けられた状態で、冷蔵室21等(図3参照)からの反射光がレンズ31aに入射しやすくなる。したがって、冷蔵室21等に収容されている食品を適切に撮影できる。なお、冷蔵庫100の筐体1(図2参照)の前端(筐体1の開口10)よりも前側にカメラLED31cが位置していることが好ましい。これによって、カメラLED31cから照射された光が冷蔵室21等に入射しやすくなり、ひいては、鮮明な撮影結果が得られやすくなる。
 図6Aは、カメラユニット3の正面図である。
 図6Aに示すように、カメラユニット3の本体部31が支持部32の上側に設置されている。また、左右方向において、支持部32の中央付近に本体部31が設置されている。
 図6Bは、図6AのII-II線矢視断面図である。
 図6Bに示すように、カメラユニット3は、レンズ31a(図5も参照)やカメラLED31c(図5も参照)、ケース31bを備える他、回路基板31dを備えている。回路基板31dは、後記する撮像素子31e(図7参照)やカメラ/通信制御SoC31f(System-on-a-Chip:図7参照)が実装されたプリント基板である。このように、レンズ31aやカメラLED31c、回路基板31dを一つのケース31bに収容することで、これらを別体で設ける場合と比べて、カメラユニット3を小型化できるとともに、配線の長さを短縮できる。
 図7は、冷蔵庫100のカメラユニット3を含むシステム構成図である。
 図7に示すように、冷蔵庫100は、カメラユニット3の他に、庫内灯4と、ブザー5と、ドアセンサ6と、撮影ボタン7と、制御部8と、を備えている。庫内灯4は、冷蔵庫100の庫内に光を照射する光源であり、筐体1の内側に設けられている。ブザー5は、例えば、カメラユニット3による撮影において、庫内灯4を消灯する際に鳴らされるものであり、筐体1の所定箇所に設置されている。
 ドアセンサ6は、冷蔵室ドア211,212の開閉状態を示す所定の信号を制御部8に出力する。なお、図7ではひとつのドアセンサ6を示しているが、実際には、左側の冷蔵室ドア211(図1参照)に対応するドアセンサ6と、右側の冷蔵室ドア212(図1参照)に対応する別のドアセンサ6と、が設けられている。例えば、左側の冷蔵室ドア211が開かれた場合には、この冷蔵室ドア211に対応するドアセンサ6から制御部8に開信号が出力される。撮影ボタン7(図3も参照)は、前記したように、カメラユニット3を用いて手動で撮影する際、ユーザによって押されるボタンである。
 制御部8は、例えば、マイコンであり、図示はしないが、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、各種インタフェース等の電子回路を含んで構成されている。そして、ROMに記憶されたプログラムを読み出してRAMに展開し、CPUが各種処理を実行するようになっている。制御部8は、前記した「自動撮影」を行う他、撮影ボタン7が押された場合には、「手動撮影」を行う。なお、制御部8が行う処理の詳細については後記する。
 カメラユニット3は、レンズ31a(図5も参照)やカメラLED31c(図5も参照)の他、撮像素子31eと、カメラ/通信制御SoC31fと、無線LANユニット31gと、を備えている。撮像素子31eは、レンズ31aを介して入射する光を光電変換し、撮影画像データを生成する素子である。このような撮像素子31eとして、例えば、CCDセンサ(Charge Coupled Device)やCMOSセンサ(Complementary Metal Oxide Semiconductor)が用いられる。
 カメラ/通信制御SoC31fは、マイコンの機能や他の応用的な機能を有する回路を1チップ上に集積し、連携して機能するよう設計された集積回路である。カメラ/通信制御SoC31fは、制御部8との間で所定に通信を行い、撮像素子31eに撮影指令を出力する。これによって、撮像素子31eからカメラ/通信制御SoC31fに撮影画像データが入力される。なお、カメラ/通信制御SoC31fは集積回路の一例であり、他の種類のものを用いるようにしてもよい。
 図7に示す撮影部30は、少なくとも冷蔵室21等(貯蔵室)を撮影する機能を有し、冷蔵庫100の筐体1(図1参照)の外側に設けられている。図7に示すように、撮影部30は、レンズ31aと、撮像素子31eと、カメラ/通信制御SoC31fと、を含んで構成されている。
 無線LANユニット31gは、カメラ/通信制御SoC31fから出力される撮影画像データをルータ51に送信する。ルータ51は、通信の中継機器であり、無線LANユニット31gから受信した撮影画像データをネットワーク52を介して、サーバ53に送信する。サーバ53は、撮影画像データについて所定の処理を行い、冷蔵庫100の識別情報に対応付けて保存する。また、サーバ53は、ユーザの携帯端末54から冷蔵庫100の庫内画像の要求信号を受信した場合、撮影画像データを携帯端末54に送信する。このような携帯端末54として、携帯電話やスマートフォンの他、タブレットやウェアラブル端末等が用いられる。
<制御部の処理>
 図8A、図8Bは、冷蔵庫の制御部が実行する自動撮影の処理のフローチャートである(適宜、図7を参照)。
 以下では、一例として、冷蔵室ドア211,212(図3参照)のうちの少なくとも一方が開かれた場合に、カメラユニット3が冷蔵室21を撮影する処理について説明する。なお、図8Aの「START」時には、左右の冷蔵室ドア211,212(図3参照)が閉状態であるものとする。また、ユーザによる携帯端末54(図7参照)の操作で、自動撮影の設定のオン/オフや、手動撮影の設定のオン/オフを切り替えることができるようになっている。図8A、図8Bの例では、自動撮影の設定がオン(自動撮影可能)であり、さらに、手動撮影の設定もオン(手動撮影可能)になっているものとする。
 ステップS101において制御部8は、ドアセンサ6から開信号の入力があったか否かを判定する。つまり、制御部8は、左右の冷蔵室ドア211,212(図3参照)のうちの少なくとも一方が開かれたか否かを判定する。ステップS101において、ドアセンサ6から開信号の入力がない場合(S101:No)、制御部8は、ステップS101の処理を繰り返す。一方、ステップS101において、ドアセンサ6から開信号の入力があった場合(S101:Yes)、制御部8の処理はステップS102に進む。
 ステップS102において制御部8は、冷蔵庫100の庫内灯4を点灯させるとともに、カメラLED31cを点灯させる。つまり、制御部8は、冷蔵室ドア211,212(扉)の少なくとも一方が開かれた直後には庫内灯4を点灯させるとともに、カメラLED31c(照明部)も点灯させる。後記するように、ドアセンサ6から開信号が入力されてから所定時間が経過した後、制御部8が庫内灯4を消灯させるが(S103:Yes、S104)、それまでは庫内灯4を点灯させる。これによって、冷蔵室21に光が照射されるため、ユーザが冷蔵室21を視認しやすくなる。また、ユーザが冷蔵室ドア211,212のうち少なくとも一方を開けたときに庫内灯4が消灯している場合に比べて、ユーザが違和感を感じることを抑制できる。
 さらに、制御部8が庫内灯4とともにカメラLED31cも点灯させることで(S102)、その後の撮影(S106)に備えることができる。また、庫内灯4とカメラLED31cとをタイミングをずらして点灯させる場合に比べて、撮影時の露光調整に要する時間を短縮できる。なお、カメラLED31cは、左右の冷蔵室ドア211,212の両方が閉められるまで点灯され続ける。
 次に、ステップS103において制御部8は、ドアセンサ6から開信号の入力があった時点から所定時間が経過したか否かを判定する。この所定時間(例えば、数秒間)は、庫内灯4が消灯(S104)されるまでの時間であり、予め設定されている。例えば、その後の露光調整(S105)の時間も考慮して、撮影時(S106)に冷蔵室ドア211,212が所定の開角度以上に開かれている可能性が高くなるように、ステップS103の所定時間が予め設定されている。
 ステップS103において、ドアセンサ6から開信号の入力があった時点から所定時間が経過していない場合(S103:No)、制御部8は、ステップS103の処理を繰り返す。一方、ドアセンサ6から開信号の入力があった時点から所定時間が経過した場合(S103:Yes)、制御部8の処理はステップS104に進む。
 ステップS104において制御部8は、庫内灯4を消灯するとともに、ブザー5を鳴らす。すなわち、制御部8は、冷蔵室ドア211,212(扉)の少なくとも一方が開かれた後、庫内灯4を消灯する際、ブザー5を鳴らす。このようにブザー5を鳴らすことで、庫内灯4が消灯した際にユーザが感じる違和感を低減できる他、撮影のための消灯であることをユーザが把握しやすくなる。
 次に、ステップS105において制御部8は、露光調整を行う。つまり、制御部8は、撮像素子31eから出力される電気信号を増幅する際のゲイン(明るさに対する感度)を調整する他、カメラユニット3のシャッタスピード等を調整する。例えば、制御部8は、撮影画像データの輝度の平均値が所定範囲内に含まれるように、前記したゲインを調整する。このように露光調整を行うことで、撮影画像における白飛び(ハレーション)や黒つぶれを抑制できる。なお、冷蔵室ドア211,212のうち少なくとも一方が開かれてから、冷蔵室ドア211,212の両方が閉じられるまで、画像入力や露光調整が所定に繰り返されるようにしてもよい。
 次に、ステップS106において制御部8は、撮影指令を出力する。すなわち、制御部8は、光電変換によって撮像素子31eから出力され、さらに、所定のゲインで増幅された電気信号を撮影画像データとして取り込む。このように、制御部8は、冷蔵室ドア211,212(扉)の少なくとも一方が開かれた後(S101:Yes)、庫内灯4を消灯し、さらに、カメラLED31c(照明部)を点灯させた状態で撮影部30に撮影を行わせる(S102、S104、S106)。
 なお、図8A、図8Bには特に示していないが、庫内灯4を消灯してから所定時間(例えば、数秒間)が経過した後、制御部8が撮影部30に撮影を行わせることが好ましい。このように庫内灯4の消灯から撮影までの間に所定時間を設けることで、露光調整(S105)を適切に行うことができる。
 また、図8A、図8Bには特に示していないが、1回目の撮影時から所定時間が経過するたびに、制御部8が撮影を行うようにしてもよい。この所定時間の長さは、ステップS103における所定時間と同一であってもよいし、また、異なっていてもよい。
 ステップS107において制御部8は、冷蔵室ドア211,212の開角度を認識する。例えば、制御部8は、エッジ検出といった画像処理を行うことで、冷蔵室ドア211,212のうち開かれているものの開角度を認識する。なお、「開角度」とは、冷蔵室ドア211,212が開いている角度であり、例えば、冷蔵庫100を平面視した場合の筐体1(図4参照)の前端を基準として認識される。
 次に、図8BのステップS108において制御部8は、冷蔵室ドア211,212の開角度が所定値以上であるか否かを判定する。この所定値は、撮影結果を保存するか(S109)、それとも破棄するか(S110)を選択する際の判定基準となる開角度の閾値であり、予め設定されている。
 ステップS108において、冷蔵室ドア211,212のうち少なくとも一方の開角度が所定値以上である場合(S108:Yes)、制御部8の処理はステップS109に進む。ステップS109において制御部8は、撮影結果を保存して、ステップS112の処理に進む。冷蔵室ドア211,212の開角度が所定値以上である場合には、冷蔵室21等が適切に撮影されている可能性が高いからである。
 なお、左側の冷蔵室ドア211のみが開かれているときの撮影結果と、右側の冷蔵室ドア212のみが開かれているときの撮影結果と、左右の冷蔵室ドア211,212の両方が開かれているときの撮影結果と、が異なる記憶領域に保存されるようにしてもよい。
 また、ステップS108において、冷蔵室ドア211,212の開角度がいずれも所定値未満である場合(S108:No)、制御部8の処理はステップS110に進む。ステップS110において制御部8は、撮影結果を破棄する。冷蔵室ドア211,212の開角度が所定値未満である場合には、冷蔵室21等が適切に撮像されていない可能性が高いからである。
 そして、ステップS111において制御部8は、ブザー5を鳴らす。すなわち、冷蔵室ドア211,212(扉)の開角度が所定値未満の状態で撮影を行った場合(S108:No)、制御部8は、ブザー5を鳴らす(S111)。これによって、今回の撮影結果が破棄されたことをユーザに知らせることができる。なお、ステップS111におけるブザー5の音と、ステップS104(庫内灯4の消灯時)のブザー5の音と、を異なるものにして、ユーザが両者を区別できるようにしてもよい。ステップS111の処理を行った後、制御部8の処理はステップS112に進む。ブザー5の鳴動に代えて、光、振動などユーザが知覚可能な出力を冷蔵庫又はユーザが使用する携帯端末54に行わせてもよい。
 ステップS112において制御部8は、庫内灯4を点灯させる。つまり、制御部8は、カメラLED31cを点灯させたまま、庫内灯4も点灯させる。このように、制御部8が、撮影部30に撮影を行わせた後(図8AのS106)、庫内灯4を点灯させる(図8BのS112)。これによって、冷蔵室21が明るく照らされるため、ユーザが冷蔵室21を視認しやすくなる。
 次に、ステップS113において制御部8は、ドアセンサ6から閉信号の入力があったか否かを判定する。ドアセンサ6から閉信号の入力がない場合(S113:No)、制御部8は、ステップS102へ戻る。ステップS113を繰り返してもよい。一方、ドアセンサ6から閉信号の入力があった場合(S113:Yes)、制御部8の処理はステップS114に進む。
 ステップS114において制御部8は、庫内灯4を消灯するとともに、カメラLED31cを消灯する。
 ステップS115において制御部8は、撮影結果を選定する。例えば、制御部8は、保存されている複数の撮影結果のうち、最も新しいものをサーバ53への送信用の撮影結果として選定する。このように、撮影ごとに撮影結果の保存または破棄を完了させることで、制御部8の必要な記憶量の低減、サーバ53への送信が必要なデータ量の低減、又は、破棄の場合に適宜ユーザにその旨の報知をすることができる。もちろん、保存の場合にその旨を報知するようにしてもよい。撮影結果が保存または破棄いずれにて処理されたかをユーザが認識可能であればよい。
 各撮影結果をユーザが認識しやすいように、撮影の時間間隔は、例えば3秒以上開けることができる。こうすると、或る撮影結果を認識させる出力を行った場合に、ユーザが当該撮影結果に対する出力であることを理解しやすい。例えば3秒未満とすると、出力を行った場合、或る撮影結果に対する出力であるか、又はその1つ以上前若しくは後の撮影結果に対する出力であるか、ユーザが区別しにくくなる虞がある。
 一方、時間間隔を開けすぎると冷蔵室ドア211,212の開時間が長くなり、冷蔵室からの冷気の流出が多量になってしまうため、時間間隔は8秒以下、好ましくは5秒以下である。
 なお、ステップS111を実行しない場合、ステップS106は、連続して複数回の撮影を実行してもよい。この場合、ステップS108~S110では、複数枚の画像データのすべてについてそれぞれ処理を実行することができる。
 ステップS116において制御部8は、撮影結果をサーバ53に送信する。すなわち、制御部8は、図7に示す無線LANユニット31g、ルータ51、及びネットワーク52を順次に介して、撮影画像データをサーバ53に送信する。ステップS116の処理を行った後、制御部8は、一連の処理を終了する(END)。
 なお、サーバ53では、例えば、撮影結果において、冷蔵室21(図3参照)の右側・左側の各領域の他、左側の冷蔵室ドア211(図3参照)の領域や、右側の冷蔵室ドア212(図3参照)の領域が抽出される。そして、サーバ53において、それぞれの領域の画像が個別的に最新のものに更新される。さらに、携帯端末54からの要求信号に応じて、サーバ53から携帯端末54に撮影画像データが送信され、携帯端末54のディスプレイ(図示せず)に所定に表示される。
 図9は、冷蔵室ドア211,212が開閉される過程を時系列的に示す説明図である。
 なお、図9では、冷蔵室ドア211,212の状態の他、庫内灯4やカメラLED31cの状態を、アルファベットのA,B,C,・・・,J,K,Lの順で時系列的に示している。また、図9では、冷蔵庫100の庫内灯4が点灯している場合には庫内灯4を図示し(例えば、状態B)、また、庫内灯4が消灯している場合には庫内灯4を図示しないようにしている(例えば、状態A)。同様に、図9では、カメラLED31cが点灯している場合にはカメラLED31cを図示し(例えば、状態B)、また、カメラLED31cが消灯している場合にはカメラLED31cを図示しないようにしている(例えば、状態A)。
 図9の例では、左右の冷蔵室ドア211,212の両方が閉まっている状態Aから、ユーザが左側の冷蔵室ドア211を開けている(状態B,C,D)。この後、左右の冷蔵室ドア211,212の両方が閉められるまで、カメラLED31cは点灯した状態で維持される(図8AのS102)。また、左側の冷蔵室ドア211が開けられ始めた時点から所定時間が経過するまでは(S103:No)、状態B,Cに示すように、庫内灯4及びカメラLED31cの両方が点灯している(S102)。そして、左側の冷蔵室ドア211が開けられ始めた時点から所定時間が経過した場合(図8AのS103:Yes)、状態Dに示すように、庫内灯4が消灯し、カメラLED31cが点灯した状態で自動撮影が行われる(S104~S106)。その後、状態Eにおいて庫内灯4が再び点灯される(図8BのS112)。
 また、状態E,Fでは、左側の冷蔵室ドア211が閉められつつ、右側の冷蔵室ドア212が開けられている。この場合、状態Fに示すように、庫内灯4が消灯し、カメラLED31cが点灯した状態で自動撮影が再び行われる(図8AのS104~S106)。その後、図9の例では、状態G,H,Iに示すように、ユーザが左側の冷蔵室ドア211をいったん閉めた後に再び開けている。
 このような場合でも、状態Iに示すように、庫内灯4が消灯し、カメラLED31cが点灯した状態で自動撮影が再び行われる(図8AのS104~S106)。これによって、左右の冷蔵室ドア211,212の両方が開けられた状態で撮影できる。その後、状態Jで示すように、庫内灯4が再び点灯される(図8BのS112)。このように、左右の冷蔵室ドア211,212のうち少なくとも一方が開かれるたびに、制御部8は、カメラユニット3で冷蔵室21等の撮影を行う。
 さらに、状態Kに示すように、ユーザによって撮影ボタン7(図3参照)が押された場合、制御部8は、手動撮影を行う。この場合については、図8A、図8Bのフローチャートでは特に示していないが、制御部8は、次の処理を行う。すなわち、冷蔵室ドア211,212(扉)の少なくとも一方が開かれた後、撮影ボタン7が押された場合、制御部8は、庫内灯4を消灯し、さらに、カメラLED31c(照明部)を点灯させた状態で撮影部30に撮影を行わせる(状態K)。なお、庫内灯4を消灯する際、ユーザの違和感を低減するために、制御部8がブザー5を鳴らすようにしてもよい。制御部8は、手動撮影を行った後、状態Lに示すように、庫内灯4を再び点灯させる。
 なお、撮影ボタン7の操作に基づく撮影(手動撮影)を行った場合、この撮影の結果を他の撮影結果(自動撮影の結果)よりも優先して、制御部8が携帯端末54(図7参照)への表示に用いることが好ましい。これによって、ユーザは、撮影ボタン7を押すことで撮影された結果を、自身の携帯端末54(図7参照)で確認できる。
 また、制御部8は、撮影ボタン7の操作に基づく撮影後(手動撮影の後)であって、冷蔵室ドア211,212(扉)の少なくとも一方が開かれている間は、再び撮影(自動撮影)を行わないことが好ましい。手動撮影の結果が優先的に送信される場合、その後に自動撮影を行う必要が特にないからである。
 また、ユーザが、冷蔵室ドア211,212のうち少なくとも一方をしっかりと閉めずに、いわゆる半ドアの状態になっている場合には、所定時間ごとに自動撮影が行われるが、その撮影結果はサーバ53(図7参照)には送信されない。いわゆる半ドアの場合には、通常、冷蔵室ドア211,212の開角度が所定値未満になり(図8BのS108:No)、その撮影結果が破棄されるからである(S110)。
 図10は、カメラユニットの撮影結果であって、画像処理が行われていない状態の例である。
 なお、図10では、紙面上側を前方とし、紙面下側を後方としている関係上、図3に対して、左右が反転している(図11、図12A、図12Bも同様)。図10の例では、左右の冷蔵室ドア211,212の両方が開かれており、冷蔵室21の他、左側の冷蔵室ドア211のドアポケット211cや、右側の冷蔵室ドア212のドアポケット212cも撮影されている。
 特に、カメラユニット3(図5参照)のレンズ31aとして、魚眼レンズが用いられることで、広範囲の画角で撮像できる。ただし、画像処理が行われていない状態では、図10に示すように、実際には直線状の稜線が湾曲して写る他、同じ長さの稜線であっても、カメラユニット3から遠くなるにつれて、撮影画像における画素数が少なくなる。
 図11は、カメラユニット3の撮影結果であって、画像処理が行われた状態の例である。
 例えば、図10の撮影結果に基づいて、サーバ53(図7参照)で所定の画像処理が行われることで、あたかも冷蔵室21や左右の冷蔵室ドア211,212のそれぞれを正面から見たような画像に変換される。このような画像が携帯端末54(図7参照)に表示されることで、ユーザは、冷蔵室21等にどのような食品が収容されているかを一目で把握できる。
 次に、制御部8による露光調整(図8AのS105)の処理の詳細について、図12A(第1実施形態)、及び図12B(比較例)を用いて詳細に説明する。
 図12Aは、第1実施形態に係る冷蔵庫において、露光調整を行う際の基準となる領域の候補を示す説明図である。
 前記したように、露光調整の処理(図8AのS105)では、撮像素子31e(図7参照)から出力される電気信号を増幅する際のゲインが調整される。第1実施形態では、露光調整における画像の明るさの度合いを示す基準として、図12Aに示す3つの矩形状の領域61~63のうち少なくとも一つを用いるようにしている。つまり、左側の冷蔵室ドア211の領域61と、右側の冷蔵室ドア212の領域62と、これらの領域61,62の間の所定の領域63と、のうち少なくとも一つが用いられる。なお、冷蔵室ドア211,212の開角度に基づいて、領域61~63の位置や大きさが適宜に変更されるようにしてもよい。
 図12Aの例では、左側の冷蔵室ドア211が開かれているが、右側の冷蔵室ドア212は閉じた状態になっている。このような場合、制御部8は、左側の冷蔵室ドア211に対応する領域61の輝度の平均値を基準として、露光調整を行う。つまり、制御部8は、領域61の輝度の平均値が所定範囲に含まれるように、撮像素子31e(図7参照)から出力される電気信号を増幅する際のゲインを調整する。これによって、閉状態である右側の冷蔵室ドア212の領域62や、その一部が左側の冷蔵室ドア211から外れている領域63が、ゲインを調整する際の基準から外される。したがって、冷蔵室の周囲が暗い場合でも、制御部8がゲインを上げすぎることなく、露光調整を適切に行うことができる。
 このように、制御部8は、右側の冷蔵室ドア212(右ドア)、及び左側の冷蔵室ドア211(左ドア)のうち一方が開けられた場合、撮影部30の視野内で、前記した一方に対応する領域を基準として、撮影時の露光のゲインを調整する。なお、左右の冷蔵室ドア211,212の開閉状態を示す信号が、左右のそれぞれのドアセンサ6(図7参照)から制御部8に出力される。
 また、3つの領域61~63のうち、画像の輝度の平均値が最も高いものを基準として、露光調整が行われるようにしてもよい。すなわち、制御部8は、撮影部30の視野に含まれる複数の領域61~63のうち、画像の輝度の平均値が最も高い領域を基準として、撮影時の露光のゲインを調整する。これによって、ゲインが高くなりすぎることを抑制し、ひいては、撮影画像の白飛び(ハレーション)を抑制できる。
 また、左右の冷蔵室ドア211,212のうち、ドアセンサ6から開信号が入力されている扉の少なくとも一部を含む領域であって、画像の輝度の平均値が最も高いものを基準に露光調整が行われるようにしてもよい。これによって、例えば、冷蔵庫100の外部から照射された光が閉状態の冷蔵室ドア212の表面で反射するような状況でも、露光調整におけるゲインを制御部8が適切に設定できる。これによって、撮影画像において、白飛びや黒つぶれが生じることを抑制できる。
 図12Bは、比較例に係る冷蔵庫において、露光調整を行う際の輝度の基準となる領域を示す説明図である。
 図12Bの比較例では、露光調整を行う際の基準として、1つの矩形状の領域60が設定されている。例えば、左右の冷蔵室ドア211,212が開かれた場合に、これらの冷蔵室ドア211,212の両方を含むように矩形状の領域60が設定されている。このように大きな1つの領域60を用いた場合、冷蔵庫100の周囲が暗い状況では、撮影によって右側の冷蔵室ドア212が暗く写るため、光に対する感度を上げるためにゲインが高めに設定される。その結果、撮影画像において、開状態の左側の冷蔵室ドア211や、冷蔵室21の左半分の部分で白飛びが生じやすくなる。
 これに対して第1実施形態(図12A参照)では、例えば、冷蔵室ドア211,212の開閉状態に基づいて、露光調整を行う際の基準となる領域を制御部8が選択するようにしている。これによって、撮影画像の白飛びを抑制し、ユーザが視認しやすい鮮明な画像を携帯端末54(図7参照)に表示させることができる。
 なお、冷蔵室21(貯蔵室)の壁面、及び、冷蔵室ドア211,212(扉)の内板211b,212b(図3参照)が、それぞれ、白色であってもよい。ここで、「白色」とは、可視光のスペクトルの略全域に亘って、50%以上の反射率で反射するような色である。別の観点では、「白色」とは、RGB表色系において、R(Red),G(Green),B(Blue)の各要素の明度が略同一であり、かつ、50%以上の反射率で反射するような色である。
 冷蔵室21の壁面等が白色である場合、撮影結果が白飛びしやすい傾向があるが、制御部8が、露光調整を行う際の基準となる領域を適宜に選択することで、白飛びを抑制できる。このように、第1実施形態によれば、カメラユニット3を用いて、冷蔵室21等を適切に撮影できる。したがって、ユーザが携帯端末54を見て、冷蔵室21等の状態を視認しやすくなる。
≪第2実施形態≫
 第2実施形態は、左右の冷蔵室ドア211,212(図13参照)の下面に設けられた取手部211e,212e(図13参照)の付近に撮影ボタン7A(図13参照)が設けられる点が、第1実施形態とは異なっている。なお、その他については、第1実施形態と同様である。したがって、第1実施形態とは異なる部分について説明し、重複する部分については説明を省略する。
 図13は、第2実施形態に係る冷蔵庫100Aが備える左右の冷蔵室ドア211,212の正面図及び下面図である。
 なお、図13では、冷蔵室ドア211,212の正面図の紙面下側に、その下面図を図示している。図13に示すように、左側の冷蔵室ドア211の下面には、上側に凹んでなる取手部211eが、横方向の所定長さに亘って設けられている。
 また、左側の冷蔵室ドア211の下面において、取手部211eよりも内側(ヒンジの軸211fとは反対側)には、手動撮影を行う際にユーザによって押される撮影ボタン7Aが設けられている。つまり、冷蔵室ドア211(扉)の取手部211eの外側であって、この取手部211eの付近に撮影ボタン7Aが設けられている。同様に、右側の冷蔵室ドア212の下面にも、取手部212eや撮影ボタン7Aが設けられている。
 このように撮影ボタン7Aを配置することで、例えば、ユーザが右側の冷蔵室ドア212を開ける際に取手部212eに手をかけたとき、意図せずに誤って撮影ボタン7Aを押してしまうことを防止できる。なお、ユーザが右側の取手部211eに右手をかけると、手のひらが上側に向き、さらに、右手の親指が外側(右側)に位置する状態になる。図13の例では、取手部212eよりも内側(左側)に撮影ボタン7Aが設けられている。したがって、ユーザが取手部212eに右手をかけた際、右手の親指が誤って撮影ボタン7Aに触れることを防止できる。なお、左側の冷蔵室ドア211の撮影ボタン7Aについても同様のことがいえる。
 また、取手部212eの付近に撮影ボタン7Aが設けられているため、ユーザは、冷蔵室ドア212に手をかけたまま、その手を移動させ、指先の感触で撮影ボタン7Aを押すことができる。したがって、ユーザが撮影ボタン7Aを押す際、冷蔵室ドア212にかけた手をいったん放す必要が特にないため、操作性を高めることができる。また、ユーザが、冷蔵室ドア212を所定に開いて、冷蔵室ドア212の回動を止めた状態で撮影を行えるため、撮影画像のブレを抑制できる。さらに、冷蔵室ドア212の庫内側の内板211b,212b、庫外側の前面、冷蔵室21の壁面などに撮影ボタン7Aを設ける場合に比べて、撮影画像上でユーザの手が写り込むことを抑制できる。また、取手部212eの付近に撮影ボタン7Aを設けることで、回転仕切211d(図3参照)や操作パネル(図示せず)の配線と、撮影ボタン7Aの配線と、の共用も可能になる。
 なお、撮影ボタン7Aの操作に基づく制御部8(図7参照)の処理については、第1実施形態(図8A、図8B参照)と同様であるから、説明を省略する。
 図14Aは、冷蔵庫が備える右側の冷蔵室ドア212の下部の断面斜視図である。
 なお、図14Aの構成は、図13に対応している。図14Aに示すように、右側の冷蔵室ドア212の撮影ボタン7Aは、ユーザによって押される樹脂製のスイッチ部71Aと、スイッチ部71Aの外側に貼られるラミネートフィルム72Aと、スイッチ部71Aの押圧に伴って所定の電気信号を発生させるスイッチ基板73Aと、を備えている。また、スイッチ基板73Aには、複数の配線80が接続されている。これらの配線80には、電力線や信号線が含まれている。なお、左側の冷蔵室ドア211(図13参照)も同様の構成になっている。
 図14Bは、冷蔵庫が備える右側の冷蔵室ドア212の下部の断面図である。
 なお、図14Bの構成は、図13や図14Aに対応している。図14Bに示すように、冷蔵室ドア212(扉)の内部において、撮影ボタン7Aの周囲の領域91aを他から仕切る隔壁92が設けられている。隔壁92には、撮影ボタン7Aに接続される配線80の挿通孔93が設けられている。挿通孔93には、この挿通孔93を塞ぐシール部材94が設置されている。このようなシール部材94として、例えば、ウレタンフォームが用いられる。そして、シール部材94に配線80が挿通されている。つまり、挿通孔93を介して配線80が挿通された状態で、シール部材94によって挿通孔93が塞がれている。
 このようなシール部材94を設けることで、製造時に冷蔵室ドア212の内部空間にウレタン等の断熱材が注入(充填)された際、挿通孔93を介して、断熱材が撮影ボタン7A側に漏れ出ることを防止できる。また、撮影ボタン7Aに接続されている配線80を隔壁92の上側の領域91bに引き出すことが可能になる。
≪変形例≫
 以上、本開示に係る冷蔵庫100等について各実施形態により説明したが、これらの記載に限定されるものではなく、種々の変更を行うことができる。
 例えば、各実施形態では、冷蔵庫100(図2参照)の筐体1の上面にカメラユニット3が設けられる構成について説明したが、これに限らない。すなわち、筐体1の外側における別の所定位置にカメラユニット3が設けられるようにしてもよい。
 また、各実施形態では、カメラLED31c(図5参照)が、レンズ31a(図5参照)の後側に配置される構成について説明したが、これに限らない。例えば、レンズ31aの前側にカメラLEDが配置されるようにしてもよい。また、複数のカメラLEDが所定に配置されるようにしてもよい。
 また、各実施形態では、一例として、冷蔵室21の他、冷蔵室ドア211,212の庫内側をカメラユニット3で撮影する場合について説明したが、これに限らない。例えば、引出し式の製氷室ドア221(扉:図1参照)や、上段冷凍室ドア231(扉)の他、野菜室ドア241(扉)や下段冷凍室ドア251(扉)のうち、少なくとも一つをカメラユニット3で撮影するようにしてもよい。
 また、各実施形態では、左右の冷蔵室ドア211,212に撮影ボタン7(図3参照)が設けられる構成について説明したが、これに限らない。例えば、引出し式の製氷室ドア221(図1参照)や、上段冷凍室ドア231の他、野菜室ドア241や下段冷凍室ドア251のうち、少なくとも一つに撮影ボタン(図示せず)を設けるようにしてもよい。
 また、各実施形態では、冷蔵室ドア211,212のうち少なくとも一方が開かれた場合(図8AのS101:Yes)、制御部8が、庫内灯4を点灯させるとともに、カメラLED31cを点灯させる処理(S102)について説明したが、これに限らない。すなわち、冷蔵室ドア211,212のうち少なくとも一方が開かれた場合、制御部8が、庫内灯4とカメラLED31cとをタイミングを所定にずらして点灯させるようにしてもよい。
 また、各実施形態では、左右の冷蔵室ドア211,212のうち少なくとも一方が開かれてから、冷蔵室ドア211,212の両方が閉じられるまで、制御部8がカメラLED31cを点灯させ続ける場合について説明したが、これに限らない。例えば、露光調整(図8AのS105)を行っていないとき、制御部8が所定のタイミグでカメラLED31cを消灯するようにしてもよい。
 また、第2実施形態では、冷蔵室ドア211,212(図13参照)の下面に凹状の取手部211e,212eが設けられる構成について説明したが、これに限らない。例えば、冷蔵室ドア211,212に所定のドアハンドル(図示せず)が設けられた構成であってもよい。この場合において、ドアハンドルの外側に撮影ボタン(図示せず)が設けられてもよいし、また、ドアハンドル自体の所定箇所に撮影ボタン(図示せず)が設けられてもよい。
 また、各実施形態で説明した冷蔵庫100等は一例であり、他の形態の冷蔵庫又は貯蔵庫にも適用できる。例えば、片開き式の冷蔵室ドア(図示せず)を備える冷蔵庫や、ポータブル冷蔵庫(図示せず)にも各実施形態を適用できる。貯蔵庫に備えられた演算装置やセンサから情報を優先又は無線通信によって受信して撮影を実行可能で、貯蔵庫とは別体の撮影装置であってもよい。
 また、各実施形態は本発明を分かりやすく説明するために詳細に記載したものであり、必ずしも説明した全ての構成を備えるものに限定されない。また、実施形態の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
 また、前記した機構や構成は説明上必要と考えられるものを示しており、製品上必ずしも全ての機構や構成を示しているとは限らない。
 100,100A 冷蔵庫
 1 筐体
 10 開口
 21 冷蔵室(貯蔵室)
 211 冷蔵室ドア(扉)
 212 冷蔵室ドア(扉)
 211a,212a ヒンジ
 211b,212b 内板
 211e,212e 取手部
 22 製氷室(貯蔵室)
 221 製氷室ドア(扉)
 23 上段冷凍室(貯蔵室)
 231 上段冷凍室ドア(扉)
 24 野菜室(貯蔵室)
 241 野菜室ドア(扉)
 25 下段冷凍室(貯蔵室)
 251 下段冷凍室ドア(扉)
 3 カメラユニット
 4 庫内灯
 5 ブザー
 6 ドアセンサ
 7,7A 撮影ボタン
 8 制御部
 31c カメラLED(照明部)
 30 撮影部
 54 携帯端末
 61,62,63 領域
 80 配線
 91a 領域
 92 隔壁
 93 挿通孔
 94 シール部材

Claims (16)

  1.  貯蔵室を有する筐体と、
     前記貯蔵室の開口を塞ぐ、回動式の扉と、
     前記筐体の外側に設けられ、少なくとも前記貯蔵室を撮影する撮影部と、
     前記扉に設けられる撮影ボタンと、を備え、
     前記撮影ボタンは、前記扉において、当該扉のヒンジが設けられた側の反対側に設けられることを特徴とする冷蔵庫。
  2.  前記撮影部は、前記撮影ボタンの押下以外の指令で撮影を行う自動撮影を実行でき、
     該自動撮影の実行中、前記撮影ボタンが押下された場合、撮影が行われる請求項1に記載の冷蔵庫。
  3.  前記撮影部は、前記撮影ボタンの押下に基づく撮影が行われた場合、前記扉が開かれている間は、再び撮影は行わないことを特徴とする請求項2に記載の冷蔵庫。
  4.  前記撮影部は、前記撮影ボタンの押下に基づく撮影を行った場合、当該撮影の結果を他の撮影結果よりも優先して出力させることを特徴とする請求項2または3に記載の冷蔵庫。
  5.  前記撮影部は、前記撮影ボタンの押下に基づく撮影を行った場合、前記扉の開角度が所定値以上のときに、当該撮影の結果を出力する又は出力の候補とすることを特徴とする請求項2乃至4のいずれか一項に記載の冷蔵庫。
  6.  前記撮影ボタンは、前記扉の側面のうち、上下に延在する面であって前記ヒンジとは反対側の面に設けられることを特徴とする請求項1乃至5のいずれか一項に記載の冷蔵庫。
  7.  前記撮影ボタンは、前記扉の側面のうち、下面に配された凹部としての取手部の付近に設けられることを特徴とする請求項1乃至5のいずれか一項に記載の冷蔵庫。
  8.  前記扉は、前記撮影ボタンの周囲の領域を他から仕切る隔壁を備え、
     前記隔壁には、前記撮影ボタンに接続される配線の挿通孔が設けられ、
     前記挿通孔を介して前記配線が挿通された状態で前記挿通孔を塞ぐシール部材を備えることを特徴とする請求項1乃至6のいずれか一項に記載の冷蔵庫。
  9.  請求項1において、
     前記筐体の内側に設けられる庫内灯と、
     前記撮影部に配された照明部と、を備えるとともに、
     前記庫内灯が消灯、さらに、前記照明部が点灯した状態で露光調整をし、前記撮影部に撮影を行わせる制御部を備える冷蔵庫。
  10.  請求項9において、
     前記制御部は、前記庫内灯を消灯してから所定時間が経過した後、前記撮影部に撮影を行わせる冷蔵庫。
  11.  請求項9において、
     前記制御部は、前記扉が開かれた直後には前記庫内灯を点灯させるとともに、前記照明部も点灯させる冷蔵庫。
  12.  請求項1において、
     前記扉が開かれてから閉じられるまでの間に、前記撮影部に繰り返し撮影を行わせることが可能な制御部を備え、
     前記制御部は、或る撮影の実行後、該撮影の撮影結果を保存するか、それとも破棄するかの判定を行い、該判定に応じた該撮影結果の保存または破棄を完了してから、次の撮影を行う冷蔵庫。
  13.  請求項12において、
     前記撮影結果の保存又は破棄の何れが実行されたかをユーザに認識させる出力を行う冷蔵庫。
  14.  請求項12において、
     前記撮影部が行う、繰り返しの撮影の時間間隔は、3秒以上である冷蔵庫。
  15.  請求項12において、
     前記制御部は、前記扉が閉じられた後に、出力する撮影結果の選定を実行する冷蔵庫。
  16.  請求項1において、
     前記扉が開かれてから閉じられるまでの間に、前記撮影部に繰り返し撮影を行わせることが可能な制御部を備え、
     前記制御部は、或る撮影の実行後、該撮影の撮影結果を出力候補とするか否かの判定を行い、該判定に応じた該撮影結果の処理を完了してから、次の撮影を行う冷蔵庫。
PCT/JP2022/024639 2021-09-15 2022-06-21 冷蔵庫 WO2023042504A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202280009335.2A CN116724207A (zh) 2021-09-15 2022-06-21 冰箱

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP2021149849A JP7337889B2 (ja) 2021-09-15 2021-09-15 冷蔵庫
JP2021-149849 2021-09-15
JP2021170612A JP2023060927A (ja) 2021-10-19 2021-10-19 貯蔵庫並びに貯蔵庫及び撮影装置が行う撮影方法
JP2021-170613 2021-10-19
JP2021-170612 2021-10-19
JP2021170613A JP7353340B2 (ja) 2021-10-19 2021-10-19 冷蔵庫

Publications (1)

Publication Number Publication Date
WO2023042504A1 true WO2023042504A1 (ja) 2023-03-23

Family

ID=85602144

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/024639 WO2023042504A1 (ja) 2021-09-15 2022-06-21 冷蔵庫

Country Status (1)

Country Link
WO (1) WO2023042504A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003042626A (ja) * 2001-07-26 2003-02-13 Toshiba Corp 冷蔵庫
JP2004076989A (ja) * 2002-08-13 2004-03-11 Sanyo Electric Co Ltd 断熱扉及び断熱扉の製造方法
CN113048713A (zh) * 2019-12-27 2021-06-29 青岛海尔电冰箱有限公司 冰箱外观的控制方法
WO2021250913A1 (ja) * 2020-06-09 2021-12-16 日立グローバルライフソリューションズ株式会社 冷蔵庫および出力装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003042626A (ja) * 2001-07-26 2003-02-13 Toshiba Corp 冷蔵庫
JP2004076989A (ja) * 2002-08-13 2004-03-11 Sanyo Electric Co Ltd 断熱扉及び断熱扉の製造方法
CN113048713A (zh) * 2019-12-27 2021-06-29 青岛海尔电冰箱有限公司 冰箱外观的控制方法
WO2021250913A1 (ja) * 2020-06-09 2021-12-16 日立グローバルライフソリューションズ株式会社 冷蔵庫および出力装置

Also Published As

Publication number Publication date
TW202314174A (zh) 2023-04-01

Similar Documents

Publication Publication Date Title
JP6371965B2 (ja) 冷蔵庫及び冷蔵庫システム
JP6221048B2 (ja) 冷蔵庫
JP6322803B2 (ja) 冷蔵庫及び冷蔵庫システム
JP6167330B2 (ja) 冷蔵庫及び冷蔵庫システム
WO2023042504A1 (ja) 冷蔵庫
JP7337889B2 (ja) 冷蔵庫
JP2000055533A (ja) 冷却貯蔵庫及びその管理システム
WO2023067966A1 (ja) 貯蔵庫並びに貯蔵庫及び撮影装置が行う撮影方法
JP7353340B2 (ja) 冷蔵庫
JP6485678B2 (ja) 冷蔵庫及び冷蔵庫システム
JP6167327B2 (ja) 冷蔵庫
JP2023060927A (ja) 貯蔵庫並びに貯蔵庫及び撮影装置が行う撮影方法
TWI846010B (zh) 冰箱
JP2018004247A (ja) 冷蔵庫
JP2014196842A (ja) 冷蔵庫及び冷蔵庫システム
JP6500251B2 (ja) 冷蔵庫
JP6641109B2 (ja) 冷蔵庫
JP2019007728A (ja) 冷蔵庫
JP6167288B2 (ja) 冷蔵庫
JP6671002B2 (ja) 冷蔵庫
JP6167328B2 (ja) 冷蔵庫
WO2022038799A1 (ja) 冷蔵庫内の画像データ処理方法および冷蔵庫
JP6145701B2 (ja) 冷蔵庫
JP2024038577A (ja) 貯蔵庫及びカメラユニット
JP2024040654A (ja) 貯蔵庫

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22869653

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 202280009335.2

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 2301005248

Country of ref document: TH

NENP Non-entry into the national phase

Ref country code: DE