WO2021250913A1 - 冷蔵庫および出力装置 - Google Patents

冷蔵庫および出力装置 Download PDF

Info

Publication number
WO2021250913A1
WO2021250913A1 PCT/JP2020/043316 JP2020043316W WO2021250913A1 WO 2021250913 A1 WO2021250913 A1 WO 2021250913A1 JP 2020043316 W JP2020043316 W JP 2020043316W WO 2021250913 A1 WO2021250913 A1 WO 2021250913A1
Authority
WO
WIPO (PCT)
Prior art keywords
image pickup
image
refrigerator
lens
mirror
Prior art date
Application number
PCT/JP2020/043316
Other languages
English (en)
French (fr)
Inventor
幸太郎 高橋
真司 上野
将 矢野
康之 上甲
貴志 藤元
篤彦 漆原
佳朗 三上
拓也 川邊
純一 高木
Original Assignee
日立グローバルライフソリューションズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日立グローバルライフソリューションズ株式会社 filed Critical 日立グローバルライフソリューションズ株式会社
Priority to CN202080101856.1A priority Critical patent/CN115698611A/zh
Publication of WO2021250913A1 publication Critical patent/WO2021250913A1/ja

Links

Images

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D23/00—General constructional features

Definitions

  • the present invention relates to a refrigerator and an output device.
  • a refrigerator has been proposed in which the inside of the refrigerator is photographed with a camera for the purpose of managing the inventory of stored items.
  • the camera is provided on the front surface of the upper surface of the refrigerator body in a state of projecting forward, in the X direction (front-back direction) by the first motor, and in the Y direction by the second motor. It is rotated (left-right direction).
  • the camera automatically turns to the first shooting position for shooting the refrigerator compartment and shoots the refrigerator compartment.
  • the control means can automatically control the shooting direction of the camera corresponding to the opened door to automatically shoot. For this reason, it is possible to automatically take a picture of the state of the storage room corresponding to the opened door, and it is not necessary for the user to operate the camera one by one. It is not preferable for the reliability of the product to be movable.
  • Patent Document 1 also describes a camera having a fixed type instead of a movable type. That is, in the fixed type of Patent Document 1, the camera provided at the tip of the arm is fixed on the refrigerator main body side and in a state of being directed diagonally downward, and is the first and first driving means. No. 2 motor is provided, and the camera cover is not provided with concave lenses for a refrigerator compartment and a door pocket. The lens of the camera is a wide-angle lens, and the inside of the refrigerating room with the door open and the inside of each drawer drawn from the vegetable room etc. are included in the field of view, and these areas should be photographed with one image. (3rd Example of Patent Document 1).
  • the present invention solves the above-mentioned conventional problems, and an object of the present invention is to provide a refrigerator and an output device capable of appropriately photographing the inside of a refrigerating room (storage room).
  • the refrigerator of the present invention has a box body forming a storage chamber with an open front, an image pickup device provided outside the storage chamber, and the storage chamber in the image pickup region of the image pickup device. It is characterized by having a mirror provided outside the. Other aspects of the invention will be described in embodiments described below.
  • the refrigerating room can be appropriately photographed.
  • FIG. 1 is a front view showing the refrigerator 100 according to the first embodiment.
  • FIG. 2A is a side view showing the refrigerator 100 according to the first embodiment.
  • FIG. 2B is a side view when the image pickup apparatus 30 according to the first embodiment is housed.
  • FIG. 3 is a front view showing a state in which the door of the refrigerator 100 according to the first embodiment is opened.
  • FIG. 4 is a top view showing a state in which the door of the refrigerator 100 according to the first embodiment is opened.
  • the 6-door refrigerator 100 will be described as an example, but the description is not limited to the 6-door refrigerator 100.
  • the heat insulating box body (box body 10) of the refrigerator 100 is in the order of the refrigerating room 1, the ice making room 2 and the upper freezing room 3, the vegetable room 4, and the lower freezing room 5 arranged on the left and right from the top.
  • the refrigerator 100 includes a door that opens and closes the opening of each storage room. These doors open and close the openings of the refrigerating room 1, the left and right rotary refrigerating room doors 1a and 1b, and the openings of the ice making room 2, the upper freezing room 3, the vegetable room 4, and the lower freezing room 5.
  • a pull-out type ice making chamber door 2a a pull-out type ice making chamber door 2a, an upper refrigerating chamber door 3a, a vegetable compartment door 4a, and a lower refrigerating chamber door 5a, which are opened and closed, respectively.
  • the positions of the vegetable compartment 4 and the lower freezing chamber 5 may be changed vertically.
  • the ice making chamber 2, the upper freezing chamber 3 and the lower freezing chamber 5 are collectively referred to as a freezing chamber 7.
  • Door hinges (reference numerals omitted) are provided at the upper and lower parts of the refrigerator compartment 1 in order to fix the refrigerator compartment doors 1a and 1b to the refrigerator 100. As shown in FIGS. 3 and 4, when the refrigerating chamber doors 1a and 1b are opened and closed, door storage portions 11a (door storage portions a) and 11b (door storage portions b) are provided.
  • the refrigerating room 1 is a refrigerating storage room in which the inside of the refrigerator is set to a refrigerating temperature range (0 ° C. or higher), for example, about 4 ° C. on average.
  • the freezing chamber 7 is a freezing storage chamber in which the inside of the refrigerator is set to a freezing temperature range (less than 0 ° C.), for example, about ⁇ 18 ° C. on average.
  • the vegetable compartment 4 is a refrigerated storage chamber having a refrigerated temperature range of, for example, about 6 ° C. on average, and is a refrigerated storage chamber that suppresses drying of food.
  • an image pickup device 30 for photographing the inside of the refrigerator is arranged in a substantially central portion of the outer upper part of the storage chamber. That is, it is provided above the box body (insulated box body) of the refrigerator 100, substantially in the center.
  • the lens 34 of the image pickup apparatus 30 (see FIGS. 6A and 6B) is in front of the opening edge surface 10a of the storage chamber, preferably from the refrigerating chamber doors 1a and 1b (doors). Is also located in front. That is, by providing the image pickup device 30 outside the storage chamber and arranging one or more mirrors 37 (see FIGS. 6A and 6B) within the image pickup range, the amount of protrusion of the image pickup device 30 can be minimized. It is possible to take a bird's-eye view of the situation inside the refrigerator including the door storage portions 11a and 11b without spoiling the appearance.
  • the mirror 37 is arranged in front of the lens 34. Details of the image pickup apparatus 30 will be described later.
  • the image pickup device 30 has a sliding mechanism (a mechanism that slides in a direction perpendicular to the opening of the storage chamber) that moves back and forth, and can move back and forth across the front surface of the door of the refrigerator 100.
  • a sliding mechanism a mechanism that slides in a direction perpendicular to the opening of the storage chamber
  • the depth dimension is not affected at the time of packing.
  • the number of refrigerators loaded on the transport truck does not decrease, and even after installation, the image pickup device 30 can be stored and the image pickup range can be blindfolded when the image pickup device 30 is not used.
  • the blindfold it is possible to make the configuration in consideration of the user who does not like that the image pickup area of the camera is always within his / her own living range. Similarly, a portion of the imaging range outside the enclosure is blindfolded by a mirror, which is also suitable for such users.
  • the refrigerating room door 1b is provided with a shooting button 39 (a shooting command receiving unit that receives a shooting command from the user) that is used when manually shooting with the image pickup device 30.
  • the photographing button 39 may be provided in the refrigerating room door 1a, the box body, or another area of the door.
  • FIG. 5A is a front view showing the image pickup apparatus 30 according to the first embodiment.
  • FIG. 5B is a side view showing the image pickup apparatus 30 according to the first embodiment.
  • FIG. 5C is a side sectional view (AA sectional view of FIG. 5A) showing the image pickup apparatus 30 according to the first embodiment.
  • FIG. 6A is a perspective view showing the image pickup apparatus 30 according to the first embodiment.
  • FIG. 6B is a side sectional view showing the details of the image pickup unit of the image pickup apparatus 30 according to the first embodiment.
  • the image pickup apparatus 30 is composed of a case portion 31 and a lid portion 32, and has a camera 33 (imaging section) and a lens 34 which is a fisheye lens in front of the case portion 31. As shown in FIG. 6A, the lens 34 is surrounded by a light-shielding wall 35. A plurality of lighting units 38 are provided in the vicinity of the light-shielding wall 35. Further, a mirror 37 is provided in the vicinity of the lens 34 (in front of the lens 34).
  • control SoC 41 and the wireless LAN unit 42 are stored inside the case unit 31.
  • the control SoC41 System on a chip integrates the functions of a general microcontroller such as a processor core on one chip of an integrated circuit, as well as the functions for application purposes, and cooperates with the system. It is an integrated circuit designed to function as an integrated circuit.
  • the control SoC41 is an example of an integrated circuit, and can be replaced by another integrated circuit or the like.
  • the image pickup device 30 provided outside the storage chamber images the door storage portions 11a and 11b, preferably the inside of the storage chamber, from a bird's-eye view. Further, the mirror 37 provided in the image pickup range of the image pickup apparatus 30 and outside the storage chamber has a mirror surface arranged in front of the image pickup lens 34 toward the storage chamber.
  • the mirror 37 is partially arranged so as not to overlap the storage chamber and the image pickup range of the door storage portion within the image pickup range of the lens 34. That is, in the present embodiment, the mirror 37 is arranged in front of the lens 34.
  • the range that cannot be imaged only by the image pickup range of the lens 34 of the image pickup apparatus 30 can be supplemented by the virtual image by the mirror 37 without disturbing the image pickup range of the image pickup apparatus 30. That is, the camera 33 can take a picture of the portion that becomes a blind spot by the image taken by the lens 34 through the mirror 37 (with the image reflected in the mirror 37).
  • the mirror 37 it is possible to take a more bird's-eye view of the inside of the refrigerator while minimizing the amount of the image pickup device 30 protruding to the front of the main body, and the appearance is not spoiled. Further, the length of the wiring (wiring for power supply, etc.) connected from the main body of the refrigerator 100 to the camera 33 and the control SoC 41 can be shortened.
  • the features of the image pickup apparatus 30 will be further described.
  • the camera 33 used in the image pickup apparatus 30 has a wide angle of 180 degrees or more, and by having a fisheye lens, the entire interior of the refrigerator can be visually recognized from a bird's-eye view when the door is opened.
  • the lens 34 for the camera of the image pickup apparatus 30 is located in front of the front of the refrigerator door, the state inside the refrigerator is photographed even when only the drawer portion 6 of the vegetable compartment 4 and the lower freezing chamber 5 is opened. can do.
  • the image pickup apparatus 30 has a mirror 37 within the shooting range, and the mirror 37 has a role of expanding the shooting range by the virtual image projected on the mirror 37.
  • the image pickup apparatus 30 is provided with a lighting unit 38, and a highly visible image can be obtained by taking a picture using the lighting unit 38 outside the refrigerator, which can be adjusted to an illuminance suitable for shooting. Since the lighting provided in the refrigerator has a relatively high illuminance, the stored items are strongly reflected when the image is taken with the camera, and the photographed image is overexposed. Therefore, in the present embodiment, at the time of shooting, the lighting inside the refrigerator is turned off and the lighting unit 38 outside the refrigerator is turned on for shooting. Details will be described later in FIGS. 13 and 14.
  • the lighting of the lighting unit 38 is directional so as to illuminate the entire interior, the door storage units 11a and 11b when the door is opened, and the second storage room (for example, the vegetable room 4 and the lower freezing room 5).
  • the image pickup device 30 has the light-shielding wall 35, the direct light of the illumination unit 38 does not enter the shooting range, so that it is possible to obtain a highly visible image with suppressed reflection and overexposure.
  • (6) By providing a light-shielding wall 35 that directly blocks light between the illumination unit 38 of the image pickup apparatus 30 and the lens 34, the installation position of the illumination can be made as close as possible to the lens 34, so that the outer shape can be kept compact. Further, it is possible to obtain the effect of preventing scratches on the lens 34.
  • the image pickup device 30 includes a communication unit (wireless LAN unit 42), and image data transmitted from the communication unit is, for example, via a home wireless router (for example, a home router 53 (see FIG. 12)). Is supplied to the server 54 (see FIG. 12). Details will be described later.
  • a communication unit wireless LAN unit 42
  • image data transmitted from the communication unit is, for example, via a home wireless router (for example, a home router 53 (see FIG. 12)). Is supplied to the server 54 (see FIG. 12). Details will be described later.
  • a communication circuit for transmitting power supply and a shooting command is connected to the refrigerator main body side.
  • the refrigerator itself is powered by a commercial power source or the like.
  • the power source of the image pickup apparatus 30 can be received from a commercial power source via the refrigerator body.
  • the image pickup device 30 may be driven by a rechargeable battery.
  • FIG. 7 is an explanatory diagram showing the application effect of the image pickup apparatus 30 according to the first embodiment.
  • the size of the mirror 37 is emphasized more than in FIGS. 5B and 5C in order to make the explanation of the effect easier to understand.
  • the lens 34 of the camera 33 of the image pickup apparatus 30 in front of the front wall of the storage chamber (opening edge surface 10a of the storage chamber) as much as possible. This is because the edge of the front wall of the storage chamber becomes a blind spot in the imaging area from above.
  • the virtual image reflected and reflected by the mirror 37 has the effect of expanding to the back side of the storage chamber from the photographing area by the camera 33 as shown in FIG. Bring. If the height h of the mirror 37 is made larger, the photographing area can be further expanded.
  • FIG. 8A is an explanatory diagram showing an example of imaging by an imaging device of a comparative example.
  • FIG. 8B is an explanatory diagram showing image processing of an image pickup example by the image pickup device of the comparative example. 8A and 8B are cases where the mirror 37 is not provided.
  • FIG. 8A is an image before the image correction processing in the refrigerator, and the image through the lens 34 of the fisheye lens is a real image.
  • FIG. 8B is an image after performing the predetermined image processing of the present embodiment and performing the image correction processing in the refrigerator (without a mirror). This is an image converted into an image that is easy for the user who uses the refrigerator 100 to check what is in the refrigerator. Looking at FIG. 8B, the objects in the door storage portion a, the door storage portion b, and the storage c can be seen as real images.
  • FIG. 9A is an explanatory diagram showing an example of imaging by the imaging apparatus according to the first embodiment.
  • FIG. 9B is an explanatory diagram showing image processing of an image pickup example by the image pickup apparatus according to the first embodiment.
  • 9A and 9B are cases where the mirror 37 of the present embodiment is provided.
  • FIG. 9A is an image before the image correction processing in the refrigerator, and the image through the lens 34 of the fisheye lens is captured by the real image shown in FIG. 8A and the virtual image of the storage c via the mirror 37 (via the mirror 37). It is a composite image with the image).
  • FIG. 9B is an image after the internal image correction processing (with a mirror) that has undergone the predetermined image processing of the present embodiment. This is an image converted into an image that is easy for the user who uses the refrigerator 100 to check what is in the refrigerator.
  • the one of the door storage portion a and the door storage portion b is the real image
  • the one of the storage c is a combination of a virtual image through the mirror 37 and a real image not through the mirror 37, and is converted. There is.
  • the viewing area in the depth direction is enlarged by the mirror 37, especially in the upper stage.
  • the explanatory diagram uses a can as an example, and a pull tab (not shown) can be seen when there is a mirror. By enlarging the mirror 37, the visible area can be further expanded.
  • FIG. 10 is a side view showing a state in which the drawer portion 6 of the refrigerator 100 according to the first embodiment is pulled out.
  • FIG. 11 is a diagram showing an image pickup example of the drawer portion 6 of the refrigerator 100 according to the first embodiment.
  • the image pickup device 30 for photographing the inside of the refrigerator can image the inside of the drawer portion 6.
  • FIG. 11 is an image of the drawer portion 6 of the vegetable compartment 4, and it is possible to grasp the stored state of the vegetables.
  • FIG. 12 is a configuration diagram showing a photographing system of the refrigerator 100 according to the first embodiment.
  • door sensors (not shown) that detect the open / closed state of the refrigerating room doors 1a and 1b, the ice making room door 2a, the upper freezing room door 3a, the vegetable room door 4a, and the lower freezing room door 5a, respectively (not shown). Etc. are also provided.
  • a main microcomputer 52 (control device) equipped with a memory such as a CPU (Central Processing Unit), a ROM (Read Only Memory) and a RAM (Random Access Memory), and an interface circuit, which are a part of the control device. , Control unit) is arranged.
  • the main microcomputer 52 controls the photographing system that photographs the inside of the refrigerator based on the information from the door sensor or the photographing button 39.
  • the main microcomputer 52 also supplies power to the image pickup apparatus 30.
  • the main microcomputer 52 When the main microcomputer 52 detects a predetermined angle or more based on information such as the door opening angle from the door sensor at the time of automatic shooting setting, the main microcomputer 52 transmits a shooting command to the control SoC41.
  • the control SoC 41 issues a shooting instruction to the camera 33 and acquires unprocessed image data from the camera 33.
  • the control SoC41 performs image processing on the unprocessed image data by combining a real image and a virtual image, for example, as shown in FIG. 9B.
  • the main microcomputer 52 detects that the shooting button 39 has been operated during the manual shooting setting, the main microcomputer 52 transmits a shooting command to the control SoC 41. Subsequent processing is the same as when automatic shooting is set.
  • the image pickup device 30 is provided with a wireless LAN unit 42 that can be connected to the home router 53.
  • the image data in the refrigerator processed by the control Soc 41 can be transmitted to the server 54 via the home router 53.
  • the server 54 transmits the image data in the refrigerator in response to the image display request in the refrigerator from a mobile device such as a smartphone 55 owned by the user, a personal computer, or the like. As a result, the user can grasp the situation in the refrigerator.
  • FIG. 13 is a flowchart showing a process at the time of manual shooting setting according to the first embodiment. It will be described with reference to FIG. 12 as appropriate.
  • the main microcomputer 52 determines whether or not the door is open (door open?) By the door sensor. (S32) If there is a door opening (S32, Yes), the process proceeds to S33. On the other hand, when the door is not opened (S32, No), the main microcomputer 52 returns to S32.
  • the main microcomputer 52 determines whether or not the shooting button 39 is operated (pressed), and if the shooting button 39 is pressed (S33, Yes), the process proceeds to S34 and the shooting button 39 is not pressed. In the case (S33, Yes), the process returns to S32.
  • the main microcomputer 52 issues a shooting command to the control SoC41 to turn off the lighting inside the refrigerator and turn on the lighting outside the refrigerator (lighting unit 38) (S35).
  • the control SoC 41 commands the camera 33 to take a picture (S36).
  • the main microcomputer 52 turns on the lighting inside the refrigerator and turns off the lighting outside the refrigerator (illumination unit 38) (S37).
  • the camera 33 transmits unprocessed image data (for example, FIG. 9A) to the control SoC41 (S38), and the control SoC41 performs in-house image correction processing (image processing) (S39). Specifically, as described with reference to FIG. 9B, a composite image of a virtual image and a real image is created.
  • the control SoC 41 updates the processed image data to the server 54 via the wireless LAN unit 42 and the home router 53 (S40).
  • the server 54 notifies the user's mobile device or the like (S41). The above is the process when manual shooting is set.
  • FIG. 14 is a flowchart showing a process at the time of automatic shooting setting according to the first embodiment. It will be described in a timely manner with reference to FIG. The same process as in FIG. 13 will be omitted.
  • the setting from the setting device (not shown) is the camera automatic shooting setting (camera automatic setting ON) (S31A)
  • the main microcomputer 52 determines whether or not the door is opened by the door sensor (door open?). If the determination is made (S32) and the door is open (S32, Yes), the process proceeds to S33. On the other hand, when the door is not opened (S32, No), the main microcomputer 52 returns to S32.
  • the main microcomputer 52 determines whether or not the door opening angle is equal to or greater than a predetermined angle (for example, the door angle is 85 degrees or more) (S33A), and the door opening angle is equal to or greater than the predetermined angle (S33A). , Yes), if the door opening angle is less than a predetermined angle (S33A, No), the process returns to S32.
  • S34 to S41 are the same as in FIG.
  • S33A in the case of the refrigerating room 1 having double doors, if the opening angle of at least one of the refrigerating room doors 1a and 1b is a predetermined angle (S33A, Yes), the process proceeds to S34.
  • a predetermined angle for example, the door angle is 85 degrees or more
  • a detection unit for example, the main microcomputer 52
  • 3A It has a detection unit (for example, installed in the drawer unit 6) that detects when the drawer distance of the refrigerator 100 exceeds a certain level, and the detection unit detects the operation of the drawer and automatically takes a picture.
  • the imaging range of the vegetable room or the freezing room can be kept substantially constant.
  • a shooting button (for example, a shooting button 39) is provided on the door of the refrigerator, and when the user presses the shooting button, the lighting inside the refrigerator is turned off and the lighting of the image pickup apparatus 30 is turned on before shooting. Therefore, it is easy to recognize the timing of shooting.
  • the captured image is subjected to image correction processing, and the distorted image is corrected by the wide-angle camera, so that an image close to the user's line of sight can be provided.
  • 6A It has an application service that allows the user to confirm the image via a mobile phone or the like, and the image is a storage room in which the image taken by the detection unit provided in the door and the drawer is. It is possible to automatically determine whether the image is an image of.
  • Second Embodiment In the first embodiment, it has been described that the image pickup apparatus 30 has a slide mechanism, but the present invention is not limited to this. In the second embodiment, the two-fold mechanism will be described.
  • FIG. 15A is an explanatory diagram showing a normal state of the image pickup apparatus according to the second embodiment.
  • FIG. 15B is an explanatory diagram showing a state in which the image pickup apparatus according to the second embodiment is being stored.
  • FIG. 15C is an explanatory diagram showing a state when the image pickup apparatus according to the second embodiment is stored.
  • the refrigerator 100 of the second embodiment has a box body forming a storage chamber with an open front, an image pickup device 30 provided outside the storage chamber, and the refrigerator 100 with respect to a direction at least perpendicular to the opening.
  • a support portion 45 (hinge portion) that movably supports the image pickup apparatus 30 is provided.
  • the tip portion of the image pickup apparatus 30 having the camera 33 is configured to be folded in half from the support portion 45 and does not affect the depth dimension at the time of packing.
  • the load quantity of the image is not reduced, and even after the installation, the image pickup device 30 can be stored and the image pickup range can be blinded when the image pickup device 30 is not used.
  • the image pickup device 30 enables revolution (moving in a circular trajectory around the hinge portion; revolution around the axis) in the direction of looking into the inside of the refrigerator. Since the box body exists in the circular locus, the revolving angle is less than 360 ° when observed from the direction orthogonal to the revolving plane.
  • a drive unit capable of applying a force in the revolution direction may be attached to the image pickup apparatus 30, and the angle may be controlled so as to look into the inside of the refrigerator or the like at the time of image pickup.
  • the image pickup device 30 can be positioned within the movement locus of the door at the time of image pickup.
  • the refrigerator 100 of the present embodiment described above has the following features.
  • the refrigerator 100 of the present embodiment includes a box body 10 forming a storage chamber with an open front, an image pickup device 30 provided outside the storage chamber, and an image pickup device 30 inside the image pickup region and outside the storage chamber. It is provided with a mirror 37 (see FIGS. 1 to 4 and 7).
  • the virtual image by the imaged mirror 37 includes the storage chamber (see FIG. 8B).
  • the image pickup device 30 includes a lens 34, the image pickup device 30 is provided above the box body 10, and the lens 34 is located in front of the opening edge surface 10a of the storage chamber (see FIG. 7).
  • the storage room has at least a first storage room with double doors (for example, a refrigerating room 1) and a second storage room with a front-rear opening (for example, an ice making room 2, an upper freezing room 3, a vegetable room 4, and a lower freezing room 5).
  • a first storage room with double doors for example, a refrigerating room 1
  • a second storage room with a front-rear opening for example, an ice making room 2, an upper freezing room 3, a vegetable room 4, and a lower freezing room 5.
  • the image pickup apparatus 30 includes a lens 34, and the mirror 37 is arranged in front of the lens 34 with the mirror surface facing the storage chamber (see FIG. 7).
  • the image pickup apparatus 30 includes a lens 34, one or a plurality of illumination units 38 around the lens 34, and a light-shielding wall 35 between the lens 34 and the illumination unit 38 (see FIGS. 6A and 6B).
  • the image pickup apparatus includes a lens 34, one or more lighting units 38 around the lens 34, and an interior light provided in the storage chamber. This is performed with the lighting unit 38 lit (see FIGS. 13 and 14).
  • the image pickup device 30 is movable in the front-rear direction (see FIGS. 2A and 2B).
  • the image pickup apparatus 30 can revolve around an axis (see FIGS. 15A, 15B, and 15C).
  • An output device (for example, control SoC41) that outputs an image captured by the refrigerator 100, and outputs one image using a real image and a virtual image included in the image pickup region of the image pickup device 30 (see FIGS. 9B and 12). ).
  • the refrigerator 100 has a shooting command receiving unit (for example, a shooting button 39) for receiving a shooting command from the user on the door of the storage room.
  • a shooting command receiving unit for example, a shooting button 39
  • the present invention is not limited to the first embodiment and the second embodiment described above, and includes various modifications.
  • the above-described embodiment has been described in detail in order to explain the present invention in an easy-to-understand manner, and is not necessarily limited to the one including all the described configurations.
  • the photographing button 39 of FIG. 3 may be provided on the refrigerating room door 1a or may be provided on the upper surface of the drawer portion 6.
  • Refrigerator room (1st storage room) 1a, 1b Refrigerator door 2 Ice making room (second storage room) 2a Ice making room door 3 Upper freezing room (second storage room) 3a Upper freezing room door 4 Vegetable room (second storage room) 4a Vegetable room door 5 Lower freezing room (second storage room) 5a Lower freezer door 6

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Thermal Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

冷蔵庫は、前方が開口した貯蔵室を形成する箱体と、貯蔵室の外に設けられた撮像装置（３０）と、撮像装置（３０）の撮像領域内であって貯蔵室の外に設けられた鏡（３７）と、を有する。撮像装置（３０）が、鏡（３７）を撮像領域に含めて撮像した場合、撮像された鏡（３７）による虚像は貯蔵室内を含んでいる。撮像装置（３０）は、レンズ（３４）を備え、撮像装置（３０）は、箱体の上方に設けられ、箱体の扉が閉じられている場合にレンズ（３４）は扉よりも前方に位置する。鏡（３７）は、レンズ（３４）の前方に鏡面を貯蔵室内に向けて配設されている。

Description

冷蔵庫および出力装置
　本発明は、冷蔵庫および出力装置に関する。
　冷蔵庫において、貯蔵品の在庫管理などを目的として、カメラにより冷蔵室内（庫内）を撮影するようにしたものが提案されている。特許文献１には、「カメラは、冷蔵庫本体の上面の前部に、前方へ突出した状態で設けられていて、第１のモータによりＸ方向（前後方向）へ、第２のモータによりＹ方向（左右方向）へ回転される。冷蔵室の扉が開放されると、カメラは冷蔵室内を撮影する第１の撮影位置に自動的に向きを変え、冷蔵室内を撮影する。」ことが記載されている。
特開２００３－４２６２６号公報
　特許文献１の記載の冷蔵庫において、制御手段は、開放された扉に対応してカメラの撮影方向を自動的に制御して自動的に撮影を行わせることができる。このため、開放された扉に対応する貯蔵室の状態を自動的に撮影することができ、使用者がカメラを逐一操作する必要はないとしているが、扉の開閉の度に、カメラの撮影方向を可動することは、製品の信頼性に好ましくない。
　また、特許文献１には、カメラを可動方式ではなく、固定式のものも記載されている。すなわち、特許文献１の固定式のものは、アームの先端部に設けられたカメラは、冷蔵庫本体側で、かつ斜め下向きに向けられた状態で固定されていて、駆動手段となる第１及び第２のモータは設けられておらず、また、カメラカバーには、冷蔵室用及びドアポケット用凹レンズは設けられていない。カメラのレンズは広角レンズであり、その視野内には、扉が開放された冷蔵室内と、野菜室等からそれぞれ引き出された各引出し内が入っていて、これらの範囲を１枚で撮影することができることが記載されている（特許文献１の第３実施例）。
　本願の発明者らはその撮像範囲を検討したところ、カメラを固定にした場合に、冷蔵室（貯蔵室）内の内部まで適切に撮影できないことが判明した。
　本発明は、前記した従来の課題を解決するものであり、冷蔵室（貯蔵室）内を適切に撮影することができる冷蔵庫および出力装置を提供することを目的とする。
　前記目的を達成するため、本発明の冷蔵庫は、前方が開口した貯蔵室を形成する箱体と、貯蔵室の外に設けられた撮像装置と、撮像装置の撮像領域内であって前記貯蔵室の外に設けられた鏡と、を有することを特徴とする。本発明のその他の態様については、後記する実施形態において説明する。
　本発明によれば、冷蔵室内を適切に撮影することができる。
第１実施形態に係る冷蔵庫を示す正面図である。 第１実施形態に係る冷蔵庫を示す側面図である。 第１実施形態に係る撮像装置を収納した場合の側面図である。 第１実施形態に係る冷蔵庫の扉を開けた状態を示す正面図である。 第１実施形態に係る冷蔵庫の扉を開けた状態を示す上面図である。 第１実施形態に係る撮像装置を示す正面図である。 第１実施形態に係る撮像装置を示す側面図である。 第１実施形態に係る撮像装置を示す側断面図である。 第１実施形態に係る撮像装置を示す斜視図である。 第１実施形態に係る撮像装置の撮像部の詳細を示す側断面図である。 第１実施形態に係る撮像装置の適用効果を示す説明図である。 比較例の撮像装置による撮像例を示す説明図である。 比較例の撮像装置による撮像例の画像処理を示す説明図である。 第１実施形態に係る撮像装置による撮像例を示す説明図である。 第１実施形態に係る撮像装置による撮像例の画像処理を示す説明図である。 第１実施形態に係る冷蔵庫の引き出し部を引き出した状態を示す側面図である。 第１実施形態に係る冷蔵庫の引き出し部の撮像例を示す図である。 第１実施形態に係る冷蔵庫の撮像システムを示す構成図である。 第１実施形態に係る手動撮影設定時の処理を示すフローチャートである。 第１実施形態に係る自動撮影設定時の処理を示すフローチャートである。 第２実施形態に係る撮像装置の通常時の状態を示す説明図である。 第２実施形態に係る撮像装置の収納途中の状態を示す説明図である。 第２実施形態に係る撮像装置の収納時の状態を示す説明図である。
　本発明を実施するための形態（実施形態）について、適宜図面を参照しながら詳細に説明する。
<<第１実施形態>>
　図１は、第１実施形態に係る冷蔵庫１００を示す正面図である。図２Ａは、第１実施形態に係る冷蔵庫１００を示す側面図である。図２Ｂは、第１実施形態に係る撮像装置３０を収納した場合の側面図である。図３は、第１実施形態に係る冷蔵庫１００の扉を開けた状態を示す正面図である。図４は、第１実施形態に係る冷蔵庫１００の扉を開けた状態を示す上面図である。なお、以下の説明では、６ドアの冷蔵庫１００を例に挙げて説明するが、６ドアに限定されるものではない。
　図１に示すように、冷蔵庫１００の断熱箱体（箱体１０）は、上方から冷蔵室１、左右に併設された製氷室２と上段冷凍室３、野菜室４、下段冷凍室５の順番で貯蔵室を有している。冷蔵庫１００はそれぞれの貯蔵室の開口を開閉するドアを備えている。これらのドアは、冷蔵室１の開口を開閉する、左右に分割された回転式の冷蔵室ドア１ａ，１ｂと、製氷室２、上段冷凍室３、野菜室４、下段冷凍室５の開口をそれぞれ開閉する引き出し式の製氷室ドア２ａ、上段冷凍室ドア３ａ、野菜室ドア４ａ、下段冷凍室ドア５ａである。なお、野菜室４と下段冷凍室５との位置は、上下配置を変更してもよい。また、製氷室２と上段冷凍室３と下段冷凍室５とを合わせて冷凍室７と呼ぶ。
　冷蔵室ドア１ａ，１ｂを冷蔵庫１００に固定するために、ドアヒンジ（符号省略）が冷蔵室１の上部および下部に設けられている。図３、図４に示すように、冷蔵室ドア１ａ，１ｂを開閉すると、ドア収納部１１ａ（扉収納部ａ），１１ｂ（扉収納部ｂ）が設けられている。
　冷蔵室１は、庫内を冷蔵温度帯（０℃以上）の例えば平均的に４℃程度にした冷蔵貯蔵室である。冷凍室７は、庫内を冷凍温度帯（０℃未満）の例えば平均的に－１８℃程度にした冷凍貯蔵室である。野菜室４は、庫内を冷蔵温度帯の例えば平均的に６℃程度の冷蔵貯蔵室で、食品の乾燥を抑えた冷蔵貯蔵室である。
　冷蔵庫１００は、庫内を撮影するための撮像装置３０が貯蔵室の外側上部の略中央部に配置されている。すなわち、冷蔵庫１００の箱体（断熱箱体）の上方、略中央部に設けられている。箱体のドアが閉じられている場合に撮像装置３０のレンズ３４（図６Ａ、図６Ｂ参照）は、貯蔵室の開口縁面１０ａよりも前方、好ましくは冷蔵室ドア１ａ，１ｂ（扉）よりも前方に位置する。すなわち、撮像装置３０を貯蔵室の外に設け、撮像範囲内に鏡３７（図６Ａ、図６Ｂ参照）を一つ又は複数配置することにより、撮像装置３０の突出量を最小限にすることで外観を損ねず、ドア収納部１１ａ，１１ｂを含めた庫内の状況を俯瞰的に撮像できる。なお、鏡３７は、レンズ３４よりも前方に配置されている。この撮像装置３０の詳細については、後記する。
　また、撮像装置３０は、前後に移動するスライドする機構（貯蔵室開口に垂直な方向にスライドする機構）を有し、冷蔵庫１００の扉前面を跨り前後に移動可能である。例えば図２Ｂに示すように、扉前面より後方又は貯蔵室開口の縁面より後方に移動可能であるため、梱包時には奥行寸法には影響しない。また、輸送トラックへの冷蔵庫の積載数量が減少することはなく、設置後においても、撮像装置３０を使用しない場合には収納し撮像範囲を目隠しすることができる。目隠しによって、カメラの撮像領域が自身の生活範囲に常に入っていること等を好ましく思わないユーザにも配慮した構成とすることができる。同様に、撮像範囲のうち庫外側の領域の一部が鏡によって目隠しされており、これもそのようなユーザに好適である。
　冷蔵室ドア１ｂには、撮像装置３０により手動で撮影する際に使用される撮影ボタン３９（ユーザからの撮影指令を受付ける撮影指令受付部）が設けられている。撮影ボタン３９は、冷蔵室ドア１ａや箱体又は扉のその他の領域に設けられていてもよい。
　図５Ａは、第１実施形態に係る撮像装置３０を示す正面図である。図５Ｂは、第１実施形態に係る撮像装置３０を示す側面図である。図５Ｃは、第１実施形態に係る撮像装置３０を示す側断面図（図５ＡのＡＡ断面図）である。図６Ａは、第１実施形態に係る撮像装置３０を示す斜視図である。図６Ｂは、第１実施形態に係る撮像装置３０の撮像部の詳細を示す側断面図である。
　撮像装置３０は、ケース部３１と蓋部３２から構成されており、ケース部３１の前方には、カメラ３３（撮像部）や魚眼レンズであるレンズ３４を有している。レンズ３４は、図６Ａに示すように、遮光壁３５で囲まれている。遮光壁３５の近傍に、複数の照明部３８を有する。また、レンズ３４の近傍（レンズ３４よりも前方）に鏡３７が設けられている。
　ケース部３１の内部には、図５Ｃに示すように、制御ＳｏＣ４１および無線ＬＡＮユニット４２が格納されている。制御ＳｏＣ４１（System on a chip）は、集積回路の１個のチップ上に、プロセッサコアをはじめ一般的なマイクロコントローラが持つような機能の他、応用目的の機能なども集積し、連携してシステムとして機能するよう設計されている集積回路である。なお、制御ＳｏＣ４１は集積回路の一例であり、他の集積回路等でも代替可能である。
　貯蔵室の外に設けられた撮像装置３０がドア収納部１１ａ，１１ｂと、好ましくは貯蔵室内部を俯瞰的に撮像する。さらに、この撮像装置３０の撮像範囲内であって貯蔵室の外に設けられた鏡３７は、撮像用のレンズ３４の前方に鏡面を貯蔵室内に向かって配置される。
　この鏡３７は、レンズ３４による撮像範囲の中で貯蔵室並びに、扉収納部を撮像する範囲には重ならないように部分的に配置されているのが好ましい。つまり、本実施形態では鏡３７はレンズ３４よりも前方に配置されている。このことにより、撮像装置３０の撮像範囲を邪魔することなく、さらには撮像装置３０のレンズ３４による撮像範囲だけでは撮像できない範囲を鏡３７による虚像で補うことができる。つまり、カメラ３３は、レンズ３４による撮像で死角になる部分を、鏡３７を介して（鏡３７に映った像で）撮影できるようになる。また、この鏡３７を設けることにより、撮像装置３０が本体前方に突出する量を最小限にしながら、庫内状況をより俯瞰的に撮像することができ、外観を損ねることもない。また、冷蔵庫１００の本体からカメラ３３や制御ＳｏＣ４１に接続する配線（電源供給等の配線）の長さを短くすることができる。
　撮像装置３０の特徴をさらに説明する。
（１）撮像装置３０に用いるカメラ３３は、１８０度以上の広角度であり、魚眼レンズを有することで、扉を開けた際に庫内全体を俯瞰的に視認することができる。
（２）撮像装置３０のカメラ用のレンズ３４は冷蔵庫の扉前面よりも前に位置することで、野菜室４および下段冷凍室５の引き出し部６のみを開けた際でも庫内の状態を撮影することができる。
（３）撮像装置３０は、撮影範囲内に鏡３７を有し、この鏡３７は映し出す虚像が撮影範囲を拡大する役割を有する。
（４）撮像装置３０は、照明部３８を備え、撮影に適した照度に調整出来る庫外の照明部３８を使用して撮影することで、視認性の高い画像を得ることができる。冷蔵庫内に設けられた照明は比較的照度が高いため、カメラで撮影した際に収納物の反射が強く、撮影画像は白飛びしたものになる。このため、本実施形態では、撮影時には、庫内照明を消灯し、庫外の照明部３８を点灯して撮影する。詳細は、図１３、図１４で後記する。
　また、照明部３８の照明は、庫内、扉を開けた際の扉収納部１１ａ，１１ｂ、第２貯蔵室（例えば、野菜室４、下段冷凍室５）の全体を照射するように指向性を持たせている。
（５）撮像装置３０は、遮光壁３５を有することにより、照明部３８の直接光は撮影範囲に入らないことで、反射や白飛びを抑えた視認性の高い画像を得ることができる。
（６）撮像装置３０の照明部３８とレンズ３４の間に直接光を遮る遮光壁３５を設けることで、照明の設置位置をレンズ３４に極力近づけることができるため、コンパクトな外形に収めることができ、さらにはレンズ３４の傷付き防止効果も得ることができる。
（７）撮像装置３０は、前後に移動するスライドする機構を有し、冷蔵庫１００の扉前面を跨り前後に移動可能であるため、梱包時には奥行寸法には影響しない。また、輸送トラックに対する冷蔵庫の積載数量が減少することはなく、設置後においても、撮像装置３０を使用しない場合には収納し撮像範囲を目隠しすることができる。
（８）撮像装置３０は、通信ユニット（無線ＬＡＮユニット４２）を備え、通信ユニットから発信された画像データは、例えば、家庭内の無線ルータ（例えば、家庭内ルータ５３（図１２参照）を介してサーバ５４（図１２参照）に供給される。詳細については、後記する。
（９）撮像装置３０は、電源供給と撮影指令を伝達する通信回路が冷蔵庫本体側と繋がっている。冷蔵庫本体は商用電源等から電力供給を受けている。撮像装置３０の電源は冷蔵庫本体を介して商用電源から受け取ることができる。なお、撮像装置３０を充電池で駆動するようにしてもよい。
　図７は、第１実施形態に係る撮像装置３０の適用効果を示す説明図である。図７は、効果説明をわかりやすくするため、図５Ｂや図５Ｃよりも鏡３７の大きさを大きく強調して図示している。貯蔵室の奥を撮影するためには撮像装置３０のカメラ３３のレンズ３４を貯蔵室前面壁（貯蔵室の開口縁面１０ａ）よりも極力前方に配置することが好ましい。これは，貯蔵室前面壁端部が上方からの撮影領域の死角となるためである。
　しかし，輸送性，外観意匠性，使いやすさを考慮すれば前方への出張り量は極力抑えることが望ましい。本実施形態によれば、鏡３７を前方に配置することにより，鏡３７に反射して映る虚像は、図７に示すようにカメラ３３での撮影領域よりも貯蔵室奥側に拡大する効果をもたらす。鏡３７の高さｈをより大きくすれば、さらに撮影領域を拡大することが可能である。
　本実施形態の撮像例を比較例（鏡３７を有しない場合）と比較して説明する。
　図８Ａは、比較例の撮像装置による撮像例を示す説明図である。図８Ｂは、比較例の撮像装置による撮像例の画像処理を示す説明図である。図８Ａ、図８Ｂは、鏡３７を有しない場合である。図８Ａは、庫内画像補正処理前の画像であり、魚眼レンズのレンズ３４を介した画像は、実像画像である。
　図８Ｂは、本実施形態の所定の画像処理を行い庫内画像補正処理後(鏡無し)の画像である。冷蔵庫１００を使用するユーザが庫内のものを確認しやすい画像に変換したものである。図８Ｂをみると、扉収納部ａ、扉収納部ｂ、貯蔵庫ｃ内のものが実像としてみることができる。
　図９Ａは、第１実施形態に係る撮像装置による撮像例を示す説明図である。図９Ｂは、第１実施形態に係る撮像装置による撮像例の画像処理を示す説明図である。図９Ａ、図９Ｂは、本実施形態の鏡３７を有する場合である。図９Ａは、庫内画像補正処理前の画像であり、魚眼レンズのレンズ３４を介した画像は、図８Ａに示した実像と、鏡３７を介した貯蔵庫ｃの虚像（鏡３７を介して撮像される画像）との合成画像である。
　図９Ｂは、本実施形態の所定の画像処理を行った庫内画像補正処理後(鏡有り)の画像である。冷蔵庫１００を使用するユーザが庫内のものを確認しやすい画像に変換したものである。図９Ｂをみると、扉収納部ａ、扉収納部ｂのものが実像として、貯蔵庫ｃのものは、鏡３７を介した虚像と鏡３７を介しない実像とを合成して、変換処理している。これにより、鏡３７により特に上段において奥行方向の視認領域が拡大されている。具体的には、説明図は缶を例にしており，鏡があるとプルタブ（図示せず）が見える。この鏡３７を拡大することでより視認領域を広げることが可能である。
　図１０は、第１実施形態に係る冷蔵庫１００の引き出し部６を引き出した状態を示す側面図である。図１１は、第１実施形態に係る冷蔵庫１００の引き出し部６の撮像例を示す図である。庫内を撮影するための撮像装置３０は、引き出し部６内を撮像することができる。図１１は、野菜室４の引き出し部６の画像であるが、野菜の収納状態を把握することができる。
　図１２は、第１実施形態に係る冷蔵庫１００の撮影システムを示す構成図である。ドア（扉）側のセンサとして、冷蔵室ドア１ａ，１ｂ、製氷室ドア２ａ、上段冷凍室ドア３ａ、野菜室ドア４ａ、下段冷凍室ドア５ａの開閉状態をそれぞれ検知するドアセンサ（図示せず）等も設けられている。
　冷蔵庫１００の上部には、制御装置の一部であるＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）等のメモリ、インターフェース回路等を搭載したメインマイコン５２（制御装置、制御部）が配置されている。メインマイコン５２は、ドアセンサまたは撮影ボタン３９からの情報を基に、庫内の撮影を行う撮影システムの制御を行う。また、メインマイコン５２は、撮像装置３０への電源供給も行う。
　メインマイコン５２は、自動撮影設定時、ドアセンサから扉の開き角度等の情報に基づき、所定角度以上を検知すると、制御ＳｏＣ４１に撮影指令を送信する。制御ＳｏＣ４１は、カメラ３３に撮影指示を出し、カメラ３３から未処理の画像データを取得する。制御ＳｏＣ４１は、未処理の画像データを、例えば、図９Ｂのように、実像と虚像とを組み合わせる画像処理を行う。他方、メインマイコン５２は、手動撮影設定時、撮影ボタン３９が操作されたことを検知すると、制御ＳｏＣ４１に撮影指令を送信する。その後の処理は、自動撮影設定時と同様である。
　撮像装置３０は、前記したように、家庭内ルータ５３と接続できる無線ＬＡＮユニット４２が設けられている。この無線ＬＡＮユニット４２が設けられることで、制御Ｓｏｃ４１で処理済み庫内画像データを、家庭内ルータ５３を介してサーバ５４に送信することができる。サーバ５４は、ユーザの所有するスマートフォン５５等のモバイルデバイスやパーソナルコンピュータ等からの庫内画像表示要求に応じて、庫内画像データを送信する。これにより、ユーザは、庫内の状況を把握することができる。
　図１３は、第１実施形態に係る手動撮影設定時の処理を示すフローチャートである。適宜、図１２を参照して説明する。メインマイコン５２は、設定装置（図示せず）からの設定がカメラ撮影設定時（カメラ設定ＯＮ）の場合（Ｓ３１）、ドアセンサによりドアの開きが有るか否か（扉の開？）を判定し（Ｓ３２）、ドアの開きがある場合（Ｓ３２，Ｙｅｓ）、Ｓ３３に進む。一方、ドアの開きが無い場合（Ｓ３２，Ｎｏ）、メインマイコン５２は、Ｓ３２に戻る。
　Ｓ３３において、メインマイコン５２は、撮影ボタン３９の操作（押下）が有るか否かを判定し、撮影ボタン３９の押下がある場合（Ｓ３３，Ｙｅｓ）、Ｓ３４に進み、撮影ボタン３９の押下が無い場合（Ｓ３３，Ｙｅｓ）、Ｓ３２に戻る。
　Ｓ３４において、メインマイコン５２は、制御ＳｏＣ４１に撮影指令をし、庫内の照明の消灯と庫外照明（照明部３８）の点灯を行う（Ｓ３５）。制御ＳｏＣ４１は、カメラ３３に撮影指令して撮影する（Ｓ３６）。そして、メインマイコン５２は、庫内の照明の点灯と庫外照明（照明部３８）の消灯を行う（Ｓ３７）。
　カメラ３３は、制御ＳｏＣ４１に未処理画像データ（例えば、図９Ａ）を送信し（Ｓ３８）、制御ＳｏＣ４１は、庫内画像補正処理（画像処理）を実施する（Ｓ３９）。具体的には、図９Ｂで説明したように、虚像と実像との合成画像を作成する。
　制御ＳｏＣ４１は、処理済み画像データを、無線ＬＡＮユニット４２、家庭内ルータ５３を介して、サーバ５４に画像アップデートする（Ｓ４０）。サーバ５４は、画像がアップデートされたら、ユーザのモバイルデバイス等に通知する（Ｓ４１）。
　以上が手動撮影設定時の処理である。
　図１４は、第１実施形態に係る自動撮影設定時の処理を示すフローチャートである。適時、図１２を参照して説明する。なお、図１３と同様の処理は説明を省略する。メインマイコン５２は、設定装置（図示せず）からの設定がカメラ自動撮影設定時（カメラ自動設定ＯＮ）の場合（Ｓ３１Ａ）、ドアセンサによりドアの開きが有るか否か（扉の開？）を判定し（Ｓ３２）、ドアの開きがある場合（Ｓ３２，Ｙｅｓ）、Ｓ３３に進む。一方、ドアの開きが無い場合（Ｓ３２，Ｎｏ）、メインマイコン５２は、Ｓ３２に戻る。
　Ｓ３３において、メインマイコン５２は、ドアの開き角度が所定角度以上（例えば、扉角度８５度以上）であるか否かを判定し（Ｓ３３Ａ）、ドアの開き角度が所定角度以上である場合（Ｓ３３Ａ，Ｙｅｓ）、Ｓ３４に進み、ドアの開き角度が所定角度未満の場合（Ｓ３３Ａ，Ｎｏ）、Ｓ３２に戻る。Ｓ３４からＳ４１は、図１３と同様である。なお、Ｓ３３Ａにおいて、観音開きの冷蔵室１の場合、冷蔵室ドア１ａ，１ｂの内、少なくともどちらかのドアの開き角度が所定角度である場合（Ｓ３３Ａ，Ｙｅｓ）、Ｓ３４に進む。
　以上が自動撮影設定時の処理である。
　冷蔵庫１００の撮影システムの特徴をさらに説明する。
（１Ａ）冷蔵庫の扉の開き角度を検知する検知部（例えば、メインマイコン５２）を有し、検知部が所定角度（例えば、８５度）以上と判定した場合に自動で撮影を行うことができる。
（２Ａ）検知部が所定角度以上と判定した場合に庫内照明が消灯し、撮像装置３０の照明が点灯することで、撮影に適切な照度に調整するだけでなく、使用者に撮影のタイミングを知らせる効果を有する。
（３Ａ）冷蔵庫１００の引き出し距離が一定以上になった際に検知する検知部（例えば、引き出し部６に設置されている）を有し、検知部により引き出しの操作を検知し自動で撮影を行うことで、野菜室や冷凍室の撮像範囲を概ね一定に保つことができる。
（４Ａ）冷蔵庫の扉に撮影用釦（例えば、撮影ボタン３９）を有し、ユーザが撮影用釦を押した際、庫内照明が消灯し、撮像装置３０の照明が点灯した後に撮影が行われるため、撮影をしたタイミングを認知し易い。
（５Ａ）撮影された画像は画像補正処理が行われ、広角度カメラによって歪んだ画像が補正されることにより、使用者の目線に近い画像を提供できる。
（６Ａ）前記画像を使用者が携帯電話等を介して確認出来るアプリケーションサービスを有し、前記画像は、ドア（扉）、また前記引き出しに設けられた検知部により、撮影した画像がどの収納室の画像であるかを自動で判定することができる。
<<第２実施形態>>
　第１実施形態では、撮像装置３０は、スライド機構を有することを説明したが、これに限定されるわけではない。第２実施形態では、二つ折り機構について説明する。
　図１５Ａは、第２実施形態に係る撮像装置の通常時の状態を示す説明図である。図１５Ｂは、第２実施形態に係る撮像装置の収納途中の状態を示す説明図である。図１５Ｃは、第２実施形態に係る撮像装置の収納時の状態を示す説明図である。
　第２実施形態の冷蔵庫１００（図１参照）は、前方が開口した貯蔵室を形成する箱体と、貯蔵室の外に設けられた撮像装置３０と、開口に少なくとも垂直な方向に対して前記撮像装置３０を移動可能に支持する支持部４５（ヒンジ部）と、を備える。
　図１５Ａ～図１５Ｃに示すように、撮像装置３０のカメラ３３を有する先端部は、支持部４５から二つ折りできるように構成されており、梱包時には奥行寸法には影響しないため、輸送トラックに対する冷蔵庫の積載数量が減少することはなく、設置後においても、撮像装置３０を使用しない場合には収納し撮像範囲を目隠しすることができる。
　また、撮像装置３０は、庫内を覗き込む方向にも公転（ヒンジ部まわりに円形軌跡で動く；軸まわりに公転）可能にする。円形軌跡中に箱体が存在することから、公転可能な角度は、公転面に直交する方向から観察した場合に３６０°未満である。この場合、撮像装置３０に公転方向の力を付与できる駆動部を取付け、撮像時に冷蔵室等の庫内を覗き込む角度にするように制御してもよい。例えば、撮像時に、扉の移動軌跡内に撮像装置３０が位置するようにできる。こうすることでより効果的に庫内を撮像でき、さらに撮像終了後は扉の移動軌跡外に復帰させたり、扉や貯蔵室の前方開口の縁面より後方にまで公転させて収納可能なことから、支持部４５（ヒンジ部）とカメラとをつなぐアームを長くしやすいことが特徴である。
　以上説明した本実施形態の冷蔵庫１００は、次の特徴を有する。 
　本実施形態の冷蔵庫１００は、前方が開口した貯蔵室を形成する箱体１０と、貯蔵室の外に設けられた撮像装置３０と、撮像装置３０の撮像領域内であって貯蔵室の外に設けられ鏡３７と、を有する（図１～図４、図７参照）。
　撮像装置３０が鏡３７を撮像領域に含めて撮像した場合、撮像された鏡３７による虚像は貯蔵室内を含んでいる（図８Ｂ参照）。
　撮像装置３０は、レンズ３４を備え、撮像装置３０は、箱体１０の上方に設けられ、レンズ３４は貯蔵室の開口縁面１０ａよりも前方に位置する（図７参照）。
　貯蔵室は観音開きの第１貯蔵室（例えば、冷蔵室１）と前後方向開きの第２貯蔵室（例えば、製氷室２、上段冷凍室３、野菜室４、下段冷凍室５）を少なくとも有し、撮像装置３０が鏡３７を撮像領域に含めて撮像した場合、撮像された鏡３７による虚像は第１貯蔵室内または第２貯蔵室内を含むように、撮像装置３０が位置する（図１～図４、図１０参照）。
　撮像装置３０は、レンズ３４を備え、鏡３７は、レンズ３４の前方に鏡面を貯蔵室内に向けて配設される（図７参照）。
　撮像装置３０は、レンズ３４を備え、レンズ３４の周辺に、ひとつ又は複数の照明部３８を備え、レンズ３４と照明部３８との間に遮光壁３５を有する（図６Ａ、図６Ｂ参照）。
　撮像装置は、レンズ３４を備え、レンズ３４の周辺に、ひとつ又は複数の照明部３８を備え、貯蔵室内に設けられた庫内灯を備え、撮像装置３０の撮像は、庫内灯を消灯かつ照明部３８を点灯した状態で行われる（図１３、図１４参照）。
　撮像装置３０は、前後方向に可動である（図２Ａ、図２Ｂ参照）。
　撮像装置３０は、軸まわりに公転可能である（図１５Ａ、図１５Ｂ、図１５Ｃ参照）。
　冷蔵庫１００が撮像した画像を出力する出力装置（例えば、制御ＳｏＣ４１）であって、撮像装置３０の撮像領域に含まれた実像及び虚像を利用した１つの画像を出力する（図９Ｂ、図１２参照）。
　冷蔵庫１００は、貯蔵室の扉に、ユーザからの撮影指令を受付ける撮影指令受付部（例えば、撮影ボタン３９）を有する。
　なお、本発明は前記した第１実施形態および第２実施形態に限定されるものではなく、様々な変形例が含まれる。例えば、前記した実施形態は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、前記した実施形態の構成の一部について、他の構成の追加・削除・置換をすることが可能である。例えば、図３の撮影ボタン３９は、冷蔵室ドア１ａに設けられていてもよいし、引き出し部６の上面に設けられていてもよい。
　１　　冷蔵室（第１貯蔵室）
　１ａ，１ｂ　　冷蔵室ドア
　２　　製氷室（第２貯蔵室）
　２ａ　　製氷室ドア
　３　　上段冷凍室（第２貯蔵室）
　３ａ　　上段冷凍室ドア
　４　　野菜室（第２貯蔵室）
　４ａ　　野菜室ドア
　５　　下段冷凍室（第２貯蔵室）
　５ａ　　下段冷凍室ドア
　６　　引き出し部
　１０　　箱体
　１０ａ　　開口縁面
　１１ａ，１１ｂ　　ドア収納部
　３０　　撮像装置
　３１　　ケース部
　３２　　蓋部
　３３　　カメラ（撮像部）
　３４　　レンズ
　３５　　遮光壁
　３７　　鏡
　３８　　照明部
　３９　　撮影ボタン（撮影指令受付部）
　４１　　制御ＳｏＣ（出力装置）
　４２　　無線ＬＡＮユニット
　４５　　支持部（ヒンジ部）
　５１　　扉センサ
　５２　　メインマイコン
　５３　　家庭内ルータ
　５４　　サーバ
　５５　　スマートフォン
　１００　　冷蔵庫

Claims (13)

  1. 　前方が開口した貯蔵室を形成する箱体と、
    　前記貯蔵室の外に設けられた撮像装置と、
    　前記撮像装置の撮像領域内であって前記貯蔵室の外に設けられた鏡と、を有する冷蔵庫。
  2. 　前記撮像装置が前記鏡を撮像領域に含めて撮像した場合、撮像された前記鏡による虚像は前記貯蔵室内を含んでいる
    　ことを特徴とする請求項１に記載の冷蔵庫。
  3. 　前記撮像装置は、レンズを備え、
    　前記撮像装置は、前記箱体の上方に設けられ、
    　前記レンズは前記貯蔵室の開口縁面よりも前方に位置することができる
    　ことを特徴とする請求項１に記載の冷蔵庫。
  4. 　前記貯蔵室は観音開きの第１貯蔵室と前後方向開きの第２貯蔵室を少なくとも有し、
    　前記撮像装置が前記鏡を撮像領域に含めて撮像した場合、撮像された前記鏡による虚像は前記第１貯蔵室内または前記第２貯蔵室内を含むように、前記撮像装置が位置する
    　ことを特徴とする請求項１に記載の冷蔵庫。
  5. 　前記撮像装置は、レンズを備え、
    　前記鏡は、前記レンズの前方に鏡面を前記貯蔵室内に向けて配設される
    　ことを特徴とする請求項１に記載の冷蔵庫。
  6. 　前記撮像装置は、レンズを備え、
    　前記レンズの周辺に、ひとつ又は複数の照明部を備え、
    　前記レンズと前記照明部との間に遮光壁を有する
    　ことを特徴とする請求項１に記載の冷蔵庫。
  7. 　前記撮像装置は、レンズを備え、
    　前記レンズの周辺に、ひとつ又は複数の照明部を備え、
    　前記貯蔵室内に設けられた庫内灯を備え、
    　前記撮像装置の撮像は、前記庫内灯を消灯かつ前記照明部を点灯した状態で行われる
    　ことを特徴とする請求項１に記載の冷蔵庫。
  8. 　前記撮像装置は、前後方向に可動である
    　ことを特徴とする請求項１に記載の冷蔵庫。
  9. 　前記撮像装置は、軸まわりに公転可能である
    　ことを特徴とする請求項８に記載の冷蔵庫。
  10. 　請求項１に記載の冷蔵庫が撮像した画像を出力する出力装置であって、
    　前記撮像装置の撮像領域に含まれた実像及び虚像を利用した１つの画像を出力する出力装置。
  11. 　前記冷蔵庫は、前記貯蔵室の扉に、ユーザからの撮影指令を受付ける撮影指令受付部を有する
    　ことを特徴とする請求項１に記載の冷蔵庫。
  12. 　前方が開口した貯蔵室を形成する箱体と、
    　前記貯蔵室の外に設けられた撮像装置と、
    　前記開口に少なくとも垂直な方向に対して前記撮像装置を移動可能に支持する支持部と、を備える冷蔵庫。
  13. 　前記撮像装置の撮像領域内であって、前記貯蔵室の外に設けられた鏡を有する
    　ことを特徴とする請求項１２に記載の冷蔵庫。
PCT/JP2020/043316 2020-06-09 2020-11-20 冷蔵庫および出力装置 WO2021250913A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202080101856.1A CN115698611A (zh) 2020-06-09 2020-11-20 冰箱以及输出装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020100259A JP7500285B2 (ja) 2020-06-09 2020-06-09 冷蔵庫および出力装置
JP2020-100259 2020-06-09

Publications (1)

Publication Number Publication Date
WO2021250913A1 true WO2021250913A1 (ja) 2021-12-16

Family

ID=78847183

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/043316 WO2021250913A1 (ja) 2020-06-09 2020-11-20 冷蔵庫および出力装置

Country Status (3)

Country Link
JP (2) JP7500285B2 (ja)
CN (1) CN115698611A (ja)
WO (1) WO2021250913A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023042504A1 (ja) * 2021-09-15 2023-03-23 日立グローバルライフソリューションズ株式会社 冷蔵庫
JP2023060928A (ja) * 2021-10-19 2023-05-01 日立グローバルライフソリューションズ株式会社 冷蔵庫
WO2023153075A1 (ja) * 2022-02-08 2023-08-17 日立グローバルライフソリューションズ株式会社 家電機器
WO2023162283A1 (ja) * 2022-02-22 2023-08-31 日立グローバルライフソリューションズ株式会社 画像管理システム、画像管理サーバ、画像管理方法、および、画像表示制御システムの生産方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230114951A (ko) * 2022-01-26 2023-08-02 비스타테크놀러지 주식회사 반사경-카메라 구조를 이용한 상품 재고 관리 시스템 및 방법

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130030552A1 (en) * 2011-07-28 2013-01-31 Bryan James Beckley Optically-projected user interface for appliances
JP2014238217A (ja) * 2013-06-07 2014-12-18 株式会社東芝 冷蔵庫
JP2014240730A (ja) * 2013-06-12 2014-12-25 株式会社東芝 冷蔵庫
JP2015111025A (ja) * 2013-03-12 2015-06-18 株式会社東芝 冷蔵庫、カメラ装置
JP2018013272A (ja) * 2016-07-20 2018-01-25 三菱電機株式会社 冷蔵庫
WO2018069986A1 (ja) * 2016-10-12 2018-04-19 三菱電機株式会社 冷蔵庫
CN110455027A (zh) * 2019-07-16 2019-11-15 海信集团有限公司 一种图像采集装置及其冰箱、控制方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130030552A1 (en) * 2011-07-28 2013-01-31 Bryan James Beckley Optically-projected user interface for appliances
JP2015111025A (ja) * 2013-03-12 2015-06-18 株式会社東芝 冷蔵庫、カメラ装置
JP2014238217A (ja) * 2013-06-07 2014-12-18 株式会社東芝 冷蔵庫
JP2014240730A (ja) * 2013-06-12 2014-12-25 株式会社東芝 冷蔵庫
JP2018013272A (ja) * 2016-07-20 2018-01-25 三菱電機株式会社 冷蔵庫
WO2018069986A1 (ja) * 2016-10-12 2018-04-19 三菱電機株式会社 冷蔵庫
CN110455027A (zh) * 2019-07-16 2019-11-15 海信集团有限公司 一种图像采集装置及其冰箱、控制方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023042504A1 (ja) * 2021-09-15 2023-03-23 日立グローバルライフソリューションズ株式会社 冷蔵庫
JP2023060928A (ja) * 2021-10-19 2023-05-01 日立グローバルライフソリューションズ株式会社 冷蔵庫
JP7353340B2 (ja) 2021-10-19 2023-09-29 日立グローバルライフソリューションズ株式会社 冷蔵庫
WO2023153075A1 (ja) * 2022-02-08 2023-08-17 日立グローバルライフソリューションズ株式会社 家電機器
WO2023162283A1 (ja) * 2022-02-22 2023-08-31 日立グローバルライフソリューションズ株式会社 画像管理システム、画像管理サーバ、画像管理方法、および、画像表示制御システムの生産方法

Also Published As

Publication number Publication date
JP2021196069A (ja) 2021-12-27
JP7500285B2 (ja) 2024-06-17
CN115698611A (zh) 2023-02-03
JP2024103671A (ja) 2024-08-01

Similar Documents

Publication Publication Date Title
WO2021250913A1 (ja) 冷蔵庫および出力装置
WO2014156051A1 (ja) 冷蔵庫、および冷蔵庫システム
WO2016162956A1 (ja) 冷蔵庫
JP2003042626A (ja) 冷蔵庫
JPH0849958A (ja) 内部状態表示装置付冷蔵庫
JP2019023563A (ja) 冷蔵庫
JP6322803B2 (ja) 冷蔵庫及び冷蔵庫システム
JP2023112016A (ja) 冷蔵庫
JP2016023892A (ja) 冷蔵庫
JP6167330B2 (ja) 冷蔵庫及び冷蔵庫システム
JP6500251B2 (ja) 冷蔵庫
JP2000055533A (ja) 冷却貯蔵庫及びその管理システム
JP6681555B2 (ja) 冷蔵庫
JP6361014B2 (ja) 冷蔵庫及び冷蔵庫システム
JP6485678B2 (ja) 冷蔵庫及び冷蔵庫システム
JP7104087B2 (ja) 冷蔵庫
JP7513788B2 (ja) 冷蔵庫
JP2024149546A (ja) 撮像システムおよび撮像装置
JP6671002B2 (ja) 冷蔵庫
JP2024040654A (ja) 貯蔵庫
JP7353340B2 (ja) 冷蔵庫
JP6145701B2 (ja) 冷蔵庫
JP2020094801A (ja) 冷蔵庫
JP2022125367A (ja) システム、冷蔵庫
JP6145702B2 (ja) 冷蔵庫

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20940401

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20940401

Country of ref document: EP

Kind code of ref document: A1