WO2022145612A1 - 조리기기 및 그 제어방법 - Google Patents

조리기기 및 그 제어방법 Download PDF

Info

Publication number
WO2022145612A1
WO2022145612A1 PCT/KR2021/009912 KR2021009912W WO2022145612A1 WO 2022145612 A1 WO2022145612 A1 WO 2022145612A1 KR 2021009912 W KR2021009912 W KR 2021009912W WO 2022145612 A1 WO2022145612 A1 WO 2022145612A1
Authority
WO
WIPO (PCT)
Prior art keywords
rack
cooking
camera
food
image
Prior art date
Application number
PCT/KR2021/009912
Other languages
English (en)
French (fr)
Inventor
박윤식
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to EP21915410.1A priority Critical patent/EP4273452A1/en
Priority to US18/270,788 priority patent/US20240053025A1/en
Publication of WO2022145612A1 publication Critical patent/WO2022145612A1/ko

Links

Images

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C7/00—Stoves or ranges heated by electric energy
    • F24C7/08—Arrangement or mounting of control or safety devices
    • F24C7/082—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination
    • F24C7/085—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination on baking ovens
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C15/00—Details
    • F24C15/006—Arrangements for circulation of cooling air
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C15/00—Details
    • F24C15/008—Illumination for oven cavities
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C3/00—Stoves or ranges for gaseous fuels
    • F24C3/12—Arrangement or mounting of control or safety devices
    • F24C3/126—Arrangement or mounting of control or safety devices on ranges
    • F24C3/128—Arrangement or mounting of control or safety devices on ranges in baking ovens
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C15/00—Details
    • F24C15/16—Shelves, racks or trays inside ovens; Supports therefor

Definitions

  • the present invention relates to a cooking appliance and a control method thereof, and more particularly, to a cooking appliance using heat, such as an oven, and a control method therefor.
  • a cooking appliance may refer to products that cook food using electricity or other energy (eg, gas) at home or indoors.
  • electricity or other energy eg, gas
  • cooking devices using gas as a heat source include a gas range, gas oven, or gas oven range
  • cooking devices using electricity as a heat source include induction ranges and microwave ovens.
  • the cooking compartment is closed during cooking, and thus, a function of providing an image of the cooking compartment during cooking may be provided by mounting a camera.
  • the video monitoring image of the camera-mounted cooker released so far has a problem in that the monitoring area is limited or the image quality varies depending on the stage (rack) position due to the fixed angle of view and the photographing area of the camera.
  • a camera-mounted cooker there may be a limitation in the usability of the monitoring function according to the stage (rack) position.
  • the lowermost part is advantageous for monitoring, and cooking appliance products released so far also provide usability possible from the lower part.
  • An object of the present invention is to provide a cooking appliance capable of estimating the position of a stage (rack) of a cooking chamber of the cooking appliance and a control method thereof.
  • Another object of the present invention is to provide a cooking appliance capable of acquiring an optimal image by operating a camera with a set angle of view and focus, and a method for controlling the same.
  • Another object of the present invention is to provide a cooking appliance capable of obtaining an accurate monitoring image that is not affected by a stage (rack) and a method for controlling the same.
  • the camera angle of view is automatically recognized through image-based feature recognition to provide an optimal image for the camera focus and shooting area at the corresponding stage position.
  • the range and focus can be adjusted, and the captured image can be displayed on the product and terminal display.
  • the location of the rack is recognized based on image-based feature recognition in the oven cooking room, and the camera angle and focus are automatically set for the location. can do.
  • the present invention as a first aspect for solving the above problems, the present invention, the main body; a cooking chamber provided with one surface open inside the main body and including a plurality of stages for supporting a position of a rack for accommodating food; a camera module provided on the upper portion of the cooking chamber, including a camera for estimating the location of the rack in which the food is accommodated, and capturing the location of the rack in which the food is accommodated in the cooking chamber to generate a photographed image; and disposed on one side of the camera module. It may be configured to include a cooling fan that sucks in external air to cool the camera module.
  • the camera module may be installed in an electric cabinet above the cooking chamber, and the electric cabinet may be spatially separated from the cooking chamber.
  • the camera module may further include: a first glass provided on an upper wall of the cooking compartment so that the camera module can photograph the inside of the cooking compartment, and blocking heat inside the cooking compartment from being transferred to the camera; and a second glass provided between the camera and the first glass to block heat transferred to the camera.
  • a space between the first glass and the second glass may be sealed by a gasket.
  • control unit for controlling the camera module.
  • control unit may transmit the captured image to the user's terminal.
  • the controller may estimate the location of the rack in which the food is accommodated based on image recognition using an image of a specific area.
  • control unit may estimate the position of the rack in which the food is accommodated by using a light reflection signal among the photographed images.
  • controller may set at least one of the angle of view and the focus of the camera according to the estimated position of the rack.
  • the specific area may be a lighting unit inside the cooking chamber.
  • the present invention as a second aspect for solving the above problems, the present invention, the main body; a cooking chamber provided with one surface open inside the main body and including a plurality of stages for supporting a position of a rack for accommodating food; a camera module provided on the upper portion of the cooking chamber, including a camera for estimating the location of the rack in which the food is accommodated, and capturing the location of the rack in which the food is accommodated in the cooking chamber to generate a photographed image; and a control unit for controlling the camera module, wherein the control unit estimates the position of the rack in which the food is accommodated based on image recognition using the photographed image, and the control unit estimates the position of the camera according to the estimated position of the rack. At least one of an angle of view and a focus may be set.
  • control unit may transmit the captured image to the user's terminal.
  • control unit may estimate the position of the rack in which the food is accommodated based on image recognition using the photographed image.
  • control unit may estimate the position of the rack in which the food is accommodated by using a light reflection signal among the photographed images.
  • the position of the stage (rack) may be estimated through image-based feature recognition of the cooking chamber of the cooking appliance.
  • At least one of an angle of view and a focus of the camera may be set to match the estimated position of the stage (rack).
  • the camera operates with the set angle of view and focus to acquire an image, and may be transmitted to the terminal or displayed on the display of the cooking appliance.
  • FIG. 1 is a perspective view of a cooking appliance according to an embodiment of the present invention.
  • FIG. 2 is a plan view of a cooking appliance according to an embodiment of the present invention.
  • FIG 3 is a bottom view of a cooking appliance according to an embodiment of the present invention.
  • FIG. 4 is a side view showing the inside of the cooking appliance according to an embodiment of the present invention.
  • FIG. 5 is an enlarged view of part A of FIG. 4 .
  • 6 and 7 are cross-sectional views schematically illustrating an operation of a camera of a cooking appliance according to an embodiment of the present invention.
  • FIG. 8 is a diagram schematically illustrating image characteristics according to a location of a rack of a cooking appliance according to an embodiment of the present invention.
  • FIG. 9 is a diagram illustrating an image actually captured by a camera of a cooking appliance according to an embodiment of the present invention.
  • FIG. 10 is a flowchart illustrating a control process of a cooking appliance according to an embodiment of the present invention.
  • FIG. 11 is a detailed flowchart illustrating a control process of a cooking appliance according to an embodiment of the present invention.
  • FIG. 1 is a perspective view of a cooking appliance according to an embodiment of the present invention
  • FIG. 2 is a plan view of the cooking appliance according to an embodiment of the present invention
  • FIG. 3 is a bottom view of the cooking appliance according to an embodiment of the present invention to be.
  • the cooking appliance includes a main body 10 forming an external appearance, a cooking chamber 20 provided with an open front inside the main body 10, and a cooking chamber provided on the front surface of the main body 10 ( It may include a door 30 for opening and closing 20 , and a camera module 100 installed on the upper portion of the cooking compartment 20 to photograph the inside of the cooking compartment 20 .
  • the camera module 100 may be installed in the electric cabinet 50 above the cooking chamber 20 . 1 illustrates a state in which the electric vehicle chamber 50 is opened.
  • a cooktop (not shown) on which the cooking vessel is seated may be provided on the electric cabinet 50 .
  • an upper panel (not shown) covering the electric vehicle room 50 may be located.
  • the electric cabinet 50 is provided above the cooking chamber 20 , and between the electric cabinet 50 and the cooking chamber 20 , to prevent the heat of the cooking chamber 20 from being transmitted to the electric cabinet 50 , the electric cabinet 50 .
  • a heat insulating material (not shown) for insulating the cooking chamber 20 and the cooking chamber 20 may be provided.
  • controller 160 for controlling the cooking appliance
  • the camera module 100 is connected to the controller 160 , but a separate controller may be built in the camera module 100 , and the camera module 100 is controlled by the separate controller. can be controlled.
  • the controller 160 is shown in a state positioned on one side of the camera module 100 in FIG. 2 , this is only an example, and the embodiment of the present invention is not limited thereto.
  • the main body 10 includes a front panel 11 forming a front surface of the main body 10 , a side panel 12 forming a side surface of the main body 10 , and an upper panel 14 forming an upper portion of the main body 10 . ) may be included.
  • the rear panel forming the rear surface of the main body 10 may be located.
  • An electric compartment cover 17 covering the front surface of the electric vehicle room 50 may be provided on the front upper portion of the front panel 11 , and the display module 40 may be mounted on the electric vehicle room cover 17 .
  • a camera cooling fan 200 may be installed on one side, for example, a rear side of the camera module 100 .
  • the external air sucked by the camera cooling fan 200 may cool the camera module 100 .
  • the cooking compartment 20 is provided to have a box shape with an open front inside the main body 10 , and food can be put in and out of the cooking compartment 20 through the open front of the cooking compartment 20 .
  • the open front of the cooking chamber 20 is opened and closed by the door 30 , and the door 30 may be hinged to the lower portion of the main body 10 so as to be rotatable with respect to the main body 10 .
  • a door handle 31 that can be gripped by a user is provided on the front upper portion of the door 30 so that the user can open and close the cooking chamber 20 by gripping the door handle 31 .
  • the display module 40 for displaying various types of operation information of the oven and allowing the user to input operation commands may be mounted on the electric vehicle compartment cover 17 provided on the front upper portion of the front panel 11 .
  • a heater 70 for heating food may be provided in the cooking chamber 20 .
  • the heater 70 may be an electric heater including an electric resistor.
  • the heater 70 is not limited to an electric heater, but may be a gas heater that generates heat by burning gas.
  • the oven may include an electric oven and a gas oven.
  • FIG. 4 is a side view showing the inside of the cooking appliance according to an embodiment of the present invention.
  • a plurality of supports 21 may be provided on both sidewalls of the inside of the cooking chamber 20 , and a rack (not shown) on which food can be placed may be mounted on the plurality of supports.
  • the space divided into a plurality of the cooking chamber 20 may be variously utilized according to the intention of the user.
  • FIG. 4 shows an example in which five supports 21 are provided, and thus, five racks can be mounted on the supports 21 .
  • a lighting unit 300 for illuminating the interior of the cooking chamber 20 may be positioned between the supports 21 .
  • the lighting unit 300 may provide lighting for photographing the inside of the cooking chamber 20 using the camera module 100 .
  • the lighting unit 300 may be located at the center of the cooking chamber 20 . That is, based on the height of the cooking chamber 20 , it may be located at an intermediate height. Accordingly, it is possible to evenly illuminate the inside of the cooking chamber 20 . Since the front part of the cooking chamber 20 may receive external light through the door, the lighting unit 300 may be located on the rear side of the main body 10 .
  • a circulation unit 60 may be installed at the rear of the cooking compartment 20 to circulate air in the cooking compartment 20 so that the food is uniformly heated.
  • FIG. 5 is an enlarged view of part A of FIG. 4 .
  • the camera module 100 includes a camera 110 that generates a photographed image by photographing a location of a rack in which food is accommodated in the cooking chamber 20 .
  • the camera 110 may estimate the position of the rack in which the food is accommodated from these photographed images.
  • the operation control of the camera 110 and/or the position estimation of the rack may be performed by the controller 160 (MCU) for controlling the cooking appliance installed in the electric room 50, or , may be performed by a separate control unit (not shown) installed inside the camera module 100 .
  • the control operation of the camera 110 will be described as being performed by the controller 160 .
  • the camera 110 under the control of the controller 160, the camera 110 generates a photographed image by photographing the location of the rack in which the food is accommodated in the cooking chamber 20, and the rack in which the food is accommodated from the photographed image. location can be estimated.
  • the controller 160 may set at least one of the angle of view and the focus of the camera 110 according to the estimated position of the rack. That is, the camera 110 can be set to an angle of view suitable for the estimated position of the rack, and the camera 110 can be focused on the estimated position of the rack.
  • the camera module 100 may be installed in the electric cabinet 50 above the cooking chamber 20 . Also, the electric cabinet 50 may be spatially separated from the cooking chamber 20 . 5 illustrates a state in which the electric cabinet 50 and the cooking chamber 20 in which the camera module 100 is installed are separated by the space 21 . A barrier material for blocking heat may be located in the separated space 21 .
  • the camera module 100 is provided on the upper wall 14 of the cooking compartment 20 so as to photograph the inside of the cooking compartment 20 .
  • the position of the camera 110 may be fixed by the bracket 120 .
  • the bracket 120 may include a first support 121 and a second support 122 for forming an appropriate inclination angle of the camera 110 .
  • a first glass 130 that blocks heat inside the cooking chamber 20 from being transferred to the camera 110 and a camera 110 are provided between the camera 110 and the first glass 130 .
  • a second glass 140 that blocks heat transferred to the 110 may be provided.
  • the temperature may be increased by heat generated from the electric equipment inside the electric vehicle room 50 .
  • the electric cabinet 50 in which the camera module 100 is disposed is provided above the cooking compartment 20 , the temperature may be increased even by heat generated in the cooking compartment 20 .
  • a camera cooling fan 200 (refer to FIG. 4 ) for cooling the camera module 100 may be provided on one side of the camera module 100 .
  • the cooling fan 200 may be installed at the rear of the main body 10 .
  • the glasses 130 and 140 including the plurality of first and second glasses 130 and 140 may be disposed under the camera module 100 .
  • the first glass 130 may be fixed to the glass bracket to be disposed on the upper and lower surfaces of the upper wall 14
  • the second glass 140 may be fixed to a glass holder disposed adjacent to the lower portion of the camera module 100 .
  • the first glass 130 and the second glass 140 may be provided with a heat reflective coating layer on either surface, or a heat reflective coating layer may be provided on both surfaces of the glasses 130 and 140 . That is, the first glass 130 and the second glass 140 may be heat reflective glass.
  • a space between the first glass 130 and the second glass 140 may be sealed by the gasket 150 .
  • the camera module 100 or the controller 160 may transmit the captured image to the user's terminal 80 (refer to FIG. 9 ).
  • controller 160 may estimate the position of the rack in which the food is accommodated based on image recognition using the captured image.
  • the controller 160 may estimate the position of the rack in which the food is accommodated by using the reflected light signal among the photographed images. That is, the controller 160 may estimate the position of the rack in which the food is accommodated by using the position of the lighting unit 300 and the surrounding image.
  • 6 and 7 are cross-sectional views schematically illustrating an operation of a camera of a cooking appliance according to an embodiment of the present invention.
  • the controller 160 may set at least one of the angle of view and the focus of the camera 110 according to the position of the rack estimated based on image recognition using the photographed image.
  • the sensor unit 111 of the camera 110 is the lens ( 114) and can be moved away.
  • the lens 114 can move away from the sensor unit 111 to secure the image quality.
  • the sensor unit 111 is fixed to the fixed plate 112 in the camera 110 , and magnets 113 may be positioned at both ends of the fixed plate 112 .
  • the lens 114 may be positioned at a position opposite to the sensor unit 111 , and coils 115 may be provided at both ends of the lens 114 . Accordingly, the position of the lens 114 may move relative to the sensor unit 111 by the action of the magnet 113 and the coil 115 .
  • the sensor unit 111 of the camera 110 is a lens It can be moved closer to (114). Accordingly, it is possible to sufficiently secure a photographing area. That is, when the position of the rack is at the fifth stage, the lens 114 moves closer to the sensor unit 111 to secure a photographing area.
  • FIG. 8 is a diagram schematically illustrating image characteristics according to a location of a rack of a cooking appliance according to an embodiment of the present invention.
  • FIG. 8 shows the position of the image sensor 111
  • the lower part shows the positions of the 5-stage rack 116 and the 1-stage rack 117 .
  • the angle of view can be widened to sufficiently secure a photographing area.
  • the camera 110 may focus on the upper position.
  • the angle of view can be narrowed and the rack can be photographed.
  • the camera 110 may focus on the lower position. Accordingly, image quality can be secured.
  • the camera 110 may have an auto-focus capability and may optically change the angle of view.
  • FIG. 9 is a diagram illustrating an image actually captured by a camera of a cooking appliance according to an embodiment of the present invention.
  • FIG. 9 an image (a) inside the cooking chamber 20 and an image photographed according to the estimated location of the rack are shown.
  • FIG. 9(a) shows a side image of the inside of the cooking chamber. According to the height of the rack, 1, 2, 3, 4 and 5 are marked from the lower position to the higher position.
  • Figure 9 (b) shows the image corresponding to the case in which the position of the rack is in the first stage, that is, Figure 6.
  • Fig. 9 (c) shows the image corresponding to the case in which the position of the rack is in the fifth stage, that is, Fig. 7 .
  • the size of the image is edited according to the position of the lighting unit 300 .
  • the images show different characteristics. For example, a reflection image by the lighting unit 300 may be characteristically displayed. Therefore, it is possible to estimate the location of the rack based on image recognition using the features of these images.
  • FIG. 10 is a flowchart illustrating a control process of a cooking appliance according to an embodiment of the present invention.
  • the cooking appliance (oven) starts to operate, and the rack position can be estimated using the image recognition substrate (S10).
  • the controller 160 may estimate the position of the rack in which the food is accommodated by using the reflected light signal among the photographed images. That is, the controller 160 may estimate the position of the rack in which the food is accommodated by using the position of the lighting unit 300 and the surrounding image.
  • the angle of view and focus of the camera 110 may be set according to the estimated position of the rack (S11).
  • the actual original image taken through the camera 110 is an image of a wide shooting range including the internal structure and lighting by the camera 110 angle of view, and the monitoring image displayed on the terminal 80 or the display 40 is It can be provided by editing only the necessary area where it is located.
  • the photographed image may be transmitted to the terminal 80 (S13). And it may be displayed on the display of the terminal 80 . In some cases, the corresponding image may also be displayed on the display module 40 of the oven.
  • FIG. 11 is a detailed flowchart illustrating a control process of a cooking appliance according to an embodiment of the present invention.
  • the operation of the oven is started, and it can be detected that cooking is started (S20).
  • the detection of the start of cooking may detect the closing of the door 30 of the oven, or it may detect that the food is input by another sensor.
  • the process of estimating the location of the rack includes the steps of obtaining a photographed image by photographing the entire cooking chamber (S21), extracting a specific area from the photographed image to obtain an extracted image (S22, S23), and writing the extracted image Comparing with the extracted image (S24), and estimating the stage (rack) position from the comparison result (S25) may include.
  • the specific area may be extracted from the captured image (S22).
  • the specific area may be the lighting unit 300 inside the cooking chamber 20 .
  • the characteristic of this specific region may be, for example, at least one of color, light quantity, and shape.
  • the step (S24) of comparing the extracted image with the previously extracted image may be an image extracted before, for example, in the manufacturing process of an oven.
  • the stage (rack) position can be estimated by comparing the extracted image with the previously extracted image (S25).
  • the setting value of the camera 110 may be set according to the estimated stage (rack) position (S26). For example, at least one of an angle of view and a focus of the camera 110 may be set.
  • the range of the angle of view may be moved by adjusting the coil of the actual camera 110 ( S27 ).
  • An image can be captured by using the camera module 100 in the shooting condition adjusted by moving in this way (S28).
  • the photographed image may be transmitted to the terminal 80 . And it may be displayed on the display of the terminal 80 (S29). In some cases, the corresponding image may also be displayed on the display module 40 of the oven.
  • the position of the stage (rack) can be estimated through image-based feature recognition of the cooking chamber of the cooking appliance.
  • At least one of an angle of view and a focus of the camera may be set to match the estimated position of the stage (rack).
  • the camera operates with the set angle of view and focus to acquire an image, and may be transmitted to the terminal or displayed on the display of the cooking appliance.
  • a cooking appliance capable of estimating the position of a stage (rack) of a cooking chamber of the cooking appliance and a control method thereof.

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Electric Stoves And Ranges (AREA)
  • Electric Ovens (AREA)

Abstract

본 발명은 조리기기 및 그 제어방법에 관한 것으로서, 구체적으로, 오븐과 같은 열을 이용하는 조리기기 및 그 제어방법에 관한 것이다. 이러한 본 발명은, 본체; 상기 본체 내부에 일면이 개방되도록 마련되고 조리물을 수납하는 랙의 위치를 지지하는 다수의 단을 포함하는 조리실; 상기 조리실 상부에 마련되어 조리물이 수납된 랙의 위치를 추정하고 상기 조리실 내부의 조리물이 수납된 랙의 위치를 촬영하여 촬영 이미지를 생성하는 카메라를 포함하는 카메라 모듈; 및 상기 카메라 모듈의 일측에 배치되며. 외부의 공기를 흡입하여 상기 카메라모듈을 냉각시키는 냉각팬을 포함하여 구성될 수 있다.

Description

조리기기 및 그 제어방법
본 발명은 조리기기 및 그 제어방법에 관한 것으로서, 구체적으로, 오븐과 같은 열을 이용하는 조리기기 및 그 제어방법에 관한 것이다.
일반적으로, 조리기기는 가정이나 실내에서 전기 또는 기타 에너지(예를 들어, 가스)를 이용하여 음식을 조리하는 제품들을 의미할 수 있다.
이러한 조리기기 중, 열원으로서 가스를 이용한 조리기기에는 가스 레인지, 가스 오븐 또는 가스 오븐 레인지 등이 있고, 열원으로서 전기를 이용한 조리기기에는 인덕션 레인지, 전자 레인지 등이 있으며, 전기를 이용한 인덕션 레인지와 가스를 이용한 가스 오븐이 결합된 형태의 조리기기도 있다.
이와 같은 조리기기는 조리중에 조리실이 폐쇄되며, 따라서, 카메라가 탑재되어 조리 중 조리실의 이미지를 제공하는 기능이 제공될 수 있다.
현재까지 출시된 카메라 탑재 조리기의 영상 모니터링 이미지는, 카메라의 고정된 화각 및 촬영 영역에 의해 단(랙) 위치에 따라 모니터링 영역이 제한되거나 화질이 달라지는 문제점이 있다.
구체적으로, 카메라 탑재 조리기에서, 단(랙) 위치에 따른 모니터링 기능 사용성에 제한 발생할 수 있다. 일반적으로, 고정 화각을 이용할 경우, 최하단이 모니터링에 유리하며, 현재까지 출시된 조리기기 제품들도 하단에서 가능한 사용성을 제공하고 있다.
효과적인 조리를 위해 경우에 따라 식재료 또는 조리 모드에 따른 추천 단의 위치가 존재할 수 있으나, 이러한 경우, 단(랙)의 위치가 상단일 경우 영상 모니터링 기능을 사용할 수 없는 문제점이 있었다.
또한, 단(랙)의 위치에 따른 모니터링 영상 실사용 예에서, 상단 위치일수록 촬영 영역이 좁아지고 조도가 낮아져 사용성이 저하되는 문제점이 있었다.
따라서, 이러한 문제점을 해결하기 위한 방안이 요구된다.
본 발명은 상기 문제점을 해결하기 위한 것으로서, 조리기기의 조리실의 단(랙)의 위치를 추정할 수 있는 조리기기 및 그 제어방법을 제공하는 것을 목적으로 한다.
또한, 설정된 화각 및 초점으로 카메라가 작동하여 최적의 이미지 취득할 수 있는 조리기기 및 그 제어방법을 제공하는 것을 목적으로 한다.
또한, 단(랙)의 영향을 받지 않는 정확한 모니터링 이미지를 얻을 수 있는 조리기기 및 그 제어방법을 제공하는 것을 목적으로 한다.
나아가, 본 발명의 또 다른 일실시예의 목적은, 여기에서 언급하지 않은 다양한 문제점들도 해결하고자 한다. 당업자는 명세서 및 도면의 전 취지를 통해 이해할 수 있다.
상기 문제점을 해결하기 위하여, 본 발명의 실시예에 의하면, 영상 기반의 특징 인식을 통해 오븐 단 위치를 자동 인지하여, 해당 단 위치에서 카메라 초점 및 촬영 영역에 대한 최적의 이미지를 제공 가능하도록 카메라 화각 범위 및 초점을 조정 가능하도록 하고, 촬영 이미지를 제품 및 단말기 디스플레이에 표시할 수 있다.
따라서, 다양한 랙의 위치에서 모니터링을 위한 영상 이미지의 화질 유지 및 촬영 영역 확보가 가능하도록 오븐 조리실 내 영상 기반 특징 인식을 기반으로 랙의 위치를 인지하고 해당 위치에 맞는 카메라 화각 및 초점이 자동설정 되도록 할 수 있다.
본 발명은 상기 문제점을 해결하기 위한 제1 관점으로서, 본 발명은, 본체; 상기 본체 내부에 일면이 개방되도록 마련되고 조리물을 수납하는 랙의 위치를 지지하는 다수의 단을 포함하는 조리실; 상기 조리실 상부에 마련되어 조리물이 수납된 랙의 위치를 추정하고 상기 조리실 내부의 조리물이 수납된 랙의 위치를 촬영하여 촬영 이미지를 생성하는 카메라를 포함하는 카메라 모듈; 및 상기 카메라 모듈의 일측에 배치되며. 외부의 공기를 흡입하여 상기 카메라모듈을 냉각시키는 냉각팬을 포함하여 구성될 수 있다.
또한, 상기 카메라 모듈은 상기 조리실 상부의 전장실에 설치되고, 상기 전장실은 상기 조리실과 공간적으로 분리될 수 있다.
또한, 상기 카메라 모듈이 상기 조리실 내부를 촬영할 수 있도록 상기 조리실의 상부 벽에 마련되며, 상기 조리실 내부의 열이 상기 카메라로 전달되는 것을 차단하는 제1 글래스; 및 상기 카메라와 상기 제1 글래스 사이에 마련되어 상기 카메라로 전달되는 열을 차단하는 제2 글래스를 포함할 수 있다.
또한, 상기 제1 글래스와 상기 제2 글래스 사이의 공간은 가스켓에 의하여 밀봉될 수 있다.
또한, 상기 카메라 모듈을 제어하는 제어부를 더 포함할 수 있다.
또한, 상기 제어부는 상기 촬영된 촬영 이미지를 사용자의 단말기로 전송할 수 있다.
또한, 상기 제어부는 특정 영역을 촬영한 이미지를 이용한 영상 인식 기반으로 상기 조리물이 수납된 랙의 위치를 추정할 수 있다.
또한, 상기 제어부는 상기 촬영된 이미지 중 조명 반사 신호를 이용하여 상기 조리물이 수납된 랙의 위치를 추정할 수 있다.
또한, 상기 제어부는, 상기 추정된 랙의 위치에 따라 카메라의 화각 및 초점 중 적어도 어느 하나를 설정할 수 있다.
또한, 상기 특정 영역은 상기 조리실 내부의 조명부일 수 있다.
본 발명은 상기 문제점을 해결하기 위한 제2 관점으로서, 본 발명은, 본체; 상기 본체 내부에 일면이 개방되도록 마련되고 조리물을 수납하는 랙의 위치를 지지하는 다수의 단을 포함하는 조리실; 상기 조리실 상부에 마련되어 조리물이 수납된 랙의 위치를 추정하고 상기 조리실 내부의 조리물이 수납된 랙의 위치를 촬영하여 촬영 이미지를 생성하는 카메라를 포함하는 카메라 모듈; 및 상기 카메라 모듈을 제어하는 제어부를 포함하고, 상기 제어부는 촬영된 이미지를 이용한 영상 인식 기반으로 상기 조리물이 수납된 랙의 위치를 추정하고, 상기 제어부는 상기 추정된 랙의 위치에 따라 카메라의 화각 및 초점 중 적어도 어느 하나를 설정할 수 있다.
또한, 상기 제어부는 상기 촬영된 촬영 이미지를 사용자의 단말기로 전송할 수 있다.
또한, 상기 제어부는 촬영된 이미지를 이용한 영상 인식 기반으로 상기 조리물이 수납된 랙의 위치를 추정할 수 있다.
또한, 상기 제어부는 상기 촬영된 이미지 중 조명 반사 신호를 이용하여 상기 조리물이 수납된 랙의 위치를 추정할 수 있다.
본 발명의 실시예에 의하면, 조리기기의 조리실의 영상 기반 특징 인식을 통해 단(랙)의 위치를 추정할 수 있다.
또한, 추정된 단(랙)의 위치에 맞도록 카메라의 화각 및 초점 중 적어도 어느 하나를 설정할 수 있다.
이후, 설정된 화각 및 초점으로 카메라가 작동하여 이미지 취득하여 단말기로 전송되거나 및 조리기기의 디스플레이에 표시될 수 있다.
따라서, 기존의 고정된 화각 및 초점 방식의 영상 모니터링 기능 대비 사용성을 개선할 수 있다. 이에 따라, 단(랙) 위치에 따른 최적 영상 이미지를 제공할 수 있다.
또한, 조리기기에서 조리물(식재료)이 위치한 단(랙)을 효과적으로 추정 가능하다.
또한, 랙(단)의 영향을 받지 않는 조명부 영상을 인식하여 조리물(식재료)에 관계 없이 정확한 이미지를 얻을 수 있다.
나아가, 본 발명의 또 다른 일실시예에 따르면, 여기에서 언급하지 않은 추가적인 기술적 효과들도 있다. 당업자는 명세서 및 도면의 전취지를 통해 이해할 수 있다.
도 1은 본 발명의 일 실시예에 따른 조리기기의 사시도이다.
도 2는 본 발명의 일 실시예에 따른 조리기기의 평면도이다.
도 3은 본 발명의 일 실시예에 따른 조리기기의 저면도이다.
도 4는 본 발명의 일 실시예에 따른 조리기기의 내부를 나타내는 측면도이다.
도 5는 도 4의 A 부분의 확대도이다.
도 6 및 도 7은 본 발명의 일 실시예에 따른 조리기기의 카메라의 동작을 개략적으로 나타내는 단면도이다.
도 8은 본 발명의 일 실시예에 따른 조리기기의 랙의 위치에 따른 이미지 특성을 개략적으로 나타내는 도이다.
도 9는 본 발명의 일 실시예에 따른 조리기기의 카메라에 의한 실제 촬영 이미지를 나타내는 도이다.
도 10은 본 발명의 일 실시예에 따른 조리기기의 제어 과정을 나타내는 순서도이다.
도 11은 본 발명의 일 실시예에 따른 조리기기의 제어 과정을 나타내는 상세 순서도이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시예를 설명함에 있어서 관련된 공지기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다.
나아가, 설명의 편의를 위해 각각의 도면에 대해 설명하고 있으나, 당업자가 적어도 2개 이상의 도면을 결합하여 다른 실시예를 구현하는 것도 본 발명의 권리범위에 속한다.
또한, 층, 영역 또는 기판과 같은 요소가 다른 구성요소 "상(on)"에 존재하는 것으로 언급될 때, 이것은 직접적으로 다른 요소 상에 존재하거나 또는 그 사이에 중간 요소가 존재할 수도 있다는 것을 이해할 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 조리기기의 사시도이고, 도 2는 본 발명의 일 실시예에 따른 조리기기의 평면도이고, 도 3은 본 발명의 일 실시예에 따른 조리기기의 저면도이다.
도 1 내지 도 3을 참조하면, 조리기기는 외관을 형성하는 본체(10)와, 본체(10) 내부에 전면이 개방되도록 마련되는 조리실(20)과, 본체(10)의 전면에 마련되어 조리실(20)을 개폐하는 도어(30)와, 조리실(20) 상부에 설치되어 조리실(20) 내부를 촬영하는 카메라 모듈(100)을 포함할 수 있다.
이러한 카메라 모듈(100)은 조리실(20) 상부의 전장실(50)에 설치될 수 있다. 도 1은 전장실(50)이 개구된 상태를 도시하고 있다. 이러한 전장실(50) 상에는 조리 용기가 안착되는 쿡탑(도시되지 않음)이 구비될 수도 있다. 또한, 이 전장실(50)을 덮는 상부 패널(도시되지 않음)이 위치할 수 있다.
전장실(50)은 조리실(20) 상부에 구비되며, 전장실(50)과 조리실(20) 사이에는 조리실(20)의 열기가 전장실(50)에 전달되는 것을 방지하도록 전장실(50)과 조리실(20)을 단열하는 단열재(미도시)가 구비될 수 있다.
또한, 이러한 전장실(50)에는 조리기기를 제어하기 위한 제어부(160; MCU)를 포함하는 기타 전장 부품이 설치될 수 있다. 도 2에서, 카메라 모듈(100)이 제어부(160)에 연결된 상태를 도시하고 있으나, 카메라 모듈(100) 내부에 별도의 제어부가 내장될 수 있고, 카메라 모듈(100)은 이 별도의 제어부에 의하여 제어될 수 있다. 또한, 도 2에서 제어부(160)는 카메라 모듈(100)의 일측에 위치하는 상태로 도시되어 있으나, 이는 예시일 뿐, 본 발명의 실시예는 여기에 제한되지 않는다.
본체(10)는 본체(10)의 전면을 형성하는 전면패널(11)과, 본체(10)의 측면을 형성하는 측면패널(12)과, 본체(10)의 상부를 형성하는 상부패널(14)을 포함할 수 있다. 여기서, 본체(10)의 후면을 형성하는 후면패널이 위치할 수 있다.
전면패널(11)의 전면 상부에는 전장실(50)의 전면을 커버하는 전장실 커버(17)가 마련될 수 있으며, 전장실 커버(17)에는 디스플레이 모듈(40)이 장착될 수 있다.
카메라 모듈(100)의 일측, 일례로 후방 측에는 카메라 냉각팬(200)이 설치될 수 있다. 이러한 카메라 냉각팬(200)에 의해 흡입된 외부 공기는 카메라 모듈(100)을 냉각시킬 수 있다.
조리실(20)은 본체(10) 내부에 전면이 개방된 박스 형상을 가지도록 마련되며, 조리실(20)의 개방된 전면을 통해 조리실(20) 내부로 조리물을 출납할 수 있다.
조리실(20)의 개방된 전면은 도어(30)에 의해 개폐되며, 도어(30)는 본체(10)에 대해 회전 가능하도록 본체(10) 하부에 힌지 결합될 수 있다.
도어(30)의 전면 상부에는 사용자가 파지할 수 있는 도어 핸들(31)이 마련되어 사용자가 도어 핸들(31)을 파지하여 조리실(20)을 개폐할 수 있다.
오븐의 각종 동작 정보를 표시하고, 사용자가 동작 명령을 입력할 수 있는 디스플레이 모듈(40)은 전면패널(11)의 전면 상부에 마련된 전장실 커버(17)에 장착될 수 있다.
도 3에서 도시하는 바와 같이, 조리실(20)에는 조리물을 가열시키는 히터(70)가 구비될 수 있다. 이러한 히터(70)는 전기 저항체를 포함하는 전기 히터일 수 있다.
이때, 히터(70)는 전기 히터로 한정되는 것은 아니고 가스를 연소시켜 열을 발생시키는 가스 히터일 수도 있다. 따라서, 오븐은 전기 오븐 및 가스 오븐을 포함할 수 있다.
도 4는 본 발명의 일 실시예에 따른 조리기기의 내부를 나타내는 측면도이다.
도 4를 참조하면, 조리실(20) 내부의 양 측벽에는 복수 개의 지지대(21)가 구비될 수 있으며, 이 복수 개의 지지대에는 조리물을 올려놓을 수 있는 랙(미도시)을 장착할 수 있다.
이에 따라, 사용자의 의도에 따라 조리실(20)의 복수 개로 분할된 공간을 다양하게 활용할 수 있다.
도 4에서는 다섯 개의 지지대(21)가 구비된 예를 나타내고 있고, 따라서, 이 지지대(21)에 다섯 개의 랙이 장착될 수 있다.
이러한 지지대(21) 사이에는 조리실(20) 내부 조명을 위한 조명부(300)가 위치할 수 있다. 또한, 이와 같은 조명부(300)는 카메라 모듈(100)을 이용하여 조리실(20) 내부를 촬영할 조명을 제공할 수 있다.
이때, 조명부(300)는 조리실(20) 중앙 측에 위치할 수 있다. 즉, 조리실(20)의 높이를 기준으로 할 때, 중간 높이에 위치할 수 있다. 이에 따라 조리실(20) 내부를 고르게 비출 수 있다. 조리실(20) 전면부는 도어에 의하여 외부 광선이 투입될 수 있기 때문에 조명부(300)는 본체(10)의 후방 측에 위치할 수 있다.
한편, 조리실(20)의 후방에는 조리실(20)의 공기를 순환시켜 조리물이 골고루 가열되도록 하는 순환부(60)가 설치될 수 있다.
도 5는 도 4의 A 부분의 확대도이다.
도 5는 카메라 모듈(100)의 확대도를 나타내고 있다. 도 5를 참조하면, 카메라 모듈(100)은 조리실(20) 내부의 조리물이 수납된 랙의 위치를 촬영하여 촬영 이미지를 생성하는 카메라(110)를 포함한다.
또한, 카메라(110)는 이러한 촬영 이미지로부터 조리물이 수납된 랙의 위치를 추정할 수 있다.
위에서 언급한 바와 같이, 이러한 카메라(110)의 동작 제어 및/또는 랙의 위치 추정 등은 전장실(50)에 설치되는 조리기기를 제어하기 위한 제어부(160; MCU)에 의하여 이루어질 수 있고, 또는, 카메라 모듈(100) 내부에 설치된 별도의 제어부(도시되지 않음)에 의하여 이루어질 수도 있다. 이하, 일례로서, 이러한 카메라(110)의 제어 동작은 제어부(160)에서 이루어지는 것으로 설명한다.
이와 같이, 제어부(160)의 제어에 의하여, 카메라(110)는 조리실(20) 내부의 조리물이 수납된 랙의 위치를 촬영하여 촬영 이미지를 생성하고, 이러한 촬영 이미지로부터 조리물이 수납된 랙의 위치를 추정할 수 있다.
이때, 제어부(160)는 추정된 랙의 위치에 따라 카메라(110)의 화각 및 초점 중 적어도 어느 하나를 설정할 수 있다. 즉, 추정된 랙의 위치에 적합한 화각으로 카메라(110)를 설정할 수 있고, 이러한 추정된 랙의 위치에 카메라(110)의 초점을 맞출 수 있다.
카메라 모듈(100)은 조리실(20) 상부의 전장실(50)에 설치될 수 있다. 또한, 전장실(50)은 조리실(20)과 공간적으로 분리될 수 있다. 도 5에서는 카메라 모듈(100)이 설치된 전장실(50)과 조리실(20)이 공간(21)에 의하여 분리된 상태를 도시하고 있다. 이러한 분리된 공간(21)에는 열을 차단하기 위한 차단재가 위치할 수 있다.
이와 같이, 카메라 모듈(100)은 조리실(20) 내부를 촬영할 수 있도록 조리실(20)의 상부 벽(14)에 마련된다.
카메라(110)는 브라켓(120)에 의하여 위치가 고정될 수 있다. 이러한 브라켓(120)은 카메라(110)의 적절한 경사각을 형성하기 위한 제1 지지대(121) 및 제2 지지대(122)를 포함할 수 있다.
또한, 카메라(110)의 하측에는 조리실(20) 내부의 열이 카메라(110)로 전달되는 것을 차단하는 제1 글래스(130) 및 카메라(110)와 제1 글래스(130) 사이에 마련되어 카메라(110)로 전달되는 열을 차단하는 제2 글래스(140)가 구비될 수 있다.
카메라 모듈(100)은 전장실(50) 내부에 배치되기 때문에, 전장실(50) 내부의 전장품에서 발생되는 열에 의해 온도가 높아질 수 있다. 또한, 카메라 모듈(100)이 배치되는 전장실(50)은 조리실(20) 상부에 구비되기 때문에, 조리실(20)에서 발생되는 열에 의해서도 온도가 높아질 수 있다.
카메라 모듈(100)의 온도가 높아지면, 카메라 모듈(100)에 포함된 카메라(110)에 고장이 발생할 수도 있고, 화질이 저하될 수 있다. 따라서, 카메라 모듈(100)의 일측에 카메라 모듈(100)을 냉각시키기 위한 카메라 냉각팬(200; 도 4 참조)이 구비될 수 있다. 이러한 냉각팬(200)은 본체(10)의 후방에 설치될 수 있다.
따라서, 위에서 언급한 바와 같이, 카메라 모듈(100)의 하부에는 복수 개로 마련되는 제1 글래스(130) 및 제2 글래스(140)를 포함하는 글래스(130, 140)가 배치될 수 있다. 이러한 제1 글래스(130)는 상부벽(14)의 상면과 하면에 배치되도록 글래스 브라켓에 고정되고, 제2 글래스(140)는 카메라 모듈(100) 하부에 인접하게 배치되는 글래스 홀더에 고정될 수 있다.
이와 같은 제1 글래스(130) 및 제2 글래스(140)에는 어느 한쪽 면에 열반사 코팅층이 마련되도록 하거나, 글래스(130, 140)의 양쪽 면에 열반사 코팅층이 구비될 수 있다. 즉, 이러한 제1 글래스(130) 및 제2 글래스(140)는 열반사 글래스일 수 있다.
이러한 제1 글래스(130)와 상기 제2 글래스(140) 사이의 공간은 가스켓(150)에 의하여 밀봉될 수 있다.
한편, 카메라 모듈(100) 또는 제어부(160)는 촬영된 촬영 이미지를 사용자의 단말기(80; 도 9 참조)로 전송할 수 있다.
또한, 제어부(160)는 촬영된 이미지를 이용한 영상 인식 기반으로 조리물이 수납된 랙의 위치를 추정할 수 있다.
또한, 제어부(160)는 촬영된 이미지 중 조명 반사 신호를 이용하여 조리물이 수납된 랙의 위치를 추정할 수 있다. 즉, 제어부(160)는 조명부(300)의 위치 및 주변 영상을 이용하여 조리물이 수납된 랙의 위치를 추정할 수 있다.
이러한 카메라 모듈(100) 또는 제어부(160)의 구체적인 동작은 자세히 후술한다.
도 6 및 도 7은 본 발명의 일 실시예에 따른 조리기기의 카메라의 동작을 개략적으로 나타내는 단면도이다.
도 6 및 도 7을 참조하면, 제어부(160)는 촬영된 이미지를 이용한 영상 인식 기반으로 추정된 랙의 위치에 따라 카메라(110)의 화각 및 초점 중 적어도 어느 하나를 설정할 수 있다.
예를 들어, 촬영된 이미지를 이용한 영상 인식 기반으로 추정된 랙의 위치가 조리실(20) 내의 가장 낮은 위치인 1단이라면, 도 6과 같이, 카메라(110)의 센서부(111)가 렌즈(114)와 멀게 이동될 수 있다.
이에 따라, 카메라(110)의 화각을 좁게 하여 상대적으로 먼 위치인 1단에 위치한 랙에 담긴 조리물을 명확하게 촬영할 수 있다. 즉, 랙의 위치가 1단에 있는 경우에는 렌즈(114)가 센서부(111)로부터 멀게 이동하여 이미지의 화질을 확보할 수 있다.
이와 같이, 센서부(111)는 카메라(110) 내의 고정판(112)에 고정되고, 고정판(112)의 양 단부측에는 자석(113)이 위치할 수 있다. 또한, 센서부(111)와 대향되는 위치에 렌즈(114)가 위치하고, 이 렌즈(114)의 양 단부측에는 코일(115)가 구비될 수 있다. 따라서, 자석(113)과 코일(115)의 작용에 의하여 렌즈(114)의 위치는 센서부(111)에 대하여 상대운동할 수 있다.
한편, 일례로, 촬영된 이미지를 이용한 영상 인식 기반으로 추정된 랙의 위치가 조리실(20) 내의 가장 높은 위치인 5단이라면, 도 7과 같이, 카메라(110)의 센서부(111)가 렌즈(114)와 가깝게 이동될 수 있다. 이에 따라, 촬영 영역을 충분히 확보할 수 있다. 즉, 랙의 위치가 5단에 있는 경우에는 렌즈(114)가 센서부(111)에 가깝게 이동하여 촬영 영역을 확보할 수 있다.
도 8은 본 발명의 일 실시예에 따른 조리기기의 랙의 위치에 따른 이미지 특성을 개략적으로 나타내는 도이다.
도 8의 상부는 이미지 센서(111)의 위치를 나타내고, 그 하측에 5단 랙(116) 및 1단 랙(117)의 위치를 나타내고 있다.
위에서 설명한 바와 같이, 가장 상측의 5단 랙(116)에서는 화각을 넓게 하여 촬영 영역을 충분히 확보할 수 있다. 이와 함께, 카메라(110)가 상단 위치에 초점을 맞출 수 있다.
또한, 가장 하측의 1단 랙(117)에서는 화각을 좁게 하여 해당 랙을 촬영할 수 있다. 이와 함께, 카메라(110)가 하단 위치에 초점을 맞출 수 있다. 이에 따라, 영상의 화질을 확보할 수 있다.
이와 같이, 카메라(110)는 자동 초점 능력을 갖출 수 있고, 광학적으로 화각을 변경할 수 있다.
이와 같이, 광학적으로 화각을 조절하지 않고, 단순히 이미지에 광각을 적용하여 촬영 영역 조정할 경우, 하단의 영역은 확대 시 화소가 줄어들어 화질이 저하될 수 있다. 이러한 화질 저하는 이미지가 단말기(80)로 전달되었을 때 문제가 될 수 있다.
도 9는 본 발명의 일 실시예에 따른 조리기기의 카메라에 의한 실제 촬영 이미지를 나타내는 도이다.
도 9를 참조하면, 조리실(20) 내부의 이미지(a)와, 추정된 랙의 위치에 따라 촬영된 이미지를 나타내고 있다. 여기서, 도 9(a)는 조리실 내부의 측면 이미지를 나타내고 있다. 랙의 높이에 따라 낮은 위치부터 높은 위치로 ①, ②, ③, ④ 및 ⑤가 표기되어 있다.
도 9(b)는 랙의 위치가 1단에 있는 경우, 즉, 도 6에 해당하는 이미지를 나타낸다. 또한, 도 9(c)는 랙의 위치가 5단에 있는 경우, 즉, 도 7에 해당하는 이미지를 나타낸다.
도 9(b) 및 도 9(c)의 이미지를 참조하면, 조명부(300)의 위치에 따라 이미지의 크기가 편집된 상태임을 알 수 있다. 이러한 조명부(300)의 위치에서 이미지는 서로 다른 특징을 보인다. 예를 들어, 조명부(300)에 의한 반사 이미지가 특징적으로 나타날 수 있다. 따라서, 이러한 이미지의 특징을 이용한 영상 인식 기반으로 랙의 위치를 추정할 수 있다.
도 10은 본 발명의 일 실시예에 따른 조리기기의 제어 과정을 나타내는 순서도이다.
이하, 도 10을 참조하여 본 발명의 일 실시예에 따른 조리기기의 제어 과정을 간략히 설명한다.
먼저, 본 발명의 일 실시예에 의한 조리기기(오븐)가 동작을 시작하고, 영상 인식 기판으로 랙 위치를 추정할 수 있다(S10).
이때, 위에서 설명한 바와 같이, 제어부(160)는 촬영된 이미지 중 조명 반사 신호를 이용하여 조리물이 수납된 랙의 위치를 추정할 수 있다. 즉, 제어부(160)는 조명부(300)의 위치 및 주변 영상을 이용하여 조리물이 수납된 랙의 위치를 추정할 수 있다.
이와 같이, 조리실(20) 내의 특징 영역에 대한 이미지 분석을 통한 랙의 위치를 추정할 수 있다. 이때, 영상 분석 기반 자동 설정 및 기설정된 최적값이 적용될 수 있다.
이후, 추정된 랙의 위치에 따라 카메라(110)의 화각 및 초점을 설정할 수 있다(S11).
다음에, 해당 랙에 카메라(110)의 화각 및 초점이 맞춰진 상태에서 조리물의 모니터링 이미지를 촬영할 수 있다(S12).
카메라(110)를 통하여 촬영된 실제 원본 이미지는 카메라(110) 화각에 의해 내부 구조물 및 조명을 포함하는 넓은 촬영 범위의 영상으로, 단말기(80) 또는 디스플레이(40)에 표시되는 모니터링 이미지는 조리물이 위치하는 필요 영역만 편집하여 제공될 수 있다.
이후, 이와 같이 촬영된 이미지는 단말기(80)로 전송될 수 있다(S13). 그리고 단말기(80)의 디스플레이에 표시될 수 있다. 경우에 따라, 오븐의 디스플레이 모듈(40)에도 해당 이미지가 표시될 수 있다.
도 11은 본 발명의 일 실시예에 따른 조리기기의 제어 과정을 나타내는 상세 순서도이다.
이하, 도 11을 참조하여 본 발명의 일 실시예에 따른 조리기기의 제어 과정을 구체적으로 설명한다.
먼저, 오븐의 동작이 시작되고, 조리가 시작됨을 감지할 수 있다(S20). 이러한 조리 시작의 감지는 오븐의 도어(30)가 닫힘을 감지할 수도 있고, 다른 센서에 의하여 식재료가 투입됨을 감지할수도 있다.
이후, 식재료(조리물)가 투입된 랙의 위치를 추정할 수 있다. 위에서, 도 10을 참조하여 설명한 랙 위치를 추정하는 과정(S10)은 아래의 S21 단계 내지 S25 단계에 해당할 수 있다.
실시예로서, 랙의 위치를 추정하는 과정은, 조리실 전체를 촬영하여 촬영 이미지를 얻는 단계(S21), 촬영 이미지 중에서 특정 영역을 추출하여 추출 이미지를 얻는 단계(S22, S23), 추출 이미지를 기추출된 이미지와 비교하는 단계(S24), 및 비교 결과로부터 단(랙) 위치를 추정하는 단계(S25)를 포함할 수 있다.
구체적으로, 촬영 이미지 중에서 특정 영역을 추출하여 추출 이미지를 얻는 단계(S22, S23)는 먼저, 촬영 이미지 중에서 특정 영역을 추출할 수 있다(S22). 이때, 특정 영역은 조리실(20) 내부의 조명부(300)일 수 있다. 이후, 해당 특정 영역의 특징을 추출할 수 있다(S23). 이러한 특정 영역의 특징은, 예를 들어, 색상, 광량, 형태 중에서 적어도 어느 하나일 수 있다.
이후, 추출 이미지를 기추출된 이미지와 비교하는 단계(S24)는 이전에, 예를 들어, 오븐의 제작 과정에서 추출된 이미지 일 수 있다. 이러한 추출 이미지를 기추출된 이미지와 비교함으로써 단(랙) 위치를 추정하할 수 있다(S25).
다음에, 추정된 단(랙) 위치에 따라 카메라(110)의 설정 값을 세팅할 수 있다(S26). 예를 들어, 카메라(110)의 화각 및 초점 중 적어도 어느 하나를 세팅할 수 있다.
이와 같이, 세팅된 카메라(110)의 화각 및 초점 중 적어도 어느 하나에 따라, 실제 카메라(110) 코일 조정을 하여 화각 레인지를 이동할 수 있다(S27).
이렇게 이동하여 맞춰진 촬영 조건에서 카메라 모듈(100)을 이용하여 영상을 촬영할 수 있다(S28).
이후, 이와 같이 촬영된 이미지는 단말기(80)로 전송될 수 있다. 그리고 단말기(80)의 디스플레이에 표시될 수 있다(S29). 경우에 따라, 오븐의 디스플레이 모듈(40)에도 해당 이미지가 표시될 수 있다.
이상 설명한 바와 같이, 본 발명의 실시예에 의하면, 조리기기의 조리실의 영상 기반 특징 인식을 통해 단(랙)의 위치를 추정할 수 있다.
또한, 추정된 단(랙)의 위치에 맞도록 카메라의 화각 및 초점 중 적어도 어느 하나를 설정할 수 있다.
이후, 설정된 화각 및 초점으로 카메라가 작동하여 이미지 취득하여 단말기로 전송되거나 및 조리기기의 디스플레이에 표시될 수 있다.
따라서, 기존의 고정된 화각 및 초점 방식의 영상 모니터링 기능 대비 사용성을 개선할 수 있다. 이에 따라, 단(랙) 위치에 따른 최적 영상 이미지를 제공할 수 있다.
또한, 조리기기에서 조리물(식재료)이 위치한 단(랙)을 효과적으로 추정 가능하다.
또한, 랙(단)의 영향을 받지 않는 조명부 영상을 인식하여 조리물(식재료)에 관계 없이 정확한 이미지를 얻을 수 있다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다.
따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다.
본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
본 발명에 의하면 조리기기의 조리실의 단(랙)의 위치를 추정할 수 있는 조리기기 및 그 제어방법을 제공할 수 있다.

Claims (15)

  1. 본체;
    상기 본체 내부에 일면이 개방되도록 마련되고 조리물을 수납하는 랙의 위치를 지지하는 다수의 단을 포함하는 조리실;
    상기 조리실 상부에 마련되어 조리물이 수납된 랙의 위치를 추정하고 상기 조리실 내부의 조리물이 수납된 랙의 위치를 촬영하여 촬영 이미지를 생성하는 카메라를 포함하는 카메라 모듈; 및
    상기 카메라 모듈의 일측에 배치되며. 외부의 공기를 흡입하여 상기 카메라모듈을 냉각시키는 냉각팬을 포함하여 구성되는 것을 특징으로 하는 조리기기.
  2. 제1항에 있어서, 상기 카메라 모듈은 상기 조리실 상부의 전장실에 설치되고, 상기 전장실은 상기 조리실과 공간적으로 분리된 것을 특징으로 하는 조리기기.
  3. 제1항에 있어서, 상기 카메라 모듈이 상기 조리실 내부를 촬영할 수 있도록 상기 조리실의 상부 벽에 마련되며, 상기 조리실 내부의 열이 상기 카메라로 전달되는 것을 차단하는 제1 글래스; 및
    상기 카메라와 상기 제1 글래스 사이에 마련되어 상기 카메라로 전달되는 열을 차단하는 제2 글래스를 포함하는 것을 특징으로 하는 조리기기.
  4. 제3항에 있어서, 상기 제1 글래스와 상기 제2 글래스 사이의 공간은 가스켓에 의하여 밀봉되는 것을 특징으로 하는 조리기기.
  5. 제1항에 있어서, 상기 카메라 모듈을 제어하는 제어부를 더 포함하는 것을 특징으로 하는 조리기기.
  6. 제5항에 있어서, 상기 제어부는 상기 촬영된 촬영 이미지를 사용자의 단말기로 전송하는 것을 특징으로 하는 조리기기.
  7. 제5항에 있어서, 상기 제어부는 특정 영역에 대하여 촬영된 이미지를 이용한 영상 인식 기반으로 상기 조리물이 수납된 랙의 위치를 추정하는 것을 특징으로 하는 조리기기.
  8. 제5항에 있어서, 상기 제어부는 상기 촬영된 이미지 중 조명 반사 신호를 이용하여 상기 조리물이 수납된 랙의 위치를 추정하는 것을 특징으로 하는 조리기기.
  9. 제5항에 있어서, 상기 제어부는, 상기 추정된 랙의 위치에 따라 카메라의 화각 및 초점 중 적어도 어느 하나를 설정하는 것을 특징으로 하는 조리기기.
  10. 제7항에 있어서, 상기 특정 영역은 상기 조리실 내부의 조명부인 것을 특징으로 하는 조리기기.
  11. 제5항에 있어서, 상기 제어부는 상기 촬영된 촬영 이미지를 사용자의 단말기로 전송하는 것을 특징으로 하는 조리기기.
  12. 본체;
    상기 본체 내부에 일면이 개방되도록 마련되고 조리물을 수납하는 랙의 위치를 지지하는 다수의 단을 포함하는 조리실;
    상기 조리실 상부에 마련되어 조리물이 수납된 랙의 위치를 추정하고 상기 조리실 내부의 조리물이 수납된 랙의 위치를 촬영하여 촬영 이미지를 생성하는 카메라를 포함하는 카메라 모듈; 및
    상기 카메라 모듈을 제어하는 제어부를 포함하고,
    상기 제어부는 촬영된 이미지를 이용한 영상 인식 기반으로 상기 조리물이 수납된 랙의 위치를 추정하고, 상기 추정된 랙의 위치에 따라 카메라의 화각 및 초점 중 적어도 어느 하나를 설정하는 것을 특징으로 하는 조리기기.
  13. 제12항에 있어서, 상기 제어부는 상기 촬영된 촬영 이미지를 사용자의 단말기로 전송하는 것을 특징으로 하는 조리기기.
  14. 제12항에 있어서, 상기 제어부는 촬영된 이미지를 이용한 영상 인식 기반으로 상기 조리물이 수납된 랙의 위치를 추정하는 것을 특징으로 하는 조리기기.
  15. 제12항에 있어서, 상기 제어부는 상기 촬영된 이미지 중 조명 반사 신호를 이용하여 상기 조리물이 수납된 랙의 위치를 추정하는 것을 특징으로 하는 조리기기.
PCT/KR2021/009912 2021-01-04 2021-07-29 조리기기 및 그 제어방법 WO2022145612A1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
EP21915410.1A EP4273452A1 (en) 2021-01-04 2021-07-29 Cooking appliance and control method therefor
US18/270,788 US20240053025A1 (en) 2021-01-04 2021-07-29 Cooking appliance and control method therefor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2021-0000251 2021-01-04
KR1020210000251A KR20220098482A (ko) 2021-01-04 2021-01-04 조리기기 및 그 제어방법

Publications (1)

Publication Number Publication Date
WO2022145612A1 true WO2022145612A1 (ko) 2022-07-07

Family

ID=82260474

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2021/009912 WO2022145612A1 (ko) 2021-01-04 2021-07-29 조리기기 및 그 제어방법

Country Status (4)

Country Link
US (1) US20240053025A1 (ko)
EP (1) EP4273452A1 (ko)
KR (1) KR20220098482A (ko)
WO (1) WO2022145612A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024053906A1 (ko) * 2022-09-07 2024-03-14 삼성전자주식회사 조리 기기
WO2024053907A1 (ko) * 2022-09-07 2024-03-14 삼성전자주식회사 조리 기기

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008298299A (ja) * 2007-05-29 2008-12-11 Hoya Corp 加熱調理器
KR20100134427A (ko) * 2009-06-15 2010-12-23 엘지전자 주식회사 조리기기 및 그 제어방법
US20160296055A1 (en) * 2015-04-07 2016-10-13 Convotherm Elektrogeraete Gmbh Hygienic oven cooking systems and methods
WO2018225666A1 (ja) * 2017-06-07 2018-12-13 パナソニックＩｐマネジメント株式会社 加熱調理器および加熱調理器の制御方法
JP2019184141A (ja) * 2018-04-09 2019-10-24 パナソニックＩｐマネジメント株式会社 加熱調理器

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008298299A (ja) * 2007-05-29 2008-12-11 Hoya Corp 加熱調理器
KR20100134427A (ko) * 2009-06-15 2010-12-23 엘지전자 주식회사 조리기기 및 그 제어방법
US20160296055A1 (en) * 2015-04-07 2016-10-13 Convotherm Elektrogeraete Gmbh Hygienic oven cooking systems and methods
WO2018225666A1 (ja) * 2017-06-07 2018-12-13 パナソニックＩｐマネジメント株式会社 加熱調理器および加熱調理器の制御方法
JP2019184141A (ja) * 2018-04-09 2019-10-24 パナソニックＩｐマネジメント株式会社 加熱調理器

Also Published As

Publication number Publication date
EP4273452A1 (en) 2023-11-08
KR20220098482A (ko) 2022-07-12
US20240053025A1 (en) 2024-02-15

Similar Documents

Publication Publication Date Title
WO2022145612A1 (ko) 조리기기 및 그 제어방법
WO2017209453A1 (en) Cooking apparatus and controlling method thereof
WO2021172650A1 (en) Cooking appliance
AU2017273057B2 (en) Cooking apparatus and controlling method thereof
WO2016182237A1 (ko) 조리기기 및 조리기기의 제어방법
WO2018128375A1 (en) Oven
WO2011122887A2 (en) Defrosting system and method of refrigerator
WO2017150851A1 (en) Oven
WO2018030751A1 (en) Cooking appliance
WO2018236039A1 (ko) 오븐
WO2022169083A1 (ko) 조리기기 및 그 제어방법
WO2015170798A1 (en) Display apparatus and controlling method thereof
WO2019124944A1 (ko) 오븐
WO2019083226A1 (en) OVEN
WO2021002670A1 (en) Heating cooker
WO2021107345A1 (ko) 냉장고
WO2021149932A1 (en) Cooking apparatus and method for controlling thereof
EP3870009A1 (en) Heating cooker including three dimensional measuring device
WO2020116814A1 (en) Heating cooker including three dimensional measuring device
WO2024058611A1 (ko) 그릴 히터를 이용하여 조리물을 가열하는 조리 기기
WO2021145539A1 (en) Knob assembly and cooking apparatus having the same
WO2024090750A1 (ko) 조리 기기
WO2016129914A1 (en) Cooking apparatus
WO2022050705A1 (ko) 냉장고
WO2022225092A1 (ko) 조리기기

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21915410

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 18270788

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2021915410

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2021915410

Country of ref document: EP

Effective date: 20230804