KR102506666B1 - 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템 - Google Patents
전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템 Download PDFInfo
- Publication number
- KR102506666B1 KR102506666B1 KR1020180019314A KR20180019314A KR102506666B1 KR 102506666 B1 KR102506666 B1 KR 102506666B1 KR 1020180019314 A KR1020180019314 A KR 1020180019314A KR 20180019314 A KR20180019314 A KR 20180019314A KR 102506666 B1 KR102506666 B1 KR 102506666B1
- Authority
- KR
- South Korea
- Prior art keywords
- microwave oven
- image
- camera
- display device
- cooktop
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B6/00—Heating by electric, magnetic or electromagnetic fields
- H05B6/64—Heating using microwaves
- H05B6/6435—Aspects relating to the user interface of the microwave heating apparatus
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B1/00—Details of electric heating devices
- H05B1/02—Automatic switching arrangements specially adapted to apparatus ; Control of heating devices
- H05B1/0227—Applications
- H05B1/0252—Domestic applications
- H05B1/0258—For cooking
- H05B1/0261—For cooking of food
- H05B1/0266—Cooktops
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
- H04L12/2827—Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality
- H04L12/2829—Reporting to a device within the home network; wherein the reception of the information reported automatically triggers the execution of a home appliance functionality involving user profiles according to which the execution of a home appliance functionality is automatically triggered
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/46—Interconnection of networks
- H04L12/4604—LAN interconnection over a backbone network, e.g. Internet, Frame Relay
- H04L12/462—LAN interconnection over a bridge based backbone
- H04L12/4625—Single bridge functionality, e.g. connection of two networks over a single bridge
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B6/00—Heating by electric, magnetic or electromagnetic fields
- H05B6/02—Induction heating
- H05B6/06—Control, e.g. of temperature, of power
- H05B6/062—Control, e.g. of temperature, of power for cooking plates or the like
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B6/00—Heating by electric, magnetic or electromagnetic fields
- H05B6/64—Heating using microwaves
- H05B6/642—Cooling of the microwave components and related air circulation systems
- H05B6/6423—Cooling of the microwave components and related air circulation systems wherein the microwave oven air circulation system is also used as air extracting hood
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B6/00—Heating by electric, magnetic or electromagnetic fields
- H05B6/64—Heating using microwaves
- H05B6/6426—Aspects relating to the exterior of the microwave heating apparatus, e.g. metal casing, power cord
- H05B6/6429—Aspects relating to mounting assemblies of wall-mounted microwave ovens
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B6/00—Heating by electric, magnetic or electromagnetic fields
- H05B6/64—Heating using microwaves
- H05B6/6447—Method of operation or details of the microwave heating apparatus related to the use of detectors or sensors
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B6/00—Heating by electric, magnetic or electromagnetic fields
- H05B6/64—Heating using microwaves
- H05B6/6447—Method of operation or details of the microwave heating apparatus related to the use of detectors or sensors
- H05B6/645—Method of operation or details of the microwave heating apparatus related to the use of detectors or sensors using temperature sensors
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B6/00—Heating by electric, magnetic or electromagnetic fields
- H05B6/64—Heating using microwaves
- H05B6/6447—Method of operation or details of the microwave heating apparatus related to the use of detectors or sensors
- H05B6/6461—Method of operation or details of the microwave heating apparatus related to the use of detectors or sensors using fire or fume sensors
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B6/00—Heating by electric, magnetic or electromagnetic fields
- H05B6/64—Heating using microwaves
- H05B6/66—Circuits
- H05B6/668—Microwave heating devices connected to a telecommunication network
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B6/00—Heating by electric, magnetic or electromagnetic fields
- H05B6/64—Heating using microwaves
- H05B6/80—Apparatus for specific applications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
- H05B2213/00—Aspects relating both to resistive heating and to induction heating, covered by H05B3/00 and H05B6/00
- H05B2213/06—Cook-top or cookware capable of communicating with each other
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Electromagnetism (AREA)
- Signal Processing (AREA)
- Automation & Control Theory (AREA)
- Computer Networks & Wireless Communication (AREA)
- Human Computer Interaction (AREA)
- Food Science & Technology (AREA)
- Geometry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Electric Ovens (AREA)
- Electric Stoves And Ranges (AREA)
Abstract
조리 시스템이 개시된다. 본 조리 시스템은 사용자 명령에 따라, 제1 카메라를 통해 전자 레인지의 하측에 위치하는 쿡 탑을 쵤영하여 제1 영상을 생성하거나 제2 카메라를 통해 전자 레인지의 내부를 촬영하여 제2 영상을 생성하고, 제1 및 제2 영상 중 적어도 하나의 영상을 디스플레이 장치로 전송하는 전자 레인지 및 전자 레인지로부터 제1 및 제2 영상 중 적어도 하나의 영상을 수신하고, 수신한 영상을 표시하는 디스플레이 장치를 포함한다.
Description
본 개시는 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템에 관한 것으로, 보다 상세하게는 카메라를 통해 촬영된 영상을 제공하는 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템에 관한 것이다.
최근 전자 기술의 발달로 소비자의 니즈에 부합하는 다양한 전자 장치들이 개발되고 있다. 특히, 최근에는 가정 내 쿡 탑(cook top) 위에 설치되는 전자 레인지인 오버 더 레인지(Over the range)가 개발되고 있다.
여기에서, 쿡 탑은 적어도 하나 이상의 화구를 통해 조리 용기에 담긴 조리 대상을 가열하는 전기 레인지(electric range) 또는 가스 레인지(gas range)로써, 단독으로 구현될 수 있음은 물론, 쿡 탑 아래에 오븐을 포함하는 오븐 레인지(oven range)로 구현될 수 있다.
그리고, 오버 더 레인지는 쿡 탑의 위쪽 방향에 설치되는 전자 레인지로써, 마이크로파의 성질을 이용하여 조리 용기에 담긴 조리 대상을 가열하는 조리 기기를 의미한다.
한편, 사용자는 조리를 함에 있어서, 조리 대상 근처에서 조리 대상의 과열 또는 오버 쿡(over cook)을 지속적으로 확인해야 하므로, 높은 피로도를 느꼈다.
본 개시는 상술한 필요성에 의해 안출된 것으로, 본 개시의 목적은 조리 대상 근처에서 조리 대상을 지속적으로 확인하지 않고도, 조리 대상의 과열 또는 오버 쿡 여부 등을 확인할 수 있는 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템을 제공함에 있다.
상기 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 조리 시스템은 사용자 명령에 따라, 제1 카메라를 통해 전자 레인지의 하측에 위치하는 쿡 탑을 쵤영하여 제1 영상을 생성하거나 제2 카메라를 통해 상기 전자 레인지의 내부를 촬영하여 제2 영상을 생성하고, 상기 제1 및 제2 영상 중 적어도 하나의 영상을 디스플레이 장치로 전송하는 전자 레인지 및 상기 전자 레인지로부터 제1 및 제2 영상 중 적어도 하나의 영상을 수신하고, 상기 수신한 영상을 표시하는 디스플레이 장치를 포함한다.
그리고, 상기 디스플레이 장치는 사용자 입력의 수신에 응답하여 상기 전자 레인지 및 상기 쿡 탑 중 적어도 하나를 제어하기 위한 제어 명령을 상기 전자 레인지로 전송하고, 상기 전자 레인지는 상기 디스플레이 장치로부터 상기 제어 명령을 수신하고, 상기 수신된 제어 명령에 따라 상기 전자 레인지 및 쿡 탑 중 적어도 하나의 동작을 제어할 수 있다.
여기에서, 상기 제1 카메라는, 제1 촬영 방향에서 상기 쿡 탑 상에 위치한 제1 조리 용기를 촬영하고, 상기 제2 카메라는, 제2 촬영 방향에서 상기 전자 레인지의 내부에 위치한 제2 조리 용기를 촬영하며, 상기 전자 레인지는 상기 제1 촬영 방향에서 상기 제1 조리 용기를 촬영한 상기 제1 영상 및 상기 제2 촬영 방향에서 상기 제2 조리 용기를 촬영한 상기 제2 영상을 각각 제3 촬영 방향에 대응되는 영상으로 보정할 수 있고, 상기 제3 촬영 방향은, 상기 조리 용기의 상측 수직 방향에 대응될 수 있다.
그리고, 상기 디스플레이 장치는 컨텐츠를 표시하고 있는 상태에서, 상기 제1 및 제2 영상 중 적어도 하나의 영상을 표시하기 위한 사용자 입력이 수신되는 경우, 상기 전자 장치로부터 상기 제1 및 제2 영상 중 적어도 하나의 영상을 수신하고, 상기 컨텐츠에 상기 수신된 영상을 오버랩하여 표시할 수 있다.
그리고, 상기 디스플레이 장치는 상기 표시된 영상의 크기 및 위치 중 적어도 하나를 변경하기 위한 사용자 입력이 수신되면, 상기 사용자 입력에 따라 상기 표시된 영상의 크기 및 위치 중 적어도 하나를 변경할 수 있다.
그리고, 상기 전자 레인지는 상기 제1 및 제2 영상에 기초하여, 상기 전자 레인지의 내부에 위치한 조리 용기 또는 상기 쿡 탑 상에 위치한 조리 용기에서의 기포의 발생 정도를 식별하고, 상기 식별된 기포의 발생 정도를 나타내기 위한 알림 메시지를 상기 디스플레이 장치로 전송하고, 상기 디스플레이 장치는, 상기 전자 레인지로부터 수신된 알림 메시지를 표시할 수 있다.
그리고, 상기 전자 레인지는 상기 제1 및 제2 영상에 기초하여, 상기 전자 장치의 내부에 위치한 조리 용기 또는 상기 쿡 탑 상에 위치한 조리 용기에서의 연기의 발생 정도를 식별하고, 상기 식별된 연기의 발생 정도를 나타내기 위한 알림 메시지를 상기 디스플레이 장치로 전송하며, 상기 연기의 발생 정도가 기설정된 임계 값 이상인 경우 상기 전자 레인지의 전장부의 구동을 중지시키거나 상기 전자 레인지의 후드(hood)를 구동시킬 수 있고, 상기 디스플레이 장치는, 상기 전자 레인지로부터 수신된 알림 메시지를 표시할 수 있다.
그리고, 상기 전자 레인지는 상기 제1 및 제2 영상 중 적어도 하나의 영상의 블러(blur) 정도를 식별하고, 상기 제1 및 제2 카메라 중에서 상기 식별된 블러 정도가 기설정된 임계 값 이상인 영상을 촬영하는 카메라를 식별하며, 상기 식별된 카메라에 근접하여 구비된 팬(fan)을 구동시킬 수 있다.
한편, 본 개시의 일 실시 예에 따른 전자 레인지는 전장부, 제1 카메라, 통신부 및 사용자 명령에 따라, 상기 제1 카메라를 통해 상기 전자 레인지의 하측에 위치하는 쿡 탑을 쵤영하여 제1 영상을 생성하고, 상기 제1 영상을 디스플레이 장치로 전송하도록 상기 통신부를 제어하는 프로세서를 포함한다.
그리고, 전자 레인지는 제2 카메라를 더 포함할 수 있고, 상기 프로세서는 사용자 명령에 따라, 상기 제2 카메라를 통해 상기 전자 레인지의 내부를 촬영하여 제2 영상을 생성하고, 상기 제2 영상을 상기 디스플레이 장치로 전송하도록 상기 통신부를 제어할 수 있다.
그리고, 상기 프로세서는 상기 디스플레이 장치로부터 상기 전자 레인지 및 상기 쿡 탑 중 적어도 하나를 제어하기 위한 제어 명령을 수신하고, 상기 수신된 제어 명령에 따라 상기 전자 레인지 및 쿡 탑 중 적어도 하나의 동작을 제어할 수 있다.
여기에서, 상기 제1 카메라는, 상기 쿡 탑 상에 위치한 조리 용기를 사선 방향에서 촬영하도록 상기 전자 레인지의 특정 위치에 배치되고, 상기 제2 카메라는, 상기 레인지장치의 내부에 위치한 조리 용기를 사선 방향에서 촬영하도록 상기 전자 레인지의 특정 위치에 배치되며, 상기 프로세서는 상기 제1 및 제2 카메라가 상기 사선 방향에서 상기 조리 용기를 촬영한 영상을 보정하고, 상기 보정된 영상을 상기 디스플레이 장치로 전송할 수 있으며, 상기 보정된 영상은, 상기 조리 용기를 수직한 방향에서 촬영하는 영상에 대응될 수 있다.
그리고, 상기 프로세서는 상기 제1 및 제2 영상에 기초하여, 상기 전자 레인지의 내부에 위치한 조리 용기 또는 상기 쿡 탑 상에 위치한 조리 용기에서의 기포의 발생 정도를 식별하고, 상기 식별된 기포의 발생 정도를 나타내기 위한 알림 메시지를 상기 디스플레이 장치로 전송할 수 있다.
그리고, 상기 프로세서는 상기 제1 및 제2 영상에 기초하여, 상기 전자 레인지의 내부에 위치한 조리 용기 또는 상기 쿡 탑 상에 위치한 조리 용기에서의 연기의 발생 정도를 식별하고, 상기 식별된 연기의 발생 정도를 나타내기 위한 알림 메시지를 상기 디스플레이 장치로 전송하며, 상기 연기의 발생 정도가 기설정된 임계 값 이상인 경우 상기 전장부의 구동을 중지시키거나 상기 전자 레인지의 후드(hood)를 구동시킬 수 있다.
그리고, 상기 프로세서는 상기 제1 및 제2 영상 중 적어도 하나의 영상의 블러(blur) 정도를 식별하고, 상기 제1 및 제2 카메라 중에서 상기 식별된 블러 정도가 기설정된 임계 값 이상인 영상을 촬영하는 카메라를 식별하며, 상기 식별된 카메라에 근접하여 구비된 팬(fan)을 구동시킬 수 있다.
한편, 본 개시의 일 실시 예에 따른 디스플레이 장치는, 디스플레이, 통신부 및 전자 레인지로부터 상기 전자 레인지의 하측에 위치하는 쿡 탑을 쵤영하여 생성된 제1 영상 및 상기 전자 레인지의 내부를 촬영하여 생성된 제2 영상 중 적어도 하나의 영상을 상기 통신부를 통해 수신하고, 상기 수신한 영상을 상기 디스플레이에 표시하는 프로세서를 포함할 수 있다.
그리고, 상기 프로세서는 사용자 입력의 수신에 응답하여 상기 전자 레인지 및 상기 쿡 탑 중 적어도 하나를 제어하기 위한 제어 명령을 상기 전자 레인지로 전송할 수 있다.
그리고, 상기 프로세서는 컨텐츠를 표시하고 있는 상태에서, 상기 제1 및 제2 영상 중 적어도 하나의 영상을 표시하기 위한 사용자 입력이 수신되는 경우, 상기 제1 및 제2 영상 중 적어도 하나의 영상을 수신하고, 상기 컨텐츠에 상기 수신된 영상을 오버랩하여 표시할 수 있다.
그리고, 상기 프로세서는 상기 표시된 영상의 크기 및 위치 중 적어도 하나를 변경하기 위한 사용자 입력이 수신되면, 상기 사용자 입력에 따라 상기 표시된 영상의 크기 및 위치 중 적어도 하나를 변경할 수 있다.
한편, 본 개시의 일 실시 예에 따른 전자 레인지의 제어 방법은 사용자 명령에 따라, 제1 카메라를 통해 상기 전자 레인지의 하측에 위치하는 쿡 탑을 쵤영하여 제1 영상을 생성하는 단계 및 상기 제1 영상을 디스플레이 장치로 전송하는 단계를 포함한다.
그리고, 전자 레인지의 제어 방법은 사용자 명령에 따라, 제2 카메라를 통해 상기 전자 레인지의 내부를 촬영하여 제2 영상을 생성하는 단계를 더 포함하고, 상기 전송하는 단계는, 상기 제1 및 제2 영상을 상기 디스플레이 장치로 전송할 수 있다.
한편, 본 개시의 일 실시 예에 따른 디스플레이 장치의 제어 방법은 전자 레인지로부터 상기 전자 레인지의 하측에 위치하는 쿡 탑을 쵤영하여 생성된 제1 영상 및 상기 전자 레인지의 내부를 촬영하여 생성된 제2 영상 중 적어도 하나의 영상을 수신하는 단계 및 상기 수신한 영상을 표시하는 단계를 포함할 수 있다.
이상과 같은 본 발명의 다양한 실시 예에 따르면, 사용자는 주방을 벗어나서도 조리 대상을 지속적으로 확인할 수 있으므로, 조리 과정에서 오는 피로도를 줄일 수 있다. 또한, 주방 외의 공간에서 원격으로 전자 레인지 및 쿡 탑 기기를 제어할 수 있으므로, 사용자 편의성이 증대될 수 있다.
도 1은 본 개시의 일 실시 예에 따른 조리 시스템을 설명하기 위한 도면이다.
도 2는 본 개시의 일 실시 예에 따른 전자 레인지를 설명하기 위한 블록도이다.
도 3a 내지 도 3b는 본 개시의 일 실시 예에 따른 전자 레인지에 구비되는 카메라를 설명하기 위한 도면이다.
도 4는 본 개시의 일 실시 예에 따른 디스플레이 장치에 표시되는 영상을 설명하기 위한 도면이다.
도 5는 본 개시의 일 실시 예에 따른 전자 레인지가 조리 용기에서 발생되는 기포를 식별하는 실시 예를 설명하기 위한 도면이다.
도 6은 본 개시의 일 실시 예에 따른 전자 레인지가 조리 용기에서 발생되는 연기를 식별하는 실시 예를 설명하기 위한 도면이다.
도 7은 본 개시의 일 실시 예에 따른 전자 레인지가 카메라의 김 서림을 방지하는 실시 예를 설명하기 위한 도면이다.
도 8은 본 개시의 일 실시 예에 따른 전자 레인지가 카메라의 이물질을 제거하는 실시 예를 설명하기 위한 도면이다.
도 9는 본 개시의 일 실시 예에 따른 디스플레이 장치를 설명하기 위한 블록도이다.
도 10a 내지 10e는 본 개시의 일 실시 예에 따른 디스플레이 장치가 전자 레인지의 내부를 촬영한 영상 및/또는 쿡 탑을 촬영한 영상을 표시하는 실시 예를 설명하기 위한 도면이다.
도 11은 본 개시의 일 실시 예에 따른 디스플레이 장치가 컨텐츠와 함께 카메라를 통해 촬영된 영상을 표시하는 실시 예를 설명하기 위한 도면이다.
도 12a 내지 도 12c는 본 개시의 일 실시 예에 따른 디스플레이 장치에 표시되는, 카메라에 의해 촬영된 영상을 편집하는 실시 예를 설명하기 위한 도면이다.
도 13a 내지 도 13c는 본 개시의 일 실시 예에 따른 디스플레이 장치가 사용자 단말 장치로 구현되는 경우의 실시 예를 설명하기 위한 도면이다.
도 14a 및 도 14b는 본 개시의 일 실시 예에 따른 전자 레인지가 통신을 수행하는 방식을 설명하기 위한 도면이다.
도 15는 본 개시의 일 실시 예에 따른 전자 레인지의 상세 블록도이다.
도 16a 및 도 16b는 본 개시의 일 실시 예에 따른 전자 레인지의 구조를 설명하기 위한 도면이다.
도 17은 본 개시의 일 실시 예에 따른 전자 레인지의 동작을 설명하기 위한 흐름도이다.
도 18은 본 개시의 일 실시 예에 따른 디스플레이 장치의 동작을 설명하기 위한 흐름도이다.
도 2는 본 개시의 일 실시 예에 따른 전자 레인지를 설명하기 위한 블록도이다.
도 3a 내지 도 3b는 본 개시의 일 실시 예에 따른 전자 레인지에 구비되는 카메라를 설명하기 위한 도면이다.
도 4는 본 개시의 일 실시 예에 따른 디스플레이 장치에 표시되는 영상을 설명하기 위한 도면이다.
도 5는 본 개시의 일 실시 예에 따른 전자 레인지가 조리 용기에서 발생되는 기포를 식별하는 실시 예를 설명하기 위한 도면이다.
도 6은 본 개시의 일 실시 예에 따른 전자 레인지가 조리 용기에서 발생되는 연기를 식별하는 실시 예를 설명하기 위한 도면이다.
도 7은 본 개시의 일 실시 예에 따른 전자 레인지가 카메라의 김 서림을 방지하는 실시 예를 설명하기 위한 도면이다.
도 8은 본 개시의 일 실시 예에 따른 전자 레인지가 카메라의 이물질을 제거하는 실시 예를 설명하기 위한 도면이다.
도 9는 본 개시의 일 실시 예에 따른 디스플레이 장치를 설명하기 위한 블록도이다.
도 10a 내지 10e는 본 개시의 일 실시 예에 따른 디스플레이 장치가 전자 레인지의 내부를 촬영한 영상 및/또는 쿡 탑을 촬영한 영상을 표시하는 실시 예를 설명하기 위한 도면이다.
도 11은 본 개시의 일 실시 예에 따른 디스플레이 장치가 컨텐츠와 함께 카메라를 통해 촬영된 영상을 표시하는 실시 예를 설명하기 위한 도면이다.
도 12a 내지 도 12c는 본 개시의 일 실시 예에 따른 디스플레이 장치에 표시되는, 카메라에 의해 촬영된 영상을 편집하는 실시 예를 설명하기 위한 도면이다.
도 13a 내지 도 13c는 본 개시의 일 실시 예에 따른 디스플레이 장치가 사용자 단말 장치로 구현되는 경우의 실시 예를 설명하기 위한 도면이다.
도 14a 및 도 14b는 본 개시의 일 실시 예에 따른 전자 레인지가 통신을 수행하는 방식을 설명하기 위한 도면이다.
도 15는 본 개시의 일 실시 예에 따른 전자 레인지의 상세 블록도이다.
도 16a 및 도 16b는 본 개시의 일 실시 예에 따른 전자 레인지의 구조를 설명하기 위한 도면이다.
도 17은 본 개시의 일 실시 예에 따른 전자 레인지의 동작을 설명하기 위한 흐름도이다.
도 18은 본 개시의 일 실시 예에 따른 디스플레이 장치의 동작을 설명하기 위한 흐름도이다.
먼저, 본 명세서 및 청구범위에서 사용되는 용어는 본 개시의 기능을 고려하여 일반적인 용어들을 선택하였다. 하지만, 이러한 용어들은 당 분야에 종사하는 기술자의 의도나 법률적 또는 기술적 해석 및 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 일부 용어는 출원인이 임의로 선정한 용어도 있다. 이러한 용어에 대해서는 본 명세서에서 정의된 의미로 해석될 수 있으며, 구체적인 용어 정의가 없으면 본 명세서의 전반적인 내용 및 당해 기술 분야의 통상적인 기술 상식을 토대로 해석될 수도 있다.
또한, 본 개시를 설명함에 있어서, 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 개시의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우, 그에 대한 상세한 설명은 축약하거나 생략한다.
나아가, 이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 개시의 실시 예를 상세하게 설명하지만, 본 개시가 실시 예들에 의해 제한되거나 한정되는 것은 아니다.
이하, 첨부된 도면을 참조하여 본 개시를 상세히 설명한다.
도 1은 본 개시의 일 실시 예에 따른 조리 시스템을 설명하기 위한 도면이다.
도 1을 참조하면, 본 개시의 일 실시 예에 따른 조리 시스템(1000)은 전자 레인지(100) 및 디스플레이 장치(200)를 포함할 수 있다.
도 1에 도시된 바와 같이, 전자 레인지(100)는 쿡 탑 위에 설치된 전자 레인지인 오버 더 레인지(OTR, Over the range)로 구현될 수 있고, 디스플레이 장치(200)는 스마트 TV로 구현될 수 있다. 다만, 이는 일 실시 예일 뿐, 디스플레이 장치(200)는 스마트 폰, 태블릿, PC, 노트북 등과 같이 디스플레이를 구비한 다양한 전자 장치로 구현될 수 있다.
전자 레인지(100) 및 디스플레이 장치(200)는 통신을 수행하여 다양한 데이터를 송수신 할 수 있다.
구체적으로, 전자 레인지(100)는 디스플레이 장치(200)와 통신을 수행하여, 디스플레이 장치(100)로 제1 및 제2 영상 중 적어도 하나의 영상을 전송할 수 있다. 여기에서, 제1 영상은 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 영상이 될 수 있고, 제2 영상은 전자 레인지(100)의 내부를 촬영한 영상이 될 수 있다.
이를 위해, 전자 레인지(100)는 제1 카메라 및 제2 카메라 중 적어도 하나를 포함할 수 있다. 여기에서, 제1 카메라는 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영하기 위한 카메라가 될 수 있고, 제2 카메라는 전자 레인지(100) 내부를 촬영하기 위한 카메라가 될 수 있다.
그리고, 디스플레이 장치(200)는 전자 레인지(100)로부터 수신된 영상을 표시할 수 있다. 여기에서, 수신된 영상은 제1 영상 및/또는 제2 영상이 될 수 있다.
이에 따라, 사용자는 조리 대상 근처에서 조리 대상을 지속적으로 확인할 필요 없이, 디스플레이 장치(200)를 통해 조리 대상의 과열 또는 오버 쿡 여부 등을 확인할 수 있다.
도 2는 본 개시의 일 실시 예에 따른 전자 레인지를 설명하기 위한 블록도이다. 이하, 설명의 편의를 위해 도 3a 내지 도 3b를 참조하여 설명한다.
도 2를 참조하면, 본 개시의 일 실시 예에 따른 전자 레인지(100)는 제1 카메라(110), 통신부(130) 및 프로세서(140)를 포함하고, 제2 카메라(120)를 더 포함할 수 있다.
제1 카메라(110)는 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영할 수 있다. 이를 위해, 제1 카메라(120)는 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영할 수 있는 위치에 구비될 수 있다.
예를 들어, 도 3a를 참조하면, 제1 카메라(110)는 전자 레인지(100)의 아랫면의 일 영역에 구비될 수 있다. 한편, 도 3a에서 제1 카메라(110)가 위치하는 영역은 일 실시 예일 뿐, 제1 카메라(110)는 전자 레인지(100)의 아랫면의 가운데 영역 등과 같이 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영할 수 다양한 위치에 구비될 수 있다.
제2 카메라(120)는 전자 레인지(100)의 내부를 촬영할 수 있다. 이를 위해, 제2 카메라(120)는 전자 레인지(100)의 내부를 촬영할 수 있는 위치에 구비될 수 있다.
예를 들어, 도 3b에 도시된 바와 같이, 제2 카메라(120)는 전자 레인지(100) 내부의 천장 중 일 영역에 구비될 수 있다. 한편, 도 3b에서 제2 카메라(120)가 위치하는 영역은 일 실시 예일 뿐, 제2 카메라는 전자 레인지(100) 내부의 천장의 가운데 영역 등과 같이, 전자 레인지(100)의 내부를 촬영할 수 있는 다양한 위치에 구비될 수 있다.
통신부(130)는 다양한 유형의 통신 방식에 따라 다양한 유형의 외부 장치와 통신을 수행할 수 있다.
통신부(130)는 디스플레이 장치(200)와 통신을 수행하여, 디스플레이 장치(200)로 제1 및 제2 영상 중 적어도 하나의 영상을 전송할 수 있다. 여기에서, 제1 영상은 제1 카메라(110)를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 영상이고, 제2 영상은 제2 카메라(120)를 통해 전자 레인지(100)의 내부를 촬영한 영상이 될 수 있다.
또한, 통신부(130)는 디스플레이 장치(200)와 통신을 수행하여, 디스플레이 장치(200)로부터 전자 레인지(100) 및 쿡 탑 중 적어도 하나를 제어하기 위한 제어 명령을 수신할 수 있다. 여기에서, 제어 명령은 전자 레인지(100)의 전원 온/오프, 조리 시간 또는 쿡 탑의 전원 온/오프, 쿡 탑의 화구의 열 온도 조절 등을 제어하는 명령이 될 수 있다.
또한, 통신부(130)는 쿡 탑과 통신을 수행하여, 쿡 탑으로 제어 명령을 전송할 수 있다. 여기에서, 제어 명령은 상술한 디스플레이 장치(200)로부터 수신된 제어 명령이 될 수 있다. 예를 들어, 제어 명령은 쿡 탑의 전원 온/오프, 쿡 탑의 화구의 열 온도 조절 등을 제어하는 명령이 될 수 있다.
이를 위해, 통신부(130)는 와이파이 칩, 블루투스 칩 등과 같은 무선 통신 칩을 포함할 수 있다.
또한, 전자 레인지(100)는 전장부(미도시)를 더 포함할 수 있다. 전장부에는 전자 레인지(100) 내부의 조리 대상을 조리하기 위해 마이크로웨이브를 발진시키기는 마그네트론과 고압트랜스와 같은 각종 전장부품이 설치될 수 있다.
프로세서(140)는 전자 레인지(100)의 전반적인 동작을 제어한다. 이를 위해, 프로세서(140)는 중앙처리장치(central processing unit(CPU)), 어플리케이션 프로세서(application processor(AP)), 또는 커뮤니케이션 프로세서(communication processor(CP)) 중 하나 또는 그 이상을 포함할 수 있다.
프로세서(140)는 디스플레이 장치(100)로 제1 및 제2 영상 중 적어도 하나의 영상을 전송하도록 통신부(130)를 제어할 수 있다. 여기에서, 제1 영상은 제1 카메라(110)를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 영상이고, 제2 영상은 제2 카메라(120)를 통해 전자 레인지(100)의 내부를 촬영한 영상이 될 수 있다.
구체적으로, 프로세서(140)는 디스플레이 장치(200)로부터 제1 영상을 요청하는 신호가 수신되는 경우 제1 카메라를 통해 제1 영상을 생성하고, 생성한 제1 영상을 디스플레이 장치(200)로 전송할 수 있다. 그리고, 프로세서(140)는 디스플레이 장치(200)로부터 제2 영상을 요청하는 신호가 수신되는 경우 제2 카메라를 통해 제2 영상을 생성하고, 생성한 제2 영상을 디스플레이 장치(200)로 전송할 수 있다.
또한, 프로세서(140)는 디스플레이 장치(200)로부터 제1 및 제2 영상을 요청하는 신호가 수신되는 경우 제1 카메라를 통해 제1 영상 및 제2 카메라를 통해 제2 영상을 생성하고, 생성한 제1 및 제2 영상을 디스플레이 장치(200)로 전송할 수 있다.
그리고, 프로세서(140)는 디스플레이 장치(200)로부터 전자 레인지(100) 및 쿡 탑 중 적어도 하나를 제어하기 위한 제어 명령을 수신할 수 있다. 여기에서, 제어 명령은 전자 레인지(100)의 전원 온/오프, 조리 시간 또는 쿡 탑의 전원 온/오프, 쿡 탑의 화구의 열 온도 조절 등을 제어하는 명령이 될 수 있다.
그리고, 프로세서(140)는 디스플레이 장치(200)로부터 수신된 제어 명령이 전자 레인지(100)를 제어하기 위한 제어 명령인 경우, 수신된 제어 명령에 따라 전자 레인지(100)의 기능을 제어할 수 있다. 예를 들어, 제어 명령이 전자 레인지(100)의 전원을 오프시키는 명령일 경우, 프로세서(140)는 제어 명령에 기초해서 전자 레인지(100)의 전원을 오프시킬 수 있다.
또한, 프로세서(140)는 디스플레이 장치(200)로부터 수신된 제어 명령이 쿡 탑을 제어하기 위한 제어 명령인 경우, 수신된 제어 명령을 쿡 탑으로 전송할 수 있다. 예를 들어, 제어 명령이 쿡 탑의 전원을 오프시키는 명령일 경우, 프로세서(140) 수신된 제어 명령을 쿡 탑으로 전송할 수 있다. 이후, 쿡 탑은 전자 레인지(100)로부터 수신된 제어 명령에 기초해서 쿡 탑의 기능을 제어할 수 있다. 본 실시 예에서, 쿡 탑은 수신된 제어 명령에 기초해서 쿡 탑의 전원을 오프시킬 수 있다.
이와 같이, 전자 레인지(100)가 디스플레이 장치(200)를 통해 전자 레인지(100)의 내부를 촬영한 영상 또는 쿡 탑을 촬영한 영상을 표시함으로써, 사용자는 조리 대상 근처에서 조리 대상을 지속적으로 확인할 필요 없이, 조리 과정을 확인할 수 있다.
또한, 사용자는 조리 대상 근처로 이동할 필요 없이, 원격으로 전자 레인지(100) 및 쿡 탑 중 적어도 하나를 제어할 수 있으므로, 사용자 편의성이 증대될 수 있다.
도 4는 본 개시의 일 실시 예에 따른 디스플레이 장치에 표시되는 영상을 설명하기 위한 도면이다.
본 개시의 일 실시 예에 따른 전자 레인지(100)의 제1 카메라(110)는 도 3a에 도시된 바와 같이, 전자 레인지(100)의 아랫면의 일 영역에 구비될 수 있다. 즉, 제1 카메라(110)는 쿡 탑 상에 위치한 조리 용기를 사선 방향에서 촬영하도록 전자 레인지(100)의 특정 위치에 배치될 수 있다.
또한, 본 개시의 일 실시 예에 따른 전자 레인지(100)의 제2 카메라(120)는 도 3b에 도시된 바와 같이, 전자 레인지(100) 내부의 천장 중 일 영역에 구비될 수 있다. 즉, 제2 카메라(120)는 전자 레인지(100)의 내부에 위치한 조리 용기를 사선 방향에서 촬영하도록 전자 레인지(100)의 특정 위치에 배치될 수 있다.
이에 따라, 조리할 때 발생하는 수증기 등으로부터 카메라의 렌즈를 보호할 수 있다.
한편, 본 개시의 일 실시 예에 따른 전자 레인지(100)는 사선 방향으로 촬영된 영상(410)을 보정하여 디스플레이 장치(200)로 전송할 수 있다.
여기에서 보정된 영상은 도 4에 도시된 바와 같이, 조리 용기를 수직한 방향에서 촬영하는 영상(420)에 대응될 수 있다.
이를 위해, 프로세서(140)는 기저장된 전자 레인지(100)의 내부 이미지 및 쿡 탑의 이미지를 이용하거나 윤곽선 검출 알고리즘을 이용할 수 있다.
구체적으로, 프로세서(140)는 기저장된 쿡 탑의 이미지와 제1 카메라(110)를 통해 촬영된 제1 영상을 비교하여, 사각 형상의 쿡 탑에 매칭되는 이미지를 제1 영상에서 식별할 수 있다. 그리고, 프로세서(140)는 제1 영상을 사각 형상의 쿡 탑에 수직한 방향에서 촬영한 영상에 대응되도록 보정함으로써, 제1 영상이 조리 용기를 수직한 방향에서 촬영한 영상에 대응되도록 보정할 수 있다.
마찬가지로, 프로세서(140)는 기저장된 전자 레인지(100)의 내부 이미지와 제2 카메라(120)를 통해 촬영된 제2 영상을 비교하여, 전자 레인지(100) 내부의 둥근 원판에 매칭되는 이미지를 제2 영상에서 식별할 수 있다. 그리고, 프로세서(140)는 제2 영상을 둥근 원판에 수직한 방향에서 촬영한 영상에 대응되도록 보정함으로써, 제2 영상이 조리 용기를 수직한 방향에서 촬영한 영상에 대응되도록 보정할 수 있다.
또한, 프로세서(140)는 윤곽선 알고리즘을 통해 제1 영상에서 쿡 탑의 테두리를 식별하거나, 제2 영상에서 둥근 원판을 식별한 뒤, 상술한 바와 마찬가지로 제1 및 제2 영상 각각을 조리 용기에 수직한 방향에서 촬영된 영상에 대응되도록 보정할 수도 있다.
이에 따라, 사용자는 디스플레이 장치(200)를 통해 조리 용기에 담긴 조리 대상 전체를 확인할 수 있는 효과가 있다.
한편, 쿡 탑의 복수의 화구 중 일부의 화구에만 조리 용기가 올려져 있는 경우, 프로세서(140)는 조리 용기가 올려지지 않은 화구를 제외한 영상을 생성할 수도 있다.
이를 위해, 프로세서(140)는 기저장된 화구 이미지와 제1 카메라(110)에 의해 촬영된 영상을 비교하여, 기저장된 화구 이미지와 매칭되는 영역을 식별할 수 있다. 여기에서 매칭되는 영역은 조리 용기가 올려져 있지 않은 영역이고, 매칭되지 않는 영역은 조리 용기가 올려져 있는 영역이 될 수 있다.
이후, 프로세서(140)는 식별된 영역을 크랍(crop)함으로써, 조리 용기가 올려지지 않은 화구를 제외한 영상을 생성할 수 있다.
도 5는 본 개시의 일 실시 예에 따른 전자 레인지가 조리 용기에서 발생되는 기포를 식별하는 실시 예를 설명하기 위한 도면이다.
프로세서(140)는 카메라를 통해 촬영된 영상을 획득(S510)할 수 있다. 여기에서, 영상은 제1 카메라(110)를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 제1 영상 또는 제2 카메라(120)를 통해 전자 레인지(100)의 내부를 촬영한 제2 영상이 될 수 있다.
그리고, 프로세서(140)는 물 끓음 확인 알고리즘을 동작(S520)할 수 있다. 여기에서, 물 끓음 확인 알고리즘은, 기포 발생 검출 알고리즘이 될 수 있다. 구체적으로, 프로세서(140)는 기포 발생 검출 알고리즘을 통해, 영상 내에서 기설정된 임계 값 이상의 기포가 발생된 것으로 식별되면, 물이 끓고 있는 것으로 식별(S530)할 수 있다.
그리고, 프로세서(140)는 물이 끓는 것으로 확인되면, 기포의 발생 정도를 나타내는 알림 메시지, 즉 물이 끓고 있다는 알림 메시지를 디스플레이 장치(200)로 전송(S540)할 수 있다.
이에 따라, 사용자는 조리 용기 근처에서 지속적으로 조리 대상을 확인할 필요 없이, 조리 용기의 물 끓음을 인지할 수 있다.
한편, 물 끓음 알고리즘을 통해 물이 끓고 있는 것을 식별하는 것은 일 실시 예일 뿐, 물 끓음은 다양한 방식에 의해 식별될 수 있다. 예를 들어, 영상에 포함된 픽셀의 RGB 값 변화가 A 이상일 경우가 물이 끓는 것이라는 정보가 전자 레인지(100)에 기저장 되어 있을 경우, 프로세서(140)는 특정 픽셀의 RGB 값 변화가 A 이상이면 물이 끓고 있는 것으로 식별할 수 있다.
또한, 프로세서(140)는 인공지능 기술을 이용하여 물 끓음을 식별할 수도 있다. 인공지능 기술은, 인간 수준의 지능을 구현하는 컴퓨터 기계가 스스로 학습하고 판단하는 기술로써, 사용할수록 인식률이 향상되는 기술이다. 프로세서(140)는 입력 데이터들의 특징을 스스로 분류/학습하는 알고리즘을 이용하는 딥러닝을 통해 사용자를 식별할 수 있다.
구체적으로, 프로세서(140)는 카메라를 통해 촬영된 영상에서 수증기의 발생 정도가 1단계인 경우 기포가 발생한 것으로 학습할 수 있고, 수증기의 발생 정도가 2단계로서 1단계보다 많은 수증기가 발생된 경우 기포가 더 많이 발생한 것으로 학습할 수 있으며, 수증기의 발생 정도가 3단계이면 다량의 기포가 발생한 것으로 학습할 수 있다. 이와 같은 학습을 반복한 뒤 딥러닝을 통해, 프로세서(140)는 수증기의 발생 정도가 3단계이면 물이 끓는 것으로 식별할 수 있다.
한편, 프로세서(140)는 쿡 탑 상의 조리 용기의 물 끓음이 식별된 경우, 전자 레인지(100) 내부의 조리 용기에 담긴 조리 대상을 가열하도록 전자 레인지(100)를 제어할 수도 있다. 구체적으로, 프로세서(140)는 쿡 탑 상의 조리 용기의 물 끓음이 식별된 경우, 전자 레인지(100) 내부의 조리 용기에 담긴 조리 대상을 기설정된 시간 동안 가열하도록 전자 레인지(100)를 제어할 수도 있다. 여기에서, 기설정된 시간은 1분, 3분 등 사용자에 의해 다양하게 설정될 수 있다.
이는, 쿡 탑 상의 조리 용기의 물 끓음이 발생된 경우는, 쿡 탑 상의 조리 대상의 조리가 완료되어 가는 시점으로써, 이 때 전자 레인지(100)의 내부의 조리 대상도 가열을 시작시킴으로써, 전자 레인지(100) 내부의 조리 대상의 조리도 쿡 탑 상의 조리 대상의 조리 완료 시점과 유사한 시점에 완료시키기 위함이다.
도 6은 본 개시의 일 실시 예에 따른 전자 레인지가 조리 용기에서 발생되는 연기를 식별하는 실시 예를 설명하기 위한 도면이다.
프로세서(140)는 카메라를 통해 촬영된 영상을 획득(S610)할 수 있다. 여기에서, 영상은 제1 카메라(110)를 통해 전자 레인지(100)의 내부를 촬영한 제1 영상 또는 제2 카메라(120)를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 제2 영상이 될 수 있다.
그리고, 프로세서(140)는 연기 감지 알고리즘을 동작(S620)할 수 있다. 여기에서, 연기 감지 알고리즘은 영상에 포함된 픽셀의 RGB 값 변화에 기초해서 연기의 발생 여부 및 발생 정도를 확인하는 알고리즘이 될 수 있다. 구체적으로, 프로세서(140)는 영상 내에서 R값, G값, B값이 일치하는 픽셀이 존재할 경우 연기가 발생된 것으로 식별할 수 있고, R값, G값, B값이 일치하는 픽셀이 기설정된 개수 이상인 경우 연기가 다량 발생된 것으로 식별할 수 있다.
그리고, 프로세서(140)는 연기가 발생된 것으로 식별되면, 식별된 연기의 발생 정도를 나타내기 위한 알림 메시지를 디스플레이 장치(200)로 전송(S640)할 수 있다.
또한, 프로세서(140)는 연기의 발생 정도가 기설정된 임계 값 이상인 것으로 식별되면, 전자 레인지의 후드(hood)를 동작시킬 수 있다. 여기에서, 후드는 전자 레인지(100)와 연결되어 구비될 수 있다.
또한, 프로세서(140)는 연기의 발생 정도가 기설정된 임계 값 이상으로, 기설정된 시간 이상 지속될 경우, 연기가 감지된 영상에 대응되는 기기의 동작을 종료시킬 수 있다. 예를 들어, 제1 영상에서 연기가 지속하여 발생된 것으로 식별되면 쿡 탑의 화구의 동작을 종료시키고, 제2 영상에서 연기가 지속하여 발생된 것으로 식별되면 전자 레인지(100)의 동작을 종료시킬 수 있다.
이에 따라, 사용자는 조리 용기 근처에서 지속적으로 조리 대상을 확인할 필요 없이, 조리 용기에서의 연기 발생을 인지할 수 있다.
또한, 사용자가 연기 발생을 미처 인지하지 못한 경우라고 하더라도, 연기가 다량 발생될 경우 자동으로 후드를 동작시키거나 화구의 동작을 종료 시킴으로써 연기 발생에 의한 피해를 방지할 수 있다.
한편, 연기 감지 알고리즘을 통해 조리 용기에서의 연기의 발생 및 발생 정도를 식별하는 것은 일 실시 예일 뿐, 연기의 발생 및 발생 정도는 다양한 방식에 의해 식별될 수 있다. 예를 들어, 연기는 연기 감지 센서(미도시)에 의해 감지될 수 있다. 또한, 전술한 바와 같이 인공지능 기술을 이용하여 연기를 식별할 수도 있다.
도 7은 본 개시의 일 실시 예에 따른 전자 레인지가 카메라의 김 서림을 방지하는 실시 예를 설명하기 위한 도면이다.
프로세서(140)는 카메라를 통해 촬영된 영상을 획득(S710)할 수 있다. 여기에서, 영상은 제1 카메라(110)를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 제1 영상 또는 제2 카메라(120)를 통해 전자 레인지(100)의 내부를 촬영한 제2 영상이 될 수 있다.
그리고, 프로세서(140)는 제1 및 제2 카메라 중 적어도 하나의 김 서림 여부를 식별(S720)할 수 있다. 구체적으로, 프로세서는 제1 및 제2 영상 중 적어도 하나의 영상의 블러(blur) 정도를 식별하고, 블러 정도가 기설정된 임계 값 이상인 영상을 촬영하는 카메라를 김이 서린 카메라로 식별(S730)할 수 있다.
그리고, 프로세서(140)는 블러 정도가 기설정된 임계 값 이상인 영상을 촬영하는 카메라가 식별되면, 식별된 카메라에 근접하여 구비된 송풍 장치를 구동(S740)시킬 수 있다. 여기에서, 송풍 장치는 팬(fan)이 될 수 있다. 송풍 장치의 동작에 따라 카메라에 서린 김을 제거할 수 있다.
한편, 프로세서(140)는 김이 서린 카메라가 존재하지 않는 것으로 확인되면, 송풍 장치의 동작을 중지(S750)시킬 수 있다.
이에 따라, 본 개시의 일 실시 예에 따른 전자 레인지(100)는 선명하게 촬영된 영상을 제공할 수 있다.
도 8은 본 개시의 일 실시 예에 따른 전자 레인지가 카메라의 이물질을 제거하는 실시 예를 설명하기 위한 도면이다.
프로세서(140)는 카메라를 통해 촬영된 영상을 획득(S810)할 수 있다. 여기에서, 영상은 제1 카메라(110)를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 제1 영상 또는 제2 카메라(120)를 통해 전자 레인지(100)의 내부를 촬영한 제2 영상이 될 수 있다.
그리고, 프로세서(140)는 이물질 확인 알고리즘을 동작(S820)할 수 있다. 구체적으로, 프로세서(140)는 카메라를 통해 현재 촬영된 영상과 직전에 촬영된 영상의 픽셀 값 변화가 기설정된 값 이상이면, 이물질이 카메라에 묻은 것으로 식별(S830)할 수 있다. 특히, 프로세서(140)는 픽셀 값 변화가 기설정된 값 이상인 픽셀이, 영상의 특정 영역에 집중되어 있을 경우 카메라에 이물질이 묻은 것으로 식별할 수 있다.
그리고, 프로세서(140)는 식별된 이물질이 기설정된 시간 이상 지속되는지 여부를 확인(S840)할 수 있다. 이는, 이물질과 조리 용기 또는 이물질과 조리 대상을 구분하기 위함이다. 식별된 이물질이 기설정된 시간 이상 지속된다면, 프로세서(140)는 이물질 묻음을 나타내는 알림 메시지를 디스플레이 장치로 전송(S850)할 수 있다.
도 9는 본 개시의 일 실시 예에 따른 디스플레이 장치를 설명하기 위한 블록도이다.
도 9를 참조하면, 본 개시의 일 실시 예에 따른 디스플레이 장치(200)는 디스플레이(210), 통신부(220) 및 프로세서(230)를 포함할 수 있다.
디스플레이(210)는 다양한 영상을 표시할 수 있다. 여기에서 영상은 정지 영상 및 동영상을 포함하는 개념이다.
구체적으로, 디스플레이(210)는 방송 영상, 멀티 미디어 컨텐츠 영상을 표시할 수 있다. 또한, 디스플레이(210)는 전자 레인지(100)의 하측에 위치하는 쿡 탑을 쵤영하여 생성된 제1 영상 및 전자 레인지(100)의 내부를 촬영하여 생성된 제2 영상 중 적어도 하나의 영상을 표시할 수 있다.
또한, 디스플레이(210)는 방송 영상, 멀티 미디어 컨텐츠 등의 영상과 함께, 전자 레인지(100)의 하측에 위치하는 쿡 탑을 쵤영하여 생성된 제1 영상 및 전자 레인지(100)의 내부를 촬영하여 생성된 제2 영상 중 적어도 하나의 영상을 표시할 수도 있다.
또한, 디스플레이(210)는 전자 레인지(100) 및 쿡 탑 중 적어도 하나를 제어하기 위한 제어 명령을 수신하기 위한 UI를 표시할 수 있다.
이와 같은 디스플레이(210)는 LCD(Liquid Crystal Display Panel), LED(Light Emitting Diodes), OLED(Organic Light Emitting Diodes), LCoS(Liquid Crystal on Silicon), DLP(Digital Light Processing) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 또한, 디스플레이(210) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로, 백라이트 유닛 등도 함께 포함될 수 있다.
통신부(220)는 다양한 유형의 통신 방식에 따라 다양한 유형의 외부 장치와 통신을 수행할 수 있다.
통신부(220)는 전자 레인지(100)와 통신을 수행하여, 전자 레인지(100)로부터 제1 및 제2 영상 중 적어도 하나의 영상을 수신할 수 있다. 여기에서, 제1 영상은 제1 카메라(110)를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 영상이고, 제2 영상은 제2 카메라(120)를 통해 전자 레인지(100)의 내부를 촬영한 영상이 될 수 있다.
또한, 통신부(220)는 전자 레인지(100)와 통신을 수행하여, 전자 레인지(100)로부터 전자 레인지(100) 및 쿡 탑 중 적어도 하나를 제어하기 위한 제어 명령을 전송할 수 있다. 여기에서, 제어 명령은 전자 레인지(100)의 전원 온/오프, 조리 기간 설정 또는 쿡 탑의 전원 온/오프, 쿡 탑의 화구의 열 온도 조절 등을 제어하는 명령이 될 수 있다.
또한, 통신부(220)는 쿡 탑과 통신을 수행하여, 쿡 탑으로 제어 명령을 직접 전송할 수도 있다. 여기에서, 제어 명령은 쿡 탑의 전원 온/오프, 쿡 탑의 화구의 열 온도 조절 등을 제어하는 명령이 될 수 있다.
이를 위해, 통신부(220)는 와이파이 칩, 블루투스 칩 등과 같은 무선 통신 칩을 포함할 수 있다.
프로세서(230)는 디스플레이 장치(200)의 전반적인 동작을 제어한다. 이를 위해, 프로세서(230)는 중앙처리장치(central processing unit(CPU)), 어플리케이션 프로세서(application processor(AP)), 또는 커뮤니케이션 프로세서(communication processor(CP)) 중 하나 또는 그 이상을 포함할 수 있다.
프로세서(230)는 통신부(220)를 통해 전자 레인지(200)로부터 제1 및 제2 영상 중 적어도 하나의 영상을 수신할 수 있다. 여기에서, 제1 영상은 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 영상이 될 수 있고, 제2 영상은 전자 레인지(100)의 내부를 촬영한 영상이 될 수 있다.
구체적으로, 프로세서(230)는 사용자 입력에 기초해서 전자 레인지(100)로 제1 영상을 요청하는 신호를 전송하고, 전자 레인지(100)로부터 제1 영상을 수신할 수 있다. 그리고, 프로세서(230)는 사용자 입력에 기초해서 전자 레인지(100)로 제2 영상을 요청하는 신호를 전송하고, 전자 레인지(100)로부터 제2 영상을 수신할 수 있다.
또한, 프로세서(230)는 사용자 입력에 기초해서 전자 레인지(100)로 제1 및 제2 영상을 요청하는 전송하고, 전자 레인지(100)로부터 제1 및 제 2영상을 수신할 수 있다.
그리고, 프로세서(230)는 사용자 입력에 기초해서 전자 레인지(100)로부터 전자 레인지(100) 및 쿡 탑 중 적어도 하나를 제어하기 위한 제어 명령을 전송할 수 있다. 여기에서, 제어 명령은 전자 레인지(100)의 전원 온/오프, 조리 기간 설정 또는 쿡 탑의 전원 온/오프, 쿡 탑의 화구의 열 온도 조절 등을 제어하는 명령이 될 수 있다.
또한, 프로세서(230)는 사용자 입력에 기초해서 쿡 탑을 제어하기 위한 제어 명령을 쿡 탑으로 직접 전송할 수도 있다. 여기에서, 제어 명령은 쿡 탑의 전원 온/오프, 쿡 탑의 화구의 열 온도 조절 등을 제어하는 명령이 될 수 있다.
이와 같이, 디스플레이 장치(200)가 전자 레인지(100)의 내부를 촬영한 영상 또는 쿡 탑을 촬영한 영상을 표시함으로써, 사용자는 주방을 벗어난 영역에서도 조리 조리 대상을 지속적으로 확인할 수 있다.
또한, 조리 대상 근처에서 오버 더 레인지 또는 쿡 탑의 화구를 제어할 필요 없이, 디스플레이 장치(200) 근처에서 오버 더 레인지 또는 쿡 탑의 화구를 제어할 수 있으므로, 사용자 편의성이 증대될 수 있다.
도 10a 내지 10e는 본 개시의 일 실시 예에 따른 디스플레이 장치가 전자 레인지의 내부를 촬영한 영상 및/또는 쿡 탑을 촬영한 영상을 표시하는 실시 예를 설명하기 위한 도면이다.
이하에서는, 설명의 편의를 위해 전자 레인지(100)가 오버 더 레인지(OTR)로 구현되는 것으로 상정하여 설명한다.
도 10a에 도시된 바와 같이, 프로세서(230)는 다양한 어플리케이션 메뉴를 표시할 수 있다. 예를 들어, 프로세서(230)는 OTR 카메라 어플리케이션을 포함하여, 동영상 어플리케이션, 사진 어플리케이션, SNS 어플리케이션 등과 같은 다양한 어플리케이션 메뉴를 표시할 수 있다.
이후, 사용자 입력에 따라 OTR 카메라 어플리케이션이 선택되는 경우, 도 10b에 도시된 바와 같이, 프로세서(230)는 OTR과의 통신 연결을 수행 중이라는 메시지를 표시할 수 있다. 여기에서, 사용자 입력은 디스플레이 장치(200)의 디스플레이에서 OTR 카메라 어플리케이션을 터치하는 동작 또는 원격 제어 장치를 통해 OTR 카메라 어플리케이션을 선택하는 동작 등과 같이 다양한 방식에 의해 수행될 수 있다. 이를 위해, 디스플레이 장치(200)는 리모컨 수신부를 더 포함할 수 있다.
이 때, 사용자가 도 10c에 도시된 바와 같이, OTR에 구비된 버튼을 통해 OTR의 통신부를 활성화 시키는 명령을 입력하면, 프로세서(230)는 OTR과의 통신 연결을 수행할 수 있다. 이는, 보안상의 문제를 고려한 것이다. 구체적으로, 다른 가정 내의 디스플레이 장치가 사용자의 가정 내의 OTR과 통신 연결을 수행하여 OTR의 카메라를 조작하는 것을 방지하기 위함이다.
한편, OTR의 통신부를 활성화 시키는 작업은 디스플레이 장치(200)와 OTR을 최초로 통신 연결할 때만 수행되는 작업이 될 수 있다. 즉, 프로세서(230)는 이와 같은 작업을 통해 OTR과 통신 연결을 수행한 뒤, 다시 OTR 카메라 어플리케이션이 사용자 입력에 따라 선택되는 경우에는 바로 OTR과 통신 연결을 수행할 수 있다.
또한, 도 10c에서는 OTR에 구비된 버튼을 통해 OTR의 통신부를 활성화 시키는 것으로 도시하였으나, 이는 일 실시 예일 뿐이다. OTR의 통신부는 원격 제어 장치를 통해 활성화 될 수도 있다.
이후, 도 10d에 도시된 바와 같이, 프로세서(230)는 OTR의 카메라를 선택할 것을 요청하는 UI를 표시할 수 있다. 여기에서, Camera 1 UI는 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영하는 제1 카메라를 선택하기 위한 UI이고, Camera 2 UI는 전자 레인지(100) 내부를 촬영하는 제2 카메라를 선택하기 위한 UI이며, Camera 1&2 UI는 제1 및 제2 카메라를 모두 선택하기 위한 UI가 될 수 있다.
그리고, 프로세서(230)는 디스플레이 된 UI를 통해 카메라가 선택되면, 프로세서(230)는 선택된 카메라에 의해 촬영된 영상을 표시할 수 있다.
구체적으로, 프로세서(230)는 Camera 1 UI가 선택되면 제1 카메라를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑이 촬영된 영상을 표시하고, Camera 2 UI가 선택되면 제2 카메라를 통해 전자 레인지(100) 내부가 촬영된 영상을 표시하고 하며, Camera 1&2 UI가 선택되면, 제1 카메라를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑이 촬영된 영상 및 제2 카메라를 통해 전자 레인지(100) 내부가 촬영된 영상을 모두 표시할 수 있다.
예를 들어, Camera 1 UI가 선택되면, 프로세서(230)는 도 10e에 도시된 바와 같이 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 영상을 표시할 수 있다.
도 11은 본 개시의 일 실시 예에 따른 디스플레이 장치가 컨텐츠와 함께 카메라를 통해 촬영된 영상을 표시하는 실시 예를 설명하기 위한 도면이다.
프로세서(230)는 방송 영상, 멀티 미디어 컨텐츠 영상 등 다양한 컨텐츠를 디스플레이(210)에 표시할 수 있다.
그리고, 프로세서(230)는 컨텐츠를 표시하고 있는 상태에서, 제1 및 제2 영상 중 적어도 하나의 영상을 표시하기 위한 사용자 입력이 수신되는 경우, OTR로부터 제1 및 제2 영상 중 적어도 하나의 영상을 수신하고, 컨텐츠에 수신된 영상을 오버랩하여 표시할 수 있다. 한편, 오버랩 정도는 사용자 설정에 따라 다르게 설정될 수 있다.
예를 들어, 방송 영상을 표시하고 있는 상태에서, 원격 제어 장치의 OTR 버튼이 선택되면, 프로세서(230)는 제1 및 제2 카메라 중 적어도 하나의 카메라를 선택할 것을 요구하는 UI를 표시할 수 있다.
그리고, 제1 및 제2 카메라 중 제1 카메라가 선택되면, 프로세서(230)는 OTR로 제1 카메라에 의해 촬영된 영상을 요청하는 신호를 전송하고, OTR로부터 제1 카메라에 의해 촬영된 영상을 수신하여 표시할 수 있다. 마찬가지로, 제2 카메라가 선택되면, 프로세서(230)는 OTR로 제2 카메라에 의해 촬영된 영상을 요청하는 신호를 전송하고, OTR로부터 제2 카메라에 의해 촬영된 영상을 수신하여 표시할 수 있고, 제1 및 제2 카메라가 선택되면, 프로세서(230)는 OTR로 제1 및 제2 카메라에 의해 촬영된 영상을 요청하는 신호를 전송하고, OTR로부터 제1 및 제2 카메라에 의해 촬영된 영상을 수신하여 표시할 수 있다.
한편, 상술한 원격 제어 장치의 OTR 버튼을 누르는 동작에 의해 사용자 입력을 수신하는 것을 일 실시 예일 뿐, 사용자 입력은 디스플레이 장치(200)의 디스플레이(210)를 터치하는 동작에 의해 수신될 수도 있다.
도 12a 내지 도 12c는 본 개시의 일 실시 예에 따른 디스플레이 장치에 표시되는, 카메라에 의해 촬영된 영상을 편집하는 실시 예를 설명하기 위한 도면이다.
프로세서(230)는 디스플레이(210)에 표시된, 카메라에 의해 촬영된 영상을 사용자 입력에 따라 편집할 수 있다.
구체적으로, 프로세서(230)는 디스플레이(210)에 표시된, 카메라에 의해 촬영된 영상의 크기 및 위치 중 적어도 하나를 변경하기 위한 사용자 입력이 수신되면, 사용자 입력에 따라 표시된 영상의 크기 및 위치 중 적어도 하나를 변경할 수 있다.
예를 들어, 도 12a를 참조하면, 카메라에 의해 촬영된 영상 중 일부 영역을 터치 후 다른 영역으로 드래그하는 조작이 입력되면, 프로세서(230)는 촬영된 영상을 드래그 조작에 따라 이동시킬 수 있다.
또한, 도 12b를 참조하면, 카메라에 의해 촬영된 영상의 테두리 영역을 터치 후 다른 영역으로 드래그하는 조작이 입력되면, 프로세서(230)는 촬영된 영상의 크기를 드래그 조작에 따라 변경시킬 수 있다.
또한, 도 12c를 참조하면, 카메라에 의해 촬영된 영상의 테두리 영역을 더블 터치하는 조작이 입력되면, 프로세서(230)는 촬영된 영상의 크기를 디스플레이(210)의 전체 화면 크기에 대응되도록 변경할 수 있다.
한편, 이와 같은 터치 앤 드래그 조작, 더블 터치 조작 등은 다양한 방식으로 수행될 수 있다. 예를 들어, 원격 제어 장치에 구비된 터치 패드를 통해 터치 앤 드래그 조작, 더블 터치 조작 등이 수행될 수 있음은 물론, 디스플레이 장치(200)의 디스플레이(210)를 통해 터치 앤 드래그 조작, 더블 터치 조작 등이 수행될 수도 있다.
또한, 영상의 편집은 제1 및 제2 영상 각각에 수행될 수도 있다. 구체적으로, 프로세서(230)는 제1 및 제2 영상이 표시된 상태에서, 제1 및 제2 영상 중 하나의 영상이 선택된 뒤, 선택된 영상에 드래그 조작이 입력되면, 선택된 영상만을 다른 위치로 이동시키거나 확대하여 표시할 수도 있다.
도 13a 내지 도 13c는 본 개시의 일 실시 예에 따른 디스플레이 장치가 사용자 단말 장치로 구현되는 경우의 실시 예를 설명하기 위한 도면이다.
도 13a에 도시된 바와 같이, 프로세서(230)는 다양한 어플리케이션 메뉴를 표시할 수 있다. 예를 들어, 프로세서(230)는 OTR 카메라 어플리케이션을 포함하여, 냉장고 어플리케이션, TV 어플리케이션, 세탁기 어플리케이션 등과 같은 다양한 어플리케이션 메뉴를 표시할 수 있다.
이후, 사용자 입력에 따라 OTR 카메라 어플리케이션이 선택되는 경우, 도 13b에 도시된 바와 같이, 프로세서(230)는 OTR과의 통신 연결을 수행 중이라는 메시지를 표시할 수 있다. 여기에서, 사용자 입력은 사용자가 디스플레이 장치(200)의 디스플레이에서 OTR 카메라 어플리케이션을 터치하는 동작에 의해 수신될 수 있다.
이 때, 사용자가 도 13c에 도시된 바와 같이, OTR에 구비된 버튼을 통해 OTR의 통신부를 활성화 시키는 명령을 입력하면, 프로세서(230)는 OTR과의 통신 연결을 수행할 수 있다. 이는, 보안상의 문제를 고려한 것이다. 구체적으로, 타 사용자의 사용자 단말 장치가 사용자의 가정 내의 OTR과 통신 연결을 수행하여 OTR의 카메라를 조작하는 것을 방지하기 위함이다.
한편, OTR의 통신부를 활성화 시키는 작업은 디스플레이 장치(200)와 OTR을 최초로 통신 연결할 때만 수행되는 작업이 될 수 있다. 즉, 프로세서(230)는 이와 같은 작업을 통해 OTR과 통신 연결을 수행한 뒤, 다시 OTR 카메라 어플리케이션이 사용자 입력에 따라 선택되는 경우에는 바로 OTR과 통신 연결을 수행할 수 있다.
또한, 도 13c에서는 OTR에 구비된 버튼을 통해 OTR의 통신부를 활성화 시키는 것으로 도시하였으나, 이는 일 실시 예일 뿐이다. OTR의 통신부는 원격 제어 장치를 통해 활성화 될 수도 있다.
이후, 도 13d에 도시된 바와 같이, 프로세서(230)는 OTR의 카메라를 선택할 것을 요청하는 UI를 표시할 수 있다. 여기에서, Camera 1 UI는 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영하는 제1 카메라를 선택하기 위한 UI이고, Camera 2 UI는 전자 레인지(100) 내부를 촬영하는 제2 카메라를 선택하기 위한 UI이며, Camera 1&2 UI는 제1 및 제2 카메라를 모두 선택하기 위한 UI가 될 수 있다.
그리고, 프로세서(230)는 디스플레이 된 UI를 통해 카메라가 선택되면, 프로세서(230)는 선택된 카메라에 의해 촬영된 영상을 표시할 수 있다.
구체적으로, 프로세서(230)는 Camera 1 UI가 선택되면, 제1 카메라를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑이 촬영된 영상을 표시하고, Camera 2 UI가 선택되면 제2 카메라를 통해 전자 레인지(100) 내부가 촬영된 영상을 표시하며, Camera 1&2 UI가 선택되면, 제1 카메라를 통해 전자 레인지(100) 내부가 촬영된 영상 및 제2 카메라를 통해 전자 레인지(100)의 하측에 위치하는 쿡 탑이 촬영된 영상을 모두 표시할 수 있다.
예를 들어, Camera 1 UI가 선택되면, 프로세서(230)는 도 13e에 도시된 바와 같이 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영한 영상을 표시할 수 있다.
도 14a 및 도 14b는 본 개시의 일 실시 예에 따른 전자 레인지가 통신을 수행하는 방식을 설명하기 위한 도면이다.
도 14a를 참조하면, 본 개시의 일 실시 예에 따른 전자 레인지(100)는 디스플레이 장치(200)와 통신을 수행할 수 있다. 여기에서, 디스플레이 장치(200)는 사용자 단말 장치, 영상 제공 장치 중 적어도 하나가 될 수 있다.
구체적으로, 도 14a의 점선 부분을 참조하면, 전자 레인지(100)는 와이파이(Wi-Fi) 통신을 이용하여 무선 라우터(wireless router)와 연결하고, 무선 라우터(wireless router)에 와이파이 통신을 통해 연결된 디스플레이 장치(200)와 통신을 수행할 수 있다.
한편, 이는 일 실시 예일 뿐, 도 14a의 실선 부분과 같이, 전자 레인지(100)는 무선 라우터를 경유하지 않고, 디스플레이 장치(200)와 직접 통신을 수행할 수 있다.
또한, 전자 레인지(100)는 무선 라우터를 경유하여 서버와 통신을 수행할 수 있다. 이에 따라, 전자 레인지(100)는 서버로부터 전자 레인지(100)의 업그레이드 서비스와 같은 추가 서비스를 제공받을 수 있다.
한편, 이는 일 실시 예일 뿐, 전자 레인지(100)는 서버와 통신을 수행하는 사용자 단말 장치로부터 서버가 제공하는 서비스를 제공받을 수도 있다. 이를 위해, 사용자 단말 장치는 서버로 전자 레인지(100)의 추가 서비스를 위한 파일을 수신하고, 이를 와이파이 통신을 통해 전자 레인지(100)로 전송할 수 있다.
도 14b 참조하면, 본 개시의 일 실시 예에 따른 전자 레인지(100)는 쿡 탑 기기와 통신을 수행할 수 있다. 이 경우, 쿡 탑 기기는 도 14a에서 전자 레인지(100)가 통신을 수행하는 방식과 같은 방식으로 디스플레이 장치(200) 및 서버와 통신을 수행할 수 있다.
그리고, 쿡 탑 기기는 유선 또는 무선 통신 방식을 통해 디스플레이 장치(200) 및 서버와 같은 외부 장치로부터 수신된 신호를 전자 레인지(100)로 전송할 수 있고, 반대로 전자 레인지(100)로부터 수신된 신호를 디스플레이 장치(200) 및 서버와 같은 외부 장치로 전송할 수 있다. 여기에서, 무선 통신 방식은 와이파이 방식, 블루투스 방식 등 다양한 방식이 될 수 있다.
도 15는 본 개시의 일 실시 예에 따른 전자 레인지의 상세 블록도이다.
도 15를 참조하면, 본 개시의 일 실시 예에 따른 전자 레인지(100')는 제1 카메라(110), 제2 카메라(120), 통신부(130), 프로세서(140), 저장부(150), 센서(155), 디스플레이(160), 스피커(165), 발광부(170), 제1 팬(175), 제2 팬(180) 및 벤트(185)를 포함할 수 있다. 이하에서는 상술한 설명과 중복되는 부분에 대한 설명은 생략하기로 한다.
저장부(150)는 전자 레인지(100')의 구성요소의 전반적인 동작을 제어하기 위한 운영체제(Operating System: OS) 및 전자 레인지(100')의 구성요소와 관련된 명령 또는 데이터를 저장할 수 있다.
이에 따라, 프로세서(140)는 저장부(150)에 저장된 다양한 명령 또는 데이터 등을 이용하여 전자 레인지(100')의 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 다른 구성요소들 중 적어도 하나로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리하고, 다양한 데이터를 비휘발성 메모리에 저장(store)할 수 있다. 특히, 저장부(150)는 본 발명의 일 실시 예에 따른 제1 카메라에 의해 생성된 영상 및 제2 카메라에 의해 생성된 영상 중 적어도 하나를 저장할 수 있다.
프로세서(140)는 전자 레인지(100')의 전반적인 동작을 제어하는 구성이다.
구체적으로, 프로세서(140)는 RAM(141), ROM(142), CPU(143), 제1 내지 n 인터페이스(144-1 ~ 144-n) 및 버스(145)를 포함한다. 여기서, RAM(141), ROM(142), CPU(143), 제1 내지 n 인터페이스(144-1 ~ 145-n) 등은 버스(145)를 통해 서로 연결될 수 있다.
제1 내지 n 인터페이스(144-1 ~ 145-n)는 상술한 각종 구성요소들과 연결된다. 인터페이스들 중 하나는 네트워크를 통해 외부장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
CPU(143)는 저장부(150)에 액세스하여, 저장부(150)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, CPU(143)는 저장부(150)에 저장된 각종 프로그램, 콘텐츠 및 데이터 등을 이용하여 다양한 동작을 수행할 수 있다.
RAM(141)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴 온 명령이 입력되어 전원이 공급되면, CPU(143)는 ROM(142)에 저장된 명령어에 따라 저장부(150)에 저장된 O/S를 RAM(141)에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, CPU(143)는 저장부(150)에 저장된 각종 프로그램을 RAM(141)에 복사하고, RAM(141)에 복사된 프로그램을 실행시켜 각종 동작을 수행한다.
센서(155)는 온도 감지 센서 및 연기 감지 센서 중 적어도 하나를 포함할 수 있다. 여기에서, 온도 감지 센서는 전자 레인지(100')내부의 온도를 감지하기 위한 센서 및 쿡 탑 상의 조리 용기의 온도를 감지하기 위한 센서를 포함할 수 있다. 그리고, 연기 감지 센서는 전자 레인지(100') 내부의 조리 용기 또는 쿡 탑 상의 조리 용기에서 발생하는 연기를 감지할 수 있다.
디스플레이(160)는 다양한 화면을 표시할 수 있다. 예를 들어, 디스플레이(160)는 전자 레인지(100')가 디스플레이 장치(200)와 통신을 수행 중이라는 UI를 표시할 수 있고, 전자 레인지(100') 내부를 촬영한 영상을 표시할 수 있다. 또한, 디스플레이(160)는 쿡 탑 상의 조리 용기를 촬영한 영상을 표시할 수도 있다.
또한, 디스플레이(160)는 터치 스크린으로 구현되어 사용자 입력을 수신할 수 있다. 여기에서, 사용자 입력은 제1 및 제2 영상 중 적어도 하나의 영상이 디스플레이(160)에 표시된 상태에서, 제1 및 제2 영상 중 적어도 하나의 영상을 디스플레이 장치(200)로 전송하기 위한 사용자 입력이 될 수 있다.
스피커(165)는 음향을 출력할 수 있다. 일 실시 예로, 스피커(165)는 연기 등이 기설정된 임계 값 이상 발생된 경우, 연기가 발생되고 있음을 알리는 경고음을 출력할 수 있다.
발광부(170)는 카메라 근처에 구비될 수 있다. 예를 들어, 발광부(170)는 제1 및 제2 카메라 각각의 좌측 및 우측 중 적어도 하나에 구비될 수 있다. 그리고, 발광부(170)는 카메라를 통해 영상을 촬영할 경우, 카메라 주위의 밝기가 기설정된 임계 값 이하일 경우 온 될 수 있다.
제1 팬(175)은 제1 카메라(110) 근처에 구비될 수 있고, 제2 팬(180)은 제2 카메라 근처에 구비될 수 있다. 여기에서 각각의 팬은 근처에 구비된 카메라에 서린 김을 제거할 수 있다.
벤트(185)는 조리 대상에서 발생되는 증기 또는 냄새 중 적어도 하나를 흡입할 수 있다.
한편, 도 15에서는 도시되지 않았으나, 본 개시의 일 실시 예에 따른 전자 레인지(100')는 전자 레인지(100') 내부의 조리 용기를 가열시키기 위한 전파 발생부, 조리 과정에서 발생하는 연기, 흡입된 연기 등을 외부로 배출하기 위한 덕트를 더 포함할 수 있다.
도 16a 및 도 16b는 본 개시의 일 실시 예에 따른 전자 레인지의 구조를 설명하기 위한 도면이다.
도 16a는 전자 레인지(100)의 아랫면을 도시한 도면이다. 도 16a를 참조하면, 전자 레인지(100)의 아랫면에는 벤트(185) 및 제1 카메라(110)가 구비될 수 있다. 여기에서 벤트는 조리 대상에서 발생되는 증기, 연기 또는 냄새 등을 흡입하기 위한 장치로써, 전자 레인지(100)는 벤트(185)를 통해 수증기, 연기 또는 냄새 등을 흡입할 수 있다.
그리고, 도 16a에 도시된 바와 같이, 벤트(185)는 전자 레인지(100)의 아랫면의 중앙에 구비되고, 제1 카메라(10)는 전자 레인지(100)의 아랫면 중에서 벤트(185)의 뒤쪽 영역에 구비될 수 있다. 다만, 이는 일 실시 예일 뿐, 제1 카메라(10)는 전자 레인지(100)의 하측의 쿡 탑을 촬영할 수 있는 다양한 위치에 구비될 수 있다.
예를 들어, 제1 카메라(110)는 전자 레인지(100)의 아랫면의 중앙에 구비될 수 있다. 이 경우, 벤트(185)는 제1 카메라(110)의 사이드 영역, 즉 제1 카메라(110)의 앞, 뒤, 좌, 우 영역 중 적어도 하나의 영역에 구비될 수 있다.
도 16b는 전자 레인지(100)의 좌측면 또는 우측면을 도시한 도면이다.
도 16b를 참조하면, 전자 레인지(100)의 내부를 촬영하기 위한 제1 카메라(110)는 전자 레인지(100)의 윗면 중 일 영역에 구비될 수 있다. 한편, 도 16b 에서 제1 카메라(110)가 위치하는 영역은 일 실시 예일 뿐, 제1 카메라는 전자 레인지(100) 의 윗면 중 가운데 영역 등과 같이, 전자 레인지(100)의 내부를 촬영할 수 있는 다양한 위치에 구비될 수 있다.
그리고, 전자 레인지(100)의 하측에 위치하는 쿡 탑을 촬영하기 위한 제2 카메라(120)는, 도 16b 에 도시된 바와 같이, 전자 레인지(100)의 아랫면 중 일 영역에 구비될 수 있다.
도 17은 본 개시의 일 실시 예에 따른 전자 레인지의 동작을 설명하기 위한 흐름도이다.
전자 레인지는 사용자 명령에 따라, 제1 카메라를 통해 전자 레인지의 내부를 촬영하여 제1 영상을 생성하거나 제2 카메라를 통해 전자 레인지의 하측에 위치하는 쿡 탑을 쵤영하여 제2 영상을 생성(S1710)할 수 있다.
여기에서, 사용자 명령은 전자 레인지와 통신을 수행하는 디스플레이 장치에 입력될 수 있다. 구체적으로, 디스플레이 장치에 제1 및 제2 영상 중 적어도 하나의 영상을 표시하는 명령이 입력되면, 전자 레인지는 제1 및 제2 영상 중 적어도 하나의 영상을 요청하는 신호를 디스플레이 장치로부터 수신할 수 있고, 수신된 신호에 기초하여 제1 및 제2 영상 중 적어도 하나의 영상을 생성할 수 있다.
다만, 이는 일 실시 예일 뿐 전자 레인지는 별도의 버튼을 구비하고, 버튼에 입력된 사용자 명령에 따라 제1 및 제2 영상 중 적어도 하나의 영상을 생성할 수도 있다.
이후, 전자 레인지는 제1 및 제2 영상 중 적어도 하나의 영상을 디스플레이 장치로 전송(S1720)할 수 있다. 이에 따라, 디스플레이 장치는 제1 및 제2 영상 중 적어도 하나의 영상을 표시할 수 있고, 사용자는 주방을 벗어난 영역에서도 조리 조리 대상을 지속적으로 확인할 수 있다.
도 18은 본 개시의 일 실시 예에 따른 디스플레이 장치의 동작을 설명하기 위한 흐름도이다.
디스플레이 장치는 전자 레인지로부터 전자 레인지의 내부를 촬영하여 생성된 제1 영상 및 전자 레인지의 하측에 위치하는 쿡 탑을 촬영하여 생성된 제2 영상 중 적어도 하나의 영상을 수신(S1810)할 수 있다.
구체적으로, 디스플레이 장치는 사용자 입력에 기초해서 전자 레인지로 제1 영상을 요청하는 신호를 전송하고, 전자 레인지로부터 제1 영상을 수신할 수 있다. 마찬가지로, 디스플레이 장치는 사용자 입력에 기초해서 전자 레인지로 제2 영상을 요청하는 신호를 전송하고, 전자 레인지로부터 제2 영상을 수신할 수 있다. 또한, 디스플레이 장치는 사용자 입력에 기초해서 전자 레인지로 제1 및 제2 영상을 요청하는 전송하고, 전자 레인지로부터 제1 및 제 2영상을 수신할 수 있다.
그리고, 디스플레이 장치는 수신한 영상을 표시(S1810)할 수 있다.
이와 같이, 디스플레이 장치(200)가 전자 레인지(100)의 내부를 촬영한 영상 또는 쿡 탑을 촬영한 영상을 표시함으로써, 사용자는 주방을 벗어난 영역에서도 조리 조리 대상을 지속적으로 확인할 수 있다.
한편, 상술한 본 발명의 다양한 실시 예들에 따른 방법들은, 기존 전자 레인지에 설치 가능한 소프트웨어 또는 어플리케이션 형태로 구현될 수 있다.
또한, 상술한 본 발명의 다양한 실시 예들에 따른 방법들은, 기존 전자 레인지에 대한 소프트웨어 업그레이드, 또는 하드웨어 업그레이드만으로도 구현될 수 있다.
또한, 상술한 본 발명의 다양한 실시 예들은 전자 레인지에 구비된 임베디드 서버, 또는 전자 레인지 외부의 서버를 통해 수행되는 것도 가능하다.
한편, 본 발명에 따른 전자 레인지의 제어 방법을 순차적으로 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 제공될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100: 전자 레인지
200: 디스플레이 장치
200: 디스플레이 장치
Claims (22)
- 전자 레인지 및 디스플레이 장치를 포함하는 조리 시스템에 있어서,
상기 전자 레인지는,
전장부,
몸체,
상기 몸체의 하부면에 위치하고, 상기 전자 레인지 하측에 위치하는 쿡탑으로부터 발생한 증기를 흡입하는 벤트,
상기 몸체의 하부면에 위치하고, 상기 벤트와 인접하게 위치하며, 상기 쿡탑을 향하는 제1 카메라,
상기 디스플레이 장치와 통신을 수행하는 제1 통신 인터페이스 및
사용자 입력이 수신되면, 상기 쿡탑을 촬영하여 제1 영상을 생성하도록 상기 제1 카메라를 제어하고, 상기 제1 영상을 상기 디스플레이 장치로 전송하도록 상기 제1 통신 인터페이스를 제어하는 제1 프로세서를 포함하고,
상기 디스플레이 장치는,
디스플레이,
상기 전자 레인지와 통신을 수행하는 제2 통신 인터페이스 및
상기 제1 영상을 상기 전자 레인지로부터 수신하도록 상기 제2 통신 인터페이스를 제어하고, 상기 제1영상을 표시하도록 상기 디스플레이를 제어하는 제2 프로세서를 포함하는 조리 시스템. - 제1항에 있어서,
상기 디스플레이 장치는,
사용자 입력의 수신에 응답하여 상기 전자 레인지 및 상기 쿡 탑 중 적어도 하나를 제어하기 위한 제어 명령을 상기 전자 레인지로 전송하고,
상기 전자 레인지는,
상기 디스플레이 장치로부터 상기 제어 명령을 수신하고, 상기 수신된 제어 명령에 따라 상기 전자 레인지 및 쿡 탑 중 적어도 하나의 동작을 제어하는, 조리 시스템. - 제1항에 있어서,
상기 제1 카메라는, 제1 촬영 방향에서 상기 쿡 탑 상에 위치한 제1 조리 용기를 촬영하고,
상기 전자 레인지는,
상기 제1 촬영 방향에서 상기 제1 조리 용기를 촬영한 상기 제1 영상을 제2 촬영 방향에 대응되는 영상으로 보정하고,
상기 제2 촬영 방향은, 상기 조리 용기의 상측 수직 방향에 대응되는, 조리 시스템. - 제1항에 있어서,
상기 디스플레이 장치는,
컨텐츠를 표시하고 있는 상태에서, 상기 제1 영상을 표시하기 위한 사용자 입력이 수신되는 경우, 상기 전자 레인지로부터 상기 제1 영상을 수신하고, 상기 컨텐츠에 상기 수신된 영상을 오버랩하여 표시하는, 조리 시스템. - 제4항에 있어서,
상기 디스플레이 장치는,
상기 표시된 영상의 크기 및 위치 중 적어도 하나를 변경하기 위한 사용자 입력이 수신되면, 상기 사용자 입력에 따라 상기 표시된 영상의 크기 및 위치 중 적어도 하나를 변경하는, 조리 시스템. - 제1항에 있어서,
상기 전자 레인지는,
상기 제1 영상에 기초하여, 상기 쿡 탑 상에 위치한 조리 용기에서의 기포의 발생 정도를 식별하고, 상기 식별된 기포의 발생 정도를 나타내기 위한 알림 메시지를 상기 디스플레이 장치로 전송하고,
상기 디스플레이 장치는, 상기 전자 레인지로부터 수신된 알림 메시지를 표시하는, 조리 시스템. - 제1항에 있어서,
상기 전자 레인지는,
상기 제1 영상에 기초하여, 상기 쿡 탑 상에 위치한 조리 용기에서의 연기의 발생 정도를 식별하고, 상기 식별된 연기의 발생 정도를 나타내기 위한 알림 메시지를 상기 디스플레이 장치로 전송하며, 상기 연기의 발생 정도가 기설정된 임계 값 이상인 경우 상기 전자 레인지의 전장부의 구동을 중지시키거나 상기 전자 레인지의 후드(hood)를 구동시키고,
상기 디스플레이 장치는, 상기 전자 레인지로부터 수신된 알림 메시지를 표시하는, 조리 시스템. - 제1항에 있어서,
상기 전자 레인지는,
상기 제1 영상의 블러(blur) 정도를 식별하고, 상기 식별된 블러 정도가 기설정된 임계 값 이상인 것으로 식별되면, 상기 제1 카메라에 근접하여 구비된 팬(fan)을 구동시키는, 조리 시스템. - 전자 레인지에 있어서,
전장부;
몸체,
상기 몸체의 하부면에 위치하고, 상기 전자 레인지 하측에 위치하는 쿡탑으로부터 발생한 증기를 흡입하는 벤트,
상기 몸체의 하부면에 위치하고, 상기 벤트와 인접하게 위치하며, 상기 쿡탑을 향하는 제1 카메라;
통신부; 및
사용자 명령에 따라, 상기 제1 카메라를 통해 상기 전자 레인지의 하측에 위치하는 쿡 탑을 쵤영하여 제1 영상을 생성하고, 상기 제1 영상을 디스플레이 장치로 전송하도록 상기 통신부를 제어하는 프로세서;를 포함하는 전자 레인지. - 제9항에 있어서,
제2 카메라;를 더 포함하고,
상기 프로세서는,
사용자 명령에 따라, 상기 제2 카메라를 통해 상기 전자 레인지의 내부를 촬영하여 제2 영상을 생성하고, 상기 제2 영상을 상기 디스플레이 장치로 전송하도록 상기 통신부를 제어하는, 전자 레인지. - 제9항에 있어서,
상기 프로세서는,
상기 디스플레이 장치로부터 상기 전자 레인지 및 상기 쿡 탑 중 적어도 하나를 제어하기 위한 제어 명령을 수신하고, 상기 수신된 제어 명령에 따라 상기 전자 레인지 및 쿡 탑 중 적어도 하나의 동작을 제어하는, 전자 레인지. - 제10항에 있어서,
상기 제1 카메라는, 상기 쿡 탑 상에 위치한 조리 용기를 사선 방향에서 촬영하도록 상기 전자 레인지의 특정 위치에 배치되고,
상기 제2 카메라는, 상기 전자 레인지의 내부에 위치한 조리 용기를 사선 방향에서 촬영하도록 상기 전자 레인지의 특정 위치에 배치되며,
상기 프로세서는,
상기 제1 및 제2 카메라가 상기 사선 방향에서 상기 조리 용기를 촬영한 영상을 보정하고, 상기 보정된 영상을 상기 디스플레이 장치로 전송하며,
상기 보정된 영상은, 상기 조리 용기를 수직한 방향에서 촬영하는 영상에 대응되는, 전자 레인지. - 제10항에 있어서,
상기 프로세서는,
상기 제1 및 제2 영상에 기초하여, 상기 전자 레인지의 내부에 위치한 조리 용기 또는 상기 쿡 탑 상에 위치한 조리 용기에서의 기포의 발생 정도를 식별하고, 상기 식별된 기포의 발생 정도를 나타내기 위한 알림 메시지를 상기 디스플레이 장치로 전송하는, 전자 레인지. - 제10항에 있어서,
상기 프로세서는,
상기 제1 및 제2 영상에 기초하여, 상기 전자 레인지의 내부에 위치한 조리 용기 또는 상기 쿡 탑 상에 위치한 조리 용기에서의 연기의 발생 정도를 식별하고, 상기 식별된 연기의 발생 정도를 나타내기 위한 알림 메시지를 상기 디스플레이 장치로 전송하며, 상기 연기의 발생 정도가 기설정된 임계 값 이상인 경우 상기 전장부의 구동을 중지시키거나 상기 전자 레인지의 후드(hood)를 구동시키는, 전자 레인지. - 제10항에 있어서,
상기 프로세서는,
상기 제1 및 제2 영상 중 적어도 하나의 영상의 블러(blur) 정도를 식별하고, 상기 제1 및 제2 카메라 중에서 상기 식별된 블러 정도가 기설정된 임계 값 이상인 영상을 촬영하는 카메라를 식별하며, 상기 식별된 카메라에 근접하여 구비된 팬(fan)을 구동시키는, 전자 레인지. - 삭제
- 삭제
- 삭제
- 삭제
- 몸체, 벤트를 포함하는 전자 레인지의 제어 방법에 있어서,
사용자 명령에 따라, 제1 카메라를 통해 상기 전자 레인지의 하측에 위치하는 쿡 탑을 쵤영하여 제1 영상을 생성하는 단계; 및
상기 제1 영상을 디스플레이 장치로 전송하는 단계;를 포함하고,
상기 벤트는 상기 몸체의 하부면에 위치하고, 상기 전자 레인지 하측에 위치하는 쿡탑으로부터 발생한 증기를 흡입하고,
상기 제1 카메라는 상기 몸체의 하부면에 위치하고, 상기 벤트와 인접하게 위치하며, 상기 쿡탑을 향하는, 전자 레인지의 제어 방법. - 제20항에 있어서,
사용자 명령에 따라, 제2 카메라를 통해 상기 전자 레인지의 내부를 촬영하여 제2 영상을 생성하는 단계;를 더 포함하고,
상기 전송하는 단계는,
상기 제1 및 제2 영상을 상기 디스플레이 장치로 전송하는, 전자 레인지의 제어 방법. - 삭제
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180019314A KR102506666B1 (ko) | 2018-02-19 | 2018-02-19 | 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템 |
PCT/KR2018/009674 WO2019160211A1 (en) | 2018-02-19 | 2018-08-22 | Microwave, display device and cooking system including the same |
CN201880086587.9A CN111615864B (zh) | 2018-02-19 | 2018-08-22 | 微波炉、显示设备和包括微波炉和显示设备的烹饪系统 |
EP18906262.3A EP3701770A4 (en) | 2018-02-19 | 2018-08-22 | MICROWAVE, DISPLAY DEVICE AND COOKING SYSTEM WITH IT |
US16/122,622 US20190261459A1 (en) | 2018-02-19 | 2018-09-05 | Microwave, display device and cooking system including the same |
KR1020230027244A KR20230037524A (ko) | 2018-02-19 | 2023-02-28 | 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템 |
US18/405,833 US20240147579A1 (en) | 2018-02-19 | 2024-01-05 | Microwave, display device and cooking system including the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180019314A KR102506666B1 (ko) | 2018-02-19 | 2018-02-19 | 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020230027244A Division KR20230037524A (ko) | 2018-02-19 | 2023-02-28 | 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20190099642A KR20190099642A (ko) | 2019-08-28 |
KR102506666B1 true KR102506666B1 (ko) | 2023-03-07 |
Family
ID=67616520
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020180019314A KR102506666B1 (ko) | 2018-02-19 | 2018-02-19 | 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템 |
KR1020230027244A KR20230037524A (ko) | 2018-02-19 | 2023-02-28 | 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020230027244A KR20230037524A (ko) | 2018-02-19 | 2023-02-28 | 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템 |
Country Status (5)
Country | Link |
---|---|
US (2) | US20190261459A1 (ko) |
EP (1) | EP3701770A4 (ko) |
KR (2) | KR102506666B1 (ko) |
CN (1) | CN111615864B (ko) |
WO (1) | WO2019160211A1 (ko) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
USD916772S1 (en) * | 2018-07-10 | 2021-04-20 | Brava Home, Inc. | Display screen or portion thereof with graphical user interface |
US20210035462A1 (en) * | 2019-08-01 | 2021-02-04 | Haier Us Appliance Solutions, Inc. | Methods of remote user engagement and instructional cooking demonstrations |
US11112121B2 (en) * | 2019-10-04 | 2021-09-07 | Haier Us Appliance Solutions, Inc. | Cooking engagement system with automatic cooktop monitoring |
US11127267B2 (en) | 2019-10-11 | 2021-09-21 | Murat Yalcin | Smart fire detection system |
KR20210115872A (ko) * | 2020-03-16 | 2021-09-27 | 엘지전자 주식회사 | 후드겸용 전자레인지 |
US11983643B2 (en) * | 2020-11-11 | 2024-05-14 | Haier Us Appliance Solutions, Inc. | Cooking result inference system |
KR20220153891A (ko) * | 2021-05-12 | 2022-11-21 | 엘지전자 주식회사 | 후드 겸용 조리기기 |
CN113892826B (zh) * | 2021-09-27 | 2024-03-12 | 广东美的厨房电器制造有限公司 | 烹饪设备、图像处理方法、图像处理装置和可读存储介质 |
KR20240023855A (ko) * | 2022-08-16 | 2024-02-23 | 삼성전자주식회사 | 조리 기기 및 조리 기기의 제어 방법 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150289324A1 (en) * | 2014-04-07 | 2015-10-08 | Mark Braxton Rober | Microwave oven with thermal imaging temperature display and control |
US20150286891A1 (en) * | 2014-04-08 | 2015-10-08 | General Electric Company | Systems and methods for boil detection |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110254939A1 (en) * | 2010-04-16 | 2011-10-20 | Tatiana Pavlovna Kadantseva | Detecting User Input Provided To A Projected User Interface |
WO2013163579A2 (en) * | 2012-04-27 | 2013-10-31 | Adobe Systems Incorporated | Automatic adjustment of images |
WO2015059931A1 (ja) * | 2013-10-24 | 2015-04-30 | パナソニックIpマネジメント株式会社 | 加熱調理器、調理システム、演算装置及び調理支援方法 |
US9720567B2 (en) * | 2014-02-17 | 2017-08-01 | Microsoft Technology Licensing, Llc | Multitasking and full screen menu contexts |
US20150339917A1 (en) * | 2014-05-21 | 2015-11-26 | Qualcomm Incorporated | Triggering commands on a target device in response to broadcasted event notifications |
JP6427766B2 (ja) * | 2015-06-11 | 2018-11-28 | パナソニックIpマネジメント株式会社 | 画像と調理情報を関連付ける制御方法、装置及びプログラム |
US10354364B2 (en) * | 2015-09-14 | 2019-07-16 | Intel Corporation | Automatic perspective control using vanishing points |
US20170105572A1 (en) * | 2015-10-14 | 2017-04-20 | Geniuss Inc. | Advertising on an oven's video display |
KR102446811B1 (ko) * | 2016-02-19 | 2022-09-23 | 삼성전자주식회사 | 복수의 디바이스들로부터 수집된 데이터 통합 및 제공 방법 및 이를 구현한 전자 장치 |
WO2017149526A2 (en) * | 2016-03-04 | 2017-09-08 | May Patents Ltd. | A method and apparatus for cooperative usage of multiple distance meters |
JP6735513B2 (ja) * | 2016-06-15 | 2020-08-05 | パナソニックIpマネジメント株式会社 | 調理支援方法および調理支援システム |
US10366469B2 (en) * | 2016-06-28 | 2019-07-30 | Abbyy Production Llc | Method and system that efficiently prepares text images for optical-character recognition |
KR20180015926A (ko) * | 2016-08-04 | 2018-02-14 | 엘지전자 주식회사 | 조리기기 및 그 제어방법 |
-
2018
- 2018-02-19 KR KR1020180019314A patent/KR102506666B1/ko active IP Right Grant
- 2018-08-22 EP EP18906262.3A patent/EP3701770A4/en active Pending
- 2018-08-22 CN CN201880086587.9A patent/CN111615864B/zh active Active
- 2018-08-22 WO PCT/KR2018/009674 patent/WO2019160211A1/en unknown
- 2018-09-05 US US16/122,622 patent/US20190261459A1/en not_active Abandoned
-
2023
- 2023-02-28 KR KR1020230027244A patent/KR20230037524A/ko not_active Application Discontinuation
-
2024
- 2024-01-05 US US18/405,833 patent/US20240147579A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150289324A1 (en) * | 2014-04-07 | 2015-10-08 | Mark Braxton Rober | Microwave oven with thermal imaging temperature display and control |
WO2015157229A1 (en) * | 2014-04-07 | 2015-10-15 | Rober Mark Braxton | Microwave oven with thermal imaging temperature display and control |
US20150286891A1 (en) * | 2014-04-08 | 2015-10-08 | General Electric Company | Systems and methods for boil detection |
Also Published As
Publication number | Publication date |
---|---|
US20190261459A1 (en) | 2019-08-22 |
EP3701770A4 (en) | 2021-03-10 |
CN111615864A (zh) | 2020-09-01 |
WO2019160211A1 (en) | 2019-08-22 |
KR20190099642A (ko) | 2019-08-28 |
KR20230037524A (ko) | 2023-03-16 |
CN111615864B (zh) | 2022-08-12 |
EP3701770A1 (en) | 2020-09-02 |
US20240147579A1 (en) | 2024-05-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102506666B1 (ko) | 전자 레인지, 디스플레이 장치 및 이를 포함하는 조리 시스템 | |
US11946650B2 (en) | Range hood and method for controlling the range hood | |
US11113552B2 (en) | Electronic device and method for displaying image for iris recognition in electronic device | |
EP3262998B1 (en) | Cooking appliance running method and device | |
US11644198B2 (en) | Terminal, cooking appliance communicating therewith and method of controlling cooking appliance | |
RU2684506C2 (ru) | Способ и приспособление для управления устройством | |
US10295972B2 (en) | Systems and methods to operate controllable devices with gestures and/or noises | |
JP6145429B2 (ja) | 加熱制御装置、加熱調理システム、及びプログラム | |
WO2020034499A1 (zh) | 电器的控制方法和装置 | |
JP6145427B2 (ja) | 加熱制御装置、加熱調理システム、及びプログラム | |
CN105652836A (zh) | 一种控制电器的方法及装置 | |
EP3892069B1 (en) | Determining a control mechanism based on a surrounding of a remote controllable device | |
US20140176433A1 (en) | Interactive projection system, projector thereof, and control method thereof | |
JP6364607B2 (ja) | 加熱調理器 | |
US20100289923A1 (en) | Multi-display digital image processing apparatus using external display apparatus, method of operating the digital image processing apparatus, and computer readable recording medium having recorded thereon program for executing the method | |
US20220151436A1 (en) | Cooking assemblies and methods of operation based on a detected cooking oil | |
EP3068113B1 (en) | Electronic device and operation method thereof | |
JP2014011680A (ja) | 画像データを表示可能な電気機器 | |
CN109558034A (zh) | 一种防止终端误触的方法及装置 | |
US20240130563A1 (en) | Smart Cooktop System and Method of Using Same | |
KR20240023855A (ko) | 조리 기기 및 조리 기기의 제어 방법 | |
JP6794795B2 (ja) | 撮像装置、撮像方法、プログラム | |
KR20240000322A (ko) | 조리 장치 및 이의 제어 방법 | |
JP6641482B2 (ja) | 制御システム及び機器制御方法 | |
KR20230114950A (ko) | 이미지 인식에 기반하는 전원 제어 방법 및 이를 지원하는 전기레인지 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |