KR20240028273A - Cooking apparatus and method for controlling cooking apparatus - Google Patents
Cooking apparatus and method for controlling cooking apparatus Download PDFInfo
- Publication number
- KR20240028273A KR20240028273A KR1020230006906A KR20230006906A KR20240028273A KR 20240028273 A KR20240028273 A KR 20240028273A KR 1020230006906 A KR1020230006906 A KR 1020230006906A KR 20230006906 A KR20230006906 A KR 20230006906A KR 20240028273 A KR20240028273 A KR 20240028273A
- Authority
- KR
- South Korea
- Prior art keywords
- tray
- height
- chamber
- marker
- image
- Prior art date
Links
- 238000010411 cooking Methods 0.000 title claims abstract description 179
- 238000000034 method Methods 0.000 title claims description 46
- 239000003550 marker Substances 0.000 claims abstract description 149
- 239000011521 glass Substances 0.000 claims description 44
- 230000015654 memory Effects 0.000 claims description 35
- 239000000284 extract Substances 0.000 claims description 15
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 abstract description 3
- 230000000875 corresponding effect Effects 0.000 description 30
- 238000004891 communication Methods 0.000 description 24
- 230000001276 controlling effect Effects 0.000 description 19
- 238000010438 heat treatment Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000013473 artificial intelligence Methods 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000013527 convolutional neural network Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000000306 recurrent effect Effects 0.000 description 2
- 238000005406 washing Methods 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 238000001035 drying Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000003862 health status Effects 0.000 description 1
- 239000003779 heat-resistant material Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000007769 metal material Substances 0.000 description 1
- 230000004751 neurological system process Effects 0.000 description 1
- 238000007639 printing Methods 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001954 sterilising effect Effects 0.000 description 1
- 238000010257 thawing Methods 0.000 description 1
- 239000012780 transparent material Substances 0.000 description 1
Images
Classifications
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
- F24C7/00—Stoves or ranges heated by electric energy
- F24C7/08—Arrangement or mounting of control or safety devices
- F24C7/082—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination
- F24C7/085—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination on baking ovens
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
- F24C15/00—Details
- F24C15/02—Doors specially adapted for stoves or ranges
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
- F24C15/00—Details
- F24C15/16—Shelves, racks or trays inside ovens; Supports therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
- G06V10/225—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on a marking or identifier characterising the area
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
Landscapes
- Engineering & Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Mechanical Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Electric Stoves And Ranges (AREA)
Abstract
개시된 조리 기기는, 챔버; 상기 챔버를 개방하거나 폐쇄하는 도어; 트레이를 지지하기 위해 상기 챔버의 양 측벽에서 서로 다른 높이에 마련되는 복수의 지지대; 상기 도어에 형성되는 복수의 마커; 상기 챔버 내부의 이미지를 획득하는 카메라; 및 상기 이미지에서 상기 트레이에 의해 적어도 일부가 가려진 마커의 위치를 식별하고, 상기 적어도 일부가 가려진 마커의 위치에 기초하여 상기 챔버 내에서 상기 트레이의 높이를 추정하고, 상기 트레이의 높이에 기초하여 조리물을 조리하기 위한 조리 파라미터를 결정하는 제어부;를 포함한다.The disclosed cooking device includes a chamber; a door that opens or closes the chamber; a plurality of supports provided at different heights on both side walls of the chamber to support the tray; a plurality of markers formed on the door; A camera that acquires images inside the chamber; and identifying the location of a marker at least partially obscured by the tray in the image, estimating a height of the tray within the chamber based on the location of the marker at least partially obscured, and cooking based on the height of the tray. It includes a control unit that determines cooking parameters for cooking water.
Description
개시된 발명은 조리 기기 및 조리 기기의 제어 방법에 관한 것이다.The disclosed invention relates to a cooking appliance and a method of controlling the cooking appliance.
조리 기기는, 음식물과 같은 조리 대상을 가열하여 조리하기 위한 기기로, 조리 대상의 가열, 해동, 건조 및 살균 등 조리와 관련된 여러 기능을 제공할 수 있는 장치를 의미한다. 예를 들면, 조리 기기는, 가스 오븐이나 전기 오븐과 같은 오븐(oven), 마이크로파 가열 장치(이하 전자 레인지, microwave), 가스 레인지, 전기 레인지, 가스 그릴 또는 전기 그릴을 의미할 수 있다.A cooking device is a device for heating and cooking a cooking object, such as food, and refers to a device that can provide various functions related to cooking, such as heating, defrosting, drying, and sterilizing the cooking object. For example, a cooking device may mean an oven such as a gas oven or an electric oven, a microwave heating device (hereinafter referred to as a microwave oven), a gas range, an electric range, a gas grill, or an electric grill.
일반적으로 오븐은 열을 발생시키는 히터를 이용하여 음식물에 직접 열을 전달하거나 조리실 내부를 가열하여 음식물을 조리한다. 전자 레인지는 고주파를 열원으로 하여 음식물의 분자 배열을 교란시킴에 따라 발생되는 분자간 마찰열에 의해 음식물을 조리한다.In general, ovens cook food by transferring heat directly to food using a heater that generates heat or by heating the inside of the cooking chamber. Microwave ovens use high-frequency waves as a heat source to cook food through frictional heat between molecules generated by disturbing the molecular arrangement of food.
챔버 내부의 이미지에서 와이어 랙을 형성하는 와이어들의 간격을 인식하여 챔버 내에서 와이어 랙의 높이 또는 식품의 높이를 추정하는 종래기술이 존재한다. 그러나 종래기술에서는 와이어 랙을 사용하지 않는 경우에는 챔버 내에서 식품의 위치를 추정할 수 없다.There is a prior art that estimates the height of the wire rack or the height of the food within the chamber by recognizing the spacing of the wires forming the wire rack in the image inside the chamber. However, in the prior art, if a wire rack is not used, the location of the food within the chamber cannot be estimated.
개시된 발명은, 챔버 내에서 트레이 또는 랙이 위치하는 높이를 정확하고 용이하게 추정할 수 있는 조리 기기 및 조리 기기의 제어 방법을 제공한다.The disclosed invention provides a cooking appliance and a method of controlling the cooking appliance that can accurately and easily estimate the height at which a tray or rack is located within a chamber.
일 실시예에 따른 조리 기기(1)는, 챔버(50); 상기 챔버를 개방하거나 폐쇄하는 도어(20); 트레이를 지지하기 위해 상기 챔버의 양 측벽에서 서로 다른 높이에 마련되는 복수의 지지대(51, 52); 상기 도어에 형성되는 복수의 마커; 상기 챔버(50) 내부의 이미지를 획득하는 카메라(60); 및 상기 이미지에서 상기 트레이에 의해 적어도 일부가 가려진 마커의 위치를 식별하고, 상기 적어도 일부가 가려진 마커의 위치에 기초하여 상기 챔버 내에서 상기 트레이의 높이를 추정하고, 상기 트레이의 높이에 기초하여 조리물을 조리하기 위한 조리 파라미터를 결정하는 제어부;를 포함한다.A
도어, 트레이를 지지하기 위해 챔버의 양 측벽에서 서로 다른 높이에 마련되는 복수의 지지대 및 상기 도어에 형성되는 복수의 마커를 포함하는 조리 기기의 제어 방법에 있어서, 일 실시예에 따른 제어 방법은, 상기 챔버 내부의 이미지를 획득하고; 상기 이미지에서 상기 트레이에 의해 적어도 일부가 가려진 마커의 위치를 식별하고; 상기 적어도 일부가 가려진 마커의 위치에 기초하여 상기 챔버 내에서 상기 트레이의 높이를 추정하고; 상기 트레이의 높이에 기초하여 조리물을 조리하기 위한 조리 파라미터를 결정하는 것;을 포함한다.In a method of controlling a cooking appliance including a plurality of supports provided at different heights on both side walls of the chamber to support a door and a tray, and a plurality of markers formed on the door, the control method according to an embodiment includes the following: acquire images of the interior of the chamber; identify the location of a marker in the image that is at least partially obscured by the tray; estimate the height of the tray within the chamber based on the location of the at least partially obscured marker; and determining cooking parameters for cooking food based on the height of the tray.
개시된 조리 기기 및 조리 기기의 제어 방법은, 도어에 형성되는 복수의 마커 또는 복수의 지지대에 형성되는 홈 중 적어도 하나를 이용하여 챔버 내에서 트레이 또는 랙이 위치하는 높이를 정확하고 용이하게 추정할 수 있다.The disclosed cooking appliance and cooking appliance control method can accurately and easily estimate the height at which the tray or rack is located within the chamber using at least one of a plurality of markers formed on the door or a groove formed on a plurality of supports. there is.
또한, 개시된 조리 기기 및 조리 기기의 제어 방법은, 챔버 내에서 트레이 또는 랙이 위치하는 높이에 따라 조리물을 조리하기 위한 조리 파라미터를 결정할 수 있다. 따라서 조리 성능이 향상될 수 있다.Additionally, the disclosed cooking appliance and method for controlling the cooking appliance can determine cooking parameters for cooking food depending on the height at which the tray or rack is located within the chamber. Therefore, cooking performance can be improved.
본 문서에서 달성하고자 하는 기술적 과제 및 효과는 전술된 것으로 제한되지 않으며, 언급된 것들 이외의 다른 기술적 과제 및 효과도 아래의 설명으로부터 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The technical problems and effects to be achieved in this document are not limited to those described above, and other technical problems and effects other than those mentioned will be clearly understood by those skilled in the art from the description below. It could be.
도 1은 다양한 전자 장치들에 의해 구현되는 네트워크 시스템을 도시한다.
도 2는 일 실시예에 따른 조리 기기의 사시도이다.
도 3은 일 실시예에 따른 조리 기기의 단면도이다.
도 4는 일 실시예에 따른 조리 기기의 제어 구성들을 도시한다.
도 5는 도 4에서 설명된 제어부의 구조를 예시한다.
도 6은 도어에서 복수의 마커가 형성되는 위치의 일 예를 도시한다.
도 7은 도어에서 복수의 마커가 형성되는 위치의 다른 예를 도시한다.
도 8은 도어에서 복수의 마커가 형성되는 위치의 또 다른 예를 도시한다.
도 9는 트레이가 챔버 측벽의 제1 지지대에 거치된 예를 도시한다.
도 10은 도 9에 도시된 챔버 상부의 카메라에 의해 촬영된 챔버 내부의 이미지를 도시한다.
도 11은 트레이가 챔버 측벽의 제2 지지대에 거치된 예를 도시한다.
도 12는 도 11에 도시된 챔버 상부의 카메라에 의해 촬영된 챔버 내부의 이미지를 도시한다.
도 13은 챔버의 측벽에 형성되는 복수의 지지대의 일 예를 도시한다.
도 14는 도 13에 도시된 복수의 지지대 중 하나에 트레이가 거치된 상태에서 챔버 상부의 카메라에 의해 촬영된 챔버 내부의 이미지를 도시한다.
도 15는 일 실시예에 따른 조리 기기의 제어 방법을 설명하는 순서도이다.
도 16, 도 17 및 도 18은 도 15에서 설명된 조리 기기의 제어 방법을 더 구체화하는 다양한 실시예를 설명하는 순서도이다.
도 19는 다른 실시예에 따른 조리 기기의 제어 방법을 설명하는 순서도이다.1 shows a network system implemented by various electronic devices.
Figure 2 is a perspective view of a cooking appliance according to one embodiment.
Figure 3 is a cross-sectional view of a cooking appliance according to one embodiment.
4 shows control configurations of a cooking appliance according to one embodiment.
Figure 5 illustrates the structure of the control unit described in Figure 4.
Figure 6 shows an example of a position where a plurality of markers are formed on a door.
Figure 7 shows another example of a position where a plurality of markers are formed on a door.
Figure 8 shows another example of a location where a plurality of markers are formed on a door.
Figure 9 shows an example in which the tray is mounted on the first support on the side wall of the chamber.
Figure 10 shows an image of the interior of the chamber taken by the camera on top of the chamber shown in Figure 9.
Figure 11 shows an example in which the tray is mounted on the second support on the side wall of the chamber.
Figure 12 shows an image of the interior of the chamber taken by the camera on top of the chamber shown in Figure 11.
Figure 13 shows an example of a plurality of supports formed on the side wall of the chamber.
FIG. 14 shows an image inside the chamber taken by a camera located at the top of the chamber while the tray is mounted on one of the plurality of supports shown in FIG. 13 .
Figure 15 is a flowchart explaining a method of controlling a cooking appliance according to an embodiment.
FIGS. 16, 17, and 18 are flowcharts illustrating various embodiments that further specify the method of controlling the cooking appliance described in FIG. 15.
19 is a flowchart explaining a method of controlling a cooking appliance according to another embodiment.
본 문서의 다양한 실시예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시예들로 한정하려는 것이 아니며, 해당 실시예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다.The various embodiments of this document and the terms used herein are not intended to limit the technical features described in this document to specific embodiments, and should be understood to include various changes, equivalents, or replacements of the embodiments.
도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.In connection with the description of the drawings, similar reference numbers may be used for similar or related components.
아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 아이템 한 개 또는 복수 개를 포함할 수 있다.The singular form of a noun corresponding to an item may include a single item or a plurality of items, unless the relevant context clearly indicates otherwise.
본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나", "A 또는 B 중 적어도 하나", "A, B 또는 C", "A, B 및 C 중 적어도 하나", 및 "A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다.As used herein, “A or B”, “at least one of A and B”, “at least one of A or B”, “A, B or C”, “at least one of A, B and C”, and “A Each of phrases such as “at least one of , B, or C” may include any one of the items listed together in the corresponding phrase, or any possible combination thereof.
"제1", "제2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다.Terms such as "first", "second", or "first" or "second" may be used simply to distinguish one element from another, and may be used to distinguish such elements in other respects, such as importance or order) is not limited.
어떤(예: 제1) 구성요소가 다른(예: 제2) 구성요소에, "기능적으로" 또는 "통신적으로"라는 용어와 함께 또는 이런 용어 없이, "커플드" 또는 "커넥티드"라고 언급된 경우, 그것은 어떤 구성요소가 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.One (e.g. first) component is said to be "coupled" or "connected" to another (e.g. second) component, with or without the terms "functionally" or "communicatively". Where mentioned, it means that one component can be connected to another component directly (e.g. wired), wirelessly, or through a third component.
“포함하다” 또는 "가지다"등의 용어는 본 문서에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는다.Terms such as “include” or “have” are intended to designate the existence of features, numbers, steps, operations, components, parts, or combinations thereof described in this document, but do not include one or more other features, numbers, or steps. , does not exclude in advance the possibility of the existence or addition of operations, components, parts, or combinations thereof.
어떤 구성요소가 다른 구성요소와 "연결", "결합", "지지" 또는 "접촉"되어 있다고 할 때, 이는 구성요소들이 직접적으로 연결, 결합, 지지 또는 접촉되는 경우뿐 아니라, 제3 구성요소를 통하여 간접적으로 연결, 결합, 지지 또는 접촉되는 경우를 포함한다.When a component is said to be “connected,” “coupled,” “supported,” or “in contact” with another component, this means not only when the components are directly connected, coupled, supported, or in contact, but also when a third component This includes cases where it is indirectly connected, coupled, supported, or contacted through.
어떤 구성요소가 다른 구성요소 "상에" 위치하고 있다고 할 때, 이는 어떤 구성요소가 다른 구성요소에 접해 있는 경우뿐 아니라 두 구성요소 사이에 또 다른 구성요소가 존재하는 경우도 포함한다.When a component is said to be located “on” another component, this includes not only cases where a component is in contact with another component, but also cases where another component exists between the two components.
“및/또는"이라는 용어는 복수의 관련된 기재된 구성요소들의 조합 또는 복수의 관련된 기재된 구성요소들 중의 어느 구성요소를 포함한다.The term “and/or” includes a combination of a plurality of related described elements or any element of a plurality of related described elements.
이하 첨부된 도면들을 참고하여 본 발명의 작용 원리 및 실시예에 대해 설명한다.Hereinafter, the operating principle and embodiments of the present invention will be described with reference to the attached drawings.
도 1은 다양한 전자 장치들에 의해 구현되는 네트워크 시스템을 도시한다.1 shows a network system implemented by various electronic devices.
도 1을 참조하면, 가전 기기(10)는 다른 가전 기기, 사용자 기기(2) 또는 서버(3)와 통신할 수 있는 통신 모듈, 사용자 입력을 수신하거나 사용자에게 정보를 출력하는 사용자 인터페이스, 가전 기기(10)의 동작을 제어하는 적어도 하나의 프로세서 및 가전 기기(10)의 동작을 제어하기 위한 프로그램이 저장된 적어도 하나의 메모리를 포함할 수 있다.Referring to Figure 1, the
가전 기기(10)는 다양한 종류의 가전 제품들 중 적어도 하나일 수 있다. 예를 들어, 가전 기기(10)는 도시된 바와 같이 냉장고(11), 식기세척기(12), 전기레인지(13), 전기오븐(14), 공기조화기(15), 의류 관리기(16), 세탁기(17), 건조기(18), 마이크로파 오븐(19) 중 적어도 하나를 포함할 수 있으나 이에 한정되는 것은 아니며, 예를 들어, 도면에 도시되지 않은 청소 로봇, 진공 청소기, 텔레비전 등의 다양한 타입의 가전 제품을 포함할 수 있다. 또한, 앞서 언급된 가전 제품들은 예시에 불과하며, 앞서 언급된 가전 제품들 외에도, 다른 가전 기기, 사용자 기기(2) 또는 서버(3)와 연결되어 후술하는 동작을 수행할 수 있는 기기는 일 실시예에 따른 가전 기기(10)에 포함될 수 있다.The
서버(3)는 다른 서버, 가전 기기(10) 또는 사용자 기기(2)와 통신할 수 있는 통신 모듈, 다른 서버, 가전 기기(10) 또는 사용자 기기(2)로부터 수신된 데이터를 처리할 수 있는 적어도 하나의 프로세서 및 데이터를 처리하기 위한 프로그램 또는 처리된 데이터를 저장할 수 있는 적어도 하나의 메모리를 포함할 수 있다. 이러한 서버(3)는 워크스테이션(workstation), 클라우드(cloud), 데이터 드라이브(data drive), 데이터 스테이션(data station) 등 다양한 컴퓨팅 디바이스로 구현될 수 있다. 서버(3)는 기능, 기능의 세부 구성 또는 데이터 등을 기준으로 물리적 또는 논리적으로 구분된 하나 이상의 서버로 구현될 수 있으며, 각 서버 간의 통신을 통해 데이터를 송수신하고 송수신된 데이터를 처리할 수 있다.The server (3) has a communication module capable of communicating with other servers, home appliances (10) or user devices (2), and can process data received from other servers, home appliances (10) or user devices (2). It may include at least one processor and at least one memory capable of storing a program for processing data or processed data. This
서버(3)는 사용자 계정을 관리하고, 사용자 계정에 결부시켜 가전 기기(10)를 등록하고, 등록된 가전 기기(10)를 관리하거나 제어하는 등의 기능을 수행할 수 있다. 예를 들어, 사용자는 사용자 기기(2)를 통해 서버(3)에 접속하여, 사용자 계정을 생성할 수 있다. 사용자 계정은 사용자에 의해 설정된 아이디와 비밀번호에 의해 식별될 수 있다. 서버(3)는 정해진 절차에 따라 가전 기기(10)를 사용자 계정에 등록할 수 있다. 예를 들어, 서버(3)는 가전 기기(10)의 식별 정보(예: 시리얼 넘버 또는 맥 주소(MAC address) 등)를 사용자 계정에 연결하여, 가전 기기(10)를 등록, 관리, 제어할 수 있다. 사용자 기기(2)는 가전 기기(10) 또는 서버(3)와 통신할 수 있는 통신 모듈, 사용자 입력을 수신하거나 사용자에게 정보를 출력하는 사용자 인터페이스, 사용자 기기(2)의 동작을 제어하는 적어도 하나의 프로세서 및 사용자 기기(2)의 동작을 제어하기 위한 프로그램이 저장된 적어도 하나의 메모리를 포함할 수 있다. The
사용자 기기(2)는 사용자가 휴대하거나, 사용자의 가정 또는 사무실 등에 배치될 수 있다. 사용자 기기(2)는 퍼스널 컴퓨터(personal computer), 단말기(terminal), 휴대폰(portable telephone), 스마트 폰(smart phone), 휴대 장치(handheld device), 착용 장치(wearable device) 등을 포함할 수 있으나, 이에 한정되는 것은 아니다. The
사용자 기기(2)의 메모리에는 가전 기기(10)를 제어하기 위한 프로그램, 즉 어플리케이션이 저장될 수 있다. 어플리케이션은 사용자 기기(2)에 설치된 상태로 판매되거나, 외부 서버로부터 다운로드 받아 설치될 수 있다. A program for controlling the
사용자가 사용자 기기(2)에 설치된 어플리케이션을 실행함으로써 서버(3)에 접속하여 사용자 계정을 생성하고, 로그인 된 사용자 계정을 기반으로 서버(3)와 통신을 수행하여 가전 기기(10)를 등록할 수 있다. The user runs the application installed on the user device (2), connects to the server (3), creates a user account, and registers the home appliance (10) by communicating with the server (3) based on the logged in user account. You can.
예를 들어, 사용자 기기(2)에 설치된 어플리케이션에서 안내하는 절차에 따라 가전 기기(10)가 서버(3)에 접속될 수 있도록 가전 기기(10)를 조작하면, 서버(3)에서 해당 사용자 계정에 가전 기기(10)의 식별 정보(예: 시리얼 넘버 또는 맥 주소(MAC address) 등)를 등재함으로써, 사용자 계정에 가전 기기(10)를 등록할 수 있다.For example, when the
사용자는 사용자 기기(2)에 설치된 어플리케이션을 이용하여 가전 기기(10)를 제어할 수 있다. 예를 들어, 사용자가 사용자 기기(2)에 설치된 어플리케이션으로 사용자 계정에 로그인 하면, 사용자 계정에 등록된 가전 기기(10)가 나타나고, 가전 기기(10)에 대한 제어 명령을 입력하면 서버(3)를 통해 가전 기기(10)에 제어 명령을 전달할 수 있다. The user can control the
네트워크는 유선 네트워크와 무선 네트워크를 모두 포함할 수 있다. 유선 네트워크는 케이블 네트워크 또는 전화 네트워크 등을 포함하며, 무선 네트워크는 전파를 통하여 신호를 송수신하는 모든 네트워크를 포함할 수 있다. 유선 네트워크와 무선 네트워크는 서로 연결될 수 있다.The network may include both wired and wireless networks. A wired network includes a cable network or a telephone network, and a wireless network may include any network that transmits and receives signals through radio waves. Wired networks and wireless networks can be connected to each other.
네트워크는 인터넷 같은 광역 네트워크(wide area network, WAN), 접속 중계기(Access Point, AP)를 중심으로 형성된 지역 네트워크(local area network, LAN) 및/또는 접속 중계기(AP)를 통하지 않는 근거리 무선 네트워크를 포함할 수 있다. 근거리 무선 네트워크는, 예를 들면, 블루투스(Bluetooth??, IEEE 802.15.1), 지그비(Zigbee, IEEE 802.15.4), 와이파이 다이렉트(Wi-Fi Direct), NFC(Near Field Communication), 지-웨이브(Z-Wave) 등을 포함할 수 있으나, 예시된 것들로 한정되지 않는다.The network is a wide area network (WAN) such as the Internet, a local area network (LAN) formed around an access point (AP), and/or a short-range wireless network that does not go through an access point (AP). It can be included. Short-range wireless networks include, for example, Bluetooth® (IEEE 802.15.1), Zigbee (IEEE 802.15.4), Wi-Fi Direct, NFC (Near Field Communication), and Z-Wave. (Z-Wave), etc., but is not limited to the examples.
접속 중계기(AP)는 가전 기기(10) 또는 사용자 기기(2)를 서버(3)가 연결된 광역 네트워크(WAN)에 연결시킬 수 있다. 가전 기기(10) 또는 사용자 기기(2)는 광역 네트워크(WAN)를 통해 서버(3)에 연결될 수 있다.The access repeater (AP) can connect the
접속 중계기(AP)는 와이파이(Wi-Fi??, IEEE 802.11), 블루투스(Bluetooth??, IEEE 802.15.1), 지그비(Zigbee, IEEE 802.15.4) 등의 무선 통신을 이용하여 가전 기기(10) 또는 사용자 기기(2)와 통신하고 유선 통신을 이용하여 광역 네트워크(WAN)에 접속할 수 있으나, 이에 한정되는 것은 아니다.The access repeater (AP) connects home appliances (10 ) or can communicate with the
다양한 실시예에 따라, 가전 기기(10)는 접속 중계기(AP)를 통하지 않고 사용자 기기(2) 또는 서버(3)와 직접 연결될 수도 있다.According to various embodiments, the
가전 기기(10)는 원거리 무선 네트워크 또는 근거리 무선 네트워크를 통해 사용자 기기(2) 또는 서버(3)와 연결될 수 있다.The
예를 들어, 가전 기기(10)는 근거리 무선 네트워크(예: 와이파이 다이렉트)를 통해 사용자 기기(2)와 연결될 수 있다.For example, the
또 다른 예로, 가전 기기(10)는 원거리 무선 네트워크(예: 셀룰러 통신 모듈)를 이용하여 광역 네트워크(WAN)를 통해 사용자 기기(2) 또는 서버(3)와 연결될 수 있다.As another example, the
또 다른 예로, 가전 기기(10)는 유선 통신을 이용하여 광역 네트워크(WAN)에 접속하고, 광역 네트워크(WAN)를 통해 사용자 기기(2) 또는 서버(3)와 연결될 수 있다.As another example, the
가전 기기(10)가 유선 통신을 이용하여 광역 네트워크(WAN)에 접속할 수 있는 경우, 접속 중계기로서 동작할 수도 있다. 이에 따라, 가전 기기(10)는 다른 가전 기기를 서버(3)가 연결된 광역 네트워크(WAN)에 연결시킬 수 있다. 또한, 다른 가전 기기는 가전 기기(10)를 서버(3)가 연결된 광역 네트워크(WAN)에 연결시킬 수 있다.If the
가전 기기(10)는 네트워크를 통하여 동작 또는 상태에 관한 정보를 다른 가전 기기, 사용자 기기(2) 또는 서버(3)에 전송할 수 있다. 예를 들어, 가전 기기(10)는 서버(3)로부터 요청이 수신되는 경우, 가전 기기(10)에서 특정 이벤트가 발생한 경우, 또는 주기적으로 또는 실시간으로 동작 또는 상태에 관한 정보를 다른 가전 기기, 사용자 기기(2) 또는 서버(3)로 전송할 수 있다. 서버(3)는 가전 기기(10)로부터 동작 또는 상태에 관한 정보가 수신되면 저장되어 있던 가전 기기(10)의 동작 또는 상태에 관한 정보를 업데이트하고, 네트워크를 통하여 사용자 기기(2)에 가전 기기(10)의 동작 및 상태에 관한 업데이트된 정보를 전송할 수 있다. 여기서, 정보의 업데이트란 기존 정보에 새로운 정보를 추가하는 동작, 기존 정보를 새로운 정보로 대체하는 동작 등 기존 정보가 변경되는 다양한 동작을 포함할 수 있다.The
가전 기기(10)는 다른 가전 기기, 사용자 기기(2) 또는 서버(3)로부터 다양한 정보를 획득하고, 획득된 정보를 사용자에게 제공할 수 있다. 예를 들어, 가전 기기(10)는 서버(3)로부터 가전 기기(10)의 기능과 관련된 정보(예를 들어, 조리법, 세탁법 등), 다양한 환경 정보(예를 들어, 날씨, 온도, 습도 등)의 정보를 획득하고, 사용자 인터페이스를 통해 획득된 정보를 출력할 수 있다.The
가전 기기(10)는 다른 가전 기기, 사용자 기기(2) 또는 서버(3)로부터 수신되는 제어 명령에 따라 동작할 수 있다. 예를 들어, 가전 기기(10)는 사용자 입력이 없더라도 서버(3)의 제어 명령에 따라 동작할 수 있도록 사용자의 사전 승인을 획득한 경우, 가전 기기(10)는 서버(3)로부터 수신되는 제어 명령에 따라 동작할 수 있다. 여기서, 서버(3)로부터 수신되는 제어 명령은 사용자가 사용자 기기(2)를 통해 입력한 제어 명령 또는 기 설정된 조건에 기초한 제어 명령 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
사용자 기기(2)는 통신 모듈을 통해 사용자에 관한 정보를 가전 기기(10) 또는 서버(3)에 전송할 수 있다. 예를 들어, 사용자 기기(2)는 사용자의 위치, 사용자의 건강 상태, 사용자의 취향, 사용자의 일정 등에 관한 정보를 서버(3)에 전송할 수 있다. 사용자 기기(2)는 사용자의 사전 승인에 따라 사용자에 관한 정보를 서버(3)에 전송할 수 있다.The
가전 기기(10), 사용자 기기(2) 또는 서버(3)는 인공 지능 등의 기술을 이용하여 제어 명령을 결정할 수 있다. 예를 들어, 서버(3)는 가전 기기(10)의 동작 또는 상태에 관한 정보를 수신하거나 사용자 기기(2)의 사용자에 관한 정보를 수신하여 인공 지능 등의 기술을 이용하여 처리하고, 처리 결과에 기초하여 가전 기기(10) 또는 사용자 기기(2)에 처리 결과 또는 제어 명령을 전송할 수 있다.The
이하에서 설명되는 조리 기기(1)는 전술된 가전 기기(10)에 해당한다.The
도 2는 일 실시예에 따른 조리 기기의 사시도이다. 도 3은 일 실시예에 따른 조리 기기의 단면도이다.Figure 2 is a perspective view of a cooking appliance according to one embodiment. Figure 3 is a cross-sectional view of a cooking appliance according to one embodiment.
도 2 및 도 3을 참조하면, 조리 기기(1)는, 외관을 형성하는 하우징(1h)과, 하우징(1h)의 개구를 개폐하도록 마련되는 도어(20)를 포함할 수 있다. 도어(20)는 적어도 하나의 투명 유리판(21, 22, 23)을 포함할 수 있다. 예를 들면, 도어(20)는 도어(20)의 외면을 형성하는 제1 투명 유리판(21)과 도어(20)의 내면을 형성하는 제2 투명 유리판(22)을 포함할 수 있다. 또한, 제1 투명 유리판(21)과 제2 투명 유리판(22) 사이에 제3 투명 유리판(23)이 배치될 수도 있다. 도어(20)가 3중 투명 유리판을 포함하는 것으로 예시되었으나, 이에 제한되지 않는다. 도어(20)는 2중 투명 유리판 또는 4중 투명 유리판을 포함할 수도 있다.Referring to FIGS. 2 and 3 , the
도어(20)에 포함되는 적어도 하나의 투명 유리판(21, 22, 23)은 윈도우 역할을 할 수 있다. 사용자는 도어(20)가 닫혀 있을 때 투명 유리판(21, 22, 23)을 통해 챔버(50) 내부를 관찰할 수 있다. 투명 유리판(21, 22, 23)은 내열 유리로 형성될 수 있다.At least one
또한, 도어(20)에는 복수의 마커(M1, M2, M3)가 형성될 수 있다. 복수의 마커(M1, M2, M3)는 도어(20)의 제1 투명 유리판(21), 제2 투명 유리판(22) 또는 제3 투명 유리판(23)에 형성될 수 있다. 도 3에서는 복수의 마커(M1, M2, M3)가 제1 투명 유리판(21)에 형성되는 것으로 예시된다.Additionally, a plurality of markers M1, M2, and M3 may be formed on the
예를 들면, 복수의 마커(M1, M2, M3)는 챔버(50)의 바닥(50a)에 가까운 도어(20)의 제1 위치에 형성되는 하부 마커(M1), 제1 지지대(51)의 제1 높이(h1)에 대응하는 도어(20)의 제2 위치에 형성되는 중간 마커(M2) 및 제2 지지대(52)의 제2 높이(h2)에 대응하는 도어(20)의 제3 위치에 형성되는 상부 마커(M3)를 포함할 수 있다. 하부 마커(M1), 중간 마커(M2) 및 상부 마커(M3)는 각각 제1 마커, 제2 마커 및 제3 마커로 호칭될 수도 있다. 도어(20)에 3개의 마커가 형성되는 것으로 예시되었으나, 이에 제한되지 않는다. 도어(20)에 형성되는 마커의 개수는 챔버(50)의 측벽에 마련되는 지지대의 개수에 따라 달라질 수 있다.For example, the plurality of markers M1, M2, and M3 are the lower marker M1 formed at the first position of the
조리 기기(1)의 하우징(1h)에는 조리 기기(1)의 동작과 관련된 정보를 표시하고 사용자 입력을 획득하기 위한 사용자 인터페이스(40)가 마련될 수 있다. 사용자 인터페이스(40)는 조리 기기(1)의 동작과 관련된 정보를 표시하는 디스플레이(41)와 사용자의 입력을 획득하는 입력부(42)를 포함할 수 있다. 디스플레이(41)와 입력부(42)는 하우징(1h)의 다양한 위치에 마련될 수 있다. 예를 들면, 디스플레이(41)와 입력부(42)는 하우징(1h)의 상측 전면에 위치할 수 있다. The housing 1h of the
디스플레이(41)는 다양한 종류의 디스플레이 패널로 제공될 수 있다. 예를 들어, 디스플레이(41)는 액정 디스플레이 패널(Liquid Crystal Display Panel, LCD Panel), 발광 다이오드 패널(Light Emitting Diode Panel, LED Panel), 유기 발광 다이오드 패널(Organic Light Emitting Diode Panel, OLED Panel), 또는 마이크로 LED 패널을 포함할 수 있다. 디스플레이(41)는 터치 스크린을 포함하여 입력 장치로도 사용될 수 있다.The
디스플레이(41)는 사용자가 입력한 정보 또는 사용자에게 제공되는 정보를 다양한 화면으로 표시할 수 있다. 디스플레이(41)는 조리 기기(1)의 동작과 관련된 정보를 이미지 또는 텍스트 중 적어도 하나로 표시할 수 있다. 또한, 디스플레이(41)는 조리 기기(1)의 제어를 가능하게 하는 그래픽 사용자 인터페이스(GUI, Graphic User Interface)를 표시할 수 있다. 즉, 디스플레이(41)는 아이콘(Icon)과 같은 UI 엘리먼트(User Interface Element)를 표시할 수 있다.The
입력부(42)는 사용자 입력에 대응하는 전기적 신호(전압 또는 전류)를 제어부(200)로 전송할 수 있다. 입력부(42)는 다양한 버튼들 및/또는 다이얼을 포함할 수 있다. 예를 들면, 입력부(42)는 조리 기기(1)의 전원을 온 또는 오프 하기 위한 전원 버튼, 조리 동작을 시작 또는 정지하기 위한 시작/정지 버튼, 조리 코스를 선택하기 위한 조리 코스 버튼, 조리 온도를 설정하기 위한 온도 버튼 및 조리 시간을 설정하기 위한 시간 버튼 중 적어도 하나를 포함할 수 있다. 다양한 버튼들은 물리 버튼 또는 터치 버튼으로 마련될 수 있다.The
입력부(42)에 포함되는 다이얼은 회전 가능하게 마련될 수 있다. 다이얼의 회전에 의해 복수의 조리 코스 중 하나가 선택될 수 있다. 다이얼의 회전에 따라 디스플레이(41)에 표시되는 UI 엘리먼트들이 순차적으로 이동할 수 있다. 조리 기기(1)는 선택된 조리 코스에 따라 조리를 수행할 수 있다. 조리 코스는 조리 온도, 조리 시간, 히터(80)의 출력 및 팬(90)의 출력과 같은 조리 파라미터를 포함할 수 있다. 챔버(50) 내 트레이(T)의 위치, 조리물의 종류, 수량 및/또는 크기에 따라 다른 조리 코스가 선택될 수 있다.The dial included in the
조리 기기(1)는 하우징(1h) 내부에 마련되고 조리물이 위치할 수 있는 챔버(50)를 포함할 수 있다. 하우징(1h)의 전방에는 개구가 마련될 수 있다. 사용자는 하우징(1h)의 개구를 통해 조리물을 챔버(50) 내에 위치시킬 수 있다. 챔버(50)는 직육면체 형상으로 마련될 수 있다.The
챔버(50)의 양 측벽에는 트레이(T)의 거치를 위한 복수의 지지대(51, 52)가 마련될 수 있다. 지지대는 '레일'로 호칭될 수도 있다. 일 예로, 복수의 지지대(51, 52)는 챔버(50)의 좌측 내벽과 우측 내벽으로부터 돌출되도록 형성될 수 있다. 다른 예로, 복수의 지지대(51, 52)는 별도의 구조물로서 챔버(50)의 좌측 내벽과 우측 내벽에 장착 가능하도록 마련될 수 있다.A plurality of
복수의 지지대(51, 52) 각각은 전후 방향으로 미리 정해진 길이를 갖는다. 복수의 지지대(51, 52)는 상하 방향으로 서로 떨어진 위치에 마련될 수 있다. 예를 들면, 복수의 지지대(51, 52)는 제1 지지대(51)와, 제1 지지대(51)의 위치보다 높은 위치에 형성되는 제2 지지대(52)를 포함할 수 있다. 제1 지지대(51)는 챔버(50)의 바닥(50a)으로부터 제1 높이(h1)에 위치할 수 있다. 제2 지지대(52)는 챔버(50)의 바닥(50a)으로부터 제1 높이(h1)보다 높은 제2 높이(h2)에 위치할 수 있다. 또한, 후술되는 바와 같이, 복수의 지지대(51, 52) 각각은 돌출부와 홈을 포함할 수 있다. 지지대(51, 52)의 홈은 챔버(50) 내 트레이(T)의 높이를 추정하는데 사용될 수 있다.Each of the plurality of
제1 지지대(51)는 챔버(50)의 좌측 내벽과 우측 내벽 각각의 제1 높이에 위치하는 한 쌍의 지지대를 의미할 수 있다. 제2 지지대(52)는 챔버(50)의 좌측 내벽과 우측 내벽 각각의 제2 높이에 위치하는 한 쌍의 지지대를 의미할 수 있다. 챔버(50) 내 공간은 복수의 지지대(51, 52)에 의해 복수의 층으로 구분될 수 있다. 예를 들면, 챔버(50)의 바닥(50a)은 1층(F1)을 형성하고, 제1 지지대(51)는 2층(F2)을 형성하며, 제2 지지대(52)는 3층(F3)을 형성할 수 있다.The
복수의 지지대(51, 52)에 의해 트레이(T)가 챔버(50) 내에서 다양한 높이에 거치될 수 있다. 예를 들면, 트레이(T)는 챔버(50)의 바닥(50a), 제1 지지대(51) 또는 제2 지지대(52)에 거치될 수 있다. 트레이(T)가 챔버(50) 내에 투입되면, 트레이(T)의 상면은 챔버(50)의 천장과 마주할 수 있다. 트레이(T)의 상면에는 조리물이 위치할 수 있다. 트레이(T)는 다양한 형상을 가질 수 있다. 예를 들면, 트레이(T)는 직사각형으로 마련될 수 있다.The tray T can be held at various heights within the
복수의 트레이가 동시에 거치되는 경우, 복수의 조리 공간이 형성될 수 있다. 예를 들면, 복수의 트레이가 챔버(50)의 바닥(50a), 제1 지지대(51) 및 제2 지지대(52) 모두에 거치되면, 챔버(50) 내에는 1층 공간, 2층 공간 및 3층 공간이 형성될 수 있다.When multiple trays are mounted simultaneously, multiple cooking spaces may be formed. For example, when a plurality of trays are mounted on the
챔버(50)의 양 측벽에 2개의 지지대(51, 52)가 마련되는 것으로 예시되었으나, 이에 제한되지 않는다. 설계에 따라 다양한 개수의 레일이 마련될 수 있다. 챔버(50)가 클수록 많은 수의 레일이 마련될 수 있다.Although it is illustrated that two
챔버(50)와 하우징(1h) 사이에는 조리 기기(1)의 동작에 필요한 다양한 부품들이 배치될 수 있다. 예를 들면, 조리 기기(1)는 카메라(60), 조명(70), 팬(90) 및 다양한 회로를 포함할 수 있다.Various parts necessary for the operation of the
카메라(60)는 챔버(50) 내부의 이미지를 획득할 수 있다. 카메라(60)는 획득한 이미지의 데이터를 제어부(200)로 전송할 수 있다. 카메라(60)의 시야(FOV)를 확보하기 위해, 카메라(60)의 위치와 인접한 챔버(50)의 상면의 일부는 투명 소재(예를 들면, 투명 내열 유리)로 형성될 수 있다.The
조명(70)은 챔버(50) 내부로 광을 방출할 수 있다. 조명(70)에서 방출되는 광에 의해 챔버(50) 내부가 밝아질 수 있다. 그에 따라 카메라(60)에 의해 획득된 이미지의 밝기, 대비 및/또는 선명도가 증가할 수 있고, 이미지에 포함된 오브젝트의 식별력이 향상될 수 있다. 조명(70)의 위치와 인접한 챔버(50)의 상면의 다른 일부에는 조명(70)의 광을 챔버(50) 내부로 투과시키고 확산시키기 위한 확산 소재가 마련될 수 있다.
챔버(50)의 상단에는 히터(80)가 위치할 수 있다. 히터(80)는 챔버(50) 내부로 열을 공급할 수 있다. 히터(80)가 생성하는 열에 의해 조리물이 조리될 수 있다. 히터(80)는 하나 이상으로 마련될 수 있다. 제어부(200)에 의해 히터(80)의 가열 레벨과 가열 시간이 조절될 수 있다. 챔버(50) 내 트레이(T)의 위치, 조리물의 종류, 수량 및/또는 크기에 따라 히터(80)의 출력과 가열 시간이 다르게 조절될 수 있다. 즉, 조리 코스에 따라 히터(80)의 동작이 다르게 제어될 수 있다.A
팬(90)은 챔버(50) 내부의 공기를 순환시킬 수 있다. 팬(90)은 모터와 블레이드를 포함할 수 있다. 팬(90)은 하나 이상으로 마련될 수 있다. 팬(90)이 동작함에 따라 히터(80)에 의해 가열된 공기가 챔버(50) 내부를 순환할 수 있다. 따라서 히터(80)에 의해 생성된 열이 챔버(50)의 상부로부터 하부까지 골고루 전달될 수 있다. 제어부(200)에 의해 팬(90)의 회전 속도와 회전 시간이 조절될 수 있다. 조리 코스에 따라 팬(90)의 동작이 다르게 제어될 수 있다. 챔버(50) 내 트레이(T)의 위치, 조리물의 종류, 수량 및/또는 크기에 따라 팬(90)의 출력과 회전 시간이 다르게 조절될 수 있다.The
도 4는 일 실시예에 따른 조리 기기의 제어 구성들을 도시한다.4 shows control configurations of a cooking appliance according to one embodiment.
도 4를 참조하면, 조리 기기(1)는 사용자 인터페이스(40), 카메라(60), 조명(70), 히터(80), 팬(90), 통신 회로(100), 온도 센서(110), 타이머(120) 및 제어부(200)를 포함할 수 있다. 제어부(200)는 조리 기기(1)의 구성요소들과 전기적으로 연결되고, 조리 기기(1)의 구성요소들을 제어할 수 있다.Referring to FIG. 4, the
사용자 인터페이스(40)를 디스플레이(41)와 입력부(42)를 포함할 수 있다. 디스플레이(41)는 조리 기기(1)의 동작과 관련된 정보를 표시할 수 있다. 디스플레이(41)는 사용자가 입력한 정보 또는 사용자에게 제공되는 정보를 다양한 화면으로 표시할 수 있다.The
입력부(42)는 사용자 입력을 획득할 수 있다. 사용자 입력은 다양한 명령을 포함할 수 있다. 예를 들면, 입력부(42)는, 아이템을 선택하는 명령, 조리 코스를 선택하는 명령, 히터(80)의 가열 레벨을 조절하는 명령, 조리 시간을 조절하는 명령, 조리 온도를 조절하는 명령, 조리 시작 명령 또는 조리 중지 명령 중 적어도 하나를 획득할 수 있다. 사용자 입력은 사용자 기기(2)로부터 획득될 수도 있다.The
제어부(200)는 입력부(42) 또는 사용자 기기(2) 중 적어도 하나를 통해 수신되는 명령을 처리하여 조리 기기(1)의 작동을 제어할 수 있다. 조리 기기(1)는 메모리(220), 사용자 기기(2) 또는 서버(3)로부터 획득한 조리 코스 정보에 기초하여 조리를 자동으로 수행할 수 있다.The
카메라(60)는 챔버(50) 내부의 이미지를 획득할 수 있다. 제어부(200)는 조리 기기(1)의 전원이 켜진 후 도어(20)가 닫히면 챔버(50) 내부의 이미지를 획득하도록 카메라(60)를 제어할 수 있다. 제어부(200)는 조리가 시작된 후 조리가 완료될 때까지 미리 정해진 시간 간격마다 챔버(50) 내부의 이미지를 획득하도록 카메라(60)를 제어할 수도 있다. 제어부(200)는 조리 동작이 수행되는 동안 획득되는 복수의 이미지를 이용하여 조리물의 조리 상태를 판단할 수도 있다.The
제어부(200)는 카메라(60)에 의해 획득된 챔버(50) 내부의 이미지에 포함된 다양한 오브젝트를 식별할 수 있다. 제어부(200)는 이미지에 포함된 조리물을 식별할 수 있다. 제어부(200)는 이미지에서 트레이(T)를 식별할 수 있고, 도어(20)의 마커(M1, M2, M3)를 식별할 수 있다. 제어부(200)는 메모리(220) 또는 서버(3)로부터 획득되는 학습 모델을 이용하여 이미지로부터 조리물을 식별할 수 있다. 제어부(200)는 이미지를 처리하여 조리물의 종류, 수량 및/또는 크기를 추정할 수 있다.The
제어부(200)는 카메라(60)에 의해 획득된 이미지를 분석하여 챔버(50) 내에서 트레이(T)가 위치하는 높이를 추정할 수 있다. 제어부(200)는 이미지에서 트레이(T)에 의해 적어도 일부가 가려진 마커의 위치를 식별할 수 있다. 제어부(200)는 적어도 일부가 가려진 마커의 위치에 기초하여 챔버(50) 내에서 트레이(T)의 높이를 추정할 수 있다. 또한, 제어부(200)는 챔버 내부의 이미지에서 지지대(51, 52)의 홈(groove)이 검출되는지 여부에 기초하여 챔버(50) 내에서 트레이(T)가 위치하는 높이를 추정할 수도 있다. 도어(20)에 형성된 마커(M1, M2, M3)및/또는 지지대(51, 52)의 홈을 이용하여 트레이(T)의 높이를 추정하는 구체적인 방법은 후술된다.The
제어부(200)는 추정된 트레이(T)의 높이에 기초하여 조리물을 조리하기 위한 조리 파라미터를 결정할 수 있다. 챔버(50) 내에서 트레이(T)가 위치하는 높이는 조리 품질을 결정하는데 중요한 역할을 한다. 예를 들면, 트레이(T)가 제2 지지대(52)에 거치되어 조리물이 3층(F3) 공간에 위치할 수 있다. 이 경우 조리물의 두께가 상대적으로 얇을 수 있고, 대체로 조리물의 표면을 그을리기 위한 조리 코스가 요구될 수 있다. 다른 예로, 트레이(T)가 챔버(50)의 바닥(50a)에 거치되어 조리물이 1층(F1) 공간에 위치할 수 있다. 이 경우 조리물의 두께가 상대적으로 두꺼울 수 있고, 대체로 조리물의 내부까지 고르게 익히기 위한 조리 코스가 요구될 수 있다. 이와 같이, 챔버(50) 내 트레이(T)의 높이에 따라 조리 파라미터를 다르게 결정할 필요가 있다.The
조명(70)은 챔버(50) 내부로 광을 방출할 수 있다. 제어부(200)는 조리 기기(1)의 전원이 켜지면 광을 방출하도록 조명(70)을 제어할 수 있다. 제어부(200)는 조리가 완료될 때까지 또는 조리 기기(1)의 전원이 꺼질 때까지 광을 방출하도록 조명(70)을 제어할 수 있다.
히터(80)는 챔버(50) 내부로 열을 공급할 수 있다. 제어부(200)는 히터(80)의 출력을 조절할 수 있다. 예를 들면, 제어부(200)는 히터(80)의 가열 레벨과 가열 시간을 조절할 수 있다. 제어부(200)는 챔버(50) 내 트레이(T)의 위치, 조리물의 종류, 개수 및/또는 조리 코스에 따라 히터(80)의 가열 레벨과 가열 시간을 조절할 수 있다.The
팬(90)은 챔버(50) 내부의 공기를 순환시킬 수 있다. 제어부(200)는 팬(90)의 출력을 조절할 수 있다. 예를 들면, 제어부(200)는 팬(90)의 회전 속도와 회전 시간을 조절할 수 있다. 제어부(200)는 챔버(50) 내 트레이(T)의 위치, 조리물의 종류, 개수 및/또는 크기에 따라 팬(90)의 회전 속도와 회전 시간을 조절할 수 있다.The
통신 회로(100)는 네트워크를 통해 사용자 기기(2) 또는 서버(3) 중 적어도 하나와 연결을 수행할 수 있다. 제어부(200)는 통신 회로(100)를 통해 서버(3)로부터 다양한 정보, 다양한 신호 및/또는 다양한 데이터를 획득할 수 있다. 예를 들면, 통신 회로(100)는 사용자 기기(2)로부터 원격 제어 신호를 수신할 수 있다. 제어부(200)는 통신 회로(100)를 통해 서버(3)로부터 이미지를 분석하는데 사용되는 학습 모델을 획득할 수 있다.The
통신 회로(100)는 다양한 통신 모듈을 포함할 수 있다. 통신 회로(100)는 무선 통신 모듈 및/또는 유선 통신 모듈을 포함할 수 있다. 무선 통신 기술로서, 무선 랜(wireless local area network), 홈 RF(Home Radio Frequency), 적외선 통신, UWB(Ultra-wide band) 통신, 와이파이, 블루투스, 지그비(Zigbee) 등이 적용될 수 있다.
온도 센서(110)는 챔버(50) 내부의 온도를 검출할 수 있다. 온도 센서(110)는 챔버(50) 내부의 다양한 위치에 설치될 수 있다. 온도 센서(110)는 검출된 온도에 대응하는 전기적 신호를 제어부(200)에 전송할 수 있다. 제어부(200)는 챔버(50) 내부의 온도가 조리물의 종류, 개수 및/또는 조리 코스에 따라 정해지는 조리 온도로 유지되도록 히터(80)와 팬(90) 중 적어도 하나를 제어할 수 있다.The
이외에도, 조리 기기(1)는 다양한 센서를 포함할 수 있다. 예를 들면, 조리 기기(1)는 전류 센서와 전압 센서를 포함할 수 있다. 전류 센서는 조리 기기(1)의 전자 부품들에 인가되는 전류를 측정할 수 있다. 전압 센서는 조리 기기(1)의 전자 부품들에 인가되는 전압을 측정할 수 있다.In addition, the
제어부(200)는 프로세서(210)와 메모리(220)를 포함할 수 있다. 프로세서(210)는 하드웨어로서, 논리 회로와 연산 회로를 포함할 수 있다. 프로세서(210)는 조리 기기(1)의 동작을 위해 메모리(220)에 저장된 프로그램, 인스트럭션 및/또는 데이터를 이용하여 전기적으로 연결된 조리 기기(1)의 구성요소들을 제어할 수 있다. 제어부(200)는 콘덴서, 인덕터 및 저항 소자와 같은 회로 소자를 포함하는 제어 회로로 구현될 수 있다. 프로세서(210)와 메모리(220)는 별도의 칩으로 구현되거나, 단일의 칩으로 구현될 수 있다. 또한, 제어부(200)는 복수의 프로세서와 복수의 메모리를 포함할 수 있다.The
메모리(220)는 조리 기기(1)의 동작을 위한 프로그램, 어플리케이션 및/또는 데이터를 저장할 수 있고, 프로세서(210)에 의해 생성되는 데이터를 저장할 수 있다. 메모리(220)는 데이터를 장기간 저장하기 위한 롬(Read Only Memory), 플래시 메모리와 같은 비휘발성 메모리를 포함할 수 있다. 메모리(220)는 데이터를 일시적으로 기억하기 위한 S-램(Static Random Access Memory, S-RAM), D-램(Dynamic Random Access Memory)과 같은 휘발성 메모리를 포함할 수 있다.The
조리 기기(1)의 구성요소는 전술된 것으로 제한되지 않는다. 조리 기기(1)는 전술된 구성요소들 외에도 다양한 구성요소들을 더 포함할 수 있으며, 전술된 구성요소들 중 일부가 생략되는 것도 가능하다.The components of the
도 5는 도 4에서 설명된 제어부의 구조를 예시한다.Figure 5 illustrates the structure of the control unit described in Figure 4.
도 5를 참조하면, 제어부(200)는 서브 제어부(200a)와 메인 제어부(200b)를 포함할 수 있다. 서브 제어부(200a)와 메인 제어부(200b)는 서로 전기적으로 연결되고, 각각 별도의 프로세서와 메모리를 포함할 수 있다. 메인 제어부(200b)는 히터(80) 및 팬(90)과 전기적으로 연결되고 히터(80)의 동작과 팬(90)의 동작을 제어할 수 있다.Referring to FIG. 5, the
서브 제어부(200a)는 사용자 인터페이스(40), 카메라(60), 조명(70), 통신 회로(100) 및 온도 센서(110)의 동작을 제어할 수 있다. 서브 제어부(200a)는 사용자 인터페이스(40)를 통해 입력되는 사용자 입력에 대응하는 전기적 신호를 처리할 수 있고, 조리 기기(1)의 동작에 관한 정보를 표시하도록 사용자 인터페이스(40)를 제어할 수 있다. The sub-controller 200a may control the operations of the
또한, 서브 제어부(200a)는 서버(3)로부터 조리물의 식별 및/또는 트레이(T)의 높이 추정을 위한 레퍼런스 이미지(Reference Image) 및 학습 모델을 획득할 수 있다. 서브 제어부(200a)는 레퍼런스 이미지와 학습 모델을 이용하여 카메라(60)에 의해 획득된 이미지로부터 조리물을 식별할 수 있다. 서브 제어부(200a)는 이미지를 전처리 하고, 학습 모델을 이용하여 조리물을 식별하며, 조리물의 종류, 개수 및/또는 크기를 추정할 수 있다. 서브 제어부(200a)는 학습 모델을 이용하여 카메라(60)에 의해 획득된 챔버(50) 내부의 이미지로부터 챔버(50) 내 트레이(T)의 높이를 추정할 수 있다.Additionally, the sub-controller 200a may obtain a reference image and a learning model for identifying food and/or estimating the height of the tray T from the
카메라(60)에 의해 획득된 이미지가 학습 모델에 입력되면, 학습 모델은 이미지에 포함된 조리물의 종류, 개수 및/또는 크기를 출력할 수 있다. 또한, 학습 모델은 챔버(50) 내 트레이(T)의 높이를 출력할 수 있다.When the image acquired by the
학습 모델은 인공지능 모델을 의미한다. 학습 모델은 머신 러닝 및/또는 딥 러닝을 통해 생성될 수 있다. 학습 모델은 서버(3)에 의해 생성될 수 있으며, 조리 기기(1)의 메모리(220)에 저장될 수 있다. 학습 알고리즘은, 예를 들면, 지도형 학습(supervised learning), 비지도형 학습(unsupervised learning), 준지도형 학습(semi-supervised learning) 또는 강화 학습(reinforcement learning)을 포함할 수 있으며, 예시된 것으로 한정되지 않는다. Learning model refers to an artificial intelligence model. Learning models may be created through machine learning and/or deep learning. The learning model may be created by the
학습 모델은 복수의 인공 신경망 레이어들을 포함할 수 있다. 인공 신경망은 심층 신경망(DNN: deep neural network), CNN(convolutional neural network), RNN(recurrent neural network), RBM(restricted boltzmann machine), DBN(deep belief network), BRDNN(bidirectional recurrent deep neural network), 및/또는 심층 Q-네트워크(deep Q-networks)를 포함할 수 있으며, 예시된 것으로 제한되지 않는다. 인공지능 모델은 하드웨어 구조 이외에, 추가적으로 또는 대체적으로, 소프트웨어 구조를 포함할 수 있다.The learning model may include multiple artificial neural network layers. Artificial neural networks include deep neural network (DNN), convolutional neural network (CNN), recurrent neural network (RNN), restricted boltzmann machine (RBM), belief deep network (DBN), bidirectional recurrent deep neural network (BRDNN), and/or deep Q-networks, but are not limited to those illustrated. In addition to hardware structures, artificial intelligence models may additionally or alternatively include software structures.
서브 제어부(200a)는 인공 지능 알고리즘을 처리하기 위해, 다중 입력- 다중 출력 연산(즉, 매트릭스(Matrix) 연산)을 수행할 수 있는 특수한 프로세서를 포함할 수 있다. 서브 제어부(200a)에 포함되는 특수한 프로세서는 NPU(Neural Process Unit)로 호칭될 수 있다.The sub-controller 200a may include a special processor capable of performing multiple input-multiple output operations (i.e., matrix operations) to process artificial intelligence algorithms. A special processor included in the sub-controller 200a may be called a Neural Process Unit (NPU).
도 6은 도어에서 복수의 마커가 형성되는 위치의 일 예를 도시한다. 도 7은 도어에서 복수의 마커가 형성되는 위치의 다른 예를 도시한다. 도 8은 도어에서 복수의 마커가 형성되는 위치의 또 다른 예를 도시한다.Figure 6 shows an example of a position where a plurality of markers are formed on a door. Figure 7 shows another example of a position where a plurality of markers are formed on a door. Figure 8 shows another example of a location where a plurality of markers are formed on a door.
도 6, 도 7 및 도 8을 참조하면, 도어(20)는 도어(20)의 외면을 형성하는 제1 투명 유리판(21)과 도어(20)의 내면을 형성하는 제2 투명 유리판(22)을 포함할 수 있다. 또한, 제1 투명 유리판(21)과 제2 투명 유리판(22) 사이에 제3 투명 유리판(23)이 배치될 수도 있다. 도어(20)가 3중 투명 유리판을 포함하는 것으로 예시되었으나, 이에 제한되지 않는다. 도어(20)는 2중 투명 유리판 또는 4중 투명 유리판을 포함할 수도 있다.Referring to FIGS. 6, 7, and 8, the
복수의 마커(M1, M2, M3)는 도어(20)의 제1 투명 유리판(21), 제2 투명 유리판(22) 또는 제3 투명 유리판(23)에 형성될 수 있다. 복수의 마커(M1, M2, M3)는 다양한 방식을 사용하여 투명 유리판(21, 22, 23)에 형성될 수 있다. 일 예로, 투명 유리판(21, 22, 23)에 내열 물질을 초자 인쇄하여 복수의 마커(M1, M2, M3)가 생성될 수 있다. 복수의 마커(M1, M2, M3)는 금속 물질일 수도 있다. 다른 예로, 투명 유리판(21, 22, 23)에 복수의 마커(M1, M2, M3)가 각인될 수도 있다.A plurality of markers M1, M2, and M3 may be formed on the first
도어(20)의 투명 유리판(21, 22, 23)은 광을 통과시키므로, 복수의 마커(M1, M2, M3)가 도어(20)의 외면을 형성하는 제1 투명 유리판(21)에 형성되더라도, 복수의 마커(M1, M2, M3)가 카메라(60)에 의해 촬영될 수 있다. 마찬가지로, 제2 투명 유리판(22) 또는 제3 투명 유리판(23)에 형성된 복수의 마커(M1, M2, M3)도 카메라(60)에 의해 촬영될 수 있다.Since the
복수의 마커(M1, M2, M3)는 미리 정해진 간격으로 이격될 수 있다. 예를 들면, 복수의 마커(M1, M2, M3)는 챔버(50)의 바닥(50a)에 가까운 도어(20)의 제1 위치에 형성되는 하부 마커(M1), 제1 지지대(51)의 제1 높이(h1)에 대응하는 도어(20)의 제2 위치에 형성되는 중간 마커(M2) 및 제2 지지대(52)의 제2 높이(h2)에 대응하는 도어(20)의 제3 위치에 형성되는 상부 마커(M3)를 포함할 수 있다. 하부 마커(M1), 중간 마커(M2) 및 상부 마커(M3)는 각각 제1 마커, 제2 마커 및 제3 마커로 호칭될 수도 있다.A plurality of markers (M1, M2, M3) may be spaced apart at predetermined intervals. For example, the plurality of markers M1, M2, and M3 are the lower marker M1 formed at the first position of the
도어(20)에 3개의 마커가 형성되는 것으로 예시되었으나, 이에 제한되지 않는다. 도어(20)에 형성되는 마커의 개수는 챔버(50)의 측벽에 마련되는 지지대(51, 52)의 개수에 따라 달라질 수 있다.Although it is illustrated that three markers are formed on the
복수의 마커(M1, M2, M3) 각각은 형상, 색상, 문자 및 기호 중 적어도 하나를 포함하는 특징 정보를 갖도록 형성될 수 있다. 형상, 색상, 문자 및 기호 중 적어도 하나를 포함하는 특징 정보에 의해 복수의 마커(M1, M2, M3)가 서로 다른 것으로 식별될 수 있다. 예를 들면, 하부 마커(M1), 중간 마커(M2) 및 상부 마커(M3)는 서로 다른 형상을 가지거나, 서로 다른 색상을 가지거나, 서로 다른 문자를 포함하거나, 서로 다른 기호를 포함할 수 있다. 복수의 마커(M1, M2, M3)는 챔버(50) 내에서 트레이(T)가 위치하는 높이를 추정하는데 사용될 수 있다.Each of the plurality of markers M1, M2, and M3 may be formed to have characteristic information including at least one of shape, color, text, and symbol. A plurality of markers M1, M2, and M3 may be identified as different from each other by characteristic information including at least one of shape, color, text, and symbol. For example, the lower marker (M1), middle marker (M2), and upper marker (M3) may have different shapes, different colors, contain different characters, or contain different symbols. there is. A plurality of markers (M1, M2, M3) may be used to estimate the height at which the tray (T) is located within the
도 9는 트레이가 챔버 측벽의 제1 지지대에 거치된 예를 도시한다. 도 10은 도 9에 도시된 챔버 상부의 카메라에 의해 촬영된 챔버 내부의 이미지를 도시한다.Figure 9 shows an example in which the tray is mounted on the first support on the side wall of the chamber. Figure 10 shows an image of the interior of the chamber taken by the camera on top of the chamber shown in Figure 9.
도 9와 도 10을 참조하면, 트레이(T)는 제1 지지대(51)에 거치될 수 있다. 제1 지지대(51)에 거치된 트레이(T)의 일 측은 도어(20)에 인접할 수 있다. 트레이(T)의 일 측은 도어(20)에 형성된 복수의 마커(M1, M2, M3) 중 제1 지지대(51)의 제1 높이(h1)에 대응하는 높이에 형성된 중간 마커(M2)에 인접할 수 있다.Referring to FIGS. 9 and 10 , the tray T may be mounted on the
카메라(60)는 미리 정해진 시야(FOV)를 가질 수 있다. 카메라(60)는 챔버(50)의 상부에 위치하고, 챔버(50)의 상면에서 챔버(50) 내부를 향하는 시야(FOV)를 가질 수 있다. 카메라(60)에 의해 획득된 챔버(50) 내부의 이미지(IM)에는 챔버(50) 내부에 위치하는 오브젝트가 포함될 수 있다. 이미지(IM)에 포함되는 오브젝트는 트레이(T)의 거치 여부와 트레이(T)의 높이에 따라 달라질 수 있다. 예를 들면, 도 10의 이미지(IM)에는 트레이(T), 도어(20)의 내면의 일부, 챔버(50)의 측벽의 일부 및 상부 마커(M3)가 포함될 수 있다. 트레이(T)의 상면에 조리물이 있는 경우, 조리물도 이미지(IM)에 포함될 수 있다.
트레이(T)가 챔버(50) 내에 거치되고 도어(20)가 닫히면, 도어(20)에 형성된 복수의 마커(M1, M2, M3) 중 하나는 트레이(T)의 일 측에 맞닿거나 매우 가까이에 위치하게 된다. 카메라(60)는 챔버(50)의 상부에서 챔버(50) 내부를 촬영하므로, 트레이(T)의 일 측에 맞닿거나 트레이(T)에 인접한 마커의 적어도 일부는 카메라(60)의 시야에서 가려진 것처럼 보일 수 있다. 또한, 트레이(T)의 아래에 위치하는 마커도 카메라(60)에 의해 촬영되지 않을 수 있다. 즉, 챔버(50) 내에서 트레이(T)가 위치하는 높이에 따라 도어(20)에 형성된 복수의 마커(M1, M2, M3) 중 적어도 하나는 이미지(IM)에서 검출되지 않을 수 있다.When the tray (T) is placed in the chamber (50) and the door (20) is closed, one of the plurality of markers (M1, M2, M3) formed on the door (20) is in contact with or very close to one side of the tray (T). It is located in Since the
조리 기기(1)의 제어부(200)는 이미지(IM)에서 트레이(T)에 의해 적어도 일부가 가려진 마커의 위치를 식별할 수 있다. 제어부(200)는 적어도 일부가 가려진 마커의 위치에 기초하여 챔버(50) 내에서 트레이(T)의 높이를 추정할 수 있다. 제어부(200)는 추정된 트레이(T)의 높이에 기초하여 조리물을 조리하기 위한 조리 파라미터를 결정할 수 있다.The
도 9와 도 10을 참조하면, 이미지(IM)에서 중간 마커(M2)의 적어도 일부가 트레이(T)에 의해 가려질 수 있다. 중간 마커(M2)의 아래에 있는 하부 마커(M1)는 트레이(T)에 의해 완전히 가려질 수 있고, 이미지(IM)에서 검출되지 않을 수 있다. 제어부(200)는 적어도 일부가 가려진 중간 마커(M2)의 위치를 식별할 수 있다. 제어부(200)는 트레이(T)가 챔버(50) 내에서 중간 마커(M2)의 위치에 대응하는 높이에 거치된 것으로 추정할 수 있다.Referring to FIGS. 9 and 10 , at least a portion of the intermediate marker M2 in the image IM may be obscured by the tray T. The lower marker M1 below the middle marker M2 may be completely obscured by the tray T and may not be detected in the image IM. The
트레이(T)에 의해 가려지는 마커의 위치를 식별하여 트레이(T)의 높이를 추정하는 방법은 다양하게 제공될 수 있다.Various methods can be provided to estimate the height of the tray (T) by identifying the position of the marker obscured by the tray (T).
트레이(T)의 높이를 추정하는 방법의 일 예로서, 이미지(IM)에서 검출되는 마커의 특징 정보를 이용하는 방법이 제공될 수 있다. 마커의 특징 정보를 이용하는 방법은 이미지(IM) 내에서 적어도 하나의 마커가 검출되는 경우에 사용될 수 있다.As an example of a method for estimating the height of the tray T, a method using characteristic information of a marker detected in the image IM may be provided. A method using characteristic information of a marker can be used when at least one marker is detected within the image (IM).
제어부(200)는 이미지(IM)에서 도어(20)에 인접한 트레이(T)의 일 측을 검출하고, 이미지(IM)에서 트레이(T)의 일 측에 가장 가까이 위치하는 다른 마커를 검출할 수 있다. 제어부(200)는 다른 마커의 특징 정보에 기초하여 트레이(T)에 의해 가려진 마커의 위치를 식별할 수 있다. 이를 위해, 제어부(200)는 이미지(IM)에서 도어(20)에 인접한 트레이(T)의 일 측을 포함하는 제1 세그먼트 이미지(S1)를 추출할 수 있다. 제어부(200)는 이미지(IM)에서 트레이(T)의 일 측에 가장 가까이 위치하는 다른 마커(즉, 상부 마커(M3))를 포함하는 제2 세그먼트 이미지(S2)를 추출할 수 있다. 제어부(200)는 제2 세그먼트 이미지(S2)로부터 다른 마커(즉, 상부 마커(M3))의 특징 정보를 획득할 수 있다. 제어부(200)는 다른 마커의 특징 정보로부터 다른 마커가 상부 마커(M3)인 것을 식별할 수 있다.The
제어부(200)는 도 10의 이미지(IM)에 상부 마커(M3)는 존재하지만 중간 마커(M2)가 존재하지 않는 것을 식별할 수 있다. 제어부(200)는 트레이(T)에 의해 가려진 마커가 상부 마커(M3) 아래에 위치한 중간 마커(M2)인 것을 식별할 수 있다. 따라서 제어부(200)는 트레이(T)가 챔버(50) 내에서 중간 마커(M2)의 위치에 대응하는 높이에 거치된 것으로 추정할 수 있다.The
메모리(220)에는 지지대(51, 52)의 높이 정보 및 지지대(51, 52)의 높이 정보에 대응하는 마커(M1, M2, M3)의 위치 정보가 저장되어 있다. 트레이(T)에 의해 가려진 중간 마커(M2)의 위치는 제1 지지대(51)의 제1 높이(h1)에 대응하므로, 제어부(200)는 챔버(50) 내 트레이(T)의 높이를 제1 지지대(51)의 제1 높이(h1)로 추정할 수 있다.The
이미지(IM)에서 제1 세그먼트 이미지(S1)와 제2 세그먼트 이미지(S2)를 추출하기 위해, 조리 기기(1)의 제어부(200)는 이미지(IM) 내 도어 영역을 복수의 세그먼트 이미지로 분할할 수 있다. 제어부(200)는 복수의 세그먼트 이미지를 순차적으로 분석하여 트레이(T)의 일 측을 포함하는 제1 세그먼트 이미지(S1) 및 적어도 일부가 가려진 마커와 다른 마커를 포함하는 제2 세그먼트 이미지(S2)를 추출할 수 있다.In order to extract the first segment image S1 and the second segment image S2 from the image IM, the
복수의 세그먼트 이미지를 분석하는 순서는 다양한 방법으로 정해질 수 있다. 일 예로, 제어부(200)는 복수의 세그먼트 이미지 각각을 복수의 지지대(51, 52)에 의해 구별되는 챔버(50) 내의 복수의 층(F1, F2, F3) 중 하나에 매칭시킬 수 있다. 제어부(200)는 복수의 층(F1, F2, F3)에 매칭된 복수의 세그먼트 이미지를 최상층부터 최하층까지 순서대로 분석하여 제1 세그먼트 이미지(S1) 및 제2 세그먼트 이미지(S2)를 추출할 수 있다.The order of analyzing a plurality of segment images can be determined in various ways. As an example, the
다른 예로, 복수의 세그먼트 이미지를 분석하는 순서를 정하기 위해, 메모리(220)에 저장된 트레이(T)의 높이에 관련된 히스토리 정보가 사용될 수 있다. 제어부(200)는 복수의 세그먼트 이미지 중에서, 히스토리 정보에 마지막으로 기록된 트레이(T)의 높이 또는 가장 많이 기록된 트레이(T)의 높이에 대응하는 세그먼트 이미지를 검출할 수 있다. 제어부(200)는 검출된 세그먼트 이미지를 가장 먼저 분석할 수 있다. 히스토리 정보를 이용하여 특정 층에 해당하는 세그먼트 이미지부터 분석함으로써 트레이 높이를 추정하는데 소요되는 시간이 짧아질 수 있다. 즉, 트레이 높이의 추정 속도가 빨라질 수 있다.As another example, history information related to the height of the tray T stored in the
트레이(T)의 높이를 추정하는 방법의 다른 예로서, 카메라(60)에 의해 획득된 이미지(IM) 내 오브젝트의 깊이 정보를 이용하는 방법이 제공될 수 있다. 오브젝트의 깊이 정보를 이용하는 방법은 이미지(IM)에서 마커가 검출되지 않는 경우에 유용할 수 있다. 이미지(IM)에서 마커가 검출되지 않는 경우에 대해서는 도 11과 도 12에서 설명된다.As another example of a method for estimating the height of the tray T, a method using depth information of an object in the image IM acquired by the
이미지(IM)에서 트레이(T)가 차지하는 영역의 크기는 챔버(50) 내에서 트레이(T)가 위치하는 높이에 따라 달라질 수 있다. 챔버(50) 내 트레이(T)의 높이가 높아질수록 이미지(IM)에서 트레이(T)가 차지하는 영역이 커진다. 반대로, 챔버(50) 내 트레이(T)의 높이가 낮아질수록 이미지(IM)에서 트레이(T)가 차지하는 영역이 작아진다. 즉, 트레이(T)의 높이에 따라 이미지(TM)와 트레이(T) 영역의 크기 비율이 달라진다. 따라서 조리 기기(1)의 제어부(200)는 이미지(IM)에서 트레이(T)가 차지하는 영역의 크기에 기초하여 트레이(T)의 깊이 정보를 획득할 수 있다.The size of the area occupied by the tray T in the image IM may vary depending on the height at which the tray T is located within the
트레이(T)의 깊이 정보를 획득하기 위해, 제어부(200)는 이미지(IM)에서 트레이(T)의 일 측을 포함하는 제1 세그먼트 이미지(S1)를 추출할 수 있다. 제어부(200)는 이미지(IM) 내 트레이(T)의 제1 깊이(d1)를 포함하는 제1 세그먼트 이미지(S1)의 깊이 정보를 획득할 수 있다. 제어부(200)는 제1 세그먼트 이미지(S1)에 포함된 트레이(T)의 일 측의 길이를 검출할 수 있다. 제어부(200)는 이미지(IM)에서 트레이(T)가 차지하는 영역의 크기를 산출할 수 있고, 트레이(T)의 일 측의 길이에 대응하는 트레이(T)의 제1 깊이(d1)를 추정할 수 있다. In order to obtain depth information of the tray T, the
메모리(220)에는 지지대(51, 52)의 높이 정보 및 지지대(51, 52)의 높이 정보에 대응하는 마커(M1, M2, M3)의 위치 정보가 미리 저장될 수 있다. 제어부(200)는 지지대(51, 52)의 높이 정보와 마커(M1, M2, M3)의 위치 정보로부터 트레이(T)의 제1 깊이(d1)에 매칭되는 마커(즉, 중간 마커(M2))와 지지대(즉, 제1 지지대(51))를 식별할 수 있다. 트레이(T)에 의해 가려진 중간 마커(M2)의 위치는 제1 지지대(51)의 제1 높이(h1)에 대응하므로, 제어부(200)는 챔버(50) 내 트레이(T)의 높이를 제1 지지대(51)의 제1 높이(h1)로 추정할 수 있다.In the
한편, 조리 기기(1)는 추정된 트레이(T)의 높이에 관한 정보를 사용자에게 제공할 수 있다. 조리 기기(1)의 제어부(200)는 트레이(T)의 높이 정보를 표시하도록 디스플레이(41)를 제어할 수 있다. 제어부(200)는 트레이(T)의 높이에 기초하여 조리 파라미터를 결정할 수 있다. 또한, 조리 기기(1)의 제어부(200)는 이미지(IM)로부터 트레이(T) 상에 배치된 조리물의 성질을 추정할 수 있다. 조리물의 성질은 조리물의 종류, 수량 및/또는 크기를 포함할 수 있다. 제어부(200)는 조리물의 성질 정보를 표시하도록 디스플레이(41)를 제어할 수 있다. 제어부(200)는 조리물의 성질과 트레이(T)의 높이를 모두 고려하여 조리 파라미터를 결정할 수도 있다.Meanwhile, the
도 11은 트레이가 챔버 측벽의 제2 지지대에 거치된 예를 도시한다. 도 12는 도 11에 도시된 챔버 상부의 카메라에 의해 촬영된 챔버 내부의 이미지를 도시한다.Figure 11 shows an example in which the tray is mounted on the second support on the side wall of the chamber. Figure 12 shows an image of the interior of the chamber taken by the camera on top of the chamber shown in Figure 11.
도 11과 도 12를 참조하면, 트레이(T)는 제2 지지대(52)에 거치될 수 있다. 제2 지지대(52)에 거치된 트레이(T)의 일 측은 복수의 마커(M1, M2, M3) 중 제2 지지대(52)의 제2 높이(h2)에 대응하는 높이에 형성된 상부 마커(M3)에 인접할 수 있다.Referring to FIGS. 11 and 12 , the tray T may be mounted on the
트레이(T)가 제2 지지대(52)에 거치된 상태에서 카메라(60)에 의해 획득된 이미지(IM)에서는 마커가 식별되지 않을 수 있다. 제2 지지대(52)에 거치된 트레이(T)의 일 측은 상부 마커(M3)에 맞닿거나 상부 마커(M3)에 매우 가까이 위치하게 된다. 따라서 카메라(60)의 시야에서 상부 마커(M3)는 트레이(T)에 의해 가려진 것처럼 보일 수 있다. 또한, 트레이(T)의 아래에 위치하는 중간 마커(M2)와 하부 마커(M1)도 카메라(60)에 의해 촬영되지 않을 수 있다.The marker may not be identified in the image IM acquired by the
카메라(60)에 의해 획득된 이미지(IM) 내에서 마커(M1, M2, M3)가 검출되지 않으면, 조리 기기(1)의 제어부(200)는 트레이(T)가 챔버(50) 내 최상층에 위치하는 것으로 추정할 수 있다. 즉, 트레이(T)는 제2 지지대(52)에 거치된 것으로 추정될 수 있고, 트레이(T)의 높이는 제2 지지대(52)의 높이로 추정될 수 있다. 또한, 제어부(200)는 이미지(IM)에서 트레이(T)의 깊이 정보를 획득할 수 있고, 트레이(T)의 깊이 정보를 이용하여 트레이(T)가 챔버(50) 내 최상층에 위치하는 것으로 추정할 수도 있다.If the markers M1, M2, and M3 are not detected in the image IM acquired by the
제어부(200)는 이미지(IM)에서 트레이(T)의 일 측을 포함하는 제3 세그먼트 이미지(S3)를 추출할 수 있다. 제3 세그먼트 이미지(S3)는 도 10에서 설명된 제1 세그먼트 이미지(S1)와 상이하다. 제어부(200)는 이미지(IM) 내 트레이(T)의 제2 깊이(d2)를 포함하는 제3 세그먼트 이미지(S3)의 깊이 정보를 획득할 수 있다. 제어부(200)는 제3 세그먼트 이미지(S3)에 포함된 트레이(T)의 일 측의 길이를 검출할 수 있고, 트레이(T)의 일 측의 길이에 대응하는 트레이(T)의 제2 깊이(d2)를 추정할 수 있다. 트레이(T)의 제2 깊이(d2)는 도 10에서 설명된 트레이(T)의 제1 깊이(d1)보다 작다.The
제어부(200)는 메모리(220)에 저장된 지지대(51, 52)의 높이 정보와 마커(M1, M2, M3)의 위치 정보로부터 트레이(T)의 제2 깊이(d2)에 매칭되는 마커(즉, 상부 마커(M3))를 식별할 수 있다. 트레이(T)에 의해 가려진 상부 마커(M3)의 위치는 제2 지지대(52)의 제2 높이(h2)에 대응하므로, 제어부(200)는 챔버(50) 내 트레이(T)의 높이를 제2 지지대(52)의 제2 높이(h2)로 추정할 수 있다.The
도 13은 챔버의 측벽에 형성되는 복수의 지지대의 일 예를 도시한다. 도 14는 도 13에 도시된 복수의 지지대 중 하나에 트레이가 거치된 상태에서 챔버 상부의 카메라에 의해 촬영된 챔버 내부의 이미지를 도시한다.Figure 13 shows an example of a plurality of supports formed on the side wall of the chamber. FIG. 14 shows an image inside the chamber taken by a camera located at the top of the chamber while the tray is mounted on one of the plurality of supports shown in FIG. 13 .
도 13과 도 14를 참조하면, 챔버(50)의 우측 내벽(50R)에 제1 지지대(51), 제2 지지대(52) 및 제3 지지대(53)가 마련될 수 있다. 지지대는 챔버(50)의 좌측 내벽에도 동일하게 마련될 수 있다. 제1 지지대(51)는 챔버(50)의 바닥(50a)으로부터 제1 높이(h1)에 위치할 수 있다. 제2 지지대(52)는 제1 높이(h1)보다 높은 제2 높이(h2)에 위치할 수 있다. 제3 지지대(53)는 제2 높이(h2)보다 높은 제3 높이(h3)에 위치할 수 있다.13 and 14, a
복수의 지지대(51, 52, 53) 각각은 돌출부와 홈을 포함할 수 있다. 제1 지지대(51)는 챔버(50)의 양 측벽으로부터 돌출되고 서로 이격되는 제1 돌출부(P1)와 제2 돌출부(P2) 및 제1 돌출부(P1)와 제2 돌출부(P2) 사이에 위치하는 제1 홈(g1)을 포함할 수 있다. 제2 지지대(52)는 챔버(50)의 양 측벽으로부터 돌출되고 서로 이격되는 제3 돌출부(P3)와 제4 돌출부(P4) 및 제3 돌출부(P3)와 제4 돌출부(P4) 사이에 위치하는 제2 홈(g2)을 포함할 수 있다. 제3 지지대(53)는 챔버(50)의 양 측벽으로부터 돌출되고 서로 이격되는 제5 돌출부(P5)와 제6 돌출부(P6) 및 제5 돌출부(P5)와 제6 돌출부(P6) 사이에 위치하는 제3 홈(g3)을 포함할 수 있다. 또한, 각 돌출부의 수평 길이는 서로 상이할 수 있다. 챔버(50)의 측벽으로부터 각 돌출부의 돌출 높이도 상이할 수 있다.Each of the plurality of
복수의 지지대(51, 52, 53) 각각의 홈(g1, g2, g3)의 위치는 상이하다. 복수의 지지대(51, 52, 53) 각각의 높이가 상이하므로, 제1 홈(g1), 제2 홈(g2) 및 제3 홈(g3)은 서로 다른 수평선 상에 위치한다. 또한, 제1 홈(g1), 제2 홈(g2) 및 제3 홈(g3)은 서로 다른 수직선 상에 위치할 수 있다. 챔버(50)의 우측 내벽(50R)을 2차원 좌표 평면에 투영하면, 각 홈(g1, g2, g3)의 좌표가 상이하게 나타날 수 있다. 제1 홈(g1)은 수평 좌표 X1과 X2 사이에 위치하고, 제2 홈(g2)은 수평 좌표 X3과 X4 사이에 위치하며, 제3 홈(g3)은 수평 좌표 X5와 X6에 위치할 수 있다.The positions of the grooves g1, g2, and g3 of each of the plurality of
메모리(220)에는 각 홈의 좌표 정보가 미리 저장될 수 있다. 제어부(200)는 메모리(220)에 저장된 홈의 좌표 정보를 이용하여 카메라(60)에 의해 촬영된 챔버(50) 내부의 이미지로부터 검출되는 지지대의 홈의 위치를 식별할 수 있다.Coordinate information for each home may be stored in advance in the
조리 기기(1)의 제어부(200)는 챔버(50) 내부의 이미지에서 제1 홈(g1), 제2 홈(g2) 및 제3 홈(g3) 중 적어도 하나의 검출 여부에 기초하여 트레이(T)의 높이를 추정할 수 있다. 예를 들면, 트레이(T)가 제1 지지대(51)에 거치되는 경우, 챔버(50)의 내부 공간은 카메라(60)에 의해 촬영 가능한 제1 영역(Z1)과 카메라(60)에 의해 촬영 불가능한 제2 영역(Z2)으로 구분될 수 있다. 도 14에 도시된 바와 같이, 카메라(60)에 의해 획득된 이미지(IM)에서 제2 지지대(52)의 제2 홈(g2)과 제3 지지대(53)의 제3 홈(g3)은 식별될 수 있으나, 제1 지지대(51)와 제1 홈(g1)은 식별될 수 없다. 제어부(200)는 메모리(220)에 저장된 홈의 좌표 정보를 이용하여 제2 홈(g2)과 제3 홈(g3)을 구별할 수 있다. 제어부(200)는 제2 홈(g2)과 제3 홈(g3)이 식별됨에 따라 트레이(T)가 제1 지지대(51)에 거치된 것으로 판단할 수 있고, 트레이(T)의 높이를 제1 지지대(51)의 제1 높이(h1)로 추정할 수 있다.The
트레이(T)의 높이를 추정하기 위해, 제어부(200)는 이미지(IM)에서 챔버(50)의 측벽에 인접한 트레이(T)의 일 측을 포함하는 제4 세그먼트 이미지(S4)를 추출할 수 있다. 또한, 제어부(200)는 제2 지지대(52)를 포함하는 제5 세그먼트 이미지(S5)와 제3 지지대(53)를 포함하는 제6 세그먼트 이미지(S6)를 추출할 수 있다. 제4 세그먼트 이미지(S4), 제5 세그먼트 이미지(S5) 및 제6 세그먼트 이미지(S6)는 연속적으로 추출될 수 있다. 제어부(200)는 제5 세그먼트 이미지(S5)로부터 제2 홈(g2)을 식별할 수 있고, 제6 세그먼트 이미지(S6)로부터 제3 홈(g3)을 식별할 수 있다. 제어부(200)는 이미지(IM)에서 제1 홈(g1)이 존재하지 않는 것을 식별할 수 있다. 제어부(200)는 트레이(T)에 의해 제1 홈(g1)을 포함하는 제1 지지대(51)가 가려진 것을 식별할 수 있다. 따라서 제어부(200)는 트레이(T)의 높이를 제1 지지대(51)의 제1 높이(h1)로 추정할 수 있다.In order to estimate the height of the tray (T), the
도 13과 도 14에서 설명된 복수의 지지대(51, 52, 53) 각각에 형성되는 홈(g1, g2, g3)은 전술된 도어(20)에 형성되는 복수의 마커(M1, M2, M3)와 동일한 역할을 수행할 수 있다. 즉, 복수의 지지대(51, 52, 53) 각각에 형성되는 홈(g1, g2, g3)은 도어(20)에 형성되는 복수의 마커(M1, M2, M3)를 대체할 수 있다.The grooves g1, g2, and g3 formed in each of the plurality of
또한, 트레이(T)의 높이를 보다 정확히 추정하기 위해, 조리 기기(1)는 도어(20)에 형성된 마커(M1, M2, M3)뿐만 아니라 지지대(51, 52, 53)에 형성되는 홈(g1, g2, g3)을 함께 포함할 수도 있다.In addition, in order to more accurately estimate the height of the tray T, the
도 15는 일 실시예에 따른 조리 기기의 제어 방법을 설명하는 순서도이다.Figure 15 is a flowchart explaining a method of controlling a cooking appliance according to an embodiment.
도 15를 참조하면, 조리 기기(1)의 제어부(200)는 카메라(60)를 제어하여 챔버(50) 내부의 이미지를 획득할 수 있다(1501). 제어부(200)는 조리 기기(1)의 전원이 켜진 후 도어(20)가 닫히면 챔버(50) 내부의 이미지를 획득하도록 카메라(60)를 제어할 수 있다.Referring to FIG. 15, the
제어부(200)는 카메라(60)에 의해 획득된 이미지에서 트레이(T)에 의해 적어도 일부가 가려진 마커의 위치를 식별할 수 있다(1502). 제어부(200)는 적어도 일부가 가려진 마커의 위치에 기초하여 챔버(50) 내에서 트레이(T)의 높이를 추정할 수 있다(1503).The
제어부(200)는 이미지로부터 트레이(T)의 상면에 위치한 조리물의 성질 추정을 수행할 수 있다. 조리물의 성질은 조리물의 종류, 수량 및/또는 크기를 포함할 수 있다. 조리물의 성질 추정을 수행할지 여부는 사용자 입력에 의해 결정될 수 있다. 조리물의 성질 추정이 수행되는 경우, 제어부(200)는 조리물의 성질과 트레이(T)의 높이를 모두 고려하여 조리 파라미터를 결정할 수 있다(1504, 1505).The
조리물의 성질 추정이 생략되는 경우, 제어부(200)는 추정된 트레이(T)의 높이에 기초하여 조리 파라미터를 결정할 수 있다(1504, 1506). 제어부(200)는 결정된 조리 파라미터로 히터(80)와 팬(90)을 제어하여 조리를 수행할 수 있다(1507).When estimation of the properties of the food is omitted, the
도 16, 도 17 및 도 18은 도 15에서 설명된 조리 기기의 제어 방법을 더 구체화하는 다양한 실시예를 설명하는 순서도이다.FIGS. 16, 17, and 18 are flowcharts illustrating various embodiments that further specify the method of controlling the cooking appliance described in FIG. 15.
도 16을 참조하면, 카메라(60)에 의해 획득된 이미지 내 오브젝트의 깊이 정보를 이용하여 트레이(T)의 높이를 추정하는 방법이 설명된다.Referring to FIG. 16, a method of estimating the height of the tray T using depth information of an object in an image acquired by the
제어부(200)는 카메라(60)에 의해 획득된 이미지에서 트레이(T)의 일 측을 포함하는 세그먼트 이미지를 추출할 수 있다(1601). 제어부(200)는 이미지 내 트레이(T)의 깊이를 포함하는 세그먼트 이미지의 깊이 정보를 획득할 수 있다(1602).The
제어부(200)는 세그먼트 이미지의 깊이 정보에 기초하여 트레이(T)에 의해 적어도 일부가 가려지는 마커의 위치를 식별할 수 있다(1603). 트레이(T)에 의해 적어도 일부가 가려진 마커의 위치는 트레이(T)가 거치된 지지대의 높이에 대응한다. 제어부(200)는 트레이(T)에 의해 적어도 일부가 가려지는 마커의 위치를 식별함으로써 트레이(T)의 높이를 추정할 수 있다(1503). 메모리(220)에는 지지대(51, 52)의 높이 정보 및 지지대(51, 52)의 높이 정보에 대응하는 마커(M1, M2, M3)의 위치 정보가 미리 저장될 수 있다. 제어부(200)는 지지대(51, 52)의 높이 정보와 마커(M1, M2, M3)의 위치 정보로부터 트레이(T)의 깊이에 매칭되는 마커와 지지대를 식별할 수 있다. 트레이(T)의 깊이에 매칭되는 마커는 트레이(T)에 의해 적어도 일부가 가려지는 마커에 해당할 수 있다.The
전술된 바와 같이, 세그먼트 이미지의 깊이 정보를 이용하여 트레이(T)의 높이를 추정하는 방법은 이미지에서 마커가 검출되지 않는 경우에 유용할 수 있다.As described above, the method of estimating the height of the tray T using the depth information of the segment image may be useful when a marker is not detected in the image.
도 17을 참조하면, 이미지(IM)에서 검출되는 마커의 특징 정보를 이용하여 트레이(T)의 높이를 추정하는 방법이 설명된다.Referring to FIG. 17, a method of estimating the height of the tray T using characteristic information of a marker detected in the image IM is explained.
제어부(200)는 카메라(60)에 의해 획득된 챔버(50) 내부의 이미지(IM)에서 도어(20)에 인접한 트레이(T)의 일 측을 포함하는 제1 세그먼트 이미지를 추출할 수 있다(1701). 제어부(200)는 이미지(IM)에서 트레이(T)의 일 측에 가장 가까이 위치하는 다른 마커를 포함하는 제2 세그먼트 이미지를 추출할 수 있다(1702). 제어부(200)는 제2 세그먼트 이미지로부터 다른 마커의 특징 정보를 획득할 수 있다(1703). 다른 마커의 특징 정보는 형상, 색상, 문자 및 기호 중 적어도 하나를 포함할 수 있다. 형상, 색상, 문자 및 기호 중 적어도 하나를 포함하는 특징 정보에 의해 복수의 마커(M1, M2, M3)가 서로 다른 것으로 식별될 수 있다. 제어부(200)는 다른 마커의 특징 정보로부터 트레이(T)에 의해 적어도 일부가 가려진 마커의 위치를 식별할 수 있다(1704).The
트레이(T)에 의해 적어도 일부가 가려진 마커는 다른 마커의 바로 아래에 위치하는 것이므로, 트레이(T)의 일 측과 가장 가까운 다른 마커를 식별함으로써 적어도 일부가 가려진 마커의 위치가 추정될 수 있다. 메모리(220)에는 복수의 지지대(51, 52)의 높이 정보에 상관된 복수의 마커(M1, M2, M3) 각각의 위치 정보가 저장되어 있다. 제어부(200)는 지지대의 높이 정보와 마커의 위치 정보로부터, 트레이(T)에 의해 적어도 일부가 가려지는 마커의 위치에 대응하는 지지대의 높이를 획득할 수 있다. 제어부(200)는 트레이(T)의 높이를 적어도 일부가 가려진 마커의 위치에 대응하는 지지대의 높이로 추정할 수 있다(1503).Since the marker that is at least partially obscured by the tray (T) is located immediately below another marker, the location of the marker that is at least partially obscured can be estimated by identifying the other marker that is closest to one side of the tray (T). The
도 18을 참조하면, 세그먼트 이미지를 처리하는 방법의 일 예가 설명된다.Referring to FIG. 18, an example of a method for processing segmented images is described.
조리 기기(1)의 제어부(200)는 카메라(60)에 의해 획득된 이미지 내 도어 영역을 복수의 세그먼트 이미지로 분할할 수 있다(1801). 제어부(200)는 복수의 세그먼트 이미지 각각을 복수의 지지대(51, 52)에 의해 구별되는 챔버(50) 내의 복수의 층(F1, F2, F3) 중 하나에 매칭시킬 수 있다(1802).The
제어부(200)는 복수의 층(F1, F2, F3) 중 특정 층에 매칭된 세그먼트 이미지를 먼저 분석할 수 있다(1803). 예를 들면, 제어부(200)는 복수의 층(F1, F2, F3)에 매칭된 복수의 세그먼트 이미지를 최상층부터 최하층까지 순서대로 분석할 수 있다. 다른 예를 들면, 제어부(200)는 메모리(220)에 저장된 트레이(T)의 높이에 관련된 히스토리 정보를 이용하여 먼저 분석할 세그먼트 이미지를 결정할 수 있다. 제어부(200)는 복수의 세그먼트 이미지 중에서, 히스토리 정보에 마지막으로 기록된 트레이(T)의 높이 또는 가장 많이 기록된 트레이(T)의 높이에 대응하는 세그먼트 이미지를 먼저 분석할 수 있다. 히스토리 정보를 이용하여 특정 층에 해당하는 세그먼트 이미지부터 분석함으로써 트레이 높이를 추정하는데 소요되는 시간이 짧아질 수 있다. 즉, 트레이 높이의 추정 속도가 빨라질 수 있다.The
제어부(200)는 특정 층의 세그먼트 이미지에서 트레이(T)의 일 측이 검출되지 않으면, 다음 층에 매칭된 세그먼트 이미지를 분석할 수 있다(1804, 1805). 다음 층은 특정 층의 아래 층을 나타낼 수 있다. 반대로, 제어부(200)는 특정 층에 매칭된 세그먼트 이미지에서 트레이(T)의 일 측이 검출되면, 트레이(T)의 일 측을 포함하는 세그먼트 이미지를 제1 세그먼트 이미지로 추출할 수 있다. 또한, 제어부(200)는 트레이(T)의 일 측에 가장 가까이 위치하는 다른 마커를 포함하는 세그먼트 이미지를 제2 세그먼트 이미지로 추출할 수 있다(1804, 1806). If one side of the tray T is not detected in the segment image of a specific layer, the
제어부(200)는 제2 세그먼트 이미지로부터 다른 마커의 특징 정보를 획득할 수 있다(1807). 제어부(200)는 다른 마커의 특징 정보로부터 트레이(T)에 의해 적어도 일부가 가려진 마커의 위치를 식별할 수 있다(1808). 제어부(200)는 트레이(T)의 높이를 적어도 일부가 가려진 마커의 위치에 대응하는 지지대의 높이로 추정할 수 있다(1503).The
도 19는 다른 실시예에 따른 조리 기기의 제어 방법을 설명하는 순서도이다.19 is a flowchart explaining a method of controlling a cooking appliance according to another embodiment.
도 19는 도 13 및 도 14와 관련된다. 도 19를 참조하면, 조리 기기(1)의 제어부(200)는 카메라(60)를 제어하여 챔버(50) 내부의 이미지를 획득할 수 있다(1901). 제어부(200)는 챔버(50) 내부의 이미지에서 제1 지지대(51)의 제1 홈(g1), 제2 지지대(52)의 제2 홈(g2) 및 제3 지지대(53)의 제3 홈(g3) 중 적어도 하나의 검출 여부에 더 기초하여 트레이(T)의 높이를 추정할 수 있다.Figure 19 is related to Figures 13 and 14. Referring to FIG. 19, the
제어부(200)는 챔버(50) 내부의 이미지에서 지지대(51, 52, 53)의 홈(g1, g2, g3)이 검출되지 않으면, 트레이(T)가 챔버(50) 내 최상층에 위치하는 것으로 추정할 수 있다(1902, 1903). 즉, 이미지에서 지지대(51, 52, 53)의 홈(g1, g2, g3)이 검출되지 않으면, 트레이(T)는 제3 지지대(53)에 거치된 것으로 추정될 수 있고, 트레이(T)의 높이는 제3 지지대(53)의 높이로 추정될 수 있다.If the grooves g1, g2, and g3 of the
챔버(50) 내부의 이미지에서 제1 지지대(51)의 제1 홈(g1), 제2 지지대(52)의 제2 홈(g2) 및 제3 지지대(53)의 제3 홈(g3) 중 적어도 하나가 검출되면, 제어부(200)는 검출된 지지대의 홈의 위치에 기초하여 트레이(T)의 높이를 추정할 수 있다(1904). 제어부(200)는 추정된 트레이(T)의 높이에 기초하여 조리 파라미터를 결정할 수 있다(1905). 제어부(200)는 결정된 조리 파라미터로 히터(80)와 팬(90)을 제어하여 조리를 수행할 수 있다(1906). 또한, 조리물의 성질 추정이 수행되는 경우, 제어부(200)는 조리물의 성질과 트레이(T)의 높이를 모두 고려하여 조리 파라미터를 결정할 수 있다.In the image inside the
일 실시예에 따른 조리 기기(1)는, 챔버(50); 상기 챔버를 개방하거나 폐쇄하는 도어(20); 트레이를 지지하기 위해 상기 챔버의 양 측벽에서 서로 다른 높이에 마련되는 복수의 지지대(51, 52); 상기 도어에 형성되는 복수의 마커; 상기 챔버(50) 내부의 이미지를 획득하는 카메라(60); 및 상기 이미지에서 상기 트레이에 의해 적어도 일부가 가려진 마커의 위치를 식별하고, 상기 적어도 일부가 가려진 마커의 위치에 기초하여 상기 챔버 내에서 상기 트레이의 높이를 추정하고, 상기 트레이의 높이에 기초하여 조리물을 조리하기 위한 조리 파라미터를 결정하는 제어부;를 포함한다.A
상기 제어부는 상기 이미지에서 상기 도어에 인접한 상기 트레이의 일 측을 포함하는 세그먼트 이미지를 추출하고, 상기 세그먼트 이미지의 깊이 정보에 기초하여 상기 적어도 일부가 가려진 마커의 위치를 식별할 수 있다.The control unit may extract a segment image including one side of the tray adjacent to the door from the image, and identify the location of the marker that is at least partially obscured based on depth information of the segment image.
상기 제어부는 상기 이미지에서 상기 도어에 인접한 상기 트레이의 일 측을 검출하고, 상기 이미지에서 상기 트레이의 일 측에 가장 가까이 위치하는 다른 마커를 검출하고, 상기 다른 마커의 특징 정보에 기초하여 상기 적어도 일부가 가려진 마커의 위치를 식별할 수 있다.The control unit detects one side of the tray adjacent to the door in the image, detects another marker located closest to the one side of the tray in the image, and detects at least some of the markers based on characteristic information of the other marker. The location of the hidden marker can be identified.
상기 제어부는 상기 이미지 내 도어 영역을 복수의 세그먼트 이미지로 분할하고, 상기 복수의 세그먼트 이미지를 순차적으로 분석하여 상기 트레이의 일 측을 포함하는 상기 제1 세그먼트 이미지 및 상기 다른 마커를 포함하는 제2 세그먼트 이미지를 추출하고, 상기 제2 세그먼트 이미지로부터 상기 다른 마커의 특징 정보를 획득할 수 있다.The control unit divides the door area in the image into a plurality of segment images and sequentially analyzes the plurality of segment images to determine the first segment image including one side of the tray and the second segment including the other marker. An image may be extracted, and feature information of the other marker may be obtained from the second segment image.
상기 제어부는 상기 복수의 세그먼트 이미지 각각을 상기 복수의 지지대에 의해 구별되는 상기 챔버 내의 복수의 층에 매칭시키고, 상기 복수의 층에 매칭된 상기 복수의 세그먼트 이미지를 최상층부터 최하층까지 순서대로 분석하여 상기 제1 세그먼트 이미지 및 상기 제2 세그먼트 이미지를 추출할 수 있다.The control unit matches each of the plurality of segment images to a plurality of layers in the chamber distinguished by the plurality of supports, and analyzes the plurality of segment images matched to the plurality of layers in order from the highest layer to the lowest layer. The first segment image and the second segment image can be extracted.
상기 조리 기기는 상기 트레이의 높이에 관련된 히스토리 정보를 저장하는 메모리;를 더 포함하고, 상기 제어부는 상기 복수의 세그먼트 이미지 중에서, 상기 히스토리 정보에 마지막으로 기록된 상기 트레이의 높이 또는 가장 많이 기록된 상기 트레이의 높이에 대응하는 세그먼트 이미지를 검출하고, 상기 검출된 세그먼트 이미지를 가장 먼저 분석할 수 있다.The cooking appliance further includes a memory that stores history information related to the height of the tray, wherein the control unit selects the height of the tray last recorded in the history information or the most recorded height of the tray among the plurality of segment images. A segment image corresponding to the height of the tray can be detected, and the detected segment image can be analyzed first.
상기 조리 기기는 디스플레이;를 더 포함하고, 상기 제어부는 상기 트레이의 높이 정보를 표시하도록 상기 디스플레이를 제어할 수 있다.The cooking appliance further includes a display, and the controller may control the display to display height information of the tray.
상기 제어부는 상기 이미지로부터 상기 트레이 상에 배치된 상기 조리물의 성질을 추정하고, 상기 조리물의 성질과 상기 트레이의 높이에 기초하여 상기 조리 파라미터를 결정할 수 있다.The control unit may estimate the properties of the food placed on the tray from the image and determine the cooking parameters based on the properties of the food and the height of the tray.
상기 도어는 상기 도어의 외면을 형성하는 제1 투명 유리판과 상기 도어의 내면을 형성하는 제2 투명 유리판;을 포함하고, 상기 복수의 마커는 상기 제1 투명 유리판의 일 면 또는 상기 제2 투명 유리판의 일 면에 형성될 수 있다.The door includes a first transparent glass plate forming an outer surface of the door and a second transparent glass plate forming an inner surface of the door, and the plurality of markers are applied to one side of the first transparent glass plate or the second transparent glass plate. It can be formed on one side of .
상기 복수의 지지대는 상기 챔버의 바닥으로부터 제1 높이에 마련되는 제1 지지대; 및 상기 제1 높이보다 높은 제2 높이에 마련되는 제2 지지대;를 포함할 수 있다.The plurality of supports include: a first support provided at a first height from the bottom of the chamber; and a second support provided at a second height higher than the first height.
상기 복수의 마커는 상기 챔버의 바닥에 가까운 상기 도어의 제1 위치에 형성되는 하부 마커; 상기 제1 지지대의 제1 높이에 대응하는 상기 도어의 제2 위치에 형성되는 중간 마커; 및 상기 제2 지지대의 제2 높이에 대응하는 상기 도어의 제3 위치에 형성되는 상부 마커;를 포함할 수 있다.The plurality of markers include a lower marker formed at a first position of the door close to the bottom of the chamber; an intermediate marker formed at a second position of the door corresponding to a first height of the first support; and an upper marker formed at a third position of the door corresponding to the second height of the second support.
상기 복수의 마커 각각은 형상, 색상, 문자 및 기호 중 적어도 하나를 포함하는 특징 정보를 갖도록 형성될 수 있다.Each of the plurality of markers may be formed to have characteristic information including at least one of shape, color, text, and symbol.
상기 제1 지지대는 상기 챔버의 양 측벽으로부터 돌출되고 서로 이격되는 제1 돌출부와 제2 돌출부 및 상기 제1 돌출부와 상기 제2 돌출부 사이에 위치하는 제1 홈을 포함할 수 있다. 상기 제2 지지대는 상기 챔버의 양 측벽으로부터 돌출되고 서로 이격되는 제3 돌출부와 제4 돌출부 및 상기 제3 돌출부와 상기 제4 돌출부 사이에 위치하는 제2 홈을 포함할 수 있다. 상기 제1 홈과 상기 제2 홈은 상기 챔버의 측벽에서 서로 다른 수직선 상에 위치할 수 있다.The first support may include first protrusions and second protrusions that protrude from both side walls of the chamber and are spaced apart from each other, and a first groove located between the first protrusions and the second protrusions. The second support may include third and fourth protrusions that protrude from both side walls of the chamber and are spaced apart from each other, and a second groove located between the third protrusions and the fourth protrusions. The first groove and the second groove may be located on different vertical lines on the side wall of the chamber.
상기 제어부는 상기 챔버 내부의 이미지에서 상기 제1 홈과 상기 제2 홈 중 적어도 하나의 검출 여부에 더 기초하여 상기 트레이의 높이를 추정할 수 있다.The control unit may estimate the height of the tray based on whether at least one of the first groove and the second groove is detected in the image inside the chamber.
도어, 트레이를 지지하기 위해 챔버의 양 측벽에서 서로 다른 높이에 마련되는 복수의 지지대 및 상기 도어에 형성되는 복수의 마커를 포함하는 조리 기기의 제어 방법에 있어서, 일 실시예에 따른 제어 방법은, 상기 챔버 내부의 이미지를 획득하고; 상기 이미지에서 상기 트레이에 의해 적어도 일부가 가려진 마커의 위치를 식별하고; 상기 적어도 일부가 가려진 마커의 위치에 기초하여 상기 챔버 내에서 상기 트레이의 높이를 추정하고; 상기 트레이의 높이에 기초하여 조리물을 조리하기 위한 조리 파라미터를 결정하는 것;을 포함한다.In a method of controlling a cooking appliance including a plurality of supports provided at different heights on both side walls of the chamber to support a door and a tray, and a plurality of markers formed on the door, the control method according to an embodiment includes the following: acquire images of the interior of the chamber; identify the location of a marker in the image that is at least partially obscured by the tray; estimate the height of the tray within the chamber based on the location of the at least partially obscured marker; and determining cooking parameters for cooking food based on the height of the tray.
상기 적어도 일부가 가려진 마커의 위치를 식별하는 것은, 상기 이미지에서 상기 도어에 인접한 상기 트레이의 일 측을 포함하는 세그먼트 이미지를 추출하고; 상기 세그먼트 이미지의 깊이 정보에 기초하여, 상기 적어도 일부가 가려진 마커의 위치를 식별하는 것;을 포함할 수 있다.Identifying the location of the at least partially obscured marker may include extracting from the image a segment image including a side of the tray adjacent to the door; It may include identifying the location of the at least partially obscured marker based on depth information of the segment image.
상기 적어도 일부가 가려진 마커의 위치를 식별하는 것은, 상기 이미지에서 상기 도어에 인접한 상기 트레이의 일 측을 검출하고; 상기 이미지에서 상기 트레이의 일 측에 가장 가까이 위치하는 다른 마커를 검출하고; 상기 다른 마커의 특징 정보에 기초하여 상기 적어도 일부가 가려진 마커의 위치를 식별하는 것;을 포함할 수 있다.Identifying the location of the at least partially obscured marker includes detecting a side of the tray adjacent the door in the image; detecting another marker located closest to one side of the tray in the image; It may include identifying the location of the at least partially obscured marker based on characteristic information of the other marker.
상기 적어도 일부가 가려진 마커의 위치를 식별하는 것은, 상기 이미지 내 도어 영역을 복수의 세그먼트 이미지로 분할하고; 상기 복수의 세그먼트 이미지를 순차적으로 분석하여 상기 트레이의 일 측을 포함하는 상기 제1 세그먼트 이미지 및 상기 다른 마커를 포함하는 제2 세그먼트 이미지를 추출하고; 상기 제2 세그먼트 이미지로부터 상기 다른 마커의 특징 정보를 획득하는 것;을 포함할 수 있다.Identifying the location of the at least partially obscured marker may include dividing the door area in the image into a plurality of segment images; sequentially analyzing the plurality of segment images to extract the first segment image including one side of the tray and the second segment image including the other marker; It may include obtaining characteristic information of the other marker from the second segment image.
상기 적어도 일부가 가려진 마커의 위치를 식별하는 것은, 상기 복수의 세그먼트 이미지 각각을 상기 복수의 지지대에 의해 구별되는 상기 챔버 내의 복수의 층에 매칭시키고, 상기 복수의 층에 매칭된 상기 복수의 세그먼트 이미지를 최상층부터 최하층까지 순서대로 분석하여 상기 제1 세그먼트 이미지 및 상기 제2 세그먼트 이미지를 추출하는 것;을 포함할 수 있다.Identifying the position of the at least partially obscured marker may include matching each of the plurality of segment images to a plurality of layers in the chamber distinguished by the plurality of supports, and matching the plurality of segment images to the plurality of layers. It may include extracting the first segment image and the second segment image by analyzing in order from the highest layer to the lowest layer.
상기 제1 마커의 위치를 식별하는 것은, 메모리에 저장된 상기 트레이의 높이에 관련된 히스토리 정보를 획득하고; 상기 복수의 세그먼트 이미지 중에서, 상기 히스토리 정보에 마지막으로 기록된 상기 트레이의 높이 또는 가장 많이 기록된 상기 트레이의 높이에 대응하는 세그먼트 이미지를 검출하고; 상기 검출된 세그먼트 이미지를 가장 먼저 분석하는 것;을 포함할 수 있다.Identifying the location of the first marker includes obtaining history information related to the height of the tray stored in memory; Among the plurality of segment images, detect a segment image corresponding to the height of the tray last recorded in the history information or the height of the tray most recorded in the history information; It may include analyzing the detected segment image first.
상기 제어 방법은 상기 이미지로부터 상기 트레이 상에 배치된 상기 조리물의 성질을 추정하는 것;을 더 포함할 수 있다. 상기 조리 파라미터는 상기 조리물의 성질과 상기 트레이의 높이에 기초하여 결정할 수 있다.The control method may further include estimating the properties of the food placed on the tray from the image. The cooking parameters can be determined based on the properties of the food and the height of the tray.
전술된 바와 같이, 개시된 조리 기기 및 조리 기기의 제어 방법은, 도어에 형성되는 복수의 마커 또는 복수의 지지대에 형성되는 홈 중 적어도 하나를 이용하여 챔버 내에서 트레이 또는 랙이 위치하는 높이를 정확하고 용이하게 추정할 수 있다.As described above, the disclosed cooking appliance and cooking appliance control method accurately determines the height at which the tray or rack is located within the chamber using at least one of a plurality of markers formed on the door or a groove formed on a plurality of supports. It can be easily estimated.
또한, 개시된 조리 기기 및 조리 기기의 제어 방법은, 챔버 내에서 트레이 또는 랙이 위치하는 높이에 따라 조리물을 조리하기 위한 조리 파라미터를 결정할 수 있다. 따라서 조리 성능이 향상될 수 있다.Additionally, the disclosed cooking appliance and method for controlling the cooking appliance can determine cooking parameters for cooking food depending on the height at which the tray or rack is located within the chamber. Therefore, cooking performance can be improved.
한편, 개시된 실시예들은 컴퓨터에 의해 실행 가능한 명령어를 저장하는 저장매체의 형태로 구현될 수 있다. 명령어는 프로그램 코드의 형태로 저장될 수 있으며, 프로세서에 의해 실행되었을 때, 프로그램 모듈을 생성하여 개시된 실시예들의 동작을 수행할 수 있다.Meanwhile, the disclosed embodiments may be implemented in the form of a storage medium that stores instructions executable by a computer. Instructions may be stored in the form of program code, and when executed by a processor, may create program modules to perform operations of the disclosed embodiments.
기기로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서, '비일시적 저장매체'는 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다. 예로, '비일시적 저장매체'는 데이터가 임시적으로 저장되는 버퍼를 포함할 수 있다.A storage medium that can be read by a device may be provided in the form of a non-transitory storage medium. Here, 'non-transitory storage medium' simply means that it is a tangible device and does not contain signals (e.g. electromagnetic waves). This term refers to cases where data is semi-permanently stored in a storage medium and temporary storage media. It does not distinguish between cases where it is stored as . For example, a 'non-transitory storage medium' may include a buffer where data is temporarily stored.
일 실시예에 따르면, 본 문서에 개시된 다양한 실시예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory (CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두개의 사용자 장치들(예: 스마트폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품(예: 다운로더블 앱(downloadable app))의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.According to one embodiment, methods according to various embodiments disclosed in this document may be provided and included in a computer program product. Computer program products are commodities and can be traded between sellers and buyers. The computer program product may be distributed in the form of a machine-readable storage medium (e.g. compact disc read only memory (CD-ROM)) or through an application store (e.g. Play StoreTM) or on two user devices (e.g. It can be distributed (e.g. downloaded or uploaded) directly between smartphones) or online. In the case of online distribution, at least a portion of the computer program product (e.g., a downloadable app) is stored on a machine-readable storage medium, such as the memory of a manufacturer's server, an application store's server, or a relay server. It can be temporarily stored or created temporarily.
이상에서와 같이 첨부된 도면을 참조하여 개시된 실시예들을 설명하였다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고도, 개시된 실시예들과 다른 형태로 본 발명이 실시될 수 있음을 이해할 것이다. 개시된 실시예들은 예시적인 것이며, 한정적으로 해석되어서는 안 된다.As described above, the disclosed embodiments have been described with reference to the attached drawings. A person skilled in the art to which the present invention pertains will understand that the present invention can be practiced in forms different from the disclosed embodiments without changing the technical idea or essential features of the present invention. The disclosed embodiments are illustrative and should not be construed as limiting.
1: 조리 기기
2: 모바일 장치
3: 서버
1h: 하우징
20: 도어
40: 사용자 인터페이스
50: 챔버
60: 카메라
70: 조명
80: 히터
90: 팬
100: 통신 회로
200: 제어부1: Cooking appliance
2: Mobile devices
3: Server
1h: housing
20: door
40: User interface
50: chamber
60: Camera
70: lighting
80: heater
90: fan
100: communication circuit
200: control unit
Claims (20)
상기 챔버를 개방하거나 폐쇄하는 도어(20);
트레이를 지지하기 위해 상기 챔버의 양 측벽에서 서로 다른 높이에 마련되는 복수의 지지대(51, 52);
상기 도어에 형성되는 복수의 마커;
상기 챔버(50) 내부의 이미지를 획득하는 카메라(60); 및
상기 이미지에서 상기 트레이에 의해 적어도 일부가 가려진 마커의 위치를 식별하고, 상기 적어도 일부가 가려진 마커의 위치에 기초하여 상기 챔버 내에서 상기 트레이의 높이를 추정하고, 상기 트레이의 높이에 기초하여 조리물을 조리하기 위한 조리 파라미터를 결정하는 제어부;를 포함하는 조리 기기.Chamber 50;
A door 20 that opens or closes the chamber;
A plurality of supports (51, 52) provided at different heights on both side walls of the chamber to support the tray;
a plurality of markers formed on the door;
A camera 60 that acquires images inside the chamber 50; and
Identify the location of a marker at least partially obscured by the tray in the image, estimate the height of the tray within the chamber based on the location of the marker at least partially obscured, and determine the height of the tray based on the height of the tray. A cooking device including a control unit that determines cooking parameters for cooking.
상기 제어부는
상기 이미지에서 상기 도어에 인접한 상기 트레이의 일 측을 포함하는 세그먼트 이미지를 추출하고,
상기 세그먼트 이미지의 깊이 정보에 기초하여 상기 적어도 일부가 가려진 마커의 위치를 식별하는 조리 기기.According to paragraph 1,
The control unit
Extracting a segment image including one side of the tray adjacent to the door from the image,
A cooking appliance that identifies the location of the at least partially obscured marker based on depth information of the segment image.
상기 제어부는
상기 이미지에서 상기 도어에 인접한 상기 트레이의 일 측을 검출하고,
상기 이미지에서 상기 트레이의 일 측에 가장 가까이 위치하는 다른 마커를 검출하고,
상기 다른 마커의 특징 정보에 기초하여 상기 적어도 일부가 가려진 마커의 위치를 식별하는 조리 기기.According to paragraph 1,
The control unit
Detecting a side of the tray adjacent to the door in the image,
Detecting another marker located closest to one side of the tray in the image,
A cooking appliance that identifies the location of the at least partially obscured marker based on characteristic information of the other marker.
상기 제어부는
상기 이미지 내 도어 영역을 복수의 세그먼트 이미지로 분할하고,
상기 복수의 세그먼트 이미지를 순차적으로 분석하여 상기 트레이의 일 측을 포함하는 제1 세그먼트 이미지 및 상기 다른 마커를 포함하는 제2 세그먼트 이미지를 추출하고,
상기 제2 세그먼트 이미지로부터 상기 다른 마커의 특징 정보를 획득하는 조리 기기.According to paragraph 3,
The control unit
Divide the door area in the image into a plurality of segment images,
sequentially analyzing the plurality of segment images to extract a first segment image including one side of the tray and a second segment image including the other marker;
A cooking appliance that acquires characteristic information of the other marker from the second segment image.
상기 제어부는
상기 복수의 세그먼트 이미지 각각을 상기 복수의 지지대에 의해 구별되는 상기 챔버 내의 복수의 층에 매칭시키고,
상기 복수의 층에 매칭된 상기 복수의 세그먼트 이미지를 최상층부터 최하층까지 순서대로 분석하여 상기 제1 세그먼트 이미지 및 상기 제2 세그먼트 이미지를 추출하는 조리 기기.According to paragraph 4,
The control unit
Matching each of the plurality of segment images to a plurality of layers in the chamber distinguished by the plurality of supports,
A cooking appliance that extracts the first segment image and the second segment image by analyzing the plurality of segment images matched to the plurality of layers in order from the top layer to the bottom layer.
상기 트레이의 높이에 관련된 히스토리 정보를 저장하는 메모리;를 더 포함하고,
상기 제어부는
상기 복수의 세그먼트 이미지 중에서, 상기 히스토리 정보에 마지막으로 기록된 상기 트레이의 높이 또는 가장 많이 기록된 상기 트레이의 높이에 대응하는 세그먼트 이미지를 검출하고,
상기 검출된 세그먼트 이미지를 가장 먼저 분석하는 조리 기기.According to paragraph 4,
It further includes a memory that stores history information related to the height of the tray,
The control unit
Among the plurality of segment images, detect a segment image corresponding to the height of the tray last recorded in the history information or the height of the tray most recorded,
A cooking device that first analyzes the detected segment image.
디스플레이;를 더 포함하고,
상기 제어부는
상기 트레이의 높이 정보를 표시하도록 상기 디스플레이를 제어하는 조리 기기.According to paragraph 1,
It further includes a display;
The control unit
A cooking appliance that controls the display to display height information of the tray.
상기 제어부는
상기 이미지로부터 상기 트레이 상에 배치된 상기 조리물의 성질을 추정하고,
상기 조리물의 성질과 상기 트레이의 높이에 기초하여 상기 조리 파라미터를 결정하는 조리 기기.According to paragraph 1,
The control unit
Estimating the properties of the food placed on the tray from the image,
A cooking appliance that determines the cooking parameters based on the properties of the food and the height of the tray.
상기 도어는
상기 도어의 외면을 형성하는 제1 투명 유리판과 상기 도어의 내면을 형성하는 제2 투명 유리판;을 포함하고,
상기 복수의 마커는
상기 제1 투명 유리판의 일 면 또는 상기 제2 투명 유리판의 일 면에 형성되는 조리 기기.According to paragraph 1,
The door is
It includes a first transparent glass plate forming an outer surface of the door and a second transparent glass plate forming an inner surface of the door,
The plurality of markers are
A cooking appliance formed on one side of the first transparent glass plate or one side of the second transparent glass plate.
상기 복수의 지지대는
상기 챔버의 바닥으로부터 제1 높이에 마련되는 제1 지지대; 및
상기 제1 높이보다 높은 제2 높이에 마련되는 제2 지지대;를 포함하고,
상기 복수의 마커는
상기 챔버의 바닥에 가까운 상기 도어의 제1 위치에 형성되는 하부 마커;
상기 제1 지지대의 제1 높이에 대응하는 상기 도어의 제2 위치에 형성되는 중간 마커; 및
상기 제2 지지대의 제2 높이에 대응하는 상기 도어의 제3 위치에 형성되는 상부 마커;를 포함하는 조리 기기.According to paragraph 1,
The plurality of supports
a first support provided at a first height from the bottom of the chamber; and
A second support provided at a second height higher than the first height,
The plurality of markers are
a lower marker formed at a first position of the door close to the bottom of the chamber;
an intermediate marker formed at a second position of the door corresponding to a first height of the first support; and
A cooking appliance comprising: an upper marker formed at a third position of the door corresponding to the second height of the second support.
상기 복수의 마커 각각은
형상, 색상, 문자 및 기호 중 적어도 하나를 포함하는 특징 정보를 갖도록 형성되는 조리 기기.According to paragraph 1,
Each of the plurality of markers is
A cooking appliance configured to have characteristic information including at least one of shape, color, text, and symbol.
상기 복수의 지지대는
상기 챔버의 바닥으로부터 제1 높이에 마련되는 제1 지지대; 및
상기 제1 높이보다 높은 제2 높이에 마련되는 제2 지지대;를 포함하고,
상기 제1 지지대는
상기 챔버의 양 측벽으로부터 돌출되고 서로 이격되는 제1 돌출부와 제2 돌출부 및 상기 제1 돌출부와 상기 제2 돌출부 사이에 위치하는 제1 홈을 포함하고,
상기 제2 지지대는
상기 챔버의 양 측벽으로부터 돌출되고 서로 이격되는 제3 돌출부와 제4 돌출부 및 상기 제3 돌출부와 상기 제4 돌출부 사이에 위치하는 제2 홈을 포함하며,
상기 제1 홈과 상기 제2 홈은 상기 챔버의 측벽에서 서로 다른 수직선 상에 위치하는 조리 기기.According to paragraph 1,
The plurality of supports
a first support provided at a first height from the bottom of the chamber; and
A second support provided at a second height higher than the first height,
The first support is
It includes first protrusions and second protrusions that protrude from both side walls of the chamber and are spaced apart from each other, and a first groove located between the first protrusions and the second protrusions,
The second support is
It includes third protrusions and fourth protrusions that protrude from both side walls of the chamber and are spaced apart from each other, and a second groove located between the third protrusions and the fourth protrusions,
The first groove and the second groove are located on different vertical lines on the side wall of the chamber.
상기 제어부는
상기 챔버 내부의 이미지에서 상기 제1 홈과 상기 제2 홈 중 적어도 하나의 검출 여부에 더 기초하여 상기 트레이의 높이를 추정하는 조리 기기.According to clause 12,
The control unit
A cooking appliance that estimates the height of the tray further based on whether at least one of the first groove and the second groove is detected in the image inside the chamber.
상기 챔버 내부의 이미지를 획득하고;
상기 이미지에서 상기 트레이에 의해 적어도 일부가 가려진 마커의 위치를 식별하고;
상기 적어도 일부가 가려진 마커의 위치에 기초하여 상기 챔버 내에서 상기 트레이의 높이를 추정하고;
상기 트레이의 높이에 기초하여 조리물을 조리하기 위한 조리 파라미터를 결정하는 것;을 포함하는 조리 기기의 제어 방법.A method of controlling a cooking appliance comprising a plurality of supports provided at different heights on both side walls of the chamber to support a door and a tray, and a plurality of markers formed on the door,
acquire images of the interior of the chamber;
identify the location of a marker in the image that is at least partially obscured by the tray;
estimate the height of the tray within the chamber based on the position of the at least partially obscured marker;
A method of controlling a cooking appliance comprising: determining cooking parameters for cooking food based on the height of the tray.
상기 적어도 일부가 가려진 마커의 위치를 식별하는 것은,
상기 이미지에서 상기 도어에 인접한 상기 트레이의 일 측을 포함하는 세그먼트 이미지를 추출하고;
상기 세그먼트 이미지의 깊이 정보에 기초하여, 상기 적어도 일부가 가려진 마커의 위치를 식별하는 것;을 포함하는 조리 기기의 제어 방법.According to clause 14,
Identifying the location of the at least partially obscured marker includes:
extract a segment image from the image including a side of the tray adjacent to the door;
Based on the depth information of the segment image, identifying the position of the at least partially obscured marker.
상기 적어도 일부가 가려진 마커의 위치를 식별하는 것은,
상기 이미지에서 상기 도어에 인접한 상기 트레이의 일 측을 검출하고;
상기 이미지에서 상기 트레이의 일 측에 가장 가까이 위치하는 다른 마커를 검출하고;
상기 다른 마커의 특징 정보에 기초하여 상기 적어도 일부가 가려진 마커의 위치를 식별하는 것;을 포함하는 조리 기기의 제어 방법.According to clause 14,
Identifying the location of the at least partially obscured marker includes:
detect in the image a side of the tray adjacent to the door;
detecting another marker located closest to one side of the tray in the image;
A method of controlling a cooking appliance comprising: identifying the location of the at least partially obscured marker based on characteristic information of the other marker.
상기 적어도 일부가 가려진 마커의 위치를 식별하는 것은,
상기 이미지 내 도어 영역을 복수의 세그먼트 이미지로 분할하고;
상기 복수의 세그먼트 이미지를 순차적으로 분석하여 상기 트레이의 일 측을 포함하는 제1 세그먼트 이미지 및 상기 다른 마커를 포함하는 제2 세그먼트 이미지를 추출하고;
상기 제2 세그먼트 이미지로부터 상기 다른 마커의 특징 정보를 획득하는 것;을 포함하는 조리 기기의 제어 방법.According to clause 16,
Identifying the location of the at least partially obscured marker includes:
dividing the door area in the image into a plurality of segment images;
sequentially analyzing the plurality of segment images to extract a first segment image including one side of the tray and a second segment image including the other marker;
A method of controlling a cooking appliance comprising: acquiring characteristic information of the other marker from the second segment image.
상기 적어도 일부가 가려진 마커의 위치를 식별하는 것은,
상기 복수의 세그먼트 이미지 각각을 상기 복수의 지지대에 의해 구별되는 상기 챔버 내의 복수의 층에 매칭시키고,
상기 복수의 층에 매칭된 상기 복수의 세그먼트 이미지를 최상층부터 최하층까지 순서대로 분석하여 상기 제1 세그먼트 이미지 및 상기 제2 세그먼트 이미지를 추출하는 것;을 포함하는 조리 기기의 제어 방법.According to clause 17,
Identifying the location of the at least partially obscured marker includes:
Matching each of the plurality of segment images to a plurality of layers in the chamber distinguished by the plurality of supports,
Analyzing the plurality of segment images matched to the plurality of layers in order from the highest layer to the lowest layer to extract the first segment image and the second segment image.
상기 적어도 일부가 가려진 마커의 위치를 식별하는 것은,
메모리에 저장된 상기 트레이의 높이에 관련된 히스토리 정보를 획득하고;
상기 복수의 세그먼트 이미지 중에서, 상기 히스토리 정보에 마지막으로 기록된 상기 트레이의 높이 또는 가장 많이 기록된 상기 트레이의 높이에 대응하는 세그먼트 이미지를 검출하고;
상기 검출된 세그먼트 이미지를 가장 먼저 분석하는 것;을 포함하는 조리 기기의 제어 방법.According to clause 17,
Identifying the location of the at least partially obscured marker includes:
Obtain history information related to the height of the tray stored in memory;
Among the plurality of segment images, detect a segment image corresponding to the height of the tray last recorded in the history information or the height of the tray most recorded in the history information;
A method of controlling a cooking appliance comprising: first analyzing the detected segment image.
상기 이미지로부터 상기 트레이 상에 배치된 상기 조리물의 성질을 추정하는 것;을 더 포함하고,
상기 조리 파라미터는 상기 조리물의 성질과 상기 트레이의 높이에 기초하여 결정되는, 조리 기기의 제어 방법.According to clause 14,
It further includes; estimating the properties of the food placed on the tray from the image,
The cooking parameter is determined based on the nature of the food and the height of the tray.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/KR2023/006665 WO2024043436A1 (en) | 2022-08-24 | 2023-05-17 | Cooking appliance and cooking appliance control method |
US18/205,713 US20240070908A1 (en) | 2022-08-24 | 2023-06-05 | Cooking apparatus and method for controlling cooking apparatus |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20220106447 | 2022-08-24 | ||
KR1020220106447 | 2022-08-24 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20240028273A true KR20240028273A (en) | 2024-03-05 |
Family
ID=90298945
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020230006906A KR20240028273A (en) | 2022-08-24 | 2023-01-17 | Cooking apparatus and method for controlling cooking apparatus |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20240028273A (en) |
-
2023
- 2023-01-17 KR KR1020230006906A patent/KR20240028273A/en unknown
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111937051B (en) | Smart home device placement and installation using augmented reality visualization | |
KR101044143B1 (en) | Cooker | |
CN104422085B (en) | Air conditioner | |
KR102399409B1 (en) | Oven and method for opening a door of ovne | |
EP2444734B1 (en) | Cooker and control unit | |
KR102607554B1 (en) | Methods for determining and controlling a piece of equipment to be controlled, and device, use and system implementing said methods | |
EP3595277B1 (en) | Method of controlling electronic apparatus and computer-readable recording medium | |
US20170261213A1 (en) | Oven and control method thereof | |
EP3354989A1 (en) | Terminal, cooking appliance communicating with same, and method of controlling cooking appliance | |
US10716174B2 (en) | Heating cooker, method for controlling heating cooker, and heating cooking system | |
US10452046B2 (en) | Cooking appliance control of residential heating, ventilation and/or air conditioning (HVAC) system | |
US20200351557A1 (en) | Cooking system and method for making recipe suggestions in real time | |
KR20170106143A (en) | Oven and control method thereof | |
KR20240028273A (en) | Cooking apparatus and method for controlling cooking apparatus | |
US20240070908A1 (en) | Cooking apparatus and method for controlling cooking apparatus | |
KR20240028271A (en) | Cooking apparatus and method for controlling cooking apparatus | |
KR20240028274A (en) | Cooking apparatus and method for controlling cooking apparatus | |
KR20240057959A (en) | Cooking apparatus and controlling method thereof | |
KR20240028277A (en) | Cooking apparatus and method for controlling cooking apparatus | |
US20200025387A1 (en) | Cooktop appliance and engagement system | |
WO2019126470A1 (en) | Non-invasive detection of infant bilirubin levels in a smart home environment | |
US20230025683A1 (en) | Optimized cooking method selection | |
US20240071077A1 (en) | Cooking apparatus and method of controlling the same | |
US20240280270A1 (en) | Cooking apparatus and method of controlling the same | |
WO2024043436A1 (en) | Cooking appliance and cooking appliance control method |