KR20210115484A

KR20210115484A - Food cooking status verification system and method using artificial intelligence

Info

Publication number: KR20210115484A
Application number: KR1020200031342A
Authority: KR
Inventors: 박병훈
Original assignee: 박병훈
Priority date: 2020-03-13
Filing date: 2020-03-13
Publication date: 2021-09-27

Abstract

The present invention relates to check a degree of cooking of food using artificial intelligence deep learning for attaching an image sensor or a camera for observing the food to cooking equipment such as an oven and a mircrowave, recognizing the degree of cooking of the food through an artificial intelligence device capable of analyzing and determining image information, and implementing a system to find and complete an optimal cooking state so as to be used in cooking equipment, a kitchen, a food factory, and the like.

Description

Food cooking status verification system and method using artificial intelligence {Food cooking status verification system and method using artificial intelligence}

본 발명은 인공지능의 이미지, 객체 인식 기능을 이용하여 식품의 조리상태를 자동으로 판단하는 기술에 관한 것이다. The present invention relates to a technology for automatically determining the cooking state of food using an image and object recognition function of artificial intelligence.

본 발명의 근간이 되는 기술인 인공지능 이미지 인식, 객체 인식은 이미 인간의 인식 수준에 근접해있고 기존의 룰 기반 단순 이미지 분석에 기반한 비전 검사에 더해서 딥러닝을 통한 판단 및 예측 기능 등이 사용된다.Artificial intelligence image recognition and object recognition, which are the fundamental technologies of the present invention, are already close to the level of human recognition, and in addition to vision inspection based on the existing rule-based simple image analysis, judgment and prediction functions through deep learning are used.

가열을 필요로 하는 식품의 조리에 있어서 가열하는 온도와 시간 등 여러 조건에 따라 식품의 조리 완성도는 설익거나 적당하거나 타버리는 등의 다양한 결과를 가져오게 된다. 사람이 계속 조리 진행 상태를 지켜보면서 적절한 시점에 조리를 중지하는 것이 최선의 방법이나 조리 시간이 길거나 밀폐된 용기 내에서 조리가 되거나 하는 경우는 사람이 지켜보면서 통제를 하는 데에는 한계가 존재한다. 일부 조리 기구에는 이 기능을 위해 시간제어장치인 타이머가 부착되어 있고 조리별로 실험과 통계를 이용한 평균적 시간을 추천하기도 하지만 완성도를 높이는 데는 부족한 점이 많다. In the cooking of food that requires heating, depending on various conditions such as the heating temperature and time, the completeness of cooking of the food brings about various results such as undercooking, proper cooking, or burning. It is best to stop cooking at an appropriate time while a person continuously watches the cooking progress, but when the cooking time is long or the food is cooked in an airtight container, there is a limit to controlling while watching the person. Some cooking utensils have a timer, which is a time control device, for this function, and they recommend an average time using experiments and statistics for each cooking, but there are many shortcomings in improving the completeness.

본 발명에서는 이러한 문제점을 인공지능 이미지 인식 기능을 사용하여 해결하는 방법을 제시하고자 한다. The present invention intends to propose a method for solving such a problem using an artificial intelligence image recognition function.

인공지능의 이미지 인식 기능은 단순히 사물이 무엇인지, 더 정확히는 안면 인식처럼 같은 종류에서도 다른 점을 구별해내는 수준에 이르고 있다. 조리되는 식품은 가열에 의하여 고유의 색, 부피, 모양 등의 변형이 생기며 음식이 가장 적절하게 익은 상태 역시 위 요소들을 종합적으로 판단함으로써 결정할 수 있다. 인공지능 학습 기능을 이용하여 특정 식품, 요리별로 다양한 조리상태를 학습하고 시각적인 관능검사를 통해 최적의 조리 상태를 파악하고 가열 상태의 조정이나 중지 등까지를 자동으로 처리하는 시스템을 구성하여 목적을 달성하게 된다. The image recognition function of artificial intelligence is reaching the level of simply distinguishing what an object is, or more precisely, different from the same type, such as facial recognition. Cooked food has its own color, volume, shape, etc., changed by heating, and the optimally cooked state can also be determined by comprehensively judging the above factors. By using the artificial intelligence learning function, it learns various cooking conditions for each specific food and dish, identifies the optimal cooking condition through visual sensory testing, and configures a system that automatically handles adjustments and stops of heating conditions to achieve the purpose. will achieve

식품의 조리상태를 판단하는 시스템은 이미지/영상 입력 장치와 그 이미지를 분석하는 인공지능 시스템으로 구성될 수 있다. 이 장치는 소형, 경량화를 통해 각종 조리기구, 예를 들어 전자레인지, 오븐, 에어 프라이어, 화덕, 토스트 기 등에 장착될 수 있다. 적용 범위를 확장하면 일반 가정의 조리대, 음식점의 주방 및 식품 공장의 제품 품질 검사에도 사용되어 식품이 가장 적절하게 조리된 상태를 판별하는 데 사용될 수 있다. A system for determining the cooking state of food may be composed of an image/image input device and an artificial intelligence system that analyzes the image. This device can be mounted on various cooking utensils, for example, a microwave oven, an oven, an air fryer, an oven, a toaster, and the like through miniaturization and weight reduction. Expanding the scope of application, it can also be used for product quality inspection in household countertops, restaurant kitchens, and food factories to determine when food is most properly cooked.

도 1은 본 발명의 시스템에서 각 구성 요소들이 작동하는 전체적 구성을 나타내는 도면이다. 1 is a view showing the overall configuration in which each component operates in the system of the present invention.

이하 첨부한 도면을 참조하여 본 발명의 실시예를 상세하게 설명한다. 본 발명의 실시예를 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. In describing the embodiment of the present invention, if it is determined that a detailed description of a related known function or configuration may unnecessarily obscure the gist of the present invention, the detailed description thereof will be omitted.

도 1은 본 발명의 전체 시스템을 나타내는 도면으로, 전자레인지나 오븐, 토스터 같은 식품 가열 조리 기구와 그 안에서 조리되는 식품을 관찰할 수 있는 위치에 부착되는 이미지 센서(카메라), 이미지 센서의 영상 데이터를 입력 받아서 인공지능 기능으로 조리 정도를 파악하는 인공지능 장치와 인공지능 장치의 특정 명령을 수신하여 오븐의 상태를 변경하는 조절기로 구성되어 있다. 1 is a view showing the entire system of the present invention, and an image sensor (camera) attached to a position where food heating cooking appliances such as microwave ovens, ovens, and toasters and food cooked therein can be observed, and image data of the image sensors It is composed of an artificial intelligence device that receives input and determines the degree of cooking with an artificial intelligence function, and a controller that changes the state of the oven by receiving a specific command from the artificial intelligence device.

식품을 넣고 오븐을 켜서 가열을 시작하면 이미지 센서는 계속적으로 식품의 상태를 모니터링 하게 되며 미리 학습된 최적의 상태가 되는지를 체크하여 특정 상태가 되었다고 판단하며 조절기를 제어하여 불을 약하게 하거나 끄거나 하면서 조리의 상태를 제어할 수 있다. When you put food in and turn on the oven to start heating, the image sensor continuously monitors the state of the food. You can control the state of cooking.

이상, 본 발명의 상세한 설명에서는 구체적인 실시예에 관해서 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 당해 분야에서 통상의 지식을 가진 자에게 있어서 자명하다 할 것이다.As mentioned above, although specific embodiments have been described in the detailed description of the present invention, it will be apparent to those of ordinary skill in the art that various modifications are possible without departing from the scope of the present invention.

Claims

As a method of checking the degree of cooking of food using artificial intelligence deep learning:
A method of configuring a food cooking state checking system including an image sensor for observing the inside of the cooking appliance and an artificial intelligence device for determining the degree of cooking by image recognition;
A method of attaching an image sensor (camera) to a position where food conditions inside cooking utensils such as ovens, microwaves, and air fryers can be observed;
A method of configuring a food cooking state checking system including an artificial intelligence model created by learning the shape, color, texture, etc. of food for a cooked state according to the type of food;
Collecting temporal change images of food transmitted from the image sensor and determining the degree of cooking through a model trained by deep learning;
controlling the cooking time, heating degree, heat power, etc. through a controller according to the cooking state determined by the artificial intelligence device;
Food preparation status check system comprising