KR102589593B1 - A robot that cooks meat by direct fire using artificial intelligence - Google Patents

A robot that cooks meat by direct fire using artificial intelligence Download PDF

Info

Publication number
KR102589593B1
KR102589593B1 KR1020230075483A KR20230075483A KR102589593B1 KR 102589593 B1 KR102589593 B1 KR 102589593B1 KR 1020230075483 A KR1020230075483 A KR 1020230075483A KR 20230075483 A KR20230075483 A KR 20230075483A KR 102589593 B1 KR102589593 B1 KR 102589593B1
Authority
KR
South Korea
Prior art keywords
grill
meat
heating
image
fuel
Prior art date
Application number
KR1020230075483A
Other languages
Korean (ko)
Inventor
정한석
Original Assignee
주식회사 올투딜리셔스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 올투딜리셔스 filed Critical 주식회사 올투딜리셔스
Priority to KR1020230075483A priority Critical patent/KR102589593B1/en
Application granted granted Critical
Publication of KR102589593B1 publication Critical patent/KR102589593B1/en

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/0045Manipulators used in the food industry
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47JKITCHEN EQUIPMENT; COFFEE MILLS; SPICE MILLS; APPARATUS FOR MAKING BEVERAGES
    • A47J37/00Baking; Roasting; Grilling; Frying
    • A47J37/06Roasters; Grills; Sandwich grills
    • A47J37/0694Broiling racks
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47JKITCHEN EQUIPMENT; COFFEE MILLS; SPICE MILLS; APPARATUS FOR MAKING BEVERAGES
    • A47J37/00Baking; Roasting; Grilling; Frying
    • A47J37/06Roasters; Grills; Sandwich grills
    • A47J37/07Roasting devices for outdoor use; Barbecues
    • A47J37/0786Accessories
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/08Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • B25J19/021Optical sensing devices
    • B25J19/023Optical sensing devices including video camera means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Food Science & Technology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Baking, Grill, Roasting (AREA)

Abstract

본 발명의 일실시예는 로봇 암을 기반으로 육류를 자동으로 조리할 수 있으며, 육류의 종류, 상태 등에 따라 가장 적절한 방식 및 시간으로 조리(구이)를 수행할 수 있는, 인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇에 관한 것이다.One embodiment of the present invention is capable of automatically cooking meat based on a robot arm, and cooking (grilling) in the most appropriate manner and time according to the type and condition of the meat, using artificial intelligence to cook it over direct heat. It's about a robot that cooks meat using this method.

Description

인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇{A ROBOT THAT COOKS MEAT BY DIRECT FIRE USING ARTIFICIAL INTELLIGENCE}A robot that cooks meat using direct fire using artificial intelligence {A ROBOT THAT COOKS MEAT BY DIRECT FIRE USING ARTIFICIAL INTELLIGENCE}

아래 실시예들은 로봇 암을 기반으로 육류를 자동으로 조리할 수 있으며, 육류의 종류, 상태 등에 따라 가장 적절한 방식 및 시간으로 조리(구이)를 수행할 수 있는, 인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇에 관한 것이다.The examples below can automatically cook meat based on a robot arm, and can cook (grill) meat in the most appropriate manner and time according to the type and condition of the meat, using artificial intelligence to cook meat using a direct fire method. It's about a robot that cooks.

육류 요리의 다양한 조리 방법 중, 구이 요리에 관한 수요가 증가하고 있다.Among various cooking methods for meat dishes, the demand for grilled dishes is increasing.

특히, 숯불이나 짚불 등을 이용한 직화구이의 경우, 연료의 종류에 따라 고기에 다양한 풍미가 부여되며, 느끼한 기름기나 잡내 등이 제거되어 담백한 구이를 먹을 수 있기 때문에 인기가 높다.In particular, direct fire grilling using charcoal or straw fire is popular because various flavors are given to the meat depending on the type of fuel, and greasy grease and odor are removed, allowing for a light grilled meal.

다만, 이러한 직화구이들은 육류를 굽는 과정에서 발생하는 연기, 일산화탄소 등의 조리 흄(cooking fume)으로 인한 폐질환 발생 가능성이 있어 구이 작업에 주의가 요구된다.However, caution is required when grilling over an open fire because there is a risk of lung disease caused by cooking fumes such as smoke and carbon monoxide generated during the grilling process.

이러한 직화구이를 낮은 빈도로 섭취하여 조리 흄에 노출되는 빈도가 매우 낮은 경우에는 건강상 치명적이지 않을 수도 있으나, 직화구이를 취급하는 점포의 작업자 등은 이러한 조리 흄에 지속적으로 노출되기 때문에 건강에 치명적인 영향을 받을 수 있다.If the frequency of exposure to cooking fumes is very low due to consumption of such direct fire grilled food, it may not be fatal to health, but workers at stores that handle direct fire grilled food are continuously exposed to such cooking fumes, which can be fatal to health. may be affected.

따라서, 직화구이 작업에 인간(작업자)의 개입을 최소화할 수 있는 방식의 직화구이 방법이 요구된다.Therefore, there is a need for a direct-fire grilling method that can minimize human (worker) intervention in the direct-fire grilling process.

KRKR 10-2335999 10-2335999 BB KRKR 10-2462457 10-2462457 BB KRKR 10-2011-0045771 10-2011-0045771 AA

본 발명의 일실시예가 해결하고자 하는 과제는, 전술한 바와 같은 종래 직화구이의 문제점을 극복하기 위하여, 직화구이 작업에 작업자의 개입을 최소화함으로써 사람이 직화구이 작업에서 발생하는 조리 흄을 흡입하지 않도록 방지하고, 인공지능을 기반으로 육류에 적합한 최적의 가열 방식 및 가열 시간을 도출함으로써 구이 요리의 맛과 풍미를 개선할 수 있는, 인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇에 관한 것이다.The problem to be solved by one embodiment of the present invention is to overcome the problems of conventional direct fire grilling as described above, by minimizing operator intervention in the direct fire grilling operation to prevent people from inhaling cooking fumes generated during the direct fire grilling operation. This is about a robot that cooks meat using direct fire using artificial intelligence, which can improve the taste and flavor of grilled dishes by deriving the optimal heating method and heating time suitable for meat based on artificial intelligence.

일실시예에 따르면, 로봇 암; 상기 로봇 암의 단부에 결합되는 제1 그릴; 숯 또는 짚을 연료로써 연소시켜 육류를 가열하는 제1 가열부; 상기 제1 가열부의 상부에 배치되어, 상기 제1 가열부에서 발생하는 조리 흄(Cooking Fume)을 제거하는 제1 후드; 상기 로봇 암에 설치되어, 상기 육류를 촬영하는 카메라; 및 상기 카메라에서 촬영한 영상을 소정의 인공지능 모델에 입력하여 상기 육류의 종류 및 상태를 판단하고, 판단된 상기 육류의 종류 및 상태를 기반으로 제1 가열부 및 로봇 암을 조절하는 제어부;를 포함하고, 상기 제어부는: 상기 영상으로부터 상기 육류의 종류를 닭고기, 소고기, 돼지고기, 양고기 및 생선 중 어느 하나로 특정하는 단계; 상기 영상으로부터 상기 육류의 치수를 측정하는 단계; 상기 영상으로부터 상기 육류의 지방 분포 정도를 판단하는 단계; 상기 영상으로부터 상기 육류의 표면 가공 상태를 판단하는 단계; 및 상기 육류의 종류, 치수, 지방 분포 정도 및 표면 가공 상태를 기반으로, 가열 방식 및 제1 가열 시간을 결정하는 단계;를 포함하는 방법에 따라 제어되는, 인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇을 제공한다.According to one embodiment, a robot arm; a first grill coupled to an end of the robot arm; A first heating unit that heats meat by burning charcoal or straw as fuel; a first hood disposed above the first heating unit to remove cooking fume generated from the first heating unit; A camera installed on the robot arm to photograph the meat; And a control unit that inputs the image captured by the camera into a predetermined artificial intelligence model to determine the type and condition of the meat, and controls the first heating unit and the robot arm based on the determined type and condition of the meat. The control unit includes: specifying the type of meat as one of chicken, beef, pork, lamb, and fish from the image; Measuring the dimensions of the meat from the image; determining the degree of fat distribution of the meat from the image; determining the surface processing state of the meat from the image; And determining a heating method and a first heating time based on the type, size, degree of fat distribution, and surface processing state of the meat; We provide cooking robots.

또한, 상기 카메라에는: 가시광선 카메라 및 열화상 카메라가 포함되고, 상기 가열 방식 및 제1 가열 시간을 결정하는 단계는: 상기 육류의 종류, 치수, 지방 분포 정도 및 표면 가공 상태를 기반으로, 가열 방식 및 제2 가열 시간을 결정하는 단계; 상기 육류로부터 소정의 거리만큼 이격된 위치에 소정의 복사열 패널을 배치하는 단계; 상기 복사열 패널을 작동시켜, 상기 육류를 가열하는 단계; 상기 열화상 영상의 제1 시점에서 제1 이미지를 추출하는 단계; 상기 열화상 영상의 제1 시점으로부터 소정의 시간이 경과한 제2 시점에서 제2 이미지를 추출하는 단계; 상기 복사열 패널을 정지시켜, 상기 육류의 가열을 중단하는 단계; 상기 제2 이미지로부터, 상기 제2 이미지에서 나타나는 최저 온도부터 최고 온도까지의 색상 스펙트럼을 생성하는 단계; 상기 색상 스펙트럼을 기반으로, 상기 제2 이미지에서 나타나는 최저 온도부터 최고 온도까지의 색상을 적어도 5개 이상의 등급으로 구분하는 단계; 상기 등급을 기반으로, 상기 제1 이미지 및 제2 이미지에 나타나는 제1 색상들을 각 등급에 따라 제2 색상으로 변환하는 단계; 상기 제2 색상들이 상기 제1 이미지 내에서 나타나는 제1 픽셀 수들을 각 제2 색상마다 카운트하는 단계; 상기 제2 색상들이 상기 제2 이미지 내에서 나타나는 제2 픽셀 수들을 각 제2 색상마다 카운트하는 단계; [제2 픽셀 수 / 제1 픽셀 수 = 제1 비율]을 상기 각 제2 색상마다 산출하는 단계; 및 상기 제1 비율을 기반으로, 제2 가열 시간에 소정의 보정치를 반영하여 제1 가열 시간을 산출하는 단계;를 포함할 수 있다.In addition, the camera includes: a visible light camera and a thermal imaging camera, and the step of determining the heating method and the first heating time is: heating based on the type, size, degree of fat distribution, and surface processing state of the meat. determining a method and a second heating time; Placing a predetermined radiant heat panel at a location spaced apart from the meat by a predetermined distance; operating the radiant heat panel to heat the meat; extracting a first image from a first viewpoint of the thermal image; Extracting a second image at a second time point when a predetermined time has elapsed from the first time point of the thermal image image; stopping the radiant heat panel to stop heating the meat; generating, from the second image, a color spectrum from the lowest temperature to the highest temperature appearing in the second image; Based on the color spectrum, classifying colors from the lowest temperature to the highest temperature appearing in the second image into at least five or more grades; Based on the grade, converting first colors appearing in the first image and the second image into second colors according to each grade; counting for each second color a first number of pixels in which the second colors appear in the first image; counting for each second color the number of second pixels in which the second colors appear in the second image; calculating [second number of pixels / first number of pixels = first ratio] for each second color; And based on the first ratio, calculating the first heating time by reflecting a predetermined correction value in the second heating time.

그리고, 상기 제1 그릴은: 상기 로봇 암의 단부로부터 신장되는 중심 프레임; 및 상기 중심 프레임의 양측으로 소정의 간격마다 신장되는 발산 프레임;을 포함하여, 소정의 어골(魚骨) 형상으로 형성되고, 상기 제1 가열부는: 상기 제1 그릴에 대응하도록 구성되는 제2 그릴; 및 상기 제2 그릴의 하부에 배치되어, 상기 제어부의 입력을 기반으로 연료의 공급량을 조절하는 연료 공급부;를 포함하고, 상기 제2 그릴은: 소정의 사각형 형상으로 형성되는 주변 프레임; 및 상기 주변 프레임의 양단으로부터 내측 방향으로 소정의 간격마다 신장되는 수렴 프레임;을 포함하여, 상기 제1 그릴이 상기 주변 프레임의 내측에 대응되어 끼워맞춤 되도록 형성되고, 상기 연료 공급부는: 상기 제2 그릴의 하부에 구비되며, 내부에 소정의 공간이 형성되는 케이싱; 상기 케이싱의 하단 내측에 배치되어, 상하 방향으로 직선운동하는 연료 플레이트; 상기 케이싱의 하단 외측에 배치되어, 연료 블록을 상기 연료 플레이트로 공급하는 공급 컨베이어; 상기 케이싱의 상단 외측에 배치되어, 연료 블록을 상기 연료 플레이트로부터 배출하는 배출 컨베이어; 상기 케이싱의 상단 외측에 배치되되, 상기 배출 컨베이어의 맞은편에 배치되어, 상기 연료 블록을 상기 배출 컨베이어 방향으로 이송시키는 배출 액추에이터; 및 상기 연료 플레이트에 배치되는 발화 토치;를 포함하고, 상기 연료 블록은: 소정의 육면체 형상으로 형성되되, 육면체 형상의 각 면이 소정의 철망으로 구성되고, 상기 육면체 형상의 내부에 상기 연료가 수용되도록 구성될 수 있다.And, the first grill includes: a central frame extending from an end of the robot arm; and a diverging frame extending at predetermined intervals on both sides of the central frame. It is formed in a predetermined fishbone shape, and the first heating unit includes: a second grill configured to correspond to the first grill. ; and a fuel supply unit disposed below the second grill and adjusting the supply amount of fuel based on an input from the control unit, wherein the second grill includes: a peripheral frame formed in a predetermined square shape; and a converging frame extending at predetermined intervals from both ends of the peripheral frame in an inward direction, wherein the first grill is formed to fit into the inner side of the peripheral frame, and the fuel supply unit includes: the second grille; A casing provided at the lower part of the grill and having a predetermined space therein; a fuel plate disposed inside the lower end of the casing and moving linearly in an upward and downward direction; a supply conveyor disposed outside the bottom of the casing to supply fuel blocks to the fuel plate; a discharge conveyor disposed outside the top of the casing to discharge fuel blocks from the fuel plate; a discharge actuator disposed outside the top of the casing, opposite the discharge conveyor, to transport the fuel block in the direction of the discharge conveyor; and an ignition torch disposed on the fuel plate, wherein the fuel block is: formed in a predetermined hexahedral shape, where each face of the hexahedron is composed of a predetermined wire mesh, and the fuel is accommodated inside the hexahedron. It can be configured as follows.

아울러, 상기 가열 방식 및 제1 가열 시간을 결정하는 단계는: 상기 제1 가열부로 가열하는 방식; 제2 가열부로 가열하는 방식; 제3 가열부로 가열하는 방식; 및 제1 그릴로 가열하는 방식; 중 적어도 하나를 포함하도록 가열 방식을 결정하고, 상기 제2 가열부는: 상기 제1 그릴이 안착되는 공간을 제공하며, 소정의 철망으로 구성되는 제3 그릴; 상기 제3 그릴을 수용하는 훈연실; 상기 훈연실에 상기 제1 그릴이 삽입 및 제거될 수 있도록 개폐되는 훈연도어; 상기 훈연실의 하부에 배치되며, 연료를 연소시켜 연기를 발생시키는 연소실; 상기 훈연실의 상부에 형성되는 호퍼; 상기 호퍼의 상단으로부터 상기 훈연실의 하단까지 연결되는 피드백 배관; 상기 피드백 배관의 일측에 구비되는 피드백 팬; 상기 피드백 배관의 내측에 구비되는 열선 코일; 상기 연소실에 공기를 공급하는 공기 공급 배관; 및 상기 훈연실의 하단에 연결되는 공기 배출 배관;을 포함하고, 상기 제3 가열부는: 상기 제1 그릴에 안착된 육류를 직접 가열하는 토치;를 포함하고, 상기 제1 그릴은: 상기 제1 그릴과 대응되는 형상으로 형성되는 제4 그릴; 상기 제1 그릴과 제4 그릴을 연결시키는 그릴 힌지; 상기 제1 그릴 및 제4 그릴의 표면에 구비되는 면상발열체; 및 상기 제4 그릴이 상기 제1 그릴과 대향되거나 제1 그릴로부터 이탈하도록 제4 그릴을 회전시키는 그릴 모터;를 포함하여, 상기 제1 그릴의 상부에 안착된 육류를 상기 제4 그릴로 가압하며 상기 면상발열체로 가열하도록 구성될 수 있다.In addition, the step of determining the heating method and the first heating time includes: a method of heating with the first heating unit; Heating method using a second heating unit; Heating method using a third heating unit; and heating with a first grill; A heating method is determined to include at least one of the following, wherein the second heating unit includes: a third grill that provides a space on which the first grill is seated and is made of a predetermined wire mesh; a smokehouse accommodating the third grill; a smoking door that opens and closes to allow the first grill to be inserted and removed from the smoking room; a combustion chamber disposed below the smoke chamber and generating smoke by burning fuel; A hopper formed at the top of the smoke chamber; a feedback pipe connected from the top of the hopper to the bottom of the smoke chamber; a feedback fan provided on one side of the feedback pipe; a heating coil provided inside the feedback pipe; an air supply pipe supplying air to the combustion chamber; and an air discharge pipe connected to the lower end of the smoke chamber, wherein the third heating unit includes: a torch for directly heating meat mounted on the first grill, wherein the first grill includes: the first grill. a fourth grill formed in a shape corresponding to the grill; a grill hinge connecting the first grill and the fourth grill; A planar heating element provided on the surfaces of the first grill and the fourth grill; And a grill motor that rotates the fourth grill so that the fourth grill faces the first grill or separates from the first grill; including, pressing the meat placed on the upper part of the first grill to the fourth grill; It may be configured to heat with the planar heating element.

또한, 상기 가열 방식 및 제1 가열 시간을 결정하는 단계는: 상기 제2 이미지 내에 나타나는 상기 제2 색상들 중, 최저 온도에 해당하는 제3 색상이 나타나는 제1 지점들을 추출하는 단계; 상기 제1 지점들 사이의 제1 거리를 측정하는 단계; 측정된 상기 제1 거리들을 기반으로 제1 제곱평균제곱근(Root Mean Square) 값을 산출하는 단계; 상기 제1 거리들 중, 상기 제1 제곱평균제곱근 이하의 값들을 제2 거리들로 추출하는 단계; 상기 제2 거리들을 기반으로 제2 제곱평균제곱근 값을 산출하는 단계; 상기 제2 거리들 중, 상기 제2 제곱평균제곱근 이하의 값을 가지는 제1 지점들을 제2 지점들로 지정하는 단계; 상기 제2 지점들 각각에 대하여, 상기 제2 제곱평균제곱근 값 이내의 거리에 위치한 제1 지점들의 수를 카운트하는 단계; 및 상기 제2 제곱평균제곱근 값 이내의 거리에 위치한 제1 지점들의 수가 소정의 기준값 이상인 제2 지점들을, 국지 가열 지점으로 지정하는 단계;를 포함하여, 상기 제1 가열부로 가열하는 방식, 상기 제2 가열부로 가열하는 방식 및 상기 제1 그릴로 가열하는 방식 중 적어도 하나를 포함하는 가열 방식을 수행한 뒤, 상기 제3 가열부로 상기 국지 가열 지점을 추가로 가열하도록 가열 방식을 결정하도록 구성될 수 있다.In addition, the step of determining the heating method and the first heating time includes: extracting first points where a third color corresponding to the lowest temperature appears among the second colors appearing in the second image; measuring a first distance between the first points; calculating a first root mean square value based on the measured first distances; Among the first distances, extracting values less than or equal to the first root mean square as second distances; calculating a second root mean square value based on the second distances; Among the second distances, designating first points having a value less than or equal to the second root mean square as second points; For each of the second points, counting the number of first points located at a distance within the second root mean square value; and designating as local heating points second points where the number of first points located at a distance within the second root mean square value is greater than or equal to a predetermined reference value. Including, a method of heating with the first heating unit, the first After performing a heating method including at least one of a method of heating with a second heating unit and a method of heating with the first grill, it may be configured to determine a heating method to further heat the local heating point with the third heating unit. there is.

일실시예에 따르면, 직화구이 작업에 작업자의 개입을 최소화함으로써 사람이 직화구이 작업에서 발생하는 조리 흄을 흡입하지 않도록 방지할 수 있다.According to one embodiment, by minimizing the operator's intervention in the direct fire grilling operation, it is possible to prevent people from inhaling cooking fumes generated during the direct fire grilling operation.

또한, 육류를 촬영한 영상을 인공지능을 기반으로 분석하여, 육류에 적합한 최적의 가열 방식 및 가열 시간을 도출함으로써 구이 요리의 맛과 풍미를 개선할 수 있다.In addition, the taste and flavor of grilled dishes can be improved by analyzing images of meat based on artificial intelligence to derive the optimal heating method and heating time suitable for meat.

그리고, 소정의 연료 공급 구조를 구비함으로써, 직화구이 시 불의 세기(화력)를 조절할 수 있다.And, by providing a predetermined fuel supply structure, the intensity (heating power) of the fire can be adjusted when grilling over direct fire.

아울러, 숯불/짚불 직화, 훈제, 토치 직화 및 열선 불판 등 다양한 형태의 가열방식 중 육류의 종류 및 상태에 적합한 가열 방식을 적용함으로써, 최적의 구이 요리를 제조할 수 있다.In addition, optimal grilled dishes can be produced by applying a heating method suitable for the type and condition of the meat among various types of heating methods such as charcoal/straw fire, smoked, torch fire, and hot wire grill.

또한, 육류의 온도/냉동 상태 등에 따라 화력을 조절하거나, 육류의 표면 형상이나 특성에 따라 다른 부분보다 덜 익는 부위를 추가적으로 가열함으로써, 육류를 균일하고 적절한 수준으로 가열할 수 있다.In addition, the meat can be heated to a uniform and appropriate level by adjusting the heat power according to the temperature/frozen condition of the meat, or by additionally heating parts that are less cooked than other parts depending on the surface shape or characteristics of the meat.

그리고, 국내 및 해외 유명 요리사들의 레시피를 다운받아, 다운받은 레시피를 기반으로 유명 요리사의 요리를 재현할 수 있는 로봇을 구성할 수 있다.Additionally, you can download recipes from domestic and foreign famous chefs and construct a robot that can reproduce the famous chef's dishes based on the downloaded recipes.

도 1은 본 발명의 일실시예에 따른 인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇을 나타낸 도면이다.
도 2는 본 발명의 일실시예에 따른 인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇의 제어부에서 제1 색상들을 각 등급에 따라 제2 색상으로 변환하는 과정을 예시한 도면이다.
도 3은 본 발명의 일실시예에 따른 인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇의 가열 방식 및 제1 가열 시간을 결정하는 단계을 나타낸 순서도이다.
도 4는 본 발명의 일실시예에 따른 인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇의 제1 그릴 형상을 나타낸 도면이다.
도 5는 본 발명의 일실시예에 따른 인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇의 제2 가열부를 나타낸 도면이다.
도 6은 본 발명의 일실시예에 따른 인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇의 레시피 입력장치를 나타낸 도면이다.
Figure 1 is a diagram showing a robot that cooks meat using a direct fire method using artificial intelligence according to an embodiment of the present invention.
Figure 2 is a diagram illustrating the process of converting first colors into second colors according to each grade in the control unit of a robot that cooks meat by direct fire using artificial intelligence according to an embodiment of the present invention.
Figure 3 is a flow chart showing the steps of determining the heating method and first heating time of a robot that cooks meat using a direct fire method using artificial intelligence according to an embodiment of the present invention.
Figure 4 is a diagram showing the shape of the first grill of a robot that cooks meat using a direct fire method using artificial intelligence according to an embodiment of the present invention.
Figure 5 is a diagram showing the second heating unit of a robot that cooks meat using a direct fire method using artificial intelligence according to an embodiment of the present invention.
Figure 6 is a diagram showing a recipe input device for a robot that cooks meat using a direct fire method using artificial intelligence according to an embodiment of the present invention.

이하에서, 첨부된 도면을 참조하여 실시예들을 상세하게 설명한다. 그러나, 실시예들에는 다양한 변경이 가해질 수 있어서 특허출원의 권리 범위가 이러한 실시예들에 의해 제한되거나 한정되는 것은 아니다. 실시예들에 대한 모든 변경, 균등물 내지 대체물이 권리 범위에 포함되는 것으로 이해되어야 한다.Hereinafter, embodiments will be described in detail with reference to the attached drawings. However, various changes can be made to the embodiments, so the scope of the patent application is not limited or limited by these embodiments. It should be understood that all changes, equivalents, or substitutes for the embodiments are included in the scope of rights.

실시예들에 대한 특정한 구조적 또는 기능적 설명들은 단지 예시를 위한 목적으로 개시된 것으로서, 다양한 형태로 변경되어 실시될 수 있다. 따라서, 실시예들은 특정한 개시형태로 한정되는 것이 아니며, 본 명세서의 범위는 기술적 사상에 포함되는 변경, 균등물, 또는 대체물을 포함한다.Specific structural or functional descriptions of the embodiments are disclosed for illustrative purposes only and may be modified and implemented in various forms. Accordingly, the embodiments are not limited to the specific disclosed form, and the scope of the present specification includes changes, equivalents, or substitutes included in the technical spirit.

제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 이런 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 해석되어야 한다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.Terms such as first or second may be used to describe various components, but these terms should be interpreted only for the purpose of distinguishing one component from another component. For example, a first component may be named a second component, and similarly, the second component may also be named a first component.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.When a component is referred to as being “connected” to another component, it should be understood that it may be directly connected or connected to the other component, but that other components may exist in between.

실시예에서 사용한 용어는 단지 설명을 목적으로 사용된 것으로, 한정하려는 의도로 해석되어서는 안된다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The terms used in the examples are for descriptive purposes only and should not be construed as limiting. Singular expressions include plural expressions unless the context clearly dictates otherwise. In this specification, terms such as “comprise” or “have” are intended to designate the presence of features, numbers, steps, operations, components, parts, or combinations thereof described in the specification, but are not intended to indicate the presence of one or more other features. It should be understood that this does not exclude in advance the possibility of the existence or addition of elements, numbers, steps, operations, components, parts, or combinations thereof.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as generally understood by a person of ordinary skill in the technical field to which the embodiments belong. Terms defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the related technology, and unless explicitly defined in the present application, should not be interpreted in an ideal or excessively formal sense. No.

또한, 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 실시예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 실시예의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.In addition, when describing with reference to the accompanying drawings, identical components will be assigned the same reference numerals regardless of the reference numerals, and overlapping descriptions thereof will be omitted. In describing the embodiments, if it is determined that detailed descriptions of related known technologies may unnecessarily obscure the gist of the embodiments, the detailed descriptions are omitted.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.The advantages and features of the present invention and methods for achieving them will become clear by referring to the embodiments described in detail below along with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below and will be implemented in various different forms. The present embodiments only serve to ensure that the disclosure of the present invention is complete and that common knowledge in the technical field to which the present invention pertains is not limited. It is provided to fully inform those who have the scope of the invention, and the present invention is only defined by the scope of the claims.

본 발명의 실시예들에서, 별도로 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 발명의 실시예에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.In the embodiments of the present invention, unless otherwise defined, all terms used herein, including technical or scientific terms, are the same as those commonly understood by a person of ordinary skill in the technical field to which the present invention pertains. It has meaning. Terms defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the related technology, and unless clearly defined in the embodiments of the present invention, have an ideal or excessively formal meaning. It is not interpreted as

본 발명의 실시예를 설명하기 위한 도면에 개시된 형상, 크기, 비율, 각도, 개수 등은 예시적인 것이므로 본 발명이 도시된 사항에 한정되는 것은 아니다. 또한, 본 발명을 설명함에 있어서, 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명은 생략한다. 본 명세서 상에서 언급된 ‘포함한다’, ‘갖는다’, ‘이루어진다’ 등이 사용되는 경우 ‘~만’이 사용되지 않는 이상 다른 부분이 추가될 수 있다. 구성 요소를 단수로 표현한 경우에 특별히 명시적인 기재 사항이 없는 한 복수를 포함하는 경우를 포함한다.The shapes, sizes, proportions, angles, numbers, etc. disclosed in the drawings for explaining embodiments of the present invention are illustrative, and the present invention is not limited to the matters shown. Additionally, in describing the present invention, if it is determined that a detailed description of related known technologies may unnecessarily obscure the gist of the present invention, the detailed description will be omitted. When ‘includes’, ‘has’, ‘consists of’, etc. mentioned in this specification are used, other parts may be added unless ‘only’ is used. When a component is expressed in the singular, the plural is included unless specifically stated otherwise.

구성 요소를 해석함에 있어서, 별도의 명시적 기재가 없더라도 오차 범위를 포함하는 것으로 해석한다.When interpreting a component, it is interpreted to include the margin of error even if there is no separate explicit description.

위치 관계에 대한 설명일 경우, 예를 들어, ‘~상에’, ‘~상부에’, ‘~하부에’, ‘~옆에’ 등으로 두 부분의 위치 관계가 설명되는 경우, ‘바로’ 또는 ‘직접’이 사용되지 않는 이상 두 부분 사이에 하나 이상의 다른 부분이 위치할 수도 있다.In the case of a description of a positional relationship, for example, if the positional relationship of two parts is described as 'on top', 'on the top', 'on the bottom', 'next to', etc., 'immediately' Alternatively, there may be one or more other parts placed between the two parts, unless 'directly' is used.

도면에서 나타난 각 구성의 크기 및 두께는 설명의 편의를 위해 도시된 것이며, 본 발명이 도시된 구성의 크기 및 두께에 반드시 한정되는 것은 아니다.The size and thickness of each component shown in the drawings are shown for convenience of explanation, and the present invention is not necessarily limited to the size and thickness of the components shown.

본 발명의 여러 실시예들의 각각 특징들이 부분적으로 또는 전체적으로 서로 결합 또는 조합 가능하며, 당업자가 충분히 이해할 수 있듯이 기술적으로 다양한 연동 및 구동이 가능하며, 각 실시예들이 서로에 대하여 독립적으로 실시 가능할 수도 있고 연관 관계로 함께 실시 가능할 수도 있다.Each feature of the various embodiments of the present invention can be partially or fully combined or combined with each other, and as can be fully understood by those skilled in the art, various technical interconnections and operations are possible, and each embodiment may be implemented independently of each other. It may be possible to conduct them together due to a related relationship.

일실시예에 따르면, 로봇 암(미도시); 상기 로봇 암의 단부에 탈착 가능하도록 결합되는 제1 그릴(10); 숯 또는 짚을 연료로써 연소시켜 육류를 가열하는 제1 가열부(1); 상기 제1 가열부(1)의 상부에 배치되어, 상기 제1 가열부(1)에서 발생하는 조리 흄(Cooking Fume)을 제거하는 제1 후드(11); 상기 로봇 암에 설치되어, 상기 육류를 촬영하는 카메라; 및 상기 카메라에서 촬영한 영상을 소정의 인공지능 모델에 입력하여 상기 육류의 종류 및 상태를 판단하고, 판단된 상기 육류의 종류 및 상태를 기반으로 제1 가열부(1) 및 로봇 암을 조절하는 제어부;를 포함할 수 있다.According to one embodiment, a robot arm (not shown); A first grill 10 detachably coupled to an end of the robot arm; A first heating unit (1) that heats meat by burning charcoal or straw as fuel; A first hood (11) disposed above the first heating unit (1) to remove cooking fume generated from the first heating unit (1); A camera installed on the robot arm to photograph the meat; And inputting the image captured by the camera into a predetermined artificial intelligence model to determine the type and state of the meat, and adjusting the first heating unit 1 and the robot arm based on the determined type and state of the meat. It may include a control unit.

상기 로봇 암은 제1 그릴(10)을 부착한 상태에서 제1 그릴(10) 위에 소정의 육류(예를 들어, 소고기)를 안착시킨다.The robot arm places a certain amount of meat (eg, beef) on the first grill 10 with the first grill 10 attached.

이 때, 상기 육류의 종류 및 상태를 파악하기 위하여, 상기 카메라로 상기 육류를 촬영하고, 제어부에서는 촬영된 영상을 기반으로 상기 육류의 종류 및 상태를 판단한다.At this time, in order to determine the type and condition of the meat, the meat is photographed with the camera, and the control unit determines the type and condition of the meat based on the captured image.

이후, 제1 그릴(10)을 제1 그릴(10)을 제1 가열부(1)에 삽입하고 제1 가열부(1)와 제1 후드(11)를 작동시킨다.Thereafter, the first grill 10 is inserted into the first heating unit 1 and the first heating unit 1 and the first hood 11 are operated.

상기 육류가 완전히 익은 뒤(후술하는 제1 가열 시간이 경과한 뒤), 상기 제1 그릴(10)을 제1 가열부(1)로부터 제거하여 주방 또는 고객에게 제공할 수 있다.After the meat is completely cooked (after the first heating time described later has elapsed), the first grill 10 can be removed from the first heating unit 1 and provided to the kitchen or customer.

상기 제어부는: 상기 영상으로부터 상기 육류의 종류를 닭고기, 소고기, 돼지고기, 양고기 및 생선 중 어느 하나로 특정하는 단계; 상기 영상으로부터 상기 육류의 치수를 측정하는 단계; 상기 영상으로부터 상기 육류의 지방 분포 정도를 판단하는 단계; 상기 영상으로부터 상기 육류의 표면 가공 상태를 판단하는 단계; 및 상기 육류의 종류, 치수, 지방 분포 정도 및 표면 가공 상태를 기반으로, 가열 방식 및 제1 가열 시간을 결정하는 단계;를 포함하는 방법에 따라 제어될 수 있다.The control unit: specifying the type of meat as one of chicken, beef, pork, lamb, and fish from the image; Measuring the dimensions of the meat from the image; determining the degree of fat distribution of the meat from the image; determining the surface processing state of the meat from the image; and determining a heating method and a first heating time based on the type, size, fat distribution degree, and surface processing state of the meat.

상기 인공지능 모델은, 사전에 육류의 종류별, 표면 가공 상태별 이미지들을 학습함으로써 생성된다.The artificial intelligence model is created by learning images for each type of meat and surface processing state in advance.

인공지능(Artificial Intelligence, AI) 시스템은 인간 수준의 지능을 구현하는 컴퓨터 시스템이며, 기존 규칙(Rule) 기반의 스마트 시스템과 달리 기계가 스스로 학습하고 판단하는 시스템이다. 인공지능 시스템은 사용할수록 인식률이 향상되고 사용자 취향을 보다 정확하게 이해할 수 있게 되어, 기존 규칙 기반의 스마트 시스템은 점차 심층 학습(Deep Learning) 기반 인공지능 시스템으로 대체되고 있다.An artificial intelligence (AI) system is a computer system that implements human-level intelligence, and unlike existing rule-based smart systems, it is a system in which machines learn and make decisions on their own. As artificial intelligence systems are used, their recognition rates improve and they can more accurately understand user preferences, and existing rule-based smart systems are gradually being replaced by deep learning-based artificial intelligence systems.

인공지능 기술은 기계 학습 및 기계 학습을 활용한 요소기술들로 구성된다. 기계 학습은 입력 데이터들의 특징을 스스로 분류/학습하는 알고리즘 기술이며, 요소기술은 심층 학습 등의 기계 학습 알고리즘을 활용하여 인간 두뇌의 인지, 판단 등의 기능을 모사하는 기술로서, 언어적 이해, 시각적 이해, 추론/예측, 지식 표현, 동작 제어 등의 기술 분야로 구성된다.Artificial intelligence technology consists of machine learning and element technologies using machine learning. Machine learning is an algorithmic technology that classifies/learns the characteristics of input data on its own, and elemental technology is a technology that mimics the functions of the human brain such as cognition and judgment by utilizing machine learning algorithms such as deep learning, including linguistic understanding and visual It consists of technical areas such as understanding, reasoning/prediction, knowledge expression, and motion control.

인공지능 기술이 응용되는 다양한 분야는 다음과 같다. 언어적 이해는 인간의 언어/문자를 인식하고 응용/처리하는 기술로서, 자연어 처리, 기계 번역, 대화시스템, 질의 응답, 음성 인식/합성 등을 포함한다. 시각적 이해는 사물을 인간의 시각처럼 인식하여 처리하는 기술로서, 객체 인식, 객체 추적, 영상 검색, 사람 인식, 장면 이해, 공간 이해, 영상 개선 등을 포함한다. 추론 예측은 정보를 판단하여 논리적으로 추론하고 예측하는 기술로서, 지식/확률 기반 추론, 최적화 예측, 선호 기반 계획, 추천 등을 포함한다. 지식 표현은 인간의 경험정보를 지식데이터로 자동화 처리하는 기술로서, 지식 구축(데이터 생성/분류), 지식 관리(데이터 활용) 등을 포함한다. 동작 제어는 차량의 자율 주행, 로봇의 움직임을 제어하는 기술로서, 움직임 제어(항법, 충돌, 주행), 조작 제어(행동 제어) 등을 포함한다.The various fields where artificial intelligence technology is applied are as follows. Linguistic understanding is a technology that recognizes and applies/processes human language/characters and includes natural language processing, machine translation, conversation systems, question and answer, and voice recognition/synthesis. Visual understanding is a technology that recognizes and processes objects like human vision, and includes object recognition, object tracking, image search, person recognition, scene understanding, spatial understanding, and image improvement. Inferential prediction is a technology that judges information to make logical inferences and predictions, and includes knowledge/probability-based reasoning, optimization prediction, preference-based planning, and recommendations. Knowledge expression is a technology that automatically processes human experience information into knowledge data, and includes knowledge construction (data creation/classification) and knowledge management (data utilization). Motion control is a technology that controls the autonomous driving of vehicles and the movement of robots, and includes motion control (navigation, collision, driving), operation control (behavior control), etc.

일반적으로 기계 학습 알고리즘을 실생활에 적용하기 위해서는 기계 학습의 기본 방법론의 특성상 Trial and Error 방식으로 학습을 수행하게 된다. 특히, 심층 학습의 경우 수십만 번의 반복 실행을 필요로 한다. 이를 실제 물리적인 외부 환경에서 실행하기는 불가능하여 대신 실제 물리적인 외부 환경을 컴퓨터상에서 가상으로 구현하여 시뮬레이션을 통해 학습을 수행한다.Generally, in order to apply machine learning algorithms to real life, learning is performed using a trial and error method due to the nature of the basic methodology of machine learning. In particular, deep learning requires hundreds of thousands of iterations. It is impossible to execute this in an actual physical external environment, so instead, the actual physical external environment is virtually implemented on a computer and learning is performed through simulation.

한편, 상기 로봇은 인터넷에 연결되어, 사용자가 인터넷을 통해 다운받은 소정의 레시피를 기반으로 육류 조리를 수행할 수 있다.Meanwhile, the robot is connected to the Internet and can cook meat based on a predetermined recipe downloaded by the user through the Internet.

예를 들어, 국내/국외 유명 요리사들의 레시피를 기초로 작성된 육류 조리 방법 및 요리 방법을 기반으로, 상기 로봇/로봇 암이 동작하여 육류를 조리한 음식을 제조할 수 있다.For example, based on a meat cooking method and a cooking method written based on recipes from domestic/international famous chefs, the robot/robotic arm can operate to produce food made with cooked meat.

도 6에 도시된 바와 같이, 사용자에 의해 레시피 입력장치(D)에 입력된 레시피 또는 인터넷에서 다운로드받은 레시피는 로봇 암(R)에 전달되어, 제1 가열부 내지 제3 가열부, 후드 등의 구성요소를 제어함으로서 레시피에 기록된 조리 방법들을 수행할 수 있다.As shown in FIG. 6, the recipe input by the user into the recipe input device (D) or the recipe downloaded from the Internet is transmitted to the robot arm (R), and is used to heat the first to third heating units, the hood, etc. By controlling the components, you can perform the cooking methods recorded in the recipe.

또한, 상기 카메라에는: 가시광선 카메라 및 열화상 카메라가 포함될 수 있다.Additionally, the cameras may include: visible light cameras and thermal imaging cameras.

상기 가시광선 카메라는 일반적인 RGB 카메라 등으로써, 상기 육류의 치수, 지방 분포 정도, 표면 가공 상태를 판단하기 위한 일반 영상을 획득하기 위하여 사용된다.The visible light camera is a general RGB camera, etc., and is used to obtain general images for determining the size, degree of fat distribution, and surface processing status of the meat.

한편, 상기 열화상 카메라는 상기 육류의 온도/냉동 상태/부위별 비열/열전도율 등을 판단하기 위한 열화상 영상을 획득하기 위하여 사용된다.Meanwhile, the thermal imaging camera is used to acquire thermal imaging images to determine the temperature/frozen state/specific heat/thermal conductivity of each part of the meat, etc.

상기 가열 방식 및 제1 가열 시간을 결정하는 단계는: 상기 육류의 종류, 치수, 지방 분포 정도 및 표면 가공 상태를 기반으로, 가열 방식 및 제2 가열 시간을 결정하는 단계(S100); 상기 육류로부터 소정의 거리만큼 이격된 위치에 소정의 복사열 패널을 배치하는 단계(S200); 상기 복사열 패널을 작동시켜, 상기 육류를 가열하는 단계(S300); 상기 열화상 영상의 제1 시점에서 제1 이미지를 추출하는 단계(S400); 상기 열화상 영상의 제1 시점으로부터 소정의 시간이 경과한 제2 시점에서 제2 이미지를 추출하는 단계(S500); 상기 복사열 패널을 정지시켜, 상기 육류의 가열을 중단하는 단계(S600); 상기 제2 이미지로부터, 상기 제2 이미지에서 나타나는 최저 온도부터 최고 온도까지의 색상 스펙트럼을 생성하는 단계(S700); 상기 색상 스펙트럼을 기반으로, 상기 제2 이미지에서 나타나는 최저 온도부터 최고 온도까지의 색상을 적어도 5개 이상의 등급으로 구분하는 단계(S800); 상기 등급을 기반으로, 상기 제1 이미지 및 제2 이미지에 나타나는 제1 색상(C1)들을 각 등급에 따라 제2 색상(C2)으로 변환하는 단계(S900); 상기 제2 색상(C2)들이 상기 제1 이미지 내에서 나타나는 제1 픽셀 수들을 각 제2 색상(C2)마다 카운트하는 단계(S1000); 상기 제2 색상(C2)들이 상기 제2 이미지 내에서 나타나는 제2 픽셀 수들을 각 제2 색상(C2)마다 카운트하는 단계(S1100); [제2 픽셀 수 / 제1 픽셀 수 = 제1 비율]을 상기 각 제2 색상(C2)마다 산출하는 단계(S1200); 및 상기 제1 비율을 기반으로, 제2 가열 시간에 소정의 보정치를 반영하여 제1 가열 시간을 산출하는 단계(S1300);를 포함할 수 있다.The step of determining the heating method and the first heating time includes: determining the heating method and the second heating time based on the type, size, degree of fat distribution, and surface processing state of the meat (S100); Placing a predetermined radiant heat panel at a position spaced apart from the meat by a predetermined distance (S200); Operating the radiant heat panel to heat the meat (S300); Extracting a first image from a first viewpoint of the thermal image (S400); Extracting a second image from a second viewpoint after a predetermined time has elapsed from the first viewpoint of the thermal image (S500); Stopping the radiant heat panel to stop heating the meat (S600); Generating, from the second image, a color spectrum from the lowest temperature to the highest temperature appearing in the second image (S700); Based on the color spectrum, classifying the colors from the lowest temperature to the highest temperature appearing in the second image into at least five grades (S800); Based on the grade, converting the first color (C1) appearing in the first image and the second image into a second color (C2) according to each grade (S900); Counting the number of first pixels in which the second colors (C2) appear in the first image for each second color (C2) (S1000); Counting the number of second pixels in which the second colors (C2) appear in the second image for each second color (C2) (S1100); Calculating [number of second pixels / number of first pixels = first ratio] for each second color (C2) (S1200); And based on the first ratio, calculating the first heating time by reflecting a predetermined correction value in the second heating time (S1300).

상기 육류의 종류, 치수, 지방 분포 정도 및 표면 가공 상태를 기반으로, 가열 방식 및 제2 가열 시간을 결정하는 단계(S100)에서는, 상기 인공지능 모델에 기 학습된 데이터를 기반으로, 상기 육류을 어떤 방식으로 조리/가열하고, 얼마만큼의 시간동안 또는 얼마만큼의 열을 가해야 하는지를 결정한다.In the step (S100) of determining the heating method and the second heating time based on the type, size, fat distribution degree, and surface processing state of the meat, based on data previously learned in the artificial intelligence model, the meat is Cook/heat method and determine how long or how much heat should be applied.

이 때, 일반 영상을 기반으로는 육류의 온도/냉동 상태나 비열, 열전도율 등을 정확하게 파악하기 어려우므로, 상기 열화상 영상을 기반으로 온도를 측정함으로써 해당 육류의 온도/냉동 상태에서는 얼마만큼의 열을 더 가해야 하는지(가열 시간을 얼마나 조절해야 하는지)를 판단할 수 있다.At this time, it is difficult to accurately determine the temperature/frozen state, specific heat, and thermal conductivity of the meat based on general images, so it is difficult to measure the temperature based on the thermal image to determine how much heat is present in the temperature/frozen state of the meat. You can determine whether more should be added (how much the heating time should be adjusted).

상기 육류로부터 소정의 거리만큼 이격된 위치에 소정의 복사열 패널을 배치하는 단계(S200); 및 상기 복사열 패널을 작동시켜, 상기 육류를 가열하는 단계(S300);에서는, 상기 육류의 품질이나 가공 상태 등에의 영향을 최소화하기 위하여 상기와 같은 복사열 패널을 기반으로 미량의 열을 가하면서 육류의 온도 변화를 관찰한다.Placing a predetermined radiant heat panel at a position spaced apart from the meat by a predetermined distance (S200); And operating the radiant heat panel to heat the meat (S300); In order to minimize the impact on the quality or processing state of the meat, a small amount of heat is applied based on the radiant heat panel as described above to heat the meat. Observe temperature changes.

상기 열화상 영상의 제1 시점에서 제1 이미지를 추출하는 단계(S400); 상기 열화상 영상의 제1 시점으로부터 소정의 시간이 경과한 제2 시점에서 제2 이미지를 추출하는 단계(S500); 및 상기 복사열 패널을 정지시켜, 상기 육류의 가열을 중단하는 단계(S600);에서는, 소정의 시간동안 상기 육류가 가열되어 변화되는 온도의 추이를 열화상 영상을 기반으로 확인할 수 있다.Extracting a first image from a first viewpoint of the thermal image (S400); Extracting a second image from a second viewpoint after a predetermined time has elapsed from the first viewpoint of the thermal image (S500); and stopping the radiant heat panel to stop heating the meat (S600). In the step (S600), the temperature change as the meat is heated for a predetermined period of time can be confirmed based on the thermal image.

예를 들어, 제1 시점으로부터 제2 시점까지의 시간 간격은 5초 내지 10초 가량으로 조절될 수 있다.For example, the time interval from the first time point to the second time point can be adjusted to about 5 to 10 seconds.

상기 제2 이미지로부터, 상기 제2 이미지에서 나타나는 최저 온도부터 최고 온도까지의 색상 스펙트럼을 생성하는 단계(S700)에서는, 도 2 (a)에 도시된 바와 같이 제2 이미지에 나타나는 열화상 색상들을 기반으로 소정의 스펙트럼을 생성한다.From the second image, in the step (S700) of generating a color spectrum from the lowest temperature to the highest temperature appearing in the second image, based on the thermal image colors appearing in the second image, as shown in FIG. 2 (a) generates a predetermined spectrum.

상기 색상 스펙트럼을 기반으로, 상기 제2 이미지에서 나타나는 최저 온도부터 최고 온도까지의 색상을 적어도 5개 이상의 등급으로 구분하는 단계(S800); 및 상기 등급을 기반으로, 상기 제1 이미지 및 제2 이미지에 나타나는 제1 색상(C1)들을 각 등급에 따라 제2 색상(C2)으로 변환하는 단계(S900);에서는, 색상 스펙트럼에 포함된 색상들을 다수개의 등급으로 구분하여, 등급별 색상으로 제1 색상(C1)을 제2 색상(C2)으로 치환하여 도 2 (b)의 형태로 변환한다.Based on the color spectrum, classifying the colors from the lowest temperature to the highest temperature appearing in the second image into at least five grades (S800); And based on the grade, converting the first color (C1) appearing in the first image and the second image into a second color (C2) according to each grade (S900); In the color included in the color spectrum, The colors are divided into a plurality of grades, and the first color (C1) is replaced with the second color (C2) according to the color of each grade, thereby converting the color into the form shown in Figure 2 (b).

상기 제2 색상(C2)들이 상기 제1 이미지 내에서 나타나는 제1 픽셀 수들을 각 제2 색상(C2)마다 카운트하는 단계(S1000)에서는, 예를 들어 제1 이미지 내에 빨간색 등급의 제1 픽셀 수가 몇 개인지, 노란색 등급의 제1 픽셀 수가 몇 개인지 등을 카운트할 수 있다.In the step (S1000) of counting the first pixel numbers in which the second colors C2 appear in the first image for each second color C2, for example, the number of first pixels of the red grade in the first image is It is possible to count how many there are, how many first pixels are in the yellow grade, etc.

상기 제2 색상(C2)들이 상기 제2 이미지 내에서 나타나는 제2 픽셀 수들을 각 제2 색상(C2)마다 카운트하는 단계(S1100)에서는, 예를 들어 제1 이미지 내에 빨간색 등급의 제2 픽셀 수가 몇 개인지, 노란색 등급의 제2 픽셀 수가 몇 개인지 등을 카운트할 수 있다.In the step (S1100) of counting the number of second pixels in which the second color C2 appears in the second image for each second color C2, for example, the number of second pixels of the red level in the first image is It is possible to count how many there are, how many second pixels are in the yellow grade, etc.

[제2 픽셀 수 / 제1 픽셀 수 = 제1 비율]을 상기 각 제2 색상(C2)마다 산출하는 단계(S1200)에서는, 제1 비율을 산출함으로써 온도 변화 추이/온도 변화율을 추정할 수 있다.In the step (S1200) of calculating [number of second pixels / number of first pixels = first ratio] for each second color (C2), the temperature change trend/temperature change rate can be estimated by calculating the first ratio. .

상기 제1 비율을 기반으로, 제2 가열 시간에 소정의 보정치를 반영하여 제1 가열 시간을 산출하는 단계(S1300)에서는, 산출된 제1 비율을 기반으로 온도 변화 추이/온도 변화율을 추정함으로써, 해당 육류의 냉동 상태, 열전도율, 비열 등을 추정하고 이를 반영하여 제2 가열 시간에 소정의 보정치를 반영한 제1 가열 시간을 산출한다.In the step (S1300) of calculating the first heating time by reflecting a predetermined correction value in the second heating time based on the first ratio, the temperature change trend/temperature change rate is estimated based on the calculated first ratio, The frozen state, thermal conductivity, specific heat, etc. of the meat in question are estimated and reflected to calculate the first heating time by reflecting a predetermined correction value in the second heating time.

예를 들어, 상기 육류가 강하게 냉동된 상태인 경우에는 제2 가열 시간보다 더 긴 제1 가열 시간이 도출될 수 있고, 상기 육류가 완전히 해동된 상태인 경우에는 제2 가열 시간보다 더 짧은 제1 가열시간이 도출될 수도 있다.For example, if the meat is in a strongly frozen state, a first heating time that is longer than the second heating time may be derived, and if the meat is in a completely thawed state, a first heating time that is shorter than the second heating time may be derived. Heating time may also be derived.

그리고, 상기 제1 그릴(10)은: 상기 로봇 암의 단부로부터 신장되는 중심 프레임(101); 및 상기 중심 프레임(101)의 양측으로 소정의 간격마다 신장되는 발산 프레임(102);을 포함하여, 소정의 어골(魚骨) 형상으로 형성될 수 있다.And, the first grill 10 includes: a central frame 101 extending from an end of the robot arm; and a diverging frame 102 extending at predetermined intervals on both sides of the central frame 101. It may be formed in a predetermined fishbone shape.

상기 제1 그릴(10)의 형상은 도 4 (a) 하부에 도시되어 있다.The shape of the first grill 10 is shown in the lower part of FIG. 4 (a).

상기 제1 가열부(1)는: 상기 제1 그릴(10)에 대응하도록 구성되는 제2 그릴(12); 및 상기 제2 그릴(12)의 하부에 배치되어, 상기 제어부의 입력을 기반으로 연료의 공급량을 조절하는 연료 공급부;를 포함할 수 있다.The first heating unit 1 includes: a second grill 12 configured to correspond to the first grill 10; and a fuel supply unit disposed below the second grill 12 to adjust the amount of fuel supplied based on the input from the control unit.

상기 제2 그릴(12)은: 소정의 사각형 형상으로 형성되는 주변 프레임(121); 및 상기 주변 프레임(121)의 양단으로부터 내측 방향으로 소정의 간격마다 신장되는 수렴 프레임(122);을 포함하여, 상기 제1 그릴(10)이 상기 주변 프레임(121)의 내측에 대응되어 끼워맞춤 되도록 형성될 수 있다.The second grill 12 includes: a peripheral frame 121 formed in a predetermined square shape; and a converging frame 122 extending at predetermined intervals in an inward direction from both ends of the peripheral frame 121, wherein the first grill 10 is fitted to correspond to the inside of the peripheral frame 121. It can be formed as much as possible.

상기 제2 그릴(12)의 형상은 도 4 (a) 상부에 도시되어 있다.The shape of the second grill 12 is shown in the upper part of FIG. 4 (a).

상기 가열 방식에 따라, 상기 제1 그릴(10)을 제2 그릴(12)의 내측에 끼워넣은 상태로 가열하거나, 도 4 (b)에 도시된 바와 같이 상기 발산 프레임(102)과 수렴 프레임(122)을 겹쳐 상기 주변 프레임(121)의 내측이 노출된 상태로 가열할 수도 있다.Depending on the heating method, the first grill 10 is heated while inserted inside the second grill 12, or the diverging frame 102 and the converging frame are heated as shown in FIG. 4 (b). 122) may be overlapped and heated in a state where the inside of the peripheral frame 121 is exposed.

도 4 (b)에 도시된 형태로 가열하는 경우에는, 열기 및 연기 등이 육류에 보다 직접적으로 전달되므로 육류를 보다 강하게 가열시킬 수 있다.When heating in the form shown in Figure 4 (b), heat and smoke are transmitted more directly to the meat, so the meat can be heated more strongly.

상기 연료 공급부는: 상기 제2 그릴(12)의 하부에 구비되며, 내부에 소정의 공간이 형성되는 케이싱(13); 상기 케이싱(13)의 하단 내측에 배치되어, 상하 방향으로 직선운동하는 연료 플레이트(14); 상기 케이싱(13)의 하단 외측에 배치되어, 연료 블록(18)을 상기 연료 플레이트(14)로 공급하는 공급 컨베이어(15); 상기 케이싱(13)의 상단 외측에 배치되어, 연료 블록(18)을 상기 연료 플레이트(14)로부터 배출하는 배출 컨베이어(16); 상기 케이싱(13)의 상단 외측에 배치되되, 상기 배출 컨베이어(16)의 맞은편에 배치되어, 상기 연료 블록(18)을 상기 배출 컨베이어(16) 방향으로 이송시키는 배출 액추에이터(17); 및 상기 연료 플레이트(14)에 배치되는 발화 토치;를 포함할 수 있다.The fuel supply unit includes: a casing 13 provided at a lower portion of the second grill 12 and having a predetermined space therein; a fuel plate 14 disposed inside the lower end of the casing 13 and moving linearly in an upward and downward direction; a supply conveyor 15 disposed outside the lower end of the casing 13 and supplying fuel blocks 18 to the fuel plate 14; a discharge conveyor 16 disposed outside the top of the casing 13 and discharging the fuel block 18 from the fuel plate 14; A discharge actuator 17 disposed outside the top of the casing 13 and opposite the discharge conveyor 16 to transport the fuel block 18 toward the discharge conveyor 16; and an ignition torch disposed on the fuel plate 14.

이하, 도 1을 참조하여 상기 연료 공급부의 동작 방법을 설명한다.Hereinafter, a method of operating the fuel supply unit will be described with reference to FIG. 1.

도 1 (a)에 도시된 바와 같이, 상기 공급 컨베이어(15)에 안착된 연료 블록(18)들을 도면 상에서 오른쪽 방향으로 이송시켜 상기 연료 플레이트(14)의 상부에 낙하/안착시킨다. 도 1에서는 설명의 편의를 위하여 상기 공급 컨베이어(15) 및 배출 컨베이어(16)의 길이를 실제보다 짧게 도시하였다.As shown in FIG. 1 (a), the fuel blocks 18 seated on the supply conveyor 15 are transferred in the right direction in the drawing and dropped/seated on the top of the fuel plate 14. In Figure 1, for convenience of explanation, the length of the supply conveyor 15 and the discharge conveyor 16 is shown shorter than the actual length.

상기 가열 방식(화력)에 맞추어 적절한 만큼의 연로 블록이 공급되었다면(도 1은 3개의 연료 블록(18)이 공급된 상태), 상기 연료 플레이트(14)를 상부로 이송시키며 연료 플레이트(14)에 연결된 발화 토치를 작동시켜 연료 블록(18) 내부의 연료(숯 또는 짚)를 점화/발화시킨다.If an appropriate amount of fuel blocks have been supplied according to the heating method (heating power) (Figure 1 shows a state where three fuel blocks 18 are supplied), the fuel plate 14 is transferred upward and placed on the fuel plate 14. The connected ignition torch is operated to ignite/ignite the fuel (charcoal or straw) inside the fuel block (18).

상기 연료가 연소되어 교체가 필요한 경우에는, 상기 배출 액추에이터(17)를 작동시켜 연료 블록(18)을 도면 상에서 왼쪽 방향으로 이송시키며, 이어서 상기 배출 컨베이어(16)를 작동시켜 연료 블록(18)을 케이싱(13)으로부터 제거한다.When the fuel is burned and needs to be replaced, the discharge actuator 17 is operated to transport the fuel block 18 to the left in the drawing, and the discharge conveyor 16 is then operated to move the fuel block 18. Remove from casing (13).

하나의 연료 블록(18)을 제거한 뒤에는 상기 배출 액추에이터(17)를 다시 오른쪽으로 탈거하고, 상기 연료 플레이트(14)를 상부로 이송시킨 뒤 전술한 연료 블록(18) 배출 과정을 반복 수행한다.After removing one fuel block 18, the discharge actuator 17 is removed again to the right, the fuel plate 14 is transferred upward, and the above-described fuel block 18 discharge process is repeated.

상기 연료 블록(18)은: 소정의 육면체 형상으로 형성되되, 육면체 형상의 각 면이 소정의 철망으로 구성되고, 상기 육면체 형상의 내부에 상기 연료가 수용되도록 구성될 수 있다.The fuel block 18 may be formed in a predetermined hexahedral shape, with each face of the hexahedron being made of a predetermined wire mesh, and configured to accommodate the fuel inside the hexahedron shape.

작업자는 상기 연료 블록(18)에 균일한 양의 연료(숯 또는 짚)를 충진시켜 보관 및 상기 공급 컨베이어(15)로 공급할 수 있다.The operator can fill the fuel block 18 with a uniform amount of fuel (charcoal or straw), store it, and supply it to the supply conveyor 15.

아울러, 상기 가열 방식 및 제1 가열 시간을 결정하는 단계는: 상기 제1 가열부(1)로 가열하는 방식; 제2 가열부(2)로 가열하는 방식; 제3 가열부로 가열하는 방식; 및 제1 그릴(10)로 가열하는 방식; 중 적어도 하나를 포함하도록 가열 방식을 결정할 수 있다.In addition, the step of determining the heating method and the first heating time includes: heating with the first heating unit 1; Heating method using the second heating unit (2); Heating method using a third heating unit; And a method of heating with the first grill (10); The heating method may be determined to include at least one of the following.

상기 육류의 종류 및 상태를 기반으로, 상기 육류를 숯불/짚불로 가열할 지, 훈연하여 가열할 지, 열선(제1 그릴(10))으로 가열할 지, 토치로 가열할 지를 결정할 수 있다.Based on the type and condition of the meat, it can be determined whether to heat the meat with charcoal/straw fire, smoking, heating with a heating wire (first grill 10), or heating with a torch.

이 때, 조리 방법에 따라 상기 방식들 중 복수개의 방식을 사용할 수도 있다.At this time, depending on the cooking method, multiple methods among the above methods may be used.

상기 제2 가열부(2)는: 상기 제1 그릴(10)이 안착되는 공간을 제공하며, 소정의 철망으로 구성되는 제3 그릴; 상기 제3 그릴을 수용하는 훈연실(21); 상기 훈연실(21)에 상기 제1 그릴(10)이 삽입 및 제거될 수 있도록 개폐되는 훈연도어(210); 상기 훈연실(21)의 하부에 배치되며, 연료를 연소시켜 연기를 발생시키는 연소실(22); 상기 훈연실(21)의 상부에 형성되는 호퍼(23); 상기 호퍼(23)의 상단으로부터 상기 훈연실(21)의 하단까지 연결되는 피드백 배관(24); 상기 피드백 배관(24)의 일측에 구비되는 피드백 팬; 상기 피드백 배관(24)의 내측에 구비되는 열선 코일; 상기 연소실(22)에 공기를 공급하는 공기 공급 배관(25); 및 상기 훈연실(21)의 하단에 연결되는 공기 배출 배관(26);을 포함할 수 있다.The second heating unit 2 includes: a third grill that provides a space on which the first grill 10 is seated and is made of a predetermined wire mesh; a smokehouse (21) accommodating the third grill; a smoking door 210 that opens and closes to allow the first grill 10 to be inserted and removed from the smoke chamber 21; A combustion chamber 22 disposed below the smoke chamber 21 and generating smoke by burning fuel; A hopper 23 formed at the top of the smoke chamber 21; a feedback pipe 24 connected from the top of the hopper 23 to the bottom of the smoke chamber 21; a feedback fan provided on one side of the feedback pipe 24; a heating coil provided inside the feedback pipe 24; an air supply pipe (25) supplying air to the combustion chamber (22); and an air discharge pipe 26 connected to the lower end of the smoke chamber 21.

도 5에는 상기 제2 가열부(2)의 구조가 도시되어 있다.Figure 5 shows the structure of the second heating unit 2.

연소실(22) 내부에는 연기를 발생시키기 위한 소정의 연료가 수용될 수 있다.Inside the combustion chamber 22, a certain amount of fuel for generating smoke can be accommodated.

상기 연소실(22)에 연결된 공기 공급 배관(25)을 통해 공기를 공급받아 상기 연료를 연소시키며, 여기서 발생한 연기는 훈연실(21)과 연소실(22) 사이에 형성된 통공들을 통해 상부(훈연실(21) 방향)로 대류한다.The fuel is combusted by receiving air through an air supply pipe 25 connected to the combustion chamber 22, and the smoke generated here is transmitted to the upper part (smoke chamber) through the holes formed between the smoke chamber 21 and the combustion chamber 22. 21) direction).

훈연실(21) 내부의 연기가 외부로 유출되지 않도록, 상기 훈연도어(210)는 제1 그릴(10)을 통해 훈연실(21) 내부 제3 그릴에 육류를 공급할 때에만 개방되도록 제어된다.To prevent smoke inside the smoke room 21 from leaking out, the smoke door 210 is controlled to be opened only when meat is supplied to the third grill inside the smoke room 21 through the first grill 10.

상기 공기 배출 배관(26)에는 소정의 밸브가 구비되어, 연기/공기를 배출할 필요가 있을 때에 한해 공기를 배출한다.The air discharge pipe 26 is equipped with a predetermined valve to discharge air only when smoke/air needs to be discharged.

상기 연기들은 훈연실(21) 내부에서 상부 방향으로 흘러가며 육류를 훈연 가열하며, 상단의 호퍼(23)-피드백 배관(24)을 통해 다시 훈연실(21)로 재공급된다.The smoke flows upward inside the smoke room 21, smokes and heats the meat, and is supplied back to the smoke room 21 through the hopper 23-feedback pipe 24 at the top.

이러한 재공급 구조에 따라, 열효율을 향상시키고 상기 육류에 훈현 향이 더 짙게 베이도록 조리할 수 있다.According to this resupply structure, thermal efficiency can be improved and the meat can be cooked to have a deeper smoked flavor.

상기 제3 가열부는: 상기 제1 그릴(10)에 안착된 육류를 직접 가열하는 토치;를 포함할 수 있다.The third heating unit may include a torch that directly heats the meat placed on the first grill 10.

상기 제3 가열부는 소고기 타다끼 초밥 등, 토치로 육류를 직접 가열할 필요가 있는 경우 등에 사용될 수 있다.The third heating unit can be used in cases where it is necessary to directly heat meat with a torch, such as beef tataki sushi.

상기 제1 그릴(10)은: 상기 제1 그릴(10)과 대응되는 형상으로 형성되는 제4 그릴(3); 상기 제1 그릴(10)과 제4 그릴(3)을 연결시키는 그릴 힌지(30); 상기 제1 그릴(10) 및 제4 그릴(3)의 표면에 구비되는 면상발열체(31); 및 상기 제4 그릴(3)이 상기 제1 그릴(10)과 대향되거나 제1 그릴(10)로부터 이탈하도록 제4 그릴(3)을 회전시키는 그릴 모터;를 포함하여, 상기 제1 그릴(10)의 상부에 안착된 육류를 상기 제4 그릴(3)로 가압하며 상기 면상발열체(31)로 가열하도록 구성될 수 있다.The first grill 10 includes: a fourth grill 3 formed in a shape corresponding to the first grill 10; a grill hinge 30 connecting the first grill 10 and the fourth grill 3; A planar heating element 31 provided on the surfaces of the first grill 10 and the fourth grill 3; and a grill motor that rotates the fourth grill 3 so that the fourth grill 3 faces the first grill 10 or separates from the first grill 10. ) can be configured to pressurize the meat seated on the upper part of the meat with the fourth grill (3) and heat it with the planar heating element (31).

도 4 (c)에 도시된 바와 같이, 상기 제1 그릴(10)은 제4 그릴(3)과 힌지를 기반으로 절첩되며, 그 사이에 육류를 안착시켜 가열/조리할 수 있도록 구성된다.As shown in Figure 4 (c), the first grill 10 is folded based on a hinge with the fourth grill 3, and is configured to heat/cook meat by seating it between them.

이 때, 상기 제1 그릴(10)과 제4 그릴(3)의 표면에 부착된 면상발열체(31)가 상기 육류를 직접 가열한다.At this time, the planar heating element 31 attached to the surface of the first grill 10 and the fourth grill 3 directly heats the meat.

또한, 상기 가열 방식 및 제1 가열 시간을 결정하는 단계는: 상기 제2 이미지 내에 나타나는 상기 제2 색상(C2)들 중, 최저 온도에 해당하는 제3 색상이 나타나는 제1 지점들을 추출하는 단계; 상기 제1 지점들 사이의 제1 거리를 측정하는 단계; 측정된 상기 제1 거리들을 기반으로 제1 제곱평균제곱근(Root Mean Square) 값을 산출하는 단계; 상기 제1 거리들 중, 상기 제1 제곱평균제곱근 이하의 값들을 제2 거리들로 추출하는 단계; 상기 제2 거리들을 기반으로 제2 제곱평균제곱근 값을 산출하는 단계; 상기 제2 거리들 중, 상기 제2 제곱평균제곱근 이하의 값을 가지는 제1 지점들을 제2 지점들로 지정하는 단계; 상기 제2 지점들 각각에 대하여, 상기 제2 제곱평균제곱근 값 이내의 거리에 위치한 제1 지점들의 수를 카운트하는 단계; 및 상기 제2 제곱평균제곱근 값 이내의 거리에 위치한 제1 지점들의 수가 소정의 기준값 이상인 제2 지점들을, 국지 가열 지점으로 지정하는 단계;를 포함하여, 상기 제1 가열부(1)로 가열하는 방식, 상기 제2 가열부(2)로 가열하는 방식 및 상기 제1 그릴(10)로 가열하는 방식 중 적어도 하나를 포함하는 가열 방식을 수행한 뒤, 상기 제3 가열부로 상기 국지 가열 지점을 추가로 가열하도록 가열 방식을 결정하도록 구성될 수 있다.In addition, the step of determining the heating method and the first heating time includes: extracting first points where a third color corresponding to the lowest temperature appears among the second colors (C2) appearing in the second image; measuring a first distance between the first points; calculating a first root mean square value based on the measured first distances; Among the first distances, extracting values less than or equal to the first root mean square as second distances; calculating a second root mean square value based on the second distances; Among the second distances, designating first points having a value less than or equal to the second root mean square as second points; For each of the second points, counting the number of first points located at a distance within the second root mean square value; And designating second points where the number of first points located at a distance within the second root mean square value is more than a predetermined reference value as local heating points, including heating with the first heating unit (1). After performing a heating method including at least one of a heating method, a method of heating with the second heating unit 2, and a method of heating with the first grill 10, the local heating point is added to the third heating unit. It may be configured to determine a heating method to heat.

상기와 같은 단계들에 따르면, 촬영된 열화상 영상으로부터 추출된 제2 이미지에서 연기 등의 외란이나 노이즈에 의해 촬영된 최저 온도 지점들을 제거하고, 실제로 온도가 낮은(비열, 열전도율 등) 지점들만을 추출하여 국지 가열 지점으로 지정할 수 있다.According to the above steps, the lowest temperature points captured by disturbances such as smoke or noise are removed from the second image extracted from the captured thermal image, and only the points with actually low temperatures (specific heat, thermal conductivity, etc.) are removed. It can be extracted and designated as a local heating point.

육류의 어느 지점, 예를 들어 뼈나 오돌뼈나 위치한 지점, 해동이 덜된 지점 등에서 온도/비열/열전도율 편차가 발생하는 경우에는 상기 토치로 편차가 발생한 지점들만을 추가로 가열함으로써 육류의 가열 상태를 균일하게 만들 수 있다.If a deviation in temperature/specific heat/thermal conductivity occurs at any point in the meat, for example, at a point located on a bone, a bone, or a point that is less thawed, the heating condition of the meat can be made uniform by additionally heating only the points where the deviation occurred with the torch. You can.

이상 첨부된 도면을 참조하여 본 발명의 실시예들을 더욱 상세하게 설명하였으나, 본 발명은 반드시 이러한 실시예로 국한되는 것은 아니고, 본 발명의 기술사상을 벗어나지 않는 범위 내에서 다양하게 변형 실시될 수 있다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 그러므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.Although embodiments of the present invention have been described in more detail with reference to the accompanying drawings, the present invention is not necessarily limited to these embodiments, and various modifications may be made without departing from the technical spirit of the present invention. . Accordingly, the embodiments disclosed in the present invention are not intended to limit the technical idea of the present invention, but are for illustrative purposes, and the scope of the technical idea of the present invention is not limited by these embodiments. Therefore, the embodiments described above should be understood in all respects as illustrative and not restrictive. The scope of protection of the present invention should be interpreted in accordance with the claims below, and all technical ideas within the equivalent scope should be construed as being included in the scope of rights of the present invention.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents of the claims also fall within the scope of the following claims.

S100 : 가열 방식 및 제2 가열 시간을 결정하는 단계
S200 : 복사열 패널을 배치하는 단계
S300 : 육류를 가열하는 단계
S400 : 제1 이미지를 추출하는 단계
S500 : 제2 이미지를 추출하는 단계
S600 : 육류의 가열을 중단하는 단계
S700 : 색상 스펙트럼을 생성하는 단계
S800 : 최저 온도부터 최고 온도까지의 색상을 적어도 5개 이상의 등급으로 구분하는 단계
S900 : 제1 색상들을 각 등급에 따라 제2 색상으로 변환하는 단계
S1000 : 제1 픽셀 수들을 각 제2 색상마다 카운트하는 단계
S1100 : 제2 픽셀 수들을 각 제2 색상마다 카운트하는 단계
S1200 : 제1 비율을 각 제2 색상마다 산출하는 단계
S1300 : 제1 가열 시간을 산출하는 단계
1 : 제1 가열부
10 : 제1 그릴
101 : 중심 프레임
102 : 발산 프레임
11 : 제1 후드
12 : 제2 그릴
121 : 주변 프레임
1210 : 주변 프레임의 내측
122 : 수렴 프레임
13 : 케이싱
14 : 연료 플레이트
15 : 공급 컨베이어
16 : 배출 컨베이어
17 : 배출 액추에이터
18 : 연료 블록
2 : 제2 가열부
21 : 훈연실
210 : 훈연도어
22 : 연소실
23 : 호퍼
24 : 피드백 배관
25 : 공기 공급 배관
26 : 공기 배출 배관
3 : 제4 그릴
30 : 그릴 힌지
31 : 면상발열체
C1 : 제1 색상
C2 : 제2 색상
R : 로봇 암
D : 레시피 입력 장치
S100: Step of determining heating method and second heating time
S200: Steps to place radiant heat panels
S300: Step of heating meat
S400: Extracting the first image
S500: Step of extracting the second image
S600: Step to stop heating of meat
S700: Steps to generate color spectrum
S800: Step to classify colors from the lowest temperature to the highest temperature into at least 5 grades.
S900: Step of converting first colors into second colors according to each grade
S1000: Counting the first pixel numbers for each second color
S1100: Counting second pixel numbers for each second color
S1200: Calculating the first ratio for each second color
S1300: Calculating the first heating time
1: first heating unit
10: first grill
101: center frame
102: diverging frame
11: first hood
12: second grill
121: Peripheral frame
1210: Inside of peripheral frame
122: convergence frame
13: Casing
14: fuel plate
15: Supply conveyor
16: Discharge conveyor
17: Discharge actuator
18: fuel block
2: second heating unit
21: Smoke room
210: Smoking door
22: combustion chamber
23: Hopper
24: feedback pipe
25: Air supply pipe
26: air discharge pipe
3: Fourth grill
30: grill hinge
31: Plane heating element
C1: first color
C2: Second color
R: robot arm
D: Recipe input device

Claims (3)

로봇 암;
상기 로봇 암의 단부에 결합되는 제1 그릴;
숯 또는 짚을 연료로써 연소시켜 육류를 가열하는 제1 가열부;
상기 제1 가열부의 상부에 배치되어, 상기 제1 가열부에서 발생하는 조리 흄(Cooking Fume)을 제거하는 제1 후드;
상기 로봇 암에 설치되어, 상기 육류를 촬영하는 카메라; 및
상기 카메라에서 촬영한 영상을 소정의 인공지능 모델에 입력하여 상기 육류의 종류 및 상태를 판단하고, 판단된 상기 육류의 종류 및 상태를 기반으로 제1 가열부 및 로봇 암을 조절하는 제어부;를 포함하고,
상기 제어부는:
상기 영상으로부터 상기 육류의 종류를 닭고기, 소고기, 돼지고기, 양고기 및 생선 중 어느 하나로 특정하는 단계;
상기 영상으로부터 상기 육류의 치수를 측정하는 단계;
상기 영상으로부터 상기 육류의 지방 분포 정도를 판단하는 단계;
상기 영상으로부터 상기 육류의 표면 가공 상태를 판단하는 단계; 및
상기 육류의 종류, 치수, 지방 분포 정도 및 표면 가공 상태를 기반으로, 가열 방식 및 제1 가열 시간을 결정하는 단계;를 포함하는 방법에 따라 제어되고,
상기 카메라에는: 가시광선 카메라 및 열화상 카메라가 포함되고,
상기 가열 방식 및 제1 가열 시간을 결정하는 단계는:
상기 육류의 종류, 치수, 지방 분포 정도 및 표면 가공 상태를 기반으로, 가열 방식 및 제2 가열 시간을 결정하는 단계;
상기 육류로부터 소정의 거리만큼 이격된 위치에 소정의 복사열 패널을 배치하는 단계;
상기 복사열 패널을 작동시켜, 상기 육류를 가열하는 단계;
열화상 영상의 제1 시점에서 제1 이미지를 추출하는 단계;
상기 열화상 영상의 제1 시점으로부터 소정의 시간이 경과한 제2 시점에서 제2 이미지를 추출하는 단계;
상기 복사열 패널을 정지시켜, 상기 육류의 가열을 중단하는 단계;
상기 제2 이미지로부터, 상기 제2 이미지에서 나타나는 최저 온도부터 최고 온도까지의 색상 스펙트럼을 생성하는 단계;
상기 색상 스펙트럼을 기반으로, 상기 제2 이미지에서 나타나는 최저 온도부터 최고 온도까지의 색상을 적어도 5개 이상의 등급으로 구분하는 단계;
상기 등급을 기반으로, 상기 제1 이미지 및 제2 이미지에 나타나는 제1 색상들을 각 등급에 따라 제2 색상으로 변환하는 단계;
상기 제2 색상들이 상기 제1 이미지 내에서 나타나는 제1 픽셀 수들을 각 제2 색상마다 카운트하는 단계;
상기 제2 색상들이 상기 제2 이미지 내에서 나타나는 제2 픽셀 수들을 각 제2 색상마다 카운트하는 단계;
[제2 픽셀 수 / 제1 픽셀 수 = 제1 비율]을 상기 각 제2 색상마다 산출하는 단계; 및
상기 제1 비율을 기반으로, 제2 가열 시간에 소정의 보정치를 반영하여 제1 가열 시간을 산출하는 단계;를 포함하고,
상기 제1 그릴은:
상기 로봇 암의 단부로부터 신장되는 중심 프레임; 및
상기 중심 프레임의 양측으로 소정의 간격마다 신장되는 발산 프레임;을 포함하여,
소정의 어골(魚骨) 형상으로 형성되고,
상기 제1 가열부는:
상기 제1 그릴에 대응하도록 구성되는 제2 그릴; 및
상기 제2 그릴의 하부에 배치되어, 상기 제어부의 입력을 기반으로 연료의 공급량을 조절하는 연료 공급부;를 포함하고,
상기 제2 그릴은:
소정의 사각형 형상으로 형성되는 주변 프레임; 및
상기 주변 프레임의 양단으로부터 내측 방향으로 소정의 간격마다 신장되는 수렴 프레임;을 포함하여,
상기 제1 그릴이 상기 주변 프레임의 내측에 대응되어 끼워맞춤 되도록 형성되고,
상기 연료 공급부는:
상기 제2 그릴의 하부에 구비되며, 내부에 소정의 공간이 형성되는 케이싱;
상기 케이싱의 하단 내측에 배치되어, 상하 방향으로 직선운동하는 연료 플레이트;
상기 케이싱의 하단 외측에 배치되어, 연료 블록을 상기 연료 플레이트로 공급하는 공급 컨베이어;
상기 케이싱의 상단 외측에 배치되어, 연료 블록을 상기 연료 플레이트로부터 배출하는 배출 컨베이어;
상기 케이싱의 상단 외측에 배치되되, 상기 배출 컨베이어의 맞은편에 배치되어, 상기 연료 블록을 상기 배출 컨베이어 방향으로 이송시키는 배출 액추에이터; 및
상기 연료 플레이트에 배치되는 발화 토치;를 포함하고,
상기 연료 블록은:
소정의 육면체 형상으로 형성되되, 육면체 형상의 각 면이 소정의 철망으로 구성되고,
상기 육면체 형상의 내부에 상기 연료가 수용되고,
상기 가열 방식 및 제1 가열 시간을 결정하는 단계는:
상기 제1 가열부로 가열하는 방식;
제2 가열부로 가열하는 방식;
제3 가열부로 가열하는 방식; 및
제1 그릴로 가열하는 방식; 중 적어도 하나를 포함하도록 가열 방식을 결정하고,
상기 제2 가열부는:
상기 제1 그릴이 안착되는 공간을 제공하며, 소정의 철망으로 구성되는 제3 그릴;
상기 제3 그릴을 수용하는 훈연실;
상기 훈연실에 상기 제1 그릴이 삽입 및 제거될 수 있도록 개폐되는 훈연도어;
상기 훈연실의 하부에 배치되며, 연료를 연소시켜 연기를 발생시키는 연소실;
상기 훈연실의 상부에 형성되는 호퍼;
상기 호퍼의 상단으로부터 상기 훈연실의 하단까지 연결되는 피드백 배관;
상기 피드백 배관의 일측에 구비되는 피드백 팬;
상기 피드백 배관의 내측에 구비되는 열선 코일;
상기 연소실에 공기를 공급하는 공기 공급 배관; 및
상기 훈연실의 하단에 연결되는 공기 배출 배관;을 포함하고,
상기 제3 가열부는:
상기 제1 그릴에 안착된 육류를 직접 가열하는 토치;를 포함하고,
상기 제1 그릴은:
상기 제1 그릴과 대응되는 형상으로 형성되는 제4 그릴;
상기 제1 그릴과 제4 그릴을 연결시키는 그릴 힌지;
상기 제1 그릴 및 제4 그릴의 표면에 구비되는 면상발열체; 및
상기 제4 그릴이 상기 제1 그릴과 대향되거나 제1 그릴로부터 이탈하도록 제4 그릴을 회전시키는 그릴 모터;를 포함하여,
상기 제1 그릴의 상부에 안착된 육류를 상기 제4 그릴로 가압하며 상기 면상발열체로 가열하는,
인공지능을 활용하여 직화 방법으로 육류를 조리하는 로봇
robotic arm;
a first grill coupled to an end of the robot arm;
A first heating unit that heats meat by burning charcoal or straw as fuel;
a first hood disposed above the first heating unit to remove cooking fume generated from the first heating unit;
A camera installed on the robot arm to photograph the meat; and
A control unit that inputs the image captured by the camera into a predetermined artificial intelligence model to determine the type and condition of the meat, and controls the first heating unit and the robot arm based on the determined type and condition of the meat. do,
The control unit:
Specifying the type of meat as one of chicken, beef, pork, lamb, and fish from the image;
Measuring the dimensions of the meat from the image;
determining the degree of fat distribution of the meat from the image;
determining the surface processing state of the meat from the image; and
It is controlled according to a method comprising: determining a heating method and a first heating time based on the type, size, fat distribution degree, and surface processing state of the meat,
The cameras include: visible light cameras and thermal imaging cameras,
The steps of determining the heating method and first heating time are:
determining a heating method and a second heating time based on the type, size, fat distribution degree, and surface processing state of the meat;
Placing a predetermined radiant heat panel at a location spaced apart from the meat by a predetermined distance;
operating the radiant heat panel to heat the meat;
Extracting a first image from a first viewpoint of a thermal image;
Extracting a second image at a second time point when a predetermined time has elapsed from the first time point of the thermal image image;
stopping the radiant heat panel to stop heating the meat;
generating, from the second image, a color spectrum from the lowest temperature to the highest temperature appearing in the second image;
Based on the color spectrum, classifying colors from the lowest temperature to the highest temperature appearing in the second image into at least five or more grades;
Based on the grade, converting first colors appearing in the first image and the second image into second colors according to each grade;
counting for each second color a first number of pixels in which the second colors appear in the first image;
counting for each second color the number of second pixels in which the second colors appear in the second image;
calculating [second number of pixels / first number of pixels = first ratio] for each second color; and
Based on the first ratio, calculating the first heating time by reflecting a predetermined correction value in the second heating time,
The first grill:
a central frame extending from an end of the robot arm; and
Including a diverging frame extending at predetermined intervals on both sides of the central frame,
It is formed in the shape of a predetermined fish bone,
The first heating unit:
a second grill configured to correspond to the first grill; and
A fuel supply unit disposed below the second grill and adjusting the amount of fuel supplied based on the input from the control unit,
The second grill:
A peripheral frame formed in a predetermined square shape; and
Including a convergence frame extending at predetermined intervals in an inward direction from both ends of the peripheral frame,
The first grill is formed to correspond to and fit inside the peripheral frame,
The fuel supply section:
a casing provided at a lower portion of the second grill and having a predetermined space therein;
a fuel plate disposed inside the lower end of the casing and moving linearly in an upward and downward direction;
a supply conveyor disposed outside the bottom of the casing to supply fuel blocks to the fuel plate;
a discharge conveyor disposed outside the top of the casing to discharge fuel blocks from the fuel plate;
a discharge actuator disposed outside the top of the casing, opposite the discharge conveyor, to transport the fuel block in the direction of the discharge conveyor; and
Including an ignition torch disposed on the fuel plate,
The fuel block:
It is formed in a predetermined hexahedral shape, and each face of the hexahedron shape is composed of a predetermined wire mesh,
The fuel is accommodated inside the hexahedral shape,
The steps of determining the heating method and first heating time are:
A method of heating with the first heating unit;
Heating method using a second heating unit;
Heating method using a third heating unit; and
Heating method using a first grill; Determine a heating method to include at least one of the following,
The second heating unit:
a third grill that provides a space in which the first grill is seated and is made of a predetermined wire mesh;
a smokehouse accommodating the third grill;
a smoking door that opens and closes to allow the first grill to be inserted and removed from the smoking room;
a combustion chamber disposed below the smoke chamber and generating smoke by burning fuel;
A hopper formed at the top of the smoke chamber;
a feedback pipe connected from the top of the hopper to the bottom of the smoke chamber;
a feedback fan provided on one side of the feedback pipe;
a heating coil provided inside the feedback pipe;
an air supply pipe supplying air to the combustion chamber; and
Includes an air discharge pipe connected to the bottom of the smoke chamber,
The third heating unit:
It includes a torch that directly heats the meat placed on the first grill,
The first grill:
a fourth grill formed in a shape corresponding to the first grill;
a grill hinge connecting the first grill and the fourth grill;
A planar heating element provided on the surfaces of the first grill and the fourth grill; and
Including a grill motor that rotates the fourth grill so that the fourth grill faces the first grill or separates from the first grill.
Pressurizing the meat seated on the upper part of the first grill with the fourth grill and heating it with the planar heating element,
A robot that cooks meat using direct fire using artificial intelligence
삭제delete 삭제delete
KR1020230075483A 2023-06-13 2023-06-13 A robot that cooks meat by direct fire using artificial intelligence KR102589593B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020230075483A KR102589593B1 (en) 2023-06-13 2023-06-13 A robot that cooks meat by direct fire using artificial intelligence

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020230075483A KR102589593B1 (en) 2023-06-13 2023-06-13 A robot that cooks meat by direct fire using artificial intelligence

Publications (1)

Publication Number Publication Date
KR102589593B1 true KR102589593B1 (en) 2023-10-17

Family

ID=88557464

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020230075483A KR102589593B1 (en) 2023-06-13 2023-06-13 A robot that cooks meat by direct fire using artificial intelligence

Country Status (1)

Country Link
KR (1) KR102589593B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110045771A (en) 2009-10-27 2011-05-04 이근창 Automatic direct roaster
KR20190112679A (en) * 2019-09-10 2019-10-07 엘지전자 주식회사 Robot system and Control method of the same
KR102335999B1 (en) 2021-01-06 2021-12-03 김중학 Meat Roast with Multi-Axis Robot
KR102462457B1 (en) 2021-07-26 2022-11-01 권도일 Automatic roasting device of large capacity
KR102498602B1 (en) * 2022-08-23 2023-02-10 피플즈리그 주식회사 Method and device for improving meat receipes

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110045771A (en) 2009-10-27 2011-05-04 이근창 Automatic direct roaster
KR20190112679A (en) * 2019-09-10 2019-10-07 엘지전자 주식회사 Robot system and Control method of the same
KR102335999B1 (en) 2021-01-06 2021-12-03 김중학 Meat Roast with Multi-Axis Robot
KR102462457B1 (en) 2021-07-26 2022-11-01 권도일 Automatic roasting device of large capacity
KR102498602B1 (en) * 2022-08-23 2023-02-10 피플즈리그 주식회사 Method and device for improving meat receipes
KR102516025B1 (en) * 2022-08-23 2023-03-30 피플즈리그 주식회사 Method and device for obtaining meat properties information

Similar Documents

Publication Publication Date Title
US20200267996A1 (en) Monitoring System for a Food Processing System
US20210259256A1 (en) Heat treatment monitoring system
US20210228022A1 (en) System and Method for Collecting and Annotating Cooking Images for Training Smart Cooking Appliances
JP2022101582A (en) Methods and systems for food preparation in robotic cooking kitchen
US11622651B2 (en) Automatic cooking device and method
Chen et al. Visual modeling of laser-induced dough browning
CN110488696A (en) A kind of intelligent dry-combustion-proof method and system
KR102498429B1 (en) Meat automatic cooking apparatus and controlling method thereof
KR102589593B1 (en) A robot that cooks meat by direct fire using artificial intelligence
KR20220074818A (en) infrared toaster
CN112426060A (en) Control method, cooking appliance, server and readable storage medium
CN116113350A (en) System and method for individual heating element control
WO2020148418A1 (en) Method for controlling the bake of a food product in a convection oven with fluid flow
JP7482690B2 (en) Cooking system, cooking method, learning device and learning method
CN112835299B (en) Intelligent baking control system based on deep learning
JP2021188867A (en) Kitchen facility, operation method of kitchen facility, learning device for kitchen facility, and learning method for kitchen facility
WO2022065074A1 (en) Information processing device, information processing method, and program
JP7482683B2 (en) Cooking system and cooking method, learning device and learning method
CN117762021A (en) Micro-steaming oven control method and system based on temperature sensing
KR20220042595A (en) Discriminating system for a genuine article of forest products using artificial intelligence

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant