KR20210000278U

KR20210000278U - serving assistance apparatus

Info

Publication number: KR20210000278U
Application number: KR2020190003158U
Authority: KR
Inventors: 남정운
Original assignee: 남정운
Priority date: 2019-07-24
Filing date: 2019-07-24
Publication date: 2021-02-03

Abstract

상기 과제를 해결하기 위하여 본 고안에서는, 기계학습기반의 인식 시스템, 특히 최근에는 딥러닝 기반의 인식 시스템의 성능이 향상되어 활용하는 응용이 많아 지고 있다. 임베디드 모듈로 구성하여 인식기술을 활용하여 자동화된 시스템을 이용 매장에서의 서빙 보조 장치를 제공하고자 한다In order to solve the above problems, in the present invention, the performance of a machine learning-based recognition system, especially a deep learning-based recognition system, has been improved in recent years, and thus applications are increasing. It consists of an embedded module and uses an automated system using recognition technology to provide a serving auxiliary device in stores.

Description

Serving assistance apparatus {serving assistance apparatus}

본 고안은 메뉴를 카메라로 인식하고 자동 알림 장치를 이용한 매장 서빙 지원 시스템에 관한 것이다.The present invention relates to a store serving support system that recognizes a menu with a camera and uses an automatic notification device.

일반적으로 종래의 주문 방식은 주문 시스템(POS)과 연계하여, 주문(Order)서를 작성(프린터)하고, 작성된 주문서를 주방으로 제공하고, 주방에서는 주문서의 주문 메뉴를 확인하고 메뉴-요리를 시작한다. 요리 완성 시 주문서를 확인하고, 주문서의 table no. 또는 알림번호를 확인하여 서빙 한다In general, the conventional ordering method connects with the order system (POS), creates an order form (printer), provides the created order form to the kitchen, and checks the order menu on the order form in the kitchen and starts menu-cooking. . When cooking is complete, check the order form, and the table no. Or check the notification number and serve

또한, 최근에는 주문은 자동화하여 수행하나, 요리 완성시에는 여전히 수동으로 주문서를 확인하고 수동으로 알림번호를 설정하며 서빙을 제공한다In addition, recently, orders are automated, but when cooking is completed, the order is still manually checked, a notification number is manually set, and serving is provided.

등록번호: 10-1897087 B1: 요식업소의 주문 관리 시스템 및 방법Registration No.: 10-1897087 B1: Order management system and method for a restaurant

따라서 본 고안에서는 완성된 메뉴 또는 요리를 카메라로 인식하여 자동으로 알림을 제공하기 위한 장치 및 방법을 제안한다.Therefore, the present invention proposes an apparatus and method for automatically providing notification by recognizing a finished menu or dish with a camera.

상기 과제를 해결하기 위하여 본 고안에서는, 기계학습기반의 인식 시스템, 특히 최근에는 딥러닝 기반의 인식 시스템의 성능이 향상되어 활용하는 응용이 많아 지고 있다. 임베디드 모듈로 구성하여 인식기술을 활용하여 자동화된 서빙을 위한 보조 장치를 제공하고자 한다In order to solve the above problems, in the present invention, the performance of a machine learning-based recognition system, especially a deep learning-based recognition system, has been improved in recent years, and thus applications are increasing. It is composed of an embedded module and intends to provide an auxiliary device for automated serving using recognition technology.

자동 알림 시스템을 구성하여 서빙 인력의 감소에 따른 매장 운영비 절약.By configuring an automatic notification system, store operation costs are saved due to the reduction of the serving manpower.

도 1은 제안한 서빙 보조 장치의 구성도
도 2는 일반적인 DL 기반 차량 인식 시스템의 블록도(google image)1 is a block diagram of a proposed serving assistance device
2 is a block diagram of a general DL-based vehicle recognition system (google image)

일반적으로, 주문POS 또는 자동주문기에 의한 고객의 주문을 입력 받고, ID(테이블 번호, 알림이 ID, 주문번호, ...)를 설정하며, 고객의 주문정보를 제어부로 제공하는 주문장치(101)와,In general, an ordering device 101 that receives a customer's order by an order POS or an automatic ordering machine, sets an ID (table number, notification ID, order number, ...), and provides the customer's order information to the control unit. )Wow,

주문정보에 따라 주방의 알림장치#1(103)에 주문정보를 제공하며,According to the order information, order information is provided to the notification device #1 (103) of the kitchen,

요리자는 알림장치#1(103)의 주문정보에 따라, 메뉴 또는 요리를 시작한다The cook starts a menu or cooking according to the order information of the notification device #1 103

요리 완성된 후, 요리자가 요리 완료를 알리면,After cooking is complete, when the cook announces that the cooking is complete,

서빙하는 인력은 해당 요리 또는 메뉴를 주문한 주문정보의 ID를 확인하고, 알림장치(104)를 이용하여 해당 ID의 알림을 수행한다. 또는 서빙자가 직접 해당 ID의 주문자에게 전달한다.The serving manpower checks the ID of the order information that has ordered the dish or menu, and uses the notification device 104 to notify the ID. Or, the servicer directly delivers the ID to the orderer.

본 고안에서는 다음과 같이 동작한다.In the present design, it operates as follows.

주문POS 또는 자동주문기에 의한 고객의 주문을 입력 받고, ID(테이블 번호, 알림이 번호, 주문번호, ...)를 설정하며, 고객의 주문정보를 제어부로 제공하는 주문장치(101)와,An ordering device 101 that receives a customer's order by order POS or an automatic ordering machine, sets an ID (table number, notification number, order number, ...), and provides the customer's order information to the control unit,

주문정보에는 고객이 선택한 메뉴, ID(테이블 번호, 알림이 번호, 주문번호, ...), 시간정보 중 하나이상을 포함한다.The order information includes one or more of the menu selected by the customer, ID (table number, notification number, order number, ...), and time information.

제어부(201)는 주문정보를 저장부(203)에 저장한다. 주문정보에 시간정보가 없는 경우 시간정보를 설정하여 저장한다.The control unit 201 stores the order information in the storage unit 203. If there is no time information in the order information, the time information is set and saved.

제어부는 주문정보에 따라 주방의 알림장치#1(103)에 주문정보를 제공한다.The control unit provides order information to the notification device #1 103 of the kitchen according to the order information.

요리자는 알림장치#1(103)에 표현되는 주문정보에 따라, 요리를 시작한다The cook starts cooking according to the order information expressed in the notification device #1 103.

요리가 완성되면, 요리자는 완성된 메뉴 또는 요리를 카메라부(105) 촬영 영역에 제공한다.When cooking is completed, the cooker provides the finished menu or dish to the photographing area of the camera unit 105.

카메라부(105)는 촬영 영역(완성된 요리(205)를 전달하는 부분)을 촬영하여 디지털 이미지로 변환하여 인식부(202)로 전달한다The camera unit 105 photographs the photographing area (the part that delivers the finished dish 205), converts it into a digital image, and transmits it to the recognition unit 202.

인식부(202)는 카메라부(105)가 전송한 디지털 이미지를 이용하여 메뉴 또는 요리를 인식하여 인식정보를 설정하여 제어부로 전달한다.The recognition unit 202 recognizes a menu or dish using the digital image transmitted from the camera unit 105, sets the recognition information, and transmits it to the control unit.

제어부(201)은 인식부(202)가 제공하는 인식정보와 저장부(203)에 저장된 주문정보를 비교하여, 인식정보의 메뉴와 주문정보의 메뉴가 동일한 주문정보를 선택하고, 시간정보를 이용하여 가장 빠른 주문에 해당하는 주문정보의 ID를 확인하고, ID를 알림장치(104)로 전달한다.The control unit 201 compares the recognition information provided by the recognition unit 202 with the order information stored in the storage unit 203, selects order information in which the menu of the recognition information and the menu of the order information are the same, and uses the time information. Thus, the ID of the order information corresponding to the fastest order is checked, and the ID is transmitted to the notification device 104.

알림장치(104)는 제어부로부터 ID를 수신하여 해당 ID에 대한 알림을 수행한다. 알림장치는 휴대형 알림이 장치, ID알림 전광판 또는 서빙 로봇 일 수 있다.The notification device 104 receives an ID from the control unit and notifies the ID. The notification device may be a portable notification device, an ID notification electronic board, or a serving robot.

제어부(201)은 서빙이 완료된 주문에 대해서는 주문정보의 일부 메뉴 또는 전체의 삭제 기능도 포함한다The control unit 201 also includes a function to delete a partial menu or all of the order information for an order that has been served.

각 장치간의 통신관련 부분의 설명은 생략한다.The description of the communication-related parts between devices is omitted.

인식부(202)에 대한 부가 설명으로 기계학습에 의한 인식 시스템이 많이 개발되고 있고, 최근에는 도 2 와 같이 딥러닝 기반의 인식시스템이 개발되고 있으며 성능이 많이 향상되었다. 도 2는 이미지(차량)를 입력 받아 차인지, 트럭인지, 모터사이클인지 등을 인식하고 분류하기 위한 딥러닝 기반의 인식 시스템의 블록도를 나타낸다. 특히 자율주행 차량에 탑재되어 안전운행을 위하여 차량을 인식하거나, 차종을 구별하거나, 보행자를 인식하는 수준으로 발전하였으며, CCTV를 활용한 인식기술, 출입자의 얼굴을 인식하는 기술 등, 인식 기술은 급속도로 발전하여 열악한 환경하에서도 90% 이상의 인식 성능을 나타내며, 좋은 환경하에서는 98% 정도의 좋은 인식 성능을 나타내고 있다, 이러한 기술을 메뉴 인식에도 적용하여 인식부(202)를 구현하고 활용한다.As an additional explanation of the recognition unit 202, many recognition systems based on machine learning have been developed, and recently, a recognition system based on deep learning has been developed as shown in FIG. 2 is a block diagram of a deep learning-based recognition system for recognizing and classifying whether it is a car, a truck, a motorcycle, etc. by receiving an image (vehicle). In particular, it has developed to the level of recognizing vehicles, distinguishing vehicle types, or recognizing pedestrians for safe operation by being mounted on autonomous vehicles. Recognition technology using CCTV, technology to recognize faces of visitors, etc. It has been developed to show a recognition performance of 90% or more even in a poor environment, and a good recognition performance of about 98% in a good environment. This technology is also applied to menu recognition to implement and utilize the recognition unit 202.

Claims

An ordering device 101 that receives a customer's order and provides order information of a customer, a notification device 104 that receives an ID from the control unit and notifies the corresponding ID,
Camera unit 105 that photographs a specific area and provides a digital image to a recognition unit
A recognition unit 202 that recognizes a menu using a digital image provided from a camera, sets recognition information, and provides it to a control unit,
A storage unit 203 for storing order information including order time,
By comparing the recognition information provided by the recognition unit 202 with the order information stored in the storage unit 203, the order information that has the same recognition information menu and the order information menu is selected, and order information corresponding to the fastest order time A serving support device comprising a control unit 201 that checks the ID of and provides it to the notification device 104