KR20220023054A - Servingbot operating system combining CCTV footage - Google Patents

Servingbot operating system combining CCTV footage Download PDF

Info

Publication number
KR20220023054A
KR20220023054A KR1020200104511A KR20200104511A KR20220023054A KR 20220023054 A KR20220023054 A KR 20220023054A KR 1020200104511 A KR1020200104511 A KR 1020200104511A KR 20200104511 A KR20200104511 A KR 20200104511A KR 20220023054 A KR20220023054 A KR 20220023054A
Authority
KR
South Korea
Prior art keywords
serving
bot
module
terminal
menu
Prior art date
Application number
KR1020200104511A
Other languages
Korean (ko)
Other versions
KR102533410B1 (en
Inventor
이기현
Original Assignee
주식회사 씽크솔루션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 씽크솔루션 filed Critical 주식회사 씽크솔루션
Priority to KR1020200104511A priority Critical patent/KR102533410B1/en
Publication of KR20220023054A publication Critical patent/KR20220023054A/en
Application granted granted Critical
Publication of KR102533410B1 publication Critical patent/KR102533410B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/12—Hotels or restaurants
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00—Manipulators not otherwise provided for
    • B25J11/008—Manipulators for service tasks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/18—Payment architectures involving self-service terminals [SST], vending machines, kiosks or multimedia terminals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Abstract

The present invention provides an unmanned food ordering and distributing system using CCTVs, installed in most stores, in a serving bot operating system. When an unmanned ordering machine show menus to a customer, the customer selects one of the menus. The selected menu is transmitted to a terminal (for example, a tablet personal computer) provided in the kitchen, and an order number and the menu are recorded thereon. At the same time, the order number and the menu are recorded on a serving bot terminal. When the customer who has placed the order goes to an empty table and sits down, CCTVs in a store track the movement of the customer and recognize the identification number of the table through image analysis or character recognition on the identification number of the table on the table, and send a corresponding table number to the terminal in the kitchen. The identification number is written in the order number previously assigned to the terminal in the kitchen and the serving bot terminal. When cooking is complete, if the customer operates a complete button on the order number on the terminal in the kitchen, the serving bot moves to the kitchen. When the order number, menu, and table number displayed on the serving bot terminal are checked in the kitchen and food is loaded thereonto, the serving bot moves to the table and distributes the food. Therefore, the unmanned food ordering and dispensing system can further strengthen unmanned food ordering and distribution using the serving bot.

Description

ＣＣＴＶ 영상을 결합한 서빙봇 운용시스템{Servingbot operating system combining CCTV footage}Servingbot operating system combining CCTV footage

본 발명은 식당에서 음식을 배식하는 서빙봇 운용시스템에 관한 것으로, 좀 더 상세하게는 CCTV 영상을 결합하여 운용되는 서빙봇에 관한 것이다. The present invention relates to a serving bot operating system that distributes food in a restaurant, and more particularly, to a serving bot operated by combining CCTV images.

최근 인건비 상승에 따른 서빙 인력을 대체하기 위하여 많은 요식업 매장에는 주문과 결제를 무인화하는 무인주문기가 도입되고 있다. 한 걸음 더 나아가 서빙로봇(서빙봇 또는 푸드봇이라 약칭한다)도 도입되고 있다. 서빙로봇은 주방에서 조리된 식음료를 싣고 손님이있는 식탁(테이블)까지 자율로 이동하는 서빙전용로봇이다. 서빙로봇이 테이블을 찾아가는 방법은 다음과 같다. In order to replace the serving manpower due to the recent increase in labor costs, unmanned ordering machines that unmanned orders and payments are being introduced in many catering stores. Going one step further, serving robots (abbreviated as serving bots or food bots) are being introduced. A serving robot is a serving robot that loads cooked food and beverages in the kitchen and autonomously moves to the dining table (table) where guests are. How the serving robot finds a table is as follows.

1) 테이블 구분번호를 미리 지정하고,1) Designate table identification number in advance,

2) 테이블 위 천장에 테이블 식별번호를 마커(적외선 영상, 흑백영상, 레이저 등으로 판독할수 있는 기호)로 표시하여 두고,2) Mark the table identification number on the ceiling above the table with a marker (a symbol that can be read by infrared image, black and white image, laser, etc.)

3) 음식조리 완료시, 식당 관계자가 손님의 주문을 확인하고, 서빙로봇에 서빙해야할 테이블 번호를 서빙봇 단말기에 입력하는 하고,3) Upon completion of food preparation, the restaurant staff confirms the customer's order and inputs the table number to be served to the serving robot into the serving robot terminal;

4) 서빙봇이 해당 테이블 번호를 향해 자율주행한다.4) The serving bot autonomously drives toward the table number.

이와 같은 서빙봇 운용은 음식조리 완료 후 사람이 음식과 해당 음식이 주문된 테이블 번호 확인 후 서빙봇에 테이블 번호를 입력하여야 한다는 점에서 사람의 노력이 필요하고 그만큼 시간이 지체될 수 있으며, 테이블 번호가 헷갈릴 수 있다. Such a serving bot operation requires human effort in that after food preparation is completed, a person must input the table number into the serving bot after checking the food and the table number for which the food is ordered, the amount of time may be delayed, and the table number can be confusing

공개특허 10-2019-0100093호는 테이블에 서빙봇과 통신할 수 있는 호출부를 설치하여 손님이 호출부 버튼을 누르면 서빙봇이 그에 따라 찾아가는 구성을 제안한다. 그러나 이러한 구성도 음식조리 완료를 고객이 신경써서 파악해야만 서빙봇을 동작시킬 수 있고, 동시다발적인 호출부 조작시 순번과 음식을 매칭시켜야 하는 과정에서 사람의 노력이 들어가야 한다.Korean Patent Laid-Open No. 10-2019-0100093 proposes a configuration in which a call unit that can communicate with a serving bot is installed on a table so that when a customer presses a call unit button, the serving bot visits accordingly. However, in this configuration, the serving bot can only be operated only when the customer pays attention to the completion of food preparation, and human effort must be put in the process of matching the order number with the food in case of simultaneous call unit operation.

따라서 본 발명은 서빙봇을 적용한 음식주문 및 배식의 무인화를 한층 더 강화할 수 있는 서빙봇 운용시스템을 제공하고자 한다.Therefore, the present invention is to provide a serving bot operating system that can further strengthen the unmanned food ordering and distribution to which the serving bot is applied.

그에 따라 본 발명은 매장 내 대부분 설치되어 있는 CCTV를 서빙봇 운용시스템에 이용하여 무인화된 음식 주문 배식 시스템을 제공한다.Accordingly, the present invention provides an unmanned food ordering and dispensing system by using the CCTV installed in most stores in the serving bot operating system.

즉, 본 발명에 따르면, 무인주문기에서 고객에게 메뉴를 보여주면, 고객이 메뉴 중 하나를 선택하고 선택 메뉴는 주방에 비치된 단말기(예를 들면, 태블릿)에 전송 알림되어 주문번호와 메뉴가 기록되고, 동시에 서빙봇 단말기에도 주문번호와 메뉴가 기록되고, 주문을 마친 고객이 빈 테이블로 가 착석하면, 매장 내 CCTV가 고객 동선을 추적하여 해당 테이블의 식별번호를 영상분석 또는 테이블 상에 있는 테이블 식별번호에 대한 문자인식으로 인식하여 해당 테이블 번호를 주방 단말기에 전송하여 주방 단말기와 서빙봇 단말기에 직전에 부여된 주문번호에 테이블 번호를 병기하고, 조리완료 시 주방단말기에 해당 주문번호에 완료 버튼을 조작하면, 서빙봇이 주방으로 이동하고, 주방에서 서빙봇 단말기에 표시된 주문번호, 메뉴, 테이블 번호를 확인한 후 음식을 탑재하면, 서빙봇은 해당 테이블로 이동하여 배식한다. That is, according to the present invention, when a menu is shown to a customer from an unmanned ordering machine, the customer selects one of the menus, and the selected menu is transmitted to a terminal (eg, tablet) provided in the kitchen, so that the order number and menu are displayed. At the same time, the order number and menu are also recorded on the serving bot terminal, and when a customer who has placed an order goes to an empty table and sits down, CCTV in the store tracks the customer's movement and records the table's identification number through image analysis or on the table. Recognizes the table identification number by character recognition, transmits the table number to the kitchen terminal, and writes the table number to the order number immediately given to the kitchen terminal and the serving bot terminal. When the button is operated, the serving bot moves to the kitchen, checks the order number, menu, and table number displayed on the serving bot terminal in the kitchen and loads food. The serving bot moves to the corresponding table and distributes it.

상기에서, CCTV는 무인주문기와 연동되어, 무인주문기에서 결제완료 시, 고객의 동선 추적을 시작하여 착석 테이블 번호를 주방단말기와 서빙봇 단말기에 전송한다.In the above, the CCTV is interlocked with the unmanned order machine, and when the payment is completed at the unmanned order machine, it starts tracking the customer's movement and transmits the seating table number to the kitchen terminal and the serving bot terminal.

상기에서, 다수의 고객에 의해 순차적으로 무인주문기에서 메뉴선택과 결제완료가 이루어지면, 그에 따라 CCTV도 순차적으로 고객의 동선을 추적하여 테이블 번호를 주방단말기와 서빙봇 단말기에 전송한다.In the above, when a plurality of customers sequentially select a menu from an unmanned ordering machine and complete payment, the CCTV sequentially tracks the customer's movement and transmits the table number to the kitchen terminal and the serving bot terminal.

상기에서, 착석한 고객이 테이블을 옮길 경우, CCTV는 이를 추적하여, 본래 테이블 번호를 새로운 테이블 번호로 갱신(update)하여 주방단말기와 서빙봇 단말기에 전송하여 이들 단말기의 테이블 번호를 갱신시킨다. In the above, when a seated customer moves a table, CCTV tracks it, updates the original table number with a new table number, and transmits it to the kitchen terminal and the serving bot terminal to update the table number of these terminals.

상기에서, 서빙봇에 탑재된 음식을 고객이 인수하면, 서빙봇 단말기에 해당 주문번호 목록이 배식완료를 뜻하는 문구 내지 기호가 표시된다. In the above, when the customer takes over the food loaded in the serving bot, the corresponding order number list is displayed on the serving bot terminal, and a phrase or symbol indicating that the serving is complete is displayed.

상기에서, 서빙봇이 2대 이상일 경우, 서빙봇은 단말기 식별번호를 부여받고 무인주문기에서 결제가 이루어질 때마다 다수의 서빙봇에 대해 순차로 그리고 주기적으로 주문번호가 주어지고, CCTV에서 인식된 테이블 번호도 서빙봇에 대해 순차로 그리고 주기적으로 전송된다. In the above, when there are two or more serving bots, the serving bot is given a terminal identification number, and whenever a payment is made from an unmanned ordering machine, an order number is sequentially and periodically given to a plurality of serving bots, and the Table numbers are also sent sequentially and periodically to the serving bot.

즉, 본 발명은,That is, the present invention is

매장 내 서빙봇 운용시스템으로서,As an in-store serving bot operating system,

무인주문기;unmanned order machine;

매장 전체를 감시하는 CCTV;CCTV monitoring the entire store;

상기 무인주문기, 서빙봇 단말기 및 CCTV와 소통하는 주방단말기; 및a kitchen terminal communicating with the unmanned ordering machine, the serving bot terminal, and the CCTV; and

상기 무인주문기, CCTV 및 주방단말기와 소통하는 서빙봇 단말기를 구비하고 자율주행하는 서빙봇;을 포함하고,A serving bot equipped with a serving bot terminal that communicates with the unmanned ordering machine, CCTV, and kitchen terminal and autonomously driving; includes;

상기 무인주문기는 메뉴 디스플레이, 메뉴선택모듈, 결제모듈 및 주문번호생성모듈, 주문번호와 메뉴를 주방단말기로 전송하는 통신모듈을 구비하여, 고객이 결제를 완료하면 주문번호와 메뉴를 상기 주방단말기와 서빙봇 단말기에 전송하고,The unmanned ordering machine includes a menu display, a menu selection module, a payment module and an order number generation module, and a communication module for transmitting the order number and menu to the kitchen terminal, and when the customer completes payment, the order number and menu are transmitted to the kitchen terminal transmitted to the serving bot terminal,

상기 CCTV는 영상분석모듈, 문자인식모듈, 객체추적모듈, 판단모듈 및 통신모듈을 구비하여, 영상분석모듈과 문자인식모듈에서 무인주문기에 표시된 주문번호와 해당 주문 고객을 문자인식과 영상분석으로 매칭하고, 객체추적모듈에서 고객의 동선을 추적하여 테이블 번호가 표시된 특정 테이블에 착석하면, 판단모듈에서 해당 테이블 번호를 문자인식하고 주문번호와 매칭하여 통신모듈에서 주문번호와 매칭된 테이블 번호를 상기 주방단말기와 서빙봇 단말기에 전송하고,The CCTV is equipped with an image analysis module, a character recognition module, an object tracking module, a judgment module and a communication module, and the image analysis module and the character recognition module match the order number displayed on the unmanned ordering machine and the corresponding customer through text recognition and image analysis And, when the object tracking module tracks the customer's movement and sits at a specific table where the table number is displayed, the determination module recognizes the corresponding table number as a character and matches the order number to provide the table number matched with the order number in the communication module to the kitchen It is transmitted to the terminal and the serving bot terminal,

상기 주방단말기는 통신모듈과 주문번호, 메뉴 정보, 고객의 테이블 번호 및 주문 음식의 완료여부를 표시할 수 있는 항목을 표시하는 표시모듈을 구비하여, 음식 조리 완료 시 해당 항목을 조작하여 음식의 완료를 표시하고, 이와 동시에 상기 통신모듈은 서빙봇을 주방으로 호출하여, 서빙 봇에 음식이 탑재되고,The kitchen terminal includes a communication module and a display module for displaying an item capable of displaying an order number, menu information, a customer's table number, and whether the ordered food is complete, and when the food is cooked, the item is operated to complete the food display, and at the same time, the communication module calls the serving bot to the kitchen, and food is loaded on the serving bot,

상기 서빙봇은 하나 이상의 선반과 통신모듈 및 디스플레이를 포함한 단말기를 구비하여, 탑재된 음식의 배송 전에 확인할 수 있도록 디스플레이에 주문번호, 메뉴, 및 테이블 번호를 표시하는 것을 특징으로 하는 서빙봇 운용시스템을 제공한다.The serving bot is equipped with one or more shelves, a communication module and a terminal including a display, and a serving bot operating system, characterized in that the order number, menu, and table number are displayed on the display so that the mounted food can be checked before delivery. to provide.

매장 내 서빙봇 운용시스템으로서,As an in-store serving bot operating system,

무인주문기;unmanned order machine;

매장 전체를 감시하는 CCTV;CCTV monitoring the entire store;

상기 무인주문기, 서빙봇 단말기 및 CCTV와 소통하는 주방단말기; 및a kitchen terminal communicating with the unmanned ordering machine, the serving bot terminal, and the CCTV; and

상기 무인주문기, CCTV 및 주방단말기와 소통하는 서빙봇 단말기를 구비하고 자율주행하는 서빙봇;을 포함하고,A serving bot equipped with a serving bot terminal that communicates with the unmanned ordering machine, CCTV, and kitchen terminal and autonomously driving; includes;

상기 무인주문기는 메뉴 디스플레이, 메뉴선택모듈, 결제모듈 및 주문번호생성모듈, 주문번호와 메뉴를 주방단말기로 전송하는 통신모듈을 구비하여, 고객이 결제를 완료하면 주문번호와 메뉴를 상기 주방단말기에 전송하고,The unmanned ordering machine includes a menu display, a menu selection module, a payment module and an order number generation module, and a communication module for transmitting the order number and menu to the kitchen terminal, and when the customer completes payment, the order number and menu are transmitted to the kitchen terminal send,

상기 CCTV는 영상분석모듈, 문자인식모듈, 객체추적모듈, 판단모듈 및 통신모듈을 구비하여, 영상분석모듈과 문자인식모듈에서 무인주문기에 표시된 주문번호와 해당 주문 고객을 문자인식과 영상분석으로 매칭하고, 객체추적모듈에서 고객의 동선을 추적하여 테이블 번호가 표시된 특정 테이블에 착석하면, 판단모듈에서 해당 테이블 번호를 문자인식하고 주문번호와 매칭하여 통신모듈에서 주문번호와 매칭된 테이블 번호를 상기 주방단말기에 전송하고,The CCTV is equipped with an image analysis module, a character recognition module, an object tracking module, a judgment module and a communication module, and the image analysis module and the character recognition module match the order number displayed on the unmanned ordering machine and the corresponding customer through text recognition and image analysis And, when the object tracking module tracks the customer's movement and sits at a specific table where the table number is displayed, the determination module recognizes the corresponding table number as a character and matches the order number to provide the table number matched with the order number in the communication module to the kitchen sent to the terminal,

상기 주방단말기는 통신모듈과 주문번호, 메뉴 정보, 고객의 테이블 번호 및 주문 음식의 완료여부를 표시할 수 있는 항목을 표시하는 표시모듈을 구비하여, The kitchen terminal includes a communication module and a display module that displays an order number, menu information, a customer's table number, and an item capable of displaying whether the ordered food is complete,

통신모듈을 통해 주문번호, 메뉴, 및 테이블 번호를 서빙봇 단말기에 전송하고, 음식 조리 완료 시 해당 항목을 조작하여 음식의 완료를 표시하고, 이와 동시에 상기 통신모듈은 서빙봇을 주방으로 호출하여, 서빙 봇에 음식이 탑재되고,The order number, menu, and table number are transmitted to the serving bot terminal through the communication module, and when the food is cooked, the item is manipulated to indicate the completion of the food. At the same time, the communication module calls the serving bot to the kitchen, Food is loaded onto the serving bot,

상기 서빙봇은 하나 이상의 선반과 통신모듈 및 디스플레이를 포함한 단말기를 구비하여, 탑재된 음식의 배송 전에 확인할 수 있도록 디스플레이에 주문번호, 메뉴, 및 테이블 번호를 표시하는 것을 특징으로 하는 서빙봇 운용시스템을 제공한다.The serving bot is equipped with one or more shelves, a communication module and a terminal including a display, and a serving bot operating system, characterized in that the order number, menu, and table number are displayed on the display so that the mounted food can be checked before delivery. to provide.

매장 내 서빙봇 운용시스템으로서,As an in-store serving bot operating system,

무인주문기;unmanned order machine;

매장 전체를 감시하는 CCTV;CCTV monitoring the entire store;

서빙봇 단말기 및 CCTV와 소통하는 주방단말기; 및A kitchen terminal that communicates with a serving bot terminal and CCTV; and

CCTV 및 주방단말기와 소통하는 서빙봇 단말기를 구비하고 자율주행하는 서빙봇;을 포함하고,A serving bot equipped with a serving bot terminal that communicates with CCTV and a kitchen terminal and autonomously driving; includes;

상기 무인주문기는 메뉴 디스플레이, 메뉴선택모듈, 결제모듈 및 주문번호생성모듈을 구비하여, 고객이 결제를 완료하면 주문번호를 생성하여 메뉴와 함께 디스플레이하고,The unmanned ordering machine includes a menu display, a menu selection module, a payment module and an order number generation module, and when the customer completes payment, generates an order number and displays it together with the menu,

상기 CCTV는 영상분석모듈, 문자인식모듈, 객체추적모듈, 판단모듈 및 통신모듈을 구비하여, 영상분석모듈과 문자인식모듈에서 무인주문기에 표시된 주문번호와 메뉴 및 해당 주문 고객을 문자인식과 영상분석으로 매칭하고, 객체추적모듈에서 고객의 동선을 추적하여 테이블 번호가 표시된 특정 테이블에 착석하면, 판단모듈에서 해당 테이블 번호를 문자인식하고 주문번호와 매칭하여 통신모듈에서 주문번호, 메뉴 및 테이블 번호를 상기 주방단말기와 상기 서빙봇 단말기에 전송하고,The CCTV is equipped with an image analysis module, a character recognition module, an object tracking module, a judgment module and a communication module, and the image analysis module and the character recognition module recognize the order number and menu displayed on the unmanned order machine and the corresponding customer for character recognition and image analysis and the object tracking module tracks the customer's movement and sits at a specific table marked with the table number, the judgment module recognizes the table number as a character and matches the order number with the order number, menu and table number in the communication module transmitted to the kitchen terminal and the serving bot terminal,

상기 주방단말기는 통신모듈과 주문번호, 메뉴 정보, 고객의 테이블 번호 및 주문 음식의 완료여부를 표시할 수 있는 항목을 표시하는 표시모듈을 구비하여, The kitchen terminal includes a communication module and a display module that displays an order number, menu information, a customer's table number, and an item capable of displaying whether the ordered food is complete,

음식 조리 완료 시 해당 항목을 조작하여 음식의 완료를 표시하고, 이와 동시에 상기 통신모듈은 서빙봇을 주방으로 호출하여, 서빙 봇에 음식이 탑재되고,When food is cooked, the item is manipulated to indicate the completion of the food, and at the same time, the communication module calls the serving bot to the kitchen, and the food is loaded on the serving bot,

상기 서빙봇은 하나 이상의 선반과 통신모듈 및 디스플레이를 포함한 단말기를 구비하여, 탑재된 음식의 배송 전에 확인할 수 있도록 디스플레이에 주문번호, 메뉴, 및 테이블 번호를 표시하는 것을 특징으로 하는 서빙봇 운용시스템을 제공한다.The serving bot is equipped with one or more shelves, a communication module and a terminal including a display, and a serving bot operating system, characterized in that the order number, menu, and table number are displayed on the display so that the mounted food can be checked before delivery. to provide.

매장 내 서빙봇 운용시스템으로서,As an in-store serving bot operating system,

무인주문기;unmanned order machine;

매장 전체를 감시하는 CCTV;CCTV monitoring the entire store;

서빙봇 단말기 및 CCTV와 소통하는 주방단말기; 및A kitchen terminal that communicates with a serving bot terminal and CCTV; and

CCTV 및 주방단말기와 소통하는 서빙봇 단말기를 구비하고 자율주행하는 서빙봇;을 포함하고,A serving bot equipped with a serving bot terminal that communicates with CCTV and a kitchen terminal and autonomously driving; includes;

상기 무인주문기는 메뉴 디스플레이, 메뉴선택모듈, 결제모듈 및 주문번호생성모듈을 구비하여, 고객이 결제를 완료하면 주문번호를 생성하여 메뉴와 함께 디스플레이하고,The unmanned ordering machine includes a menu display, a menu selection module, a payment module and an order number generation module, and when the customer completes payment, generates an order number and displays it together with the menu,

상기 CCTV는 영상분석모듈, 문자인식모듈, 객체추적모듈, 판단모듈 및 통신모듈을 구비하여, 영상분석모듈과 문자인식모듈에서 무인주문기에 표시된 주문번호와 메뉴 및 해당 주문 고객을 문자인식과 영상분석으로 매칭하고, 객체추적모듈에서 고객의 동선을 추적하여 테이블 번호가 표시된 특정 테이블에 착석하면, 판단모듈에서 해당 테이블 번호를 문자인식하고 주문번호와 매칭하여 통신모듈에서 주문번호, 메뉴 및 테이블 번호를 상기 주방단말기에 전송하고,The CCTV is equipped with an image analysis module, a character recognition module, an object tracking module, a judgment module and a communication module, and the image analysis module and the character recognition module recognize the order number and menu displayed on the unmanned order machine and the corresponding customer for character recognition and image analysis and the object tracking module tracks the customer's movement and sits at a specific table marked with the table number, the judgment module recognizes the table number as a character and matches the order number with the order number, menu and table number in the communication module transmitted to the kitchen terminal,

상기 주방단말기는 통신모듈과 주문번호, 메뉴 정보, 고객의 테이블 번호 및 주문 음식의 완료여부를 표시할 수 있는 항목을 표시하는 표시모듈을 구비하여, 주문번호, 메뉴 정보, 고객의 테이블 번호를 서빙 봇 단말기에 전송하고,The kitchen terminal includes a communication module and a display module for displaying an order number, menu information, a customer's table number, and items capable of displaying whether the ordered food is complete, serving the order number, menu information, and customer's table number send to the bot terminal,

음식 조리 완료 시 해당 항목을 조작하여 음식의 완료를 표시하고, 이와 동시에 상기 통신모듈은 서빙봇을 주방으로 호출하여, 서빙 봇에 음식이 탑재되고,When food is cooked, the item is manipulated to indicate the completion of the food, and at the same time, the communication module calls the serving bot to the kitchen, and the food is loaded on the serving bot,

상기 서빙봇은 하나 이상의 선반과 통신모듈 및 디스플레이를 포함한 단말기를 구비하여, 탑재된 음식의 배송 전에 확인할 수 있도록 디스플레이에 주문번호, 메뉴, 및 테이블 번호를 표시하는 것을 특징으로 하는 서빙봇 운용시스템을 제공한다.The serving bot is equipped with one or more shelves, a communication module and a terminal including a display, and a serving bot operating system, characterized in that the order number, menu, and table number are displayed on the display so that the mounted food can be checked before delivery. to provide.

상기에 있어서, 상기 테이블 번호는 테이블 상에 물리적으로 번호가 표시되어 있고, CCTV 문자인식모듈에서 테이블 번호를 문자인식으로 판별하는 것을 특징으로 하는 서빙봇 운용시스템을 제공한다.In the above, the table number is physically displayed on the table, and the CCTV character recognition module provides a serving bot operating system, characterized in that the table number is determined by character recognition.

상기에 있어서, 상기 CCTV의 테이블 번호는 인식은, 매장 전체 영상을 하나의 맵으로 하여 테이블 이미지와 위치를 영상분석모듈에서 분석하여 판단모듈에서 테이블 번호를 부여한 것을 특징으로 하는 서빙봇 운용시스템을 제공한다.In the above, the recognition of the table number of the CCTV provides a serving bot operating system, characterized in that the table image and location are analyzed in the image analysis module by using the entire store image as a map, and the table number is assigned in the judgment module. do.

상기에 있어서, 상기 서빙봇 단말기의 디스플레이에 표시된 주문번호, 메뉴 및 테이블 번호에 대해 수동으로 수정할 수 있는 수동입력모듈을 구비한 것을 특징으로 하는 서빙봇 운용시스템을 제공한다.In the above, it provides a serving bot operating system, characterized in that it has a manual input module that can manually modify the order number, menu and table number displayed on the display of the serving bot terminal.

상기에서, n 번째 고객이 테이블 착석 후 테이블 변경을 위한 이동이 진행되고, 그 동안 n+1 번째 고객이 주문을 완료하는 결제를 한 경우, CCTV의 판단모듈은 n번째 고객과 n+1번째 고객 중 먼저 테이블에 착석하는 순서대로 테이블 번호를 확정하여 주방단말기로 전송하여 주방단말기의 테이블 번호를 갱신시키는 것을 특징으로 하는 서빙봇 운용시스템을 제공한다.In the above, if the nth customer is moved to change the table after sitting at the table, and during the time the n+1st customer makes a payment to complete the order, the judgment module of the CCTV is the nth customer and the n+1st customer Among them, a serving bot operating system is provided, characterized in that the table number is determined in the order of seating at the table and transmitted to the kitchen terminal to update the table number of the kitchen terminal.

본 발명에 따르면, 매장을 전체적으로 감시하는 기능만으로 이용되던 CCTV를 서빙봇과 결합시켜 활용함으로써 무인주문과 배식을 한층 더 편리하게 운용할 수 있다. According to the present invention, unmanned ordering and distribution can be operated more conveniently by using CCTV, which was used only for monitoring the entire store, by combining it with a serving bot.

도 1은 본 발명의 개념을 설명하는 구성도이다.
도 2는 본 발명을 설명하는 순서도이다.1 is a block diagram illustrating the concept of the present invention.
2 is a flowchart illustrating the present invention.

이하, 첨부도면을 참조하여 본 발명의 바람직한 실시예에 대해 상세히 설명한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 바람직한 실시예를 개요도로 도시하고 도 2는 순서도로 도시한다.Figure 1 shows a preferred embodiment of the present invention in a schematic diagram and Figure 2 shows in a flow chart.

매장에는 무인주문기(키오스크라 칭할 수 있다), CCTV, 그리고 주방 단말기가 설치되고, 단말기를 구비한 서빙봇이 구비된다. 이들은 서로 무선통신할 수 있는 통신모듈을 구비하며, 주방단말기는 태블릿, 또는 벽걸이형의 모니터를 겸한 터치패널일 수 있다. 또한, 매장의 고객들이 주문 상태를 볼 수 있는 디스플레이 패널이 설치될 수 있다. The store is equipped with an unmanned ordering machine (which can be referred to as a kiosk), CCTV, and a kitchen terminal, and a serving bot equipped with a terminal. These are provided with a communication module capable of wireless communication with each other, and the kitchen terminal may be a tablet or a touch panel that also serves as a wall-mounted monitor. In addition, a display panel may be installed through which customers of the store can view the order status.

고객이 무인주문기에서 메뉴를 선택하고 결제하면, 주문번호가 부여되면서, 주문번호와 메뉴명이 무인주문기에 표시되는 동시에 주방단말기에 전송되어 디스플레이된다. 이때, 매장 전체를 감시하고 있는 CCTV는 무인주문기에 표시된 주문번호와 메뉴명 그리고 주문자의 영상을 분석하여 인식된 주문자를 주문번호와 매칭시켜 추적한다. CCTV의 영상분석은 주문자 형상, 의복의 색상, 및/또는 외관특징을 인식하여 이루어질 수 있으며, 안면인식기술이 적용될 수도 있다. 또한, CCTV는 무인주문기에서 결제를 진행하는 이미지를 기준으로 하여 해당 시점에서 결제자의 관찰되는 형상을 주문자 형상으로 특정하고 추적하여 착석 시 테이블 번호를 부여할 수 있다. When a customer selects a menu from the unmanned ordering machine and pays, an order number is given, and the order number and menu name are displayed on the unmanned ordering machine and are transmitted and displayed on the kitchen terminal at the same time. At this time, the CCTV monitoring the entire store analyzes the order number, menu name, and image of the orderer displayed on the unmanned order machine, and tracks the recognized orderer by matching the order number. Video analysis of CCTV can be made by recognizing the customer's shape, color of clothes, and/or external features, and facial recognition technology can also be applied. In addition, the CCTV can assign a table number when seated by specifying and tracking the shape of the payer observed at that point in time as the orderer's shape on the basis of the image in which the payment is made from the unmanned ordering machine.

매장 내 테이블에 대해 각각의 식별번호가 부여되어 CCTV에 내장된 메모리에 기록되어 있으며, 테이블의 식별번호는 본래 테이블에 물리적으로 부착된 식별번호를 CCTV에서 문자인식기술로 인식한 것일 수도 있고, 매장 전체 영상을 하나의 맵으로 하여 테이블 이미지와 위치를 분석하여 자체적으로 식별번호를 부여한 것일 수 있다. 이 경우도 주방단말기와 서빙봇 단말기 모두 해당 테이블에 대해 CCTV에서 가리키는 테이블로 통일되게 인식한다. Each identification number is assigned to each table in the store and is recorded in the memory built into the CCTV. It may be that an identification number is assigned by itself by analyzing the table image and location using the entire image as one map. In this case, both the kitchen terminal and the serving bot terminal recognize the table as the table pointed to by the CCTV.

주문자가 특정 테이블에 착석하면, CCTV는 주문번호가 매칭된 주문자와 해당 테이블의 식별번호를 매칭시켜 이를 주방 단말기와 서빙봇 단말기에 전송한다. 그에 따라 주방단말기와 서빙봇 단말기에는 주문번호, 메뉴, 테이블 식별번호가 표시되고, 이후 매장에 순차적으로 들어온 고객에 대해서도 같은 과정이 진행된다. 주방에서 음식을 조리하여 주방단말기에 해당 주문번호에 대해 완성버튼을 누르면, 서빙봇은 주방의 정해진 위치에 배치되어 있거나 다른 곳에 있었으며, 해당 장소로 와 도착하고, 음식을 탑재하여 주면 주문번호에 해당하는 테이블로 이동하여 배식한다. 음식 탑재시 서빙봇 단말기에 표시된 주문번호와 메뉴, 테이블 번호를 확인하며, 만일 잘못된 것이 있을 경우, 수동입력모듈을 구비하여 수동으로 입력할 수 있다. 서빙봇 단말기는 다수의 주문번호가 입력되어 있어도 출발할 목적지에 해당하는 주문번호, 메뉴, 테이블번호만을 디스플레이하도록 구성하는 것이 바람직하다.When the orderer is seated at a specific table, the CCTV matches the orderer whose order number is matched with the identification number of the corresponding table and transmits it to the kitchen terminal and the serving bot terminal. Accordingly, the order number, menu, and table identification number are displayed on the kitchen terminal and the serving bot terminal, and the same process is performed for customers who sequentially enter the store. If you cook food in the kitchen and press the completion button for the corresponding order number on the kitchen terminal, the serving bot is placed in a predetermined location in the kitchen or was in another place, arrives at the place, and loads the food, then the serving bot corresponds to the order number Go to the table and serve. When loading food, check the order number, menu, and table number displayed on the serving bot terminal. If there is something wrong, a manual input module is provided to manually input. It is preferable that the serving bot terminal is configured to display only the order number, menu, and table number corresponding to the departure destination even if a plurality of order numbers are input.

별다른 수정조치가 없으면 서빙봇은 테이블을 향해 이동한다. 서빙봇의 음식탑재 및 확인을 위한 대기시간은 제어모듈에 미리 설정되어 있으며, 대략 10 내지 15초 정도로 설정될 수 있다.If no corrective action is taken, the serving bot moves towards the table. The waiting time for food loading and confirmation of the serving bot is preset in the control module, and may be set to approximately 10 to 15 seconds.

상기에서, 고객이 테이블에 착석한 다음, 다른 테이블로 이동하는 경우, CCTV는 이를 영상 분석으로 추적하여 해당 고객의 주문번호와 메뉴를 유지한 상태에서 테이블 번호를 갱신하여 주방단말기와 서빙봇 단말기에 전송한다. 주방단말기와 서빙봇 단말기는 그에 따라 테이블 번호를 갱신하여 표시한다. In the above, when a customer is seated at a table and then moves to another table, CCTV tracks this through video analysis and updates the table number while maintaining the customer's order number and menu to be sent to the kitchen terminal and the serving bot terminal. send. The kitchen terminal and the serving bot terminal update and display the table number accordingly.

CCTV는 한 대 이상 다수 설치될 수 있으며, 안면인식을 위한 것은 무인주문기 근처에 배치될 수 있다. 다수의 CCTV는 서로 통신으로 소통할 수 있으며, 예를 들면, 안면인식 CCTV와 주문번호 등을 인식하는 타 CCTV가 서로 정보를 주고받아 주문자와 주문번호를 매칭하고, 개체추적을 진행한다. CCTV 설치 대수가 적을 경우, 회전동작을 통해 감지범위를 확대할 수 있다. One or more CCTVs can be installed, and those for facial recognition can be placed near the unmanned ordering machine. A plurality of CCTVs can communicate with each other by communication, and for example, a facial recognition CCTV and another CCTV that recognizes an order number exchange information with each other to match an orderer with an order number, and perform object tracking. If the number of CCTVs installed is small, the detection range can be expanded through rotational operation.

상기에서, n 번째 고객이 테이블 착석 후 테이블 이동이 진행되고, 그 동안 n+1 번째 고객이 주문을 완료(결제)한 경우, CCTV는 n번째 고객과 n+1번째 고객 중 먼저 테이블에 착석하는 순서대로 테이블 번호를 확정 및 전송한다. In the above, when the nth customer is seated at the table and the table is moved, and the n+1st customer completes (pays) the order during that time, the CCTV is the first among the nth customer and the n+1st customer to sit at the table. Confirm and transmit the table number in order.

상기에서, 서빙봇에 탑재된 음식을 고객이 인수하면, 서빙봇 단말기에 해당 주문번호 목록이 배식완료를 뜻하는 문구 내지 기호가 표시되는 것이 바람직하다. In the above, when the customer takes over the food mounted on the serving bot, it is preferable that a phrase or symbol indicating that the serving bot has completed the dispensing of the corresponding order number list is displayed on the serving bot terminal.

또한, 서빙봇이 2대 이상일 경우, 서빙봇은 단말기 식별번호를 부여받고 무인주문기에서 결제가 이루어질 때마다 다수의 서빙봇에 대해 순차로 그리고 주기적으로 주문번호가 주어지고, CCTV에서 인식된 테이블 번호도 서빙봇에 대해 순차로 그리고 주기적으로 전송된다.In addition, if there are two or more serving bots, the serving bot is given a terminal identification number, and whenever a payment is made from an unmanned ordering machine, an order number is sequentially and periodically given to a plurality of serving bots, and a table recognized by CCTV Numbers are also sent sequentially and periodically to the serving bot.

상기와 같은 서빙봇 운용시스템은 기존에 매장의 감시역할에 그치던 CCTV를 결합시킴으로써 훨씬 더 편리하고 효율화 될 수 있다.The above-mentioned serving bot operating system can be made much more convenient and efficient by combining CCTV, which has been limited to the role of monitoring in the store.

상기의 서빙봇 운용시스템의 구현은 다음과 같은 구성으로 이루어질 수 있다. The implementation of the serving bot operating system may be configured as follows.

무인주문기는 메뉴 디스플레이, 선택모듈, 결제모듈 및 주문번호생성모듈, 주문번호와 메뉴를 주방단말기로 전송하는 통신모듈을 구비한다.The unmanned ordering machine includes a menu display, a selection module, a payment module and an order number generating module, and a communication module for transmitting the order number and menu to the kitchen terminal.

변형예로서, 통신모듈을 구비하지 않을 수 있으며, 이 경우는 CCTV에서 무인주문기에 표시된 주문번호와 메뉴를 문자인식기술로 인식하여 주방단말기와 서빙봇 단말기에 전송한다. As a modification, the communication module may not be provided, and in this case, the order number and menu displayed on the unmanned ordering machine in the CCTV are recognized by character recognition technology and transmitted to the kitchen terminal and the serving bot terminal.

주방단말기는 상기 무인주문기 및/또는 CCTV로부터 정보를 수신하는 통신모듈과 주문번호와 메뉴 정보 및 고객의 테이블 번호를 표시하는 표시모듈을 구비하며, 상기 표시모듈은 다수의 고객으로 인한 다수의 주문번호, 메뉴, 테이블 번호를 일목요연하게 표로 정리하여 디스플레이한다. 또한, 주문번호에 대하여 완성여부를 표시할 수 있는 항목을 표시하며, 요리 완성 시 해당항목을 눌러 요리완성을 표시한다.The kitchen terminal includes a communication module for receiving information from the unmanned ordering machine and/or CCTV, and a display module for displaying an order number, menu information, and a customer's table number, wherein the display module includes a plurality of orders from a plurality of customers. Numbers, menus, and table numbers are clearly arranged in a table and displayed. In addition, an item capable of indicating whether or not completion of the order is displayed is displayed for the order number, and when cooking is completed, the cooking completion is displayed by pressing the corresponding item.

무인주문기와 CCTV에서 정보를 주방단말기로 전송하되, 서빙봇 단말기로는 전송하지 않게 구성하고, 주방단말기 통신모듈이 서빙봇 단말기로 정보를 전송하게 구성할 수도 있다. Information from the unmanned order machine and CCTV may be transmitted to the kitchen terminal, but not to the serving bot terminal, and the kitchen terminal communication module may be configured to transmit information to the serving bot terminal.

CCTV는 하나 이상 설치될 수 있고, CCTV는 통신모듈, 영상분석 모듈 및 문자인식 모듈, 개체추적모듈 및 판단모듈을 구비된다. 그에 따라 무인주문기의 화면에 대해 문자인식 기능을 구비하고, 주문번호를 인식하며, 고객에 대해 영상인식 또는 안면인식 기능을 구비하고, 개체추적 모듈에서 고객 동선을 추적한다. 또한, CCTV에는 미리 촬영된 매장 지도가 저장되어 각 테이블 번호를 인식하는 모듈이 영상분석모듈에 구비되거나, 매장 내 테이블에 대해 각각의 식별번호(테이블 번호라 함)가 물리적으로 부여되어 있고, 이를 문자인식모듈에서 인식하고, 판단모듈이 주문번호와 고객착석 테이블 번호를 매칭시킨다. One or more CCTVs may be installed, and the CCTV includes a communication module, an image analysis module and a character recognition module, an object tracking module and a determination module. Accordingly, a character recognition function is provided for the screen of the unmanned ordering machine, an order number is recognized, an image recognition function or a face recognition function is provided for the customer, and the customer movement is tracked in the object tracking module. In addition, a pre-photographed store map is stored in the CCTV, and a module for recognizing each table number is provided in the image analysis module, or each identification number (referred to as a table number) is physically assigned to a table in the store. The character recognition module recognizes, and the judgment module matches the order number with the customer seating table number.

서빙봇은 자율주행이 가능하며, 주방과 매장 내 각 테이블에 이르는 경로 주행에 대해 학습되어 있는 것이 바람직하다. 서빙봇에는 음식을 탑재할 수 있는 하나 이상의 선반이 있고, 주행하고자 하는 목표 주문번호와 테이블번호(메뉴 포함여부는 선택적)를 표시하는 서빙봇 단말기가 설치된다. 상기 서빙봇 단말기는 무인주문기, CCTV, 주방단말기와 통신할 수 있는 통신모듈이 구비된다. The serving bot is capable of autonomous driving, and it is desirable to learn about the route to each table in the kitchen and store. The serving bot has one or more shelves on which food can be loaded, and a serving bot terminal that displays the target order number and table number (selection whether or not the menu is included) is installed. The serving bot terminal is provided with a communication module capable of communicating with an unmanned ordering machine, a CCTV, and a kitchen terminal.

상술한 실시예는 다소 변형될 수 있다. 예를 들면, 무인주문기에서 주문번호와 메뉴를 주방단말기와 서빙봇에 전송하고, CCTV가 테이블 번호를 주방단말기와 서빙봇에 전송하는 것 외에, 무인주문기는 주방단말기에만 정보를 전송하고, CCTV도 주방단말기에만 테이블 번호를 전송하고, 주망단말기가 서빙봇 단말기에 정보를 전송하는 식으로 변형될 수 있다.The above-described embodiment may be slightly modified. For example, in addition to transmitting the order number and menu from the unmanned ordering machine to the kitchen terminal and serving bot, and the CCTV transmitting the table number to the kitchen terminal and serving bot, the unmanned ordering machine transmits information only to the kitchen terminal and CCTV Also, it can be modified in such a way that the table number is transmitted only to the kitchen terminal, and the main network terminal transmits information to the serving bot terminal.

또한, 무인주문기는 주문번호와 메뉴만 표시하고 결제기능을 구비하고, CCTV가 주문번호와 메뉴를 인식하고, 테이블 번호가 확정되면, 주문번호, 메뉴 및 테이블 번호를 주방단말기와 서빙봇 단말기에 전송하거나, 주방단말기에 전송하여 주면, 주방단말기가 서빙봇 단말기에 전송하는 방식으로 구현될 수도 있다. In addition, the unmanned ordering machine displays only the order number and menu and has a payment function, the CCTV recognizes the order number and menu, and when the table number is confirmed, the order number, menu and table number are transmitted to the kitchen terminal and the serving bot terminal Alternatively, if it is transmitted to the kitchen terminal, it may be implemented in a way that the kitchen terminal transmits to the serving bot terminal.

이와 같이 서빙봇에 CCTV를 결합하여 사람의 수고를 한층 더 절감한 서빙봇 운용시스템을 구현할 수 있다.In this way, it is possible to implement a serving bot operating system that further reduces human effort by combining the serving bot with CCTV.

한편, 상기 실시 예들에서 제시한 구체적인 수치들은 예시적인 것으로 필요에 따라 변형 가능함은 물론이며, 본 발명이 속하는 기술분야의 당업자는 본 발명이 그 기술적 사상이나 필수적 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시 예는 모든 면에서 예시적인 것이며 한정적인 것이 아닌 것으로서 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 등가개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.On the other hand, the specific numerical values presented in the above embodiments are exemplary and can be modified as necessary, and those skilled in the art to which the present invention pertains can implement the present invention in other specific forms without changing the technical spirit or essential characteristics. It can be understood that Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive. The scope of the present invention is indicated by the following claims rather than the above detailed description, and all changes or modifications derived from the meaning and scope of the claims and their equivalent concepts should be interpreted as being included in the scope of the present invention. do.

Claims (8)

매장 내 서빙봇 운용시스템으로서,
무인주문기;
매장 전체를 감시하는 CCTV;
상기 무인주문기, 서빙봇 단말기 및 CCTV와 소통하는 주방단말기; 및
상기 무인주문기, CCTV 및 주방단말기와 소통하는 서빙봇 단말기를 구비하고 자율주행하는 서빙봇;을 포함하고,
상기 무인주문기는 메뉴 디스플레이, 메뉴선택모듈, 결제모듈 및 주문번호생성모듈, 주문번호와 메뉴를 주방단말기로 전송하는 통신모듈을 구비하여, 고객이 결제를 완료하면 주문번호와 메뉴를 상기 주방단말기와 서빙봇 단말기에 전송하고,
상기 CCTV는 영상분석모듈, 문자인식모듈, 객체추적모듈, 판단모듈 및 통신모듈을 구비하여, 영상분석모듈과 문자인식모듈에서 무인주문기에 표시된 주문번호와 해당 주문 고객을 문자인식과 영상분석으로 매칭하고, 객체추적모듈에서 고객의 동선을 추적하여 테이블 번호가 표시된 특정 테이블에 착석하면, 판단모듈에서 해당 테이블 번호를 문자인식하고 주문번호와 매칭하여 통신모듈에서 주문번호와 매칭된 테이블 번호를 상기 주방단말기와 서빙봇 단말기에 전송하고,
상기 주방단말기는 통신모듈과 주문번호, 메뉴 정보, 고객의 테이블 번호 및 주문 음식의 완료여부를 표시할 수 있는 항목을 표시하는 표시모듈을 구비하여, 음식 조리 완료 시 해당 항목을 조작하여 음식의 완료를 표시하고, 이와 동시에 상기 통신모듈은 서빙봇을 주방으로 호출하여, 서빙 봇에 음식이 탑재되고,
상기 서빙봇은 하나 이상의 선반과 통신모듈 및 디스플레이를 포함한 단말기를 구비하여, 탑재된 음식의 배송 전에 확인할 수 있도록 디스플레이에 주문번호, 메뉴, 및 테이블 번호를 표시하는 것을 특징으로 하는 서빙봇 운용시스템.As an in-store serving bot operating system,
unmanned order machine;
CCTV monitoring the entire store;
a kitchen terminal communicating with the unmanned ordering machine, the serving bot terminal, and the CCTV; and
A serving bot equipped with a serving bot terminal that communicates with the unmanned ordering machine, CCTV, and kitchen terminal and autonomously driving; includes,
The unmanned ordering machine includes a menu display, a menu selection module, a payment module and an order number generation module, and a communication module for transmitting the order number and menu to the kitchen terminal, and when the customer completes payment, the order number and menu are transmitted to the kitchen terminal transmitted to the serving bot terminal,
The CCTV is equipped with an image analysis module, a character recognition module, an object tracking module, a judgment module and a communication module, and the image analysis module and the character recognition module match the order number displayed on the unmanned ordering machine and the corresponding customer through text recognition and image analysis And, when the object tracking module tracks the customer's movement and sits at a specific table where the table number is displayed, the determination module recognizes the corresponding table number as a character and matches the order number to provide the table number matched with the order number in the communication module to the kitchen It is transmitted to the terminal and the serving bot terminal,
The kitchen terminal includes a communication module and a display module for displaying an item capable of displaying an order number, menu information, a customer's table number, and whether the ordered food is complete, and when the food is cooked, the item is operated to complete the food display, and at the same time, the communication module calls the serving bot to the kitchen, and food is loaded on the serving bot,
The serving bot includes one or more shelves, a communication module and a terminal including a display, and displays an order number, a menu, and a table number on the display so that the loaded food can be checked before delivery. 매장 내 서빙봇 운용시스템으로서,
무인주문기;
매장 전체를 감시하는 CCTV;
상기 무인주문기, 서빙봇 단말기 및 CCTV와 소통하는 주방단말기; 및
상기 무인주문기, CCTV 및 주방단말기와 소통하는 서빙봇 단말기를 구비하고 자율주행하는 서빙봇;을 포함하고,
상기 무인주문기는 메뉴 디스플레이, 메뉴선택모듈, 결제모듈 및 주문번호생성모듈, 주문번호와 메뉴를 주방단말기로 전송하는 통신모듈을 구비하여, 고객이 결제를 완료하면 주문번호와 메뉴를 상기 주방단말기에 전송하고,
상기 CCTV는 영상분석모듈, 문자인식모듈, 객체추적모듈, 판단모듈 및 통신모듈을 구비하여, 영상분석모듈과 문자인식모듈에서 무인주문기에 표시된 주문번호와 해당 주문 고객을 문자인식과 영상분석으로 매칭하고, 객체추적모듈에서 고객의 동선을 추적하여 테이블 번호가 표시된 특정 테이블에 착석하면, 판단모듈에서 해당 테이블 번호를 문자인식하고 주문번호와 매칭하여 통신모듈에서 주문번호와 매칭된 테이블 번호를 상기 주방단말기에 전송하고,
상기 주방단말기는 통신모듈과 주문번호, 메뉴 정보, 고객의 테이블 번호 및 주문 음식의 완료여부를 표시할 수 있는 항목을 표시하는 표시모듈을 구비하여,
통신모듈을 통해 주문번호, 메뉴, 및 테이블 번호를 서빙봇 단말기에 전송하고, 음식 조리 완료 시 해당 항목을 조작하여 음식의 완료를 표시하고, 이와 동시에 상기 통신모듈은 서빙봇을 주방으로 호출하여, 서빙 봇에 음식이 탑재되고,
상기 서빙봇은 하나 이상의 선반과 통신모듈 및 디스플레이를 포함한 단말기를 구비하여, 탑재된 음식의 배송 전에 확인할 수 있도록 디스플레이에 주문번호, 메뉴, 및 테이블 번호를 표시하는 것을 특징으로 하는 서빙봇 운용시스템.As an in-store serving bot operating system,
unmanned order machine;
CCTV monitoring the entire store;
a kitchen terminal communicating with the unmanned ordering machine, the serving bot terminal, and the CCTV; and
A serving bot equipped with a serving bot terminal that communicates with the unmanned ordering machine, CCTV, and kitchen terminal and autonomously driving; includes,
The unmanned ordering machine includes a menu display, a menu selection module, a payment module and an order number generation module, and a communication module for transmitting the order number and menu to the kitchen terminal, and when the customer completes payment, the order number and menu are transmitted to the kitchen terminal send,
The CCTV is equipped with an image analysis module, a character recognition module, an object tracking module, a judgment module and a communication module, and the image analysis module and the character recognition module match the order number displayed on the unmanned ordering machine and the corresponding customer through text recognition and image analysis And, when the object tracking module tracks the customer's movement and sits at a specific table where the table number is displayed, the determination module recognizes the corresponding table number as a character and matches the order number to provide the table number matched with the order number in the communication module to the kitchen sent to the terminal,
The kitchen terminal includes a communication module and a display module for displaying an order number, menu information, a customer's table number, and an item capable of displaying whether the ordered food has been completed,
The order number, menu, and table number are transmitted to the serving bot terminal through the communication module, and when the food is cooked, the item is manipulated to indicate the completion of the food. At the same time, the communication module calls the serving bot to the kitchen, Food is loaded on the serving bot,
The serving bot includes one or more shelves, a communication module and a terminal including a display, and displays an order number, a menu, and a table number on the display so that the loaded food can be checked before delivery. 매장 내 서빙봇 운용시스템으로서,
무인주문기;
매장 전체를 감시하는 CCTV;
서빙봇 단말기 및 CCTV와 소통하는 주방단말기; 및
CCTV 및 주방단말기와 소통하는 서빙봇 단말기를 구비하고 자율주행하는 서빙봇;을 포함하고,
상기 무인주문기는 메뉴 디스플레이, 메뉴선택모듈, 결제모듈 및 주문번호생성모듈을 구비하여, 고객이 결제를 완료하면 주문번호를 생성하여 메뉴와 함께 디스플레이하고,
상기 CCTV는 영상분석모듈, 문자인식모듈, 객체추적모듈, 판단모듈 및 통신모듈을 구비하여, 영상분석모듈과 문자인식모듈에서 무인주문기에 표시된 주문번호와 메뉴 및 해당 주문 고객을 문자인식과 영상분석으로 매칭하고, 객체추적모듈에서 고객의 동선을 추적하여 테이블 번호가 표시된 특정 테이블에 착석하면, 판단모듈에서 해당 테이블 번호를 문자인식하고 주문번호와 매칭하여 통신모듈에서 주문번호, 메뉴 및 테이블 번호를 상기 주방단말기와 상기 서빙봇 단말기에 전송하고,
상기 주방단말기는 통신모듈과 주문번호, 메뉴 정보, 고객의 테이블 번호 및 주문 음식의 완료여부를 표시할 수 있는 항목을 표시하는 표시모듈을 구비하여,
음식 조리 완료 시 해당 항목을 조작하여 음식의 완료를 표시하고, 이와 동시에 상기 통신모듈은 서빙봇을 주방으로 호출하여, 서빙 봇에 음식이 탑재되고,
상기 서빙봇은 하나 이상의 선반과 통신모듈 및 디스플레이를 포함한 단말기를 구비하여, 탑재된 음식의 배송 전에 확인할 수 있도록 디스플레이에 주문번호, 메뉴, 및 테이블 번호를 표시하는 것을 특징으로 하는 서빙봇 운용시스템.As an in-store serving bot operating system,
unmanned order machine;
CCTV monitoring the entire store;
A kitchen terminal that communicates with a serving bot terminal and CCTV; and
A serving bot equipped with a serving bot terminal that communicates with CCTV and a kitchen terminal and autonomously driving; includes;
The unmanned ordering machine includes a menu display, a menu selection module, a payment module and an order number generation module, and when the customer completes payment, generates an order number and displays it together with the menu,
The CCTV has an image analysis module, a character recognition module, an object tracking module, a judgment module and a communication module, and the image analysis module and the character recognition module recognize the order number and menu displayed on the unmanned order machine and the corresponding customer for character recognition and image analysis and the object tracking module tracks the customer's movement and sits at a specific table marked with the table number. transmitted to the kitchen terminal and the serving bot terminal,
The kitchen terminal includes a communication module and a display module for displaying an order number, menu information, a customer's table number, and an item capable of displaying whether the ordered food has been completed,
When food is cooked, the item is manipulated to indicate the completion of the food, and at the same time, the communication module calls the serving bot to the kitchen, and the food is loaded in the serving bot,
The serving bot includes one or more shelves, a communication module and a terminal including a display, and displays an order number, a menu, and a table number on the display so that the loaded food can be checked before delivery. 매장 내 서빙봇 운용시스템으로서,
무인주문기;
매장 전체를 감시하는 CCTV;
서빙봇 단말기 및 CCTV와 소통하는 주방단말기; 및
CCTV 및 주방단말기와 소통하는 서빙봇 단말기를 구비하고 자율주행하는 서빙봇;을 포함하고,
상기 무인주문기는 메뉴 디스플레이, 메뉴선택모듈, 결제모듈 및 주문번호생성모듈을 구비하여, 고객이 결제를 완료하면 주문번호를 생성하여 메뉴와 함께 디스플레이하고,
상기 CCTV는 영상분석모듈, 문자인식모듈, 객체추적모듈, 판단모듈 및 통신모듈을 구비하여, 영상분석모듈과 문자인식모듈에서 무인주문기에 표시된 주문번호와 메뉴 및 해당 주문 고객을 문자인식과 영상분석으로 매칭하고, 객체추적모듈에서 고객의 동선을 추적하여 테이블 번호가 표시된 특정 테이블에 착석하면, 판단모듈에서 해당 테이블 번호를 문자인식하고 주문번호와 매칭하여 통신모듈에서 주문번호, 메뉴 및 테이블 번호를 상기 주방단말기에 전송하고,
상기 주방단말기는 통신모듈과 주문번호, 메뉴 정보, 고객의 테이블 번호 및 주문 음식의 완료여부를 표시할 수 있는 항목을 표시하는 표시모듈을 구비하여, 주문번호, 메뉴 정보, 고객의 테이블 번호를 서빙 봇 단말기에 전송하고,
음식 조리 완료 시 해당 항목을 조작하여 음식의 완료를 표시하고, 이와 동시에 상기 통신모듈은 서빙봇을 주방으로 호출하여, 서빙 봇에 음식이 탑재되고,
상기 서빙봇은 하나 이상의 선반과 통신모듈 및 디스플레이를 포함한 단말기를 구비하여, 탑재된 음식의 배송 전에 확인할 수 있도록 디스플레이에 주문번호, 메뉴, 및 테이블 번호를 표시하는 것을 특징으로 하는 서빙봇 운용시스템.As an in-store serving bot operating system,
unmanned order machine;
CCTV monitoring the entire store;
A kitchen terminal that communicates with a serving bot terminal and CCTV; and
A serving bot equipped with a serving bot terminal that communicates with a CCTV and a kitchen terminal and autonomously driving; includes;
The unmanned ordering machine includes a menu display, a menu selection module, a payment module and an order number generation module, and when the customer completes payment, generates an order number and displays it together with the menu,
The CCTV is equipped with an image analysis module, a character recognition module, an object tracking module, a judgment module and a communication module, and the image analysis module and the character recognition module recognize the order number and menu displayed on the unmanned order machine and the corresponding customer for character recognition and image analysis and the object tracking module tracks the customer's movement and sits at a specific table marked with the table number, the judgment module recognizes the table number as a character and matches the order number with the order number, menu and table number in the communication module transmitted to the kitchen terminal,
The kitchen terminal includes a communication module and a display module for displaying an order number, menu information, a customer's table number, and items capable of displaying whether the ordered food is complete, serving the order number, menu information, and customer's table number send to the bot terminal,
When food is cooked, the item is manipulated to indicate the completion of the food, and at the same time, the communication module calls the serving bot to the kitchen, and the food is loaded in the serving bot,
The serving bot includes one or more shelves, a communication module and a terminal including a display, and displays an order number, a menu, and a table number on the display so that the loaded food can be checked before delivery. 제1항 내지 제4항 중 어느 한 항에 있어서, 상기 테이블 번호는 테이블 상에 물리적으로 번호가 표시되어 있고, CCTV 문자인식모듈에서 테이블 번호를 문자인식으로 판별하는 것을 특징으로 하는 서빙봇 운용시스템.[Claim 5] The system according to any one of claims 1 to 4, wherein the table number is physically marked on the table, and the CCTV character recognition module determines the table number by character recognition. . 제1항 내지 제4항 중 어느 한 항에 있어서, 상기 CCTV의 테이블 번호는 인식은, 매장 전체 영상을 하나의 맵으로 하여 테이블 이미지와 위치를 영상분석모듈에서 분석하여 판단모듈에서 테이블 번호를 부여한 것을 특징으로 하는 서빙봇 운용시스템.The method according to any one of claims 1 to 4, wherein the table number of the CCTV is recognized by using the entire store image as one map, analyzing the table image and location in the image analysis module, and assigning the table number in the judgment module Serving bot operating system, characterized in that. 제1항 내지 제4항 중 어느 한 항에 있어서, 상기 서빙봇 단말기의 디스플레이에 표시된 주문번호, 메뉴 및 테이블 번호에 대해 수동으로 수정할 수 있는 수동입력모듈을 구비한 것을 특징으로 하는 서빙봇 운용시스템.[Claim 5] The serving bot operating system according to any one of claims 1 to 4, further comprising a manual input module capable of manually modifying the order number, menu and table number displayed on the display of the serving bot terminal. . 제1항 내지 제4항 중 어느 한 항에 있어서, n 번째 고객이 테이블 착석 후 테이블 변경을 위한 이동이 진행되고, 그 동안 n+1 번째 고객이 주문을 완료하는 결제를 한 경우, CCTV의 판단모듈은 n번째 고객과 n+1번째 고객 중 먼저 테이블에 착석하는 순서대로 테이블 번호를 확정하여 주방단말기로 전송하여 주방단말기의 테이블 번호를 갱신시키는 것을 특징으로 하는 서빙봇 운용시스템.





According to any one of claims 1 to 4, when the nth customer moves to change the table after sitting at the table, and the n+1st customer makes a payment to complete the order, CCTV judgment Serving bot operating system, characterized in that the module determines the table number in the order of first sitting at the table among the nth customer and the n+1th customer, and transmits it to the kitchen terminal to update the table number of the kitchen terminal.
KR1020200104511A 2020-08-20 2020-08-20 Servingbot operating system combining CCTV footage KR102533410B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200104511A KR102533410B1 (en) 2020-08-20 2020-08-20 Servingbot operating system combining CCTV footage

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200104511A KR102533410B1 (en) 2020-08-20 2020-08-20 Servingbot operating system combining CCTV footage

Publications (2)

Publication Number Publication Date
KR20220023054A true KR20220023054A (en) 2022-03-02
KR102533410B1 KR102533410B1 (en) 2023-05-23

Family

ID=80815266

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200104511A KR102533410B1 (en) 2020-08-20 2020-08-20 Servingbot operating system combining CCTV footage

Country Status (1)

Country Link
KR (1) KR102533410B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102560616B1 (en) * 2022-08-22 2023-07-27 주식회사 위드콕 Unmanned ordering and postpaid payment system and method using serving robot

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100110143A (en) * 2009-04-02 2010-10-12 주식회사 유진로봇 Robot system for restaurant serving
KR20110011235A (en) * 2009-07-28 2011-02-08 송세경 Image processing system by using monitoring camera of restaurant hall, integrated restaurant management system, image processing method thereof and integrated restaurant management method thereof
JP2012014567A (en) * 2010-07-02 2012-01-19 Ishino Seisakusho Co Ltd Restaurant service system
KR20140137254A (en) * 2013-05-22 2014-12-02 서울시립대학교 산학협력단 Terminal, server, system and method for providing location information using character recognition

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100110143A (en) * 2009-04-02 2010-10-12 주식회사 유진로봇 Robot system for restaurant serving
KR20110011235A (en) * 2009-07-28 2011-02-08 송세경 Image processing system by using monitoring camera of restaurant hall, integrated restaurant management system, image processing method thereof and integrated restaurant management method thereof
JP2012014567A (en) * 2010-07-02 2012-01-19 Ishino Seisakusho Co Ltd Restaurant service system
KR20140137254A (en) * 2013-05-22 2014-12-02 서울시립대학교 산학협력단 Terminal, server, system and method for providing location information using character recognition

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102560616B1 (en) * 2022-08-22 2023-07-27 주식회사 위드콕 Unmanned ordering and postpaid payment system and method using serving robot

Also Published As

Publication number Publication date
KR102533410B1 (en) 2023-05-23

Similar Documents

Publication Publication Date Title
KR102242380B1 (en) Robot System for Serving of Restaurant
US11093995B2 (en) Monitoring of customer consumption activity and management based on monitoring
CN106257396A (en) For managing the computer implemented method of Collaborative environment, system and equipment
US10089614B1 (en) System and method for self-checkout, scan portal, and pay station environments
US20170213277A1 (en) Goods purchase apparatus and goods purchase system having the same
KR102533410B1 (en) Servingbot operating system combining CCTV footage
KR20160142272A (en) An Order System with a Table Electronic Menu Structure and a Method for Treating an Order with the Same
KR101865783B1 (en) Order and reservation management system of restaurant
JP6590392B1 (en) Ordering equipment
KR20170048293A (en) System and method for remote ordering
JP6839334B1 (en) Information processing system, information processing program, and visit support method
JP5586649B2 (en) Order input system and program thereof
WO2019013596A1 (en) Smart vending machine, and electronic commerce system and method using same
KR20210119885A (en) Interworking method of ordering systems and mobile robots
JP2005107624A (en) Order management system for restaurant
CN114283033A (en) Robot intelligent restaurant management system and method thereof
EP4157047A2 (en) Automated cooking assistant
JP2002183525A (en) On-line shopping system using virtual space
KR102551908B1 (en) Unmanned Store Operation System with Portable Kiosk
KR102524850B1 (en) Method And System for Ordering Menu by using Robot
KR20210074039A (en) Integrated management system for cooking and delivering of chef robot
JP2021033740A (en) System, method, and program for managing order
WO2019144332A1 (en) Intelligent sales shopping guide method and system
JP2003331025A (en) Order entry system
JP2003115082A (en) Order entry system

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application