KR102174710B1 - Automatic order management apparatus and method - Google Patents

Automatic order management apparatus and method Download PDF

Info

Publication number
KR102174710B1
KR102174710B1 KR1020180124694A KR20180124694A KR102174710B1 KR 102174710 B1 KR102174710 B1 KR 102174710B1 KR 1020180124694 A KR1020180124694 A KR 1020180124694A KR 20180124694 A KR20180124694 A KR 20180124694A KR 102174710 B1 KR102174710 B1 KR 102174710B1
Authority
KR
South Korea
Prior art keywords
order
user
location
store
identification code
Prior art date
Application number
KR1020180124694A
Other languages
Korean (ko)
Other versions
KR20200043832A (en
Inventor
윤완식
Original Assignee
윤완식
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 윤완식 filed Critical 윤완식
Priority to KR1020180124694A priority Critical patent/KR102174710B1/en
Publication of KR20200043832A publication Critical patent/KR20200043832A/en
Application granted granted Critical
Publication of KR102174710B1 publication Critical patent/KR102174710B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0633—Lists, e.g. purchase orders, compilation or processing
    • G06Q30/0635—Processing of requisition or of purchase orders
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/18—Payment architectures involving self-service terminals [SST], vending machines, kiosks or multimedia terminals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/209—Specified transaction journal output feature, e.g. printed receipt or voice output

Abstract

본 발명은 주문 자동 관리 장치 및 방법에 관한 것으로, 매장에 설치된 키오스크 단말을 통해 주문을 접수하고 결제가 완료된 경우 주문 식별코드가 포함된 주문 영수증을 발행하는 주문 처리부, 상기 매장에 설치된 복수의 테이블들 상부에 배치되고 테이블에 대한 이미지를 획득하는 카메라를 통해 상기 주문 식별코드 및 이미지 변화도를 단계적으로 인식하여 상기 주문에 관한 사용자의 위치를 식별하는 위치 식별부 및 상기 사용자의 위치를 포함하는 주문 정보를 표시하는 주문 정보 표시부를 포함한다. 따라서, 본 발명은 주문 접수 뿐만 아니라 사용자의 위치를 자동으로 파악함으로써 서비스를 효과적으로 제공할 수 있다.The present invention relates to an automatic order management apparatus and method, wherein an order processing unit that receives an order through a kiosk terminal installed in a store and issues an order receipt including an order identification code when payment is completed, a plurality of tables installed in the store Order information including the location of the user and a location identification unit that identifies the user's location regarding the order by stepwise recognition of the order identification code and the image gradient through a camera disposed on the top and obtaining an image for the table It includes an order information display unit that displays. Accordingly, the present invention can effectively provide a service not only by receiving an order but also by automatically identifying the location of the user.

Description

주문 자동 관리 장치 및 방법{AUTOMATIC ORDER MANAGEMENT APPARATUS AND METHOD}Automatic order management device and method {AUTOMATIC ORDER MANAGEMENT APPARATUS AND METHOD}

본 발명은 주문 자동 관리 기술에 관한 것으로, 보다 상세하게는 주문 접수 뿐만 아니라 사용자의 위치를 자동으로 파악함으로써 서비스를 효과적으로 제공할 수 있는 주문 자동 관리 장치 및 방법에 관한 것이다.The present invention relates to an automatic order management technology, and more particularly, to an automatic order management apparatus and method capable of effectively providing a service by automatically identifying a user's location as well as receiving an order.

최근 키오스크를 이용한 자동 주문 시스템을 널리 활용되고 있다. 키오스크는 정보서비스와 업무의 무인자동화를 위하여 대중들이 쉽게 이용할 수 있도록 다양한 장소에 설치된 무인 단말기에 해당한다. 키오스크를 기반으로 하는 자동 주문 시스템은 자동으로 주문을 접수할 뿐 주문된 상품이나 서비스를 제공하기 위해서는 종래의 방식과 동일하게 사용자가 직접 카운터로 이동하거나 또는 종업원이 직접 사용자를 찾아가야 하는 문제가 존재한다.Recently, an automatic ordering system using a kiosk is widely used. Kiosk is an unmanned terminal installed in various places so that the public can easily use it for unmanned automation of information service and work. An automatic ordering system based on a kiosk automatically accepts orders, but in order to provide ordered goods or services, there is a problem that the user must directly go to the counter or the employee must visit the user directly as in the conventional method. do.

한국등록특허 제10-1057353(2011.08.10)호는 키오스크 시스템의 서비스 처리 장치에 관한 것으로, 키오스크를 통해 발생된 서비스 이벤트를 처리하고 그 처리 결과를 키오스크에 제공하는 다수의 서비스 이벤트 처리 서버의 개별 부하에 따라 상기 발생된 서비스 이벤트를 각 처리 서버에 적응적으로 분배하여 처리함으로써 키오스크 시스템의 각 처리 디바이스의 부하를 균등화 시킬 수 있고 서비스 처리 시간의 획기적인 단축이 가능하며 서비스 처리의 신뢰성을 제공할 수 있다.Korean Patent Registration No. 10-1057353 (2011.08.10) relates to a service processing device of a kiosk system, and is a separate service event processing server that processes service events generated through a kiosk and provides the results to the kiosk. By adaptively distributing and processing the generated service events to each processing server according to the load, the load of each processing device of the kiosk system can be equalized, the service processing time can be drastically reduced, and the reliability of service processing can be provided. have.

한국공개특허 제10-2009-0001731(2009.01.09)호는 무인 결제(정산)를 통한 티켓(영수증) 발행 키오스크에 관한 것으로, 본 장비가 설치되어 있는 어느 곳에서든 서비스를 하고자 하는 본사의 판매대 또는 점포, TICKET BOX 설치 없이 소비자의 구매 욕구에 맞는 ITEM을 키오스크를 통해서 고객이 직접 선택하고 신용카드 또는 현금 등의 다양한 결제 수단으로 현장에서 바로 대기 시간 없이 이용할 수 있으므로 고객에게 상당한 편의를 제공할 수 있다Korean Patent Publication No. 10-2009-0001731 (2009.01.09) relates to a kiosk for issuing tickets (receipts) through unattended payment (settlement), and the sales counter of the head office that wants to provide service anywhere this equipment is installed or Without the need to install a store or ticket box, the customer can directly select the item that meets the consumer's purchase needs through a kiosk, and can use various payment methods such as credit card or cash without waiting time on site, thus providing considerable convenience to customers.

한국등록특허 제10-1057353(2011.08.10)호Korean Patent Registration No. 10-1057353 (2011.08.10) 한국공개특허 제10-2009-0001731(2009.01.09)호Korean Patent Publication No. 10-2009-0001731 (2009.01.09)

본 발명의 일 실시예는 주문 접수 뿐만 아니라 사용자의 위치를 자동으로 파악함으로써 서비스를 효과적으로 제공할 수 있는 주문 자동 관리 장치 및 방법을 제공하고자 한다.An embodiment of the present invention is to provide an automatic order management apparatus and method capable of effectively providing a service by automatically identifying a user's location as well as receiving an order.

본 발명의 일 실시예는 테이블 상부에 설치된 카메라를 통해 주문 식별코드 및 이미지 변화도를 단계적으로 인식하여 주문에 관한 사용자의 위치를 식별할 수 있는 주문 자동 관리 장치 및 방법을 제공하고자 한다.An embodiment of the present invention is to provide an automatic order management apparatus and method capable of identifying a user's position regarding an order by stepwise recognition of an order identification code and an image change degree through a camera installed on a table.

본 발명의 일 실시예는 주문 식별코드 인식에 실패한 경우 주문 시점과 해당 시점 이후 일정 시간이 경과한 시점에서의 이미지 간의 변화에 기초하여 사용자의 위치를 식별할 수 있는 주문 자동 관리 장치 및 방법을 제공하고자 한다.An embodiment of the present invention provides an order automatic management apparatus and method capable of identifying a user's location based on a change between an order time and an image at a point in time after a certain time has elapsed when the order identification code recognition fails. I want to.

실시예들 중에서, 주문 자동 관리 장치는 매장에 설치된 키오스크 단말을 통해 주문을 접수하고 결제가 완료된 경우 주문 식별코드가 포함된 주문 영수증을 발행하는 주문 처리부, 상기 매장에 설치된 복수의 테이블들 상부에 배치되고 테이블에 대한 이미지를 획득하는 카메라를 통해 상기 주문 식별코드를 인식하여 상기 주문에 관한 사용자의 위치를 식별하는 위치 식별부 및 상기 사용자의 위치를 포함하는 주문 정보를 표시하는 주문 정보 표시부를 포함한다.Among the embodiments, the automatic order management device receives an order through a kiosk terminal installed in the store and issues an order receipt including an order identification code when payment is completed, and is placed on top of a plurality of tables installed in the store. And a location identification unit that identifies the user's location regarding the order by recognizing the order identification code through a camera that acquires an image of the table, and an order information display unit that displays order information including the location of the user. .

상기 주문 처리부는 상기 주문 식별코드를 포함하는 모바일 영수증을 상기 주문 영수증으로서 발행하여 사용자 단말에 전송할 수 있다.The order processing unit may issue a mobile receipt including the order identification code as the order receipt and transmit it to the user terminal.

상기 위치 식별부는 상기 복수의 테이블들 상부에 각각 배치되는 복수의 카메라들 중 어느 하나를 통해 상기 주문 식별코드를 인식한 경우 해당 카메라와 연관된 테이블의 위치를 상기 사용자의 위치로서 식별할 수 있다.When the order identification code is recognized through one of a plurality of cameras respectively disposed above the plurality of tables, the location identification unit may identify the location of the table associated with the corresponding camera as the user's location.

상기 위치 식별부는 상기 매장 내에서 적어도 하나의 테이블을 포함하는 복수의 식별 영역들을 결정하고 상기 복수의 식별 영역 상부에 각각 배치되는 카메라를 통해 상기 사용자의 위치를 식별할 수 있다.The location identification unit may determine a plurality of identification areas including at least one table in the store, and identify the location of the user through cameras respectively disposed above the plurality of identification areas.

상기 위치 식별부는 상기 주문이 접수된 시점부터 특정 기준 시간 이내에 상기 주문 식별코드의 인식에 실패한 경우 상기 복수의 식별 영역들의 이미지 변화를 기초로 사용자가 착석한 테이블을 결정하고 해당 테이블을 상기 사용자의 위치로서 식별할 수 있다.If the recognition of the order identification code fails within a specific reference time from the time the order is received, the location identification unit determines a table in which the user is seated based on image changes of the plurality of identification areas, and determines the table in which the user is seated. Can be identified as

상기 위치 식별부는 상기 특정 기준 시간이 경과한 시점에 상기 카메라를 통해 상기 복수의 식별 영역들에 대한 이미지를 획득하고, 기본 테이블 이미지와 비교하여 이미지 변화도가 특정 기준을 초과하는 테이블을 상기 사용자가 착석한 테이블로서 결정할 수 있다.The location identification unit acquires images for the plurality of identification areas through the camera at the time when the specific reference time has elapsed, and compares the image with a basic table image to a table in which an image change degree exceeds a specific criterion by the user. It can be decided as a seated table.

상기 주문 정보 표시부는 상기 주문 정보의 선택에 따라 상기 카메라를 통해 상기 사용자의 위치에 관한 실시간 영상을 수신하여 표시할 수 있다.The order information display unit may receive and display a real-time image of the user's location through the camera according to the selection of the order information.

실시예들 중에서, 주문 자동 관리 방법은 매장에 설치된 키오스크 단말을 통해 주문을 접수하고 결제가 완료된 경우 주문 식별코드가 포함된 주문 영수증을 발행하는 단계, 상기 매장에 설치된 복수의 테이블들 상부에 배치되고 테이블에 대한 이미지를 획득하는 카메라를 통해 상기 주문 식별코드 및 이미지 변화도를 단계적으로 인식하여 상기 주문에 관한 사용자의 위치를 식별하는 단계 및 상기 사용자의 위치를 포함하는 주문 정보를 표시하는 단계를 포함한다.Among the embodiments, the automatic order management method includes receiving an order through a kiosk terminal installed in a store and issuing an order receipt including an order identification code when payment is completed, and is disposed above a plurality of tables installed in the store. Step-by-step recognition of the order identification code and image gradient through a camera that acquires an image for the table to identify the location of the user regarding the order, and displaying order information including the location of the user. do.

개시된 기술은 다음의 효과를 가질 수 있다. 다만, 특정 실시예가 다음의 효과를 전부 포함하여야 한다거나 다음의 효과만을 포함하여야 한다는 의미는 아니므로, 개시된 기술의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.The disclosed technology can have the following effects. However, since it does not mean that a specific embodiment should include all of the following effects or only the following effects, it should not be understood that the scope of the rights of the disclosed technology is limited thereby.

본 발명의 일 실시예에 따른 주문 자동 관리 장치 및 방법은 테이블 상부에 설치된 카메라를 통해 주문 식별코드 및 이미지 변화도를 단계적으로 인식하여 주문에 관한 사용자의 위치를 식별할 수 있다.The apparatus and method for automatic order management according to an embodiment of the present invention can identify the user's position regarding the order by step-by-step recognition of the order identification code and image gradient through a camera installed on the table.

본 발명의 일 실시예에 따른 주문 자동 관리 장치 및 방법은 주문 식별코드 인식에 실패한 경우 주문 시점과 해당 시점 이후 일정 시간이 경과한 시점에서의 이미지 간의 변화에 기초하여 사용자의 위치를 식별할 수 있다.The apparatus and method for automatic order management according to an embodiment of the present invention may identify a user's location based on a change between an order time and an image at a time period after a certain time has elapsed when the order identification code recognition fails. .

도 1은 본 발명의 일 실시예에 따른 주문 자동 관리 시스템을 설명하는 도면이다.
도 2는 도 1에 있는 주문 자동 관리 장치를 설명하는 블록도이다.
도 3은 도 1에 있는 주문 자동 관리 장치에서 수행되는 주문 자동 관리 과정을 설명하는 순서도이다.
도 4는 도 1에 있는 카메라가 매장의 천장에 설치되는 유형을 설명하는 예시도이다.1 is a diagram illustrating an order automatic management system according to an embodiment of the present invention.
FIG. 2 is a block diagram illustrating an order automatic management apparatus in FIG. 1.
FIG. 3 is a flowchart illustrating an order automatic management process performed by the automatic order management apparatus of FIG. 1.
4 is an exemplary view illustrating a type of the camera in FIG. 1 installed on the ceiling of a store.

본 발명에 관한 설명은 구조적 내지 기능적 설명을 위한 실시예에 불과하므로, 본 발명의 권리범위는 본문에 설명된 실시예에 의하여 제한되는 것으로 해석되어서는 아니 된다. 즉, 실시예는 다양한 변경이 가능하고 여러 가지 형태를 가질 수 있으므로 본 발명의 권리범위는 기술적 사상을 실현할 수 있는 균등물들을 포함하는 것으로 이해되어야 한다. 또한, 본 발명에서 제시된 목적 또는 효과는 특정 실시예가 이를 전부 포함하여야 한다거나 그러한 효과만을 포함하여야 한다는 의미는 아니므로, 본 발명의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.Since the description of the present invention is merely an embodiment for structural or functional description, the scope of the present invention should not be construed as being limited by the embodiments described in the text. That is, since the embodiments can be variously changed and have various forms, the scope of the present invention should be understood to include equivalents capable of realizing the technical idea. In addition, since the object or effect presented in the present invention does not mean that a specific embodiment should include all of them or only those effects, the scope of the present invention should not be understood as being limited thereto.

한편, 본 출원에서 서술되는 용어의 의미는 다음과 같이 이해되어야 할 것이다.Meanwhile, the meaning of terms described in the present application should be understood as follows.

"제1", "제2" 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위한 것으로, 이들 용어들에 의해 권리범위가 한정되어서는 아니 된다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.Terms such as "first" and "second" are used to distinguish one component from other components, and the scope of rights is not limited by these terms. For example, a first component may be referred to as a second component, and similarly, a second component may be referred to as a first component.

어떤 구성요소가 다른 구성요소에 "연결되어"있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결될 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어"있다고 언급된 때에는 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 한편, 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.When a component is referred to as being "connected" to another component, it should be understood that although it may be directly connected to the other component, another component may exist in the middle. On the other hand, when it is mentioned that a certain component is "directly connected" to another component, it should be understood that no other component exists in the middle. On the other hand, other expressions describing the relationship between the constituent elements, that is, "between" and "just between" or "neighboring to" and "directly neighboring to" should be interpreted as well.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함하다"또는 "가지다" 등의 용어는 실시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Singular expressions are to be understood as including plural expressions unless the context clearly indicates otherwise, and terms such as “comprise” or “have” refer to implemented features, numbers, steps, actions, components, parts, or It is to be understood that it is intended to designate that a combination exists and does not preclude the presence or addition of one or more other features or numbers, steps, actions, components, parts, or combinations thereof.

각 단계들에 있어 식별부호(예를 들어, a, b, c 등)는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 단계들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.In each step, the identification code (for example, a, b, c, etc.) is used for convenience of explanation, and the identification code does not describe the order of each step, and each step has a specific sequence clearly in context. Unless otherwise stated, it may occur differently from the stated order. That is, each of the steps may occur in the same order as specified, may be performed substantially simultaneously, or may be performed in the reverse order.

본 발명은 컴퓨터가 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있고, 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.The present invention can be embodied as computer-readable codes on a computer-readable recording medium, and the computer-readable recording medium includes all types of recording devices storing data that can be read by a computer system. . Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disk, and optical data storage devices. Further, the computer-readable recording medium is distributed over a computer system connected by a network, so that the computer-readable code can be stored and executed in a distributed manner.

여기서 사용되는 모든 용어들은 다르게 정의되지 않는 한, 본 발명이 속하는 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한 이상적이거나 과도하게 형식적인 의미를 지니는 것으로 해석될 수 없다.All terms used herein have the same meaning as commonly understood by one of ordinary skill in the field to which the present invention belongs, unless otherwise defined. Terms defined in commonly used dictionaries should be construed as having meanings in the context of related technologies, and cannot be construed as having an ideal or excessive formal meaning unless explicitly defined in the present application.

도 1은 본 발명의 일 실시예에 따른 주문 자동 관리 시스템을 설명하는 도면이다.1 is a diagram illustrating an order automatic management system according to an embodiment of the present invention.

도 1을 참조하면, 주문 자동 관리 시스템(100)은 키오스크 단말(110) 카메라(130), 주문 자동 관리 장치(150) 및 주문 표시 장치(170)를 포함할 수 있다.Referring to FIG. 1, the automatic order management system 100 may include a kiosk terminal 110, a camera 130, an automatic order management device 150, and an order display device 170.

키오스크 단말(110)은 상품 또는 서비스에 대한 주문을 자동으로 접수하여 처리할 수 있는 컴퓨팅 장치에 해당할 수 있다. 키오스크 단말(110)은 유선 또는 무선 통신이 가능한 네트워크 기능을 포함하여 구현될 수 있고, 카메라, 터치 스크린, 센서 등을 더 포함하여 다양한 형태로 구현될 수 있다. 키오스크 단말(110)은 주문 자동 관리 장치(150)와 네트워크를 통해 연결될 수 있고, 복수의 키오스크 단말(110)들은 주문 자동 관리 장치(150)와 동시에 연결될 수 있다. 일 실시예에서, 키오스크 단말(110)은 주문 자동 관리 장치(150)에 포함되어 구현될 수 있다.The kiosk terminal 110 may correspond to a computing device capable of automatically receiving and processing an order for a product or service. The kiosk terminal 110 may be implemented including a network function capable of wired or wireless communication, and may be implemented in various forms, including a camera, a touch screen, and a sensor. The kiosk terminal 110 may be connected to the automatic order management device 150 through a network, and the plurality of kiosk terminals 110 may be connected to the automatic order management device 150 at the same time. In one embodiment, the kiosk terminal 110 may be implemented by being included in the automatic order management apparatus 150.

카메라(130)는 특정 공간에 배치된 테이블 상부에 설치되는 영상 촬영 장치에 해당할 수 있다. 카메라(130)는 일반적으로 특정 공간의 천장에 설치될 수 있으나 장소적 특성을 고려하여 테이블에 대한 영상 촬영이 가능한 위치에 설치될 수 있다. 카메라(130)는 주문 자동 관리 장치(150)와 네트워크를 통해 연결될 수 있고, 복수의 카메라(130)들은 주문 자동 관리 장치(150)와 동시에 연결될 수 있다. 일 실시예에서, 카메라(130)는 주문 자동 관리 장치(150)에 포함되어 구현될 수 있다.The camera 130 may correspond to an image capturing device installed on a table disposed in a specific space. In general, the camera 130 may be installed on the ceiling of a specific space, but may be installed at a position in which an image of a table can be captured in consideration of locational characteristics. The camera 130 may be connected to the automatic order management device 150 through a network, and the plurality of cameras 130 may be connected to the automatic order management device 150 at the same time. In one embodiment, the camera 130 may be implemented by being included in the automatic order management apparatus 150.

주문 자동 관리 장치(150)는 사용자의 주문을 접수하고 사용자의 위치를 식별한 후 식별 정보를 표시할 수 있는 컴퓨터 또는 프로그램에 해당하는 서버로 구현될 수 있다. 주문 자동 관리 장치(150)는 키오스크 단말(110), 카메라(130) 및 주문 표시 장치(170)와 유선 네트워크 또는 블루투스, WiFi 등과 같은 무선 네트워크로 연결될 수 있고, 유선 또는 무선 네트워크를 통해 키오스크 단말(110), 카메라(130) 및 주문 표시 장치(170)와 통신을 수행할 수 있다. The automatic order management apparatus 150 may be implemented as a server corresponding to a computer or program capable of receiving an order from a user, identifying a location of the user, and displaying identification information. The automatic order management device 150 may be connected to the kiosk terminal 110, the camera 130, and the order display device 170 through a wired network or a wireless network such as Bluetooth or WiFi, and the kiosk terminal ( 110), the camera 130, and the order display device 170 may communicate with each other.

일 실시예에서, 주문 자동 관리 장치(150)는 데이터베이스와 연동하여 사용자의 위치를 식별하는데 필요한 정보를 저장할 수 있다. 한편, 주문 자동 관리 장치(150)는 도 1과 달리, 키오스크 단말(110), 카메라(130) 및 주문 표시 장치(170)를 내부 또는 외부에 포함하여 구현될 수 있다. 또한, 주문 자동 관리 장치(150)는 프로세서, 메모리, 사용자 입출력부 및 네트워크 입출력부를 포함하여 구현될 수 있다. In one embodiment, the automatic order management apparatus 150 may store information necessary to identify a user's location by interworking with a database. Meanwhile, unlike FIG. 1, the automatic order management device 150 may include a kiosk terminal 110, a camera 130, and an order display device 170 inside or outside. In addition, the automatic order management apparatus 150 may be implemented including a processor, a memory, a user input/output unit, and a network input/output unit.

데이터베이스는 주문 자동 관리 장치(150)가 주문을 접수하고 사용자의 위치를 식별하는 과정에서 필요한 다양한 정보들을 저장할 수 있다. 예를 들어, 데이터베이스는 키오스크 단말(110)로부터 주문 정보를 저장할 수 있고, 복수의 카메라(130)들로부터 수신한 주문 식별코드 또는 이미지 정보를 저장할 수 있으며, 반드시 이에 한정되지 않고, 주문 접수부터 사용자 위치 식별 및 표시까지의 과정에서 다양한 형태로 수집 또는 가공된 정보들을 저장할 수 있다.The database may store various pieces of information necessary in the process of the automatic order management apparatus 150 receiving an order and identifying a user's location. For example, the database may store order information from the kiosk terminal 110, and may store order identification codes or image information received from a plurality of cameras 130, and is not necessarily limited thereto, and the user Information collected or processed in various forms in the process of identifying and displaying location can be stored.

주문 표시 장치(170)는 주문 정보를 표시할 수 있는 컴퓨팅 장치에 해당할 수 있고 디스플레이 장치를 포함하는 스마트폰, 노트북 또는 컴퓨터로 구현될 수 있으며, 반드시 이에 한정되지 않고, 태블릿 PC 등 다양한 디바이스로도 구현될 수 있다. 주문 표시 장치(170)는 주문 자동 관리 장치(150)와 네트워크를 통해 연결될 수 있고, 복수의 주문 표시 장치(170)들은 주문 자동 관리 장치(150)와 동시에 연결될 수 있다. 일 실시예에서, 주문 표시 장치(170)은 주문 자동 관리 장치(150)에 포함되어 구현될 수 있다.The order display device 170 may correspond to a computing device capable of displaying order information, and may be implemented as a smartphone, a laptop computer, or a computer including a display device, but is not necessarily limited thereto, and may be used in various devices such as a tablet PC. Can also be implemented. The order display device 170 may be connected to the automatic order management device 150 through a network, and the plurality of order display devices 170 may be connected to the automatic order management device 150 at the same time. In an embodiment, the order display device 170 may be implemented by being included in the automatic order management device 150.

도 2는 도 1에 있는 주문 자동 관리 장치를 설명하는 블록도이다.FIG. 2 is a block diagram illustrating an order automatic management apparatus in FIG. 1.

도 2를 참조하면, 주문 자동 관리 장치(150)는 주문 처리부(210), 위치 식별부(230), 주문 정보 표시부(250) 및 제어부(270)를 포함할 수 있다.Referring to FIG. 2, the automatic order management apparatus 150 may include an order processing unit 210, a location identification unit 230, an order information display unit 250, and a control unit 270.

주문 처리부(210)는 매장에 설치된 키오스크 단말(110)을 통해 주문을 접수하고 결제가 완료된 경우 주문 식별코드가 포함된 주문 영수증을 발행할 수 있다. 주문 식별코드는 주문을 식별하기 위해 사용되는 다양한 형태의 코드에 해당할 수 있고, 예를 들어, QR(Quick Response) 코드, 바코드 등을 포함할 수 있다. 주문 처리부(210)는 키오스크 단말(110)을 통해 주문의 결제까지 완료된 경우 결제에 관한 영수증을 발행할 수 있으며, 해당 영수증에 별도의 주문 식별코드를 인쇄할 수 있다.The order processing unit 210 may receive an order through the kiosk terminal 110 installed in the store and issue an order receipt including an order identification code when payment is completed. The order identification code may correspond to various types of codes used to identify the order, and may include, for example, a quick response (QR) code, a barcode, and the like. The order processing unit 210 may issue a payment receipt when payment of an order is completed through the kiosk terminal 110, and may print a separate order identification code on the receipt.

일 실시예에서, 주문 처리부(210)는 주문 식별코드를 포함하는 모바일 영수증을 주문 영수증으로서 발행하여 사용자 단말에 전송할 수 있다. 사용자 단말은 주문 정보를 표시하거나 확인할 수 있는 컴퓨팅 장치에 해당할 수 있고 디스플레이 장치를 포함하는 스마트폰, 노트북 또는 컴퓨터로 구현될 수 있으며, 반드시 이에 한정되지 않고, 태블릿 PC 등 다양한 디바이스로도 구현될 수 있다. 예를 들어, 주문 처리부(210)는 일반적인 종이 영수증의 발행 대신 사용자의 스마트폰으로 모바일 영수증을 전송할 수 있으며, 사용자는 스마트폰 화면에 해당 모바일 영수증을 표시함으로써 종이로 된 주문 영수증과 동일하게 사용할 수 있다.In one embodiment, the order processing unit 210 may issue a mobile receipt including an order identification code as an order receipt and transmit it to the user terminal. The user terminal may correspond to a computing device capable of displaying or checking order information, and may be implemented as a smartphone, laptop or computer including a display device, and is not necessarily limited thereto, and may be implemented as various devices such as a tablet PC. I can. For example, the order processing unit 210 may transmit a mobile receipt to the user's smartphone instead of issuing a general paper receipt, and the user can use the same as a paper order receipt by displaying the mobile receipt on the smartphone screen. have.

일 실시예에서, 주문 처리부(210)는 키오스크 단말(110)을 통해 주문 식별코드가 포함된 NFC(Near Field Communication) 카드를 주문 영수증과 함께 제공할 수 있다. 주문 자동 관리 장치(150)는 다양한 형태로 구현된 주문 식별코드를 식별할 수 있으며, 키오스크 단말(110)의 특성에 따라 적절한 형태로 구현된 주문 식별코드를 사용자에게 제공할 수 있다.In one embodiment, the order processing unit 210 may provide a Near Field Communication (NFC) card including an order identification code through the kiosk terminal 110 together with an order receipt. The automatic order management apparatus 150 may identify an order identification code implemented in various forms, and may provide an order identification code implemented in an appropriate form to a user according to characteristics of the kiosk terminal 110.

위치 식별부(230)는 매장에 설치된 복수의 테이블들 상부에 배치되고 테이블에 대한 이미지를 획득하는 카메라(130)를 통해 주문 식별코드를 인식하여 주문에 관한 사용자의 위치를 식별할 수 있다. 사용자가 키오스크 단말(110)로부터 주문 완료 후 제공받은 영수증을 소지하여 매장 내 임의의 테이블에 착석한 후 영수증을 테이블 위에 올려놓으면 위치 식별부(230)는 해당 테이블 상부에 설치된 카메라(130)를 통해 영수증에 포함된 주문 식별코드를 인식할 수 있고, 해당 주문과 매칭되는 사용자의 위치를 식별할 수 있다.The location identification unit 230 may identify a user's location regarding an order by recognizing the order identification code through the camera 130 disposed above a plurality of tables installed in the store and obtaining an image of the table. When the user holds the receipt provided after completing the order from the kiosk terminal 110, sits at a table in the store, and places the receipt on the table, the location identification unit 230 uses the camera 130 installed above the table. The order identification code included in the receipt can be recognized, and the location of the user matching the order can be identified.

일 실시예에서, 위치 식별부(230)는 복수의 테이블들 상부에 각각 배치되는 복수의 카메라(130)들 중 어느 하나를 통해 주문 식별코드를 인식한 경우 해당 카메라(130)와 연관된 테이블의 위치를 사용자의 위치로서 식별할 수 있다. 매장 상부에 설치된 카메라(130)는 매장 내의 테이블과 일대일로 매칭될 수 있고, 위치 식별부(230)는 매칭 정보를 이용하여 주문 식별코드를 인식한 카메라(130)와 연관된 테이블을 사용자 위치로서 결정할 수 있다. 이 경우, 각 카메라(130)는 매칭되는 테이블에 존재하는 주문 식별코드만 인식할 수 있도록 미리 설정될 수 있다.In one embodiment, when the position identification unit 230 recognizes the order identification code through any one of the plurality of cameras 130 respectively disposed on the plurality of tables, the position of the table associated with the camera 130 Can be identified as the user's location. The camera 130 installed at the top of the store may be matched one-to-one with the table in the store, and the location identification unit 230 determines a table associated with the camera 130 that recognizes the order identification code using the matching information as the user location. I can. In this case, each camera 130 may be preset to recognize only the order identification code present in the matching table.

일 실시예에서, 위치 식별부(230)는 매장 내에서 적어도 하나의 테이블을 포함하는 복수의 식별 영역들을 결정하고 복수의 식별 영역 상부에 각각 배치되는 카메라(130)를 통해 사용자의 위치를 식별할 수 있다. 식별 영역은 하나의 카메라(130)에 의해 식별될 수 있는 적어도 하나의 테이블을 포함하는 영역에 해당할 수 있고, 주문 자동 관리 장치(150)에 의해 미리 설정될 수 있다. 매장 내부에 설치되는 카메라(130)는 미리 설정된 식별 영역 중 하나와 매칭될 수 있고, 해당 식별 영역의 중앙에 위치하도록 매장 상부에 설치될 수 있다.In one embodiment, the location identification unit 230 determines a plurality of identification areas including at least one table in the store, and identifies the user's location through the camera 130 respectively disposed on the plurality of identification areas. I can. The identification area may correspond to an area including at least one table that can be identified by one camera 130, and may be preset by the automatic order management apparatus 150. The camera 130 installed inside the store may be matched with one of the preset identification areas, and may be installed at the top of the store so as to be located in the center of the corresponding identification area.

보다 구체적으로, 위치 식별부(230)는 테이블 위의 주문 식별코드를 인식한 카메라(130)가 존재하는 경우 해당 카메라(130)와 매칭되는 식별 영역을 결정할 수 있고, 해당 식별 영역 내에 존재하는 테이블 중 어느 하나를 사용자의 위치로 결정할 수 있다. 위치 식별부(230)는 각 카메라(130)와 식별 영역 간의 매칭 정보 뿐만 아니라 각 식별 영역 내에 존재하는 테이블의 개수와 위치에 관한 정보를 데이터베이스에 보관할 수 있고 사용자의 위치 식별에 활용할 수 있다. 위치 식별부(230)는 식별 영역에 대한 이미지 상에서 주문 식별코드의 위치를 식별할 수 있고, 이미지 상의 위치에 대응하는 식별 영역 상의 테이블을 결정할 수 있으며 해당 테이블의 위치를 사용자의 위치로서 결정할 수 있다.More specifically, the location identification unit 230 may determine an identification area matching the camera 130 when there is a camera 130 that recognizes the order identification code on the table, and the table existing in the identification area Any one of them may be determined as the user's location. The location identification unit 230 may store not only matching information between each camera 130 and the identification area, but also information about the number and location of tables existing in each identification area in a database and use it for user location identification. The location identification unit 230 may identify the location of the order identification code on the image for the identification area, determine a table on the identification area corresponding to the location on the image, and determine the location of the table as the user's location. .

일 실시예에서, 위치 식별부(230)는 주문이 접수된 시점부터 특정 기준 시간 이내에 주문 식별코드의 인식에 실패한 경우 복수의 식별 영역들의 이미지 변화를 기초로 사용자가 착석한 테이블을 결정하고 해당 테이블을 사용자의 위치로서 식별할 수 있다. 사용자는 키오스크 단말(110)에 의해 발행된 주문 영수증을 소지한 상태로 매장 내의 빈 테이블들 중 하나에 착석할 수 있고, 해당 테이블 위에 주문 영수증을 올려 놓은 경우에만 위치 식별부(230)가 사용자 위치를 식별할 수 있다. In one embodiment, when the recognition of the order identification code fails within a specific reference time from the time the order is received, the location identification unit 230 determines the table in which the user is seated based on the image change of the plurality of identification areas, and Can be identified as the user's location. The user can sit on one of the empty tables in the store while holding the order receipt issued by the kiosk terminal 110, and only when the order receipt is placed on the table, the location identification unit 230 is Can be identified.

만약 사용자가 주문 영수증을 테이블 위에 올려놓지 않은 경우 위치 식별부(230)는 주문 영수증을 식별할 수 없어 사용자가 착석한 테이블을 결정할 수 없다. 따라서, 위치 식별부(230)는 주문 접수 이후 일정 시간이 경과될 때까지 주문 식별코드가 인식되지 않는 경우 다음 단계로서 카메라(130)에 의해 촬영된 이미지를 분석하여 사용자의 위치를 식별할 수 있다. 특정 기준 시간은 사용자가 주문 접수 이후 매장 내의 테이블로 이동하는 소요되는 시간을 고려하여 산정될 수 있고, 주문 자동 관리 장치(150)에 의해 사전에 설정되어 데이터베이스에 저장될 수 있다.If the user does not place the order receipt on the table, the location identification unit 230 cannot identify the order receipt and thus cannot determine the table in which the user is seated. Therefore, when the order identification code is not recognized until a predetermined time elapses after the order is received, the location identification unit 230 may analyze the image captured by the camera 130 as a next step to identify the user's location. . The specific reference time may be calculated in consideration of the time required for the user to move to the table in the store after receiving the order, and may be set in advance by the automatic order management device 150 and stored in the database.

일 실시예에서, 위치 식별부(230)는 주문이 접수된 시점부터 다음의 수학식을 통해 산출되는 특정 기준 시간 이내에 주문 식별코드의 인식에 실패한 경우 이미지 변화도를 기초로 주문에 관한 사용자의 위치를 식별할 수 있다.In one embodiment, the location identification unit 230 is the user's location regarding the order based on the image gradient when the recognition of the order identification code fails within a specific reference time calculated through the following equation from the time the order is received. Can be identified.

[수학식][Equation]

Figure 112018103007655-pat00001
Figure 112018103007655-pat00001

여기에서, T는 특정 기준 시간을, Tavg는 주문 접수 이후 테이블까지의 평균 이동 시간을, Sempty_max는 키오스크 단말로부터 빈 테이블까지의 거리 중 가장 긴 거리를, C는 매장 내 혼잡도에 해당할 수 있다. Here, T is the specific reference time, T avg is the average travel time from the order receipt to the table, S empty_max is the longest distance from the kiosk terminal to the empty table, and C is the congestion level in the store. have.

주문 자동 관리 장치(150)는 과거 주문 관리 정보를 기초로 키오스크 단말(110)에서의 주문 접수 이후 사용자 위치를 식별하는데 소요되는 시간을 기초로 Tavg를 산출할 수 있고, Tavg는 관리자에 의해 임의의 값으로 설정될 수 있다. 매장 내 혼잡도 C는 매장의 크기를 기초로 매장 내에 존재하는 고객의 수에 따라 미리 설정된 값 중 하나로 산출될 수 있다. 예를 들어, 매장 내 혼잡도 C는 1부터 10까지의 값 중 하나에 해당할 수 있고, 매장 내 고객의 수가 3명 이하이면 10의 값을, 4 ~ 6명이면 9의 값을, ..., 28명 이상이면 1의 값을 갖도록 산출될 수 있다. Order self-managing device 150 may calculate the T avg based on the time required to identify the user's location since the order received in the past order kiosk terminal 110 based on the management information, T avg is by admin It can be set to any value. The congestion degree C in the store may be calculated as one of preset values according to the number of customers existing in the store based on the size of the store. For example, in-store congestion C may correspond to one of values from 1 to 10, a value of 10 if the number of customers in the store is 3 or less, a value of 9 if there are 4 to 6, ... If there are more than 28 people, it can be calculated to have a value of 1.

즉, 주문 자동 관리 장치(150)는 위치 식별부(230)를 통해 주문 접수 이후 빈 테이블까지의 거리, 매장 내 혼잡도 등을 고려하여 사용자가 이동하는데 소요되는 시간을 반영하여 특정 기준 시간 T를 자동으로 산출할 수 있고, 해당 기준 시간 경과 후에도 주문 영주증 인식에 실패한 경우 자동으로 이미지 변화도에 기초하여 사용자의 위치를 식별할 수 있다.That is, the automatic order management device 150 automatically adjusts the specific reference time T by reflecting the time required for the user to move in consideration of the distance to the empty table and the degree of congestion in the store after receiving the order through the location identification unit 230. It can be calculated as, and if the recognition of the order permanent card fails even after the reference time has elapsed, the user's location can be automatically identified based on the image gradient.

일 실시예에서, 위치 식별부(230)는 특정 기준 시간이 경과한 시점에 카메라(130)를 통해 복수의 식별 영역들에 대한 이미지를 획득하고, 기본 테이블 이미지와 비교하여 이미지 변화도가 특정 기준을 초과하는 테이블을 사용자가 착석한 테이블로서 결정할 수 있다. 기본 테이블 이미지는 매장 내에 설치된 테이블에 대한 이미지로서 사용자가 착석하지 않은 상태의 빈 테이블에 대한 이미지에 해당할 수 있다. 이미지 변화도는 이미지 간의 변화 정도를 수치화한 것으로, 이미지를 구성하는 각 픽셀별 RGB 색상 변화를 기초로 산출할 수 있다. In one embodiment, the location identification unit 230 acquires images of a plurality of identification areas through the camera 130 at a time point when a specific reference time has elapsed, and compares the image with the basic table image to a specific standard. A table that exceeds can be determined as a table in which the user is seated. The basic table image is an image of a table installed in a store, and may correspond to an image of an empty table in a state in which the user is not seated. The image gradient is a numerical value of the degree of change between images, and can be calculated based on the RGB color change for each pixel constituting the image.

위치 식별부(230)는 기본 테이블 이미지와 비교한 결과 이미지 변화가 큰 테이블이 존재하는 경우 해당 테이블에 사용자가 착석하였을 확률이 높다는 것을 의미하므로 위치 식별부(230)는 해당 테이블의 위치를 식별하여 사용자의 위치로서 결정할 수 있다. 사용자의 위치 결정의 기준이 되는 이미지 변화도에 대한 특정 기준은 주문 자동 관리 장치(150)에서 사전에 설정될 수 있고, 다른 예에서, 키오스크 단말(110)에 의해 접수된 주문 내역을 기초로 사용자의 수를 예상하고, 예상되는 사용자의 수를 기초로 해당 사용자가 테이블에 착석했을 경우 예상되는 이미지 변화도를 기초로 산출될 수 있다.The location identification unit 230 indicates that there is a high probability that the user is seated at the table when there is a table with a large change in the image as a result of comparing the image of the base table, so the location identification unit 230 identifies the location of the table It can be determined as the user's location. A specific criterion for the image gradient, which is the criterion for determining the user's location, may be set in advance in the automatic order management device 150, and in another example, the user based on the order history received by the kiosk terminal 110 It can be calculated based on the expected number of users and the expected image gradient when the corresponding user is seated at the table.

만약, 이미지 변화도가 특정 기준을 초과하는 테이블의 수가 복수인 경우, 위치 식별부(230)는 키오스크 단말(110)에 의해 접수된 주문 내역을 기초로 예상되는 사용자의 수를 고려하여 해당 사용자가 테이블에 착석했을 경우의 기준 이미지 변화도와 가장 유사한 이미지 변화도에 해당하는 테이블을 최종 사용자의 위치로서 결정할 수 있다. 주문 자동 관리 장치(150)는 사용자 수에 따른 기준 이미지 변화도를 사전에 설정하여 데이터베이스에 저장할 수 있다.If the number of tables in which the image change degree exceeds a specific criterion is plural, the location identification unit 230 considers the number of users expected based on the order details received by the kiosk terminal 110, The table corresponding to the image gradient most similar to the reference image gradient when seated at the table can be determined as the position of the end user. The automatic order management device 150 may preset a change degree of a reference image according to the number of users and store it in a database.

일 실시예에서, 위치 식별부(230)는 주기적으로 매장 내의 전체 테이블에 대해 주문 식별코드 및 이미지 변화도를 단계적으로 인식하여 주문에 관한 사용자의 위치를 갱신할 수 있다. 즉, 사용자가 주문한 상품이나 서비스가 실제 사용자에게 제공되기 전에 사용자는 자유롭게 매장 내의 테이블을 옮길 수 있고, 사용자의 위치로 인식되어 주문 정보가 표시된 이후에 사용자가 테이블을 옮긴 경우 해당 정보의 갱신을 위하여 위치 식별부(230)는 주문 접수와 무관하게 일정한 시간 간격으로 매장 내 전체 테이블에 대한 사용자의 위치를 확인하고 사용자 위치의 변경이 검출된 경우 해당 주문에 관한 주문 정보를 갱신할 수 있다.In an embodiment, the location identification unit 230 may periodically recognize the order identification code and image gradient for the entire table in the store in stages to update the user's location regarding the order. In other words, before the product or service ordered by the user is provided to the actual user, the user can freely move the table in the store, and if the user moves the table after the order information is displayed because it is recognized as the user's location, to update the information. The location identification unit 230 may check the location of the user on the entire table in the store at regular time intervals irrespective of the receipt of the order, and update order information on the corresponding order when a change in the user location is detected.

일 실시예에서, 위치 식별부(230)는 주문 처리부(210)에 의해 접수된 주문 내역을 기초로 주문 내용이 사용자에게 제공되기까지 예상되는 서비스 예상 시간을 산출할 수 있고, 해당 서비스 예상 시간까지의 시간 간격을 복수개로 분할한 후 분할된 시간 간격마다 해당 주문에 대한 사용자의 위치를 갱신할 수 있다. 주문 내용이 사용자에게 제공되기까지의 서비스 예상 시간이 길수록 사용자가 테이블의 위치를 변경할 확률은 높아질 수 있고, 따라서 위치 식별부(230)는 각 주문별로 사용자의 위치를 주기적으로 확인하여 주문 이후 사용자의 위치 변화를 효과적으로 반영할 수 있다.In one embodiment, the location identification unit 230 may calculate an expected service time until the order contents are provided to the user based on the order details received by the order processing unit 210, and the corresponding service expected time After dividing the time interval of the user into a plurality of time intervals, the user's position for the order can be updated at each divided time interval. The longer the estimated service time until the order contents are provided to the user, the higher the probability that the user will change the position of the table. Therefore, the location identification unit 230 periodically checks the user's position for each order, It can effectively reflect the position change.

주문 정보 표시부(250)는 사용자의 위치를 포함하는 주문 정보를 표시할 수 있다. 주문 정보 표시부(250)는 주문 표시 장치(170)를 통해 주문 정보를 표시할 수 있으며, 주문 정보는 주문 항목, 가격, 수량 등 주문과 직접적으로 연관된 정보를 포함할 수 있고, 키오스크 단말(110)을 통해 접수된 주문 시점, 해당 시점으로부터 경과된 시간 및 사용자의 위치가 식별된 시점 등 주문과 간접적으로 연관된 정보를 더 포함할 수 있다. 주문 정보 표시부(250)는 주문 정보를 다양한 형태로 구현된 인터페이스를 통해 표시할 수 있으며, 예를 들어, 주문 정보와 함께 사용자의 위치를 매장 내의 테이블 배치도 상에 하이라이팅 하여 표시할 수 있다.The order information display unit 250 may display order information including a user's location. The order information display unit 250 may display order information through the order display device 170, and the order information may include information directly related to an order, such as an order item, price, and quantity, and the kiosk terminal 110 Information indirectly related to the order may be further included, such as a time of an order received through, a time elapsed from that time, and a time when a user's location is identified. The order information display unit 250 may display order information through interfaces implemented in various forms. For example, the order information and the user's location may be displayed by highlighting the user's location on a table layout in a store.

일 실시예에서, 주문 정보 표시부(250)는 주문 정보의 선택에 따라 카메라(130)를 통해 사용자의 위치에 관한 실시간 영상을 수신하여 표시할 수 있다. 주문 정보 표시부(250)는 주문 표시 장치(170)를 통해 특정 주문 정보가 선택된 경우(예를 들어, 터치스크린에 표시된 주문 정보를 터치하여 선택) 해당 주문 정보를 주문한 사용자가 착석한 테이블을 포함하는 식별 영역에 관한 실시간 영상을 수신하여 표시할 수 있다. 예를 들어, 주문 정보 표시부(250)는 테이블마다 카메라(130)가 할당된 경우 선택된 주문 정보와 매칭되는 카메라(130)로부터의 실시간 영상을 수신하여 표시할 수 있고, 복수의 테이블을 포함하는 식별 영역 마다 카메라(130)가 할당된 경우 선택된 주문 정보와 매칭되는 테이블을 식별하고 실시간 영상 중 해당 테이블에 관한 부분을 클로즈업하여 표시할 수 있다.In one embodiment, the order information display unit 250 may receive and display a real-time image of the user's location through the camera 130 according to the selection of the order information. When specific order information is selected through the order display device 170 (for example, the order information display unit 250 is selected by touching the order information displayed on the touch screen), the order information display unit 250 includes a table in which the user who ordered the order information is seated. It is possible to receive and display a real-time image of the identification area. For example, when the camera 130 is allocated for each table, the order information display unit 250 may receive and display a real-time image from the camera 130 that matches the selected order information, and the identification including a plurality of tables When the camera 130 is allocated for each region, a table matching the selected order information may be identified, and a portion of the corresponding table may be displayed in close-up of a real-time image.

제어부(270)는 주문 자동 관리 장치(150)의 전체적인 동작을 제어하고, 주문 처리부(210), 위치 식별부(230) 및 주문 정보 표시부(250) 간의 제어 흐름 또는 데이터 흐름을 관리할 수 있다.The control unit 270 may control the overall operation of the automatic order management apparatus 150 and manage a control flow or data flow between the order processing unit 210, the location identification unit 230, and the order information display unit 250.

도 3은 도 1에 있는 주문 자동 관리 장치에서 수행되는 주문 자동 관리 과정을 설명하는 순서도이다.FIG. 3 is a flowchart illustrating an order automatic management process performed by the automatic order management apparatus of FIG. 1.

도 3을 참조하면, 주문 자동 관리 장치(150)는 주문 처리부(210)를 통해 매장에 설치된 키오스크 단말(110)을 통해 주문을 접수하고 결제가 완료된 경우 주문 식별코드가 포함된 주문 영수증을 발행할 수 있다(단계 S310). 주문 자동 관리 장치(150)는 위치 식별부(230)를 통해 매장에 설치된 복수의 테이블들 상부에 배치되고 테이블에 대한 이미지를 획득하는 카메라(130)를 통해 주문 식별코드를 인식하여 주문에 관한 사용자의 위치를 식별할 수 있다(단계 S330). 주문 자동 관리 장치(150)는 주문 정보 표시부(250)를 통해 사용자의 위치를 포함하는 주문 정보를 표시할 수 있다(단계 S350).3, the automatic order management device 150 receives an order through the kiosk terminal 110 installed in the store through the order processing unit 210 and issues an order receipt including an order identification code when payment is completed. Can (step S310). The automatic order management device 150 is arranged on top of a plurality of tables installed in the store through the location identification unit 230 and recognizes the order identification code through the camera 130 that obtains an image for the table, The location of can be identified (step S330). The automatic order management apparatus 150 may display order information including the user's location through the order information display unit 250 (step S350).

도 4는 도 1에 있는 카메라가 매장의 천장에 설치되는 유형을 설명하는 예시도이다.4 is an exemplary view illustrating a type of the camera in FIG. 1 installed on the ceiling of a store.

도 4를 참조하면, 그림 (a)에서 복수의 카메라(410)들은 매장 내부에 설치된 복수의 테이블들 상부에 각각 일대일로 배치되어 설치될 수 있다. 이 경우, 위치 식별부(230)는 각 카메라(410)와 테이블의 매칭 정보를 이용하여 특정 카메라(410)에서 주문 식별코드를 인식하는 경우 해당 카메라(410)와 매칭된 테이블을 해당 주문을 한 사용자의 위치로서 식별할 수 있다.Referring to FIG. 4, in Figure (a), a plurality of cameras 410 may be disposed and installed one-to-one on top of a plurality of tables installed inside a store. In this case, when the location identification unit 230 recognizes the order identification code from the specific camera 410 using the matching information of each camera 410 and the table, the table matching the camera 410 is placed in the corresponding order. It can be identified as the user's location.

도 4의 그림 (b)에서, 매장 상부에 설치된 복수의 카메라(410)들은 식별 영역(430)에 존재하는 2개의 테이블들과 매칭될 수 있다. 일 실시예에서, 위치 식별부(230)는 카메라(410)와 매칭되는 식별 영역(430)에 대한 이미지를 비교하여 사용자의 위치를 식별할 수 있다. 보다 구체적으로, 위치 식별부(230)는 키오스크 단말(110)에 주문이 접수된 시점부터 특정 시간이 경과될 때까지 해당 주문에 관한 주문 식별코드가 인식되지 않은 경우 빈 테이블에 대한 기본 이미지와 특정 시간이 경과된 시점에서의 이미지를 비교하여 변화가 있는 테이블을 사용자의 위치로서 결정할 수 있다. 이미지의 변화가 있는 경우 해당 테이블에 사용자가 위치할 확률이 높으므로 이를 활용하여 위치 식별부(230)는 주문 식별코드에 대한 인식이 없는 경우를 대비하여 사용자의 위치를 간접적으로 식별할 수 있다.In the figure (b) of FIG. 4, a plurality of cameras 410 installed in the upper part of the store may be matched with two tables existing in the identification area 430. In an embodiment, the location identification unit 230 may identify the user's location by comparing images of the identification area 430 matched with the camera 410. More specifically, when the order identification code for the order is not recognized from the time the order is received at the kiosk terminal 110 until a specific time elapses, the location identification unit 230 provides a basic image and a specific image for an empty table. By comparing the images at the time elapsed, the table with changes can be determined as the user's location. When there is a change in the image, the probability that the user will be located in the corresponding table is high. Using this, the location identification unit 230 can indirectly identify the user's location in case there is no recognition of the order identification code.

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although the above has been described with reference to preferred embodiments of the present invention, those skilled in the art will variously modify and change the present invention within the scope not departing from the spirit and scope of the present invention described in the following claims. You will understand that you can do it.

100: 주문 자동 관리 시스템
110: 키오스크 단말 130: 카메라
150: 주문 자동 관리 장치 170: 주문 표시 장치
210: 주문 처리부 230: 위치 식별부
250: 주문 정보 표시부 270: 제어부
410: 카메라 430: 식별 영역100: automatic order management system
110: kiosk terminal 130: camera
150: order automatic management device 170: order display device
210: order processing unit 230: location identification unit
250: order information display unit 270: control unit
410: camera 430: identification area

Claims (8)

매장에 설치된 키오스크 단말을 통해 주문을 접수하고 결제가 완료된 경우 주문 식별코드가 포함된 주문 영수증을 발행하는 주문 처리부;
상기 매장에 설치된 복수의 테이블들 상부에 배치되고 테이블에 대한 이미지를 획득하는 카메라를 통해 상기 주문 식별코드 및 이미지 변화도를 단계적으로 인식하여 상기 주문에 관한 사용자의 위치를 식별하는 위치 식별부; 및
상기 사용자의 위치를 포함하는 주문 정보를 주문 표시 장치를 통해 표시하는 주문 정보 표시부를 포함하되,
상기 위치 식별부는 상기 주문이 접수된 시점을 기준으로 주문 접수 이후 테이블까지의 평균 이동 시간, 상기 키오스크 단말로부터 빈 테이블까지의 거리 중 가장 긴 거리 및 매장 내 혼잡도 - 상기 혼잡도는 상기 매장의 크기를 기초로 상기 매장 내에 존재하는 고객의 수에 따라 부여되는 등급 점수에 해당함 - 를 기초로 특정 기준 시간을 산출하는 제1 단계, 상기 산출된 특정 기준 시간 이내에 상기 주문 식별코드의 인식에 실패한 경우 상기 키오스크 단말에 의해 접수된 주문 내역을 기초로 사용자의 수를 예상하는 제2 단계, 상기 예상된 사용자의 수를 기초로 해당 사용자가 테이블에 착석했을 경우의 이미지 변화도를 예상하는 제3 단계, 상기 예상된 이미지 변화도를 초과하는 이미지 변화도가 검출된 테이블을 상기 사용자가 착석한 테이블로서 결정하는 제4 단계 및 상기 결정된 테이블을 상기 사용자의 위치로서 식별하는 제5 단계를 순차적으로 수행하고,
상기 주문 정보 표시부는 상기 주문 표시 장치를 통해 표시된 주문 정보의 선택에 따라 상기 카메라를 통해 상기 선택된 주문 정보와 연관된 모든 사용자의 위치에 관한 실시간 영상을 수신하여 표시하는 것을 특징으로 하는 주문 자동 관리 장치.
An order processing unit that receives an order through a kiosk terminal installed in the store and issues an order receipt including an order identification code when payment is completed;
A location identification unit disposed above a plurality of tables installed in the store and identifying a user's location regarding the order by step-by-step recognizing the order identification code and the image gradient through a camera that obtains an image of the table; And
Including an order information display unit for displaying the order information including the location of the user through an order display device,
The location identification unit is based on the time when the order is received, the longest distance from the average travel time to the table after the order is received, the distance from the kiosk terminal to the empty table, and the degree of congestion in the store-The degree of congestion is based on the size of the store. The first step of calculating a specific reference time based on-corresponds to a grade score given according to the number of customers present in the store, and the kiosk terminal when the recognition of the order identification code fails within the calculated specific reference time The second step of estimating the number of users based on the order details received by, a third step of estimating the degree of image change when the user is seated at the table based on the expected number of users, the expected A fourth step of determining a table in which an image change degree exceeding the image change degree is detected as a table seated by the user and a fifth step of identifying the determined table as the location of the user are sequentially performed,
And the order information display unit receives and displays real-time images of the locations of all users associated with the selected order information through the camera according to selection of order information displayed through the order display device.
 제1항에 있어서, 상기 주문 처리부는
상기 주문 식별코드를 포함하는 모바일 영수증을 상기 주문 영수증으로서 발행하여 사용자 단말에 전송하는 것을 특징으로 하는 주문 자동 관리 장치.
The method of claim 1, wherein the order processing unit
An automatic order management device, characterized in that for issuing a mobile receipt including the order identification code as the order receipt and transmitting it to a user terminal.
 제1항에 있어서, 상기 위치 식별부는
상기 복수의 테이블들 상부에 각각 배치되는 복수의 카메라들 중 어느 하나를 통해 상기 주문 식별코드를 인식한 경우 해당 카메라와 연관된 테이블의 위치를 상기 사용자의 위치로서 식별하는 것을 특징으로 하는 주문 자동 관리 장치.
The method of claim 1, wherein the location identification unit
When the order identification code is recognized through any one of a plurality of cameras respectively disposed above the plurality of tables, the position of the table associated with the camera is identified as the position of the user. .
 제1항에 있어서, 상기 위치 식별부는
상기 매장 내에서 적어도 하나의 테이블을 포함하는 복수의 식별 영역들을 결정하고 상기 복수의 식별 영역 상부에 각각 배치되는 카메라를 통해 상기 사용자의 위치를 식별하는 것을 특징으로 하는 주문 자동 관리 장치.
The method of claim 1, wherein the location identification unit
And determining a plurality of identification areas including at least one table in the store, and identifying the location of the user through a camera respectively disposed above the plurality of identification areas.
 삭제delete 삭제delete 삭제delete 주문 자동 관리 장치에서 수행되는 주문 자동 관리 방법에 있어서,
매장에 설치된 키오스크 단말을 통해 주문을 접수하고 결제가 완료된 경우 주문 식별코드가 포함된 주문 영수증을 발행하는 단계;
상기 매장에 설치된 복수의 테이블들 상부에 배치되고 테이블에 대한 이미지를 획득하는 카메라를 통해 상기 주문 식별코드 및 이미지 변화도를 단계적으로 인식하여 상기 주문에 관한 사용자의 위치를 식별하는 단계; 및
상기 사용자의 위치를 포함하는 주문 정보를 주문 표시 장치를 통해 표시하는 단계를 포함하되,
상기 식별하는 단계는 상기 주문이 접수된 시점을 기준으로 주문 접수 이후 테이블까지의 평균 이동 시간, 상기 키오스크 단말로부터 빈 테이블까지의 거리 중 가장 긴 거리 및 매장 내 혼잡도 - 상기 혼잡도는 상기 매장의 크기를 기초로 상기 매장 내에 존재하는 고객의 수에 따라 부여되는 등급 점수에 해당함 - 를 기초로 특정 기준 시간을 산출하는 제1 단계, 상기 산출된 특정 기준 시간 이내에 상기 주문 식별코드의 인식에 실패한 경우 상기 키오스크 단말에 의해 접수된 주문 내역을 기초로 사용자의 수를 예상하는 제2 단계, 상기 예상된 사용자의 수를 기초로 해당 사용자가 테이블에 착석했을 경우의 이미지 변화도를 예상하는 제3 단계, 상기 예상된 이미지 변화도를 초과하는 이미지 변화도가 검출된 테이블을 상기 사용자가 착석한 테이블로서 결정하는 제4 단계 및 상기 결정된 테이블을 상기 사용자의 위치로서 식별하는 제5 단계를 포함하고,
상기 표시하는 단계는 상기 주문 표시 장치를 통해 표시된 주문 정보의 선택에 따라 상기 카메라를 통해 상기 선택된 주문 정보와 연관된 모든 사용자의 위치에 관한 실시간 영상을 수신하여 표시하는 단계를 포함하는 것을 특징으로 하는 주문 자동 관리 방법.
In the automatic order management method performed by the automatic order management device,
Receiving an order through a kiosk terminal installed in the store and issuing an order receipt including an order identification code when payment is completed;
Identifying a location of a user regarding the order by stepwise recognizing the order identification code and the image gradient through a camera disposed on the plurality of tables installed in the store and obtaining an image of the table; And
Including the step of displaying the order information including the location of the user through an order display device,
The identifying step is based on the time when the order is received, the longest distance from the average travel time to the table after the order is received, the distance from the kiosk terminal to the empty table, and the degree of congestion in the store-The congestion degree indicates the size of the store. The first step of calculating a specific reference time based on-is the first step of calculating a specific reference time based on the number of customers present in the store, in case the recognition of the order identification code fails within the calculated specific reference time, the kiosk The second step of estimating the number of users based on the order details received by the terminal, the third step of estimating the degree of image change when the user is seated at the table based on the expected number of users, the prediction A fourth step of determining a table in which an image change degree exceeding the determined image change degree is detected as a table seated by the user, and a fifth step of identifying the determined table as a location of the user,
The displaying comprises receiving and displaying real-time images of the locations of all users associated with the selected order information through the camera according to selection of the order information displayed through the order display device. Automatic management method.
KR1020180124694A 2018-10-18 2018-10-18 Automatic order management apparatus and method KR102174710B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180124694A KR102174710B1 (en) 2018-10-18 2018-10-18 Automatic order management apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180124694A KR102174710B1 (en) 2018-10-18 2018-10-18 Automatic order management apparatus and method

Publications (2)

Publication Number Publication Date
KR20200043832A KR20200043832A (en) 2020-04-28
KR102174710B1 true KR102174710B1 (en) 2020-11-05

Family

ID=70456208

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180124694A KR102174710B1 (en) 2018-10-18 2018-10-18 Automatic order management apparatus and method

Country Status (1)

Country Link
KR (1) KR102174710B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012014567A (en) * 2010-07-02 2012-01-19 Ishino Seisakusho Co Ltd Restaurant service system
KR101588023B1 (en) * 2015-07-22 2016-01-25 김맹수 System of automatic ordering for a restaurant

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090001731A (en) 2007-05-15 2009-01-09 (주)솔루션그리드 Ticket(receipt) produce kiosk from self payment
KR101057353B1 (en) 2008-12-11 2011-08-18 고려대학교 산학협력단 Service Processing Unit of Kiosk System
KR101221644B1 (en) * 2010-11-18 2013-01-14 주식회사 에스원 System and method for management of floor using image information

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012014567A (en) * 2010-07-02 2012-01-19 Ishino Seisakusho Co Ltd Restaurant service system
KR101588023B1 (en) * 2015-07-22 2016-01-25 김맹수 System of automatic ordering for a restaurant

Also Published As

Publication number Publication date
KR20200043832A (en) 2020-04-28

Similar Documents

Publication Publication Date Title
US11847689B2 (en) Dynamic customer checkout experience within an automated shopping environment
US20230298428A1 (en) System and method to process transactions at retail fueling stations using a mobile device
US11663571B2 (en) Inventory management computer system
US10943311B1 (en) Order fulfillment and tracking systems and methods
US11093995B2 (en) Monitoring of customer consumption activity and management based on monitoring
US20150307279A1 (en) Retail automation platform
US9330382B2 (en) Method to facilitate an in-store audit after issuance of an electronic receipt
WO2020220620A1 (en) Information processing method and apparatus for intelligent vending machine, and server
JP7384516B2 (en) Information processing device, product recommendation method, program, and system
US10229402B2 (en) Communication method, controller, and system for managing communications within checkout system
KR102174710B1 (en) Automatic order management apparatus and method
US20200193444A1 (en) Payment system, management server, payment terminal, and method of controlling a payment terminal
JP2015018406A (en) Adjustment monitoring apparatus, adjustment monitoring method, and adjustment monitoring program
US20200202462A1 (en) System and Methods of Displaying Customer-Specific Digital Menu Boards
KR20190061989A (en) Method and system for providing restaurant prepayment service
US20200394628A1 (en) Store clerk call system and store clerk call processing method
JP7181766B2 (en) Product payment system, product transport cart and product payment method
JP7212840B2 (en) Information processing device, information processing method and program
KR102202945B1 (en) Smart order processing apparatus
JP2016024601A (en) Information processing apparatus, information processing system, information processing method, commodity recommendation method, and program
JP7476881B2 (en) Information processing device, information processing method, and program
JP2019160048A (en) Information processing device, information processing method, and program
KR102632995B1 (en) In-store product sales guide system based on AI that recommends customized products through big data analysis
KR102368889B1 (en) Multifunctional Kiosk
KR102199228B1 (en) Method, apparatus and computer-readable medium of providing untact ordering service

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right