KR20230061901A - 사물인식 인공지능을 활용한 픽업 안내 방법 및 시스템 - Google Patents
사물인식 인공지능을 활용한 픽업 안내 방법 및 시스템 Download PDFInfo
- Publication number
- KR20230061901A KR20230061901A KR1020210146633A KR20210146633A KR20230061901A KR 20230061901 A KR20230061901 A KR 20230061901A KR 1020210146633 A KR1020210146633 A KR 1020210146633A KR 20210146633 A KR20210146633 A KR 20210146633A KR 20230061901 A KR20230061901 A KR 20230061901A
- Authority
- KR
- South Korea
- Prior art keywords
- product
- order
- order number
- pick
- pickup
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 49
- 238000010411 cooking Methods 0.000 claims abstract description 19
- 238000012545 processing Methods 0.000 claims abstract description 11
- 238000010191 image analysis Methods 0.000 claims description 4
- 235000013361 beverage Nutrition 0.000 abstract description 26
- 230000006870 function Effects 0.000 description 23
- 230000008569 process Effects 0.000 description 16
- 235000013305 food Nutrition 0.000 description 13
- 238000013473 artificial intelligence Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000004519 manufacturing process Methods 0.000 description 7
- 238000003860 storage Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 4
- 239000003550 marker Substances 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 3
- 238000010438 heat treatment Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 240000008042 Zea mays Species 0.000 description 1
- 235000005824 Zea mays ssp. parviglumis Nutrition 0.000 description 1
- 235000002017 Zea mays subsp mays Nutrition 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 235000005822 corn Nutrition 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 235000011389 fruit/vegetable juice Nutrition 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/12—Hotels or restaurants
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/64—Three-dimensional objects
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F19/00—Advertising or display means not otherwise provided for
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F19/00—Advertising or display means not otherwise provided for
- G09F19/22—Advertising or display means on roads, walls or similar surfaces, e.g. illuminated
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30128—Food products
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Tourism & Hospitality (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Marketing (AREA)
- Signal Processing (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Health & Medical Sciences (AREA)
- General Business, Economics & Management (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- Accounting & Taxation (AREA)
- Cash Registers Or Receiving Machines (AREA)
Abstract
본 발명은, 주문된 상품에 대해 주문 번호를 부여하고, 주문 번호에 대응하는 주문 정보를 저장하는 주문정보 관리부; 카메라를 통해 촬영된 영상을 이용하여 픽업 테이블 상에 놓인 상품을 인식하는 상품 인식부; 주문 정보를 이용하여 주문 번호에 상품을 매치시키는 주문 매치부; 및 주문 번호를 상품에 대응되게 표시하는 디스플레이 장치를 포함하도록 구성되는, 픽업 안내 시스템을 개시한다. 본 발명에 따르면, 준비된 음료에 대응되는 표시를 통해 조리 완성을 고객에 알릴 수 있고, 고객 픽업 여부를 자동으로 인식함으로써 주문 처리 완료가 자동으로 체크될 수 있다.
Description
본 발명은 사물인식 인공지능을 활용한 픽업 안내 방법 및 시스템에 관한 것으로, 더욱 상세하게는 고객이 주문한 상품이 주문 정보에 맞게 비대면 형식으로 매장에서 고객에 인도되게 픽업을 안내하는 방법 및 시스템에 관한 것이다.
리테일 매장 중에서 지난 10년간 가장 성장한 분야는 QSR(Quick Service Restaurant) 형태의 매장이다. QSR 매장에서 다양한 식음료가 주문되고, 결제가 이루어지고, 고객이 조리된 식음료를 받아서 매장 내에서 취식하거나 매장 밖으로 식음료를 가지고 나가는 형태로 서비스가 이루어진다.
최근 몇 년간 고객은 QSR 매장에서 기존의 POS(Point Of Sale)만을 이용하는 방식에서 벗어나서 매장 내의 키오스크 등을 활용하여 주문하거나 모바일 단말에 설치된 앱을 통해 매장 밖에서 주문할 수 있게 되었다.
키오스크 또는 모바일 앱을 이용하는 경우 기존의 POS를 통한 주문처럼 식음료의 조리 완료를 알리는 진동벨 교부를 통한 픽업 과정이 불가능하게 됨에 따라, 전광판 형태의 디스플레이를 이용하여 식음료의 조리 완료를 알리는 방식이 이용된다.
현재 많이 시행되는 디스플레이를 이용한 픽업 과정에서, 고객은 음료 등을 받기 위해서 픽업 존에서 대기하지 않는 경우 자기가 주문한 음료를 찾기 위해 조리 완료된 음료를 일일이 직접 확인해야 하는 불편이 존재한다. 더구나 복수의 주문된 음료에 대해 고객 간에 확인이 요구되기 때문에 불편한 상황이 연출되거나, 오인에 의한 혼동 염려가 있다.
본 발명과 관련된 기술로서, 대한민국 등록 특허 제10-2315615호의, 이미지 인식을 이용한 매장 내 식음료 이송 및 수거 시스템과 이를 이용한 식음료 이송 및 수거 방법은, 복수의 카메라를 포함하는 이미지 획득부를 개시하고 있지만, 이미지 획득의 목적이 고객의 얼굴 이미지를 분석하고, 고객을 식별하기 위한 것으로, 조리가 완료된 음료를 인식하기 위한 목적의 본 발명의 영상 분석과 구별된다.
본 발명과 관련된 기술로서, 대한민국 등록 특허 제10-2187090호의, 무인 음료 제조시스템은, 촬영수단 및 카메라를 개시하고 있다. 그러나 촬영수단은 고객을 촬영하기 위한 수단이고, 카메라는 음료의 제조 과정을 촬영하고, 촬영된 영상을 통해 음료제조머신의 고장을 인식하기 위한 것으로, 조리가 완료된 음료를 인식하기 위한 목적의 본 발명의 영상 분석과 구별된다.
본 발명과 관련된 기술로서, 대한민국 등록 특허 제10-1667025호의, 스마트 주문 관리 시스템용 전자 테이블 장치는, 주문음식을 가열하는 가열유닛을 개시하고 있고, 전자 테이블을 이용하여 주문된 음식을 조리하는 기능의 장치에 해당하여, 조리가 완료된 음료가 고객에 픽업되는 과정을 안내하는 본 발명과 비교하여 발명의 목적, 구성 및 효과에서 차이가 있다.
본 발명이 해결하고자 하는 일 과제는, 즉석 조리된 음료 등이 착오없이 정확하게 고객에게 픽업되게 안내하는 방법 및 시스템을 제공하는 것이다.
본 발명이 해결하고자 하는 일 과제는, 고객에 대해 준비된 음료에 대응되는 표시를 통해 조리 완성을 알리고, 스탭은 상품의 고객 픽업 여부를 자동으로 인식함으로써 전체 픽업 체크 과정이 자동으로 수행할 수 있는 방법 및 시스템을 제공하는 것이다.
본 발명이 해결하고자 하는 일 과제는, 주문 번호와 픽업될 상품의 매칭을 통해 주문 상품의 픽업 과정에서 발생할 수 있는 오류를 방지할 수 있는 픽업 안내 방법 및 시스템을 제공하는 것이다.
본 발명의 일 실시 예에 따른 픽업 안내 시스템은, 주문된 상품에 대해 주문 번호를 부여하고, 주문 번호에 대응하는 주문 정보를 저장하는 주문정보 관리부; 카메라를 통해 촬영된 영상을 이용하여 픽업 테이블 상에 놓인 상품을 인식하는 상품 인식부; 주문 정보를 이용하여 상기 주문 번호에 상기 상품을 매치시키는 주문 매치부; 및 주문 번호를 상기 상품에 대응되게 표시하는 디스플레이 장치를 포함하도록 구성될 수 있다.
또한, 주문정보 관리부는, 주문 번호에 대해 주문 시각, 주문한 상품의 종류, 및 수량에 관한 정보를 포함하는 주문 정보를 저장하도록 구성될 수 있다.
또한, 상품 인식부는, 영상 분석을 통한 객체 인식에 기반하여 상품의 수량, 상품의 종류, 상품을 담은 용기의 종류, 및 용기가 놓인 트레이의 유무를 인식하도록 구성될 수 있다.
또한, 주문 매치부는, 주문 정보 및 객체 인식에 기반하여 판별된 상품 정보를 이용하여 주문 번호에 상품을 매치시키도록 구성될 수 있다.
또한, 주문 매치부는, 주문 시각을 기준으로 주문된 상품의 조리에 필요한 최소 조리 시간 및 이전 상품의 지연율을 고려하여 주문 번호에 상품을 매치시키도록 구성될 수 있다.
또한, 디스플레이 장치는, 주문 번호를 상기 상품의 바디, 상기 상품이 놓인 테이블 및 상기 상품이 놓인 위치의 배경 중에서 적어도 하나에 상기 주문 번호를 표시하도록 구성될 수 있다.
또한, 디스플레이 장치는, 프로젝션 방식으로 상기 상품이 놓인 테이블에 상기 주문 번호를 표시하되, 고객의 주문 표에 표시된 주문 번호를 인식하는 광을 함께 프로젝트할 수 있다.
본 발명의 일 실시 예에 따른 픽업 안내 방법은, 주문된 상품에 대해 주문 번호를 부여하고, 상기 주문 번호에 대응하는 주문 정보를 저장하는 단계; 카메라를 통해 촬영된 영상을 이용하여 픽업 테이블 상에 놓인 상품을 인식하는 단계; 주문 정보를 이용하여 상기 주문 번호에 상기 상품을 매치시키는 단계; 및 주문 번호를 상기 상품에 대응되게 표시하는 단계를 포함하도록 구성될 수 있다.
또한, 상품을 인식하는 단계는, 상품을 담은 용기가 놓인 트레이의 유무를 인식하는 단계; 및 상품의 종류 및 수량을 인식하는 단계를 포함하도록 구성될 수 있다.
또한, 픽업 안내 방법은, 고객에 픽업되어 픽업 테이블 상에서 사라진 상품을 인식하는 단계; 및 상품에 대응되는 주문 정보를 업데이트 함으로써 주문 처리를 완료하는 단계를 더 포함하도록 구성될 수 있다.
또한, 픽업 안내 방법은, 픽업 테이블 상의 상품이 고객에 픽업되는 시각에 관한 정보 및 영상 정보를 저장하는 단계를 더 포함하도록 구성될 수 있다.
또한, 주문 번호를 상기 상품에 대응되게 표시하는 단계는, 주문 번호를 상기 상품의 바디, 상기 상품이 놓인 테이블 및 상기 상품이 놓인 위치의 배경 중에서 적어도 하나에 표시하도록 구성될 수 있다.
또한, 주문 번호를 상기 상품에 대응되게 표시하는 단계는, 상품의 경계를 인식하는 단계; 및 상품의 경계에 접하게 프로젝션 방식으로 상기 상품이 놓인 테이블에 상기 주문 번호를 디스플레이하는 단계를 포함하도록 구성될 수 있다.
기타 실시 예의 구체적인 사항은 "발명을 실시하기 위한 구체적인 내용" 및 첨부 "도면"에 포함되어 있다.
본 발명의 이점 및/또는 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 각종 실시 예를 참조하면 명확해질 것이다.
그러나 본 발명은 이하에서 개시되는 각 실시 예의 구성만으로 한정되는 것이 아니라 서로 다른 다양한 형태로도 구현될 수도 있으며, 단지 본 명세서에서 개시한 각각의 실시 예는 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 본 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구범위의 각 청구항의 범주에 의해 정의될 뿐임을 알아야 한다.
본 발명에 의하면, 즉석 조리된 음료 등이 착오없이 정확하게 고객에 픽업될 수 있다.
또한, 준비된 음료에 대응되는 표시를 통해 조리 완성을 고객에 알릴 수 있고, 고객 픽업 여부를 자동으로 인식함으로써 주문 처리 완료가 자동으로 체크될 수 있다.
또한, 주문 번호와 픽업될 상품의 매칭을 통해 주문 품목의 픽업 과정에서 발생할 수 있는 오류가 방지될 수 있다.
도 1은 본 발명의 일 실시 예에 따른 픽업 안내 시스템의 네트워크 관계도이다.
도 2는 본 발명의 일 실시 예에 따른 픽업 안내 시스템의 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 픽업 안내 방법의 흐름도이다.
도 4는 본 발명의 일 실시 예에 따른 픽업 안내 방법의 데이터 흐름도이다.
도 5는 본 발명의 일 실시 예에 따른 픽업 테이블을 설명하기 위한 예시도이다.
도 6은 본 발명의 일 실시 예에 따른 카메라 및 디스플레이 장치를 설명하기 위한 예시도이다.
도 2는 본 발명의 일 실시 예에 따른 픽업 안내 시스템의 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 픽업 안내 방법의 흐름도이다.
도 4는 본 발명의 일 실시 예에 따른 픽업 안내 방법의 데이터 흐름도이다.
도 5는 본 발명의 일 실시 예에 따른 픽업 테이블을 설명하기 위한 예시도이다.
도 6은 본 발명의 일 실시 예에 따른 카메라 및 디스플레이 장치를 설명하기 위한 예시도이다.
본 발명을 상세하게 설명하기 전에, 본 명세서에서 사용된 용어나 단어는 통상적이거나 사전적인 의미로 무조건 한정하여 해석되어서는 아니 되며, 본 발명의 발명자가 자신의 발명을 가장 최선의 방법으로 설명하기 위해서 각종 용어의 개념을 적절하게 정의하여 사용할 수 있고, 더 나아가 이들 용어나 단어는 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야 함을 알아야 한다.
즉, 본 명세서에서 사용된 용어는 본 발명의 바람직한 실시 예를 설명하기 위해서 사용되는 것일 뿐이고, 본 발명의 내용을 구체적으로 한정하려는 의도로 사용된 것이 아니며, 이들 용어는 본 발명의 여러 가지 가능성을 고려하여 정의된 용어임을 알아야 한다.
또한, 본 명세서에서, 단수의 표현은 문맥상 명확하게 다른 의미로 지시하지 않는 이상, 복수의 표현을 포함할 수 있으며, 유사하게 복수로 표현되어 있다고 하더라도 단수의 의미를 포함할 수 있음을 알아야 한다.
본 명세서의 전체에 걸쳐서 어떤 구성 요소가 다른 구성 요소를 "포함"한다고 기재하는 경우에는, 특별히 반대되는 의미의 기재가 없는 한 임의의 다른 구성 요소를 제외하는 것이 아니라 임의의 다른 구성 요소를 더 포함할 수도 있다는 것을 의미할 수 있다.
더 나아가서, 어떤 구성 요소가 다른 구성 요소의 "내부에 존재하거나, 연결되어 설치된다"라고 기재한 경우에는, 이 구성 요소가 다른 구성 요소와 직접적으로 연결되어 있거나 접촉하여 설치되어 있을 수 있고, 일정한 거리를 두고 이격되어 설치되어 있을 수도 있으며, 일정한 거리를 두고 이격되어 설치되어 있는 경우에 대해서는 해당 구성 요소를 다른 구성 요소에 고정 내지 연결하기 위한 제 3의 구성 요소 또는 수단이 존재할 수 있으며, 이 제 3의 구성 요소 또는 수단에 대한 설명은 생략될 수도 있음을 알아야 한다.
반면에, 어떤 구성 요소가 다른 구성 요소에 "직접 연결"되어 있다거나, 또는 "직접 접속"되어 있다고 기재되는 경우에는, 제 3의 구성 요소 또는 수단이 존재하지 않는 것으로 이해하여야 한다.
마찬가지로, 각 구성 요소 간의 관계를 설명하는 다른 표현들, 즉 " ~ 사이에"와 "바로 ~ 사이에", 또는 " ~ 에 이웃하는"과 " ~ 에 직접 이웃하는" 등도 마찬가지의 취지를 가지고 있는 것으로 해석되어야 한다.
또한, 본 명세서에서 "일면", "타면", "일측", "타측", "제 1", "제 2" 등의 용어는, 사용된다면, 하나의 구성 요소에 대해서 이 하나의 구성 요소가 다른 구성 요소로부터 명확하게 구별될 수 있도록 하기 위해서 사용되며, 이와 같은 용어에 의해서 해당 구성 요소의 의미가 제한적으로 사용되는 것은 아님을 알아야 한다.
또한, 본 명세서에서 "상", "하", "좌", "우" 등의 위치와 관련된 용어는, 사용된다면, 해당 구성 요소에 대해서 해당 도면에서의 상대적인 위치를 나타내고 있는 것으로 이해하여야 하며, 이들의 위치에 대해서 절대적인 위치를 특정하지 않는 이상은, 이들 위치 관련 용어가 절대적인 위치를 언급하고 있는 것으로 이해하여서는 아니된다.
또한, 본 명세서에서는 각 도면의 각 구성 요소에 대해서 그 도면 부호를 명기함에 있어서, 동일한 구성 요소에 대해서는 이 구성 요소가 비록 다른 도면에 표시되더라도 동일한 도면 부호를 가지고 있도록, 즉 명세서 전체에 걸쳐 동일한 참조 부호는 동일한 구성 요소를 지시하고 있다.
본 명세서에 첨부된 도면에서 본 발명을 구성하는 각 구성 요소의 크기, 위치, 결합 관계 등은 본 발명의 사상을 충분히 명확하게 전달할 수 있도록 하기 위해서 또는 설명의 편의를 위해서 일부 과장 또는 축소되거나 생략되어 기술되어 있을 수 있고, 따라서 그 비례나 축척은 엄밀하지 않을 수 있다.
또한, 이하에서, 본 발명을 설명함에 있어서, 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 구성, 예를 들어, 종래 기술을 포함하는 공지 기술에 대해 상세한 설명은 생략될 수도 있다.
이하, 본 발명의 실시 예에 대해 관련 도면들을 참조하여 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시 예에 따른 픽업 안내 시스템의 네트워크 관계도이다.
도 1을 참조하면, 본 발명의 일 실시 예에 따른 픽업 안내 시스템(10)을 구성하는 구성요소와 네트워크(500)이 묘사되어 있다. 픽업 안내 시스템(10)은, 픽업 안내 장치(100), 관제 서버(200) 및 인공지능 서버(200)를 포함하도록 구성될 수 있다.
픽업 안내 장치(100)는 매장에서 제조된 상품의 고객 픽업을 관리하는 기능을 수행한다. 픽업 안내 장치(100)는 POS(Point Of Sale) 터미널 형태로 구현될 수 있다. 픽업 안내 장치(100)는 메인 단말(110), 보조 단말(120), 카메라(130) 및 디스플레이 장치(140)를 포함하도록 구성될 수 있다.
관제 서버(200)는 복수의 매장에 설치된 픽업 안내 장치(100)를 통합 관리하는 기능을 수행한다. 관제 서버(200)는 복수의 픽업 안내 장치(100)로부터 데이터를 수집하고, 장치에 필요한 업데이트된 데이터를 복수의 픽업 안내 장치(100)에 송신할 수 있다.
인공지능 서버(200)는 픽업 안내 장치(100), 특히 메인 단말(110)의 인공지능 기능 수행을 위한 서비스를 제공할 수 있다. 예를 들어 인공지능 서버(200)는 인공지능 모델을 학습하는 기능, 학습에 필요한 데이터를 수집하는 기능, 훈련 데이터 셋을 생성하는 기능, 인공지능 플랫폼 및 인공지능 API를 제공하는 기능을 수행할 수 있다.
네트워크(500)는 유선 및 무선 네트워크, 예를 들어 시리얼 통신, LAN(local area network), WAN(wide area network), 인터넷(internet), 인트라넷(intranet) 및 엑스트라넷(extranet), 그리고 모바일 네트워크, 예를 들어 셀룰러, 3G, LTE, WiFi 네트워크, 애드혹 네트워크 및 이들의 조합을 비롯한 임의의 적절한 통신 네트워크 일 수 있다.
네트워크(500)는 허브, 브리지, 라우터, 스위치 및 게이트웨이와 같은 네트워크 요소들의 연결을 포함할 수 있다. 네트워크(500)는 인터넷과 같은 공용 네트워크 및 안전한 기업 사설 네트워크와 같은 사설 네트워크를 비롯한 하나 이상의 연결된 네트워크들, 예컨대 다중 네트워크 환경을 포함할 수 있다. 네트워크(500)에 액세스는 하나 이상의 유선 또는 무선 액세스 네트워크들을 통해 제공될 수 있다.
도 2는 본 발명의 일 실시 예에 따른 픽업 안내 장치의 블록도이다.
도 2를 참조하면, 픽업 안내 장치(100)는 메인 단말(110), 보조 단말(120), 카메라(130) 및 디스플레이 장치(140)를 포함하도록 구성될 수 있다.
메인 단말(110)은, 고객으로부터 주문 정보를 수신하고, 수신한 주문 정보를 저장하는 기본 기능 그리고 보조 단말(120), 카메라(130) 및 디스플레이 장치(140)의 제어 및 이들과의 통신의 부가 기능을 수행한다.
메인 단말(110)은, 카메라(130) 제어를 통해 픽업 테이블(150) 상에 놓인 상품, 예를 들어 식음료를 고객이 가져가서 픽업 테이블(150)에서 식음료가 사라진 경우, 이전의 영상과 현재의 영성을 서로 비교하여 픽업 테이블(150)에서 사라진 식음료를 판단하고, 해당 주문 번호에 대응하는 주문 정보를 고객 픽업 형태로 업데이트 하고, 주방에 설치된 보조 단말(120)에 표시된 주문 정보도 함께 업데이트 되게 할 수 있다.
메인 단말(110)은 카메라(130) 및 디스플레이 장치(140)의 제어를 통해 비어 있는 픽업 테이블 상의 영역을 감지하고, 해당 영역에 제품 홍보 및 판촉 광고를 위한 이미지, 동영상으로 구성된 마케팅 콘텐츠 투사하여 부가적인 정보를 전달하도록 기능할 수 있다.
보조 단말(120)은, 고객이 주문한 상품이 제조되는, 예를 들어 고객이 주문한 음료가 조리되는 주방에 설치될 수 있다. 보조 단말(120)은 입력 기능을 통해 제조 스탭으로부터 상품 제조 완료의 신호를 입력 받을 수 있고, 출력 기능을 통해 제조 스탭에게 주문 정보를 표시할 수 있다.
카메라(130)는, 제조 완료된 상품이 픽업 테이블(150)에 올려지는 경우, 상품 인식에 필요한 영상 데이터를 수집하는 기능을 수행한다. 수집된 영상 데이터는 메인 단말(110)로 송신된다.
디스플레이 장치(140)는, 픽업 테이블(150) 상에서 인식된 상품에 매치되는 주문 번호 등을 표시하는 기능을 수행한다. 상품의 인식, 상품과 주문 번호의 매칭이 메인 단말(110)에 의해 수행되고, 디스플레이 장치(140)는 메인 단말(110)의 제어에 따라 상품과 매치되는 주문 번호를 상품이 배열된 픽업 테이블(150)에 표시할 수 있다.
디스플레이 장치(140)는 LED 또는 LCD 타입의 장치나 프로젝터 형태로 구현될 수 있다. 디스플레이 유형에 따라 상품이 배열된 위치의 LED 또는 LCD가 주문 번호를 표시하거나, 상품의 경계가 형성되는 바닥면 또는 벽면에 상품의 주문 번호를 표시하는 광이 투사될 수 있다.
디스플레이 장치(140)는, 메인 단말(110)의 객체 인식 및 추적 기능을 통해, 픽업 테이블(150) 상에 배열된 상품의 이동을 감지하여 주문 정보를 추종하여 표시되도록 동작할 수 있다.
도 2를 다시 참조하면, 메인 단말(110)은 프로세서(111), 주문정보 관리부(112), 상품 인식부(113), 인식 모델(114), 주문 매치부(115), 환경 설정부(116), 저장 장치(117) 및 통신 장치(118)를 포함하도록 구성될 수 있다.
프로세서(111)는, 연산, 저장, 및 통신 기능을 통해 메인 단말(110)의 구성요소를 통합하여 제어하는 기능을 수행한다. 예를 들어 프로세서(111)는, 미리 준비된 알고리즘에 따라 주문정보 관리부(112), 상품 인식부(113), 인식 모델(114), 주문 매치부(115), 환경 설정부(116), 저장 장치(117) 및 통신 장치(118)에 동작 명령을 내릴 수 있다.
주문정보 관리부(112)는, 고객의 상품 주문 요청에 따라 주문 번호 생성부터 주문 정보 생성 및 저장의 기능을 수행한다. 즉 주문정보 관리부(112)는 상품이 고객에 픽업되기까지 주문 처리에 필요한 정보 및 데이터를 처리하는 기능을 갖는다.
상품 인식부(113)는, 상품이 제조 스탭들에 의해 제조가 완료되고, 픽업 테이블에 놓이게 되면, 상품이 촬영된 영상 데이터에 기반하여 상품의 출현, 상품의 배치 위치, 및 상품의 품목 등을 인식하는 기능을 수행한다. 상품 인식부(113)는 인식 모델(114)을 포함할 수 있다. 인식 모델(114)은 상품 인식에 인공 신경망, 예를 들어 합성망 신경망(CNN) 등의 객체 인식 신경망이 구현된 모델이다.
인식 모델(114)은, 인공지능 알고리즘을 이용하여 상품을 인식하는 기능을 수행한다. 인식 모델(114)은 학습을 통해 업데이트될 수 있으며, 학습 및 훈련은 인공지능 서버(200)에 의해 클라우드에서 수행될 수 있다. 카메라(130)를 통해 촬영된 영상 데이터는, 학습 및 훈련에 필요한 훈련 데이터 셋을 구성하는 데 이용될 수 있다.
주문 매치부(115)는, 상품 인식부(113)에 의한 인식 결과 및 보조 단말(120)에서 수신한 신호에 기반하여 픽업 테이블 상에 배열된 상품과 주문 번호를 매치시키고, 주문 번호 및 주문 번호가 표시될 위치 값을 출력하는 기능을 갖는다.
주문 매치부(115)는, 주문 시각을 기준으로 주문된 상품의 조리에 필요한 최소 조리 시간 및 이전 상품의 지연율을 고려하여 주문 번호에 상품을 매치시키도록 구성될 수 있다. 메인 단말(110)이, 보조 단말(120)이 수행하는 상품 조리 완료의 신호 발송을 이용하지 않는 경우, 주문 매치부(115)는, 객체 인식에 기반하여 인식된 상품을 주문 번호에 매치시켜야 한다. 주문 매치부(115)는 상품 간에 서로 구별되는 특징이 부족한 경우, 해당 상품의 조리 완료에 소요되는 최소 조리 시간 및 이전 상품의 지연율을 고려하여, 주문 번호에 따른 순차적 픽업 테이블 배열에 위배되는 순서를 감지하고, 주문 번호를 상품에 매치시킬 수 있다. 지연율이란, 이전 주문이 없는 경우에 주문에서 픽업 테이블 배열까지에 소요되는 시간 대비 해당 주문에 대해 소요된 시간 간의 비율을 의미한다.
환경 설정부(116)는, 픽업 안내 장치(100)가 구비된 서로 다른 매장에 설치된 픽업 테이블(150)의 크기, 매장의 조도, 카메라(130)의 촬영 각도 등의 환경을 보정하는 기능을 갖는다.
환경 설정부(116)는 픽업 테이블(150)의 인식 영역을 표시하는 마커를 이용하여 픽업 테이블(150)의 영역을 판단하고, 카메라(130)로부터 수신되는 영상 데이터의 좌표계와 디스플레이 장치(140), 예를 들어 프로젝터를 이용하여 투사하는 투사면의 좌표계를 보정하는 기능을 갖는다.
환경 설정부(116)는 테스트를 통해서 픽업 테이블(150)의 인식 영역 내에서 조도 또는 촬영 각도의 영향을 받는 지를 확인하는 기능을 갖는다.
마커는 특정 생상을 가지고 있는 물체로서 초기 환경 설정 시에 픽업 테이블(150) 인식 영역의 꼭지점에 놓고, 카메라(130)를 통해서 입력된 영상을 통해서 카메라(130)의 좌표를 확인하고, 디스플레이 장치(140), 프로젝터를 이용해서 픽업 테이블(150)에 4개의 좌표 값을 표시한 후 마커의 위치에 맞도록 좌표 값을 이동하여 실제 픽업 테이블(150)의 인식 영역과 투사 영역을 일치시키는 데 사용된다.
저장 장치(117)는, 주문 번호, 주문 번호에 대응되는 주문 정보, 및 카메라(130)를 통해 수집된 영상 데이터를 저장하는 기능을 수행한다. 그 밖에 저장 장치(117)는 픽업 안내 과정에서 처리되는 각종 데이터를 저장하도록 구성될 수 있다.
통신 장치(118)는, 네트워크(500)를 통해 연결된 관제 서버(200), 및 인공지능 서버(300)와의 통신에 필요한 통신 모듈, 그리고 보조 단말(120), 카메라(130) 및 디스플레이 장치(140)와 통신할 수 있는 각종 프로토콜을 포함하는 통신 모듈을 포함하도록 구성될 수 있다.
도 3은 본 발명의 일 실시 예에 따른 픽업 안내 방법의 흐름도이다.
도 3을 참조하면, 픽업 안내 방법(S100)은, 주문된 상품에 대해 주문 번호를 부여하고, 주문 번호에 대응하는 주문 정보를 저장하는 단계(S110), 영상을 이용하여 픽업 테이블 상에 놓인 상품을 인식하는 단계(S120), 주문 정보를 이용하여 주문 번호에 상품을 매칭시키는 단계(S130), 주문 번호를 상품에 대응되게 표시하는 단게(S140), 고객에 의한 상품 픽업을 인식하는 단계(S150), 및 주문 정보를 업데이트하고 주문 처리를 완료하는 단계(S160)를 포함하도록 구성될 수 있다.
픽업 안내 장치(100)는, 주문된 상품에 대해 주문 번호를 부여하고, 주문 번호에 대응하는 주문 정보를 저장할 수 있다(S110). 주문된 상품은, 즉석 조리가 가능한 식음료, 예를 들어 카페 등의 매장에서 조리되는 커피, 주스 및 케이크 등을 포함할 수 있다. 고객은 다양한 방법, 예를 들어 기프트콘 구매, 인터넷, 키오스크, 또는 POS 단말을 통해 상품을 주문할 수 있다. 주문 번호에 대응되는 주문 정보는, 주문 상품의 품목, 수량, 및 테이크 아웃 용도의 포장 여부에 관한 정보를 포함할 수 있다.
픽업 안내 장치(100)는, 카메라를 통해 촬영된 영상을 이용하여 픽업 테이블 상에 놓인 상품을 인식할 수 있다(S120). 픽업 안내 장치(100)는, 상품을 담은 용기가 놓인 트레이의 유무를 인식하고, 상품의 종류 및 수량을 인식할 수 있다. 주문된 서로 다른 상품 간의 특징, 예를 들어 상품의 종류, 수량, 트레이 유무, 용기의 종류 등은 상품 인식 및 주문 번호 매칭의 키 포이트로 작용할 수 있다.
픽업 안내 장치(100)는, 주문 정보를 이용하여 주문 번호에 상품을 매치시킬 수 있다(S130). 상품 자체의 인식을 통해 수집된 정보는, 인식된 상품에 주문 번호를 매칭하는 데에 기반이 될 수 있다. 그러나 상품의 외관이 모두 다른 경우가 아니라면, 상품의 객체 인식에 오류가 발생할 수 있다. 이러한 오류를 방지하기 위하여, 픽업 안내 장치(100)는, 메인 단말(110)이 보조 단말(120)로부터 상품 완성의 신호를 수신함으로써, 픽업 테이블에 배치될 상품의 주문 번호를 미리 예측할 수 있다. 픽업 안내 장치(100)의 메인 단말(110)은 예측된 주문 번호의 상품이 배치되는 위치를 인식하고, 해당 위치에 대응하는 위치 값을 출력하고 이를 디스플레이 장치(140)에 송신할 수 있다.
픽업 안내 장치(100)는, 주문 번호를 상품에 대응되게 표시할 수 있다(S140). 픽업 안내 장치(100)는 주문 번호를 상품에 대응되게 표시할 수 있다. 대응된 표시를 위해 픽업 안내 장치(100)는 객체 인식 알고리즘을 이용하여 상품의 경계를 인식하고, 프로젝터를 통해 경계가 형성되는 픽업 테이블의 바닥면 또는 벽면에 대해 해당 상품의 주문 번호 또는 주문자의 닉네임을 투사할 수 있다.
또한, 디스플레이 장치(140)인 프로젝터에서 투사되는 빛에는 주문 영수증에 표시된 상품의 바코드를 인식할 수 있는 적외선이 포함되어 있어서, 고객이 소지한 영수증을 판독하여 해당 상품의 주문 번호의 일치 또는 불일치에 따라 서로 다른 톤의 소리를 출력하도록 픽업 안내 장치(100)가 구성될 수 있다
픽업 안내 장치(100)는 주문 번호를 상품의 바디, 상품이 놓인 테이블 및 상품이 놓인 위치의 배경, 예를 들어 수직 또는 경사면 중에서 적어도 하나에 표시하도록 구성될 수 있다. 매장의 여건에 따라 픽업 테이블의 구성, 매장의 구조가 서로 다르게 설계될 수 있으므로, 주문 번호는 다양한 형태로 표시될 수 있다.
픽업 안내 장치(100)는 상품의 경계를 인식하고, 상품의 경계에 접하게 프로젝션 방식으로 상품이 놓인 테이블에 주문 번호를 디스플레이하도록 구성될 수 있다. 픽업 테이블 상에는 서로 다른 주문 번호에 해당하는 상품이 배열되어 있으므로, 상품 간의 이격에 의한 구별이 필요하고, 따라서 픽업 안내 장치(100)는 상품의 경계를 인식하고, 그 경계에 근접하게 해당 주문 번호를 표시할 수 있다.
픽업 안내 장치(100)는, 고객에 픽업되어 픽업 테이블 상에서 사라진 상품을 인식하고(S150), 상품에 대응되는 주문 정보를 업데이트 함으로써 주문 처리를 완료할 수 있다(S160). 주문 처리는 고객의 상품 픽업을 통해 완료될 수 있다. 픽업 안내 장치(100)는, 종래 기술에서 확인이 불가능 하던 고객 픽업 과정을, 객체 인식을 이용하여 확인할 수 있다.
픽업 안내 장치(100)는, 픽업 테이블 상의 상품이 고객에 픽업되는 시각에 관한 정보 및 영상 정보를 저장할 수 있다. 고객 픽업 과정 중의 오류를 감지하고 이를 해결하기 위해서, 고객에 픽업되는 시각에 관한 정보 및 해당 상황의 픽업 영상이 저장 장치(117)에 저장될 수 있다.
도 4는 본 발명의 일 실시 예에 따른 픽업 안내 방법의 데이터 흐름도이다.
도 4를 참조하면, 메인 단말(110), 보조 단말(120), 카메라(130) 및 디스플레이 장치(140)를 포함하도록 구성되는 픽업 안내 장치(100)가 픽업 안내 방법을 수행하는 과정에서 발생하는 데이터 흐름이 묘사되어 있다. 주문 정보 저장 및 송신(S110) 내지 주문 정보 업데이트(S230) 과정을 데이터 흐름에 따라 설명하기로 한다.
메인 단말(110)은 S100 계열의 과정을, 보조 단말(120)은 S200 계열의 과정을, 그리고 카메라(130)는 S300 계열의 과정을 주체적으로 수행하는 것으로 묘사되어 있으며, 디스플레이 장치(140)에 의해 수행되는 과정은 수동적 과정에 해당되어 메인 단말(110)이 주체인 것으로 묘사되었다.
고객은 다양한 방법을 이용하여, 예를 들어 키오스크, 개인 모바일 단말 또는 구두의 방법으로 스텝을 통해 상품 주문을 픽업 안내 장치(100), 즉 메인 단말(110)에 요청할 수 있다. 주문 요청에 따라 주문 번호가 생성되고, 메인 단말(110)은 주문 정보를 저장 및 보조 단말(120)에 송신할 수 있다(S110). 메인 단말(110)을 주문 정보를 보조 단말(120)과 공유한다.
보조 단말(120)은 메인 단말(110)로부터 주문 정보를 수신한다(S210). 스텝에 의해 상품의 조리가 완료되고(S1), 조리 완료 신호가 보조 단말(120)을 통해 메인 단말(120)로 송신된다. 조리된 상품은 스텝에 의해 픽업 테이블(150)에 투입된다(S2).
카메라(130)는 픽업 테이블 상에 올려진 상품을 촬영하고, 상품이 표시된 상품 영상을 수집한다(S310). 카메라(130)는 상품 영상을 메인 단말(110)에 송신한다. 메인 단말(110)은 카메라(130)로부터 상품 영상을 수신하고(S114), 객체 인식 알고리즘을 이용하여 상품을 인식한다(S120). 상품 인식의 범위 또는 유형은, 실시 예에 따라 상품의 경계 인식부터 상품의 품목 및 수량 인식을 포함할 수 있다.
다음으로 메인 단말(110)은 상품 인식을 통해 얻은 정보를 이용하여 상품을 주문 번호와 매치시킨다(S130). 현재 픽업 테이블 상에 올려진 상품에 관한 주문 번호 및 상품의 위치 값이 정해지고, 디스플레이 장치(140)에 송신된다. 디스플레이 장치(140)는 주문 번호 및 상품의 위치 값을 수신하고, 대응되는 위치에 주문 번호를 표시한다(S140). 대응되는 위치란, 상품의 바디 또는 상품의 경계에 근접한 위치를 말한다.
고객이 픽업 테이블 상에 올려진 상품을 픽업해 가고(g), 카메라(130)는 픽업 장면을 촬영한 픽업 영상을 수집한다(S330). 카메라(130)는 픽업 영상을 메인 단말(110)에 송신한다(S340).
메인 단말(110)은 카메라(130)로부터 픽업 영상을 수신한다(S142). 메인 단말(110)은 픽업 영상을 이용하여 고객 픽업을 확인한다(S150). 메인 단말(110)은 주문 정보를 업데이트하고(S160), 동기화에 따라 보조 단말(120)에 저장된 주문 정보도 업데이트된다(S230). 이로써 주문 및 주문 처리가 완료될 수 있다.
도 5는 본 발명의 일 실시 예에 따른 픽업 테이블을 설명하기 위한 예시도이다.
도 5를 참조하면, 픽업 테이블(150) 상에 배열된 상품이 묘사되어 있다. 각 상품에 대한 #1 경계, #2 경계 및 #3 경계는 주문 번호 또는 주문자의 닉네임 표시의 기준이 된다. 즉 주문 번호 또는 닉네임은 경계에 접하게 표시될 수 있다. 픽업 테이블 상에서 상품의 위치 판단을 위해 마커가 이용될 수 있다.
도 6은 본 발명의 일 실시 예에 따른 카메라 및 디스플레이 장치를 설명하기 위한 예시도이다.
도 6을 참조하면, 픽업 안내 장치(100)의 일 실시 예로서, 픽업 테이블(150)이 준비된 장소의 천정에 설치된 카메라(130) 및 디스플레이 장치(140)인 프로젝터가 묘사되어 있다. 프로젝터 및 카메라(130)는 구동 모터를 이용하여 PTZ 기능을 수행하도록 구성될 수 있다. 픽업 안내 장치(100)는, 상품의 존재 및 상품의 경계 인식을 통해, 2개의 음료로 구성된 #A-01 상품이 단일 주문 번호를 갖는 것으로 인식되고, 트레이 상의 2개의 음료 및 1개의 케이크로 구성된 #A-02 상품이 단일 주문 번호를 갖는 것으로 인식할 수 있다. 동기화를 통해 보조 단말(120)은 메인 단말(110)의 주문 정보, 조리완료 및 고객 픽업에 관한 정보를 공유하도록 구성될 수 있다.
이와 같이 본 발명의 일 실시 예에 따르면, 즉석 조리된 음료 등이 착오없이 정확하게 고객에 픽업될 수 있다.
또한, 준비된 음료에 대응되는 표시를 통해 조리 완성을 고객에 알릴 수 있고, 고객 픽업 여부를 자동으로 인식함으로써 주문 처리 완료가 자동으로 체크될 수 있다.
또한, 주문 번호와 픽업될 상품의 매칭을 통해 주문 품목의 픽업 과정에서 발생할 수 있는 오류가 방지될 수 있다.
이상, 일부 예를 들어서 본 발명의 바람직한 여러 가지 실시 예에 대해서 설명하였지만, 본 "발명을 실시하기 위한 구체적인 내용" 항목에 기재된 여러 가지 다양한 실시 예에 관한 설명은 예시적인 것에 불과한 것이며, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 이상의 설명으로부터 본 발명을 다양하게 변형하여 실시하거나 본 발명과 균등한 실시를 행할 수 있다는 점을 잘 이해하고 있을 것이다.
또한, 본 발명은 다른 다양한 형태로 구현될 수 있기 때문에 본 발명은 상술한 설명에 의해서 한정되는 것이 아니며, 이상의 설명은 본 발명의 개시 내용이 완전해지도록 하기 위한 것으로 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 본 발명의 범주를 완전하게 알려주기 위해 제공되는 것일 뿐이며, 본 발명은 청구범위의 각 청구항에 의해서 정의될 뿐임을 알아야 한다.
10: 픽업 안내 시스템
100: 픽업 안내 장치
110: 메인 단말
120: 보조 단말
130: 카메라
140: 디스플레이 장치
100: 픽업 안내 장치
110: 메인 단말
120: 보조 단말
130: 카메라
140: 디스플레이 장치
Claims (13)
- 주문된 상품에 대해 주문 번호를 부여하고, 상기 주문 번호에 대응하는 주문 정보를 저장하는 주문정보 관리부;
카메라를 통해 촬영된 영상을 이용하여 픽업 테이블 상에 놓인 상품을 인식하는 상품 인식부;
상기 주문 정보를 이용하여 상기 주문 번호에 상기 상품을 매치시키는 주문 매치부; 및
상기 주문 번호를 상기 상품에 대응되게 표시하는 디스플레이 장치를 포함하도록 구성되는,
픽업 안내 시스템. - 청구항 1에 있어서,
상기 주문정보 관리부는,
주문 번호에 대해 주문 시각, 주문한 상품의 종류, 및 수량에 관한 정보를 포함하는 주문 정보를 저장하도록 구성되는,
픽업 안내 시스템. - 청구항 1에 있어서,
상기 상품 인식부는,
영상 분석을 통한 객체 인식에 기반하여 상품의 수량, 상품의 종류, 상품을 담은 용기의 종류, 및 용기가 놓인 트레이의 유무를 인식하도록 구성되는,
픽업 안내 시스템. - 청구항 1에 있어서,
상기 주문 매치부는,
상기 주문 정보 및 객체 인식에 기반하여 판별된 상품 정보를 이용하여 주문 번호에 상품을 매치시키도록 구성되는,
픽업 안내 시스템. - 청구항 1에 있어서,
상기 주문 매치부는,
주문 시각을 기준으로 주문된 상품의 조리에 필요한 최소 조리 시간 및 이전 상품의 지연율을 고려하여 주문 번호에 상품을 매치시키도록 구성되는,
픽업 안내 시스템. - 청구항 1에 있어서,
상기 디스플레이 장치는,
상기 주문 번호를 상기 상품의 바디, 상기 상품이 놓인 테이블 및 상기 상품이 놓인 위치의 배경 중에서 적어도 하나에 상기 주문 번호를 표시하도록 구성되는,
픽업 안내 시스템. - 청구항 1에 있어서,
상기 디스플레이 장치는,
프로젝션 방식으로 상기 상품이 놓인 테이블에 상기 주문 번호를 표시하되,
고객의 주문 표에 표시된 주문 번호를 인식하는 광을 함께 프로젝트하는,
픽업 안내 시스템. - 주문된 상품에 대해 주문 번호를 부여하고, 상기 주문 번호에 대응하는 주문 정보를 저장하는 단계;
카메라를 통해 촬영된 영상을 이용하여 픽업 테이블 상에 놓인 상품을 인식하는 단계;
상기 주문 정보를 이용하여 상기 주문 번호에 상기 상품을 매치시키는 단계; 및
상기 주문 번호를 상기 상품에 대응되게 표시하는 단계를 포함하도록 구성되는,
픽업 안내 방법. - 청구항 8에 있어서
상기 상품을 인식하는 단계는,
상품을 담은 용기가 놓인 트레이의 유무를 인식하는 단계; 및
상품의 종류 및 수량을 인식하는 단계를 포함하도록 구성되는,
픽업 안내 방법. - 청구항 8에 있어서,
고객에 픽업되어 픽업 테이블 상에서 사라진 상품을 인식하는 단계; 및
상기 상품에 대응되는 주문 정보를 업데이트 함으로써 주문 처리를 완료하는 단계를 더 포함하도록 구성되는,
픽업 안내 방법. - 청구항 8에 있어서,
픽업 테이블 상의 상품이 고객에 픽업되는 시각에 관한 정보 및 영상 정보를 저장하는 단계를 더 포함하도록 구성되는,
픽업 안내 방법. - 청구항 8에 있어서,
상기 주문 번호를 상기 상품에 대응되게 표시하는 단계는,
상기 주문 번호를 상기 상품의 바디, 상기 상품이 놓인 테이블 및 상기 상품이 놓인 위치의 배경 중에서 적어도 하나에 표시하도록 구성되는,
픽업 안내 방법. - 청구항 8에 있어서,
상기 주문 번호를 상기 상품에 대응되게 표시하는 단계는,
상기 상품의 경계를 인식하는 단계; 및
상기 상품의 경계에 접하게 프로젝션 방식으로 상기 상품이 놓인 테이블에 상기 주문 번호를 디스플레이하는 단계를 포함하도록 구성되는,
픽업 안내 방법.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210146633A KR20230061901A (ko) | 2021-10-29 | 2021-10-29 | 사물인식 인공지능을 활용한 픽업 안내 방법 및 시스템 |
| PCT/KR2022/015751 WO2023075254A1 (ko) | 2021-10-29 | 2022-10-17 | 사물인식 인공지능을 활용한 픽업 안내 방법 및 시스템 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210146633A KR20230061901A (ko) | 2021-10-29 | 2021-10-29 | 사물인식 인공지능을 활용한 픽업 안내 방법 및 시스템 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20230061901A true KR20230061901A (ko) | 2023-05-09 |
Family
ID=86158128
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020210146633A KR20230061901A (ko) | 2021-10-29 | 2021-10-29 | 사물인식 인공지능을 활용한 픽업 안내 방법 및 시스템 |
Country Status (2)
| Country | Link |
|---|---|
| KR (1) | KR20230061901A (ko) |
| WO (1) | WO2023075254A1 (ko) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101667025B1 (ko) | 2015-12-24 | 2016-10-17 | 대구보건대학교산학협력단 | 스마트 주문 관리 시스템용 전자 테이블 장치 |
| KR102187090B1 (ko) | 2020-05-07 | 2020-12-04 | 박노섭 | 무인 음료 제조시스템 |
| KR102315615B1 (ko) | 2019-09-18 | 2021-10-21 | 주식회사 라운지랩 | 이미지 인식을 이용한 매장 내 식음료 이송 및 수거 시스템과 이를 이용한 식음료 이송 및 수거 방법 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130204719A1 (en) * | 2012-02-02 | 2013-08-08 | Xerox Corporation | Systems and methods for license plate recognition to enable advance order pickup |
| KR101687705B1 (ko) * | 2015-03-26 | 2016-12-28 | 주식회사 스마트캐스트 | 주문 모니터링 및 디스플레이 시스템 |
| KR101959355B1 (ko) * | 2017-07-04 | 2019-07-02 | (주)에이앤디솔루션스 | 식음료 매장 주문 및 서비스 자동화 시스템 및 그 방법 |
| KR102114364B1 (ko) * | 2018-10-08 | 2020-05-22 | 카페24 주식회사 | 출하 대기렉 장치에서의 출하 적합성 검사 방법, 상기 방법을 이용하는 장치, 및 시스템 |
| KR20200086980A (ko) * | 2019-01-10 | 2020-07-20 | 삼성전자주식회사 | 적어도 하나의 시각적 객체를 표시하기 위한 전자 장치 및 방법 |
-
2021
- 2021-10-29 KR KR1020210146633A patent/KR20230061901A/ko not_active Application Discontinuation
-
2022
- 2022-10-17 WO PCT/KR2022/015751 patent/WO2023075254A1/ko unknown
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101667025B1 (ko) | 2015-12-24 | 2016-10-17 | 대구보건대학교산학협력단 | 스마트 주문 관리 시스템용 전자 테이블 장치 |
| KR102315615B1 (ko) | 2019-09-18 | 2021-10-21 | 주식회사 라운지랩 | 이미지 인식을 이용한 매장 내 식음료 이송 및 수거 시스템과 이를 이용한 식음료 이송 및 수거 방법 |
| KR102187090B1 (ko) | 2020-05-07 | 2020-12-04 | 박노섭 | 무인 음료 제조시스템 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2023075254A1 (ko) | 2023-05-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11587085B2 (en) | Vending machine | |
| US20210398099A1 (en) | Estimating shelf capacity from image data to improve store execution | |
| CA3177901C (en) | Systems and methods for retail environments | |
| US20230124850A1 (en) | Withholding notifications due to temporary misplaced products | |
| US20190149725A1 (en) | Using augmented reality for image capturing a retail unit | |
| CN109147170A (zh) | 一种基于图像识别的无人售货柜 | |
| US20230377018A1 (en) | Associating digital activities with positions in physical retail stores | |
| JP6621033B2 (ja) | 年齢確認システム、及びそれを備えた買物支援システム | |
| US20170200117A1 (en) | Systems and methods of fulfilling product orders | |
| JPWO2017150226A1 (ja) | 買物支援システム | |
| JP2019138493A (ja) | 冷蔵庫、商品発注方法及び商品発注システム | |
| KR20200061698A (ko) | 테이크아웃 스테이션을 이용한 셀프 테이크아웃 방법 | |
| US20220180302A1 (en) | System and method for inventory management and multimedia content delivery | |
| KR20230061901A (ko) | 사물인식 인공지능을 활용한 픽업 안내 방법 및 시스템 | |
| JP6990676B2 (ja) | 食品の注文受渡しシステム | |
| US11010903B1 (en) | Computer vision and machine learning techniques for item tracking | |
| KR102417176B1 (ko) | 셀프 테이크아웃을 위한 테이크아웃 시스템 | |
| US20240161060A1 (en) | Scheduled and unscheduled order fulfillment | |
| US20230419392A1 (en) | Displaying a three-dimensional image of an item to a user of an online concierge system during order fulfillment | |
| US20230011553A1 (en) | Systems and methods for remotely purchasing perishable products | |
| CN113631067A (zh) | 物品定位、清单创建、路线规划、成像和检测的系统、设备和方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E601 | Decision to refuse application | ||
| E601 | Decision to refuse application | ||
| E801 | Decision on dismissal of amendment |