KR20190072562A - 주문 정보 결정 방법 및 장치 - Google Patents

주문 정보 결정 방법 및 장치 Download PDF

Info

Publication number
KR20190072562A
KR20190072562A KR1020197013121A KR20197013121A KR20190072562A KR 20190072562 A KR20190072562 A KR 20190072562A KR 1020197013121 A KR1020197013121 A KR 1020197013121A KR 20197013121 A KR20197013121 A KR 20197013121A KR 20190072562 A KR20190072562 A KR 20190072562A
Authority
KR
South Korea
Prior art keywords
user
information
gesture
product
order
Prior art date
Application number
KR1020197013121A
Other languages
English (en)
Other versions
KR102192884B1 (ko
Inventor
지아지아 리
레이 지아오
Original Assignee
알리바바 그룹 홀딩 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 알리바바 그룹 홀딩 리미티드 filed Critical 알리바바 그룹 홀딩 리미티드
Publication of KR20190072562A publication Critical patent/KR20190072562A/ko
Application granted granted Critical
Publication of KR102192884B1 publication Critical patent/KR102192884B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0633—Lists, e.g. purchase orders, compilation or processing
    • G06Q30/0635—Processing of requisition or of purchase orders
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/067—Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components
    • G06K19/07—Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips
    • G06K19/0723—Record carriers with conductive marks, printed circuits or semiconductor circuit elements, e.g. credit or identity cards also with resonating or responding marks without active components with integrated circuit chips the record carrier comprising an arrangement for non-contact communication, e.g. wireless communication circuits on transponder cards, non-contact smart cards or RFIDs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10009—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves
    • G06K7/10366—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves the interrogation device being adapted for miscellaneous applications
    • G06K7/10415—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves the interrogation device being adapted for miscellaneous applications the interrogation device being fixed in its position, such as an access control device for reading wireless access cards, or a wireless ATM
    • G06K7/10425—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves the interrogation device being adapted for miscellaneous applications the interrogation device being fixed in its position, such as an access control device for reading wireless access cards, or a wireless ATM the interrogation device being arranged for interrogation of record carriers passing by the interrogation device
    • G06K7/10435—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves the interrogation device being adapted for miscellaneous applications the interrogation device being fixed in its position, such as an access control device for reading wireless access cards, or a wireless ATM the interrogation device being arranged for interrogation of record carriers passing by the interrogation device the interrogation device being positioned close to a conveyor belt or the like on which moving record carriers are passing
    • G06K7/10445—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves the interrogation device being adapted for miscellaneous applications the interrogation device being fixed in its position, such as an access control device for reading wireless access cards, or a wireless ATM the interrogation device being arranged for interrogation of record carriers passing by the interrogation device the interrogation device being positioned close to a conveyor belt or the like on which moving record carriers are passing the record carriers being fixed to further objects, e.g. RFIDs fixed to packages, luggage, mail-pieces or work-pieces transported on a conveyor belt
    • G06K9/00221—
    • G06K9/00335—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/203—Inventory monitoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/206—Point-of-sale [POS] network systems comprising security or operator identification provisions, e.g. password entry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/327—Short range or proximity payments by means of M-devices
    • G06Q20/3278—RFID or NFC payments by means of M-devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0639—Item locations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0036—Checkout procedures
    • G07G1/0045—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader
    • G07G1/0054—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader with control of supplementary check-parameters, e.g. weight or number of articles
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0036—Checkout procedures
    • G07G1/0045—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader
    • G07G1/009—Checkout procedures with a code reader for reading of an identifying code of the article to be registered, e.g. barcode reader or radio-frequency identity [RFID] reader the reader being an RFID reader
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/12—Cash registers electronically operated
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/12—Cash registers electronically operated
    • G07G1/14—Systems including one or more distant stations co-operating with a central processing unit

Abstract

본 발명은 주문 정보 결정 방법과 장치를 제시한다. 본 방법은 사용자와 이 사용자가 선택 및 구매한 상품 사이의 연관(association)을 결정하는데 사용되며, 사용자의 제스처 데이터(gesture data)를 획득하기 위해 사용자에 대해 인체 제스처 인식(human gesture recognition)을 수행하는 단계; 상품의 위치 정보를 획득하기 위하여 상품을 위치 파악하는 단계; 제스처 데이터와 위치 정보를 기초로, 사용자의 제스처가 상품을 취하는 것인지 여부를 결정하는 단계; 및 결정 결과가 사용자가 상품을 취하는 것이면, 사용자의 주문에 상품을 추가하는 단계를 포함한다. 본 발명에서는, 쇼핑 효율이 향상되고 상당히 좋은 쇼핑 경험이 제공된다.

Description

주문 정보 결정 방법 및 장치
본 발명은 인터넷 기술 분야에 관한 것으로, 특히 주문 정보 결정 방법 및 장치에 관한 것이다.
전통적인 오프라인 매장에서 상품들을 선택한 후에, 소비자들은 이러한 상품들에 대한 결제를 위해 계산대(checkout counter)에서 줄을 서서 기다려야 하고, 계산원(checkout staff)은 상품에 대한 결제를 위해 컴퓨터를 사용한다. 하지만, 이러한 결제 과정은 종종 비효율적이며, 기다리는 시간이 오래 걸릴 가능성이 높다. 결제 효율을 향상시키기 위해, 종래 기술에서는 소비자가 상품을 선택하고 구매할 때, 컴퓨터 비전(computer vision)과 같은 기술을 기초로 소비자의 선택 및 구매 과정이 실시간으로 분석되어 소비자가 취한 상품과 소비자가 되돌려 놓은 상품을 결정할 수 있게 되며, 그래서 주문 정보, 즉 소비자의 청구서 목록(bill list)을 수정 및 결정할 수 있게 된다. 하지만, 전술한 분석 과정에서는, 부정확한 결정을 초래할 수 있는 많은 요인이 존재하는데, 예를 들면 많은 사람들이 동시에 낮은 진열대에 있는 상품들을 취할 때 부정확한 결정이 발생하거나, 아니면 소비자가 유사성이 매우 높은 상품을 잘못된 장소로 되돌려 놓을 때 식별 장치가 가려져서는 오판을 하게 된다. 이러한 요인들 모두가 주문 정보의 부정확한 결정을 초래할 수 있으며, 상품 결제에 영향을 미칠 수 있다.
이러한 관점에서, 본 발명은 상품의 주문 정보를 보다 신속하고 정확하게 결정하여, 주문상의 상품이 소비자와 연관될 수 있도록 하기 위한, 주문 정보 결정 방법 및 장치를 제시한다.
본 개시는 다음의 기술적 해법에 의해 달성된다.
제1의 양태에 따르면, 주문 정보 결정 방법이 제공되는데, 이 방법은 사용자와 이 사용자가 선택 및 구매한 상품 사이의 연관(association)을 결정하는데 사용되며, 이 방법은, 사용자의 제스처 데이터(gesture data)를 획득하기 위해 사용자에 대해 인체 제스처 인식(human gesture recognition)을 수행하는 단계와; 상품의 위치 정보를 획득하기 위하여 상품을 위치 파악(positioning)하는 단계와; 제스처 데이터와 위치 정보를 기초로, 사용자의 제스처가 상품을 취하는 것인지 여부를 결정하는 단계; 및 결정 결과가 사용자가 상품을 취하는 것인 경우에는, 상품을 사용자의 주문에 추가하는 단계를 포함한다.
제2의 양태에 따르면, 주문 정보 결정 장치가 제공되며, 이 장치는, 사용자의 제스처 데이터를 획득하기 위해 사용자에 대해 인체 제스처 인식을 수행하도록 구성된, 제스처 인식 모듈과; 상품의 위치 정보를 획득하기 위해 상품을 위치 파악하도록 구성된, 상품 위치 파악 모듈과; 제스처 데이터와 위치 정보를 기초로, 사용자의 제스처가 상품을 취하는 것인지 여부를 결정하도록 구성된, 정보 처리 모듈; 및, 결정 결과가 사용자가 상품을 취하는 것인 경우에는, 상품을 사용자의 주문에 추가하도록 구성된, 주문 처리 모듈을 포함한다.
본 발명의 주문 정보 결정 방법 및 장치에 따르면, 소비자의 주문 정보가 신속하고 정확하게 결정될 수 있으며, 주문의 결제가 자동으로 완료된다. 쇼핑을 완료한 후에, 소비자는 결제를 위해 계산대에 줄을 서서 기다릴 필요없이 곧바로 나갈 수 있으며, 그에 따라 쇼핑의 효율을 향상시키고 상당히 좋은 쇼핑 경험을 제공하게 된다.
도 1은 본 발명의 일 실시예에 따른, 편의점의 구역 레이아웃(area layout)을 예시하는 도면.
도 2는 본 발명의 일 실시예에 따른, 편의점 내부의 보다 상세한 레이아웃을 예시하는 개략도.
도 3은 본 발명의 일 실시예에 따른, 컴퓨팅 장치를 예시하는 개략적인 구조도.
도 4는 본 발명의 일 실시예에 따른, 주문 정보 결정 절차를 예시하는 순서도.
도 5는 본 발명의 일 실시예에 따른, 주문 정보 처리 장치를 예시하는 개략적인 구조도.
사람들의 일상생활에서, 수퍼마켓, 쇼핑몰, 편의점 등에서의 쇼핑은 흔한 쇼핑 행위이다. 상품들을 선택 및 구매한 후에, 소비자는 이들 상품들에 대한 결제를 위해 출구의 계산대에서 줄을 서서 기다려야 하는데, 이는 시간을 많이 소비하며 불편하다. 쇼핑 효율을 향상시키기 위해, 쇼핑 중에 소비자가 선택 및 구매한 상품들을 자동으로 식별하고, 소비자와 이 소비자가 선택 및 구매한 상품들 사이의 연관 관계를 결정하며, 셀프서비스 결제를 위해 소비자에게 그 대응하는 청구서를 자동으로 전달하기 위해, 쇼핑 관리 시스템(shopping management system)이 사용될 수 있다. 그래서, 소비자는 상품들에 대한 결제를 위해 출구에 줄을 서서 기다릴 필요가 없으므로, 쇼핑 효율을 향상시킨다.
전술한 방법을 구현하기 위한 중요한 요인은 소비자와 이 소비자가 선택 및 구매한 상품들 사이의 연관 관계를 결정하는 것이며, 연관 관계가 결정되고 난 후에만 소비자에 대응하는 청구서가 획득될 수 있다. 본 발명에서는, 이러한 연관 관계가 "주문 정보"라 지칭될 수 있는데, 다시 말하면, 사용자가 선택 및 구매한 상품들을 말한다. 본 개시에 제시된 주문 정보 결정 방법은 신속한 결제를 돕기 위해 주문 정보를 간단하고 정확하게 결정하기 위한 것이다.
본 발명의 주문 정보 결정 방법의 처리 과정이, 소비자가 편의점에서 쇼핑하는 예를 이용하여 아래에 기술된다. 하지만, 본 방법은 예를 들면, 수퍼마켓에서의 쇼핑, 쇼핑몰에서의 쇼핑, 창고의 재고 모니터링(창고로부터 누가 무엇을 취했는지), 및 도서관의 도서 관리(누가 어떤 책을 대출해 갔는지)에서 사람과 물품의 연관 관계를 결정해야 할 필요가 있는 시나리오와 같은, 다른 시나리오에도 또한 적용될 수 있다.
도 1은 편의점의 구역 레이아웃을 예시한다. 도 1에 도시된 바와 같이, 편의점(100)은 입구 구역(101)과, 저장 구역(storage area)(102), 및 출구 구역(103)을 포함할 수 있다. 소비자는 입구 구역(101)으로부터 편의점(100)으로 들어가서는, 저장 구역(102)에서 상품을 선택 및 구매할 수 있다. 선택 및 구매를 완료한 후에, 소비자는 출구 구역(103)으로부터 편의점을 나간다. 저장 구역(102)에는 많은 상품을 저장할 수 있다. 예를 들면, 도 1에 예시된 1021 내지 1024가 편의점 내의 상품들이며, 과일, 음료, 우유, 빵 등을 포함할 수 있다. 도 1에는 상품들의 일부만이 예시되어 있으며, 저장 구역(102)에는 실제로 더 많은 상품이 포함될 수 있다. 도 1에 도시된 편의점의 레이아웃은 기능적 구역 구분이며, 실제 물리적인 구역 구분은 아니다. 일례에서는, 복수의 입구 구역들(101), 저장 구역들(102), 및 출구 구역들(103)이 개별적으로 배치되는 대신에 통합됨으로써 합체되어 배치될 수도 있다.
도 1의 편의점(100)은 쇼핑 관리 시스템(104)을 더 포함할 수 있다. 쇼핑 관리 시스템(104)은 입구 구역(101), 저장 구역(102), 및 출구 구역(103)과 통신 및 상호 작용할 수 있다. 도 2는 편의점 내부의 레이아웃을 보다 상세히 예시한다. 예를 들어, 소정의 안면 인식 장치(201)가 편의점(100) 내의 입구 구역(101)에 배치될 수 있다. 소비자(202)가 편의점으로 들어오면, 안면 인식 장치(201)가 그 소비자(202)의 안면 인식 데이터를 자동으로 수집할 수 있다. 예를 들면, 안면 인식 장치(201)는 입구 구역에서 소비자의 이미지들을 수집하여, 이미지가 안면을 포함하고 있는지를 결정하기 위해 특정 정책(policy)을 이용하여 이미지를 검색하고는, 이미지가 안면을 포함하고 있으면 안면의 위치, 크기, 및 제스처를 반송(return)할 수 있다. 또한, 안면 인식 장치(201)는 안면 인식 데이터를 획득하기 위해 안면 이미지에 대해 전처리(preprocessing) 및 특징 추출(feature extraction)을 행할 수 있다. 몇몇 진열대들(203)이 저장 구역(102)에 배치될 수 있으며, 많은 상품들, 예를 들면 도 2에 도시된 바나나(2031)와 우유(2032)가 진열대(203)에 배치될 수 있다. 예를 들어, 상품을 선택 및 구매할 때, 소비자는 상품을 손으로 잡을 수도 있고, 또는 상품을 팔로 붙들 수도 있는데, 즉 소비자는 신체 일부를 사용하여 상품을 운반할 수 있다. 쇼핑을 완료한 후에, 소비자는 편의점의 출구 구역으로 가서는, 결제를 위해 줄을 설 필요없이 출구 통로(excit channel)(204)를 통하여 편의점을 빠져나갈 수 있다. 일반적으로 한 사람씩만 순서대로 하나의 출구 통로(204)를 통과할 수 있다.
일례에서, 본 발명에서는 RFID(radio frequency identification) 라벨이 각 상품에 부착될 수 있는데, 예를 들어 도 2에서는 RFID 라벨(205)이 진열대(203) 상의 상품에 부착되어 있다. 상이한 상품들 상의 라벨들은 상이한 정보를 포함하며, 라벨들은 상품의 식별 정보를 포함한다.
도 2에 도시된 바와 같이, RFID 라벨 신호를 수신하도록 구성된 복수의 판독기(reader)들이 편의점의 벽, 지붕 등에 또한 설치될 수 있는데, 예를 들면 판독기(206)가 입구 구역에 배치되고, 판독기(207)가 저장 구역에 배치되며, 판독기(208)가 출구 구역에 배치된다. 판독기는 수신한 RFID 라벨 정보를 쇼핑 관리 시스템(104)에 송신할 수 있으며, 쇼핑 관리 시스템(104)은 이 정보를 저장 및 처리할 수 있다. 게다가, 카메라(209)와 같은 모니터링 장치도 또한 편의점 내에 배치될 수 있는데, 이들 모니터링 장치들은 매장 내에서 비디오 모니터링을 수행하도록 구성될 수 있다. 모니터링 정보도 또한 쇼핑 관리 시스템(104)에 송신될 수 있다. 쇼핑 관리 시스템(104)은 그 시스템 내의 정보를 매장에 설치된 무선 안테나(wireless antenna)와 같은 네트워크 장치를 사용하여, 디스플레이를 위해 다른 장치에 또한 송신할 수 있다. 예를 들면, 쇼핑 관리 시스템(104)은 소비자가 소지한 스마트폰에도 정보를 송신할 수 있으며, 그래서 소비자는 휴대전화를 사용하여 쇼핑 관리 시스템에 의해 획득된 정보를 편리하게 체크할 수 있다.
쇼핑 관리 시스템(104)은 로컬 또는 원격 서버 시스템일 수 있으며, 복수의 컴퓨팅 프로세싱 장치(computing processing devices)들을 포함할 수 있다. 예를 들면, 2개의 컴퓨팅 장치가 도 2에 예시되어 있으며, 실제 구현에서는 더 많은 컴퓨팅 장치들이 있을 수 있다. 도 3에 도시된 바와 같이, 컴퓨팅 장치는 프로세서(301)와, 입출력 인터페이스(302)와, 네트워크 인터페이스(303), 및 메모리(304)를 포함할 수 있다. 프로세서(301)와, 입출력 인터페이스(302)와, 네트워크 인터페이스(303), 및 메모리(304)는 버스(305)를 사용하여 서로 연결 및 통신할 수 있다. 도 3에는 단지 몇몇 컴포넌트들만 예시되었으며, 실제 컴퓨팅 장치는 더 많거나 더 적은 수의 컴포넌트들을 포함할 수 있다. 메모리(304)는 데이터 관리 모듈(3041)과 쇼핑 관리 모듈(3042)을 더 포함할 수 있다. 이들 모듈들은 하드웨어, 소프트웨어 등의 형태일 수 있고, 소프트웨어 형태일 때는 컴퓨터 실행 가능 프로그램일 수 있다.
예를 들어, 컴퓨팅 장치는 네트워크 인터페이스(303)를 통하여 편의점 내의 RFID 라벨 또는 카메라와 같은 장치에 의해 전송되는 정보를 수신할 수 있으며, 정보(후속 예에서 상세히 기술됨), 예를 들면 RFID 라벨을 사용하여 위치 파악함으로써 획득된 상품의 위치 정보 또는 소비자가 전송한 회원 ID 정보를 처리할 수 있다. 프로세서(301)는 쇼핑 관리 모듈(3042)의 명령을 실행하여 수신 정보를 처리함으로써, 소정의 최신 데이터, 예를 들면 편의점으로 들어온 새로운 소비자에 대한 정보, 상품 위치 정보, 사용자의 제스처 데이터, 또는 소비자의 주문 정보를 획득할 수 있다. 또한, 프로세서(301)는 데이터 관리 모듈(3041)의 명령을 실행함으로써 데이터베이스(305)에 데이터를 업데이트할 수 있다.
일례에서, 데이터베이스(305)는 데이터를 저장할 수 있는데, 예를 들면 이러한 데이터는 사용자 정보, 위치 정보, 주문 정보, 및 제스처 정보를 포함할 수 있다. 사용자 정보는 쇼핑 관리 시스템에 등록된 일부 사용자들의 회원 ID일 수 있고, 위치 정보는 후속 예에서 기술되는 상품을 위치 파악함으로써 획득된 정보일 수 있으며, 주문 정보는 소비자가 선택 및 구매한 상품들에 대한 정보일 수 있고, 제스처 데이터는 후속 설명에서 기술되는 사용자에 대한 동적 인체 제스처 인식(dynamic human gesture recognition)을 수행하여 획득된 데이터일 수 있다. 또한, 컴퓨팅 장치는 가장 최근에 수신된 데이트를 기초로 정보를 업데이트할 수 있다. 예를 들어, 컴퓨팅 장치는 새로 등록한 사용자가 있을 때 사용자 정보를 업데이트할 수 있고, 상품에 대한 실시간 위치 파악 중에 상품의 위치 정보를 업데이트할 수 있으며, 주문의 상품 변경을 기초로 주문 정보를 또한 업데이트할 수 있다. 또한, 컴퓨팅 장치는 데이터베이스의 데이터를 또한 출력할 수 있다. 예를 들면, 컴퓨팅 장치는 데이터베이스로부터 주문 정보를 취출하고는, 이 주문 정보를 소비자의 휴대 전화와 같은 다른 장치에도 송신할 수 있으며, 그래서 소비자가 이 정보를 체크할 수 있다.
도 4는 주문 정보 결정 절차를 예시한다. 소비자가 편의점으로 들어가서 상품을 선택 및 구매할 때, 소비자는 입구 구역으로부터 편의점으로 들어갈 수 있고, 쇼핑 중에 진열대에 놓인 상품들을 선택 및 구매할 수 있으며, 손 또는 팔로 상품을 붙들고는 선택 및 구매 완료 후에 출구 구역으로부터 편의점을 곧바로 나갈 수 있다. 이 과정에서, 쇼핑 관리 시스템은 주문 정보를 결정하기 위해, 즉 편의점에서 소비자가 선택 및 구매한 상품들을 결정하기 위해 도 4의 절차를 수행할 수 있다.
단계 401에서, 소비자가 편의점으로 들어와서 상품을 선택 및 구매할 때, 소비자는 입구 구역에서 회원 ID를 입력할 수 있다. 예를 들어, 사용자는 스마트폰에 설치된 쇼핑 소프트웨어를 사용하여 ID 정보를 식별하는 2차원 코드를 생성할 수 있다. 쇼핑 소프트웨어는 쇼핑 관리 시스템의 클라이언트 소프트웨어일 수 있으며, 사용자는 스마트폰에 클라이언트 소프트웨어에 등록된 회원 ID를 입력한다. 회원 ID는 사용자 식별자로 지칭될 수 있다. 이와 달리, 사용자는 밴드(band)와 같은 지능형 디바이스를 사용하여 NFC를 통해 회원 ID를 입력할 수 있으며, 지능형 디바이스는 회원 ID와 이미 연관되어 있다. 클라이언트 소프트웨어는 획득된 회원 ID를 쇼핑 관리 시스템에 또한 업로드할 수 있다.
또한, 입구 구역에서는, 안면 인식 장치(201)가 사용자에 대해 안면 인식을 수행하여, 획득된 안면 인식 데이터를 쇼핑 관리 시스템에 송신할 수 있다. 이와 같이, 쇼핑 관리 시스템은 안면 인식 데이터와 사용자 식별자로 사용되는 회원 ID 사이의 결합(binding)에 관한 정보를 수신할 수 있는데, 이는 안면 특징을 갖는 소비자에 대응하는 회원 ID를 아는 것과 동등한 것이며, 쇼핑 관리 시스템은 이 매핑 관계(mapping relationship)를 데이터베이스(305)에 저장할 수 있다.
사용자가 저장 구역으로 들어가서 상품을 선택 및 구매할 때, 편의점 전체에서, 상품에 부착된 RFID 라벨이 매장에 설치된 RFID 판독기(208) 등을 사용하여 위치 파악될 수 있다. 예를 들어, 판독기(208)는 상품에 있는 RFID 라벨에 의해 전송된 라벨 신호를 수신할 수 있다. 라벨 신호는 상품 정보를 포함할 수 있다. 예를 들면, 상품 정보는 그 상품을 고유하게 식별하는 상품 코드를 포함할 수 있다. 단계 402에서, 판독기(208)는 라벨 신호를 쇼핑 관리 시스템에 송신할 수 있으며, 쇼핑 관리 시스템은 이 라벨 신호를 기초로 위치 파악 계산을 하여 상품에 있는 위치 파악 라벨(positioning label)의 위치 정보를 획득할 수 있다. 예를 들어, 도 3을 참조하면, 컴퓨팅 장치상의 프로세서(301)가 쇼핑 관리 모듈(3042)의 실행 가능 코드를 실행할 수 있고, 라벨 신호를 기초로 위치 파악 계산을 수행할 수 있으며, 데이터 관리 모듈(3041)의 실행 가능 코드를 실행함으로써 계산을 통해 획득된 위치 정보를 데이터베이스(305)에 저장할 수 있다. 현 단계에서, 위치 파악은 일반적인 RFID 위치 파악 기술을 기초로 행해질 수 있다. 또한, 편의점 내의 선택 및 구매 구역에 몇 개의 안면 인식 장치가 설치될 수 있다. 이들 장치들은 안면 특징을 검출할 수 있을 뿐만 아니라, 매장 내의 소비자들의 위치 정보를 획득하기 위해 사람들의 위치를 또한 파악할 수 있다.
단계 403에서, 쇼핑 관리 시스템은 위치 정보를 기초로, 상품과 사용자가 편의점의 출구 구역에 있는지를 결정할 수 있다.
단계 404에서, 쇼핑 관리 시스템은 출구 구역에 설치된 안면 인식 장치(210)를 이용하여 사용자에 대한 인체 제스처 인식을 수행하여 사용자의 제스처 데이터를 획득할 수 있고, 출구 구역에서 판독기(208)를 사용하여 상품 라벨을 위치 파악하여 상품의 위치 정보를 획득할 수 있다. 인체 제스처를 인식하기 위해 예를 들면, 어떤 사람이 손을 가슴 앞으로 가져가는지 아니면 손을 늘어뜨리는지, 아니면 그 사람이 팔을 꽉 죄는지를 인식하기 위해 입력 비디오가 분석될 수 있다. 사용자의 제스처 데이터는 인체의 모든 부분들 사이의 위치 관계와 동등하다.
이 예에서, 사용자의 제스처가 상품을 집는 것인지는 제스처 데이터와 위치 정보를 기초로 결정될 수 있다. 예를 들어, 위치 파악 라벨의 위치 정보에 대응하는 사용자 부분의 제스처를 사용하여 상품을 집을 수 있는지는 제스처 데이터를 기초로 결정될 수 있다. 위치 파악 라벨의 위치에 대응하는 사용자 부분이 사용자의 가슴이라 가정하면, 그럼에도 사용자의 제스처 데이터가 가슴 앞에는 아무것도 없다는 것을 보여주고, 사용자가 손을 늘어뜨리고 있으면, 상품은 사용자에 의해 들려져 있지 않다. 반대의 예에서, 위치 파악 라벨의 위치에 대응하는 사용자 부분이 사용자의 측면 허벅지 부분이라 가정하고, 제스처 데이터를 기초로 사용자가 손을 늘어뜨리고 있고 사용자의 손이 또한 이 영역에 있는 것으로 결정되면, 사용자가 상품을 손으로 들고 있다고 결정할 수 있다.
단계 405에서, 결정 결과가 사용자가 상품을 취하는(take) 것인 경우에는 상품의 상품 정보가 사용자의 주문에 추가될 수 있다. 또한, 출구 구역에서 안면 인식 장치는 안면 인식 데이터를 재차 획득하고, 이 데이터에 대응하는 회원 ID를 획득하며, 상품을 그 회원 ID에 대응하는 주문에 추가한다. 안면 인식을 통해 그 대응하는 회원 ID를 획득할 수 없으면, 회원 ID를 입력하기 위해 다른 방법이 시도될 수 있는데, 예를 들면 2차원 코드 또는 NFC를 통해 회원 ID가 입력될 수 있다. 상품 검출에 있어서, 편의점에 속하지 않는 상품 라벨은 제외될 수 있다.
본 발명에서 주문 정보 결정 시에는, 사용자의 제스처 데이터가 인식되고 상품이 위치 파악되며, 그리고 나서 그 상품이 속하는 주문이 제스처와 상품 사이의 위치 관계를 이용하여 결정된다. 이 방법은 주문을 결정하는 데 있어서 더 정확하다. 예를 들면, 많은 사람들이 동시에 하나의 진열대 상의 상품들을 취하는 경우에도, 상품과 사용자 제스처 사이에는 여전히 위치 관계가 결정되어야 하며, 상품이 상품을 취하는 제스처를 만족할 때에만 주문이 결정된다. 다른 예를 들면, 사용자가 유사성이 높은 상품들을 잘못된 곳에 놓는 경우에도, 최종적인 상품과 사용자 제스처의 결정에는 영향이 없다. 이 방법은 많은 오도 요인(misleading factors)의 영향이 없는 상품이 속하는 주문을 결정함에 있어서 보다 더 정확할 수 있다.
상품의 주문 소유권(ownership)은 사용자가 편의점으로 들어가고 난 이후에 언제든지 상품과 카트 사이의 거리를 기초로 결정될 수 있다. 어떤 경우에는, 회원 ID 및 결합된 안면 인식 데이터가 입구 구역에서 획득되고 난 후에, 저장 구역에서 상품 선택 및 구매 중에는 인식이 행해지지 않는다. 대신에, 사용자 제스처와 상품 사이의 위치 관계가 출구 구역에서 인식될 수 있으며, 그래서 상품이 속하는 주문을 결정할 수 있다.
또한, 상품을 사용자의 주문에 추가할 때, 쇼핑 관리 시스템이 데이터베이스(305)의 주문 정보 데이터를 업데이트할 수 있는데, 즉, 사용자의 주문 내의 선택 및 구매된 상품들이 업데이트된다. 또한, 쇼핑 관리 시스템은 주문 정보를 사용자의 스마트폰에도 또한 전송할 수 있다. 도 3에 도시된 바와 같이, 사용자의 스마트폰에 설치된 클라이언트 소프트웨어는 카트 정보 인터페이스를 가질 수 있는데, 카트 정보 인터페이스는 상품 주문 정보의 목록을 디스플레이할 수 있다. 사용자는 다음의 "귀하는 다음의 상품들을 선택 및 구매하셨습니다: 바나나와 사과"라는 정보를 볼 수 있으며, 그래서 사용자는 언제라도 주문의 변경 사항을 알 수 있다. 카트 정보 인터페이스는 사용자가 선택 및 구매한 상품들의 수량을 또한 디스플레이할 수 있거나, 상품들의 생산지와 같은 더 많은 다른 상품 정보를 또한 디스플레이할 수 있다. 본 발명에서는 주문 정보를 결정하는데 일조하는 보조적인 결정 기술(determination technologies)의 사용을 배제하지 않는데, 예를 들면 복수의 센서들이 보조로 사용될 수 있다.
주문 정보가 결정되고 난 후에, 쇼핑 관리 시스템은 주문을 기초로 결제 대상 청구서를 생성할 수 있고, 이 결제 대상 청구서를 사용자에게 전달할 수 있다. 사용자는 그 회원 ID에 대응하는 자금 계정(fund account)에서 청구서를 결제할 수 있다. 사용자의 자금 계정은 충분한 잔고가 있어야 하며, 또는 주문을 결제하는데 사용될 수 있는 충분한 잔고를 갖는 다른 결제 채널(payment channel)에 연결될 수 있다. 그렇지 않으면, 사용자는 결제 능력을 넘어서는 상품을 갖고 나가는 것이 제한되거나, 또는 경고를 발하도록 경고 장치가 트리거될 수 있다.
본 발명의 예에서는, RFID 라벨이 상품에 부착되며, 상품은 RFID 라벨을 사용하여 위치 파악된다. 구체적인 실시예에서는, 이에 국한되지 않으며, 상품은 다른 위치 파악 방법으로 위치 파악될 수도 있다. 다른 위치 파악 라벨이 상품에 부착될 수도 있고, 다른 대응하는 위치 파악 기술을 사용하여 상품이 위치 파악될 수도 있다.
본 발명의 방법에 따르면, 소비자의 주문 정보가 신속하고 정확하게 결정될 수 있고, 주문의 결제가 자동으로 완료된다. 쇼핑을 완료한 후에, 소비자는 결제를 위해 계산대에 줄을 서서 기다릴 필요없이 바로 나갈 수 있으며, 그에 따라 쇼핑 효율을 향상시키고 상당히 좋은 쇼핑 경험을 제공하게 된다.
본 발명은 주문 정보 결정 장치를 또한 제시한다. 이 장치는 도 3의 쇼핑 관리 모듈일 수도 있고, 또는 도 1의 쇼핑 관리 시스템일 수도 있다. 도 5에 도시된 바와 같이, 본 장치는 제스처 인식 모듈(51)과, 상품 위치 파악 모듈(52), 정보 처리 모듈(53), 및 주문 처리 모듈(54)을 포함할 수 있다.
제스처 인식 모듈(51)은 사용자의 제스처 데이터를 획득하기 위해 사용자에 대해 인체 제스처 인식을 수행하도록 구성된다.
상품 위치 파악 모듈(52)은 상품의 위치 정보를 획득하기 위해 상품의 위치를 파악하도록 구성된다.
정보 처리 모듈(53)은 제스처 데이터와 위치 정보를 기초로 사용자의 제스처가 상품을 취하는 것인지를 결정하도록 구성된다.
주문 처리 모듈(54)은 결정 결과가 사용자가 상품을 취하는 것인 경우에 상품을 사용자의 주문에 추가하도록 구성된다.
일례에서, 정보 처리 모듈(53)은, 위치 파악 라벨의 위치 정보를 획득하기 위하여, 위치 파악 라벨이 전송한 라벨 신호 - 이 라벨 신호는 상품의 상품 정보를 포함함 - 를 기초로 상품상의 위치 파악 라벨의 위치를 파악하는 것과; 사용자의 제스처 데이터를 기초로, 위치 파악 라벨의 위치 정보에 대응하는 사용자 부분의 제스처를 사용하여 상품이 취해질 수 있는지를 결정하는 것을 행하도록 구성된다.
일례에서, 위치 파악 라벨은 무선 주파수 식별 RFID 라벨이다.
일례에서, 정보 처리 모듈(53)은, 위치 파악을 통해 획득된 사용자와 상품의 위치 정보를 기초로 사용자와 상품이 출구 구역에 있다고 결정될 때, 사용자의 제스처가 상품을 취하는 것인지를 결정하도록 구성된다.
일례에서, 주문 처리 모듈(54)은 또한, 입구 구역에서, 상품을 선택 및 구매하는 사용자의 안면 인식 데이터 - 이 안면 인식 데이터는 사용자의 사용자 식별자에 대응함 - 를 획득하는 것과; 상품과 사용자가 출구 구역에 있다고 결정되었을 때 안면 인식 데이터에 대응하는 사용자 식별자 - 이 사용자 식별자에 대응하는 사용자의 주문이 상기 주문이 됨 - 를 획득하기 위해 안면 인식 데이터를 재차 획득하는 것을 행하도록 구성된다.
전술한 실시예에 기술된 장치 또는 모듈은 컴퓨터 칩 또는 엔티티에 의해 구현될 수 있거나, 또는 특정 기능을 갖는 제품에 의해 구현될 수 있다. 전형적인 구현 장치는 컴퓨터이다. 컴퓨터의 구체적인 형태로는 PC, 랩탑 컴퓨터, 휴대전화, 카메라폰, 스마트폰, PDA(personal digital assistant), 미디어 플레이어, 내비게이션 장치, 이메일 트랜시버(transceiver) 장치, 게임 콘솔, 태블릿 컴퓨터, 웨어러블(wearable) 디바이스, 또는 이들 장치들의 임의의 몇몇 장치의 조합이 있을 수 있다.
기재의 편의를 위해, 전술한 장치는 기능들을 다양한 모듈들로 구분하여 기술되었다. 당연히, 본 개시가 구현될 때, 각 모듈의 기능들은 하나 이상의 소프트웨어 및/또는 하드웨어로 구현될 수 있다.
예를 들어, 본 출원의 이 실시예의 결제와 관련된 기술은 NFC(near field communication: 근거리 무선통신), WIFI, 3G/4G/5G, POS 카드 판독 기술, 2차원 코드 스캐닝 기술, 바코드 스캐닝 기술, 블루투스, 적외선, SMS(short message service), 및 MMS(multimedia message service)를 포함할 수 있다.
전술한 기재는 단지 본 발명의 실시예들일 뿐이며, 본 발명을 제한하기 위한 것이 아니다. 본 발명의 사상과 원리를 벗어남이 없이 이루어진 임의의 변경, 동등 대체, 또는 개선도 본 발명의 보호 범위 내에 있게 된다.

Claims (10)

  1. 사용자와 상기 사용자가 선택 및 구매한 상품 사이의 연관(association)을 결정하는데 사용되는, 주문 정보 결정 방법에 있어서,
    사용자의 제스처 데이터(gesture data)를 획득하기 위해 상기 사용자에 대해 인체 제스처 인식(human gesture recognition)을 수행하는 단계;
    상품의 위치 정보를 획득하기 위해 상기 상품을 위치 파악하는(positioning) 단계;
    상기 제스처 데이터 및 상기 위치 정보를 기초로 상기 사용자의 제스처가 상품을 취하는 것인지 여부를 결정하는 단계; 및
    결정 결과가 상기 사용자가 상기 상품을 취하는 것이라는 결정에 응답하여, 상기 상품을 상기 사용자의 주문에 추가하는 단계
    를 포함하는, 주문 정보 결정 방법.
  2. 제1항에 있어서,
    상기 제스처 데이터 및 상기 위치 정보를 기초로 상기 사용자의 제스처가 상품을 취하는 것인지 여부를 결정하는 단계; 및
    위치 파악 라벨(positioning label)의 위치 정보를 획득하기 위해, 상기 위치 파악 라벨에 의해 전송되는 라벨 신호 - 상기 라벨 신호는 상기 상품의 상품 정보를 포함함 - 를 기초로 상기 상품에 대한 위치 파악 라벨의 위치를 파악하는 단계; 및
    상기 사용자의 제스처 데이터를 기초로, 상기 위치 파악 라벨의 위치 정보에 대응하는 사용자 부분(user part)의 제스처를 사용함으로써 상기 상품이 취해질 수 있는지 여부를 결정하는 단계
    를 포함하는 것인, 주문 정보 결정 방법.
  3. 제2항에 있어서,
    상기 위치 파악 라벨은 무선 주파수 식별 RFID 라벨인 것인, 주문 정보 결정 방법.
  4. 제1항에 있어서,
    상기 제스처 데이터 및 상기 위치 정보를 기초로 상기 사용자의 제스처가 상품을 취하는 것인지 여부를 결정하는 단계; 및
    위치 파악을 통해 획득된 상기 상품 및 상기 사용자의 위치 정보를 기초로 상기 상품 및 상기 사용자가 출구 구역에 있다고 결정하는 것에 응답하여, 상기 사용자의 제스처가 상기 상품을 취하는 것인지 여부를 결정하는 단계인 것인, 주문 정보 결정 방법.
  5. 제4항에 있어서,
    입구 구역에서, 상기 상품을 선택 및 구매하는 상기 사용자의 안면 인식 데이터 - 상기 안면 인식 데이터는 상기 사용자의 사용자 식별자(user identifier)에 대응함 - 를 획득하는 단계; 및
    상기 상품 및 상기 사용자가 상기 출구 구역에 있다고 결정하는 것에 응답하여 상기 안면 인식 데이터에 대응하는 사용자 식별자 - 상기 주문은 상기 사용자 식별자에 대응하는 상기 사용자의 주문임 - 를 획득하기 위해 안면 인식 데이터를 재차 획득하는 단계
    를 더 포함하는, 주문 정보 결정 방법.
  6. 주문 정보 결정 장치에 있어서,
    사용자의 제스처 데이터를 획득하기 위해 상기 사용자에 대해 인체 제스처 인식(human gesture recognition)을 수행하도록 구성된 제스처 인식 모듈;
    상품의 위치 정보를 획득하기 위해 상기 상품을 위치 파악하도록 구성된 상품 위치 파악 모듈;
    상기 제스처 데이터 및 상기 위치 정보를 기초로 상기 사용자의 제스처가 상기 상품을 취하는 것인지 여부를 결정하도록 구성된 정보 처리 모듈; 및,
    결정 결과가 상기 사용자가 상기 상품을 취하는 것이라는 결정에 응답하여, 상기 상품을 상기 사용자의 주문에 추가하도록 구성된 주문 처리 모듈
    을 포함하는, 주문 정보 결정 장치.
  7. 제6항에 있어서,
    상기 정보 처리 모듈은,
    위치 파악 라벨의 위치 정보를 획득하기 위해, 상기 위치 파악 라벨에 의해 전송되는 라벨 신호 - 상기 라벨 신호는 상기 상품의 상품 정보를 포함함 - 를 기초로 상기 상품 상의 위치 파악 라벨의 위치를 파악하고;
    상기 사용자의 제스처 데이터를 기초로 상기 위치 파악 라벨의 위치 정보에 대응하는 사용자 부분의 제스처를 사용함으로써 상기 상품이 취해질 수 있는지 여부를 결정하도록 구성되는 것인, 주문 정보 결정 장치.
  8. 제7항에 있어서,
    상기 위치 파악 라벨은 무선 주파수 식별 RFID 라벨인 것인, 주문 정보 결정 장치.
  9. 제6항에 있어서,
    상기 정보 처리 모듈은, 위치 파악을 통해 획득된 상기 상품 및 상기 사용자의 위치 정보를 기초로 상기 상품 및 상기 사용자가 출구 구역에 있다고 결정하는 것에 응답하여, 상기 사용자의 제스처가 상기 상품을 취하는 것인지 여부를 결정하도록 구성되는 것인, 주문 정보 결정 장치.
  10. 제9항에 있어서,
    상기 주문 처리 모듈은,
    입구 구역에서, 상기 상품을 선택 및 구매하는 상기 사용자의 안면 인식 데이터 - 상기 안면 인식 데이터는 상기 사용자의 사용자 식별자에 대응함 - 를 획득하고;
    상기 상품 및 상기 사용자가 상기 출구 구역에 있다고 결정되었을 때 상기 안면 인식 데이터에 대응하는 사용자 식별자 - 상기 주문은 상기 사용자 식별자에 대응하는 상기 사용자의 주문임 - 를 획득하기 위해 안면 인식 데이터를 재차 획득하도록 구성되는 것인, 주문 정보 결정 장치.
KR1020197013121A 2017-03-07 2018-03-02 주문 정보 결정 방법 및 장치 KR102192884B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201710132344.1A CN107103503B (zh) 2017-03-07 2017-03-07 一种订单信息确定方法和装置
CN201710132344.1 2017-03-07
PCT/CN2018/077889 WO2018161857A1 (zh) 2017-03-07 2018-03-02 一种订单信息确定方法和装置

Publications (2)

Publication Number Publication Date
KR20190072562A true KR20190072562A (ko) 2019-06-25
KR102192884B1 KR102192884B1 (ko) 2020-12-22

Family

ID=59676141

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020197013121A KR102192884B1 (ko) 2017-03-07 2018-03-02 주문 정보 결정 방법 및 장치

Country Status (14)

Country Link
US (1) US20190272581A1 (ko)
EP (1) EP3525156B1 (ko)
JP (1) JP6869345B2 (ko)
KR (1) KR102192884B1 (ko)
CN (1) CN107103503B (ko)
AU (1) AU2018230074B2 (ko)
BR (1) BR112019009302A2 (ko)
CA (1) CA3043118A1 (ko)
MX (1) MX2019005347A (ko)
PH (1) PH12019501005A1 (ko)
RU (1) RU2727084C1 (ko)
TW (1) TWI681352B (ko)
WO (1) WO2018161857A1 (ko)
ZA (1) ZA201902866B (ko)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107103503B (zh) * 2017-03-07 2020-05-12 阿里巴巴集团控股有限公司 一种订单信息确定方法和装置
US10922691B2 (en) 2017-07-28 2021-02-16 Alclear, Llc Biometric pre-identification
CN107705469B (zh) 2017-09-29 2020-08-21 阿里巴巴集团控股有限公司 就餐结算方法、智能点餐设备以及智能餐厅支付系统
CN109697610A (zh) * 2017-10-23 2019-04-30 北京京东尚科信息技术有限公司 订单操作方法和装置
JP6395918B1 (ja) 2017-11-01 2018-09-26 和則 藤沢 購入商品受渡しシステム
CN109872169A (zh) * 2017-12-01 2019-06-11 我查查信息技术(上海)有限公司 基于生物识别优化销售的方法
CN108198030A (zh) * 2017-12-29 2018-06-22 深圳正品创想科技有限公司 一种手推车控制方法、装置及电子设备
CN108268134B (zh) * 2017-12-30 2021-06-15 广州正峰电子科技有限公司 拿放商品的手势识别装置及方法
CN108460933B (zh) * 2018-02-01 2019-03-05 王曼卿 一种基于图像处理的管理系统及方法
CN108510673B (zh) * 2018-03-28 2020-09-08 深圳正品创想科技有限公司 一种自动射频的快速结账方法、装置及电子设备
CN108564038A (zh) * 2018-04-16 2018-09-21 上海小蚁科技有限公司 顾客访问量的统计方法及装置、存储介质、终端
CN110516511A (zh) * 2018-05-21 2019-11-29 北京京东尚科信息技术有限公司 用于处理信息的方法和装置
CN108961547A (zh) * 2018-06-29 2018-12-07 深圳和而泰数据资源与云技术有限公司 一种商品识别方法、无人售货机及计算机可读存储介质
CN110677448A (zh) * 2018-07-03 2020-01-10 百度在线网络技术（北京）有限公司 关联信息推送方法、装置和系统
CN109146613A (zh) * 2018-07-23 2019-01-04 上海坤锐电子科技有限公司 商品位置的确定方法、装置、智能售货机和存储介质
CN109344770B (zh) * 2018-09-30 2020-10-09 新华三大数据技术有限公司 资源分配方法及装置
CN109726759B (zh) * 2018-12-28 2021-08-17 北京旷视科技有限公司 无人售货方法、装置、系统、电子设备及计算机可读介质
CN109903124A (zh) * 2019-01-25 2019-06-18 广州富港万嘉智能科技有限公司 一种用户账号自动生成方法、系统、电子设备及存储介质
JPWO2020255795A1 (ko) * 2019-06-19 2020-12-24
TWI730387B (zh) 2019-08-28 2021-06-11 財團法人工業技術研究院 實體消費環境與網路消費環境之整合系統及其控制方法
CN112466035B (zh) * 2019-09-06 2022-08-12 图灵通诺（北京）科技有限公司 基于视觉和重力感应的商品识别方法、装置和系统
CN112700235A (zh) * 2019-10-22 2021-04-23 北京迈格威科技有限公司 线下支付用户的识别方法、装置和电子设备
JP7338706B2 (ja) * 2020-01-23 2023-09-05 日本電気株式会社 処理装置、処理方法及びプログラム
CN111401878B (zh) * 2020-03-16 2023-12-01 虫极科技（北京）有限公司 结账方法、结账系统及计算机可读存储介质
JP7468022B2 (ja) 2020-03-18 2024-04-16 日本電気株式会社 物品管理システム及び方法、並びに、ラベル照合装置、方法及びプログラム
CN111523481A (zh) * 2020-04-24 2020-08-11 无锡创思感知科技有限公司 一种应用于无人店的自动结算方法
JP6839324B1 (ja) * 2020-08-06 2021-03-03 株式会社キューブシステム 入力システム、入力プログラムおよび入力方法
WO2022260550A1 (ru) * 2021-06-07 2022-12-15 Ритеил Текнолоджис & Инновэйшен Б.В. Система самообслуживания и способ предоставления услуг самообслуживания для пользователя обслуживаемой точки продаж

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140038071A (ko) * 2012-09-20 2014-03-28 동서대학교산학협력단 이동통신단말기를 이용한 쇼핑시스템
US20150039458A1 (en) * 2013-07-24 2015-02-05 Volitional Partners, Inc. Method and system for automated retail checkout using context recognition
JP2017033401A (ja) * 2015-08-04 2017-02-09 株式会社 ｉｍｐａｃｔＴＶ 顧客情報収集装置、顧客情報収集システムおよび顧客情報収集方法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020170961A1 (en) * 2001-05-17 2002-11-21 Bruce Dickson Method and system for providing shopping assistance using RFID-tagged items
JP5082183B2 (ja) * 2004-05-19 2012-11-28 大日本印刷株式会社 商品移動状況モニタリングシステム
US7739157B2 (en) * 2008-01-15 2010-06-15 Sunrise R&D Holdings, Llc Method of tracking the real time location of shoppers, associates, managers and vendors through a communication multi-network within a store
EP2255306A4 (en) * 2008-03-21 2015-07-08 Sunrise R & D Holdings Llc ACQUIRING REAL REAL TIME BUYER BEHAVIOR DURING SELECTION OF BUYER 'S PRODUCTS
CN102376061B (zh) * 2011-08-26 2015-04-22 浙江工业大学 基于全方位视觉的消费者购买行为分析装置
KR101871714B1 (ko) * 2012-04-02 2018-06-27 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9892438B1 (en) * 2012-05-03 2018-02-13 Stoplift, Inc. Notification system and methods for use in retail environments
TWI496096B (zh) * 2012-05-31 2015-08-11 Toshiba Global Commerce Solutions Holdings Corp 在一物品區域中管理複數物品的系統、方法、與儲放單元
KR20140071605A (ko) * 2012-12-04 2014-06-12 삼성전자주식회사 데이터 처리 방법, 센서 장치 및 사용자 단말
CN105518734A (zh) * 2013-09-06 2016-04-20 日本电气株式会社 顾客行为分析系统、顾客行为分析方法、非暂时性计算机可读介质和货架系统
JP6354233B2 (ja) * 2014-03-19 2018-07-11 日本電気株式会社 販売促進装置、情報処理装置、情報処理システム、販売促進方法及びプログラム
TW201612824A (en) * 2014-09-17 2016-04-01 Shau-Liang Chen Marketplace goods service and management system and method thereof
CN104766225B (zh) * 2015-04-14 2018-07-13 孙晞红 一种可识别卖场非正常购物行为的自助购物装置及方法
CN105913559B (zh) * 2016-04-06 2019-03-05 南京华捷艾米软件科技有限公司 一种基于体感技术的银行atm机智能监控方法
CN106203547B (zh) * 2016-06-27 2019-10-01 成都博晟创信科技有限公司 一种购物车、购物方法和装置
CN106204226A (zh) * 2016-07-14 2016-12-07 广州极汇信息科技有限公司 自助结账智能购物方法及其装置
CN107103503B (zh) * 2017-03-07 2020-05-12 阿里巴巴集团控股有限公司 一种订单信息确定方法和装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140038071A (ko) * 2012-09-20 2014-03-28 동서대학교산학협력단 이동통신단말기를 이용한 쇼핑시스템
US20150039458A1 (en) * 2013-07-24 2015-02-05 Volitional Partners, Inc. Method and system for automated retail checkout using context recognition
JP2017033401A (ja) * 2015-08-04 2017-02-09 株式会社 ｉｍｐａｃｔＴＶ 顧客情報収集装置、顧客情報収集システムおよび顧客情報収集方法

Also Published As

Publication number Publication date
EP3525156A1 (en) 2019-08-14
AU2018230074A1 (en) 2019-05-30
ZA201902866B (en) 2021-06-30
US20190272581A1 (en) 2019-09-05
EP3525156A4 (en) 2019-11-13
CN107103503B (zh) 2020-05-12
CN107103503A (zh) 2017-08-29
WO2018161857A1 (zh) 2018-09-13
AU2018230074B2 (en) 2021-03-11
TWI681352B (zh) 2020-01-01
MX2019005347A (es) 2019-08-05
BR112019009302A2 (pt) 2019-07-30
CA3043118A1 (en) 2018-09-13
JP6869345B2 (ja) 2021-05-12
KR102192884B1 (ko) 2020-12-22
JP2020504359A (ja) 2020-02-06
PH12019501005A1 (en) 2019-12-02
TW201833844A (zh) 2018-09-16
RU2727084C1 (ru) 2020-07-17
EP3525156B1 (en) 2021-12-29

Similar Documents

Publication Publication Date Title
KR102192884B1 (ko) 주문 정보 결정 방법 및 장치
CN107103502B (zh) 一种订单信息确定方法和装置
CN108780596B (zh) 信息处理系统
US10290031B2 (en) Method and system for automated retail checkout using context recognition
US9262739B2 (en) Method, medium, and system for session based shopping
US20150363798A1 (en) Method, computer system and computer program for estimating purchase behavior of customer in store or across stores
WO2019007416A1 (zh) 一种线下导购方法和装置
RU2739542C1 (ru) Система автоматической регистрации для торговой точки
US10169787B2 (en) Method, medium, and system for session based shopping
JP6412577B2 (ja) プレゼンテーション装置（ｉｃｓ接続）
JP2023509844A (ja) カスタマイズされた小売環境
Subudhi et al. An intelligent shopping cart with automatic product detection and secure payment system
CN108171286B (zh) 无人售货方法及其系统
WO2019225260A1 (ja) 情報処理装置、制御方法、及びプログラム
US20140172641A1 (en) SYSTEMS AND METHODS FOR IDENTIFICATION AND/OR ACQUISITION OF A PRODUCT(s) OR ITEM(s)
JP7134273B2 (ja) 商品情報連携システム
US20220270061A1 (en) System and method for indicating payment method availability on a smart shopping bin
US20240054449A1 (en) Cart-based availability determination for an online concierge system
KR20160106853A (ko) 쇼핑과 계산의 편의성을 제공하는 모바일 카트시스템

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
N231 Notification of change of applicant
GRNT Written decision to grant