KR102334095B1 - Payment method and payment system using user terminal - Google Patents

Payment method and payment system using user terminal Download PDF

Info

Publication number
KR102334095B1
KR102334095B1 KR1020210047635A KR20210047635A KR102334095B1 KR 102334095 B1 KR102334095 B1 KR 102334095B1 KR 1020210047635 A KR1020210047635 A KR 1020210047635A KR 20210047635 A KR20210047635 A KR 20210047635A KR 102334095 B1 KR102334095 B1 KR 102334095B1
Authority
KR
South Korea
Prior art keywords
product
user terminal
payment
user
terminal
Prior art date
Application number
KR1020210047635A
Other languages
Korean (ko)
Inventor
이선관
Original Assignee
주식회사 고스트패스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 고스트패스 filed Critical 주식회사 고스트패스
Priority to KR1020210047635A priority Critical patent/KR102334095B1/en
Application granted granted Critical
Publication of KR102334095B1 publication Critical patent/KR102334095B1/en
Priority to EP22788426.9A priority patent/EP4325410A1/en
Priority to PCT/KR2022/005330 priority patent/WO2022220570A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4014—Identity check for transactions
    • G06Q20/40145—Biometric identity checks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06018—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding
    • G06K19/06028—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking one-dimensional coding using bar codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K19/00—Record carriers for use with machines and with at least a part designed to carry digital markings
    • G06K19/06—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code
    • G06K19/06009—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking
    • G06K19/06037—Record carriers for use with machines and with at least a part designed to carry digital markings characterised by the kind of the digital marking, e.g. shape, nature, code with optically detectable marking multi-dimensional coding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10009—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves
    • G06K7/10237—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves the reader and the record carrier being capable of selectively switching between reader and record carrier appearance, e.g. in near field communication [NFC] devices where the NFC device may function as an RFID reader or as an RFID tag
    • G06K9/6262—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/327—Short range or proximity payments by means of M-devices
    • G06Q20/3274—Short range or proximity payments by means of M-devices using a pictured code, e.g. barcode or QR-code, being displayed on the M-device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/327—Short range or proximity payments by means of M-devices
    • G06Q20/3276—Short range or proximity payments by means of M-devices using a pictured code, e.g. barcode or QR-code, being read by the M-device

Abstract

Suggested are a payment method using a user terminal and a payment system thereof. According to one embodiment of the present invention, the method for the payment system to perform payment using a user terminal includes: a step in which a user terminal recognizes a product to be purchased; a step in which a purchaser terminal having recognized biometric information of a user transmits the biometric information of the user to the user terminal; a step in which the user terminal performs user authentication through the confirmation of whether the biometric information of the user received from the purchaser terminal is matched with pre-stored biometric information on the user terminal; and a step in which when the user authentication on the user terminal is successful, the user terminal performs payment for the product recognized through the user terminal. Therefore, the present invention is capable of improving convenience in payment procedures.

Description

사용자 단말기를 이용한 결제 방법 및 결제 시스템{PAYMENT METHOD AND PAYMENT SYSTEM USING USER TERMINAL}Payment method and payment system using user terminal {PAYMENT METHOD AND PAYMENT SYSTEM USING USER TERMINAL}

본 발명의 다양한 실시예는 사용자 단말기를 이용하여 오프라인 상에서 물건 또는 서비스에 대한 결제를 생체 정보 인식 기반 기술을 활용하여 수행하는 기술에 대한 것이다.Various embodiments of the present invention relate to a technology for performing an offline payment for a product or service using a biometric information recognition-based technology using a user terminal.

기술이 발전하면서 물건을 구매할 때의 결제 방식도 점차 다양화되고 있다. 특히, 거의 모든 사람들이 항상 소지하고 있는 스마트폰을 통해 결제를 수행하는 방법이 많이 개발되고 있다. As technology advances, payment methods for purchasing goods are also increasingly diversified. In particular, a lot of methods for performing payment through a smartphone that almost everyone has at all times are being developed.

그에 따라 현재는 스마트폰에서 생성되는 일회용 바코드 또는 QR 코드 등을 활용하여 결제를 수행할 수 있으며, 사용자가 스마트폰을 통해 안면 이미지, 홍체, 지문과 같은 생체 정보를 인증하고 그에 따라 결제를 수행할 수도 있다.Accordingly, payment can be made using disposable barcodes or QR codes generated by smartphones. may be

다만, 사용자가 구매하고자 하는 상품에 대한 인식은 일반적으로 물건에 표시되어 있는 바코드를 상점의 바코드 인식기로 인식하거나, 상점의 직원이 물건을 인식하여 포스 머신 등에 입력하는 방식으로 진행되어 왔다.However, the recognition of the product that the user wants to purchase has generally been carried out by recognizing a barcode displayed on the product with a barcode reader of a store, or a store employee recognizing the product and inputting it to a POS machine or the like.

따라서, 구매자가 상품을 다수 사는 경우에 이를 결제하기 위해서는 상품들을 인식하는 시간이 소요되었으며, 그에 따라 특정 상점에 손님이 많은 경우 결제를 수행하는 장소에서 정체가 발생하기도 하였다.Therefore, when a buyer purchases a large number of products, it takes time to recognize the products in order to pay for them, and accordingly, when there are many customers in a specific store, congestion may occur at the place where payment is performed.

이에 따라, 보다 편리하고 신속한 방식으로 구매 상품들을 결제할 수 있는 새로운 시스템이 필요한 실정이었다.Accordingly, there was a need for a new system capable of paying for purchased products in a more convenient and quick manner.

한국공개특허 제10-2021-0010598호Korean Patent Publication No. 10-2021-0010598

본 발명의 다양한 실시예는 오프라인에서 물건을 선택하여 구매할 때에 선택한 물건에 대한 인식 및 결제가 자동으로 이루어지는 시스템을 구축하는 것에 목적이 있다.Various embodiments of the present invention have an object to establish a system in which recognition and payment for the selected product are automatically performed when selecting and purchasing a product offline.

본 발명이 해결하고자 하는 과제들은 이상에서 언급된 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.The problems to be solved by the present invention are not limited to the problems mentioned above, and other problems not mentioned will be clearly understood by those skilled in the art from the following description.

상술한 과제를 해결하기 위한 본 발명의 다양한 실시예 중 하나에 따르면, 결제 시스템이 사용자 단말기를 활용한 결제를 수행하는 방법에 있어서, 상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계; 사용자의 생체 정보를 인식한 판매자 단말기가 상기 사용자 단말기로 상기 사용자의 생체 정보를 전송하는 단계; 상기 사용자 단말기가 상기 판매자 단말기로부터 수신한 상기 사용자의 생체 정보와 상기 사용자 단말기 상에 미리 저장된 생체 정보의 일치 여부를 통해 본인 인증을 수행하는 단계; 및 상기 사용자 단말기 상에서 본인 인증이 성공적으로 수행된 경우, 상기 사용자 단말기가 상기 사용자 단말기를 통해 인식된 상품에 대한 결제를 수행하는 단계를 포함하는, 결제 시스템의 결제 수행 방법이 개시될 수 있다.According to one of the various embodiments of the present invention for solving the above problems, there is provided a method for a payment system to perform a payment using a user terminal, the method comprising: recognizing, by the user terminal, a product to be purchased; transmitting, by the seller terminal recognizing the user's biometric information, the user's biometric information to the user terminal; performing, by the user terminal, identity authentication through whether the biometric information of the user received from the seller terminal matches the biometric information stored in advance on the user terminal; and performing, by the user terminal, payment for a product recognized through the user terminal when the user authentication is successfully performed on the user terminal, a method of performing a payment in a payment system may be disclosed.

상기 생체 정보는 지문 정보, 홍채 정보, 안면 이미지 정보, 정맥 정보, 심전도 정보 또는 음성 정보 중 어느 하나 이상을 포함할 수 있다.The biometric information may include any one or more of fingerprint information, iris information, facial image information, vein information, electrocardiogram information, and voice information.

상기 판매자 단말기는, 상기 판매자 단말기와 연결된 게이트를 통과하는 상기 사용자 단말기를 인식하여 상기 사용자 단말기에 결제 요청 신호를 전송하며, 상기 사용자 단말기는, 상기 판매자 단말기로부터 수신한 결제 요청 신호에 기반하여 상품에 대한 결제를 수행할 수 있다.The seller terminal recognizes the user terminal passing through a gate connected to the seller terminal and transmits a payment request signal to the user terminal, and the user terminal sends a payment request signal to the product based on the payment request signal received from the seller terminal. You can make payments for

상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계는, 상기 사용자 단말기에 탑재된 이미지 촬영부에 의해 상품의 외형 이미지가 수집되면, 상기 사용자 단말기가 수집된 상품의 외형 이미지를 분석하여 상품의 종류 및 수량을 특정하는 것일 수 있다.In the step of recognizing the product to be purchased by the user terminal, when the external image of the product is collected by the image capturing unit mounted on the user terminal, the user terminal analyzes the external image of the collected product to determine the type of product and specifying the quantity.

상기 사용자 단말기가 수집된 상품의 외형 이미지를 분석하여 상품의 종류 및 수량을 특정하는 단계는, 상기 사용자 단말기에 탑재된 인공지능 엔진에 의해 수행되는 것을 특징으로 하며, 상기 인공지능 엔진은 상품의 외형 이미지를 통해 학습을 수행하는 것일 수 있다.The step of specifying the type and quantity of the product by analyzing the external image of the collected product by the user terminal is performed by an artificial intelligence engine mounted in the user terminal, wherein the artificial intelligence engine includes the appearance of the product. It may be to perform learning through images.

상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계는, 상기 사용자 단말기가 상품에 포함된 전자 태그를 통해 상품의 정보를 획득하는 것일 수 있다.The step of the user terminal recognizing the product to be purchased may include obtaining, by the user terminal, information on the product through an electronic tag included in the product.

상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계는, 기 정해진 상품 보관 수단 내에 위치한 상품만을 인식하는 것을 특징으로 할 수 있다. 또한, 상기 상품 보관 수단은 카트, 바구니 또는 가방으로 구성될 수 있다.The step of the user terminal recognizing the product to be purchased may include recognizing only the product located in a predetermined product storage means. In addition, the product storage means may be configured as a cart, basket or bag.

상기 사용자 단말기는, 구매 대상이 되는 상품으로 인식된 하나 이상의 상품의 가격 총합에 대한 정보를 디스플레이 장치 또는 사운드 생성 장치를 통해 제공하는 것을 특징으로 할 수 있다.The user terminal may provide information on the total price of one or more products recognized as purchase target products through a display device or a sound generating device.

상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계는, 상기 사용자 단말기에 탑재된 이미지 촬영부에 의해 바코드 또는 QR코드가 인식되면, 상기 사용자 단말기가 수집된 바코드 또는 QR코드에 대응되는 상품의 종류를 특정하는 것일 수 있다.In the step of recognizing a product to be purchased by the user terminal, when a barcode or QR code is recognized by the image capturing unit mounted on the user terminal, the type of product corresponding to the barcode or QR code collected by the user terminal may be to specify

상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계는, 상기 사용자 단말기에 탑재된 이미지 촬영부에 의해 바코드 또는 QR 코드가 인식된 상품은 바코드 또는 QR코드를 통해 상품의 종류를 특정하고, 수집된 이미지 상에서 바코드 또는 QR코드가 인식되지 않는 상품은 상품의 외형 이미지 분석을 통해 상품의 종류를 특정하는 것일 수 있다.In the step of recognizing the product to be purchased by the user terminal, the product for which the barcode or QR code is recognized by the image capturing unit mounted on the user terminal specifies the type of product through the barcode or QR code, For a product whose barcode or QR code is not recognized on the image, the type of product may be specified by analyzing the external image of the product.

상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계는, 상기 판매자 단말기와 연결된 상품 인식 기기로부터 상품 인식 정보를 수신하는 방식인 것을 특징으로 할 수 있다.The step of recognizing, by the user terminal, a product to be purchased may be characterized in that the product recognition information is received from a product recognition device connected to the seller terminal.

상기 사용자 단말기와 상기 판매자 단말기 간의 통신은, UWB(Ultra wideband), NFC(Near Field Communication), 블루투스(Bluetooth), 초음파, MAT 또는 비콘 중 적어도 어느 하나의 방식을 활용하여 수행될 수 있다.Communication between the user terminal and the seller terminal may be performed using at least one method of ultra wideband (UWB), near field communication (NFC), Bluetooth, ultrasound, MAT, or beacon.

상기 사용자 단말기가 상기 사용자 단말기를 통해 인식된 상품에 대한 결제를 수행하는 단계는, 상기 사용자 단말기가, 구매 대상으로 인식된 적어도 하나 이상의 상품들에 대한 정보와 결제 수단 정보를 포함하는 QR코드 또는 바코드를 생성하는 단계; 및 상기 QR코드 또는 바코드를 인식한 상기 판매자 단말기가, 상기 QR코드 또는 바코드에 포함된 상품 정보 및 결제 수단 정보를 기초로 결제를 수행하는 단계를 더 포함할 수 있다.In the user terminal performing payment for the product recognized through the user terminal, the user terminal includes a QR code or barcode including information on at least one product recognized as a purchase target and payment method information. creating a; and performing, by the merchant terminal recognizing the QR code or barcode, payment based on product information and payment method information included in the QR code or barcode.

상술한 과제를 해결하기 위한 본 발명의 다양한 실시예 중 다른 하나에 따르면, 결제 시스템이 사용자 단말기를 활용한 결제를 수행하는 방법은, 상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계; 상기 사용자 단말기가 사용자의 생체 정보를 인식하는 단계; 상기 사용자 단말기가 상기 인식된 생체 정보와 상기 사용자 단말기 상에 미리 저장된 생체 정보의 일치 여부를 통해 본인 인증을 수행하는 단계; 및 상기 사용자 단말기 상에서 본인 인증이 성공적으로 수행된 경우, 상기 사용자 단말기가 상기 사용자 단말기를 통해 인식된 상품에 대한 결제를 수행하는 단계를 포함하여 구성될 수 있다.According to another one of various embodiments of the present invention for solving the above problems, a method for a payment system to perform a payment using a user terminal includes: recognizing, by the user terminal, a product to be purchased; recognizing, by the user terminal, the user's biometric information; performing, by the user terminal, identity authentication through whether the recognized biometric information and biometric information stored in advance on the user terminal match; and performing, by the user terminal, payment for a product recognized through the user terminal when the user authentication is successfully performed on the user terminal.

상술한 과제를 해결하기 위한 본 발명의 다양한 실시예 중 다른 하나에 따르면, 사용자 단말기를 활용한 결제 시스템에 있어서, 사용자의 생체 정보를 인식하여 사용자 단말기로 상기 사용자의 생체 정보를 전송하는 판매자 단말기; 및 구매 대상이 되는 상품을 인식하고, 상기 판매자 단말기로부터 수신한 상기 사용자의 생체 정보와 미리 내부에 저장된 생체 정보의 일치 여부를 통해 본인 인증을 수행하며, 본인 인증이 성공적으로 수행된 경우 인식된 상품에 대한 결제를 수행하는 구매자 단말기를 포함하는, 결제 시스템이 개시될 수 있다.According to another one of various embodiments of the present invention for solving the above problems, there is provided a payment system using a user terminal, comprising: a seller terminal for recognizing a user's biometric information and transmitting the user's biometric information to the user terminal; and the product to be purchased is recognized, the user's biometric information received from the seller terminal matches the user's biometric information stored in advance, and identity authentication is performed, and the product recognized when the identity authentication is successfully performed A payment system may be disclosed, including a purchaser terminal for performing payment.

본 발명의 실시예에 따르면, 소비자가 상점에서 구매 대상 물품을 선택하면 소비자의 단말기가 이를 자동으로 인식하고 소비자가 상점 밖으로 나가거나 특정 장소에 위치하면, 소비자의 생체 정보를 통한 본인 인증을 기반으로 결제가 자동으로 이루어지므로 소비자의 상품 선택 및 결제의 편의성이 증대될 수 있다.According to an embodiment of the present invention, when a consumer selects an item to be purchased in a store, the consumer's terminal automatically recognizes it, and when the consumer goes out of the store or is located in a specific place, based on identity authentication through the consumer's biometric information Since the payment is made automatically, the convenience of the consumer's product selection and payment can be increased.

본 발명의 효과들은 이상에서 언급된 효과로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.Effects of the present invention are not limited to the effects mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the following description.

도 1은 본 발명의 일 실시예에 따른 결제 시스템이 동작하는 전체 환경에 대한 개략도이다.
도 2는 본 발명의 일 실시예에 따른 사용자 단말기의 구성을 개략적으로 나타낸 블록도이다.
도 3은 본 발명의 일 실시예에 따른 사용자 단말기가 본 발명의 결제 시스템을 활용하여 상품을 인식하고 결제하는 방식을 설명한 도면이다.
도 4은 본 발명의 다른 실시예에 따른 사용자 단말기가 본 발명의 결제 시스템을 활용하여 상품을 인식하고 결제하는 방식을 설명한 도면이다.1 is a schematic diagram of an overall environment in which a payment system according to an embodiment of the present invention operates.
2 is a block diagram schematically showing the configuration of a user terminal according to an embodiment of the present invention.
3 is a diagram illustrating a method in which a user terminal according to an embodiment of the present invention recognizes and pays for a product by using the payment system of the present invention.
4 is a diagram illustrating a method in which a user terminal recognizes and pays for a product by using the payment system of the present invention according to another embodiment of the present invention.

본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.The terminology used herein is for the purpose of describing the embodiments and is not intended to limit the present invention. As used herein, the singular also includes the plural unless specifically stated otherwise in the phrase. As used herein, “comprises” and/or “comprising” does not exclude the presence or addition of one or more other components in addition to the stated components. Like reference numerals refer to like elements throughout, and "and/or" includes each and every combination of one or more of the recited elements. Although "first", "second", etc. are used to describe various elements, these elements are not limited by these terms, of course. These terms are only used to distinguish one component from another. Accordingly, it goes without saying that the first component mentioned below may be the second component within the spirit of the present invention.

명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.When a part "includes" a certain element throughout the specification, this means that other elements may be further included, rather than excluding other elements, unless otherwise stated. In addition, terms such as "...unit" and "module" described in the specification mean a unit that processes at least one function or operation, which may be implemented as hardware or software, or a combination of hardware and software. .

본 명세서 상에서, '사용자'는 본 발명의 결제 시스템을 활용하여 특정 상품을 구매하는 주체를 의미할 수 있으며, '판매자'는 본 발명의 결제 시스템을 활용하여 특정 상품을 판매하는 주체를 의미할 수 있다.In this specification, a 'user' may mean a subject who purchases a specific product using the payment system of the present invention, and a 'seller' may mean a subject who sells a specific product using the payment system of the present invention. have.

이하, 첨부된 도면들을 참조하여 본 발명의 다양한 실시예들을 설명하기로 한다.Hereinafter, various embodiments of the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 결제 시스템(10)이 동작하는 전체 환경에 대한 개략도이다.1 is a schematic diagram of an overall environment in which a payment system 10 according to an embodiment of the present invention operates.

도 1을 참조하면, 결제 시스템(10)은 사용자 단말기(100), 판매자 단말기(200), 상품 인식 기기(300), 관리 서버(400) 및 외부 서버(500)를 포함하는 형태로 구성될 수 있다.Referring to FIG. 1 , the payment system 10 may be configured in a form including a user terminal 100 , a seller terminal 200 , a product recognition device 300 , a management server 400 , and an external server 500 . have.

결제 시스템(10)은 오프라인 상에서 다양한 상품을 판매하는 장소에 설치되어 활용될 수 있다.The payment system 10 may be installed and utilized in places that sell various products offline.

사용자 단말기(100)는 사용자가 결제 시스템(10)을 이용하기 위해 사용하는 단말기로, 사용자 단말기(100)는 사용자가 구매하고 싶은 상품을 다양한 방식을 통해 인식하고 이에 대한 결제를 수행할 수 있다.The user terminal 100 is a terminal used by a user to use the payment system 10 , and the user terminal 100 may recognize a product that the user wants to purchase through various methods and perform payment therefor.

사용자 단말기(100)는 사용자에 의해 제어되며, 웹 브라우저 또는 사용자 단말기(100) 상에 설치된 컴퓨터 소프트웨어 또는 어플리케이션을 통하여 결제 시스템(10) 내의 관리 서버(400)에 접속할 수 있다. 사용자 단말기(100)는 결제 시스템(10) 내의 판매자 단말기(200), 관리 서버(400) 및 외부 서버(500)와 각종 데이터를 주고받을 수 있으며, 이와 같은 데이터를 기초로 하여 사용자 단말기(100)의 화면(디스플레이부)을 통해 표시할 내용을 결정할 수 있다.The user terminal 100 is controlled by the user, and may access the management server 400 in the payment system 10 through a web browser or computer software or application installed on the user terminal 100 . The user terminal 100 may exchange various data with the seller terminal 200, the management server 400, and the external server 500 in the payment system 10, and based on such data, the user terminal 100 It is possible to determine the content to be displayed through the screen (display unit) of

이러한 사용자 단말기(100)는 휴대폰, 스마트폰, PDA(Personal Digital Assistant), PMP(Portable Multimedia Player), 태블릿 PC, 등과 같이 네트워크를 통하여 웹 서버와 연결될 수 있는 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치를 포함할 수 있으며, 개인용 컴퓨터(예를 들어, 데스크탑 컴퓨터, 노트북 컴퓨터 등), 워크스테이션, PDA, 웹 패드 등과 같이 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기 중 하나일 수도 있다.The user terminal 100 is a mobile phone, a smart phone, a PDA (Personal Digital Assistant), a PMP (Portable Multimedia Player), a tablet PC, etc. all kinds of handheld-based that can be connected to the web server through a network. It may include a wireless communication device, and among digital devices equipped with memory means and equipped with a microprocessor, such as personal computers (eg, desktop computers, notebook computers, etc.), workstations, PDA's, web pads, etc. It could be one.

판매자 단말기(200)는 판매자 측에서 결제 시스템(10)을 이용하기 위해 사용하는 단말기로, 판매자 단말기(200)는 판매의 대상이 되는 상품들의 정보를 관리할 수 있으며, 사용자 단말기(100) 상에서 생체 정보를 토대로 본인 인증을 수행할 경우 생체 정보를 우선적으로 획득하여 사용자 단말기(100) 측으로 전송할 수 있다.The seller terminal 200 is a terminal used by the seller to use the payment system 10 , and the seller terminal 200 can manage information on products to be sold, and is a biometric device on the user terminal 100 . When self-authentication is performed based on the information, biometric information may be preferentially obtained and transmitted to the user terminal 100 side.

본 발명의 일 실시예에 따르면, 결제를 위한 본인 인증에 활용되는 생체 정보는 지문 정보, 홍채 정보, 안면 이미지 정보, 정맥 정보, 심전도 정보 또는 음성 정보 중 어느 하나 또는 이들의 조합으로 구성될 수 있다. According to an embodiment of the present invention, biometric information used for identity authentication for payment may be composed of any one or a combination of fingerprint information, iris information, facial image information, vein information, electrocardiogram information, and voice information. .

판매자 단말기(200)는 상품이 판매되는 장소에 설치된 다양한 기타 장치들과 연결되어 통신을 수행할 수 있으며, 이와 같은 기타 장치들은 상품 인식 기기(300) 또는 게이트 등을 구성될 수 있다.The seller terminal 200 may be connected to and communicate with various other devices installed in places where products are sold, and these other devices may constitute the product recognition device 300 or a gate.

일 실시예에 따르면, 다양한 상품이 판매되는 장소의 특정 장소(예를 들어, 출구)에 게이트가 설치되어, 게이트가 이를 통과하는 사용자 단말기(100)를 인식하여 사용자 단말기에 대한 정보를 판매자 단말기(200)에 전송하면, 판매자 단말기가 인식된 사용자 단말기(100)에 결제 요청 신호를 전송하는 방식으로 결제가 진행될 수 있다. 사용자 단말기(100)는 판매자 단말기(200)로부터 결제 요청 신호를 수신하고 그에 따라 결제를 수행할 수 있다.According to an embodiment, a gate is installed at a specific place (eg, an exit) of a place where various products are sold, and the gate recognizes the user terminal 100 passing through it and transmits information about the user terminal to the seller terminal ( 200), payment may be performed in such a way that the seller terminal transmits a payment request signal to the recognized user terminal 100 . The user terminal 100 may receive a payment request signal from the seller terminal 200 and perform payment accordingly.

이러한 판매자 단말기(200)는 판매자에 의해 제어되며, 웹 브라우저 또는 판매자 단말기(200) 상에 설치된 컴퓨터 소프트웨어 또는 어플리케이션을 통하여 결제 시스템(10) 내의 관리 서버(400)에 접속할 수 있다. 판매자 단말기(200)는 결제 시스템(10) 내의 사용자 단말기(100), 관리 서버(400) 및 외부 서버(500)와 각종 데이터를 주고받을 수 있으며, 이와 같은 데이터를 기초로 하여 판매자 단말기(200)의 화면(디스플레이부)을 통해 표시할 내용을 결정할 수 있다.The seller terminal 200 is controlled by the seller, and can be connected to the management server 400 in the payment system 10 through a web browser or computer software or application installed on the seller terminal 200 . The seller terminal 200 may exchange various data with the user terminal 100, the management server 400, and the external server 500 in the payment system 10, and based on such data, the seller terminal 200 It is possible to determine the content to be displayed through the screen (display unit) of

이러한 판매자 단말기(200)는 휴대폰, 스마트폰, PDA(Personal Digital Assistant), PMP(Portable Multimedia Player), 태블릿 PC, 등과 같이 네트워크를 통하여 웹 서버와 연결될 수 있는 모든 종류의 핸드헬드(Handheld) 기반의 무선 통신 장치를 포함할 수 있으며, 개인용 컴퓨터(예를 들어, 데스크탑 컴퓨터, 노트북 컴퓨터 등), 워크스테이션, PDA, 웹 패드 등과 같이 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 기기 중 하나일 수도 있다.The seller terminal 200 is a mobile phone, a smart phone, a personal digital assistant (PDA), a portable multimedia player (PMP), tablet PC, etc. all kinds of handheld (Handheld) based that can be connected to the web server through the network. It may include a wireless communication device, and among digital devices equipped with memory means and equipped with a microprocessor, such as personal computers (eg, desktop computers, notebook computers, etc.), workstations, PDA's, web pads, etc. It could be one.

상품 인식 기기(300)는 사용자가 구매하고 싶은 상품에 접근하여 이를 소지하게 되면 그에 대한 정보를 인식하여 해당 사용자의 사용자 단말기(100) 정보와 사용자가 접근하여 소지한 상품에 대한 정보를 사용자 단말기(100) 또는 판매자 단말기(200)로 전송할 수 있다. 상품 인식 기기(300)가 상품을 인식하는 방법은 후술할 사용자 단말기(100)의 상품 인식 방법과 동일하거나 유사한 방식으로 수행될 수 있다.The product recognition device 300 recognizes the information on the product when the user accesses and possesses the product that the user wants to purchase, and displays the user terminal 100 information of the user and information on the product the user accesses and possesses to the user terminal ( 100) or the seller terminal 200 . A method for recognizing a product by the product recognition device 300 may be performed in the same or similar manner as a product recognition method of the user terminal 100, which will be described later.

도 1에서 상품 인식 기기(300)는 이미지를 수집할 수 있는 카메라의 형태로 도시되었으나, 이와 달리 바코드 스캐너나 전자 태그를 인식할 수 있는 전자 장치 등으로 구성될 수도 있다.Although the product recognition device 300 is illustrated in the form of a camera capable of collecting images in FIG. 1 , it may be configured as a barcode scanner or an electronic device capable of recognizing an electronic tag.

관리 서버(400)는 결제 시스템(10)이 원활하게 동작하도록 데이터를 관리하고 필요한 데이터를 사용자 단말기(100) 및 판매자 단말기(200)와 주고받을 수 있다. 예를 들어, 관리 서버(400)는 복수의 오프라인 상점을 총체적으로 관리할 수 있으며 그에 따라 복수의 오프라인 상점 내에 위치한 판매자 단말기(200)들과, 오프라인 상점에서 결제를 수행하고자 하는 사용자 단말기(100)들과 통신을 수행할 수 있다.The management server 400 may manage data so that the payment system 10 operates smoothly and exchange necessary data with the user terminal 100 and the seller terminal 200 . For example, the management server 400 may collectively manage a plurality of offline stores, and accordingly, the seller terminals 200 located in the plurality of offline stores and the user terminal 100 that wants to perform payment in the offline store. can communicate with them.

외부 서버(500)는 관리 서버(400)와 별도로 존재하는 서버로, 일 실시예에 따르면 관리 서버(400)는 결제 시스템(10)의 원활한 운영을 위해 필요한 각종 데이터를 외부 서버(500)로부터 획득할 수 있으며, 사용자 단말기(100) 또는 판매자 단말기(200) 또한 외부 서버(500)와의 통신으로 필요한 데이터를 획득할 수 있다. 예를 들어, 외부 서버(500)는 판매할 상품을 제공하는 도매 업체가 관리하는 서버, 결제를 수행하기 위한 신용카드 서버, PG 서버 등으로 구성될 수 있다.The external server 500 is a server that exists separately from the management server 400 , and according to an embodiment, the management server 400 obtains various data necessary for the smooth operation of the payment system 10 from the external server 500 . The user terminal 100 or the seller terminal 200 may also acquire necessary data through communication with the external server 500 . For example, the external server 500 may be composed of a server managed by a wholesaler providing products to be sold, a credit card server for payment, a PG server, and the like.

이와 같은 관리 서버(400) 및 외부 서버(500)는 적어도 하나의 프로세서를 가지는 제어부, 통신 모듈, 저장부(예: 메모리) 등과 같은 하드웨어 또는 알고리즘 연산을 위한 소프트웨어를 포함하여 구성될 수 있다.The management server 400 and the external server 500 may include hardware such as a control unit having at least one processor, a communication module, a storage unit (eg, memory), or software for an algorithm operation.

본 발명의 일 실시예에 따르면, 결제 시스템(10) 내에서 사용자 단말기(100), 판매자 단말기(200), 상품 인식 기기(300), 관리 서버(400) 및 외부 서버(500)가 통신하기 위해서 사용하는 통신망은 유선 및 무선 등과 같은 그 통신 양태를 가리지 않고 구성될 수 있으며, 예를 들면, 근거리 통신망(LAN: Local Area Network), 도시권 통신망(MAN: Metropolitan Area Network), 광역 통신망(WAN: Wide Area Network) 등 다양한 통신망으로 구현될 수 있다.　바람직하게는, 본 발명의 일 실시예에 따른 통신망은 공지의 월드와이드웹(WWW: World Wide Web) 등일 수도 있다.According to an embodiment of the present invention, in order for the user terminal 100, the seller terminal 200, the product recognition device 300, the management server 400 and the external server 500 to communicate within the payment system 10 The communication network to be used may be configured regardless of its communication mode, such as wired and wireless, for example, a local area network (LAN), a metropolitan area network (MAN), and a wide area network (WAN: Wide). It can be implemented in various communication networks such as an area network). Preferably, the communication network according to an embodiment of the present invention may be a known World Wide Web (WWW) or the like.

상세하게는, 상품을 판매하는 특정 지역에 존재하는 사용자 단말기(100)와 판매자 단말기(200) 간의 통신은 근거리 통신망 중 UWB(Ultra wideband), NFC(Near Field Communication), 블루투스(Bluetooth), 초음파, MAT 또는 비콘 중 적어도 어느 하나의 방식이 활용되는 형태로 구성될 수 있다.In detail, communication between the user terminal 100 and the seller terminal 200 existing in a specific area for selling products is UWB (Ultra wideband), NFC (Near Field Communication), Bluetooth, ultrasonic, It may be configured in a form in which at least one method of MAT or beacon is utilized.

또한, 사용자 단말기(100) 및 판매자 단말기(200)는 GPS(Global Positioning System)을 활용하여 사용자 단말기(100) 및 판매자 단말기(200)의 위치 정보를 확인하고 위치 정보에 대한 데이터를 생성할 수 있다.In addition, the user terminal 100 and the seller terminal 200 may check the location information of the user terminal 100 and the seller terminal 200 by utilizing a Global Positioning System (GPS) and generate data about the location information. .

도 2는 본 발명의 일 실시예에 따른 사용자 단말기(100)의 구성을 개략적으로 나타낸 블록도이다.2 is a block diagram schematically showing the configuration of the user terminal 100 according to an embodiment of the present invention.

도 2를 참조하면, 사용자 단말기(100)는 이미지 촬영부(110), 상품 인식부(120), 본인 인증 수행부(130), 상품 정보 제공부(140), 상품 결제 수행부(150), 통신부(160), 저장부(170) 및 제어부(180)를 포함하여 구성될 수 있다.Referring to FIG. 2 , the user terminal 100 includes an image capturing unit 110 , a product recognition unit 120 , an identity authentication performing unit 130 , a product information providing unit 140 , a product payment performing unit 150 , It may be configured to include a communication unit 160 , a storage unit 170 , and a control unit 180 .

이미지 촬영부(110)는 사용자 단말기(100) 주변을 시각적으로 촬영하여 이미지를 생성할 수 있으며, 이미지는 정지된 상태의 사진 형태로 구성될 수 있으나 복수의 프레임으로 구성된 영상의 형태로 구성될 수도 있다.The image capture unit 110 may generate an image by visually photographing the periphery of the user terminal 100, and the image may be configured in the form of a picture in a still state, but may also be configured in the form of an image composed of a plurality of frames. have.

이미지 촬영부(110)는 사용자 단말기(100)가 결제 시스템(10)을 활용하는 특정 공간에 위치하는 경우 사용자의 조작 없이 자동으로 동작하여 이미지 촬영을 수행할 수 있으며, 이와 달리 사용자가 결제 시스템(10)을 활용하기 위하여 특정 어플리케이션을 사용자 단말기(100) 상에서 수행하는 경우 이미지 촬영을 수행할 수도 있다.When the user terminal 100 is located in a specific space utilizing the payment system 10, the image capturing unit 110 may automatically operate without user manipulation to perform image capturing. In order to utilize 10), when a specific application is executed on the user terminal 100, image capturing may be performed.

상품 인식부(120)는 다양한 방식을 통해 사용자 단말기(100) 주변에서 사용자가 구매하고자 하는 상품을 인식할 수 있다.The product recognition unit 120 may recognize a product that the user wants to purchase in the vicinity of the user terminal 100 through various methods.

일 실시예에 따르면, 상품 인식부(120)가 구매 대상이 되는 상품을 인식하는 방법은 이미지 분석을 통한 것일 수 있다. 즉, 사용자 단말기(100)에 탑재된 이미지 촬영부(110)에 의해 상품의 외형 이미지가 분석되어 상품의 종류 및 수량을 특정할 수 있다.According to an embodiment, the method for the product recognition unit 120 to recognize a product to be purchased may be through image analysis. That is, the external image of the product is analyzed by the image capturing unit 110 mounted on the user terminal 100 to specify the type and quantity of the product.

이와 같이, 상품 인식부(120)는 구매 대상이 되는 상품을 인식하여 상품에 대한 정보를 사용자 단말기(100) 상에서 '장바구니' 등과 같은 형식으로 누적시킬 수 있다.In this way, the product recognition unit 120 may recognize a product to be purchased and accumulate information on the product in the form of a 'shopping basket' on the user terminal 100 .

상품 인식부(120)는 상품의 외형 이미지를 분석하여 수집함에 있어, 사용자가 집어든 물건의 이미지만을 인식하여 분석할 수 있다. 즉, 상품 인식부(120)는 촬영된 이미지 상에 존재하는 모든 상품을 인식하여 구매 대상 상품으로 분류하는 것이 아니라, 이미지 분석을 통해 사용자가 집어든 물건만을 인식할 수 있다.The product recognition unit 120 may recognize and analyze only the image of the object picked up by the user in analyzing and collecting the external image of the product. That is, the product recognition unit 120 may recognize only the items picked up by the user through image analysis, rather than recognizing all products present on the photographed image and classifying them as purchase target products.

일 실시예에 따르면, 상품 인식부(120)는 상품의 외형 이미지를 분석하는 방식이 아닌, 구매 대상이 되는 상품에 표시된 바코드 또는 QR코드를 인식하는 방식으로 구매 대상 상품을 인식할 수 있다.According to an embodiment, the product recognition unit 120 may recognize the purchase target product by recognizing a barcode or QR code displayed on the purchase target product, not by analyzing the external image of the product.

상품 인식부(120)는 이미지 촬영부(110)에 의해 촬영된 이미지 상에 존재하는 바코드 또는 QR코드를 인식하여, 수집된 바코드 또는 QR코드에 대응되는 상품의 종류 및 개수를 특정하여 이를 구매 대상 상품으로 관리할 수 있다.The product recognition unit 120 recognizes a barcode or QR code existing on the image captured by the image capturing unit 110, specifies the type and number of products corresponding to the collected barcode or QR code, and selects the purchase target It can be managed as a product.

본 발명의 일 실시예에 따르면, 상품 인식부(120)는 이미지 촬영부(110)에 의해 촬영된 이미지를 기반으로 구매 대상 상품을 인식함에 있어, 상품의 외형 이미지를 분석하는 방법과, 상품에 표시된 바코드 또는 QR코드를 활용하는 방법을 종합적으로 활용할 수 있다.According to an embodiment of the present invention, when the product recognition unit 120 recognizes a purchase target product based on the image captured by the image capturing unit 110 , a method of analyzing the external image of the product, and You can comprehensively utilize the displayed barcode or QR code.

상세하게는, 상품 인식부(120)가 구매 대상이 되는 상품을 인식함에 있어 이미지 촬영부(110)에 의해 바코드 또는 QR코드가 인식된 상품은 인식된 바코드 또는 QR코드를 통해 상품의 종류를 특정하고, 수집된 이미지 상에서 바코드 또는 QR코드가 인식되지 않는 상품은 상품의 외형 이미지 분석을 통해 상품의 종류를 특정할 수 있다.In detail, when the product recognition unit 120 recognizes the product to be purchased, the product whose barcode or QR code is recognized by the image capturing unit 110 specifies the type of product through the recognized barcode or QR code. And, for products whose barcode or QR code is not recognized on the collected images, the type of product can be specified through the analysis of the external image of the product.

즉, 이미지 촬영부(110)에 의해 촬영되는 상품의 이미지에는 상품의 일부 모습만이 나타날 수 있으므로 상품 외관에 표시된 바코드 또는 QR코드가 인식되지 않을 수 있으므로 외형 이미지 분석을 통한 상품 인식 방법을 함께 활용함으로써 상품 인식의 정확도를 높일 수 있다.That is, since only a part of the product may appear in the image of the product photographed by the image capturing unit 110, the barcode or QR code displayed on the exterior of the product may not be recognized, so the product recognition method through external image analysis is used together. This can increase the accuracy of product recognition.

일 실시예에 따른 상품 인식부(120)는 인공지능 관리부(121) 및 전자 태그 관리부(122)를 추가적으로 포함할 수 있다.The product recognition unit 120 according to an embodiment may additionally include an artificial intelligence management unit 121 and an electronic tag management unit 122 .

인공지능 관리부(121)는 상품 인식부(120)가 이미지 촬영부(110)에 의해 획득한 상품의 외형 이미지를 분석하여 상품의 종류 및 수량을 특정함에 있어, 이를 사용자 단말기(100) 내에 탑재된 인공지능 엔진을 통해 수행될 수 있도록 한다.The artificial intelligence management unit 121 analyzes the external image of the product obtained by the product recognition unit 120 by the image photographing unit 110 to specify the type and quantity of the product, and the product recognition unit 121 is installed in the user terminal 100. It can be done through an artificial intelligence engine.

인공지능 관리부(121)가 포함하는 인공지능 엔진은 기계학습 또는 립너링 기술을 활용할 수 있다. 인공지능 엔진은 복수의 상품 이미지를 학습 데이터로 설정하고 설정된 학습 데이터를 통해 학습을 수행함으로써 이미지 분석 능력을 향상시킬 수 있다.The artificial intelligence engine included in the artificial intelligence management unit 121 may utilize machine learning or ripnering technology. The artificial intelligence engine can improve image analysis ability by setting a plurality of product images as learning data and performing learning through the set learning data.

상기 인공지능 엔진이 활용하는 기계학습은 하라이크(haar like) 와 콘볼루션 신경회로망(cnn) 및 콘볼루션 신경 회로망 기반 변형모델(R-CNN, Fast R-CNN, Faster R-CNN, YOLO, SSD, Mask R-CNN) 중 적어도 하나의 알고리즘을 활용하는 것일 수 있다.Machine learning utilized by the AI engine is haar like, convolutional neural network (cnn) and convolutional neural network-based transformation model (R-CNN, Fast R-CNN, Faster R-CNN, YOLO, SSD). , Mask R-CNN) may be using at least one algorithm.

이와 같은 인공지능 엔진은 사용자 단말기(100) 내에서 소프트웨어적으로 구현될 수 있다. Such an artificial intelligence engine may be implemented in software within the user terminal 100 .

전자 태그 관리부(122)는 사용자 단말기(100)가 구매 대상이 되는 상품을 인식함에 있어, 이미지 촬영부(110)에 의해 획득된 이미지 기반이 아닌 전자 태그 인식 방식으로 상품의 정보를 획득할 수 있도록 한다.When the user terminal 100 recognizes a product to be purchased, the electronic tag management unit 122 is configured to obtain product information using an electronic tag recognition method rather than an image-based image acquired by the image photographing unit 110 . do.

전자 태그는 RFID(Radio Frequency Identification), NFC(Near Field Communicaion) 기술을 활용한 형태로 적용될 수 있으며, 전자 태그는 가격을 포함한 상품의 정보를 포함한 형태로 각 상품에 포함되거나 부착되어 있을 수 있다.The electronic tag may be applied in a form utilizing RFID (Radio Frequency Identification) and NFC (Near Field Communication) technology, and the electronic tag may be included or attached to each product in a form including product information including a price.

전자 태그 관리부(122)는 사용자 단말기(100)와 일정 간격 이내에 위치하는 전자 태그를 인식하여 이를 통해 사용자 단말기(100)가 구매 대상이 되는 상품을 인식하도록 할 수 있다.The electronic tag management unit 122 may recognize an electronic tag located within a predetermined interval with the user terminal 100 so that the user terminal 100 recognizes a product to be purchased through this.

본 발명의 일 실시예에 따르면, 상품 인식부(120)는 구매 대상이 되는 상품을 인식함에 있어 상품 보관 수단 내에 위치한 상품을 인식할 수 있다. 예를 들어, 상품 보관 수단은 상품 판매 장소에서 사용되는 카트, 바구니 또는 가방 등으로 이루어질 수 있으며, 바구니는 비닐 봉투, 장바구니 등으로 이루어질 수 있다.According to an embodiment of the present invention, the product recognition unit 120 may recognize a product located in the product storage means when recognizing a product to be purchased. For example, the product storage means may include a cart, a basket, or a bag used in a product sales place, and the basket may include a plastic bag, a shopping cart, or the like.

상품 인식부(120)가 이미지 분석 방식으로 상품 보관 수단 내에 위치한 상품을 인식하는 경우, 이미지 촬영부(110)에 의해 촬영된 이미지에서 상품 보관 수단 내부에 위치한 상품들의 외형 이미지만을 분석하여 인식된 상품들을 구매 대상이 되는 상품으로 처리할 수 있다.When the product recognition unit 120 recognizes a product located in the product storage means using the image analysis method, the product recognized by analyzing only the external images of the products located inside the product storage means from the image photographed by the image capturing unit 110 can be treated as products to be purchased.

일 실시예에 따르면, 상품 인식부(120)는 특정 장소에서 사용되는 상품 보관 수단 내에 위치한 상품만을 인식할 수도 있다. 즉, 사용자가 개인적으로 보유한 보관 수단 또는 적재 수단에 위치한 상품은 인식하지 않고, 미리 정해진 상품 보관 수단만이 인식될 수 있다. According to an embodiment, the product recognition unit 120 may recognize only products located in the product storage means used in a specific place. That is, only a predetermined product storage means may be recognized without recognizing the product located in the storage means or the loading means personally held by the user.

상품 인식부(120)가 이미지 분석을 토대로 구매 대상이 되는 상품을 인식하는 경우 특정 장소에서 사용되는 상품 보관 수단인지가 이미지 분석을 통해 우선적으로 판단되고, 특정 장소에서 사용되는 상품 보관 수단이 이미지 상에서 인식되는 경우 해당 상품 보관 수단 내부에 위치한 상품들에 대한 이미지 분석이 추가적으로 진행될 수 있다.When the product recognition unit 120 recognizes a product to be purchased based on image analysis, whether it is a product storage means used in a specific place is preferentially determined through image analysis, and the product storage means used in a specific location is determined on the image If recognized, image analysis of products located inside the corresponding product storage means may be additionally performed.

상품 인식부(120)가 전자 태그와의 통신을 기반으로 구매 대상이 되는 물품을 인식하는 경우, 특정 장소에서 사용되는 기 정해진 상품 보관 수단 또한 전자 태그를 포함할 수 있으며, 그에 따라 해당 전자 태그와 일정 거리 내에 존재하는 상품만이 구매 대상 상품으로 인식될 수도 있다.When the product recognition unit 120 recognizes a product to be purchased based on communication with the electronic tag, a predetermined product storage means used in a specific place may also include an electronic tag, and accordingly, the electronic tag and Only products existing within a certain distance may be recognized as purchase target products.

일 실시예에 따르면, 상품 인식부(120)는 구매 대상이 되는 상품을 인식함에 있어 전술된 이미지 분석 방법 또는 전자 태그 방식을 직접적으로 활용하지 않고, 판매자 단말기(200)로부터 상품 인식 정보를 수신하여 이를 활용할 수도 있다.According to an embodiment, the product recognition unit 120 receives product recognition information from the seller terminal 200 without directly utilizing the above-described image analysis method or electronic tag method in recognizing a product to be purchased. You can also use this.

판매자 단말기(200)는 상품 인식 기기(300)와 연결될 수 있으며, 상품 인식 기기(300)는 사용자 단말기(100)의 상품 인식부(120)가 동작하는 것과 동일하거나 유사한 방식으로 상품을 인식할 수 있다. 즉, 상품 인식 기기(300)는 상품의 외형 이미지 분석을 통해 상품을 인식하는 방식, 상품에 표시된 바코드 또는 QR코드를 통해 상품을 인식하는 방식 또는 상품에 포함된 전자 태그와의 통신을 통해 상품을 인식하는 방식을 활용할 수 있다.The seller terminal 200 may be connected to the product recognition device 300 , and the product recognition device 300 may recognize the product in the same or similar manner as the product recognition unit 120 of the user terminal 100 operates. have. That is, the product recognition device 300 recognizes a product through an external image analysis of the product, a method of recognizing a product through a barcode or QR code displayed on the product, or a product through communication with an electronic tag included in the product Recognition methods can be used.

상품 인식 기기(300)는 사용자가 상품에 접근하여 이를 소지하게 될 때 추가적으로 사용자 정보를 획득하여 판매자 단말기(200)에 사용자 단말기(100)에 대한 정보를 제공할 수 있다.The product recognition device 300 may provide information about the user terminal 100 to the seller terminal 200 by additionally acquiring user information when the user approaches and possesses the product.

이와 같은 사용자 단말기(100)에 대한 인식은, 상품 인식 기기(300)가 사용자 단말기(100)의 위치 정보를 실시간으로 수신하여 이를 토대로 수행될 수도 있으며, 상품 인식 기기(300)가 사용자의 안면 이미지 등을 수집하여 분석하는 방식으로 사용자를 인식하고 인식된 사용자에 대응되는 사용자 단말기(100) 정보를 결정하는 방식으로 수행될 수도 있다.Such recognition of the user terminal 100 may be performed based on the product recognition device 300 receiving the location information of the user terminal 100 in real time, and the product recognition device 300 may display the user's face image It may be performed in a manner of recognizing a user in a manner of collecting and analyzing, etc. and determining information on the user terminal 100 corresponding to the recognized user.

일 실시예에 따르면, 전술된 상품 인식 기기(300)의 동작은 판매자 단말기(200)에서 수행될 수 있다. 즉, 상품 인식 기기(300)와 판매자 단말기(200)는 하나의 기기로 통합되어 운영될 수도 있다.According to an embodiment, the above-described operation of the product recognition device 300 may be performed in the seller terminal 200 . That is, the product recognition device 300 and the seller terminal 200 may be integrated and operated as one device.

본인 인증 수행부(130)는 판매자 단말기(200)로부터 생체 정보를 수신하고 수신한 생체 정보와 사용자 단말기(100) 상에 미리 저장되었던 생체 정보의 일치 여부를 기반으로 본인 인증을 수행할 수 있다.The identity authentication performing unit 130 may receive biometric information from the seller terminal 200 and perform identity authentication based on whether the received biometric information matches the biometric information previously stored on the user terminal 100 .

예를 들어, 생체 정보 중 안면 이미지가 본인 인증을 위해 활용되는 경우, 판매자 단말기(200)는 촬영한 사용자의 안면 이미지를 통해 사용자를 식별하고 식별된 사용자에 대응되는 사용자 단말기(100)에 해당 안면 이미지를 전송할 수 있다. 본인 인증 수행부(130)는 판매자 단말기(200)로부터 수신한 안면 이미지를, 사용자 단말기(100) 내에 미리 저장된 안면 이미지와 비교하여 두 이미지가 일치한다고 판단되는 경우 본인 인증을 수행할 수 있다.For example, when a facial image among biometric information is used for identity authentication, the seller terminal 200 identifies the user through the photographed user's facial image and corresponds to the user terminal 100 corresponding to the identified user. Images can be sent. The user authentication performing unit 130 compares the facial image received from the seller terminal 200 with the facial image previously stored in the user terminal 100 , and when it is determined that the two images match, the user authentication may be performed.

상품 정보 제공부(140)는 상품 인식부(120)가 사용자가 구매하기 원하는 구매 대상 상품을 인식하면 이에 대한 정보를 사용자에게 제공할 수 있다. 상세하게는, 상품 정보 제공부(140)는 구매 대상이 되는 상품으로 인식된 하나 이상의 상품의 가격 총합에 대한 정보를 사용자 단말기(100)의 디스플레이 장치 또는 사운드 생성 장치를 통해 사용자에게 제공할 수 있다.The product information providing unit 140 may provide information on the product information to the user when the product recognition unit 120 recognizes a purchase target product that the user wants to purchase. In detail, the product information providing unit 140 may provide information on the total price of one or more products recognized as purchase target products to the user through the display device or the sound generating device of the user terminal 100 . .

일 실시예에 따르면, 상품 정보 제공부(140)는 상품 인식부(120)가 기 정해진 상품 보관 수단 내에 위치한 상품만을 인식하는 경우, 기 정해진 상품 보관 수단 내에 위치한 상품들의 종류, 수량 및 가격 정보를 사용자에게 제공할 수 있다.According to an embodiment, when the product recognition unit 120 recognizes only a product located in a predetermined product storage means, the product information providing unit 140 provides information on the type, quantity and price of products located in the predetermined product storage means. can be provided to users.

이와 같은 기능을 통해, 사용자는 자신의 사용자 단말기(100)를 통해 인식된 상품들의 종류와 수량, 개수를 파악할 수 있으며 그에 따라 자신이 원하는 대로 쇼핑을 편리하게 진행할 수 있다.Through such a function, the user can grasp the type, quantity, and number of products recognized through his or her user terminal 100 , and accordingly, can conveniently proceed with shopping as desired.

상품 결제 수행부(150)는 사용자 단말기(100)의 본인 인증 수행부(130) 상에서 본인 인증이 성공적으로 수행되는 경우 상품에 대한 결제를 수행할 수 있다.The product payment performing unit 150 may perform payment for the product when the user authentication is successfully performed on the user authentication performing unit 130 of the user terminal 100 .

일 실시예에 따른 상품 결제 수행부(150)는 판매자 단말기(200)로부터 결제 요청 신호를 수신하여 그에 따라 결제를 진행할 수 있다. 전술된 바와 같이 판매자 단말기(200)는 특정 장소에 설치된 게이트와 연결되어 있을 수 있으며, 게이트는 사용자 또는 사용자 단말기(100)가 해당 게이트를 통과하는 경우 사용자 또는 사용자 단말기(100)를 인식하여 사용자 또는 사용자 단말기(100)에 대한 정보를 판매자 단말기(200)로 전달할 수 있다. 판매자 단말기(200)는 게이트로부터 사용자 또는 사용자 단말기(100)에 대한 정보를 수신하고 대응되는 사용자 단말기(100)에 결제 요청 신호를 전송하여 결제가 진행되도록 할 수 있다.The product payment performing unit 150 according to an embodiment may receive a payment request signal from the seller terminal 200 and proceed with payment according to the received payment request signal. As described above, the seller terminal 200 may be connected to a gate installed in a specific place, and the gate recognizes the user or the user terminal 100 when the user or the user terminal 100 passes through the corresponding gate. Information on the user terminal 100 may be transmitted to the seller terminal 200 . The seller terminal 200 may receive information about the user or the user terminal 100 from the gate, and transmit a payment request signal to the corresponding user terminal 100 so that the payment is processed.

즉, 사용자가 오프라인의 특정 장소에서 자신이 구매하기 원하는 상품들을 고르면 사용자 단말기(100)가 선택된 구매 대상 상품들을 인식하고, 사용자가 출구에 있는 게이트를 통과하면 인식된 상품들에 대한 결제가 사용자 단말기(100) 상에서 자동으로 이루어지는 형태로 상품의 선택 및 결제가 이루어질 수 있다.That is, when the user selects the products he wants to purchase at a specific offline location, the user terminal 100 recognizes the selected purchase target products, and when the user passes the gate at the exit, payment for the recognized products is performed by the user terminal Selection and payment of products may be made in a form automatically made on (100).

이와 달리, 상품 결제 수행부(150)는 사용자 단말기(100)가 특정한 위치에 도달하거나 특정한 장소를 벗어나는 경우에, 선택되었던 구매 상품들에 대한 결제를 수행할 수도 있다.Alternatively, when the user terminal 100 arrives at a specific location or leaves a specific location, the product payment performing unit 150 may perform payment for selected purchased products.

일 실시예에 따르면, 상품 결제 수행부(150)는 사용자 단말기(100)가 구매 대상 상품으로 인식한 전체 상품들에 대한 QR 코드 또는 바코드를 생성할 수 있으며, 이와 같은 QR 코드 또는 바코드는 판매자 단말기(200)에 의해 인식될 수 있으며 그에 따라 구매 대상 상품으로 인식된 전체 상품들에 대한 결제가 수행될 수 있다. 즉, 상품 결제 수행부(150)가 생성하는 QR코드 또는 바코드는 구매 대상 상품으로 인식된 전체 상품들에 대한 정보 및 결제 수단에 대한 정보를 함께 포함할 수 있다.According to an embodiment, the product payment performing unit 150 may generate a QR code or barcode for all products recognized by the user terminal 100 as a purchase target product, and such a QR code or barcode is a seller terminal 200 , and accordingly, payment for all products recognized as purchase target products may be performed. That is, the QR code or barcode generated by the product payment performing unit 150 may include information on all products recognized as purchase target products and information on payment methods together.

다른 실시예에 따르면, 상품 결제 수행부(150)는 판매자 단말기(200)가 상품 인식 기기(300)를 통해 구매 대상 상품들을 인식하고 QR코드 또는 바코드를 생성하면 이를 인식하여 결제를 수행할 수 있다. 이와 같은 경우에, 상품 결제 수행부(150)는 사용자 단말기(100)의 이미지 촬영부(110)를 통해 QR코드 또는 바코드의 인식을 수행할 수 있다. 판매자 단말기(200)가 생성하는 QR코드 또는 바코드는 구매 대상 상품으로 인식된 전체 상품들에 대한 정보를 포함할 수 있다.According to another embodiment, the product payment performing unit 150 recognizes the product to be purchased by the seller terminal 200 through the product recognition device 300 and generates a QR code or barcode to recognize it and perform payment. . In this case, the product payment performing unit 150 may perform the recognition of a QR code or a barcode through the image capturing unit 110 of the user terminal 100 . The QR code or barcode generated by the seller terminal 200 may include information on all products recognized as purchase target products.

다른 실시예에 따르면, 상품 결제 수행부(150)는 상품 인식부(120)가 판매자 단말기(200)와의 통신 없이 인식한 상품들에 대한 결제를 진행할 수 있다. 즉, 이와 같은 실시예에서는 판매자 단말기(200)의 존재없이 사용자 단말기(100)에서 자체적으로 인식한 상품들에 대한 결제를 수행할 수 있다. 이 경우, 본인 인증 수행부(130) 또한 판매자 단말기(200)를 통하지 않고 사용자 단말기(100) 자체적으로 획득한 생체 정보를 통해 본인 인증을 수행하고 본인 인증이 성공적으로 수행된 경우에 결제를 수행할 수 있다.According to another embodiment, the product payment performing unit 150 may proceed with payment for products recognized by the product recognition unit 120 without communication with the seller terminal 200 . That is, in this embodiment, payment for products recognized by the user terminal 100 may be performed without the presence of the seller terminal 200 . In this case, the identity authentication performing unit 130 also performs identity authentication through the biometric information obtained by the user terminal 100 itself, not through the seller terminal 200, and performs payment when the identity authentication is successfully performed. can

상품 결제 수행부(150)는 신용카드 결제, 체크카드 결제, 직불카드 결제, 계좌이체 결제, 가상화폐 결제, 포인트 결제, 휴대폰 소액 결제 등 다양한 결제 방법을 통해 결제를 진행할 수 있으며, 이와 같은 결제 방법은 생체 정보를 통한 본인 인증을 활용한 것일 수도 있다.The product payment performing unit 150 may perform payment through various payment methods such as credit card payment, check card payment, debit card payment, account transfer payment, virtual currency payment, point payment, mobile phone micropayment, and the like. may be using personal authentication through biometric information.

일 실시예에 따르면, 상품 결제 수행부(150)는 PISP(지급지시 대행서비스 제공업자)를 통한 결제를 지원할 수 있다. PISP는 오픈 API를 통해 기존 은행들의 결제 인프라를 활용하지 않는 형태의 금융 서비스를 제공하며, 소비자들이 특정 서비스에 로그인하는 것만으로 소비자들이 보유하고 있는 계좌를 활용하여 결제나 송금을 수행할 수 있도록 한다.According to an embodiment, the product payment performing unit 150 may support payment through a PISP (Payment Instruction Agency Service Provider). PISP provides financial services that do not utilize the payment infrastructure of existing banks through open APIs, and allows consumers to make payments or remittances using their accounts simply by logging into a specific service. .

통신부(160)는 사용자 단말기(100)가 판매자 단말기(200), 관리 서버(400) 및 외부 서버(500) 등과의 통신을 수행할 수 있도록 한다. 통신부(160)가 통신을 수행하기 위해서 사용하는 통신망은 유선 및 무선 등과 같은 그 통신 양태를 가리지 않고 구성될 수 있으며, 예를 들면, 근거리 통신망(LAN: Local Area Network), 도시권 통신망(MAN: Metropolitan Area Network), 광역 통신망(WAN: Wide Area Network) 등 다양한 통신망으로 구현될 수 있다. 근거리 통신망은 전술한 바와 같이 UWB(Ultra Wideband), NFC(Near Field Communication), 초음파, MAT, 비콘 등을 통해 구현될 수 있다.The communication unit 160 enables the user terminal 100 to communicate with the seller terminal 200 , the management server 400 , and the external server 500 . The communication network used by the communication unit 160 to perform communication may be configured regardless of its communication mode, such as wired and wireless, for example, a local area network (LAN), a metropolitan area network (MAN). It may be implemented in various communication networks, such as an area network) and a wide area network (WAN). As described above, the local area network may be implemented through Ultra Wideband (UWB), Near Field Communication (NFC), ultrasound, MAT, beacon, and the like.

저장부(170)는 사용자 단말기(100)의 각종 구성부 내에서 수집되고, 생성되고, 가공되는 정보들을 저장하는 역할을 수행한다. 즉, 저장부(170)에는 사용자에 대한 정보, 결제 수단에 대한 정보, 인공지능 엔진이 사용하는 알고리즘에 대한 정보 등이 저장될 수 있다. 이러한 저장부(170)는 예를 들어, 메모리(memory), 캐시(cash), 버퍼(buffer) 등을 포함할 수 있으며, 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.The storage unit 170 serves to store information collected, generated, and processed in various components of the user terminal 100 . That is, the storage unit 170 may store information about a user, information about a payment method, information about an algorithm used by the artificial intelligence engine, and the like. The storage unit 170 may include, for example, a memory, a cache, a buffer, and the like, and may be composed of software, firmware, hardware, or a combination of at least two or more thereof.

제어부(180)는 이미지 촬영부(110), 상품 인식부(120), 본인 인증 수행부(130), 상품 정보 제공부(140), 상품 결제 수행부(150), 통신부(160) 및 저장부(170) 간의 데이터 흐름을 제어하는 기능을 수행할 수 있다. 즉, 제어부(180)는 이미지 촬영부(110), 상품 인식부(120), 본인 인증 수행부(130), 상품 정보 제공부(140), 상품 결제 수행부(150), 통신부(160) 및 저장부(170)에서 각각 고유한 기능을 수행하도록 지원할 수 있다.The control unit 180 includes an image capturing unit 110 , a product recognition unit 120 , an identity authentication performing unit 130 , a product information providing unit 140 , a product payment performing unit 150 , a communication unit 160 , and a storage unit. The function of controlling the data flow between 170 may be performed. That is, the controller 180 includes the image capturing unit 110 , the product recognition unit 120 , the identity authentication performing unit 130 , the product information providing unit 140 , the product payment performing unit 150 , the communication unit 160 and The storage unit 170 may support to perform each unique function.

도 2에서 이미지 촬영부(110), 상품 인식부(120), 본인 인증 수행부(130), 상품 정보 제공부(140) 및 상품 결제 수행부(150)는 제어부(180)를 기능적으로 분류한 구성이므로 하나의 제어부(180)로서 통합되어 구성될 수도 있다.In FIG. 2 , the image capturing unit 110 , the product recognition unit 120 , the identity authentication performing unit 130 , the product information providing unit 140 , and the product payment performing unit 150 divide the control unit 180 into functional groups. Since it is a configuration, it may be configured to be integrated as one control unit 180 .

도 3은 본 발명의 일 실시예에 따른 사용자 단말기(100)가 본 발명의 결제 시스템(10)을 활용하여 상품을 인식하고 결제하는 방식을 설명한 도면이다.3 is a diagram illustrating a method in which the user terminal 100 according to an embodiment of the present invention recognizes and pays for a product by using the payment system 10 of the present invention.

도 3에서 사용자가 구매하고자 하는 상품에 대한 인식은 이미지 촬영 및 분석에 의해 수행되는 것으로 예시되었으나, 이와 달리 바코드 인식, QR코드 인식 또는 전자 태그 인식 등 다양한 방식으로 상품에 대한 인식이 수행될 수 있다.In FIG. 3 , the recognition of the product that the user wants to purchase is exemplified as being performed by image capturing and analysis, but otherwise, the recognition of the product may be performed in various ways such as barcode recognition, QR code recognition, or electronic tag recognition. .

사용자가 오프라인에서 상품을 판매하는 특정 장소에 도착하여 쇼핑을 시작하면 사용자 단말기(100) 상에 탑재되어 있는 카메라와 같은 이미지 촬영부(110)가 동작할 수 있다.When a user arrives at a specific place selling products offline and starts shopping, the image capturing unit 110 such as a camera mounted on the user terminal 100 may operate.

사용자 단말기(100)는 카메라를 통해 주변의 상품 이미지를 촬영할 수 있으며(S310), 이후 이미지 분석을 통해 구매 대상 상품을 인식할 수 있다(S320). 일 실시예에 따르면, 사용자 단말기(100)의 구매 대상 상품 인식은 사용자가 손으로 잡는 상품들에 대한 인식을 이미지 분석 기반으로 수행하는 것일 수 있다. 즉, 촬영된 이미지 상에서 포착되는 모든 상품들이 구매 대상 상품으로 인식되는 것이 아니라, 사용자가 손으로 잡거나 사용자와의 거리가 일정 거리 미만인 상품들만이 구매 대상 상품으로 인식될 수 있다. 다른 실시예에 따르면, 사용자 단말기(100)는 기 정해진 특정 상품 보관 수단 내에 위치한 상품만을 구매 대상 상품으로 인식할 수도 있다.The user terminal 100 may take an image of a surrounding product through the camera (S310), and then may recognize a purchase target product through image analysis (S320). According to an embodiment, the recognition of the purchase target product of the user terminal 100 may be performing recognition of the products held by the user based on image analysis. That is, not all products captured on the photographed image are recognized as purchase target products, but only products held by the user or having a distance from the user less than a certain distance may be recognized as purchase target products. According to another embodiment, the user terminal 100 may recognize only a product located in a predetermined specific product storage means as a purchase target product.

판매자 단말기(200)는 사용자의 생체 정보를 인식하고(S330), 인식된 생체 정보를 사용자 단말기(100)로 전송할 수 있다(S340). 이 경우, 판매자 단말기(200)는 생체 정보와 매칭되는 사용자 정보 또는 사용자 단말기(100)의 정보를 통해 어느 사용자 단말기(100)로 인식된 사용자의 생체 정보를 전송할지 결정할 수 있다.The seller terminal 200 may recognize the user's biometric information (S330) and transmit the recognized biometric information to the user terminal 100 (S340). In this case, the seller terminal 200 may determine to which user terminal 100 to transmit the recognized user's biometric information through user information matching the biometric information or information of the user terminal 100 .

예를 들어, 생체 정보 중 안면 이미지가 사용자 인식에 사용될 경우, 판매자 단말기(200)는 인식된 안면 이미지 분석을 통해 사용자를 특정하고 해당 사용자에 대응하는 사용자 단말기(100)에 안면 이미지를 전송할 수 있다. 이와 달리, 판매자 단말기(200)는 특정 장소 내에 위치한 복수의 사용자 단말기(100)에 생체 정보를 전송할 수도 있으며, 사용자 단말기(100)가 판매자 단말기(200)에 전송하는 위치 정보(예를 들어, GPS 위치 정보)를 통해 생체 정보를 전송할 사용자 단말기(100)를 특정할 수도 있다.For example, when a facial image among biometric information is used for user recognition, the seller terminal 200 may specify the user through analysis of the recognized facial image and transmit the facial image to the user terminal 100 corresponding to the user. . Alternatively, the seller terminal 200 may transmit biometric information to a plurality of user terminals 100 located in a specific place, and location information (eg, GPS) transmitted by the user terminal 100 to the seller terminal 200 . location information), the user terminal 100 to which the biometric information is to be transmitted may be specified.

사용자 단말기(100)는 판매자 단말기(200)로부터 생체 정보를 수신한 이후에, 수신한 생체 정보와 사용자 단말기(100)에 미리 저장되어 있는 생체 정보의 비교를 통해 본인 인증을 수행할 수 있다(S350).After receiving the biometric information from the seller terminal 200 , the user terminal 100 may perform user authentication by comparing the received biometric information with the biometric information previously stored in the user terminal 100 ( S350 ). ).

이후, 판매자 단말기(200)는 사용자 단말기(100)에 결제 요청 신호를 전송할 수 있다(S360). 예를 들어, 판매자 단말기(200)는 사용자 단말기(100)의 위치 정보를 토대로 사용자 단말기(100)가 특정 상품 판매 장소를 벗어나는 경우에 결제 요청 신호를 전송할 수도 있으며, 이와 달리 특정 상품 판매 장소의 CCTV를 사용자의 움직임을 분석하여 사용자가 특정 위치에 도달하거나 상품 판매 장소를 벗어나는 경우에 결제 요청 신호를 전송할 수도 있다.Thereafter, the seller terminal 200 may transmit a payment request signal to the user terminal 100 (S360). For example, the seller terminal 200 may transmit a payment request signal when the user terminal 100 leaves the specific product sales place based on the location information of the user terminal 100 , and in contrast, the CCTV of the specific product sales place. can also transmit a payment request signal when the user arrives at a specific location or leaves the product sales place by analyzing the user's movement.

사용자 단말기(100)는 판매자 단말기(200)로부터 결제 요청 신호를 수신한 이후, 구매 대상으로 인식된 상품들에 대한 결제를 수행할 수 있다(S370). 다른 실시예에 따르면, 판매자 단말기(200)로부터 결제 요청 신호를 수신하지 않은 상태더라도, 사용자가 사용자 단말기(100)를 조작하여 결제를 진행할 수도 있다.After receiving the payment request signal from the seller terminal 200, the user terminal 100 may perform payment for products recognized as purchase targets (S370). According to another embodiment, even if the payment request signal is not received from the seller terminal 200 , the user may operate the user terminal 100 to proceed with the payment.

도 4은 본 발명의 다른 실시예에 따른 사용자 단말기(100)가 본 발명의 결제 시스템(10)을 활용하여 상품을 인식하고 결제하는 방식을 설명한 도면이다.4 is a diagram illustrating a method in which the user terminal 100 uses the payment system 10 of the present invention to recognize and pay for a product according to another embodiment of the present invention.

도 4에서는 별도의 상품 인식 기기(300)와 존재하여 사용자가 구매하기 위해 소지하는 상품들에 대한 인식을 상품 인식 기기(300)가 수행할 수 있다. 이와 달리 본 발명의 다른 실시예에 따르면, 상품 인식 기기(300)와 판매자 단말기(200)는 하나의 기기로 통합되어 동작할 수도 있다. In FIG. 4 , the product recognition device 300 may recognize products possessed by the user to purchase because it exists with a separate product recognition device 300 . Alternatively, according to another embodiment of the present invention, the product recognition device 300 and the seller terminal 200 may be integrated into one device to operate.

도 4를 참조하면, 사용자가 오프라인 상점 등에서 쇼핑을 할 때에 상품 인식 기기(300)는 사용자가 구매하고자 하는 상품에 대한 이미지를 촬영하고(S410), 이미지 분석을 통해 구매 대상 상품은 인식할 수 있다(S420). 일 실시예에 따르면, 이와 같은 이미지 분석에는 인공지능 엔진을 활용한 분석 기법이 활용될 수도 있다.Referring to FIG. 4 , when the user is shopping in an offline store, etc., the product recognition device 300 takes an image of the product the user wants to purchase ( S410 ), and can recognize the purchase target product through image analysis. (S420). According to an embodiment, an analysis technique using an artificial intelligence engine may be used for such image analysis.

상품 인식 기기(300)는 구매 대상 상품으로 인식된 상품들에 대한 정보를 판매자 단말기(200)로 전송할 수 있다(S430).The product recognition device 300 may transmit information on products recognized as purchase target products to the seller terminal 200 (S430).

일 실시예에 따른 판매자 단말기(200)는 사용자 단말기(100)에서 전송하는 위치 정보를 통해 사용자 단말기(100)의 위치를 인식하고(S440), 추가적으로 사용자의 생체 정보를 인식할 수 있다(S450). 이후, 판매자 단말기(200)는 인식된 생체 정보를, 위치 정보를 통해 인식된 사용자 단말기(100) 상에 전송할 수 있으며, 상품 인식 기기(300)로부터 수신한 인식된 상품에 대한 정보를 함께 사용자 단말기(100)로 전송할 수 있다(S460).The seller terminal 200 according to an embodiment may recognize the location of the user terminal 100 through the location information transmitted from the user terminal 100 (S440), and additionally recognize the user's biometric information (S450) . Thereafter, the seller terminal 200 may transmit the recognized biometric information to the user terminal 100 recognized through the location information, and the information about the recognized product received from the product recognition device 300 together with the user terminal It can be transmitted to (100) (S460).

이후, 판매자 단말기(200)는 근거리 통신망 등을 통해 연결된 게이트로부터 사용자 단말기(100)가 통과했다는 통과 신호를 수신할 수 있다(S470). 이와 달리, 게이트는 게이트 부근에 설치된 카메라 등을 통해 영상을 촬영하고 촬영된 영상에서 안면 이미지 등을 통해 사용자를 인식하고 인식된 사용자에 대한 정보를 판매자 단말기(200)로 전송할 수도 있다.Thereafter, the seller terminal 200 may receive a pass signal indicating that the user terminal 100 has passed from a gate connected through a local area network or the like (S470). Alternatively, the gate may take an image through a camera installed near the gate, recognize the user through a facial image, etc. in the captured image, and transmit information about the recognized user to the seller terminal 200 .

이후, 판매자 단말기(200)는 인식된 사용자 단말기(100)에 결제 요청 신호를 전송하고(S480), 사용자 단말기(100)는 그에 따라 S460 단계에서 수신한 정보에 포함된 구매 대상 상품들에 대한 결제를 수행할 수 있다(S490).Thereafter, the seller terminal 200 transmits a payment request signal to the recognized user terminal 100 (S480), and the user terminal 100 accordingly pays for the purchase target products included in the information received in step S460. can be performed (S490).

이와 같이, 본 발명의 다양한 실시예들에 따르면, 다양한 방식으로 사용자, 사용자 단말기(100) 및 사용자가 구매하고자 하는 상품들에 대한 인식이 자동으로 수행될 수 있으며, 사용자가 구매하고자 하는 상품을 모두 선택하고 특정 위치로 이동하거나 특정 위치를 벗어나는 경우 선택한 상품들에 대한 결제가 수행될 수 있다.As such, according to various embodiments of the present invention, recognition of the user, the user terminal 100, and the products the user wants to purchase can be automatically performed in various ways, and all products the user wants to purchase can be automatically recognized. When selecting and moving to a specific location or leaving a specific location, payment for the selected products may be performed.

본 발명의 실시예와 관련하여 설명된 방법 또는 알고리즘의 단계들은 하드웨어로 직접 구현되거나, 하드웨어에 의해 실행되는 소프트웨어 모듈로 구현되거나, 또는 이들의 결합에 의해 구현될 수 있다. 소프트웨어 모듈은 RAM(Random Access Memory), ROM(Read Only Memory), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM), 플래시 메모리(Flash Memory), 하드 디스크, 착탈형 디스크, CD-ROM, 또는 본 발명이 속하는 기술 분야에서 잘 알려진 임의의 형태의 컴퓨터 판독가능 기록매체에 상주할 수도 있다.The steps of a method or algorithm described in relation to an embodiment of the present invention may be implemented directly in hardware, as a software module executed by hardware, or by a combination thereof. A software module may contain random access memory (RAM), read only memory (ROM), erasable programmable ROM (EPROM), electrically erasable programmable ROM (EEPROM), flash memory, hard disk, removable disk, CD-ROM, or It may reside in any type of computer-readable recording medium well known in the art to which the present invention pertains.

이상, 첨부된 도면을 참조로 하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야의 통상의 기술자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며, 제한적이 아닌 것으로 이해해야만 한다. As mentioned above, although embodiments of the present invention have been described with reference to the accompanying drawings, those skilled in the art to which the present invention pertains can realize that the present invention can be embodied in other specific forms without changing its technical spirit or essential features. you will be able to understand Therefore, it should be understood that the embodiments described above are illustrative in all respects and not restrictive.

10: 결제 시스템
100: 사용자 단말기
200: 판매자 단말기
300: 상품 인식 기기
400: 관리 서버
500: 외부 서버10: Payment system
100: user terminal
200: merchant terminal
300: product recognition device
400: management server
500: external server

Claims (16)

결제 시스템이 사용자 단말기를 활용한 결제를 수행하는 방법에 있어서,
상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계;
사용자의 생체 정보를 인식한 판매자 단말기가 상기 사용자 단말기로 상기 사용자의 생체 정보를 전송하는 단계;
상기 사용자 단말기가 상기 판매자 단말기로부터 수신한 상기 사용자의 생체 정보와 상기 사용자 단말기 상에 미리 저장된 생체 정보의 일치 여부를 통해 본인 인증을 수행하는 단계; 및
상기 사용자 단말기 상에서 본인 인증이 성공적으로 수행된 경우, 상기 사용자 단말기가 상기 사용자 단말기를 통해 인식된 상품에 대한 결제를 수행하는 단계를 포함하며,
상기 판매자 단말기는,
상기 판매자 단말기와 연결된 게이트를 통과하는 상기 사용자 단말기를 인식하여 상기 사용자 단말기에 결제 요청 신호를 전송하고,
상기 사용자 단말기는,
상기 판매자 단말기로부터 수신한 결제 요청 신호에 기반하여 상품에 대한 결제를 수행하며,
상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계는,
기 정해진 상품 보관 수단 내에 위치한 상품만을 인식하는 것을 특징으로 하며,
상기 사용자 단말기에 탑재된 이미지 촬영부에 의해 바코드 또는 QR 코드가 인식된 상품은 바코드 또는 QR코드를 통해 상품의 종류를 특정하고, 수집된 이미지 상에서 바코드 또는 QR코드가 인식되지 않는 상품은 상품의 외형 이미지 분석을 통해 상품의 종류를 특정하는 것인, 결제 시스템의 결제 수행 방법.
In a method for a payment system to perform a payment using a user terminal,
recognizing, by the user terminal, a product to be purchased;
transmitting, by the seller terminal recognizing the user's biometric information, the user's biometric information to the user terminal;
performing, by the user terminal, identity authentication through whether the biometric information of the user received from the seller terminal matches the biometric information stored in advance on the user terminal; and
When the user authentication is successfully performed on the user terminal, the user terminal comprising the step of performing a payment for the recognized product through the user terminal,
The seller terminal,
Transmitting a payment request signal to the user terminal by recognizing the user terminal passing through the gate connected to the seller terminal,
The user terminal,
Based on the payment request signal received from the seller terminal, the payment for the product is performed,
The step of recognizing the product to be purchased by the user terminal comprises:
It is characterized in that only products located in a predetermined product storage means are recognized,
For products whose barcode or QR code is recognized by the image capturing unit mounted on the user terminal, the type of product is specified through the barcode or QR code, and for products whose barcode or QR code is not recognized on the collected images, the appearance of the product A method of performing a payment in a payment system, which specifies the type of product through image analysis.
 제1항에 있어서,
상기 생체 정보는 지문 정보, 홍채 정보, 안면 이미지 정보, 정맥 정보, 심전도 정보 또는 음성 정보 중 어느 하나 이상을 포함하는, 결제 시스템의 결제 수행 방법.
According to claim 1,
The biometric information includes any one or more of fingerprint information, iris information, facial image information, vein information, electrocardiogram information, and voice information.
 삭제delete 삭제delete 제1항에 있어서,
상기 사용자 단말기가 수집된 상품의 외형 이미지를 분석하여 상품의 종류 및 수량을 특정하는 단계는,
상기 사용자 단말기에 탑재된 인공지능 엔진에 의해 수행되는 것을 특징으로 하며,
상기 인공지능 엔진은 상품의 외형 이미지를 통해 학습을 수행하는 것인, 결제 시스템의 결제 수행 방법.
According to claim 1,
The step of specifying the type and quantity of the product by analyzing the external image of the collected product by the user terminal,
It is characterized in that it is performed by an artificial intelligence engine mounted on the user terminal,
The artificial intelligence engine is to perform learning through the external image of the product, the payment method of the payment system.
 삭제delete 삭제delete 제1항에 있어서,
상기 상품 보관 수단은,
카트, 바구니 또는 가방인 것을 특징으로 하는, 결제 시스템의 결제 수행 방법.
According to claim 1,
The product storage means,
A method of performing payment in a payment system, characterized in that it is a cart, basket or bag.
 제1항에 있어서,
상기 사용자 단말기는,
구매 대상이 되는 상품으로 인식된 하나 이상의 상품의 가격 총합에 대한 정보를 디스플레이 장치 또는 사운드 생성 장치를 통해 제공하는 것을 특징으로 하는, 결제 시스템의 결제 수행 방법.
According to claim 1,
The user terminal,
A method of performing a payment in a payment system, characterized in that information on the total price of one or more products recognized as purchase target products is provided through a display device or a sound generating device.
 삭제delete 삭제delete 제1항에 있어서,
상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계는,
상기 판매자 단말기와 연결된 상품 인식 기기로부터 상품 인식 정보를 수신하는 방식인 것을 특징으로 하는, 결제 시스템의 결제 수행 방법.
According to claim 1,
The step of recognizing the product to be purchased by the user terminal comprises:
A method of performing payment in a payment system, characterized in that the method is a method of receiving product recognition information from a product recognition device connected to the merchant terminal.
 제1항에 있어서,
상기 사용자 단말기와 상기 판매자 단말기 간의 통신은,
UWB(Ultra wideband), NFC(Near Field Communication), 블루투스(Bluetooth), 초음파, MAT 또는 비콘 중 적어도 어느 하나의 방식을 활용하여 수행되는 것인, 결제 시스템의 결제 수행 방법.
According to claim 1,
Communication between the user terminal and the seller terminal,
UWB (Ultra wideband), NFC (Near Field Communication), Bluetooth (Bluetooth), ultrasound, MAT, or a method of performing payment of a payment system that is performed by utilizing at least one method of a beacon.
 제1항에 있어서,
상기 사용자 단말기가 상기 사용자 단말기를 통해 인식된 상품에 대한 결제를 수행하는 단계는,
상기 사용자 단말기가, 구매 대상으로 인식된 적어도 하나 이상의 상품들에 대한 정보와 결제 수단 정보를 포함하는 QR코드 또는 바코드를 생성하는 단계; 및
상기 QR코드 또는 바코드를 인식한 상기 판매자 단말기가, 상기 QR코드 또는 바코드에 포함된 상품 정보 및 결제 수단 정보를 기초로 결제를 수행하는 단계를 더 포함하는, 결제 시스템의 결제 수행 방법.
According to claim 1,
The step of the user terminal performing payment for the product recognized through the user terminal,
generating, by the user terminal, a QR code or barcode including information on at least one or more products recognized as purchase targets and payment method information; and
The method of performing payment in a payment system, further comprising, by the merchant terminal recognizing the QR code or barcode, performing payment based on product information and payment method information included in the QR code or barcode.
 결제 시스템이 사용자 단말기를 활용한 결제를 수행하는 방법에 있어서,
상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계;
상기 사용자 단말기가 사용자의 생체 정보를 인식하는 단계;
상기 사용자 단말기가 상기 인식된 생체 정보와 상기 사용자 단말기 상에 미리 저장된 생체 정보의 일치 여부를 통해 본인 인증을 수행하는 단계; 및
상기 사용자 단말기 상에서 본인 인증이 성공적으로 수행된 경우, 상기 사용자 단말기가 상기 사용자 단말기를 통해 인식된 상품에 대한 결제를 수행하는 단계를 포함하며,
상기 판매자 단말기는,
상기 판매자 단말기와 연결된 게이트를 통과하는 상기 사용자 단말기를 인식하여 상기 사용자 단말기에 결제 요청 신호를 전송하고,
상기 사용자 단말기는,
상기 판매자 단말기로부터 수신한 결제 요청 신호에 기반하여 상품에 대한 결제를 수행하며,
상기 사용자 단말기가 구매 대상이 되는 상품을 인식하는 단계는,
기 정해진 상품 보관 수단 내에 위치한 상품만을 인식하는 것을 특징으로 하며,
상기 사용자 단말기에 탑재된 이미지 촬영부에 의해 바코드 또는 QR 코드가 인식된 상품은 바코드 또는 QR코드를 통해 상품의 종류를 특정하고, 수집된 이미지 상에서 바코드 또는 QR코드가 인식되지 않는 상품은 상품의 외형 이미지 분석을 통해 상품의 종류를 특정하는 것인, 결제 시스템의 결제 수행 방법.
In a method for a payment system to perform a payment using a user terminal,
recognizing, by the user terminal, a product to be purchased;
recognizing, by the user terminal, the user's biometric information;
performing, by the user terminal, identity authentication through whether the recognized biometric information and biometric information stored in advance on the user terminal match; and
When the user authentication is successfully performed on the user terminal, the user terminal comprising the step of performing a payment for the recognized product through the user terminal,
The seller terminal,
Transmitting a payment request signal to the user terminal by recognizing the user terminal passing through the gate connected to the seller terminal,
The user terminal,
Based on the payment request signal received from the seller terminal, payment for the product is performed,
The step of recognizing the product to be purchased by the user terminal comprises:
It is characterized in that only the product located in the predetermined product storage means is recognized,
For products whose barcode or QR code is recognized by the image capturing unit mounted on the user terminal, the type of product is specified through the barcode or QR code, and for products whose barcode or QR code is not recognized on the collected images, the appearance of the product A method of performing payment in a payment system, which specifies the type of product through image analysis.
 사용자 단말기를 활용한 결제 시스템에 있어서,
사용자의 생체 정보를 인식하여 사용자 단말기로 상기 사용자의 생체 정보를 전송하는 판매자 단말기; 및
구매 대상이 되는 상품을 인식하고, 상기 판매자 단말기로부터 수신한 상기 사용자의 생체 정보와 미리 내부에 저장된 생체 정보의 일치 여부를 통해 본인 인증을 수행하며, 본인 인증이 성공적으로 수행된 경우 인식된 상품에 대한 결제를 수행하는 구매자 단말기를 포함하며,
상기 판매자 단말기는,
상기 판매자 단말기와 연결된 게이트를 통과하는 상기 사용자 단말기를 인식하여 상기 사용자 단말기에 결제 요청 신호를 전송하고,
상기 사용자 단말기는,
상기 판매자 단말기로부터 수신한 결제 요청 신호에 기반하여 상품에 대한 결제를 수행하며,
상기 사용자 단말기는 구매 대상이 되는 상품을 인식하는 과정에서, 기 정해진 상품 보관 수단 내에 위치한 상품만을 인식하고,
상기 사용자 단말기는, 상기 사용자 단말기에 탑재된 이미지 촬영부에 의해 바코드 또는 QR 코드가 인식된 상품은 바코드 또는 QR 코드를 통해 상품의 종류를 특정하고, 수집된 이미지 상에서 바코드 또는 QR 코드가 인식되지 않는 상품은 상품의 외형 이미지 분석을 통해 상품의 종류를 특정하는, 결제 시스템.
In the payment system using a user terminal,
a seller terminal for recognizing the user's biometric information and transmitting the user's biometric information to the user terminal; and
Recognizes the product to be purchased, performs identity authentication through whether the user's biometric information received from the seller terminal matches the previously stored biometric information, and if the identity authentication is successful, including a buyer terminal that performs payment for
The seller terminal,
Transmitting a payment request signal to the user terminal by recognizing the user terminal passing through the gate connected to the seller terminal,
The user terminal,
Based on the payment request signal received from the seller terminal, payment for the product is performed,
In the process of recognizing a product to be purchased, the user terminal recognizes only a product located in a predetermined product storage means,
The user terminal, the barcode or QR code recognized by the image capturing unit mounted on the user terminal, specifies the type of product through the barcode or QR code, and the barcode or QR code is not recognized on the collected image A product is a payment system that specifies the type of product through the analysis of the product's external image.
KR1020210047635A 2021-04-13 2021-04-13 Payment method and payment system using user terminal KR102334095B1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020210047635A KR102334095B1 (en) 2021-04-13 2021-04-13 Payment method and payment system using user terminal
EP22788426.9A EP4325410A1 (en) 2021-04-13 2022-04-13 Payment method and payment system using user terminal or dedicated terminal installed in product transfer means
PCT/KR2022/005330 WO2022220570A1 (en) 2021-04-13 2022-04-13 Payment method and payment system using user terminal or dedicated terminal installed in product transfer means

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210047635A KR102334095B1 (en) 2021-04-13 2021-04-13 Payment method and payment system using user terminal

Publications (1)

Publication Number Publication Date
KR102334095B1 true KR102334095B1 (en) 2021-12-02

Family

ID=78867049

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210047635A KR102334095B1 (en) 2021-04-13 2021-04-13 Payment method and payment system using user terminal

Country Status (1)

Country Link
KR (1) KR102334095B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022220570A1 (en) * 2021-04-13 2022-10-20 주식회사 고스트패스 Payment method and payment system using user terminal or dedicated terminal installed in product transfer means
KR102463246B1 (en) * 2021-12-13 2022-11-04 주식회사 고스트패스 Identity authentication method and system using vehicle and biometric information
KR102616999B1 (en) * 2023-09-22 2023-12-27 주식회사 굿샵 Automated unmanned liquor sales system and sales data collection device using vision technology
KR102644247B1 (en) * 2023-06-12 2024-03-06 주식회사 플릿크래프트 Apparatus and method for providing smart magazines capable of providing content for product description through QR code recognition based on artificial intelligence

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150108576A (en) * 2014-03-18 2015-09-30 에스케이플래닛 주식회사 Method for electronic payment using recognition of pupil, apparatus therefor, and recording medium therefor
KR20190090732A (en) * 2019-05-29 2019-08-02 엘지전자 주식회사 Method for payment based on biometrics, user equipment and system for payment using the same
KR20200001948A (en) * 2018-06-28 2020-01-07 김호환 Purchasing system based on voice recognition and barcode and purchasing method using the same
KR102156184B1 (en) * 2019-11-01 2020-09-15 이선관 Electronic device for identity authentication using biometric information of user and method for operation thereof
KR20210010598A (en) 2021-01-14 2021-01-27 (주)버텍스아이디 Self-payment system
KR20210015277A (en) * 2019-08-01 2021-02-10 주식회사 신세계아이앤씨 System and method for relaying smart store

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150108576A (en) * 2014-03-18 2015-09-30 에스케이플래닛 주식회사 Method for electronic payment using recognition of pupil, apparatus therefor, and recording medium therefor
KR20200001948A (en) * 2018-06-28 2020-01-07 김호환 Purchasing system based on voice recognition and barcode and purchasing method using the same
KR20190090732A (en) * 2019-05-29 2019-08-02 엘지전자 주식회사 Method for payment based on biometrics, user equipment and system for payment using the same
KR20210015277A (en) * 2019-08-01 2021-02-10 주식회사 신세계아이앤씨 System and method for relaying smart store
KR102156184B1 (en) * 2019-11-01 2020-09-15 이선관 Electronic device for identity authentication using biometric information of user and method for operation thereof
KR20210010598A (en) 2021-01-14 2021-01-27 (주)버텍스아이디 Self-payment system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022220570A1 (en) * 2021-04-13 2022-10-20 주식회사 고스트패스 Payment method and payment system using user terminal or dedicated terminal installed in product transfer means
KR102463246B1 (en) * 2021-12-13 2022-11-04 주식회사 고스트패스 Identity authentication method and system using vehicle and biometric information
KR102644247B1 (en) * 2023-06-12 2024-03-06 주식회사 플릿크래프트 Apparatus and method for providing smart magazines capable of providing content for product description through QR code recognition based on artificial intelligence
KR102616999B1 (en) * 2023-09-22 2023-12-27 주식회사 굿샵 Automated unmanned liquor sales system and sales data collection device using vision technology

Similar Documents

Publication Publication Date Title
KR102334095B1 (en) Payment method and payment system using user terminal
US11847689B2 (en) Dynamic customer checkout experience within an automated shopping environment
US11593783B2 (en) Systems and methods of product recognition through multi-model image processing
KR102192884B1 (en) Method and device for determining order information
US11449869B2 (en) Method and system for facilitating payment based on facial recognition
US20160275483A1 (en) One gesture, one blink, and one-touch payment and buying using haptic control via messaging and calling multimedia system on mobile and wearable device, currency token interface, point of sale device, and electronic payment card
US11423476B1 (en) Customized financing based on transaction information
US11830287B2 (en) Method and system for customizing user experience
US20160140631A1 (en) Method, medium, and system for session based shopping
US20180047007A1 (en) System and method for paying for goods at a door
TWM560067U (en) Smart shop system
US20210158365A1 (en) Sale authorization system
US20110202425A1 (en) Self checkout system
US20230306428A1 (en) Multi-Computer System with Dynamic Authentication for Optimized Queue Management Based on Facial Recognition
EP4325410A1 (en) Payment method and payment system using user terminal or dedicated terminal installed in product transfer means
KR20220125650A (en) Simple payment system using user terminal and operation method thereof
US20140172641A1 (en) SYSTEMS AND METHODS FOR IDENTIFICATION AND/OR ACQUISITION OF A PRODUCT(s) OR ITEM(s)
US20210319452A1 (en) Intelligent payment using augmented reality
US20180287851A1 (en) Data Transfer, Over Session or Connection, and Between Computing Device and Server Associated with One or More Routing Networks in Response to Detecting Activity
US10798007B2 (en) Data transfer, over session or connection, and between computing device and server associated with a routing network for modifying one or more parameters of the routing network
CN117157655A (en) Payment method and payment system using user terminal or dedicated terminal mounted on commodity transportation means
US10716060B2 (en) Data transfer between computing device and user device at different locations and over session or connection to display one or more routing networks to use
US10601934B2 (en) Data transfer, over session or connection, and between computing device and one or more servers for transmitting data to a third party computing device
CN107862521A (en) A kind of supermarket shopping payment system and method based on Internet of Things
Wójtowicz et al. Payment authorization in smart environments: security-convenience balance

Legal Events

Date Code Title Description
GRNT Written decision to grant