KR102653182B1 - 무인 결제에 따른 결제 단축 시간을 산출하는 무인 결제 카트 장치 - Google Patents

무인 결제에 따른 결제 단축 시간을 산출하는 무인 결제 카트 장치 Download PDF

Info

Publication number
KR102653182B1
KR102653182B1 KR1020240018960A KR20240018960A KR102653182B1 KR 102653182 B1 KR102653182 B1 KR 102653182B1 KR 1020240018960 A KR1020240018960 A KR 1020240018960A KR 20240018960 A KR20240018960 A KR 20240018960A KR 102653182 B1 KR102653182 B1 KR 102653182B1
Authority
KR
South Korea
Prior art keywords
payment
product
information
processor
entry
Prior art date
Application number
KR1020240018960A
Other languages
English (en)
Inventor
이현
Original Assignee
이현
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이현 filed Critical 이현
Priority to KR1020240018960A priority Critical patent/KR102653182B1/ko
Application granted granted Critical
Publication of KR102653182B1 publication Critical patent/KR102653182B1/ko

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62B—HAND-PROPELLED VEHICLES, e.g. HAND CARTS OR PERAMBULATORS; SLEDGES
    • B62B5/00—Accessories or details specially adapted for hand carts
    • B62B5/0096—Identification of the cart or merchandise, e.g. by barcodes or radio frequency identification [RFID]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62B—HAND-PROPELLED VEHICLES, e.g. HAND CARTS OR PERAMBULATORS; SLEDGES
    • B62B3/00—Hand carts having more than one axis carrying transport wheels; Steering devices therefor; Equipment therefor
    • B62B3/14—Hand carts having more than one axis carrying transport wheels; Steering devices therefor; Equipment therefor characterised by provisions for nesting or stacking, e.g. shopping trolleys
    • B62B3/1408—Display devices mounted on it, e.g. advertisement displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62B—HAND-PROPELLED VEHICLES, e.g. HAND CARTS OR PERAMBULATORS; SLEDGES
    • B62B3/00—Hand carts having more than one axis carrying transport wheels; Steering devices therefor; Equipment therefor
    • B62B3/14—Hand carts having more than one axis carrying transport wheels; Steering devices therefor; Equipment therefor characterised by provisions for nesting or stacking, e.g. shopping trolleys
    • B62B3/1428—Adaptations for calculators, memory aids or reading aids
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/14—Payment architectures specially adapted for billing systems
    • G06Q20/145—Payments according to the detected use or quantity
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0633—Lists, e.g. purchase orders, compilation or processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/64—Three-dimensional objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Finance (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Cash Registers Or Receiving Machines (AREA)
  • Marketing (AREA)

Abstract

본 발명에 따른 비전 센싱을 이용한 무인 결제 카트 장치는 상품이 수용되는 수용 공간을 형성하는 카트 프레임; 상기 수용 공간의 상부 영역으로 사용자의 신체 및 상품 중 하나 이상이 진입하는 것을 감지하고, 상기 수용 공간의 상부 영역으로 진입했던 사용자의 신체 및 상품 중 하나 이상이 상기 수용 공간의 상부 영역으로부터 이탈하는 것을 감지하는 감지 센서; 상기 수용 공간 및 상기 수용 공간의 상부 영역 중 하나 이상을 촬영하여 촬영 이미지를 생성하는 카메라; 및 상기 진입이 감지된 진입 시점부터 상기 이탈이 감지된 이탈 시점까지의 상품 반출입 기간 동안에 생성된 촬영 이미지로부터 상품 이미지를 식별하고, 식별된 상기 상품 이미지에 기초하여 상기 수용 공간에 수용된 상품의 상품 정보를 결정하고, 상기 상품 정보를 취합하여 결제 상품 목록으로 생성하는 프로세서;를 포함할 수 있다.

Description

무인 결제에 따른 결제 단축 시간을 산출하는 무인 결제 카트 장치{Cart apparatus for paymenting unattended and calculating payment time reduction due to unmanned payment}
본 발명은 비전 센싱을 이용한 무인 결제 카트 장치 및 이를 이용한 무인 결제 시스템에 관한 것으로서, 더욱 상세하게는 카트에 형성된 수용 공간의 상부 영역에 대해 상품이 진입 또는 이탈하는 것을 감지하고, 진입 시점부터 이탈 시점까지의 상품 반출입 기간 동안의 촬영 이미지로부터 상품 이미지를 식별하여 결제 상품 목록을 생성함으로써, 무인으로 상품 결제를 수행할 수 있는 비전 센싱을 이용한 무인 결제 카트 장치 및 이를 이용한 무인 결제 시스템에 관한 것이다.
일반적으로, 백화점이나 대형 할인점 등에서는 매장 관리의 효율성 증대와 고객의 쇼핑 편의 증진을 위하여 매장에 전시된 모든 상품에 바코드를 부착하여 계산을 보다 바른 시간에 처리할 수 있도록 되어 있다.
이렇게 각 상품에 부착된 바코드에는 그 상품의 명칭, 포장 규격, 가격 등에 대한 정보가 수록되어 있으며, 이러한 바코드가 부착된 각 상품을 고객이 쇼핑 카트에 담아서 계산대로 이동하여 고객이 구매한 상품값을 계산하기 위해서는 각 상품에 부착된 바코드를 바코드 리더로 읽어서 상품의 종류, 가격 등에 대한 정보를 파악하여 자동으로 상품값을 계산하도록 되어 있다.
그런데, 대형 할인점의 경우에는 할인점을 이용하는 고객의 수가 많고, 특히 쇼핑객이 많이 몰리는 시간에는 계산대에서 계산을 위하여 기다리는 고객의 수가 너무 많아서 고객이 기다리는 시간이 길어지는 문제점이 있었다.
그리고, 할인점 매장에 전시된 각 상품들에는 그 상품의 명칭 가격이 표시되어 있는 경우가 대부분이지만, 경우에 따라서는 가격이 표시되지 않은 상품이 진열대에 진열되는 경우도 있어서 고객이 그 상품의 구매를 망설이는 경우가 많다.
이러한 문제를 해결하기 위해서, 종래에는 쇼핑 카트에 장착된 이동용 바코드 계산 시스템이 고안되었는 바, 상품에 부착된 바코드의 정보를 판독하는 바코드 리더를 통해 판독된 상품 정보를 디스플레이를 통해 고객에게 표시해 주고, 스피커를 통해 음성 안내를 출력하며, 키 패드를 통해 상품 정보 판독 및 계산을 위한 조작을 행하고, 바코드 리더를 이용하여 파악한 고객이 구입한 상품에 대한 데이터를 송신부를 통해 계산대의 수신부로 송신하는 기술이 개시되어 있다.
그러나, 상술한 선행문헌에 개시된 기술에서는 사용자가 의도적으로 도난 등을 위해 바코드를 표시하지 않고 추가 수량이나 물품을 카트에 담더라도 확인할 수 있는 방법이 없다.
또한, 의도적이 아니라고 하더라도 동행하는 일행이나 아이와 같이 바코드 리더로 스캔하지 않고 카트에 담게 되면, 의도치 않게 도난 의심을 받을 수 있다.
이에 따라, 쇼핑 카트에 상품을 담는 동작만으로도 상품을 자동으로 계산할 수 있는 기술이 요구되고 있다.
한국공개특허 제10-2014-0122629호
본 발명의 목적은, 카트에 형성된 수용 공간의 상부 영역에 대해 상품이 진입 또는 이탈하는 것을 감지하고, 진입 시점부터 이탈 시점까지의 상품 반출입 기간 동안의 촬영 이미지로부터 상품 이미지를 식별하여 결제 상품 목록을 생성함으로써, 무인으로 상품 결제를 수행할 수 있는 비전 센싱을 이용한 무인 결제 카트 장치 및 이를 이용한 무인 결제 시스템을 제공하고자 한다.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있고, 본 발명의 실시예에 의해 보다 분명하게 이해될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
본 발명에 따른 비전 센싱을 이용한 무인 결제 카트 장치는 상품이 수용되는 수용 공간을 형성하는 카트 프레임; 상기 수용 공간의 상부 영역으로 사용자의 신체 및 상품 중 하나 이상이 진입하는 것을 감지하고, 상기 수용 공간의 상부 영역으로 진입했던 사용자의 신체 및 상품 중 하나 이상이 상기 수용 공간의 상부 영역으로부터 이탈하는 것을 감지하는 감지 센서; 상기 수용 공간 및 상기 수용 공간의 상부 영역 중 하나 이상을 촬영하여 촬영 이미지를 생성하는 카메라; 및 상기 진입이 감지된 진입 시점부터 상기 이탈이 감지된 이탈 시점까지의 상품 반출입 기간 동안에 생성된 촬영 이미지로부터 상품 이미지를 식별하고, 식별된 상기 상품 이미지에 기초하여 상기 수용 공간에 수용된 상품의 상품 정보를 결정하고, 상기 상품 정보를 취합하여 결제 상품 목록으로 생성하는 프로세서;를 포함할 수 있다.
상기 프로세서는 상기 카트 프레임이 결제 영역에 위치하면 상품의 결제를 수행할 수 있는 결제 장치로 상기 결제 상품 목록을 송신하도록 통신부를 제어할 수 있다.
상기 프로세서는 상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 제1 상품의 상품 이미지가 식별되고 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 상기 제1 상품의 상품 이미지가 식별되지 않으면, 상기 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상기 제1 상품의 상품 이미지를 분석하여 상기 제1 상품의 제1 상품 정보를 결정하고, 상기 제1 상품 정보를 상기 결제 상품 목록에 추가시킬 수 있다.
상기 프로세서는 상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 식별되지 않았던 제2 상품의 상품 이미지가 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 식별되면, 상기 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상기 제2 상품의 상품 이미지를 분석하여 상기 제2 상품의 제2 상품 정보를 결정하고, 상기 제2 상품 정보를 상기 결제 상품 목록에서 삭제시킬 수 있다.
상기 프로세서는 상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 제3 상품의 상품 이미지가 식별되며 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 상기 제3 상품의 상품 이미지가 식별되지 않고, 상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 식별되지 않았던 제4 상품의 상품 이미지가 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 식별되면, 상기 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상기 제3 상품의 상품 이미지와 상기 제4 상품의 상품 이미지를 각각 분석하여 상기 제3 상품의 제3 상품 정보와 상기 제4 상품의 제4 상품 정보 각각을 결정하고, 상기 제3 상품 정보를 상기 결제 상품 목록에 추가시키고, 상기 제4 상품 정보를 상기 결제 상품 목록에서 삭제시킬 수 있다.
상기 프로세서는 상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 식별된 상품 이미지가 없고 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 식별된 상품 이미지도 없으면, 상기 결제 상품 목록을 유지시킬 수 있다.
본 발명에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템은 상기 비전 센싱을 이용한 무인 결제 카트 장치; 및 결제 영역 내에서 상기 비전 센싱을 이용한 무인 결제 카트 장치가 감지되면, 상기 비전 센싱을 이용한 무인 결제 카트 장치로 결제 상품 목록을 요청하는 목록 요청 신호와 사용자의 결제 정보를 요청하는 결제 정보 요청 신호를 송신하고, 상기 비전 센싱을 이용한 무인 결제 카트 장치로부터 상기 결제 상품 목록과 상기 결제 정보가 수신되면, 상기 결제 상품 목록에 포함된 상품 정보와 상기 결제 정보를 이용하여 결제를 수행하는 결제 장치;를 포함할 수 있다.
본 발명에 따르면 카트에 형성된 수용 공간의 상부 영역에 대해 상품이 진입 또는 이탈하는 것을 감지하고, 진입 시점부터 이탈 시점까지의 상품 반출입 기간 동안의 촬영 이미지로부터 상품 이미지를 식별하여 결제 상품 목록을 생성함으로써, 무인으로 상품 결제를 정확하고 신속하게 수행할 수 있다.
도 1은 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템을 도시한 도면이다.
도 2는 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템의 구성 블록도이다.
도 3 및 도 4는 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치에서 결제 정보를 획득하는 과정을 도시한 도면이다.
도 5 및 도 6은 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치에 상품이 반입되는 과정을 도시한 도면이다.
도 7 및 도 8은 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치에서 상품이 반출되는 과정을 도시한 도면이다.
도 9는 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템을 통해 무인 결제가 수행되는 과정을 설명하기 위한 도면이다.
이하, 본 발명의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 발명을 특정한 실시 형 태에 대해 한정하려는 것이 아니며, 본 발명의 실시 예의 다양한 변경(modification), 균등물(equivalent), 및/또는 대체물(alternative)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대 해서는 유사한 참조 부호가 사용될 수 있다.
본 문서에서, "가진다", "가질 수 있다", "포함한다", 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 작동, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 문서에서, "A 또는 B", "A 또는/및 B 중 적어도 하나", 또는 "A 또는/및 B 중 하나 또는 그 이상" 등의 표현 은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B", "A 및 B 중 적어도 하나", 또는 "A 또는 B 중 적어도 하나"는 (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
본 문서에서 사용된 "제1", "제2", "첫째", 또는 "둘째" 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중 요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 예를 들면, 제1 사용자 기기와 제2 사용자 기기는 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 문서에 기재된 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 바꾸어 명명될 수 있다.
어떤 구성요소(예: 제1 구성요소)가 다른 구성요소(예: 제2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제1 구성요소)가 다른 구성 요소(예: 제2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합 한(suitable for)", "~하는 능력을 가지는(having the capacity to)", "~하도록 설계된(designed to)", "~하도록 변경된(adapted to)", "~하도록 만들어진(made to)", 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성(또는 설정)된"은 하드웨어적으로 "특별히 설계된(specifically designed to)"것 만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성 (또는 설정)된 제어부"는 해당 작동을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 작동들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
특히, 본 명세서에서, “~장치”는 중앙처리장치(Central Processing Unit (CPU)), 애플리케이션 프로세서(Application Processor (AP)) 및 커뮤니케이션 프로세서(Communication Processor (CP)) 중 하나 이상을 포함할 수 있다.
본 명세서에서, “~장치”는 적어도 하나의 프로세서를 포함하는 모든 종류의 하드웨어 장치를 의미하는 것이고, 실시 예에 따라 해당 하드웨어 장치에서 작동하는 소프트웨어적 구성도 포괄하는 의미로서 이해될 수 있다. 예를 들어, “~장치”는 기계 구동 장치, 스마트폰, 태블릿 PC, 데스크톱, 노트북, 로봇 및 각 장치에서 구동되는 사용자 클라이언트 및 애플리케이션을 모두 포함하는 의미로서 이해될 수 있으며, 또한 이에 제한되는 것은 아니다.
본 문서에서 사용된 용어들은 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한 정하려는 의도가 아닐 수 있다. 단수의 표현은 컨텍스트 상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 문서에 기재된 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 문서에 사용된 용어들 중 일반적인 사전에 정의된 용어들은 관련 기술의 컨텍스트 상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 문서에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 문서에서 정의된 용어일지라도 본 문서의 실시 예들을 배제하도록 해석될 수 없다.
도 1은 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템을 도시한 도면이고, 도 2는 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템의 구성 블록도이다.
도 1 및 도 2를 참조하면, 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템은 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100) 및 결제 장치(200)를 포함할 수 있다.
본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)는 카트 프레임(170)에 의해 형성된 수용 공간에 수용된 상품들의 상품 정보를 취합하여 결제 상품 목록으로 생성할 수 있다.
이때, 비전 센싱을 이용한 무인 결제 카트 장치(100)는 비전 센싱을 이용하여 수용 공간에 수용된 상품들의 상품 정보를 결정하고, 결정된 상품 정보를 취합하여 결제 상품 목록으로 생성할 수 있다.
이때, 비전 센싱을 이용한 무인 결제 카트 장치(100)는 상품을 식별할 수 있는 상품 식별 정보 및 상품의 가격을 나타내는 상품 가격 정보가 포함된 상품 정보를 결정할 수 있다.
이후, 비전 센싱을 이용한 무인 결제 카트 장치(100)는 매장 내에 정해진 결제 영역에 위치하는 경우, 현재 수용 공간에 수용된 상품들만의 상품 정보가 취합된 결제 상품 목록을 결제 장치(200)로 송신할 수 있다.
또한, 비전 센싱을 이용한 무인 결제 카트 장치(100)는 매장 내에 정해진 결제 영역에 위치하는 경우, 사용자의 결제 정보를 결제 장치(200)로 송신할 수 있다.
이를 위해, 비전 센싱을 이용한 무인 결제 카트 장치(100)는 사용자에 의해 사용이 시작되면 최우선으로 사용자의 결제 정보를 획득할 수 있다.
이어서, 결제 장치(200)는 결제 영역에 위치한 비전 센싱을 이용한 무인 결제 카트 장치(100)로부터 결제 정보와 결제 상품 목록을 수신하고, 결제 정보와 결제 상품 목록을 이용하여 현재 수용 공간에 수용된 상품들만에 대해서 결제를 수행할 수 있다.
이하, 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)에 대해 구체적으로 설명하도록 한다.
도 3 및 도 4는 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치에서 결제 정보를 획득하는 과정을 도시한 도면이다.
도 3 및 도 4를 더 참조하면, 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)는 사용자에 의해 사용이 시작되면, 사용자로부터 결제 정보를 획득할 수 있다.
이를 위해, 프로세서(130)는 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)에 사용자로부터 사용 요청이 입력되면 디스플레이(140)가 사용자에게 결제 정보를 요청함을 알리는 요청 정보를 표시하도록 디스플레이(140)를 제어할 수 있다.
이후, 사용자의 선택에 따라 다양한 방식으로 사용자의 결제 정보가 획득될 수 있다.
구체적으로, 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)의 입력부에 도 3에 도시된 바와 같이, 사용자의 신용카드(C)가 태깅 또는 삽입되어 결제 정보로써 신용카드 정보가 획득될 수 있다.
이를 위해, 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)의 입력부는 신용카드(C)가 태깅되거나 삽입되면 신용카드 정보가 수신되는 신용카드 모듈을 구비할 수 있다.
또한, 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)의 입력부에 도 4에 도시된 바와 같이, 사용자의 스마트폰(H)이 태깅되어 결제 정보로써 신용카드 정보가 획득될 수 있다.
이를 위해, 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)의 입력부는 스마트폰(H)와 근거리무선통신을 통해 신용카드 정보를 수신할 수 있는 통신 모듈을 구비할 수 있다.
한편, 다른 실시 예에 따른 프로세서(130)는 결제 정보가 획득되면, 가결제의 수행을 요청하는 가결제 요청 신호와 함께 결제 정보가 결제 장치(200)로 송신되도록 통신부(150)를 제어할 수 있다.
이후, 결제 장치(200)는 가결제 요청 신호와 함께 결제 정보가 수신되면 결제 정보를 이용하여 가결제 금액에 대해 결제를 수행하고, 수행된 결제를 취소하는 결제 취소를 수행할 수 있다.
이때, 결제 장치(200)는 가결제 금액에 대한 결제의 수행 결과를 비전 센싱을 이용한 무인 결제 카트 장치(100)로 송신할 수 있다.
이어서, 다른 실시 예에 따른 프로세서(130)는 가결제 금액에 대한 결제의 수행 결과가 결제 불가를 나타내면, 사용자에게 결제 정보를 요청함을 알리는 요청 정보를 재표시하도록 디스플레이(140)를 제어할 수 있다.
이를 통해, 다른 실시 예에 따른 프로세서(130)는 결제가 가능한 사용자의 결제 정보를 획득할 수 있다.
도 5 및 도 6은 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치에 상품이 반입되는 과정을 도시한 도면이다.
도 5 및 도 6을 더 참조하면, 감지 센서(110)는 카트 프레임(170)에 의해서 형성되고 상품이 수용되는 공간인 수용 공간(S)의 상부 영역(S')으로 사용자의 신체 및 상품 중 하나 이상이 진입하는 것을 감지할 수 있다.
여기서, 수용 공간(S)은 카트 프레임(170)을 구성하는 카트 측벽(W)과 카트 바닥(F)에 의해 형성되는 공간을 의미할 수 있다.
한편, 감지 센서(110)는 상기 수용 공간(S)의 상부 영역(S')으로 진입했던 사용자의 신체 및 상품 중 하나 이상이 상기 수용 공간(S)의 상부 영역(S')으로부터 이탈하는 것을 감지할 수 있다.
이를 위해, 감지 센서(110)는 카트 측벽(W)의 상부 모서리에 배치되어 상술된 진입과 이탈을 감지할 수 있다.
이러한, 감지 센서(110)는 적외선 감지 센서로 구현될 수 있다.
또한, 감지 센서(110)는 진입과 이탈 각각의 감지 결과를 프로세서(130)로 출력할 수 있다.
카메라(120)는 상기 수용 공간(S) 및 상기 수용 공간(S)의 상부 영역(S') 중 하나 이상을 촬영하여 촬영 이미지를 생성할 수 있다.
카메라(120)는 촬영 이미지를 생성하는한 그 종류가 제한되지 않는다.
카메라(120)는 생성된 촬영 이미지를 프로세서(130)로 출력할 수 있다.
프로세서(130)는 상기 진입이 감지된 진입 시점부터 상기 이탈이 감지된 이탈 시점까지의 상품 반출입 기간 동안에 생성된 촬영 이미지로부터 상품 이미지를 식별하고, 식별된 상기 상품 이미지에 기초하여 상기 수용 공간에 수용된 상품의 상품 정보를 결정하고, 상기 상품 정보를 취합하여 결제 상품 목록으로 생성할 수 있다.
구체적으로, 프로세서(130)는 도 5에 도시된 바와 같이, 상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 제1 상품(P)의 상품 이미지가 식별되고, 도 6에 도시된 바와 같이, 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 상기 제1 상품(P)의 상품 이미지가 식별되지 않으면, 상기 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상기 제1 상품(P)의 상품 이미지를 분석하여 상기 제1 상품의 제1 상품 정보를 결정할 수 있다.
이를 위해, 프로세서(130)는 사물 식별 알고리즘 또는 사물 식별 인공지능 모델을 이용하여 촬영 이미지로부터 상품 이미지를 식별할 수 있다.
여기서, 상품 이미지를 식별함이란 촬영 이미지 내에 포함된 상품 이미지를 다른 이미지와 구분지음을 의미할 수 있다.
한편, 프로세서(130)는 사물 분석 알고리즘 또는 사물 분석 인공지능 모델을 이용하여 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상품 이미지를 분석하여 해당 상품의 상품 정보를 결정할 수 있다.
여기서, 상품 이미지를 분석하여 상품 정보를 결정함이란, 식별된 상품 이미지에서 바코드 이미지, 상품 모델명 이미지, 상품 이름 이미지, 상품 용량 이미지 및 상품 형태 정보 중 하나 이상을 추출하고, 추출된 정보에 대응되는 상품의 상품 식별 정보와 상품 가격 정보를 상품 정보로 지정함을 의미할 수 있다.
즉, 진입 시점과 이탈 시점에 생성된 촬영 이미지로부터 상품 이미지가 식별되더라도, 식별된 상품 이미지로부터 해당 상품의 정보를 결정하기에는 식별된 상품 이미지가 분석이 불가한 경우, 프로세서(130)는 상품 반출입 기간 동안에 생성된 촬영 이미지로부터 상품 이미지를 식별하고, 상품 반출입 기간 동안에 생성된 촬영 이미지로부터 식별된 상품 이미지를 분석하여 해당 상품의 상품 정보를 결정할 수 있다.
이어서 설명하면, 프로세서(130)는 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상기 제1 상품(P)의 상품 이미지를 분석하여 상기 제1 상품(P)의 제1 상품 정보를 결정하고, 상기 제1 상품 정보를 상기 결제 상품 목록에 추가시킬 수 있다.
즉, 프로세서(130)는 진입 시점에 상부 영역(S') 내로 진입한 것으로 확인된 제1 상품(P)이 이탈 시점에는 상부 영역(S')로부터 이탈하지 않은 것으로 확인되면, 제1 상품(P)이 수용 공간(S)에 수용된 것으로 판단하여 제1 상품 정보를 상기 결제 상품 목록에 추가시킬 수 있다.
한편, 프로세서(130)는 디스플레이(140)를 제어하여 결제 상품 목록을 표시하고, 결제 상품 목록이 변경될 때 마다 결제 상품 목록이 갱신되어 표시되도록 디스플레이(140)를 제어할 수 있다.
도 7 및 도 8은 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치에서 상품이 반출되는 과정을 도시한 도면이다.
도 7 및 도 8을 더 참조하면, 프로세서(130)는 도 7에 도시된 바와 같이, 상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 식별되지 않았던 제2 상품의 상품 이미지가, 도 8에 도시된 바와 같이, 기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 식별되면, 상기 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상기 제2 상품(P)의 상품 이미지를 분석하여 상기 제2 상품(P)의 제2 상품 정보를 결정할 수 있다.
이후, 프로세서(130)는 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상기 제2 상품(P)의 상품 이미지를 분석하여 상기 제2 상품(P)의 제2 상품 정보를 결정하고, 상기 제1 상품 정보를 상기 결제 상품 목록에서 삭제시킬 수 있다.
즉, 프로세서(130)는 진입 시점에 상부 영역(S') 내로 진입하지 않은 것으로 확인된 제2 상품(P)이 이탈 시점에는 상부 영역(S')로부터 이탈한 것으로 확인되면, 수용 공간(S)에 수용되었던 제2 상품(P)이 수용 공간(S)으로부터 이탈된 것으로 판단하여 제2 상품 정보를 상기 결제 상품 목록에서 삭제시킬 수 있다.
한편, 프로세서(130)는 상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 제3 상품(P)의 상품 이미지가 식별되며 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 상기 제3 상품(P)의 상품 이미지가 식별되지 않고, 상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 식별되지 않았던 제4 상품(P)의 상품 이미지가 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 식별되면, 상기 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상기 제3 상품(P)의 상품 이미지와 상기 제4 상품(P)의 상품 이미지를 각각 분석하여 상기 제3 상품(P)의 제3 상품 정보와 상기 제4 상품(P)의 제4 상품 정보 각각을 결정할 수 있다.
즉, 프로세서(130)는 진입 시점에 상부 영역(S') 내로 진입한 것으로 확인된 제3 상품(P)이 이탈 시점에는 상부 영역(S')로부터 이탈하지 않은 것으로 확인되면, 제3 상품(P)이 수용 공간(S)에 수용된 것으로 판단하여 제1 상품 정보를 상기 결제 상품 목록에 추가시킬 수 있다.
또한, 즉, 프로세서(130)는 진입 시점에 상부 영역(S') 내로 진입하지 않은 것으로 확인된 제4 상품(P)이 이탈 시점에는 상부 영역(S')로부터 이탈한 것으로 확인되면, 수용 공간(S)에 수용되었던 제4 상품(P)이 수용 공간(S)으로부터 이탈된 것으로 판단하여 제4 상품 정보를 상기 결제 상품 목록에서 삭제시킬 수 있다.
한편, 프로세서(130)는 상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 식별된 상품 이미지가 없고 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 식별된 상품 이미지도 없으면, 상기 결제 상품 목록을 유지시킬 수 있다.
즉, 프로세서(130)는 진입 시점에 상부 영역(S') 내로 진입한 상품이 없고 이탈 시점에 상부 영역(S')로부터 이탈한 상품도 없는 것으로 확인되면, 결제 상품 목록에서 상품 정보를 추가하거나 삭제하지 않고 유지시킬 수 있다.
이를 통해, 프로세서(130)는 수용 공간(S)에 상품이 반입되어 수용되거나 반출될 때 마다 해당 상품들의 상품 정보들을 결제 상품 목록에서 추가 또는 삭제하여 결제 상품 목록에 포함된 상품 정보의 상품과 수용 공간(S)에 수용된 상품 간을 동기화시킬 수 있다.
도 9는 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템을 통해 무인 결제가 수행되는 과정을 설명하기 위한 도면이다.
이후, 상기 프로세서(130)는 상기 카트 프레임(170)이 결제 영역(CR)에 위치하면 상품의 결제를 수행할 수 있는 결제 장치(200)로 상기 결제 상품 목록을 송신하도록 통신부(150)를 제어할 수 있다.
이를 위해, 통신부(150)는 결제 장치(200)와 근거리 무선 통신을 수행할 수 있다.
한편, 통신부(150)는 결제 상품 목록과 함께 사용자로부터 획득된 사용자의 결제 정보를 결제 장치(200)로 송신할 수 있다.
이때, 결제 장치(200)는 감지 센서(210)를 통해 비전 센싱을 이용한 무인 결제 카트 장치(100)가 결제 영역(CR) 내에 위치하는지를 감지할 수 있다.
이후, 결제 장치(200)는 결제 영역(CR) 내에서 상기 비전 센싱을 이용한 무인 결제 카트 장치(100)가 감지되면, 통신부(230)를 제어하여 상기 비전 센싱을 이용한 무인 결제 카트 장치(100)로 결제 상품 목록을 요청하는 목록 요청 신호와 사용자의 결제 정보를 요청하는 결제 정보 요청 신호를 송신하도록 할 수 있다.
이어서, 결제 장치(200)는 비전 센싱을 이용한 무인 결제 카트 장치(100)로부터 상기 결제 상품 목록과 상기 결제 정보가 수신되면, 상기 결제 상품 목록에 포함된 상품 정보와 상기 결제 정보를 이용하여 결제를 수행할 수 있다.
최종적으로, 결제 장치(200)는 결제 상품 목록에 포함된 상품 정보 모두가 결제되면 게이트(G)를 개방하는 개방 신호를 게이트(G)에 송신하여 게이트(G)가 개방되도록 할 수 있다.
한편, 도 1 및 도 2를 다시 참조하면, 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)는, 감지 센서(110), 카메라(120), 프로세서(130), 디스플레이(140), 통신부(150), 저장부(160) 및 카트 프레임(170)을 포함할 수 있다.
프로세서(130)는 저장부(160)에 저장된 각종 프로그램을 이용하여 비전 센싱을 이용한 무인 결제 카트 장치(100)의 전반적인 동작을 제어할 수 있다. 프로세서(130)는 RAM, ROM, 그래픽 처리부, 메인 CPU, 제1 내지 n 인터페이스 및 버스로 구성될 수 있다. 이때, RAM, ROM, 그래픽 처리부, 메인 CPU, 제1 내지 n 인터페이스 등은 버스를 통해 서로 연결될 수 있다.
RAM은 O/S 및 어플리케이션 프로그램을 저장한다. 구체적으로, 비전 센싱을 이용한 무인 결제 카트 장치(100)가 부팅되면 O/S가 RAM에 저장되고, 사용자가 선택한 각종 어플리케이션 데이터가 RAM에 저장될 수 있다.
ROM에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴 온 명령이 입력되어 전원이 공급되면, 메인 CPU는 ROM에 저장된 명령어에 따라 저장부(160)에 저장된 O/S를 RAM에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU는 저장부(160)에 저장된 각종 어플리케이션 프로그램을 RAM에 복사하고, RAM에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.
메인 CPU는 저장부(160)에 액세스하여, 저장부(160)에 저장된 OS를 이용하여 부팅을 수행한다. 그리고, 메인 CPU는 저장부(160)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다.
제1 내지 n 인터페이스는 상술한 각종 구성요소들과 연결된다. 제1 내지 n 인터페이스 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
한편, 프로세서(130)는 하나 이상의 코어(core, 미도시) 및 그래픽 처리부(미도시) 및/또는 다른 구성 요소와 신호를 송수신하는 연결 통로(예를 들어, 버스(bus) 등)를 포함할 수 있다.
한편, 프로세서(130)는 프로세서(130) 내부에서 처리되는 신호(또는, 데이터)를 일시적 및/또는 영구적으로 저장하는 램(RAM: Random Access Memory, 미도시) 및 롬(ROM: Read-Only Memory, 미도시)을 더 포함할 수 있다. 또한, 프로세서(130)는 그래픽 처리부, 램 및 롬 중 적어도 하나를 포함하는 시스템온칩(SoC: system on chip) 형태로 구현될 수 있다.
저장부(160)는 비전 센싱을 이용한 무인 결제 카트 장치(100)의 동작에 필요한 각종 프로그램 및 데이터를 저장할 수 있다. 메모리는 비휘발성 메모리, 휘발성 메모리, 플래시메모리(flash-memory), 하드디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD) 등으로 구현될 수 있다.
저장부(160)에는 프로세서(130)의 처리 및 제어를 위한 프로그램들(하나 이상의 인스트럭션들)을 저장할 수 있다. 저장부(160)에 저장된 프로그램들은 기능에 따라 복수 개의 모듈들로 구분될 수 있다.
통신부(150)는 다른 장치와 통신을 수행할 수 있다. 특히, 통신부(150)는 와이파이 칩, 블루투스 칩, 무선 통신 칩, NFC칩, 저전력 블루투스 칩(BLE 칩) 등과 같은 다양한 통신 칩을 포함할 수 있다. 이때, 와이파이 칩, 블루투스 칩, NFC 칩은 각각 LAN 방식, WiFi 방식, 블루투스 방식, NFC 방식으로 통신을 수행한다. 와이파이 칩이나 블루투스칩을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신 하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 무선 통신칩은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), 5G(1th Generation) 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다.
결제 장치(200)는, 감지 센서(210), 프로세서(220), 통신부(230) 및 저장부(240)를 포함할 수 있다.
프로세서(220)는 저장부(240)에 저장된 각종 프로그램을 이용하여 결제 장치(200)의 전반적인 동작을 제어할 수 있다. 프로세서(220)는 RAM, ROM, 그래픽 처리부, 메인 CPU, 제1 내지 n 인터페이스 및 버스로 구성될 수 있다. 이때, RAM, ROM, 그래픽 처리부, 메인 CPU, 제1 내지 n 인터페이스 등은 버스를 통해 서로 연결될 수 있다.
RAM은 O/S 및 어플리케이션 프로그램을 저장한다. 구체적으로, 비전 센싱을 이용한 무인 결제 카트 장치(100)가 부팅되면 O/S가 RAM에 저장되고, 사용자가 선택한 각종 어플리케이션 데이터가 RAM에 저장될 수 있다.
ROM에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 턴 온 명령이 입력되어 전원이 공급되면, 메인 CPU는 ROM에 저장된 명령어에 따라 저장부(240)에 저장된 O/S를 RAM에 복사하고, O/S를 실행시켜 시스템을 부팅시킨다. 부팅이 완료되면, 메인 CPU는 저장부(240)에 저장된 각종 어플리케이션 프로그램을 RAM에 복사하고, RAM에 복사된 어플리케이션 프로그램을 실행시켜 각종 동작을 수행한다.
메인 CPU는 저장부(240)에 액세스하여, 저장부(240)에 저장된 OS를 이용하여 부팅을 수행한다. 그리고, 메인 CPU는 저장부(240)에 저장된 각종 프로그램, 컨텐츠, 데이터 등을 이용하여 다양한 동작을 수행한다.
제1 내지 n 인터페이스는 상술한 각종 구성요소들과 연결된다. 제1 내지 n 인터페이스 중 하나는 네트워크를 통해 외부 장치와 연결되는 네트워크 인터페이스가 될 수도 있다.
한편, 프로세서(220)는 하나 이상의 코어(core, 미도시) 및 그래픽 처리부(미도시) 및/또는 다른 구성 요소와 신호를 송수신하는 연결 통로(예를 들어, 버스(bus) 등)를 포함할 수 있다.
한편, 프로세서(220)는 프로세서(220) 내부에서 처리되는 신호(또는, 데이터)를 일시적 및/또는 영구적으로 저장하는 램(RAM: Random Access Memory, 미도시) 및 롬(ROM: Read-Only Memory, 미도시)을 더 포함할 수 있다. 또한, 프로세서(220)는 그래픽 처리부, 램 및 롬 중 적어도 하나를 포함하는 시스템온칩(SoC: system on chip) 형태로 구현될 수 있다.
저장부(240)는 비전 센싱을 이용한 무인 결제 카트 장치(100)의 동작에 필요한 각종 프로그램 및 데이터를 저장할 수 있다. 메모리는 비휘발성 메모리, 휘발성 메모리, 플래시메모리(flash-memory), 하드디스크 드라이브(HDD) 또는 솔리드 스테이트 드라이브(SSD) 등으로 구현될 수 있다.
저장부(240)에는 프로세서(220)의 처리 및 제어를 위한 프로그램들(하나 이상의 인스트럭션들)을 저장할 수 있다. 저장부(240)에 저장된 프로그램들은 기능에 따라 복수 개의 모듈들로 구분될 수 있다.
통신부(230)는 다른 장치와 통신을 수행할 수 있다. 특히, 통신부(230)는 와이파이 칩, 블루투스 칩, 무선 통신 칩, NFC칩, 저전력 블루투스 칩(BLE 칩) 등과 같은 다양한 통신 칩을 포함할 수 있다. 이때, 와이파이 칩, 블루투스 칩, NFC 칩은 각각 LAN 방식, WiFi 방식, 블루투스 방식, NFC 방식으로 통신을 수행한다. 와이파이 칩이나 블루투스칩을 이용하는 경우에는 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신 하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 무선 통신칩은 IEEE, 지그비, 3G(3rd Generation), 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), 5G(1th Generation) 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다.
이하, 본 발명의 다른 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)에 대해 설명하도록 한다.
본 발명의 다른 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100)는 본 발명의 일 실시 예에 따른 비전 센싱을 이용한 무인 결제 카트 장치(100) 대비, 무게 센서(180)를 더 포함하고 프로세서(130)의 역할이 부가될 뿐 다른 구성요소는 동일하므로 반복되는 설명은 생략하도록 한다.
무게 센서(180)는 상기 수용 공간(S)의 하부에 인가되는 무게인 수용 무게를 측정할 수 있다.
이후, 무게 센서(180)는 측정된 수용 무게를 프로세서(130)로 출력할 수 있다.
프로세서(130)는 상술된 상기 진입이 감지된 진입 시점부터 상기 이탈이 감지된 이탈 시점까지의 상품 반출입 기간 동안에 상기 수용 무게의 무게 변화에 기초하여 상품 이미지를 식별할지 여부를 판단할 수 있다.
구체적으로, 프로세서(130)는 상기 수용 무게의 무게 변화가 기준 무게 변화를 초과하면 상기 상품 이미지를 식별할 수 있다.
반대로, 프로세서(130)는 상기 수용 무게의 무게 변화가 기준 무게 변화를 초과하지 않으면 상기 상품 이미지를 식별하지 않을 수 있다.
이후, 프로세서(130)는 상기 상품 이미지를 식별하는 것으로 판단되면, 일 실시 예에 따른 프로세서(130)와 동일하게, 상기 상품 반출입 기간 동안에 생성된 촬영 이미지로부터 상기 상품 이미지를 식별하고, 식별된 상기 상품 이미지에 기초하여 상기 수용 공간에 수용된 상품의 상품 정보를 결정하고, 상기 상품 정보를 취합하여 결제 상품 목록으로 생성할 수 있다.
이하, 프로세서(130)가 결제 상품 목록으로 생성하는 과정은 동일하므로 반복되는 설명은 생략하도록 한다.
한편, 다른 실시 예에 따른 프로세서(130)는 통신부(150)를 제어하여 결제 상품 목록과 결제 정보를 결제 장치(200)로 송신한 경우, 결제 상품 목록에 포함된 상품 정보에 기초하여 결제 단축 시간을 산출할 수 있다.
구체적으로, 다른 실시 예에 따른 프로세서(130)는 결제 장치(200)로 송신된 결제 상품 목록에 포함된 상품 정보의 개수를 결제 상품 개수로 산출하고, 결제 상품 개수에 단위 결제 시간을 적용하여 수동 결제 시간을 산출하며, 수동 결제 시간에서 자동 결제 시간을 차감하여 상술된 결제 단축 시간으로 산출할 수 있다.
여기서, 단위 결제 시간은 수용 공간에 수용된 상품이 계산원에 의해 수동으로 결제되는 경우 상품 1개당 소요되는 시간이고, 자동 결제 시간은 수용 공간에 수용된 상품 모두가 본 발명에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템에 의해 결제되는데 소요되는 시간일 수 있다.
즉, 다른 실시 예에 따른 프로세서(130)는 계산원에 의해 수용 공간에 수용된 상품이 결제되는데 소요되는 시간인 수동 결제 시간에서 본 발명에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템에 의해 수용 공간에 수용된 상품이 결제되는데 소요되는 시간인 자동 결제 시간을 차감하여 결제 단축 시간으로 산출할 수 있다.
한편, 또 다른 실시 예에 따른 프로세서(130)는 결제 단축 시간이 산출될 때마다, 결제 단축 시간에 기초하여 자동 결제 수수료를 산출할 수 있다.
구체적으로, 또 다른 실시 예에 따른 프로세서(130)는 결제 단축 시간이 산출되면, 결제 단축 시간에 자동 결제 수수료 단가를 적용하여 자동 결제 수수료로 산출할 수 있다.
한편, 또 다른 실시 예에 따른 프로세서(130)는 통신부(150)를 통해 결제 정보와 결제 상품 목록이 결제 장치(200)로 송신될 때 마다, 결제 검증 회차인지 여부를 확인할 수 있다.
구체적으로, 또 다른 실시 예에 따른 프로세서(130)는 통신부(150)를 통해 결제 정보와 결제 상품 목록이 결제 장치(200)로 송신될 때 마다, 무작위 번호 생성 알고리즘을 통해 미리 설정된 번호 범위 내에서 무작위로 번호를 생성시키고, 해당 생성된 번호가 미리 설정된 기준 번호이면 결제 검증 회차인 것으로 확인할 수 있다.
반대로, 또 다른 실시 예에 따른 프로세서(130)는 무작위 번호 생성 알고리즘을 통해 무작위로 생성된 번호가 미리 설정된 기준 번호가 아니면 결제 검증 회차가 아닌 것으로 확인할 수 있다.
이후, 또 다른 실시 예에 따른 프로세서(130)는 결제 검증 회차인 것으로 확인되면, 본 발명에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템에 의해 수행된 상품의 결제가 계산원에 의해 검사되도록 고객의 이동을 유도하는 이동 안내 정보를 디스플레이(140)가 표시하도록 디스플레이(140)를 제어할 수 있다.
이를 통해, 본 발명에 따른 비전 센싱을 이용한 무인 결제 카트 장치를 이용한 무인 결제 시스템에 의해 수행된 상품의 결제를 계산원이 검사할 수 있다.
이제까지 본 발명에 대하여 바람직한 실시 예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명을 구현할 수 있음을 이해할 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.
이상과 같이, 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술사상과 아래에 기재될 특허청구범위의 균등범위 내에서 다양한 수정 및 변형이 가능함은 물론이다.
100 : 비전 센싱을 이용한 무인 결제 카트 장치 및 이를 이용한 무인 결제 시스템
200 : 결제 장치

Claims (1)

  1. 무인 결제 카트 장치에 있어서,
    상품이 수용되는 수용 공간을 형성하는 카트 프레임;
    상기 수용 공간의 상부 영역으로 사용자의 신체 및 상품 중 하나 이상이 진입하는 것을 감지하고, 상기 수용 공간의 상부 영역으로 진입했던 사용자의 신체 및 상품 중 하나 이상이 상기 수용 공간의 상부 영역으로부터 이탈하는 것을 감지하는 감지 센서;
    상기 수용 공간 및 상기 수용 공간의 상부 영역 중 하나 이상을 촬영하여 촬영 이미지를 생성하는 카메라; 및
    상기 진입이 감지된 진입 시점부터 상기 이탈이 감지된 이탈 시점까지의 상품 반출입 기간 동안에 생성된 촬영 이미지로부터 상품 이미지를 식별하고, 식별된 상기 상품 이미지에 기초하여 상기 수용 공간에 수용된 상품의 상품 정보를 결정하고, 상기 상품 정보를 취합하여 결제 상품 목록으로 생성하는 프로세서;를 포함하고,
    상기 프로세서는
    상기 카트 프레임이 결제 영역에 위치한 후, 상품의 결제를 수행할 수 있는 결제 장치로부터 상기 결제 상품 목록을 요청하는 목록 요청 신호와 사용자의 결제 정보를 요청하는 결제 정보 요청 신호가 통신부에 수신되면, 상기 결제 장치로 상기 결제 정보와 상기 결제 상품 목록을 송신하도록 통신부를 제어하고,
    상기 프로세서는
    상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 제1 상품의 상품 이미지가 식별되고 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 상기 제1 상품의 상품 이미지가 식별되지 않으면, 상기 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상기 제1 상품의 상품 이미지를 분석하여 상기 제1 상품의 제1 상품 정보를 결정하고, 상기 제1 상품 정보를 상기 결제 상품 목록에 추가시키고,
    상기 프로세서는
    상기 진입이 감지된 진입 시점에 생성된 촬영 이미지로부터 식별되지 않았던 제2 상품의 상품 이미지가 상기 이탈이 감지된 이탈 시점에 생성된 촬영 이미지로부터 식별되면, 상기 상품 반출입 기간 동안에 생성된 촬영 이미지 중 적어도 하나의 촬영 이미지로부터 식별된 상기 제2 상품의 상품 이미지를 분석하여 상기 제2 상품의 제2 상품 정보를 결정하고, 상기 제2 상품 정보를 상기 결제 상품 목록에서 삭제시키고,
    상기 프로세서는
    상기 결제 상품 목록에 포함된 상품 정보의 개수를 결제 상품 개수로 산출하고, 상기 결제 상품 개수에 단위 결제 시간을 적용하여 수동 결제 시간을 산출하며, 상기 수동 결제 시간에서 자동 결제 시간을 차감하여 결제 단축 시간으로 산출하고,
    상기 단위 결제 시간은
    상기 수용 공간에 수용된 상품이 계산원에 의해 수동으로 결제되는 경우 상품 1개당 소요되는 시간이고,
    상기 자동 결제 시간은
    상기 수용 공간에 수용된 상품 모두가 상기 무인 결제 카트 장치와 상기 결제 장치를 포함하는 무인 결제 시스템에 의해 결제되는데 소요된 시간이고,
    상기 프로세서는
    상기 결제 단축 시간에 자동 결제 수수료 단가를 적용하여 자동 결제 수수료로 산출하고,
    상기 프로세서는
    상기 결제 상품 목록이 상기 결제 장치로 송신될 때 마다, 무작위 번호 생성 알고리즘을 통해 미리 설정된 번호 범위 내에서 무작위로 번호를 생성시키고, 생성된 번호가 미리 설정된 기준 번호이면 결제 검증 회차인 것으로 확인하고, 상기 결제 검증 회차인 것으로 확인되면, 상기 무인 결제 시스템에 의해 수행된 상품의 결제가 계산원에 의해 검사되도록 고객의 이동을 유도하는 이동 안내 정보를 디스플레이가 표시하도록 상기 디스플레이를 제어하는 것을 특징으로 하는
    무인 결제에 따른 결제 단축 시간을 산출하는 무인 결제 카트 장치.
KR1020240018960A 2023-06-22 2024-02-07 무인 결제에 따른 결제 단축 시간을 산출하는 무인 결제 카트 장치 KR102653182B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020240018960A KR102653182B1 (ko) 2023-06-22 2024-02-07 무인 결제에 따른 결제 단축 시간을 산출하는 무인 결제 카트 장치

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020230080038A KR102636635B1 (ko) 2023-06-22 2023-06-22 비전 센싱을 이용한 무인 결제 카트 장치 및 이를 이용한 무인 결제 시스템
KR1020240018960A KR102653182B1 (ko) 2023-06-22 2024-02-07 무인 결제에 따른 결제 단축 시간을 산출하는 무인 결제 카트 장치

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020230080038A Division KR102636635B1 (ko) 2023-06-22 2023-06-22 비전 센싱을 이용한 무인 결제 카트 장치 및 이를 이용한 무인 결제 시스템

Publications (1)

Publication Number Publication Date
KR102653182B1 true KR102653182B1 (ko) 2024-03-29

Family

ID=89899467

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020230080038A KR102636635B1 (ko) 2023-06-22 2023-06-22 비전 센싱을 이용한 무인 결제 카트 장치 및 이를 이용한 무인 결제 시스템
KR1020240018960A KR102653182B1 (ko) 2023-06-22 2024-02-07 무인 결제에 따른 결제 단축 시간을 산출하는 무인 결제 카트 장치

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020230080038A KR102636635B1 (ko) 2023-06-22 2023-06-22 비전 센싱을 이용한 무인 결제 카트 장치 및 이를 이용한 무인 결제 시스템

Country Status (1)

Country Link
KR (2) KR102636635B1 (ko)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120124198A (ko) * 2011-05-03 2012-11-13 엘지전자 주식회사 코드 리더를 탑재할 수 있는 카트 및 마트내에 위치한 디지털 싸이니지를 제어하는 방법
KR20140122629A (ko) 2013-04-10 2014-10-20 김동혁 바코드 리더기가 부착된 쇼핑카트
US20180218351A1 (en) * 2017-01-31 2018-08-02 Focal Systems, Inc. Automated checkout system through mobile shopping units
KR101994205B1 (ko) * 2018-05-25 2019-09-30 주식회사 리테일앤인사이트 스마트 쇼핑 카트 및 이를 이용한 쇼핑 관리 시스템
KR20190119547A (ko) * 2019-06-18 2019-10-22 엘지전자 주식회사 카트 로봇
KR20210055962A (ko) * 2019-11-08 2021-05-18 박소희 결재 바구니
KR102323796B1 (ko) * 2020-11-11 2021-11-09 텔코웨어 주식회사 스마트 쇼핑 카트, 상기 스마트 쇼핑 카트를 이용한 쇼핑 시스템 및 상기 스마트 쇼핑 카트를 이용한 상품 구매 방법
KR20220113138A (ko) * 2021-02-05 2022-08-12 동의대학교 산학협력단 스마트 카트를 이용한 결제 시스템 및 방법

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120124198A (ko) * 2011-05-03 2012-11-13 엘지전자 주식회사 코드 리더를 탑재할 수 있는 카트 및 마트내에 위치한 디지털 싸이니지를 제어하는 방법
KR20140122629A (ko) 2013-04-10 2014-10-20 김동혁 바코드 리더기가 부착된 쇼핑카트
US20180218351A1 (en) * 2017-01-31 2018-08-02 Focal Systems, Inc. Automated checkout system through mobile shopping units
KR101994205B1 (ko) * 2018-05-25 2019-09-30 주식회사 리테일앤인사이트 스마트 쇼핑 카트 및 이를 이용한 쇼핑 관리 시스템
KR20190119547A (ko) * 2019-06-18 2019-10-22 엘지전자 주식회사 카트 로봇
KR20210055962A (ko) * 2019-11-08 2021-05-18 박소희 결재 바구니
KR102323796B1 (ko) * 2020-11-11 2021-11-09 텔코웨어 주식회사 스마트 쇼핑 카트, 상기 스마트 쇼핑 카트를 이용한 쇼핑 시스템 및 상기 스마트 쇼핑 카트를 이용한 상품 구매 방법
KR20220113138A (ko) * 2021-02-05 2022-08-12 동의대학교 산학협력단 스마트 카트를 이용한 결제 시스템 및 방법

Also Published As

Publication number Publication date
KR102636635B1 (ko) 2024-02-13

Similar Documents

Publication Publication Date Title
US11847689B2 (en) Dynamic customer checkout experience within an automated shopping environment
JP6869345B2 (ja) 注文情報決定方法および装置
US11107145B2 (en) Order determination method, non-transitory computer-readable medium and system in an unmanned store
CN108537533B (zh) 一种自助购物结算方法及系统
KR101951819B1 (ko) 배달 대행 정보 제공 방법, 장치 및 컴퓨터-판독가능 기록매체
US9773235B2 (en) Systems and methods facilitating in-aisle scanning
US20170161703A1 (en) Smart cart for self-checkout of retail merchandise
US10948338B2 (en) Digital product label generation using modular scale device
KR20190096975A (ko) 자동 상점 내 등록 시스템
KR102277513B1 (ko) 맞춤형 의류 구매 서비스 제공 방법 및 이를 위한 사용자 단말
KR101786732B1 (ko) 온라인 배송대행 서비스 제공 방법
CN109285019A (zh) 图像处理装置、信息处理装置、系统及控制方法
US10690759B2 (en) Information processing device, information processing method, and information processing system
JP2022016488A (ja) 返品受付装置
US20190139122A1 (en) Commodity-data processing apparatus, commodity-data processing system, and commodity-data processing program
KR102653182B1 (ko) 무인 결제에 따른 결제 단축 시간을 산출하는 무인 결제 카트 장치
KR102636636B1 (ko) 비전 센싱 및 무게 센싱을 이용한 무인 결제 카트 장치 및 이를 이용한 무인 결제 시스템
US10627977B2 (en) Systems, devices, and methods for distributed processing for preauthorized payment
WO2016136082A1 (ja) 情報処理装置、プログラム、及び制御方法
KR20190021029A (ko) 스마트 결제 방법 및 시스템
JP7251210B2 (ja) 情報処理装置、サーバ、情報処理システム、情報処理方法、および情報処理プログラム
Kaushik et al. Revamping Supermarkets With AI and RSSi
US20240095342A1 (en) Disabling functionality of an auto-checkout client application based on anomalous user behavior
WO2019102664A1 (ja) 情報処理装置、情報処理方法、およびプログラム
US20240005750A1 (en) Event-triggered capture of item image data and generation and storage of enhanced item identification data

Legal Events

Date Code Title Description
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant