KR20230080758A - System for optimizing cashierless store shelf information and customer shopping cart information - Google Patents

System for optimizing cashierless store shelf information and customer shopping cart information Download PDF

Info

Publication number
KR20230080758A
KR20230080758A KR1020210168209A KR20210168209A KR20230080758A KR 20230080758 A KR20230080758 A KR 20230080758A KR 1020210168209 A KR1020210168209 A KR 1020210168209A KR 20210168209 A KR20210168209 A KR 20210168209A KR 20230080758 A KR20230080758 A KR 20230080758A
Authority
KR
South Korea
Prior art keywords
customer
unmanned store
product
information
shopping cart
Prior art date
Application number
KR1020210168209A
Other languages
Korean (ko)
Inventor
박경훈
Original Assignee
주식회사 신세계아이앤씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 신세계아이앤씨 filed Critical 주식회사 신세계아이앤씨
Priority to KR1020210168209A priority Critical patent/KR20230080758A/en
Publication of KR20230080758A publication Critical patent/KR20230080758A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Engineering & Computer Science (AREA)
  • Development Economics (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템이 개시된다. 무인 점포 매대 및 각 무인 점포 매대의 상품 정보가 저장되는 무인 점포 서버; 무인 점포에 설치되어 상기 무인 점포의 고객을 감지하는 라이다(lidar); 상품 픽업(pick-up) 또는 상품 반환을 감지하기 위해 상기 무인 점포 매대에 설치되어 무게 변화량을 감지하는 로드셀(loadcell); 상기 라이다에 의해 감지된 고객의 고객 정보 및 해당 고객의 고객 장바구니를 생성하고, 상기 고객의 상품 구매 또는 상품 반환을 확인하는 고객 처리 서버를 구성한다. 상술한 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템에 의하면, 무인 점포에 라이다(lidar)를 설치하여 고객의 3차원 위치 정보를 획득하도록 구성됨으로써, 층고가 낮은 무인 점포에서도 고객의 위치를 정확하게 파악할 수 있는 효과가 있다. 한편, 고객의 위치 정보와 무인 점포 매대의 로드셀(loadcell)을 이용한 무게 변화량을 이용하여 각 고객의 상품 구매 또는 상품 반환을 정확하게 파악하도록 구성됨으로써, 무인 점포 내에서의 고객 장바구니 및 상품 매대 정보에 대한 처리의 정확성과 효율성을 높일 수 있는 효과가 있다.A system for optimizing unmanned store shelf information and customer shopping cart information is disclosed. an unmanned store server storing unmanned store shelves and product information of each unmanned store shelf; A lidar installed in an unmanned store to detect a customer of the unmanned store; A load cell installed in the unmanned store shelf to detect a weight change in order to detect product pick-up or product return; A customer processing server is configured to generate customer information of the customer detected by the lidar and a customer shopping cart of the corresponding customer, and to confirm product purchase or product return of the customer. According to the above-described unmanned store shelf information and customer shopping cart information optimization system, lidar is installed in an unmanned store to obtain 3D location information of a customer, so that the customer's location can be accurately determined even in an unmanned store with a low floor height. It has a discernible effect. On the other hand, by using the customer's location information and the weight change using the load cell of the unmanned store shelf, it is configured to accurately grasp each customer's product purchase or product return, It has the effect of increasing the accuracy and efficiency of processing.

Figure P1020210168209
Figure P1020210168209

Description

무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템{SYSTEM FOR OPTIMIZING CASHIERLESS STORE SHELF INFORMATION AND CUSTOMER SHOPPING CART INFORMATION}Optimization system of unmanned store shelf information and customer shopping cart information

본 발명은 무인 점포에서의 고객의 상품 구매에 관한 것으로서, 구체적으로는 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템에 관한 것이다.The present invention relates to a customer's product purchase in an unmanned store, and more specifically, to a system for optimizing unmanned store shelf information and customer shopping cart information.

무인 점포에서는 주로 카메라 센서를 이용하여 고객을 감지하고 있다.In unmanned stores, customers are detected mainly using camera sensors.

카메라 센서의 경우 고객을 추적하는 데 매우 유리하며, 화각이 좋은 장점이 있다.The camera sensor is very advantageous for tracking customers and has a good angle of view.

그러나, 무인 점포의 층고가 낮으면 고객의 정수리밖에 보이지 않는 단점이 있으며, 측방향에서 촬영하는 경우에는 고객이 앉거나 매대에 가리면 고객이 보이지 않게 되는 문제점이 있다.However, if the floor height of the unmanned store is low, there is a disadvantage in that only the top of the customer's head is visible, and in the case of photographing from the side, there is a problem in that the customer cannot be seen if the customer sits or is covered by a shelf.

또한, 카메라 센서는 무인 점포에 많은 수를 설치해야 한다.In addition, a large number of camera sensors must be installed in unmanned stores.

이와 같이 화각이 좋은 카메라 센서는 고개의 추적이 유리한 반면, 위와 같은 단점으로 인해 다양한 구조의 모든 무인 점포에서 유용하게 활용되리라는 보장이 없다.While such a camera sensor with a good angle of view is advantageous in tracking the head, there is no guarantee that it will be usefully used in all unmanned stores with various structures due to the above disadvantages.

등록특허공보 10-1858530Registered Patent Publication 10-1858530 공개특허공보 10-2011-0122890Publication of Patent Publication 10-2011-0122890

본 발명의 목적은 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템을 제공하는 데 있다.An object of the present invention is to provide a system for optimizing unmanned store shelf information and customer shopping cart information.

한편, 본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.On the other hand, the technical problems to be achieved in the present invention are not limited to the above-mentioned technical problems, and other technical problems that are not mentioned will become clear to those skilled in the art from the description below. You will be able to understand.

상술한 본 발명의 목적에 따른 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템은, 무인 점포 매대 및 각 무인 점포 매대의 상품 정보가 저장되는 무인 점포 서버; 무인 점포에 설치되어 상기 무인 점포의 고객을 감지하는 라이다(lidar); 상품 픽업(pick-up) 또는 상품 반환을 감지하기 위해 상기 무인 점포 매대에 설치되어 무게 변화량을 감지하는 로드셀(loadcell); 상기 라이다에 의해 감지된 고객의 고객 정보 및 해당 고객의 고객 장바구니를 생성하고, 상기 고객의 상품 구매 또는 상품 반환을 확인하는 고객 처리 서버를 포함하도록 구성될 수 있다.A system for optimizing unmanned store counter information and customer shopping cart information according to the object of the present invention described above includes an unmanned store server storing unmanned store counters and product information of each unmanned store counter; A lidar installed in an unmanned store to detect a customer of the unmanned store; A load cell installed in the unmanned store shelf to detect a weight change in order to detect product pick-up or product return; It may be configured to include a customer processing server that generates customer information of the customer detected by the lidar and a customer shopping cart of the corresponding customer, and confirms product purchase or product return of the customer.

여기서, 상기 고객 처리 서버에서 확인된 고객의 상품 구매 또는 상품 반환에 따라 상기 고객 장바구니 및 상기 무인 점포 매대의 상품 정보를 처리하는 상품 처리 서버를 더 포함하도록 구성될 수 있다.Here, the product processing server may be configured to further include a product processing server that processes product information of the customer's shopping cart and the unmanned store shelf according to the customer's product purchase or product return confirmed by the customer processing server.

그리고 상기 무인 점포 서버는, 상기 무인 점포 내에서의 상기 무인 점포 매대 정보 및 해당 위치 정보가 저장되는 무인 점포 매대 맵 데이터베이스; 상기 무인 점포 내에서의 각 무인 점포 매대에 진열된 상품 정보가 저장되는 상품 데이터베이스를 포함하도록 구성될 수 있다.The unmanned store server may include: an unmanned store shelf map database storing information on the unmanned store shelf and corresponding location information in the unmanned store; It may be configured to include a product database in which product information displayed on each unmanned store stand in the unmanned store is stored.

상술한 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템에 의하면, 무인 점포에 라이다(lidar)를 설치하여 고객의 3차원 위치 정보를 획득하도록 구성됨으로써, 층고가 낮은 무인 점포에서도 고객의 위치를 정확하게 파악할 수 있는 효과가 있다.According to the above-described unmanned store shelf information and customer shopping cart information optimization system, lidar is installed in an unmanned store to obtain 3D location information of a customer, so that the customer's location can be accurately determined even in an unmanned store with a low floor height. It has a discernible effect.

또한, 고객의 위치 정보가 중복되어도 다시 각 고객을 재추적할 수 있도록 구성됨으로써, 무인 점포 내에서의 고객 추적 능력을 높일 수 있는 효과가 있다.In addition, by being configured to re-track each customer even if the location information of the customer is duplicated, there is an effect of increasing the customer tracking ability in the unmanned store.

한편, 라이다와 카메라의 얼라인먼트를 조정하여 라이다와 카메라를 모두 이용하여 고객을 감지하도록 구성됨으로써, 고객 감지 능력을 향상시킬 수 있는 효과가 있다.On the other hand, by adjusting the alignment of the lidar and the camera by being configured to detect the customer using both the lidar and the camera, there is an effect that can improve the customer detection ability.

한편, 고객의 위치 정보와 무인 점포 매대의 로드셀(loadcell)을 이용한 무게 변화량을 이용하여 각 고객의 상품 구매 또는 상품 반환을 정확하게 파악하도록 구성됨으로써, 무인 점포 내에서의 고객 장바구니 및 상품 매대 정보에 대한 처리의 정확성과 효율성을 높일 수 있는 효과가 있다.On the other hand, by using the customer's location information and the weight change using the load cell of the unmanned store shelf, it is configured to accurately grasp each customer's product purchase or product return, It has the effect of increasing the accuracy and efficiency of processing.

한편, 본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.On the other hand, the effects obtainable in the present invention are not limited to the effects mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the description below. You will be able to.

도 1은 본 발명의 일 실시예에 따른 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템의 블록 구성도이다.
도 2는 본 발명의 일 실시예에 따른 구매 상품 검색 모듈의 블록 구성도이다.
도 3은 본 발명의 일 실시예에 따른 BFS 알고리즘을 상품 검색 프로세스의 모식도이다.
도 4는 본 발명의 일 실시예에 따른 반환 상품 검색 모듈의 블록 구성도이다.
도 5는 본 발명의 일 실시예에 따른 DFS 알고리즘을 상품 반환 프로세스의 모식도이다.1 is a block diagram of a system for optimizing unmanned store shelf information and customer shopping cart information according to an embodiment of the present invention.
2 is a block diagram of a purchased product search module according to an embodiment of the present invention.
3 is a schematic diagram of a product search process using the BFS algorithm according to an embodiment of the present invention.
4 is a block diagram of a returned product search module according to an embodiment of the present invention.
5 is a schematic diagram of a product return process using the DFS algorithm according to an embodiment of the present invention.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 발명을 실시하기 위한 구체적인 내용에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.Since the present invention can make various changes and have various embodiments, specific embodiments will be illustrated in the drawings and described in detail in specific contents for practicing the invention. However, this is not intended to limit the present invention to specific embodiments, and should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention. Like reference numerals have been used for like elements throughout the description of each figure.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.Terms such as first, second, A, and B may be used to describe various components, but the components should not be limited by the terms. These terms are only used for the purpose of distinguishing one component from another. For example, a first element may be termed a second element, and similarly, a second element may be termed a first element, without departing from the scope of the present invention. The terms and/or include any combination of a plurality of related recited items or any of a plurality of related recited items.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.It is understood that when an element is referred to as being "connected" or "connected" to another element, it may be directly connected or connected to the other element, but other elements may exist in the middle. It should be. On the other hand, when an element is referred to as “directly connected” or “directly connected” to another element, it should be understood that no other element exists in the middle.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Terms used in this application are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly dictates otherwise. In this application, the terms "include" or "have" are intended to designate that there is a feature, number, step, operation, component, part, or combination thereof described in the specification, but one or more other features It should be understood that the presence or addition of numbers, steps, operations, components, parts, or combinations thereof is not precluded.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which the present invention belongs. Terms such as those defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the related art, and unless explicitly defined in the present application, they should not be interpreted in an ideal or excessively formal meaning. don't

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템의 블록 구성도이다. 그리고 도 2는 본 발명의 일 실시예에 따른 구매 상품 검색 모듈의 블록 구성도이고, 도 3은 본 발명의 일 실시예에 따른 BFS 알고리즘을 상품 검색 프로세스의 모식도이다. 그리고 도 4는 본 발명의 일 실시예에 따른 반환 상품 검색 모듈의 블록 구성도이고, 도 5는 본 발명의 일 실시예에 따른 DFS 알고리즘을 상품 반환 프로세스의 모식도이다.1 is a block diagram of a system for optimizing unmanned store shelf information and customer shopping cart information according to an embodiment of the present invention. 2 is a block diagram of a purchased product search module according to an embodiment of the present invention, and FIG. 3 is a schematic diagram of a product search process using the BFS algorithm according to an embodiment of the present invention. 4 is a block diagram of a returned product search module according to an embodiment of the present invention, and FIG. 5 is a schematic diagram of a product return process using the DFS algorithm according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 일 실시예에 따른 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템(10)은 무인 점포 서버(100), 라이다(200), 카메라(300), 얼라인먼트 조정기(400), 로드셀(500), 고객 처리 서버(600), 상품 처리 서버(700)를 포함하도록 구성될 수 있다.Referring to FIG. 1, a system 10 for optimizing unmanned store shelf information and customer shopping cart information according to an embodiment of the present invention includes an unmanned store server 100, a lidar 200, a camera 300, an alignment adjuster ( 400), a load cell 500, a customer processing server 600, and a product processing server 700.

이하, 세부적인 구성에 대하여 설명한다.Hereinafter, a detailed configuration will be described.

무인 점포 서버(100)는 무인 점포 매대 및 각 무인 점포 매대의 상품 정보가 저장되도록 구성될 수 있다.The unmanned store server 100 may be configured to store product information of unmanned store counters and each unmanned store counter.

구체적으로는 무인 점포 서버(100)는 무인 점포 매대 맵(map) 데이터베이스(101), 상품 데이터베이스(102)를 포함하도록 구성될 수 있다.Specifically, the unmanned store server 100 may be configured to include an unmanned store shelf map database 101 and a product database 102 .

이하, 세부적인 구성에 대하여 설명한다.Hereinafter, a detailed configuration will be described.

무인 점포 매대 맵 데이터베이스(101)는 무인 점포 내에서의 무인 점포 매대 정보 및 해당 위치 정보가 저장되도록 구성될 수 있다.The unmanned store counter map database 101 may be configured to store unmanned store counter information and corresponding location information in an unmanned store.

상품 데이터베이스(102)는 무인 점포 내에서의 각 무인 점포 매대에 진열된 상품 정보가 저장되도록 구성될 수 있다.The product database 102 may be configured to store product information displayed on each unmanned store counter in an unmanned store.

라이다(200)는 무인 점포에 설치되어 무인 점포의 고객을 감지하도록 구성될 수 있다. 라이다(200)는 무인 점포의 천정 네 모서리에 각각 설치될 수 있다.LiDAR 200 may be installed in an unmanned store and configured to detect customers of the unmanned store. LiDAR 200 may be installed at each of the four corners of the ceiling of the unmanned store.

카메라(300)는 무인 점포에 설치되어 무인 점포의 고객을 촬영하도록 구성될 수 있다.The camera 300 may be installed in an unmanned store and configured to photograph customers of the unmanned store.

얼라인먼트 조정기(400)는 라이다(200)에서 감지된 고객 및 카메라(300)에서 촬영된 고객의 일치 여부를 확인할 수 있도록 라이다(200) 및 카메라(300)의 얼라인먼트(alignment)를 조정하도록 구성될 수 있다. 캘리브레이션(calibration) 조정에 의해 라이다(200)에서 감지한 고객 및 카메라(300)에서 촬영한 고객이 동일한 고객인지 여부를 확인할 수 있도록 구성될 수 있다.The alignment adjuster 400 is configured to adjust the alignment of the lidar 200 and the camera 300 to check whether the customer detected by the lidar 200 and the customer photographed by the camera 300 match. It can be. It may be configured to check whether the customer detected by the lidar 200 and the customer photographed by the camera 300 are the same customer by adjusting the calibration.

로드셀(500)은 상품 픽업(pick-up) 또는 상품 반환을 감지하기 위해 무인 점포 매대에 설치되어 무게 변화량을 감지하도록 구성될 수 있다. 상품 구매를 위한 상품 픽업의 경우 무인 점포 매대의 로드셀(500)의 감지 무게가 감소하며, 상품 반환을 위해 상품을 무인 점포 매대에 내려 놓는 경우 무인 점포 매대의 로드셀(500)의 감지 무게가 다시 증가하도록 구성될 수 있다. 고객은 하나의 상품을 픽업하거나 반환할 수도 있고, 동시에 둘 이상의 동일한 또는 서로 다른 상품을 픽업하거나 반환할 수도 있다.The load cell 500 may be installed in an unmanned store shelf to detect product pick-up or product return and detect a change in weight. In the case of product pickup for product purchase, the detected weight of the load cell 500 at the unmanned store shelf decreases, and when the product is put down on the unmanned store shelf for product return, the detected weight of the load cell 500 at the unmanned store shelf increases again. can be configured to A customer may pick up or return a single product, or may pick up or return two or more identical or different products at the same time.

고객 처리 서버(600)는 라이다(200)에 의해 감지되거나 카메라(300)에 의해 촬영되는 고객의 고객 정보를 생성하고, 또한 해당 고객의 고객 장바구니를 생성하도록 구성될 수 있다. 그리고 고객 처리 서버(600)는 고객의 상품 구매 또는 상품 반환을 확인하도록 구성될 수 있다.The customer processing server 600 may be configured to generate customer information of a customer detected by the lidar 200 or photographed by the camera 300 and also to generate a customer shopping cart for the customer. And the customer processing server 600 may be configured to confirm the customer's product purchase or product return.

고객 처리 서버(600)는 고객 인식 모듈(601), 고객 생성 모듈(602), 고객 장바구니 생성 모듈(603), 고객 장바구니 저장 모듈(604), 고객 추적 모듈(605), 고객/매대 거리 계산 모듈(606), 손 모션 확인 모듈(607), 구매/반환 고객 확인 모듈(608), 을 포함하도록 구성될 수 있다.The customer processing server 600 includes a customer recognition module 601, a customer creation module 602, a customer shopping cart creation module 603, a customer shopping cart storage module 604, a customer tracking module 605, and a customer/shelf distance calculation module. 606, a hand motion confirmation module 607, and a purchase/return customer confirmation module 608.

이하, 세부적인 구성에 대하여 설명한다.Hereinafter, a detailed configuration will be described.

고객 인식 모듈(601)은 라이다(200)에서 감지된 고객 및 카메라(300)에서 촬영된 고객의 일치 여부를 확인하여 고객을 인식하도록 구성될 수 있다. 고객 인식 모듈(601)은 특히, 카메라(300)에서 촬영된 고객을 포어그라운드(foreground)의 객체로서 인식하며, 고객의 체형이나 얼굴, 키 등을 이용하여 객체 인식 및 구별을 할 수 있도록 구성될 수 있다.The customer recognition module 601 may be configured to recognize the customer by checking whether the customer detected by the lidar 200 and the customer photographed by the camera 300 match. In particular, the customer recognition module 601 recognizes the customer photographed by the camera 300 as a foreground object, and is configured to recognize and distinguish the object using the customer's body shape, face, height, etc. can

고객 생성 모듈(602)은 고객 인식 모듈(601)에서 인식된 고객 정보를 생성하도록 구성될 수 있다. 즉, 고객 생성 모듈(602)은 무인 점포에 입장한 신규 고객으로 인식하여 고객 정보를 생성할 수 있다.The customer creation module 602 may be configured to generate customer information recognized in the customer recognition module 601 . That is, the customer creation module 602 may generate customer information by recognizing a new customer entering an unmanned store.

고객 장바구니 생성 모듈(603)은 고객 생성 모듈(602)에서 생성된 고객 정보에 대응되는 고객 장바구니를 생성하도록 구성될 수 있다.The customer shopping cart creation module 603 may be configured to generate a customer shopping cart corresponding to the customer information generated in the customer creation module 602 .

고객 장바구니 저장 모듈(604)은 고객 장바구니 생성 모듈(603)에서 생성된 고객 장바구니가 저장되도록 구성될 수 있다.The customer shopping cart storage module 604 may be configured to store the customer shopping cart created in the customer shopping cart creation module 603 .

고객 추적 모듈(605)은 고객 인식 모듈(601)에서 인식된 고객을 추적하도록 구성될 수 있다. 고객 추적 모듈(605)은 라이다(200)와 카메라(300)의 지속적인 감지 결과와 고객 인식 모듈(601)의 인식 결과를 이용하여 고객을 추적할 수 있다.The customer tracking module 605 may be configured to track customers recognized in the customer recognition module 601 . The customer tracking module 605 may track the customer using the continuous detection result of the lidar 200 and the camera 300 and the recognition result of the customer recognition module 601 .

여기서, 둘 이상의 고객이 서로 근접하게 되어 라이다(200) 상에서 하나의 고객으로 인식되는 경우에는 일단 대기하도록 구성되며, 고객이 서로 멀어지면 카메라(300)를 이용한 고객 얼굴, 체형 등의 객체 감지 결과를 이용하여 고객을 각각 인식하고 다시 추적하도록 구성될 수 있다. 라이다(200)는 카메라(300)를 이용한 객체 인식 결과를 기반으로 각각의 고객을 다시 추적할 수 있다.Here, when two or more customers come close to each other and are recognized as one customer on the lidar 200, it is configured to wait once, and when the customers move away from each other, the object detection result such as the customer's face and body shape using the camera 300 It can be configured to recognize each customer using and track them back. LIDAR 200 may re-track each customer based on the object recognition result using the camera 300.

고객/매대 거리 계산 모듈(606)은 로드셀(500)에 의해 감지된 무게 변화량이 발생한 경우, 해당 무인 점포 매대 및 무인 점포 매대의 고객 간의 거리를 계산하도록 구성될 수 있다. 여기서, 해당 무인 점포 매대에서 가장 가까운 고객 또는 일정 거리 범위 내의 고객이 해당 무인 점포 매대에서 상품 픽업을 했거나 상품 반환을 한 것으로 추정될 수 있다.The customer/stand distance calculation module 606 may be configured to calculate a distance between a corresponding unmanned store stand and a customer at the unmanned store stand when the change in weight detected by the load cell 500 occurs. Here, it may be estimated that a customer closest to the corresponding unmanned store counter or a customer within a certain distance range picked up a product from the corresponding unmanned store counter or returned the product.

손 모션 확인 모듈(607)은 카메라(300)에 의해 촬영된 고객의 손 모션을 확인하도록 구성될 수 있다. 손 모션 확인 모듈(607)은 카메라(300)의 촬영 화상을 이용하여 고객 팔, 손목, 손 등과 관절을 인식할 수 있으며, 고객의 손의 모션을 확인할 수 있다. 손 모션 확인 모듈(607)은 고객의 손이 무인 점포 매대로 들어가거나 무인 점포 매대로부터 나오는 것을 확인할 수 있다. 이를 통해 특정 고객이 상품 픽업을 하거나 상품 반환을 하는 것을 인지할 수 있다.The hand motion checking module 607 may be configured to check the customer's hand motion captured by the camera 300 . The hand motion checking module 607 can recognize the customer's arm, wrist, hand, etc., joints using the captured image of the camera 300, and can check the motion of the customer's hand. The hand motion checking module 607 may confirm that the customer's hand enters or leaves the unmanned store counter. Through this, it is possible to recognize that a specific customer picks up a product or returns a product.

구매/반환 고객 확인 모듈(608)은 로드셀(500)에 의해 감지된 무게 변화량, 고객/매대 거리 계산 모듈(606)에 의해 계산된 거리 및 손 모션 확인 모듈(607)에 의해 확인된 손 모션을 이용하여 구매 고객 또는 반환 고객을 확인하도록 구성될 수 있다.The purchase/return customer confirmation module 608 determines the weight change detected by the load cell 500, the distance calculated by the customer/shelf distance calculation module 606, and the hand motion confirmed by the hand motion confirmation module 607. It can be configured to identify purchasing customers or returning customers by using.

상품 처리 서버(700)는 고객 처리 서버(600)에서 확인된 고객의 상품 구매 또는 상품 반환에 따라 고객 장바구니 및 무인 점포 매대의 상품 정보를 처리하도록 구성될 수 있다.The product processing server 700 may be configured to process product information of a customer's shopping cart and an unmanned store counter according to the customer's product purchase or product return confirmed by the customer processing server 600 .

상품 처리 서버(700)는 무게 변화량 수신 모듈(701), 구매 상품 검색 모듈(702), 구매 상품 추가 모듈(703), 반환 상품 검색 모듈(704), 반환 상품 제거 모듈(705), 무인 점포 매대 업데이트 모듈(706)을 포함하도록 구성될 수 있다.The product processing server 700 includes a weight variation receiving module 701, a purchased product search module 702, a purchased product addition module 703, a returned product search module 704, a returned product removal module 705, and an unmanned store shelf. An update module 706 may be configured.

이하, 세부적인 구성에 대하여 설명한다.Hereinafter, a detailed configuration will be described.

무게 변화량 수신 모듈(701)은 로드셀(500)로부터 해당 무인 점포 매대의 무게 변화량을 수신하도록 구성될 수 있다.The weight variation receiving module 701 may be configured to receive the weight variation of the corresponding unmanned store shelf from the load cell 500 .

구매 상품 검색 모듈(702)은 무게 변화량 수신 모듈(701)에서 수신된 무게 변화량을 이용하여 해당 무인 점포 매대의 구매 상품을 상품 데이터베이스(102) 상에서 추정하여 검색하도록 구성될 수 있다.The purchased product search module 702 may be configured to estimate and search for purchased products on the product database 102 of the corresponding unmanned store shelf using the weight change amount received by the weight change amount receiving module 701 .

도 2를 참조하면, 구매 상품 검색 모듈(702)은 무게변화량/N 산출부(702a), BFS 검색 제어부(702b), BFS 검색부(702c), 오차 확인부(702d), 구매상품/구매수량 결정부(702e)를 포함하도록 구성될 수 있다.Referring to FIG. 2 , the purchased product search module 702 includes a weight change/N calculation unit 702a, a BFS search control unit 702b, a BFS search unit 702c, an error check unit 702d, and a purchased product/purchased quantity. It may be configured to include a decision unit 702e.

이하, 세부적인 구성에 대하여 설명한다.Hereinafter, a detailed configuration will be described.

무게변화량/N 산출부(702a)는 무게 변화량 수신 모듈(701)에서 수신된 무게 변화량 및 무게 변화량을 N(자연수)개로 나눈 값을 산출하도록 구성될 수 있다.The weight change amount/N calculation unit 702a may be configured to calculate the weight change amount received from the weight change amount receiving module 701 and a value obtained by dividing the weight change amount by N (natural numbers).

여기서, 고객은 하나의 상품만 픽업할 수도 있고, 한 번에 여러 개의 상품을 픽업할 수 있기 때문에 무게 변화량을 N개로 나눈 값을 산출하여 상품 검색에 이용할 수 있다.Here, since the customer may pick up only one product or pick up several products at once, a value obtained by dividing the amount of change in weight by N may be calculated and used for product search.

BFS 검색 제어부(702b)는 무게 변화량 수신 모듈(701)에서 수신된 무게 변화량 및 무게변화량/N산출부(701a)에서 산출된 값을 이용하여 해당 무인 점포 매대의 구매 상품 및 구매 수량을 순차적으로 검색하도록 제어할 수 있다.The BFS search control unit 702b sequentially searches the purchased product and the purchased quantity of the corresponding unmanned store shelf using the weight change amount received from the weight change amount receiving module 701 and the value calculated by the weight change amount/N calculation unit 701a. can be controlled to

이때, 순차 검색해도 검색되지 않는 경우에는 하나의 상품 종류에 대해 여러 개를 동시에 픽업한 것이 아니라 서로 다른 종류의 상품을 동시에 픽업한 것으로 판단할 수 있으며, 서로 다른 종류의 상품과 그 개수를 조합하여 순차 검색하도록 제어할 수 있다.At this time, if it is not searched even by sequential search, it can be determined that different types of products are picked up at the same time, rather than multiple products of one product type picked up at the same time, and different types of products and their number are combined You can control to search sequentially.

BFS 검색부(702c)는 BFS 검색 제어부(702b)의 제어에 의해 BFS(breadth first search) 알고리즘을 이용하여 상품 데이터베이스(102) 상에서 구매 상품 및 구매 수량을 검색하도록 구성될 수 있다. 무인 점포 매대의 상품은 동일한 종류 하나의 상품만 진열되거나 또는 1-3 종류의 상품이 진열되는 정도가 될 수 있다. 즉, 상품의 종류가 많지 않을 수 있으므로, BFS 알고리즘을 도 3과 같이 적용하여 상품을 검색하는 것이 유리하다.The BFS search unit 702c may be configured to search for purchased products and purchase quantities on the product database 102 using a breadth first search (BFS) algorithm under the control of the BFS search controller 702b. The products on the unmanned store shelves may be displayed with only one product of the same type or 1-3 types of products. That is, since there may not be many types of products, it is advantageous to search for products by applying the BFS algorithm as shown in FIG.

오차 확인부(702d)는 BFS 검색부(702c)에 의해 검색된 구매 상품과 무게 변화량 수신 모듈(701)에서 수신된 무게 변화량 간의 오차를 확인하도록 구성될 수 있다.The error checking unit 702d may be configured to check an error between the purchase product retrieved by the BFS search unit 702c and the weight change amount received by the weight change amount receiving module 701 .

구매상품/구매수량 결정부(702e)는 오차 확인부(702d)에서 확인된 오차를 이용하여 소정 오차 범위 이내이면 구매 상품 및 해당 구매 수량을 결정하도록 구성될 수 있다.The purchased product/purchased quantity determining unit 702e may be configured to determine the purchased product and the corresponding purchased quantity within a predetermined error range by using the error identified by the error checking unit 702d.

구매 상품 추가 모듈(703)은 구매 상품 검색 모듈(702)에서 검색된 구매 상품을 고객 장바구니 저장 모듈(604)의 해당 고객 장바구니에 추가하도록 구성될 수 있다.The purchased product addition module 703 may be configured to add the purchased product searched in the purchased product search module 702 to a corresponding customer shopping cart of the customer shopping cart storage module 604 .

반환 상품 검색 모듈(704)은 무게 변화량 수신 모듈(701)에서 수신된 무게 변화량을 이용하여 해당 무인 점포 매대의 반환 상품을 해당 고객 장바구니 상에서 추정하여 검색하도록 구성될 수 있다.The return product search module 704 may be configured to estimate and search for returned products on the corresponding unmanned store shelf on the corresponding customer's shopping cart by using the change in weight received from the change in weight receiving module 701 .

도 4를 참조하면, 반환 상품 검색 모듈(704)은 무게변화량/N 산출부(704a), DFS 검색 제어부(704b), DFS 검색부(704c), 오차 확인부(704d), 반환상품/반환수량 결정부(704e)를 포함하도록 구성될 수 있다.Referring to FIG. 4 , the return product search module 704 includes a weight change/N calculation unit 704a, a DFS search control unit 704b, a DFS search unit 704c, an error check unit 704d, and a returned product/return quantity. It may be configured to include a decision unit 704e.

이하, 세부적인 구성에 대하여 설명한다.Hereinafter, a detailed configuration will be described.

무게변화량/N 산출부(704a)는 무게 변화량 수신 모듈(701)에서 수신된 무게 변화량 및 무게 변화량을 N(자연수)개로 나눈 값을 산출하도록 구성될 수 있다.The weight change amount/N calculation unit 704a may be configured to calculate the weight change amount received from the weight change amount receiving module 701 and a value obtained by dividing the weight change amount by N (natural numbers).

여기서, 고객은 하나의 상품만 반환할 수도 있고, 한 번에 여러 개의 상품을 반환할 수 있기 때문에 무게 변화량을 N개로 나눈 값을 산출하여 상품 검색에 이용할 수 있다.Here, since the customer may return only one product or several products at once, a value obtained by dividing the amount of change in weight by N items may be calculated and used for product search.

DFS 검색 제어부(704b)는 무게 변화량 수신 모듈(701)에서 수신된 무게 변화량 및 무게변화량/N산출부(704a)에서 산출된 값을 이용하여 해당 고객 장바구니의 반환 상품 및 반환 수량을 순차 검색하도록 제어할 수 있다.The DFS search control unit 704b uses the weight change amount received from the weight change amount receiving module 701 and the value calculated by the weight change amount/N calculation unit 704a to control to sequentially search the return product and return quantity of the customer's shopping cart. can do.

이때, 순차 검색해도 검색되지 않는 경우에는 하나의 상품 종류에 대해 여러 개를 동시에 반환한 것이 아니라 서로 다른 종류의 상품을 동시에 반환한 것으로 판단할 수 있으며, 서로 다른 종류의 상품과 그 개수를 조합하여 순차 검색하도록 제어할 수 있다.At this time, if it is not searched even after sequential search, it can be determined that different types of products are returned at the same time, rather than several products of one product type being returned at the same time. You can control to search sequentially.

DFS 검색부(704c)는 DFS 검색 제어부(704b)의 제어에 의해 DFS(depth first search) 알고리즘을 이용하여 해당 고객 장바구니 상에서 반환 상품 및 반환 수량을 검색하도록 구성될 수 있다.The DFS search unit 704c may be configured to search for return products and return quantities in the customer's shopping cart using a depth first search (DFS) algorithm under the control of the DFS search control unit 704b.

오차 확인부(704d)는 DFS 검색부(704c)에 의해 검색된 반환 상품과 무게 변화량 수신 모듈(701)에서 수신된 무게 변화량 간의 오차를 확인하도록 구성될 수 있다.The error checking unit 704d may be configured to check an error between the return product retrieved by the DFS search unit 704c and the weight change amount received by the weight change amount receiving module 701 .

반환상품/반환수량 결정부(704e)는 오차 확인부(704d)에서 확인된 오차를 이용하여 반환 상품 및 해당 반환 수량을 결정하도록 구성될 수 있다.The returned product/return quantity determining unit 704e may be configured to determine the returned product and the corresponding returned quantity using the error identified by the error checking unit 704d.

반환 상품 제거 모듈(705)은 반환 상품 검색 모듈(704)에서 검색된 반환 상품을 고객 장바구니 저장 모듈(604)의 해당 고객 장바구니에서 제거하도록 구성될 수 있다.The returned product removal module 705 may be configured to remove the return product searched for by the returned product search module 704 from the corresponding customer shopping cart of the customer shopping cart storage module 604 .

무인 점포 매대 업데이트 모듈(706)은 구매 상품 추가 모듈(703)에서 추가한 구매 상품 또는 반환 상품 제거 모듈(705)에서 제거한 반환 상품을 이용하여 해당 무인 점포 매대의 상품 정보를 업데이트하도록 구성될 수 있다.The unmanned store shelf update module 706 may be configured to update product information of the corresponding unmanned store shelf using purchased products added by the purchased product addition module 703 or returned products removed by the return product removal module 705. .

이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although described with reference to the above embodiments, those skilled in the art can understand that the present invention can be variously modified and changed without departing from the spirit and scope of the present invention described in the claims below. There will be.

100: 무인 점포 서버
101: 무인 점포 매대 맵 데이터베이스
102: 상품 데이터베이스
200: 라이다
300: 카메라
400: 얼라인먼트 조정기
500: 로드셀
600: 고객 처리 서버
601: 고객 인식 모듈
602: 고객 생성 모듈
603: 고객 장바구니 생성 모듈
604: 고객 장바구니 저장 모듈
605: 고객 추적 모듈
606: 고객/매대 거리 계산 모듈
607: 손 모션 확인 모듈
608: 구매/반환 고객 확인 모듈
700: 상품 처리 서버
701: 무게 변화량 수신 모듈
702: 구매 상품 검색 모듈
702a: 무게변화량/N 산출부
702b: BFS 검색 제어부
702c: BFS 검색부
702d: 오차 확인부
702e: 구매상품/구매수량 결정부
703: 구매 상품 추가 모듈
704: 반환 상품 검색 모듈
704a: 무게변화량/N 산출부
704b: DFS 검색 제어부
704c: DFS 검색부
704d: 오차 확인부
704e: 반환상품/반환수량 결정부
705: 반환 상품 제거 모듈
706: 무인 점포 매대 업데이트 모듈100: unmanned store server
101: unmanned store shelf map database
102: product database
200: Lida
300: camera
400: alignment adjuster
500: load cell
600: customer processing server
601: customer awareness module
602: Customer creation module
603: Customer shopping cart creation module
604: Customer shopping cart storage module
605: customer tracking module
606: Customer / store distance calculation module
607: hand motion confirmation module
608: purchase/return customer confirmation module
700: product processing server
701: weight variation receiving module
702 Purchase product search module
702a: weight change / N calculation unit
702b: BFS search control unit
702c: BFS search unit
702d: error confirmation unit
702e: purchase product/purchase quantity determination unit
703: purchase product addition module
704 Return product search module
704a: weight change / N calculation unit
704b: DFS Search Control
704c: DFS search unit
704d: error confirmation unit
704e: Return product/return quantity determination unit
705 Return product removal module
706: Unmanned store shelf update module

Claims (3)

무인 점포 매대 및 각 무인 점포 매대의 상품 정보가 저장되는 무인 점포 서버;
무인 점포에 설치되어 상기 무인 점포의 고객을 감지하는 라이다(lidar);
상품 픽업(pick-up) 또는 상품 반환을 감지하기 위해 상기 무인 점포 매대에 설치되어 무게 변화량을 감지하는 로드셀(loadcell);
상기 라이다에 의해 감지된 고객의 고객 정보 및 해당 고객의 고객 장바구니를 생성하고, 상기 고객의 상품 구매 또는 상품 반환을 확인하는 고객 처리 서버를 포함하는 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템.
an unmanned store server storing unmanned store shelves and product information of each unmanned store shelf;
A lidar installed in an unmanned store to detect a customer of the unmanned store;
A load cell installed in the unmanned store shelf to detect a weight change in order to detect product pick-up or product return;
Optimization system for unmanned store shelf information and customer shopping cart information including a customer processing server that generates customer information of the customer detected by the lidar and a customer shopping cart of the corresponding customer, and confirms product purchase or product return of the customer.
 제1항에 있어서,
상기 고객 처리 서버에서 확인된 고객의 상품 구매 또는 상품 반환에 따라 상기 고객 장바구니 및 상기 무인 점포 매대의 상품 정보를 처리하는 상품 처리 서버를 더 포함하도록 구성되는 것을 특징으로 하는 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템.
According to claim 1,
and a product processing server that processes product information of the customer shopping cart and the unmanned store shelf according to the customer's product purchase or product return confirmed by the customer processing server. Optimization system of information.
 제1항에 있어서, 상기 무인 점포 서버는,
상기 무인 점포 내에서의 상기 무인 점포 매대 정보 및 해당 위치 정보가 저장되는 무인 점포 매대 맵 데이터베이스;
상기 무인 점포 내에서의 각 무인 점포 매대에 진열된 상품 정보가 저장되는 상품 데이터베이스를 포함하도록 구성되는 것을 특징으로 하는 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템.The method of claim 1, wherein the unmanned store server,
an unmanned store shelf map database storing the unmanned store shelf information and corresponding location information in the unmanned store;
Optimization system for unmanned store shelf information and customer shopping cart information, characterized in that configured to include a product database in which product information displayed on each unmanned store shelf in the unmanned store is stored.
KR1020210168209A 2021-11-30 2021-11-30 System for optimizing cashierless store shelf information and customer shopping cart information KR20230080758A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210168209A KR20230080758A (en) 2021-11-30 2021-11-30 System for optimizing cashierless store shelf information and customer shopping cart information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210168209A KR20230080758A (en) 2021-11-30 2021-11-30 System for optimizing cashierless store shelf information and customer shopping cart information

Publications (1)

Publication Number Publication Date
KR20230080758A true KR20230080758A (en) 2023-06-07

Family

ID=86761534

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210168209A KR20230080758A (en) 2021-11-30 2021-11-30 System for optimizing cashierless store shelf information and customer shopping cart information

Country Status (1)

Country Link
KR (1) KR20230080758A (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110122890A (en) 2010-05-06 2011-11-14 박종덕 Auto-charge system using goods image search and method thereof
KR101858530B1 (en) 2017-07-14 2018-05-17 주식회사 코리아세븐 Unattended store system, method for controlling the system, computer program for executing the method, and unattended payment device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110122890A (en) 2010-05-06 2011-11-14 박종덕 Auto-charge system using goods image search and method thereof
KR101858530B1 (en) 2017-07-14 2018-05-17 주식회사 코리아세븐 Unattended store system, method for controlling the system, computer program for executing the method, and unattended payment device

Similar Documents

Publication Publication Date Title
US11341454B2 (en) Method for tracking placement of products on shelves in a store
US9928438B2 (en) High accuracy localization system and method for retail store profiling via product image recognition and its corresponding dimension database
US10909667B1 (en) Image rectification using transformation data
JP6791534B2 (en) Product management device, product management method and program
JP5259286B2 (en) 3D object recognition system and inventory system using the same
WO2021012644A1 (en) Shelf commodity detection method and system
EP3731546A1 (en) Target object positioning system and positioning method
KR102213156B1 (en) Method, apparatus and system for associating a target object with an item
US20210049542A1 (en) Systems, devices, and methods for estimating stock level with depth sensor
US20230160740A1 (en) Item-customer matching method and device based on vision and gravity sensing
KR102380255B1 (en) System and method for monitoring shelf goods inventory based on image
JP6731033B2 (en) Method, apparatus, and system for identifying article position
CN105277120A (en) Object measuring system and method
JP2022548730A (en) Electronic device for automatic user identification
CN110490217A (en) For improving the method and system of object detection and object classification
CN108805495A (en) Article storage management method and system and computer-readable medium
JP2016185845A (en) Inspection processing apparatus, inspection processing method and program
CN112907168A (en) Dynamic commodity identification method, unmanned sales counter and sales method thereof
CN115249356A (en) Identification method, device, equipment and storage medium
KR20230080758A (en) System for optimizing cashierless store shelf information and customer shopping cart information
KR20210042566A (en) System and method for recognizing purchase behavior based on image
US20220101296A1 (en) Article deduction apparatus, article deduction method, and program
CN103116838A (en) System and method of measuring time intervals to deliver a service
US11117744B1 (en) Determination of untidy item return to an inventory location
JP7393184B2 (en) Point cloud data processing device

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application