KR20230109332A - 무인 매장 관리 장치 및 방법 - Google Patents

무인 매장 관리 장치 및 방법 Download PDF

Info

Publication number
KR20230109332A
KR20230109332A KR1020220005186A KR20220005186A KR20230109332A KR 20230109332 A KR20230109332 A KR 20230109332A KR 1020220005186 A KR1020220005186 A KR 1020220005186A KR 20220005186 A KR20220005186 A KR 20220005186A KR 20230109332 A KR20230109332 A KR 20230109332A
Authority
KR
South Korea
Prior art keywords
freezer
image data
unmanned store
unmanned
store
Prior art date
Application number
KR1020220005186A
Other languages
English (en)
Inventor
정준철
이종은
한영동
정지헌
Original Assignee
주식회사 무잉
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 무잉 filed Critical 주식회사 무잉
Priority to KR1020220005186A priority Critical patent/KR20230109332A/ko
Publication of KR20230109332A publication Critical patent/KR20230109332A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06313—Resource planning in a project environment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06315—Needs-based resource requirements planning or analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G06T7/001—Industrial image inspection using an image reference approach
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G08B21/182—Level alarms, e.g. alarms responsive to variables exceeding a threshold
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30242—Counting objects in image

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Marketing (AREA)
  • Quality & Reliability (AREA)
  • Development Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Game Theory and Decision Science (AREA)
  • Educational Administration (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Medical Informatics (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Evolutionary Computation (AREA)
  • Data Mining & Analysis (AREA)
  • Emergency Management (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

무인 매장 관리 장치 및 방법이 개시된다. 무인 매장 관리 방법은, CCTV 카메라로부터 무인 매장 내부를 촬영하여 획득된 매장 영상 데이터를 수신하는 단계, 수신된 매장 영상 데이터를 이용하여 무인 매장 내에 존재하는 냉동고를 검출 및 식별하는 단계, 수신된 매장 영상 데이터를 이용하여, 냉동고에 보관된 상품을 모니터링하여 냉동고에 보관된 상품 중에 존재하는 이상재고를 파악하는 단계 및 수신된 매장 영상 데이터를 이용하여, 냉동고에 보관된 상품을 모니터링하여 실시간 재고량을 파악하고, 파악된 실시간 재고량에 따라 발주 처리를 수행하는 단계를 포함한다.

Description

무인 매장 관리 장치 및 방법{Apparatus and method for managing unmanned stores}
본 발명은 무인 매장 관리 장치 및 방법에 관한 것이다.
무인 매장은 매장 내에 상주하는 직원이 없는 매장이다. 최근, 인건비가 증가하는 추세에 따라 관리 노동력이 낮고 초기 투자비용이 저렴한 무인 매장이 유통업계에서 큰 관심을 받고 있다.
하지만, 무인 매장은 관리자 부재에 따라 소액 절도 범죄가 빈번히 발생하고 있다. 이러한 소액 절도 범죄는 금전적 손실 뿐만 아니라, 판매량과 실재 재고량에 차이가 발생하여 매장 관리에 어려움이 따른다. 그래서, 기존에는, 결제 시스템 외에 별도의 재고 관리를 위한 시스템을 도입함으로써, 절도 범죄가 발생한 시점을 유추할 수 있었고, 실재 재고량의 파악이 가능하였다.
관련된 종래기술을 살펴보면, 대한민국등록특허 제10-2319893호에는 진열대 내의 인식 영역을 이용하여 진열대 별 재고를 실시간으로 파악하는 것을 개시하고 있다. 그러나, 종래의 재고 관리 시스템은 인식 영역 내에 상품이 있어야 하므로, 제한적이고, 진열대 내에 다른 상품이 있더라도 검출하지 못하고 일차원적인 재고 파악만 가능할 뿐, 시간대 및 상황에 적합한 재고 관리에는 어려움이 있다.
그리고, 대한민국공개특허 제10-2021-0079965호에는 무게 센서와 이미지 센서를 이용하여 상품의 재고 정보를 업데이트하고, 출고 정보와 구매 정보를 비교하여 결제를 진행하도록 하고 재고를 파악하는 것을 개시하고 있다. 그러나, 종래의 재고 관리 시스템은 스마트 진열대를 이용해야 하므로, 등록 가능한 상품이 제한적이고, 제품 인식을 위하여 진열대 별로 이미지 센서와 무게 센서가 설치되므로, 높은 설치 비용이 발생하는 문제가 있다.
대한민국등록특허공보 제10-2319893호(2021.10.26) 대한민국공개특허공보 제10-2021-0079965호(2021.06.30)
본 발명은 딥러닝 기반 실시간 영상 처리 모델 및 클라우드 서비스를 이용하여 무인 매장 내의 이상재고 파악을 통해 재고량을 확실하게 파악하고, 파악된 재고량에 따라 발주 처리를 수행하는 무인 매장 관리 장치 및 방법을 제공하기 위한 것이다.
본 발명의 일 측면에 따르면, 무인 매장 관리 장치가 수행하는 무인 매장 관리 방법이 개시된다.
본 발명의 실시예에 따른 무인 매장 관리 방법은, CCTV 카메라로부터 무인 매장 내부를 촬영하여 획득된 매장 영상 데이터를 수신하는 단계, 상기 수신된 매장 영상 데이터를 이용하여 상기 무인 매장 내에 존재하는 냉동고를 검출 및 식별하는 단계, 상기 수신된 매장 영상 데이터를 이용하여, 상기 냉동고에 보관된 상품을 모니터링하여 상기 냉동고에 보관된 상품 중에 존재하는 이상재고를 파악하는 단계 및 상기 수신된 매장 영상 데이터를 이용하여, 상기 냉동고에 보관된 상품을 모니터링하여 실시간 재고량을 파악하고, 상기 파악된 실시간 재고량에 따라 발주 처리를 수행하는 단계를 포함한다.
상기 냉동고를 검출 및 식별하는 단계는, 미리 설정된 냉동고 딥러닝 모델을 이용하여 상기 수신된 매장 영상 데이터에서 상기 냉동고를 검출하는 단계, 상기 검출된 냉동고 내부가 나타나는 매장 영상 데이터와 저장된 상품 이미지 정보의 비교분석을 통해, 상기 검출된 냉동고 내에 존재하는 상품을 확인하는 단계 및 상기 검출된 냉동고의 확인된 상품의 정보와 상기 검출된 냉동고의 저장된 보유 상품 정보의 유사도를 산출하고, 상기 산출된 유사도가 미리 설정된 기준치 이상이면, 상기 검출된 냉동고의 냉동고 정보를 확정 및 저장하는 단계를 포함한다.
상기 이상재고를 파악하는 단계는, 상기 수신된 매장 영상 데이터에서 상기 검출된 냉동고에 존재하는 상품의 정보와 저장된 보유 상품 정보를 비교하여 상기 검출된 냉동고의 보유 상품을 확인하는 단계, 상기 보유 상품의 확인에 따라 상기 이상재고가 존재하는 경우, 상기 이상재고의 정보를 확인하는 단계 및 상기 이상재고 존재에 따라 상기 이상재고를 알리는 알림 메시지를 관리자 단말로 전송하는 단계를 포함한다.
상기 발주 처리를 수행하는 단계는, 사익 수신된 매장 영상 데이터에서 상기 냉동고의 양 측 내벽을 인식하는 단계, 상기 인식된 양 측 내벽 사이에 존재하는 상품을 인식하고 카운팅하여 실시간 재고량을 추정하는 단계, 상기 추정된 실시간 재고량과 기 저장된 과거 판매량을 비교하는 단계 및 상기 비교 결과, 추정된 실시간 재고량이 상기 과거 판매량보다 작은 경우, 발주 처리를 수행하고, 발주 알림 메시지를 관리자 단말로 전송하는 단계를 포함한다.
본 발명의 다른 측면에 따르면, 무인 매장 관리 장치가 개시된다.
본 발명의 실시예에 따른 무인 매장 관리 장치는, 명령어를 저장하는 메모리 및 상기 명령어를 실행하는 프로세서를 포함하되, 상기 명령어는, CCTV 카메라로부터 무인 매장 내부를 촬영하여 획득된 매장 영상 데이터를 수신하는 단계, 상기 수신된 매장 영상 데이터를 이용하여 상기 무인 매장 내에 존재하는 냉동고를 검출 및 식별하는 단계, 상기 수신된 매장 영상 데이터를 이용하여, 상기 냉동고에 보관된 상품을 모니터링하여 상기 냉동고에 보관된 상품 중에 존재하는 이상재고를 파악하는 단계 및 상기 수신된 매장 영상 데이터를 이용하여, 상기 냉동고에 보관된 상품을 모니터링하여 실시간 재고량을 파악하고, 상기 파악된 실시간 재고량에 따라 발주 처리를 수행하는 단계를 포함하는 무인 매장 관리 방법을 수행한다.
본 발명의 실시예에 따른 무인 매장 관리 장치 및 방법은, 딥러닝 기반 실시간 영상 처리 모델 및 클라우드 서비스를 이용하여 무인 매장 내의 이상재고 파악을 통해 재고량을 확실하게 파악하고, 파악된 재고량에 따라 발주 처리를 수행함으로써, 무인 매장의 실제 재고량의 파악을 통해 매장 관리 효율을 높일 수 있고, 도난 발생 시 대략적인 도난 발생 시점을 유추하는데 도움을 줄 수 있다.
도 1은 본 발명의 실시예에 따른 무인 매장 관리 장치가 동작하는 무인 매장 시스템을 개략적으로 예시하여 나타낸 도면.
도 2는 본 발명의 실시예에 따른 무인 매장 관리 장치가 수행하는 무인 매장 관리 방법을 개략적으로 예시하여 나타낸 흐름도.
도 3 내지 도 5는 도 2의 본 발명의 실시예에 따른 무인 매장 관리 방법의 각 단계의 세부 단계를 나타낸 흐름도.
도 6은 본 발명의 실시예에 따른 무인 매장 관리 장치의 구성을 개략적으로 예시하여 나타낸 도면.
본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.
이하, 본 발명의 다양한 실시예들을 첨부된 도면을 참조하여 상술하겠다.
도 1은 본 발명의 실시예에 따른 무인 매장 관리 장치가 동작하는 무인 매장 시스템을 개략적으로 예시하여 나타낸 도면이다.
도 1을 참조하면, 본 발명의 실시예에 따른 무인 매장 시스템은, 무인 매장 관리 장치(100), 냉동고(200), CCTV 카메라(300), 키오스크(400) 및 관리자 단말(500)을 포함하여 구성될 수 있다.
냉동고(200)는 빙과류와 같은 냉동된 상품을 보관하며, 무인 매장 내에 적어도 하나가 배치될 수 있다.
CCTV 카메라(300)는 무인 매장 내부를 촬영하여 냉동고 검출 및 재고 파악을 위한 매장 영상 데이터를 획득한다. 예를 들어, CCTV 카메라(300)는 무인 매장 전체를 촬영하기 위하여, 매장 천장에 복수 개가 일정 간격을 두고 배치되어 설치될 수 있다. 그리고, CCTV 카메라(300)는 무인 매장 내부의 촬영을 위한 카메라 모듈 및 획득된 매장 영상 데이터를 무인 매장 관리 장치(100)로 전송하기 위한 무선통신 모듈을 포함할 수 있다.
키오스크(400)는 무인 매장 관리 장치(100)와 연동하여, 무인 매장의 상품의 구매 및 결제에 대하여 사용자 인터페이스를 제공하고, 사용자의 구매 및 결제를 처리한다. 예를 들어, 키오스크(400)는 무인 매장 관리 장치(100)와의 통신을 위한 무선통신 모듈을 포함하며, 무인 매장 관리 장치(100)로부터 실시간으로 변동되는 재고 정보를 요청하여 수신하고, 이를 상품 구매를 위한 사용자 인터페이스에 반영할 수 있다.
관리자 단말(500)은 무인 매장을 관리하는 관리자의 단말로, 무인 매장 관리 장치(100)로부터 이상재고 정보, 변동된 실시간 재고 정보 및 발주 정보를 수신하여 출력할 수 있다. 예를 들어, 관리자 단말(500)은 무인 매장 관리 장치(100)와의 통신을 위한 무선통신 모듈을 포함할 수 있다.
무인 매장 관리 장치(100)는 기본적으로, 무인 매장의 재고, 발주, 구매, 결제 등을 관리한다.
특히, 무인 매장 관리 장치(100)는 CCTV 카메라(300)로부터 수신되는 매장 영상 데이터를 이용하여, 무인 매장 내의 냉동고(200)를 검출 및 식별하고, 식별된 냉동고(200)에 보관된 상품을 모니터링하여 이상재고 및 실시간 재고량을 파악하고, 파악된 실시간 재고량에 따라 발주 처리를 수행한다.
한편, 본 발명의 실시예에 따른 무인 매장 관리 장치(100)는 네트워크 연결 가능한 클라우드 서버를 통해 구현될 수 있다. 예를 들어, 클라우드 서버는 무인 매장의 재고, 발주, 구매 및 결제의 기능을 수행할 수 있으며, 본 발명의 실시예에 따른 무인 매장 관리 장치(100)를 포함하여 구성될 수 있다.
본 명세서에서 서버란 본 발명의 실시예에 따른 무인 매장 관리 방법을 수행하는 컴퓨팅 디바이스로서, 하나 또는 둘 이상의 물리적 개체일 수 있다. 서버가 복수의 물리적 개체로 나뉘어 구현될 때, 각각의 물리적 개체의 관리 주체는 서로 상이할 수 있다. 서버에는 각각의 데이터베이스에 대응되는 정보를 저장하는 소프트웨어 및 하드웨어의 기능적 구조적 결합을 의미하는 DB가 포함될 수 있으며, DB는 적어도 하나의 테이블로 구현될 수도 있으며, 데이터베이스에 저장된 정보를 검색, 저장, 및 관리하기 위한 별도의 DBMS(Database Management System)을 더 포함할 수도 있다. 또한, 링크드 리스트(linked-list), 트리(Tree), 관계형 데이터베이스의 형태 등 다양한 방식으로 구현될 수 있으며, 데이터베이스에 대응되는 정보를 저장할 수 있는 모든 데이터 저장매체 및 데이터 구조를 포함한다.
이와 같은 본 발명의 실시예에 따른 무인 매장 관리 장치(100)의 동작에 대하여 이후, 도 2 내지 도 5를 참조하여 상세히 설명하기로 한다.
도 2는 본 발명의 실시예에 따른 무인 매장 관리 장치가 수행하는 무인 매장 관리 방법을 개략적으로 예시하여 나타낸 흐름도이고, 도 3 내지 도 5는 도 2의 본 발명의 실시예에 따른 무인 매장 관리 방법의 각 단계의 세부 단계를 나타낸 흐름도이다. 이하, 도 2를 중심으로, 본 발명의 실시예에 따른 무인 매장 관리 방법에 대하여 설명하되, 도 3 내지 도 5를 참조하기로 한다.
S210 단계에서, 무인 매장 관리 장치(100)는 CCTV 카메라(300)로부터 무인 매장 내부를 촬영하여 획득된 매장 영상 데이터를 수신한다.
S220 단계에서, 무인 매장 관리 장치(100)는 수신된 매장 영상 데이터를 이용하여 무인 매장 내에 존재하는 냉동고를 검출 및 식별한다.
이하, 도 3을 참조하여, S220 단계에 대하여 세부적으로 설명하기로 한다.
S221 단계에서, 무인 매장 관리 장치(100)는 미리 설정된 냉동고 딥러닝 모델을 이용하여 수신된 매장 영상 데이터에서 냉동고(200)를 검출한다.
예를 들어, 무인 매장 관리 장치(100)는 해당 무인 매장에 설치된 냉동고(200)의 외관, 문 형태, 색상 등을 포함하는 냉동고 이미지 정보, 무인 매장이 보유하는 전체 상품 각각에 대한 텍스트 정보, 색상, 형상 등을 포함하는 상품 이미지 정보 및 각 냉동고(200)가 보유 중인 보유 상품 정보를 사전에 저장할 수 있다.
그리고, 무인 매장 관리 장치(100)는 사전에 냉동고 이미지 정보를 학습하여 냉동고 딥러닝 모델을 생성할 수 있으며, 생성된 냉동고 딥러닝 모델을 이용하여 무인 매장 내에 존재하는 냉동고(200)를 검출할 수 있다.
S222 단계에서, 무인 매장 관리 장치(100)는 검출된 냉동고(200) 내부가 나타나는 매장 영상 데이터와 저장된 상품 이미지 정보의 비교분석을 통해, 검출된 냉동고(200) 내에 존재하는 상품을 확인한다.
S223 단계에서, 무인 매장 관리 장치(100)는 검출된 냉동고(200)의 확인된 상품의 정보와 저장된 해당 냉동고의 보유 상품 정보의 유사도를 산출하고, 산출된 유사도가 미리 설정된 기준치 이상이면, 검출된 냉동고(200)에 부여된 식별번호를 포함하는 냉동고 정보를 확정 및 저장한다.
예를 들어, 수신된 매장 영상 데이터에서 9개의 냉동고(200)가 검출되고, 1번 냉동고(200)에 "비비빅", "스크류바", "돼지바"가 존재한다고 가정하면, 1번 냉동고(200)는 바01과 같은 식별번호로 검출 및 저장될 수 있다.
S230 단계에서, 무인 매장 관리 장치(100)는 수신된 매장 영상 데이터를 이용하여, 검출되는 냉동고(200)에 보관된 상품을 모니터링하여 검출되는 냉동고(200)에 보관된 상품 중에 존재하는 이상재고를 파악한다.
이하, 도 4를 참조하여, S230 단계에 대하여 세부적으로 설명하기로 한다.
S231 단계에서, 무인 매장 관리 장치(100)는 수신된 매장 영상 데이터에서 검출된 냉동고(200)에 존재하는 상품의 정보와 저장된 보유 상품 정보를 비교하여 검출된 냉동고(200)의 보유 상품을 확인한다.
S232 단계에서, 무인 매장 관리 장치(100)는 검출된 냉동고(200)의 보유 상품을 확인에 따라 이상재고의 존재 여부를 판단한다.
즉, 무인 매장 관리 장치(100)는 수신된 매장 영상 데이터를 통해 확인되는 냉동고(200)의 상품의 정보와 해당 냉동고(200)에 대하여 저장된 보유 상품 정보의 일치 여부를 판단하여, 현재 냉동고(200)에 존재하는 상품 중 적어도 하나가 저장된 보유 상품 정보에 없거나 다른 이상재고인지 여부를 판단할 수 있다.
S233 단계에서, 무인 매장 관리 장치(100)는 이상재고가 존재하는 경우, 이상재고의 정보를 확인한다.
예를 들어, 무인 매장 관리 장치(100)는 이상재고의 상품명 및 올바른 위치 정보를 탐색한다. 여기서, 올바른 위치 정보는 이상재고를 보관해야 하는 냉동고(200) 정보일 수 있다.
S234 단계에서, 무인 매장 관리 장치(100)는 이상재고 존재에 따라 이상재고를 알리는 알림 메시지를 관리자 단말(500)로 전송한다.
예를 들어, 이상재고를 알리는 알림 메시지는 이상재고의 상품명 및 올바른 위치 정보를 포함할 수 있으며, 이를 확인한 관리자는 이상재고를 올바른 위치로 이동시킬 수 있다.
S240 단계에서, 무인 매장 관리 장치(100)는 수신된 매장 영상 데이터를 이용하여, 식별된 냉동고(200)에 보관된 상품을 모니터링하여 실시간 재고량을 파악하고, 파악된 실시간 재고량에 따라 발주 처리를 수행한다.
이하, 도 5를 참조하여, S240 단계에 대하여 세부적으로 설명하기로 한다.
S241 단계에서, 무인 매장 관리 장치(100)는 수신된 매장 영상 데이터에서 식별된 냉동고(200)의 양 측 내벽을 인식한다.
S242 단계에서, 무인 매장 관리 장치(100)는 수신된 매장 영상 데이터에서 인식된 냉동고(200)의 양 측 내벽 사이에 존재하는 상품을 인식하고 카운팅하여 실시간 재고량을 추정한다.
예를 들어, 실시간 재고량은 기 저장된 재고 정보가 판매에 따라 실시간 업데이트되어 산출될 수도 있다.
S243 단계에서, 무인 매장 관리 장치(100)는 추정된 실시간 재고량과 기 저장된 과거 판매량을 비교한다.
예를 들어, 무인 매장 관리 장치(100)는 상권별 매출 정보, 무인 매장의 상권 등급 정보 및 무인 매장의 과거 매출 정보를 저장할 수 있다. 여기서, 상권별 매출 정보는 총 매출 정보, 상품별 매출 정보 등을 포함할 수 있다. 그래서, 무인 매장 관리 장치(100)는 무인 매장의 과거 매출 정보를 이용하여 계절이나 달과 같은 현재 실시간 재고량 산출 시점의 과거 판매량을 추정된 실시간 재고량과 비교할 수 있다. 만약, 신규 무인 매장으로 과거 매출 정보가 존재하지 않는 경우, 동일한 상권 등급의 무인 매장의 과거 매출 정보가 이용될 수 있다.
S244 단계에서, 무인 매장 관리 장치(100)는 비교 결과, 추정된 실시간 재고량이 기 저장된 과거 판매량보다 작은지 여부를 판단한다.
S245 단계에서, 무인 매장 관리 장치(100)는 추정된 실시간 재고량이 기 저장된 과거 판매량보다 작은 경우, 발주 처리를 수행하고, 발주 알림 메시지를 관리자 단말(500)로 전송한다. 여기서, 발주 알림 메시지는 추정된 실시간 재고량, 실시간 재고량과 과거 판매랴의 비교 결과, 발주 내역 등을 포함할 수 있다.
예를 들어, 무인 매장 관리 장치(100)는 추정된 실시간 재고량이 과거 판매량보다 미리 설정된 기준량 이상으로 작은 경우, 미리 설정된 필수 재고량만큼 발주 처리를 수행할 수 있다.
도 6은 본 발명의 실시예에 따른 무인 매장 관리 장치의 구성을 개략적으로 예시하여 나타낸 도면이다.
도 6을 참조하면, 본 발명의 실시예에 따른 무인 매장 관리 장치(100)는 프로세서(110), 메모리(120), 통신부(130) 및 인터페이스부(140)를 포함한다.
프로세서(110)는 메모리(120)에 저장된 처리 명령어를 실행시키는 CPU 또는 반도체 소자일 수 있다.
메모리(120)는 다양한 유형의 휘발성 또는 비휘발성 기억 매체를 포함할 수 있다. 예를 들어, 메모리(120)는 ROM, RAM 등을 포함할 수 있다.
예를 들어, 메모리(120)는 본 발명의 실시예에 따른 무인 매장 관리 방법을 수행하는 명령어들을 저장할 수 있다.
통신부(130)는 통신망을 통해 다른 장치들과 데이터를 송수신하기 위한 수단이다.
인터페이스부(140)는 네트워크에 접속하기 위한 네트워크 인터페이스 및 사용자 인터페이스를 포함할 수 있다.
한편, 전술된 실시예의 구성 요소는 프로세스적인 관점에서 용이하게 파악될 수 있다. 즉, 각각의 구성 요소는 각각의 프로세스로 파악될 수 있다. 또한 전술된 실시예의 프로세스는 장치의 구성 요소 관점에서 용이하게 파악될 수 있다.
또한 앞서 설명한 기술적 내용들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예들을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 하드웨어 장치는 실시예들의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
상기한 본 발명의 실시예는 예시의 목적을 위해 개시된 것이고, 본 발명에 대한 통상의 지식을 가지는 당업자라면 본 발명의 사상과 범위 안에서 다양한 수정, 변경, 부가가 가능할 것이며, 이러한 수정, 변경 및 부가는 하기의 특허청구범위에 속하는 것으로 보아야 할 것이다.
100: 무인 매장 관리 장치
110: 프로세서
120: 메모리
130: 통신부
140: 인터페이스부
200: 냉동고
300: CCTV 카메라
400: 키오스크
500: 관리자 단말

Claims (5)

  1. 무인 매장 관리 장치가 수행하는 무인 매장 관리 방법에 있어서,
    CCTV 카메라로부터 무인 매장 내부를 촬영하여 획득된 매장 영상 데이터를 수신하는 단계;
    상기 수신된 매장 영상 데이터를 이용하여 상기 무인 매장 내에 존재하는 냉동고를 검출 및 식별하는 단계;
    상기 수신된 매장 영상 데이터를 이용하여, 상기 냉동고에 보관된 상품을 모니터링하여 상기 냉동고에 보관된 상품 중에 존재하는 이상재고를 파악하는 단계; 및
    상기 수신된 매장 영상 데이터를 이용하여, 상기 냉동고에 보관된 상품을 모니터링하여 실시간 재고량을 파악하고, 상기 파악된 실시간 재고량에 따라 발주 처리를 수행하는 단계를 포함하는 무인 매장 관리 방법.
  2. 제1항에 있어서,
    상기 냉동고를 검출 및 식별하는 단계는,
    미리 설정된 냉동고 딥러닝 모델을 이용하여 상기 수신된 매장 영상 데이터에서 상기 냉동고를 검출하는 단계;
    상기 검출된 냉동고 내부가 나타나는 매장 영상 데이터와 저장된 상품 이미지 정보의 비교분석을 통해, 상기 검출된 냉동고 내에 존재하는 상품을 확인하는 단계; 및
    상기 검출된 냉동고의 확인된 상품의 정보와 상기 검출된 냉동고의 저장된 보유 상품 정보의 유사도를 산출하고, 상기 산출된 유사도가 미리 설정된 기준치 이상이면, 상기 검출된 냉동고의 냉동고 정보를 확정 및 저장하는 단계를 포함하는 것을 특징으로 하는 무인 매장 관리 방법.
  3. 제1항에 있어서,
    상기 이상재고를 파악하는 단계는,
    상기 수신된 매장 영상 데이터에서 상기 검출된 냉동고에 존재하는 상품의 정보와 저장된 보유 상품 정보를 비교하여 상기 검출된 냉동고의 보유 상품을 확인하는 단계;
    상기 보유 상품의 확인에 따라 상기 이상재고가 존재하는 경우, 상기 이상재고의 정보를 확인하는 단계; 및
    상기 이상재고 존재에 따라 상기 이상재고를 알리는 알림 메시지를 관리자 단말로 전송하는 단계를 포함하는 것을 특징으로 하는 무인 매장 관리 방법.
  4. 제1항에 있어서,
    상기 발주 처리를 수행하는 단계는,
    사익 수신된 매장 영상 데이터에서 상기 냉동고의 양 측 내벽을 인식하는 단계;
    상기 인식된 양 측 내벽 사이에 존재하는 상품을 인식하고 카운팅하여 실시간 재고량을 추정하는 단계;
    상기 추정된 실시간 재고량과 기 저장된 과거 판매량을 비교하는 단계; 및
    상기 비교 결과, 추정된 실시간 재고량이 상기 과거 판매량보다 작은 경우, 발주 처리를 수행하고, 발주 알림 메시지를 관리자 단말로 전송하는 단계를 포함하는 것을 특징으로 하는 무인 매장 관리 방법.
  5. 무인 매장 관리 장치에 있어서,
    명령어를 저장하는 메모리; 및
    상기 명령어를 실행하는 프로세서를 포함하되,
    상기 명령어는,
    CCTV 카메라로부터 무인 매장 내부를 촬영하여 획득된 매장 영상 데이터를 수신하는 단계;
    상기 수신된 매장 영상 데이터를 이용하여 상기 무인 매장 내에 존재하는 냉동고를 검출 및 식별하는 단계;
    상기 수신된 매장 영상 데이터를 이용하여, 상기 냉동고에 보관된 상품을 모니터링하여 상기 냉동고에 보관된 상품 중에 존재하는 이상재고를 파악하는 단계; 및
    상기 수신된 매장 영상 데이터를 이용하여, 상기 냉동고에 보관된 상품을 모니터링하여 실시간 재고량을 파악하고, 상기 파악된 실시간 재고량에 따라 발주 처리를 수행하는 단계를 포함하는 무인 매장 관리 방법을 수행하는 것을 특징으로 하는 무인 매장 관리 장치.
KR1020220005186A 2022-01-13 2022-01-13 무인 매장 관리 장치 및 방법 KR20230109332A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220005186A KR20230109332A (ko) 2022-01-13 2022-01-13 무인 매장 관리 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220005186A KR20230109332A (ko) 2022-01-13 2022-01-13 무인 매장 관리 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20230109332A true KR20230109332A (ko) 2023-07-20

Family

ID=87426478

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220005186A KR20230109332A (ko) 2022-01-13 2022-01-13 무인 매장 관리 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20230109332A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102616999B1 (ko) * 2023-09-22 2023-12-27 주식회사 굿샵 비전기술을 이용한 자동화 무인 주류 판매 시스템 및 판매 데이터 수집 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210079965A (ko) 2019-12-20 2021-06-30 김승연 재고관리 및 상품판매를 위한 스마트 진열대 및 스마트 진열대를 이용한 재고관리 및 상품 판매방법
KR102319893B1 (ko) 2019-09-19 2021-11-02 디카모 주식회사 재고 파악 방법 및 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102319893B1 (ko) 2019-09-19 2021-11-02 디카모 주식회사 재고 파악 방법 및 시스템
KR20210079965A (ko) 2019-12-20 2021-06-30 김승연 재고관리 및 상품판매를 위한 스마트 진열대 및 스마트 진열대를 이용한 재고관리 및 상품 판매방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102616999B1 (ko) * 2023-09-22 2023-12-27 주식회사 굿샵 비전기술을 이용한 자동화 무인 주류 판매 시스템 및 판매 데이터 수집 장치

Similar Documents

Publication Publication Date Title
US7100824B2 (en) System and methods for merchandise checkout
CN109414119B (zh) 用于在环境内计算机视觉驱动应用的系统和方法
US7298264B1 (en) RFID tag filtering and monitoring
US7246745B2 (en) Method of merchandising for checkout lanes
CN101197676B (zh) 认证系统的管理方法
US20220067642A1 (en) Systems and methods for auto-replenishment of products using pressure mapping sensors and machine learning
CN103578018A (zh) 检测由于缺货状况导致的销售损失的方法、装置和系统
CN114331284B (zh) 一种基于云计算的智能仓储服务管理系统
US20150220785A1 (en) Method and system for semi-automated venue monitoring
KR101970619B1 (ko) 비정상 상황 검출 방법 및 이를 수행하기 위한 시스템
CN110705475B (zh) 用于目标对象识别的方法、装置、介质以及设备
KR20230109332A (ko) 무인 매장 관리 장치 및 방법
CN109495723A (zh) 一种基于雾计算的家用智能监控系统
US10994932B2 (en) Stock control system, stock control method, program, and recording medium
US20180189726A1 (en) Systems and methods for monitoring and restocking merchandise
US20200175440A1 (en) Virtual management system data processing unit and method
CN109034067B (zh) 商品图像翻拍检测方法、系统、设备及存储介质
EP3467737A1 (en) Method and system for determining the presence and arrangement of products arranged in a cooling system
JP2015153100A5 (ko)
US20210342805A1 (en) System and method for identifying grab-and-go transactions in a cashierless store
US20230100612A1 (en) Cloud-based artificial intelligence learning logistics management system and method
KR102346166B1 (ko) 매대 감지 및 무인결제 서비스 제공 방법 및 장치
CN116051132B (zh) 一种违规商品识别方法、装置、计算机设备和存储介质
KR102301564B1 (ko) 스마트 콜드체인 시스템
KR102160175B1 (ko) 복수의 프랜차이즈를 관리하는 스마트 시스템

Legal Events

Date Code Title Description
E902 Notification of reason for refusal