KR102671194B1

KR102671194B1 - unmanned store system

Info

Publication number: KR102671194B1
Application number: KR1020230161610A
Authority: KR
Inventors: 허예선
Original assignee: 주식회사 엔오엔에프컨설팅
Priority date: 2023-11-20
Filing date: 2023-11-20
Publication date: 2024-06-03
Also published as: KR102704844B1

Abstract

본 발명은 무인 점포 시스템에 관한 것으로 구체적으로는 무인으로 운영되는 매장 내의 과일 등 유통기한이 정해지지 않은 제품의 유통기한을 관리하고, 제품의 사용방법을 제공하고, 제품을 찾지 못하는 사람에게는 제품의 위치를 안내하는 정보를 제공하기 위한 무인 점포 시스템에 관한 것이다. 본 발명은 무인으로 운영되는 매장 내의 과일 등 유통기한이 정해지지 않은 제품의 유통기한을 관리할 수 있도록 가맹점관리서버로부터 각 제품별로 유통기한을 제공받아 제품별로 유통기한을 관리하여 제품의 퀄리티를 관리할 수 있다. 또한 유통기한이 임박한 경우 할인 정보를 제공함으로서 보다 저렴한 가격에 제품을 구매할 수 있는 이점이 있으며 무인매장 내에 사람의 모션을 인식하여 제품을 찾지 못하고 있는 상황이라고 판단된 경우 모션을 분석하여 어떤 제품을 찾고 있는지를 추정한 후 제품의 위치를 안내하는 정보를 제공받아 매장 사용의 불편함이 최소화되도록 하는 이점이 있다.The present invention relates to an unmanned store system. Specifically, it manages the expiration date of products with an undetermined expiration date such as fruit in an unmanned store, provides a method of using the product, and provides a location of the product to those who cannot find the product. It is about an unmanned store system to provide guidance information. The present invention is to manage the quality of products by receiving an expiration date for each product from an affiliated store management server and managing the expiration date for each product so as to manage the expiration date of products with an undetermined expiration date, such as fruit, in an unmanned store. You can. In addition, by providing discount information when the expiration date is imminent, you have the advantage of being able to purchase the product at a cheaper price. If it is determined that a product cannot be found by recognizing a person's motion in an unmanned store, the motion is analyzed to find the product. This has the advantage of minimizing inconvenience in using the store by estimating the presence and then providing information guiding the location of the product.

Description

Unmanned store system {unmanned store system}

본 발명은 무인 점포 시스템에 관한 것으로 구체적으로는 무인으로 운영되는 매장 내의 과일 등 유통기한이 정해지지 않은 제품의 유통기한을 관리하고, 제품의 사용방법을 제공하고, 제품을 찾지 못하는 사람에게는 제품의 위치를 안내하는 정보를 제공하기 위한 무인 점포 시스템에 관한 것이다.The present invention relates to an unmanned store system. Specifically, it manages the expiration date of products with an undetermined expiration date such as fruit in an unmanned store, provides a method of using the product, and provides a location of the product to those who cannot find the product. It is about an unmanned store system to provide guidance information.

무인점포란 사람 없이 오직 매대와 계산기로 판매 영업을 하는 가게이다. 무인 시스템이기에 도난에 취약하여 CCTV로 감시하는 방식으로 운영된다. 2000년대까지 무인가게라 할 만한 것은 은행 ATM이나 자판기 정도였으나, 요즈음에 익숙한 무인가게는 2020년도 즈음부터 유행하기 시작했다. 특히 무인 아이스크림 가게가 많은 편이다. 그 외에 무인 세탁점과 무인 카페, 무인 편의점이나 무인 라면가게 등 다양한 상점이 등장하고 있다. 일반 편의점에서는 팔지 않는 해외 과자를 파는 무인가게도 많다.An unmanned store is a store that conducts sales without anyone, using only a counter and a calculator. Because it is an unmanned system, it is vulnerable to theft and is operated under CCTV surveillance. Until the 2000s, the only unmanned stores that could be considered unmanned stores were bank ATMs and vending machines, but the unmanned stores we are familiar with these days began to become popular around 2020. In particular, there are many unmanned ice cream shops. In addition, various stores such as unmanned laundry stores, unmanned cafes, unmanned convenience stores, and unmanned ramen shops are appearing. There are many unofficial stores that sell foreign snacks that are not sold in regular convenience stores.

한국공개특허공보 제10-2023-0080758호는 무인 점포 매대 및 각 무인 점포 매대의 상품 정보가 저장되는 무인 점포 서버; 무인 점포에 설치되어 상기 무인 점포의 고객을 감지하는 라이다(lidar); 상품 픽업(pick-up) 또는 상품 반환을 감지하기 위해 상기 무인 점포 매대에 설치되어 무게 변화량을 감지하는 로드셀(loadcell); 상기 라이다에 의해 감지된 고객의 고객 정보 및 해당 고객의 고객 장바구니를 생성하고, 상기 고객의 상품 구매 또는 상품 반환을 확인하는 고객 처리 서버를 포함하는 무인 점포 매대 정보 및 고객 장바구니 정보의 최적화 시스템에 관한 것이다.Korean Patent Publication No. 10-2023-0080758 discloses an unmanned store server that stores product information of unmanned store shelves and each unmanned store store; Lidar is installed in an unmanned store and detects customers of the unmanned store; A load cell installed on the unmanned store shelf to detect a change in weight to detect product pick-up or product return; An optimization system for unmanned store shelf information and customer shopping cart information, including a customer processing server that generates the customer information of the customer detected by the lidar and the customer shopping cart of the customer, and confirms the customer's product purchase or product return. It's about.

하지만 무인 점포의 경우 유통기한이 정해지지 않은 과일 등과 같은 제품은 제품이 오랫동안 팔리지 않은 경우 신선도가 떨어지며 소비자의 경우 신선도가 떨어진 제품을 소비해야하는 문제가 있으며 판매 매장에서도 질 낮은 제품을 공급함에 따라 매장의 신뢰도가 하락하는 문제가 발생된다.However, in the case of unmanned stores, products such as fruit with an undetermined expiration date lose freshness if the product has not been sold for a long time, and consumers have the problem of having to consume products that have lost their freshness, and as sales stores also supply low-quality products, the reliability of the store is low. A problem arises where .

또한 무인으로 매장이 관리되기 때문에 특정 제품을 찾는데 어려움을 겪을 경우 관리직원이 없어 어려움이 따르는 문제도 발생될 수 있다.Additionally, because the store is managed unmanned, if you have difficulty finding a specific product, problems may arise due to the lack of management staff.

한국공개특허공보 제10-2023-0080758호Korean Patent Publication No. 10-2023-0080758

본 발명의 목적은 무인으로 운영되는 매장 내의 과일 등 유통기한이 정해지지 않은 제품의 유통기한을 관리할 수 있도록 가맹점관리서버로부터 각 제품별로 유통기한을 제공받아 제품별로 유통기한을 관리할 수 있도록 한다.The purpose of the present invention is to manage the expiration date for each product by receiving the expiration date for each product from the affiliated store management server so as to manage the expiration date of products with an undetermined expiration date, such as fruit, in an unmanned store.

또한 무인매장 내에 사람의 모션을 인식하여 제품을 찾지 못하고 있는 상황이라고 판단된 경우 모션을 분석하여 어떤 제품을 찾고 있는지를 추정한 후 제품의 위치를 안내하는 정보를 제공하도록 하는 목적이 있다.Additionally, if it is determined that a person is unable to find a product by recognizing a person's motion in an unmanned store, the purpose is to analyze the motion to estimate what product the person is looking for and then provide information guiding the location of the product.

상기와 같은 문제를 해결하기 위해, 본 발명은 제품이 진열되기 위해 내부 공간이 형성되는 무인점포부스(100)와, 판매중인 제품이 진열하기 위한 제품진열대(200)와, 진열대(200)의 일측에 위치하되 매장관리서버(700)로부터 전송된 가격정보가 표시되거나 매장관리서버(700)로부터 전송된 가격할인정보가 표시되기 위한 가격안내판(300)과, 가격안내판(300)에 표시되기 위한 가격정보 또는 가격할인정보를 전송하기 위한 매장관리서버(700)를 포함하는 것을 특징으로 하는 무인 점포 시스템을 제공한다.In order to solve the above problem, the present invention includes an unmanned store booth 100 in which an internal space is formed for displaying products, a product display stand 200 for displaying products on sale, and one side of the display stand 200. A price information board 300 located in the price information board 300 to display price information transmitted from the store management server 700 or to display price discount information transmitted from the store management server 700, and a price to be displayed on the price information board 300. An unmanned store system is provided, which includes a store management server 700 for transmitting information or price discount information.

본 발명은 무인으로 운영되는 매장 내의 과일 등 유통기한이 정해지지 않은 제품의 유통기한을 관리할 수 있도록 가맹점관리서버로부터 각 제품별로 유통기한을 제공받아 제품별로 유통기한을 관리하여 제품의 퀄리티를 관리할 수 있다. 또한 유통기한이 임박한 경우 할인 정보를 제공함으로서 보다 저렴한 가격에 제품을 구매할 수 있는 이점이 있으며 무인매장 내에 사람의 모션을 인식하여 제품을 찾지 못하고 있는 상황이라고 판단된 경우 모션을 분석하여 어떤 제품을 찾고 있는지를 추정한 후 제품의 위치를 안내하는 정보를 제공받아 매장 사용의 불편함이 최소화되도록 하는 이점이 있다.The present invention is to manage the quality of products by receiving an expiration date for each product from an affiliated store management server and managing the expiration date for each product so as to manage the expiration date of products with an undetermined expiration date, such as fruit, in an unmanned store. You can. In addition, by providing discount information when the expiration date is imminent, you have the advantage of being able to purchase the product at a cheaper price. If it is determined that a product cannot be found by recognizing a person's motion in an unmanned store, the motion is analyzed to find the product. This has the advantage of minimizing inconvenience in using the store by estimating the presence and then providing information guiding the location of the product.

도 1은 본 발명의 전체모습을 나타낸 도면이다.
도 2는 본 발명의 가격안내판(300)을 나타낸 도면이다.
도 3은 본 발명의 방향안내부(600)를 나타낸 도면이다.
도 4는 본 발명의 매장관리서버(700)의 구성에 관한 구성도이다.Figure 1 is a diagram showing the overall appearance of the present invention.
Figure 2 is a diagram showing the price information board 300 of the present invention.
Figure 3 is a diagram showing the direction guide unit 600 of the present invention.
Figure 4 is a configuration diagram of the store management server 700 of the present invention.

본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.Terms or words used in this specification and claims should not be construed as limited to their usual or dictionary meanings, and the inventor may appropriately define the concept of terms to explain his or her invention in the best way. It must be interpreted as meaning and concept consistent with the technical idea of the present invention based on principles.

이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the attached drawings.

도 1은 본 발명의 전체적인 모습을 나타낸 도면이다.1 is a diagram showing the overall appearance of the present invention.

본 발명은 무인점포부스(100), 제품진열대(200), 가격안내판(300), QR코드부(400), 인체감지센서(500), 방향안내부(600), 매장관리서버(700), 가맹점관리서버(800)를 포함하여 구성된다.The present invention includes an unmanned store booth (100), a product display stand (200), a price information board (300), a QR code unit (400), a human body detection sensor (500), a direction information unit (600), a store management server (700), It is comprised of an affiliated store management server (800).

각 구성요소를 구체적으로 설명하면 다음과 같다.Each component is described in detail as follows.

무인점포부스(100)는 제품이 진열되기 위해 내부 공간이 형성되는 것이다. 상기 무인점포부스(100)는 일측에 무인점포를 이용하기 위해 출입하기 위한 출입구(110)가 형성된다.The unmanned store booth 100 has an internal space formed to display products. The unmanned store booth 100 is formed with an entrance 110 on one side for entering and exiting to use the unmanned store.

상기 무인점포부스(100)는 일측에 소비자가 제품 계산을 위한 계산대(120)가 형성될 수도 있으며 이에 대한 도면은 도시되지 않았다. 또한 상기 계산대(120)는 포인트적립, 할인혜택 등을 제공받을 수 있도록 소비자에 대한 기본인적사항을 포함하는 소비자정보를 입력받을 수 있는 서버가 내장되있으며 입력된 정보는 매장관리서버(700)로 전송될 수도 있다.The unmanned store booth 100 may have a checkout counter 120 on one side for consumers to pay for products, but this is not shown in the drawing. In addition, the checkout counter 120 has a built-in server that can receive consumer information including basic personal information about consumers so that they can receive point accumulation and discount benefits, and the entered information is sent to the store management server 700. It may also be transmitted.

상기 소비자정보는 소비자가 제품 구매시 구매한 제품에 대한 정보가 입력될 수 있으며, 이전에 구매했던 구매 제품에 대한 제품평가점수도 소비자를 통해 입력받을 수 있다.The consumer information may include information about the purchased product when the consumer purchases the product, and product evaluation scores for previously purchased products may also be entered through the consumer.

제품진열대(200)는 판매중인 제품이 진열하기 위한 것이다. 상기 제품진열대(200)는 소정 개수가 형성되며 제품의 종류 및 개수에 따라 형태와 개수가 달라질 수 있다.The product display stand 200 is for displaying products being sold. The product display stand 200 is formed in a predetermined number, and the shape and number may vary depending on the type and number of products.

가격안내판(300)은 진열대(200)의 일측에 위치하되 매장관리서버(700)와 연동되어 매장관리서버(700)로부터 전송된 가격정보가 표시되거나 매장관리서버(700)로부터 전송된 가격할인정보가 표시되기 위한 것이다.The price information board 300 is located on one side of the display stand 200, and is linked with the store management server 700 to display price information transmitted from the store management server 700 or price discount information transmitted from the store management server 700. is to be displayed.

도 2를 참고하면 가격안내판(300)은 매장관리서버(700)로부터 가격정보가 전송될 경우 도 2(a)와 같이 가격정보가 표시될 수 있으며, 가격할인정보가 전송될 경우 도 2(b)와 같이 가격할인정보가 표시될 수 있다.Referring to FIG. 2, when price information is transmitted from the store management server 700, the price information board 300 may display price information as shown in FIG. 2(a), and when price discount information is transmitted, price information may be displayed as shown in FIG. 2(b). ), price discount information may be displayed.

QR코드부(400)는 진열대(200)의 일측에 위치하되 메뉴에 대한 정보가 입력되기 위한 것이다.The QR code unit 400 is located on one side of the display stand 200 and is for inputting information about the menu.

상기 메뉴에 대한 정보는 메뉴의 보관방법, 조리법 등에 대한 정보로서 소비자에게 제공하고자 하는 어떠한 제품에 대한 정보도 무방하다.The information about the menu is information about the menu storage method, recipe, etc., and can be information about any product that is intended to be provided to consumers.

무인점포부스촬영부(500)는 무인점포부스(100) 내부의 영상을 촬영하여 매장관리서버(700)로 전송하기 위한 것이다.The unmanned store booth filming unit 500 is used to capture images inside the unmanned store booth 100 and transmit them to the store management server 700.

상기 무인점포촬영부(500)는 무인점포부스(100)의 내부 일측에 위치하여 무인점포(100)의 내부 전체가 촬영될 수 있도록 한다.The unmanned store photography unit 500 is located on one side of the interior of the unmanned store booth 100 so that the entire interior of the unmanned store 100 can be photographed.

방향안내부(600)는 매장관리서버(700)와 연동되어 매장관리서버(700)의 제품위치정보제공부(740)로부터 제품위치정보를 전송받고, 전송된 제품위치정보에 따라 방향안내표시등이 표시되기 위한 것이다.The direction information unit 600 is linked with the store management server 700 to receive product location information from the product location information provider 740 of the store management server 700, and turns on a direction indicator light according to the transmitted product location information. It is meant to be displayed.

도 3는 전송된 제품위치정보에 따라 방향안내표시등이 다르게 표시되는 것을 설명하기 위한 것이다. 방향안내부(600)를 600a,600b,600c구간으로 나누고 각각의 구간과 마주하는 위치에 제품진열대(600)가 위치한다면, 도 3(a)와 같이 제품위치가 600b가 표시된 블럭과 가까운 제품진열대(200)에 제품이 있을 경우 600b 구간의 방향표시가 600b 구간과 가까운 제품진열대(200)를 향하도록 표시될 수 있다.Figure 3 is to explain that the direction indicator light is displayed differently depending on the transmitted product location information. If the direction guide unit 600 is divided into sections 600a, 600b, and 600c, and the product display stand 600 is located in a position facing each section, the product display stand is close to the block marked 600b, as shown in FIG. 3(a). If there is a product in 200, the direction sign for section 600b may be displayed to point toward the product display stand 200 that is close to section 600b.

도 3(b)의 경우 제품위치가 600c가 표시된 블럭과 가까운 제품진열대(200)에 제품이 있을 경우 600c 구간의 방향표시가 600c 구간과 가까운 제품진열대(200)를 향하도록 표시될 수 있다.In the case of FIG. 3(b), if there is a product on the product display stand 200 where the product location is close to the block marked 600c, the direction sign for the 600c section may be displayed toward the product display stand 200 close to the 600c section.

매장관리서버(700)는 가격안내판(300)에 표시되기 위한 가격정보를 전송하고, 무인점포부스촬영부(500)로부터 촬영된 영상을 전송받고, 전송된 영상에서 사람을 인식하여 무인점포부스 내부 배경과 분리하고, 추출된 사람의 모션을 추정하기 위한 것이다.The store management server 700 transmits price information to be displayed on the price information board 300, receives the captured video from the unmanned store booth photography unit 500, recognizes people in the transmitted video, and displays the information inside the unmanned store booth. This is to separate it from the background and estimate the extracted human motion.

도 4를 참고하면 상기 매장관리서버(700)는 제품별유통기한관리부(710), 가격안내판관리부(720), 모션인식정보수신및판단부(730), 제품위치정보제공부(740)를 포함하여 구성된다.Referring to FIG. 4, the store management server 700 includes a product-specific expiration date management unit 710, a price information board management unit 720, a motion recognition information reception and determination unit 730, and a product location information provision unit 740. It is composed by:

제품별유통기한관리부(710)는 가맹점 관리를 위한 가맹점관리서버로부터 제품진열대(200) 내에 진열된 제품 각각의 제품별 유통기한 정보를 포함하는 제품별유통기한정보를 전송받아 각 제품의 유통기한이 지났는지 여부를 판단하고, 각 제품의 유통기한의 남은 날짜가 설정된 범위 내인 경우 유통기한이 임박한 것으로 판단하고, 판단된 제품의 유통기한임박정보를 가격안내판관리부(720)로 전송하기 위한 것이다.The product-specific expiration date management unit 710 receives product-specific expiration date information including expiration date information for each product displayed in the product display stand 200 from the affiliated store management server for affiliated store management, and determines the expiration date of each product. This is to determine whether the expiration date has passed, to determine that the expiration date of each product is imminent if the remaining date of the expiration date is within a set range, and to transmit information about the imminent expiration date of the determined product to the price information board management unit 720.

가격안내판관리부(720)는 가맹점 관리를 위한 가맹점관리서버로부터 가격정보를 전송받고 전송된 가격정보를 가격안내판(300)에 전송하고, 제품별유통기한관리부(710)로부터 제품의 유통기한임박정보를 전송받는 경우, 가격정보를 대체하기 위해 유통기한임박정보가 전송된 제품의 가격할인정보를 가격안내판(300)에 전송하기 위한 것이다.The price information board management unit 720 receives price information from the franchise management server for franchise management, transmits the transmitted price information to the price information board 300, and receives product-specific expiration date information from the product-specific expiration date management unit 710. When received, the purpose is to transmit the price discount information of the product to which the expiration date information has been sent to the price information board 300 to replace the price information.

상기 가격안내판관리부(720)는 무인점포부스(100)를 방문하는 소비자에 대한 소비자정보를 전송받고 제품의 고객만족도와 유통기한의 남은 날짜를 고려하여 제품의 가격할인정보를 수학식 1을 통하여 산출할 수 있다.The price information board management unit 720 receives consumer information about consumers visiting the unmanned store booth 100 and calculates the price discount information of the product through Equation 1 in consideration of the customer satisfaction level of the product and the remaining days of the expiration date. can do.

(여기서, K는 제품가격할인정보, Z는 제품판매가격정보, H는 유통기한남은날짜, w는 소비자정보 중 제품평가점수평균, v는 소비자등급점수을 의미한다.)(Here, K is product price discount information, Z is product sales price information, H is the remaining expiration date, w is the average product evaluation score among consumer information, and v is the consumer rating score.)

여기서 소비자정보 중 제품평가점수평균은 선택된 제품을 구매한 소비자들이 제품에 대한 평가점수를 무인점포부스(100)의 계산대(120)에 내장된 서버로 입력하고 입력된 제품의 평가점수의 평균값을 의미하며 1~10점 사이의 점수가 될 수 있다. 소비자등급점수는 제품구매빈도에 따라 설정된 빈도수에 따라 등급을 1~5점으로 나누며, 선택된 제품을 재구매한 빈도가 높을수록 높은 점수가 될 수 있다.Here, the average product evaluation score among consumer information refers to the average value of the evaluation scores of the products entered by consumers who purchased the selected product inputting the evaluation scores for the product into the server built into the checkout counter 120 of the unmanned store booth 100. It can be a score between 1 and 10. The consumer rating score is divided into 1 to 5 points according to the frequency set according to the frequency of product purchase, and the higher the frequency of repurchasing the selected product, the higher the score.

또한 유통기한보다 소비자등급점수와 제품평가점수평균이 상대적으로 큰 값으로 반영이되거나 할인가격의 변동이 너무 큰 폭으로 변동되는 것을 방지하기 위해서 sinh의 역함수를 통하여 변동 폭을 조정할 수 있도록 한다.In addition, in order to prevent the consumer rating score and average product evaluation score from being reflected as relatively larger values than the expiration date or from having the discount price fluctuate too much, the range of fluctuation can be adjusted through the inverse function of sinh.

예로 들면 A제품에 대한 제품판매가격이 5000원이고, A제품의 유통기한 남은 날짜가 3일이며, 소비자정보 중 A제품의 제품평가점수평균이 7점이고, 소비자등급점수는 3점인 경우 제품가격할인정보는 다음과 같이 구해진다.For example, if the selling price for product A is 5,000 won, the remaining expiration date of product A is 3 days, the average product evaluation score of product A among consumer information is 7 points, and the consumer rating score is 3 points, a product price discount is provided. The information is obtained as follows.

이렇게 산출된 가격할인정보를 토대로 합리적인 할인액수를 산출함으로서 소비자가 합리적인 액수로 할인된 가격의 제품을 구매할 수 있는 이점이 있다.By calculating a reasonable discount amount based on the price discount information calculated in this way, there is an advantage that consumers can purchase products at a discounted price at a reasonable amount.

모션인식정보수신및판단부(730)는 무인점포부스촬영부(500)로부터 촬영된 영상을 전송받고, 전송된 영상에서 사람을 인식하여 무인점포부스 내부 배경과 분리하고, 추출된 사람의 모션을 바탕으로 특정 제품을 찾고 있다고 판단하는 경우 찾는 제품이 어떤 제품인지를 모션을 바탕으로 추정하기 위한 것이다.The motion recognition information reception and determination unit 730 receives the captured video from the unmanned store booth filming unit 500, recognizes the person in the transmitted video, separates it from the background inside the unmanned store booth, and extracts the extracted human motion. If it is determined that you are looking for a specific product based on the motion, it is used to estimate what kind of product you are looking for based on the motion.

상기 모션인식정보수신및판단부(730)는 사전에 학습된 객체 인식 모델을 통하여 사람을 인식해 경계 상자(bounding box)로 구분되도록 대량의 학습데이터로 학습된 딥러닝 모델을 통하여 무인점포부스 내의 사람을 인식하고 배경과 분리할 수도 있으며, 이외에도 기존에 제시된 사람을 배경과 분리하여 인식하기 위한 기술을 통하여 사람과 배경을 분리하여 사람만 인식할 수 있다.The motion recognition information reception and determination unit 730 recognizes people through a pre-learned object recognition model and recognizes people within the unmanned store booth through a deep learning model learned with a large amount of learning data to be divided into bounding boxes. It is possible to recognize people and separate them from the background. In addition, through existing technology to recognize people by separating them from the background, only people can be recognized by separating people from the background.

또한 추출된 사람의 모션은 사전에 학습된 사람 모션 인식 모델을 통하여 무인점포부스 내로 출입했던 사람들의 모션과 이동경로를 수집하여 대량의 학습데이터로 학습된 딥러닝 모델을 통해 무인점포부스 내에서 인식된 사람의 모션에 따른 이동경로를 추정하여 어떤 제품을 찾으려는 것인지 판단하는 지표로 삼을 수 있다.In addition, the extracted human motion is recognized within the unmanned store booth through a deep learning model learned with a large amount of learning data by collecting the motions and movement paths of people who entered and exited the unmanned store booth through a pre-trained human motion recognition model. By estimating the movement path based on the person's motion, you can use it as an indicator to determine what product you are looking for.

즉 A제품을 구매하는 사람의 모션이 K의 모션을 주로하고 L의 동선을 따라 이동하는 경우 추출된 사람의 모션이 K모션의 범위 내의 모션과 L동선의 범위 내의 동선을 따라 이동하는 경우 A제품을 찾는 것으로 추정할 수 있다.In other words, if the motion of the person purchasing product A mainly follows the motion of K and moves along the moving line of L, and the extracted motion of the person moves along the motion within the range of K motion and the moving line within the range of L moving line, product A It can be estimated to find .

제품위치정보제공부(740)는 모션인식정보수신및판단부(730)를 통해 추정된 제품의 위치를 안내하기 위해 추정된 제품의 위치가 포함된 제품위치정보를 방향안내부(600)로 전송하기 위한 것이다.The product location information provider 740 transmits product location information including the estimated product location to the direction guide unit 600 to guide the estimated product location through the motion recognition information reception and determination unit 730. It is for this purpose.

상기 매장관리서버(700)는 제품입고관리부(750)를 더 포함할 수 있으며, 제품입고관리부(750)는 제품진열대(200)에 진열된 제품의 개수와 판매된 제품의 개수를 비교하여 제품진열대(200) 내에 제품이 소진되었는지 여부를 판단하기 위한 것이다.The store management server 700 may further include a product inventory management unit 750, and the product inventory management unit 750 compares the number of products displayed on the product display stand 200 with the number of sold products and displays the product display shelf 200. This is to determine whether the product has been exhausted within (200).

즉 제품입고관리부(750)는 제품진열대(200)에 진열된 제품의 개수는 제품이 입고 시 관리자에 의해 입력된 값이며, 판매된 제품의 개수는 무인점포부스(100)의 계산대(120)로부터 계산된 제품의 개수에 관한 정보를 전송받는다. 전송받은 제품진열대(200)에 진열된 제품들 중 잔여수량을 파악하기 위해 선택된 특정 제품의 개수와 계산대(120)로부터 계산된 제품들 중 잔여수량을 파악하기 위해 선택된 특정 제품의 개수를 비교하여 제품소진여부를 판단할 수 있다.That is, the product inventory management unit 750 determines that the number of products displayed on the product display stand 200 is the value entered by the manager when the product is received, and the number of products sold is calculated from the checkout counter 120 of the unmanned store booth 100. Receive information about the calculated number of products. The number of specific products selected to determine the remaining quantity among the products displayed on the received product display stand 200 is compared with the number of specific products selected to determine the remaining quantity among the products calculated from the checkout counter 120. You can judge whether it is exhausted or not.

또한 상기 제품입고관리부(750)는 제품소진주기지수를 파악하여 어떤 제품이 상대적으로 빠르게 소진되는지 여부를 판단할 수 있으며 상기 제품소진주기지수는 수학식 2를 통하여 계산할 수 있다. 이를 통해 상대적으로 제품 소진이 빠른 제품의 경우 추가수량을 미리 준비해두도록 함으로서 소비자가 불편함 없이 제품을 이용할 수 있도록 할 수 있으며 제품소진주기지수가 상대적으로 적은 제품의 경우 제품의 판매 개수 줄일 수 있도록 함으로서 오랫동안 판매되지 않은 제품을 최소화시켜서 제품의 신선도를 유지하도록 할 수 있다.In addition, the product inventory management unit 750 can determine whether a product is sold out relatively quickly by determining the product exhaustion cycle index, and the product exhaustion cycle index can be calculated using Equation 2. Through this, in the case of products that are sold out relatively quickly, additional quantities can be prepared in advance, allowing consumers to use the product without inconvenience, and in the case of products with a relatively low product exhaustion cycle index, the number of products sold can be reduced. You can maintain the freshness of products by minimizing products that have not been sold for a long time.

(여기서 Ni는 제품 i의 제품소진지수이고, Ti는 설정된 기간동안 제품 i가 위치한 제품진열대가 위치한 장소의 설정 반경 내에서 소정 시간동안 머무른 사람의 수, Si는 설정된 기간 동안 제품 i의 판매 개수, Mi는 설정된 기간 동안 제품 i가 소진된 후 제품진열대가 위치한 장소에 방문한 사람의 수를 의미한다.)(Here, Ni is the product exhaustion index of product i, Ti is the number of people who stayed for a certain time within a set radius of the place where the product display stand where product i is located during a set period, Si is the number of sales of product i during a set period, Mi refers to the number of people who visited the location where the product display stand is located after product i is sold out during the set period.)

상기 설정된 기간은 시간단위일 수도 있으며 기간단위일 수도 있다.The set period may be a time unit or a period unit.

또한 제품 i가 위치한 제품진열대가 위치한 장소의 설정 반경 내에서 소정 시간동안 머무른 사람의 수는 제품 i를 구매하거나 구매를 할지 말지 고민하는 사람을 포함하여 추정된 제품 i에 관심이 있는 사람의 수로서 모션인식정보수신및판단부(730)를 통해 추출된 사람의 모션을 통하여 숫자를 파악할 수 있으며 설정된 시간 동안 제품 i가 위치한 장소의 설정된 반경 내에 머무르는 사람의 수인 것이 바람직하다.In addition, the number of people who stayed for a predetermined time within the set radius of the place where the product display stand where product i is located is the number of people interested in the estimated product i, including people who purchase product i or are considering whether to purchase it or not. The number can be identified through the motion of the person extracted through the motion recognition information reception and determination unit 730, and is preferably the number of people staying within a set radius of the place where product i is located for a set time.

설정된 기간 동안 제품 i가 소진된 후 제품진열대가 위치한 장소에 방문한 사람의 수는 모션인식정보수신및판단부(730)를 통해 추출된 사람의 모션을 통하여 숫자를 파악할 수 있으며 제품 i가 소진된 후 제품진열대 앞에 방문한 사람의 수일 수 있다.The number of people who visited the place where the product display stand is located after product i is exhausted during the set period can be determined through the motion of the person extracted through the motion recognition information reception and judgment unit 730, and after product i is exhausted, It could be the number of people who visited the product display stand.

예를 들면 설정된 기간이 1주일이라고 가정하고, 1주일 동안 "사과"가 진열된 제품진열대가 위치한 장소에서 2m 내에서 30초 이상 머무른 사람의 수가 15명이고, 1주일 동안 판매된 "사과"의 개수가 5개이며, 1주일 동안 "사과"가 소진된 후 제품진열대가 위치한 장소에 방문한 사람의 수가 5명이라면 "사과"의 제품소진지수는 다음과 같다.For example, assuming that the set period is 1 week, the number of people who stayed within 2m of the product display stand where “apples” are located for 1 week for more than 30 seconds is 15, and the number of “apples” sold during the 1 week If the number is 5 and the number of people who visit the place where the product display stand is located after “apples” are sold out for a week is 5, the product exhaustion index for “apples” is as follows.

설정된 기간이 1주일이라고 가정하고, 1주일 동안 "오렌지"가 진열된 제품진열대가 위치한 장소에서 2m 내에서 30초 이상 머무른 사람의 수가 20명이고, 1주일 동안 판매된 "오렌지"의 개수가 8개이며, 1주일 동안 "오렌지"가 소진된 후 제품진열대가 위치한 장소에 방문한 사람의 수가 5명이라면 "오렌지"의 제품소진지수는 다음과 같다.Assuming that the set period is 1 week, the number of people who stayed within 2m for more than 30 seconds within 2m of the product display stand where "Oranges" are displayed during 1 week is 20, and the number of "Oranges" sold during 1 week is 8. If the number of people who visit the place where the product display stand is located after “Orange” is sold out for a week is 5, the product exhaustion index of “Orange” is as follows.

즉 제품을 사기 위해 방문했다고 추정되는 사람수 대비 제품의 판매개수가 높을수록, 제품을 구매하고 돌아간 사람이 많을수록 제품소진지수가 낮게 나타날 수 있다.In other words, the higher the number of products sold compared to the estimated number of people who visited to buy the product, and the more people who purchase the product and return, the lower the product burnout index may appear.

가맹점관리서버(800)는 가맹점 관리를 위해 각 제품의 유통기한에 대한 정보와 각 제품의 가격정보와 가격할인정보를 전송하기 위한 것이다.The affiliated store management server 800 is used to transmit information on the expiration date of each product and price information and price discount information for each product for affiliated store management.

이상과 같은 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.The embodiments described in the present specification and the configurations shown in the drawings are only one of the most preferred embodiments of the present invention and do not represent the entire technical idea of the present invention, so various equivalents and modifications can be substituted for them. It should be understood that there may be examples.

100 무인점포부스
110 출입구
120 계산대
200 제품진열대
300 가격안내판
400 QR코드부
500 인체감지센서
600 방향안내부
700 매장관리서버
710 제품별유통기한관리부
720 가격안내판관리부
730 모션인식정보수신및판단부
740 제품위치정보제공부
800 가맹점관리서버100 unmanned store booths
110 entrance
120 checkout counter
200 product display stand
300 price information board
400 QR code section
500 human body detection sensor
600 direction information section
700 store management server
710 Product Expiration Date Management Department
720 Price Information Board Management Department
730 Motion recognition information reception and judgment unit
740 Product location information provision department
800 Affiliate store management server

Claims

An unmanned store booth (100) where an internal space is formed to display products,
A product display stand 200 for displaying products on sale,
A price information board 300 located on one side of the display stand 200 to display price information transmitted from the store management server 700 or to display price discount information transmitted from the store management server 700,
A QR code unit 400 located on one side of the display stand 200 where information about the menu is input,
An unmanned store booth filming unit (500) for capturing images inside the unmanned store booth (100) and transmitting them to the store management server (700);
A direction information unit 600 for receiving product location information from the product location information provider 740 of the store management server 700 and displaying a direction indicator light according to the transmitted product location information;
a store management server (700) for transmitting price information or price discount information to be displayed on the price information board (300);
For affiliate management, it further includes an affiliated store management server (800) to transmit information on the expiration date of each product and price information and price discount information for each product,

The store management server 700 is
It further includes receiving a captured video from the unmanned store booth filming unit 500, recognizing a person in the transmitted video, separating it from the background inside the unmanned store booth, and estimating the extracted motion of the person,

The store management server 700 is
Receives product-specific expiration date information including expiration date information for each product displayed in the product display stand 200 from the affiliated store management server for affiliate management, determines whether the expiration date of each product has passed, and determines whether the expiration date of each product has passed. If the remaining date of the expiration date is within the set range, the product-specific expiration date management unit 710 determines that the expiration date is imminent, and transmits the imminent expiration date information of the judged product to the price information board management unit 720;
When price information is received from the franchise management server for franchise management, the transmitted price information is transmitted to the price information board 300, and information on the imminent expiration date of the product is transmitted from the product-specific expiration date management unit 710, the price information is A price board management unit (720) for transmitting price discount information for products for which expiration date information has been sent for replacement to the price board (300),
When the captured video is transmitted from the unmanned store booth filming unit 500, a person is recognized in the transmitted video, separated from the background inside the unmanned store booth, and it is determined that the person is looking for a specific product based on the extracted motion of the person. A motion recognition information reception and determination unit 730 for estimating what kind of product it is based on motion,
A product location information providing unit 740 for transmitting product location information including the location of the estimated product to the direction information unit 600 in order to guide the location of the product estimated through the motion recognition information reception and determination unit 730. )and,
It includes a product inventory management unit 750 to compare the number of products displayed on the product display stand 200 with the number of products sold to determine whether the product is sold out in the product display stand 200,

The product inventory management department (750)
The number of products displayed on the product display stand (200) is the value entered by the manager when the product is received, and the number of products sold is information about the number of products calculated from the checkout counter (120) of the unmanned store booth (100). is transmitted, and the number of specific products selected to determine the remaining quantity among the products displayed on the transmitted product display stand 200 and the number of specific products selected to determine the remaining quantity among the products calculated from the checkout counter 120 Compare to determine whether the product is exhausted,

The product inventory management department (750)
Determine whether a product is sold out relatively quickly by determining the product exhaustion cycle index. The product exhaustion cycle index is calculated using Equation 2. Through this, for products that are relatively quickly exhausted, additional quantities are prepared in advance. This is to reduce the number of products sold in the case of products with a relatively low product exhaustion cycle index.

[Equation 2] is

(Here, Ni is the product exhaustion index of product i, Ti is the number of people who stayed for a certain time within a set radius of the place where the product display stand where product i is located during a set period, Si is the number of sales of product i during a set period, Mi refers to the number of people who visited the place where the product display is located after product i has been sold out for a set period of time.) An unmanned store system characterized in that.

delete