KR20220076680A - Manned and manless controlling system for managing sale - Google Patents

Manned and manless controlling system for managing sale Download PDF

Info

Publication number
KR20220076680A
KR20220076680A KR1020200165416A KR20200165416A KR20220076680A KR 20220076680 A KR20220076680 A KR 20220076680A KR 1020200165416 A KR1020200165416 A KR 1020200165416A KR 20200165416 A KR20200165416 A KR 20200165416A KR 20220076680 A KR20220076680 A KR 20220076680A
Authority
KR
South Korea
Prior art keywords
store
owner
employee
authentication
image
Prior art date
Application number
KR1020200165416A
Other languages
Korean (ko)
Other versions
KR102529874B1 (en
Inventor
박진석
Original Assignee
도시공유플랫폼 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 도시공유플랫폼 주식회사 filed Critical 도시공유플랫폼 주식회사
Priority to KR1020200165416A priority Critical patent/KR102529874B1/en
Publication of KR20220076680A publication Critical patent/KR20220076680A/en
Application granted granted Critical
Publication of KR102529874B1 publication Critical patent/KR102529874B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Computer Security & Cryptography (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computing Systems (AREA)
  • Molecular Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • Biophysics (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Biomedical Technology (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Cash Registers Or Receiving Machines (AREA)
  • Collating Specific Patterns (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

유무인 판매관리 제어 시스템이 소개된다.
이를 위해 본 발명은 성인인증이 필요한 제품이 전시된 무인매대와 성인인증이 필요없는 제품이 전시된 무인매대가 설치된 매장; 상기 매장 내에 설치되어 해당 매장의 주인과 직원 및 상기 매장 내로 들어온 고객을 촬상할 수 있는 카메라(400) 및 음성,지문,홍채, 얼굴을 포함한 생체바이오를 등록할 수 있는 생체등록기(300); 및 상기 카메라(400), 상기 생체등록기(300) 및 상기 무인매대와 연동되되 해당 매장의 주인과 직원의 얼굴 이미지 및 해당 매장의 주인과 직원의 특정 행동 이미지가 기 저장된 중앙서버(100);를 포함하되, 상기 중앙서버(100)는 상기 생체등록기(300)와도 연동되어 상기 고객의 생체정보가 기저장된 것을 특징으로 하고, 상기 매장의 주인과 직원의 상기 생체등록기(300)를 통한 인증이 되면 상기 성인인증이 필요한 제품이 전시된 무인매대의 온/오프 작동이 제어되는 것을 특징으로 하며, 상기 매장의 주인과 직원의 얼굴 이미지 및 특정 행동 이미지를 통한 인증방식은 카메라(400)가 실시간으로 매장 내의 움직임을 감지하여 촬상하되, 촬상된 이미지는 실시간으로 중앙서버(100)에 저장되고, 촬상된 이미지 중 상기 주인과 직원의 얼굴이미지 및 상기 주인과 직원의 특정 행동 이미지의 센싱 여부에 따라 상기 성인인증이 필요한 제품이 전시된 무인매대의 온/오프 작동을 제어하는 것을 특징으로 하고, 상기 생체등록기(300)에 생체정보를 저장시 생체등록기(300)에 고객의 스마트폰번호 입력시 해당 스마트폰으로 URL이 전송되어 해당 URL 클릭시 실명인증과 성인인증 기관으로부터 인증 받는 절차가 진행되는 것을 특징으로 한다.An unattended sales management control system is introduced.
To this end, the present invention provides a store in which an unattended kiosk in which products requiring adult authentication are displayed and an unmanned kiosk in which products requiring adult authentication are displayed; installed in the store, a camera 400 capable of imaging the store owner, staff, and customers entering the store, and a biometric register 300 capable of registering biometrics including voice, fingerprint, iris, and face; and the camera 400, the biometric register 300, and the unmanned kiosk, and a central server 100 in which the face images of the store owner and staff and specific behavioral images of the store owner and staff are stored in advance; However, the central server 100 is also linked with the biometric register 300 to store the customer's biometric information in advance, and when the store owner and employee are authenticated through the biometric register 300 It is characterized in that the on/off operation of the unmanned kiosk where the product requiring adult authentication is displayed is controlled, and the authentication method through the face image and specific behavior image of the store owner and staff is performed by the camera 400 in real time. The image is captured by detecting movement in It is characterized in that it controls the on/off operation of the unmanned kiosk where the product requiring authentication is displayed, and when the biometric information is stored in the biometric register 300, the corresponding smart phone when the customer's smartphone number is input into the biometric register 300 It is characterized in that when the URL is transmitted to the URL and clicked on the URL, the process of real-name authentication and authentication from an adult authentication institution is carried out.

Description

유무인 판매관리 제어 시스템{Manned and manless controlling system for managing sale}Manned and manless controlling system for managing sale}

본 발명은 유무인 판매관리 제어 시스템에 관한 것이다.The present invention relates to an unattended sales management control system.

종래의 음식점이나 카페에서는 전화 또는 직접 방문을 통하여 매장 내의 좌석을 예약하거나 즉석에서 요금을 지불하고 좌석을 배정받는 방식으로 운영되어 왔다. 이로 인해 종래의 매장에서는 운영을 위한 인력이 항상 배치되어 있어야 하므로 24시간 운영하기는 곤란하고 특히 심야 시간의 운영은 수요가 높지 않으나 운영 인건비는 커질 수밖에 없어 특별한 수요가 있는 예외적인 기간 이외에는 운영하기 어렵다는 문제가 있다. 인건비 비중이 높은 음식점이나 카페 등과 같은 매장 내에서 다양한 상품을 운영 인력이 없더라도 판매할 수 있는 시스템이 필요하다.Conventional restaurants or cafes have been operated in such a way that a seat is reserved in a store through a phone call or in person, or a seat is allocated by paying a fee on the spot. For this reason, it is difficult to operate 24 hours a day in a conventional store because manpower for operation must always be placed there. there is a problem. There is a need for a system that can sell various products in stores such as restaurants and cafes, where labor costs are high, even if there are no operating personnel.

한편, 코로나 시대로 인해 이러한 무인매장 시스템은 활성화되고 있으며, 앞으로도 코로나를 극복한 경우에도 이러한 비대면 시장은 넓어질 것으로 예측되고, 특히 관리자가 필요없는 무인매대 혹은 무인매장은 더더욱 활성화 될 것이다.On the other hand, due to the corona era, such unmanned store systems are being activated, and even if the corona is overcome in the future, this non-face-to-face market is predicted to expand, and in particular, unmanned storefronts or unmanned stores that do not require an administrator will be even more active.

이때, 성인인증이 필요한 제품이 전시된 무인매장의 경우 관리자가 없이 해당 제품이 판대된다면 사회적으로 큰 문제가 발생할 것이다.At this time, in the case of unmanned stores where products requiring adult authentication are displayed, if the products are sold without a manager, a big social problem will arise.

이에 직원 또는 주인이 있는 경우에만 해당 성인인증이 필요한 제품을 무인매대를 통해 구매할 수 있는 시스템이 요구되어 진다.Therefore, there is a need for a system that can purchase products that require adult authentication only when there is an employee or owner through an unmanned kiosk.

KR 10-2018-0101110(2020.03.09 공개)KR 10-2018-0101110 (released 2020.03.09)

본 발명은 평소에는 무인매장으로서 운영됨은 물론이고, 성인인증이 필요한 제품 구매시 직원 또는 주인이 있어야 해당 제품을 구매할 수 있는 새로운 제어로직이 구비된 유무인 판매관리 제어 시스템을 제공함에 그 목적이 있다.An object of the present invention is to provide an unmanned sales management control system equipped with a new control logic that not only operates as an unattended store, but also allows an employee or owner to purchase the product when purchasing a product requiring adult authentication.

유무인 판매관리 제어 시스템이 소개된다.An unattended sales management control system is introduced.

이를 위해 본 발명은 성인인증이 필요한 제품이 전시된 무인매대와 성인인증이 필요없는 제품이 전시된 무인매대가 설치된 매장; 상기 매장 내에 설치되어 해당 매장의 주인과 직원 및 상기 매장 내로 들어온 고객을 촬상할 수 있는 카메라(400) 및 음성,지문,홍채, 얼굴을 포함한 생체바이오를 등록할 수 있는 생체등록기(300); 및 상기 카메라(400), 상기 생체등록기(300) 및 상기 무인매대와 연동되되 해당 매장의 주인과 직원의 얼굴 이미지 및 해당 매장의 주인과 직원의 특정 행동 이미지가 기 저장된 중앙서버(100);를 포함하되, 상기 중앙서버(100)는 상기 생체등록기(300)와도 연동되어 상기 고객의 생체정보가 기저장된 것을 특징으로 하고, 상기 매장의 주인과 직원의 상기 생체등록기(300)를 통한 인증이 되면 상기 성인인증이 필요한 제품이 전시된 무인매대의 온/오프 작동이 제어되는 것을 특징으로 하며, 상기 매장의 주인과 직원의 얼굴 이미지 및 특정 행동 이미지를 통한 인증방식은 카메라(400)가 실시간으로 매장 내의 움직임을 감지하여 촬상하되, 촬상된 이미지는 실시간으로 중앙서버(100)에 저장되고, 촬상된 이미지 중 상기 주인과 직원의 얼굴이미지 및 상기 주인과 직원의 특정 행동 이미지의 센싱 여부에 따라 상기 성인인증이 필요한 제품이 전시된 무인매대의 온/오프 작동을 제어하는 것을 특징으로 하고, 상기 생체등록기(300)에 생체정보를 저장시 생체등록기(300)에 고객의 스마트폰번호 입력시 해당 스마트폰으로 URL이 전송되어 해당 URL 클릭시 실명인증과 성인인증 기관으로부터 인증 받는 절차가 진행되는 것을 특징으로 한다.To this end, the present invention provides a store in which an unattended kiosk in which products requiring adult authentication are displayed and an unmanned kiosk in which products requiring adult authentication are displayed; installed in the store, a camera 400 capable of imaging the store owner, staff, and customers entering the store, and a biometric register 300 capable of registering biometrics including voice, fingerprint, iris, and face; and the camera 400, the biometric register 300, and the unmanned kiosk, and a central server 100 in which the face images of the store owner and staff and specific behavioral images of the store owner and staff are stored in advance; However, the central server 100 is also linked with the biometric register 300 to store the customer's biometric information in advance, and when the store owner and employee are authenticated through the biometric register 300 It is characterized in that the on/off operation of the unmanned kiosk where the product requiring adult authentication is displayed is controlled, and the authentication method through the face image and specific behavior image of the store owner and staff is performed by the camera 400 in real time. The image is captured by detecting movement in It is characterized in that it controls the on/off operation of the unmanned kiosk where the product requiring authentication is displayed, and when the biometric information is stored in the biometric register 300, the corresponding smart phone when the customer's smartphone number is input into the biometric register 300 It is characterized in that when the URL is transmitted to the URL and clicked on the URL, the process of real-name authentication and authentication from an adult authentication institution is carried out.

상기와 같은 구성으로 이루어진 본 발명에 의한다면, 주인 또는 직원의 생체정보와 특정 행동 이미지를 통해 매장 내 근무(상주)하고 있는지 알 수 있고, 별도의 또 다른 특정 행동 이미지를 통해 매장 내에 상주하지 않음을 알려 성인인증이 필요한 제품이 전시된 무인매대의 락 기능을 구현함은 물론이고, 이를 통해 성인인증이 필요한 제품에 대해서는 반드시 주인 또는 직원의 상주하에 성인인증을 통해 제품을 구매하게 하는 등의 효과가 구현된다.According to the present invention having the above configuration, it is possible to know whether the owner or employee is working (resident) in the store through the biometric information and specific behavior image of the owner or employee, and does not reside in the store through another specific behavior image Not only does it implement the lock function of the unmanned shelf where products requiring adult authentication are displayed, but also, for products requiring adult authentication, the product must be purchased through adult authentication in the presence of the owner or employee. is implemented

도 1은 본 발명의 전체 개념도,
도 2a는 성인인증이 필요한 무인매대의 실제 설치 도면이고, 도 2b는 성인인증이 필요없는 무인매대의 실제 설치 도면,
도 3은 스마트폰에 설치된 앱을 통해 현재 매장 내 주인과 직원이 부재중임을 알림받고, 더 나아가 콜버튼을 통해 해당 주인과 직원을 호출할 수 있는 모식도이다.1 is an overall conceptual diagram of the present invention;
Figure 2a is an actual installation diagram of the unattended kiosk that requires adult authentication, Figure 2b is an actual installation diagram of the unattended kiosk that does not require adult authentication;
3 is a schematic diagram of being able to receive notification that the current store owner and staff are absent through an app installed on the smartphone, and further call the corresponding owner and staff through a call button.

이하 첨부된 도면을 참조로 본 발명인 유무인 판매관리 제어 시스템의 바람직한 실시예를 설명한다.Hereinafter, with reference to the accompanying drawings, a preferred embodiment of the sales management control system with or without the present inventor will be described.

도 1은 본 발명의 전체 개념도이고, 도 2a는 성인인증이 필요한 무인매대의 실제 설치 도면이고, 도 2b는 성인인증이 필요없는 무인매대의 실제 설치 도면, 도 3은 스마트폰에 설치된 앱을 통해 현재 매장 내 주인과 직원이 부재중임을 알림받고, 더 나아가 콜버튼을 통해 해당 주인과 직원을 호출할 수 있는 모식도이다.1 is an overall conceptual diagram of the present invention, FIG. 2a is an actual installation diagram of an unattended kiosk that requires adult authentication, FIG. 2b is an actual installation diagram of an unattended kiosk that does not require adult authentication, and FIG. 3 is an app installed on a smartphone. This is a schematic diagram of being notified that the current store owner and staff are absent, and furthermore, the owner and staff can be called through the call button.

도시된 바와 같이 본 발명은 성인인증이 필요한 제품이 전시된 무인매대(A,10)와 성인인증이 필요없는 제품이 전시된 무인매대(B,10)가 설치된 매장이 개시된다.As shown, the present invention discloses a store in which an unattended kiosk (A, 10) in which products requiring adult authentication are displayed and an unmanned stand (B, 10) in which products not requiring adult authentication are displayed.

성인인증이 필요한 제품으로는 다양하게 설정될 수 있으나, 담배, 술, 콘돔 등이 포함될 수 있다.Products that require adult authentication may be set in various ways, but may include cigarettes, alcohol, condoms, and the like.

한편, 매장 내에 설치되어 해당 매장의 주인과 직원 및 매장 내로 들어온 고객을 촬상할 수 있는 카메라(400) 및 음성,지문,홍채, 얼굴을 포함한 생체바이오를 등록할 수 있는 생체등록기(300)가 개시된다.On the other hand, a camera 400 installed in a store and capable of imaging the store owner, staff, and customers entering the store and a biometric register 300 capable of registering bio-bio including voice, fingerprint, iris, and face are started. do.

카메라(400)는 매장 내에 설정된 위치에 복수개가 위치할 수 있으며, 매장 내에 설치된 동작센서 또는 동작인지 기술이 구비된 별도의 센서와 연동되어 매장 내의 움직이는 모든 대상을 촬상할 수 있으며, 당연히 그 대상이 될 수 있는 매장의 주인과 직원들은 물론이고 매장 내로 들어오는 고객을 촬상할 수 있다.A plurality of cameras 400 may be located at a location set in the store, and in conjunction with a motion sensor installed in the store or a separate sensor equipped with motion recognition technology, it is possible to image all moving objects in the store, and of course the object is It is possible to photograph not only the store owner and staff, but also the customers entering the store.

또한, 매장의 입구 혹은 매장 내의 소정의 위치에는 생체등록기(300)가 기 설치되어 있어 해당 생체등록기(300)를 통해 음성,지문,홍채 및 얼굴을 포함한 생체바이오를 등록할 수 있다.In addition, the biometric register 300 is pre-installed at the entrance of the store or at a predetermined location in the store, so that biometric bios including voice, fingerprint, iris and face can be registered through the biometric register 300 .

해당 생체등록기(300)를 통해 고객은 물론이고 주인과 직원의 생체바이오정보를 기 저장할 수 있게 된다.Through the biometric register 300, it is possible to pre-store biometric information of not only customers, but also owners and employees.

한편, 상기 카메라(400), 상기 생체등록기(300) 및 상기 무인매대와 연동되되 해당 매장의 주인과 직원의 얼굴 이미지 및 해당 매장의 주인과 직원의 특정 행동 이미지가 기 저장된 중앙서버(100)를 포함한다.On the other hand, the camera 400, the biometric register 300, and the central server 100 interlocked with the unmanned kiosk, in which the face images of the store owner and employees and specific behavioral images of the store owner and employees are stored in advance. include

즉, 중앙서버(100)에는 해당 매장의 주인과 직원의 얼굴 이미지가 기 저장되어 있어 해당 카메라(400)가 실시간으로 매장 내부를 촬상하고 촬상된 영상을 기 저장된 초,분 단위로 프레임을 저장하고, 해당 프레임별 매장의 주인과 직원의 얼굴 이미지가 센싱된 경우 성인인증이 필요한 무인매대의 온/오픈 할 수 있는 제어로직이 구현된다.That is, the central server 100 stores the face images of the store owner and employees in advance, so the camera 400 captures the inside of the store in real time, and stores the captured images in pre-stored seconds and minutes frames in units of seconds and minutes, , when the image of the owner and employee of the store is sensed for each frame, a control logic is implemented to turn on/open the unmanned kiosk that requires adult authentication.

또한, 더 나아가 중앙서버(100)에는 별도의 특정 행동 이미지가 기 저장될 수 있다.Further, a separate specific action image may be pre-stored in the central server 100 .

즉, 주인 또는 직원이 양 팔로 원을 그리는 행동이나, 주인 또는 직원이 한번은 왼팔을 들어올리고, 그 다음에는 오른팔을 들어올리는 특정 행동을 하는 경우 실시간으로 촬상하여, 촬상된 이미지를 통해 해당 매장 내에 주인 또는 직원이 있는 것을 감지하게 된다.In other words, when the owner or employee draws a circle with both arms, or when the owner or employee raises the left arm once and then raises the right arm, the owner or employee raises his/her right arm in real time. Or it will detect the presence of an employee.

물론, 주인과 직원의 얼굴 이미지가 인식되는지 먼저 구현되고, 그 다음에 상기의 특정 행동 이미지가 더해지며 해당 중앙서버(100)는 해당 매장 내에 주인 또는 직원이 상주하는 것으로 인지하고, 성인인증이 필요한 무인매대의 온/오프 작동이 구현되도록 시스템화 된다.Of course, whether the face image of the owner and the employee is recognized first is implemented, and then the specific action image is added, and the central server 100 recognizes that the owner or employee resides in the store, and requires adult authentication. It is systemized so that the on/off operation of the unmanned stand is implemented.

즉, 매장의 주인과 직원의 얼굴 이미지 및 특정 행동 이미지를 통한 인증방식은 카메라(400)가 실시간으로 매장 내의 움직임을 감지하여 촬상하되, 촬상된 이미지는 실시간으로 중앙서버(100)에 저장되고, 촬상된 이미지 중 상기 주인과 직원의 얼굴이미지 및 상기 주인과 직원의 특정 행동 이미지의 센싱 여부에 따라 상기 성인인증이 필요한 제품이 전시된 무인매대의 온/오프 작동을 제어하는 것을 특징으로 한다.That is, in the authentication method through the face image and specific behavior image of the store owner and employee, the camera 400 detects and captures movement in the store in real time, and the captured image is stored in the central server 100 in real time, It is characterized in that the on/off operation of the unmanned shelf in which the product requiring adult authentication is displayed is controlled according to whether the face image of the owner and the employee among the captured images and the specific behavior image of the owner and the employee are sensed.

한편, 고객이 상기 생체등록기(300)에 자신의 생체정보를 입력하는 방식은 다음과 같다.Meanwhile, a method for a customer to input his/her biometric information into the biometric register 300 is as follows.

생체등록기(300)에 생체정보를 저장시 생체등록기(300)에 고객의 핸드폰(스마트폰)번호를 입력하게 되면, 해당 핸드폰(스마트폰)으로 URL이 전송되어 해당 URL 클릭시 실명인증과 성인인증 기관으로부터 인증 받는 절차가 진행된다.When the biometric information is stored in the biometric register 300, when the customer's cell phone (smartphone) number is entered in the biometric register 300, the URL is transmitted to the corresponding cell phone (smartphone), and when the URL is clicked, real name authentication and adult authentication are performed. The process of getting accreditation from the institution is in progress.

물론, 상기 생체등록기(300)를 통해 고객의 지문, 홍채, 얼굴 이미지를 기 등록할 수 있음은 물론이고, 상기의 단계로 실명인증은 물론 성인인증까지 진행할 수 있다.Of course, the customer's fingerprint, iris, and face image can be pre-registered through the biometric register 300, and real name authentication as well as adult authentication can be performed through the above steps.

한편, 중앙서버(100)는 딥러닝 방식으로 상기 주인과 직원의 얼굴이미지 및 상기 주인과 직원의 특정 행동 이미지를 학습하는 것을 특징으로 한다.On the other hand, the central server 100 is characterized in that it learns the face image of the owner and the employee and the specific action image of the owner and the employee in a deep learning method.

주지하다시피, 주인과 직원의 얼굴이미지는 생체정보인바 변경되지 않지만 시간의 흐름에 따라 주인과 직원의 얼굴이미지도 실시간으로 약간의 변경 혹은 오차가 생길 수 있는바, 중앙서버(100)는 지속적으로 주인과 직원의 얼굴 이미지를 촬상하고 촬상된 데이터를 학습하여 직원과 주인의 얼굴 이미지 센싱 로직을 구현하게 된다.As is well known, the face images of the owner and staff are biometric information and do not change, but with the passage of time, the face images of the owner and staff may also change slightly or have errors in real time. The face image sensing logic of the employee and the owner is implemented by capturing the face image of the owner and the employee and learning the captured data.

상기 중앙서버(100)는 상기 주인과 직원의 얼굴이미지 및 상기 주인과 직원의 특정 행동 이미지가 센싱되는 경우 상기 성인인증이 필요한 제품이 전시된 무인매대는 해당 무인매대에 설치된 별도의 버튼없이 온/오프 될 수 있는 것을 특징으로 한다.When the central server 100 senses the face image of the owner and the employee and the specific behavior image of the owner and the employee, the unmanned kiosk on which the product requiring adult authentication is displayed is turned on / without a separate button installed in the unmanned kiosk. It is characterized in that it can be turned off.

즉, 성인인증이 필요한 제품은 반드시 매장 내에 주인과 직원이 있어야 되며, 중앙서버(100)가 상기 주인과 직원의 특정 행동 이미지가 센싱되는 경우 상기 성인인증이 필요한 제품이 전시된 무인매대는 해당 무인매대에 설치된 별도의 버튼없이 온/오프 될 수 있는 것으로 제어가 된다.That is, a product requiring adult authentication must have an owner and an employee in the store, and when the central server 100 senses a specific behavioral image of the owner and employee, the unmanned stand where the product requiring adult authentication is displayed. It is controlled by being able to turn on/off without a separate button installed on the stand.

물론, 해당 성인인증이 필요한 제품을 구매한 고객은 매장 내에서 결제시 성인인증이 필요하고, 이는 별도의 신분증 제시로도 가능하며, 기 설명한 생체등록기(300)를 통해서도 성인인증이 됨과 동시에 해당 제품을 구매할 수 있다.Of course, customers who have purchased a product that requires adult authentication need adult authentication when paying in-store, and this can also be done by presenting a separate identification card. can be purchased

별도의 버튼없이 온/오프 되다는 것은 주인과 직원이 매장 내에 위치하는 전제하여 해당 무인매대의 보안창 혹은 구매가능 상태가 된다는 것을 의미하며, 성인인증을 거치지 않은 상태에서 해당 제품을 구매할 수 있다는 의미는 아니다.Being on/off without a separate button means that the owner and employee are located in the store, and the security window of the unmanned kiosk or purchase is possible, meaning that the product can be purchased without going through adult authentication. is not

한편, 상기 중앙서버(100)는, 상기 카메라(400)를 통해 매장 주인과 직원의 특정 행동 이미지를 통해 해당 매장의 주인과 직원이 부재라 판단시, 상기 성인인증이 필요한 제품이 전시된 무인매대는 오픈시키지 않는 것을 특징으로 하는, On the other hand, when the central server 100 determines that the store owner and the employee are absent through the camera 400 through a specific behavioral image of the store owner and the employee, the product requiring adult authentication is displayed. characterized in that it does not open,

한편, 상기 중앙서버(100)는, 상기 카메라(400)를 통해 설정된 시간 동안 매장 주인과 직원의 얼굴 이미지가 센싱되지 않고, 매장 주인과 직원의 특정 행동 이미지를 통해 해당 매장의 주인과 직원이 부재라 판단시, 상기 성인인증이 필요한 제품이 전시된 무인매대는 오픈시키지 않는 것을 특징으로 한다.On the other hand, in the central server 100, the face image of the store owner and the employee is not sensed for the time set through the camera 400, and the store owner and the employee are absent through the specific behavioral image of the store owner and the employee. It is characterized in that the unmanned kiosk on which the product requiring adult authentication is displayed is not opened.

즉, 실시간으로 촬상하는 카메라(400)를 통해 매장 내의 주인과 직원의 얼굴 이미지가 설정된 시간 예를 들면 10분이상 15분 이하 동안 센싱되지 않는 경우 성인인증이 필요한 제품이 전시된 무인매대는 무인매대에 설치된 락 기능을 통해 보안창이 오픈되지 않도록 제어하게 된다.That is, when the face images of the owner and staff in the store are not sensed for a set period of time, for example, 10 minutes or more and 15 minutes or less, through the camera 400 that captures images in real time. The security window is controlled so that the security window is not opened through the lock function installed in the

또는, 주인과 직원이 양 팔을 이용하여 'X'자를 그리는 등의 특정 행동 이미지가 센싱되는 경우 주인과 직원이 매장을 벗어난다는 의미인바 다시 직원과 주인인 양팔을 이용하여 원을 그리는 'O'자의 특정 행동을 하고, 해당 이미지가 중앙서버(100)에 센싱되지 않는 한 성인인증이 필요한 제품이 전시된 무인매대는 '락'상태를 유지하게 된다.Alternatively, if a specific action image is sensed, such as when the owner and the employee draw an 'X' using both arms, it means that the owner and the employee leave the store. As long as the user takes a specific action and the image is not sensed by the central server 100, the unmanned kiosk in which adult authentication is required is maintained in a 'locked' state.

한편, 상기 중앙서버(100)와 실시간으로 연동될 수 있는 별도의 앱과 웹이 설치된 스마트폰(200)을 포함하되, 상기 앱 또는 웹 실행시 해당 매장 내의 주인과 직원의 부재 여부 신호가 상기 중앙서버(100)를 매개로 송신되고, 상기 앱 또는 웹을 통해 해당 매장의 주인과 직원을 호출할 수 있는 별도의 콜버튼이 표시되어, 해당 콜버튼 선택시 해당 매장의 주인 또는 직원을 호출할 수 있는 것을 특징으로 하고,On the other hand, the central server 100 and a separate app and web that can be linked in real time, including a smartphone 200 installed, when the app or the web is executed, the signal whether the owner and the employee in the store are absent from the central A separate call button that is transmitted through the server 100 and can call the store owner and staff through the app or web is displayed, and when the corresponding call button is selected, the store owner or staff can be called characterized by having

즉, 해당 앱 또는 웹은 고객의 스마트폰(200) 혹은 주인과 직원의 스마트폰(200)에 설치된다.That is, the corresponding app or web is installed on the customer's smart phone 200 or the owner's and employee's smart phone 200 .

해당 앱 또는 웹을 통해 고객은 성인인증이 필요한 제품을 구매하기 위한 매장을 찾아가는 중 해당 매장 내의 주인과 직원이 부재라는 신호를 중앙서버(100)를 매개로 송신받을 수 있다.Through the corresponding app or web, the customer can receive a signal that the owner and staff are absent in the store through the central server 100 while visiting a store to purchase a product requiring adult authentication.

물론, 해당 고객은 다른 매장으로 갈 수도 있으나, 근처에 해당 매장만이 위치하는 경우 해당 앱 또는 웹을 통해 해당 매장의 주인과 직원을 부를 수 있는 콜버튼을 누를 수 있게된다.Of course, the customer can go to another store, but if only the store is located nearby, the customer can press a call button to call the store owner and staff through the app or web.

이를 통해 매장의 주인 또는 직원을 호출할 수 있게 되는 것이다.This will allow you to call the store owner or staff.

또한, 설정된 거리 범위 내에 현재 매장 내에 주인 또는 직원이 근무하고 있는 매장의 위치를 상기 중앙서버(100)에서 상기 앱 또는 웹을 통해 송신할 수 있는 것을 특징으로 한다.In addition, it is characterized in that the central server 100 can transmit the location of the store where the owner or employee is currently working in the store within a set distance range through the app or the web.

즉, 성인인증이 필요한 제품을 구매하고자 하는 경우 해당 매장 내에 직원과 주인이 상주해야 하는바, 해당 앱 또는 웹을 통해 현재 어떤 매장에 주인과 직원이 상주하고 해당 제품을 구입할 수 있는지를 알려주게 된다.In other words, if you want to purchase a product that requires adult authentication, the staff and the owner must reside in the store, and the app or the web will tell you which store the owner and the staff are currently resident in and where you can purchase the product. .

스마트폰(200)에 설치된 위치신호센서를 통해 해당 스마트폰(200)이 위치한 곳을 중심으로 반경 1Km 내에 위치한 매장 내의 현 상황을 앱 또는 웹을 통해 알 수 있고, 현재 어떤 매장에 주인과 직원이 상주함으로써 성인인증을 통해 원하는 제품을 구입할 수 있는지의 정보를 얻게 되는 것이다.Through the location signal sensor installed in the smartphone 200, the current situation in the store located within a 1Km radius of the location where the smartphone 200 is located can be known through the app or the web, By staying in residence, you will be able to obtain information about whether you can purchase the desired product through adult authentication.

100 : 중앙서버 200 : 스마트폰
300 : 생체등록기 400 : 카메라100: central server 200: smartphone
300: biometric register 400: camera

Claims (4)

성인인증이 필요한 제품이 전시된 무인매대와 성인인증이 필요없는 제품이 전시된 무인매대가 설치된 매장;
상기 매장 내에 설치되어 해당 매장의 주인과 직원 및 상기 매장 내로 들어온 고객을 촬상할 수 있는 카메라(400) 및 음성,지문,홍채, 얼굴을 포함한 생체바이오를 등록할 수 있는 생체등록기(300); 및
상기 카메라(400), 상기 생체등록기(300) 및 상기 무인매대와 연동되되 해당 매장의 주인과 직원의 얼굴 이미지 및 해당 매장의 주인과 직원의 특정 행동 이미지가 기 저장된 중앙서버(100);를 포함하되,
상기 중앙서버(100)는 상기 생체등록기(300)와도 연동되어 상기 고객의 생체정보가 기저장된 것을 특징으로 하고,
상기 매장의 주인과 직원의 상기 생체등록기(300)를 통한 인증이 되면 상기 성인인증이 필요한 제품이 전시된 무인매대의 온/오프 작동이 제어되는 것을 특징으로 하며,
상기 매장의 주인과 직원의 얼굴 이미지 및 특정 행동 이미지를 통한 인증방식은 카메라(400)가 실시간으로 매장 내의 움직임을 감지하여 촬상하되, 촬상된 이미지는 실시간으로 중앙서버(100)에 저장되고, 촬상된 이미지 중 상기 주인과 직원의 얼굴이미지 및 상기 주인과 직원의 특정 행동 이미지의 센싱 여부에 따라 상기 성인인증이 필요한 제품이 전시된 무인매대의 온/오프 작동을 제어하는 것을 특징으로 하고,
상기 생체등록기(300)에 생체정보를 저장시 생체등록기(300)에 고객의 스마트폰번호 입력시 해당 스마트폰으로 URL이 전송되어 해당 URL 클릭시 실명인증과 성인인증 기관으로부터 인증 받는 절차가 진행되는 것을 특징으로 하는, 유무인 판매관리 제어 시스템.Stores with unmanned kiosks displaying products requiring adult authentication and unmanned kiosks displaying products that do not require adult authentication;
installed in the store, a camera 400 capable of imaging the store owner, staff, and customers entering the store, and a biometric register 300 capable of registering biometrics including voice, fingerprint, iris, and face; and
The camera 400, the biometric register 300, and the central server 100 interlocked with the unmanned kiosk, in which the face images of the store owner and staff and specific behavioral images of the store owner and staff are pre-stored; includes; but,
The central server 100 is also interlocked with the biometric register 300 to store the customer's biometric information in advance,
When the owner and employee of the store are authenticated through the biometric register 300, the on/off operation of the unmanned kiosk on which the product requiring adult authentication is displayed is controlled,
In the authentication method through the face image and specific behavior image of the store owner and employee, the camera 400 detects movement in the store in real time and captures the image, but the captured image is stored in the central server 100 in real time and captured It is characterized in that the on/off operation of the unmanned shelf in which the product requiring adult authentication is displayed is controlled according to whether the owner and the employee's face image and the specific behavior image of the owner and the employee are sensed among the displayed images,
When biometric information is stored in the biometric register 300, when the customer's smartphone number is input into the biometric register 300, the URL is transmitted to the corresponding smartphone, and when the URL is clicked, real name authentication and authentication from an adult authentication institution are performed. Characterized in that, unattended sales management control system. 청구항 1에 있어서,
상기 중앙서버(100)는 딥러닝 방식으로 상기 주인과 직원의 얼굴이미지 및 상기 주인과 직원의 특정 행동 이미지를 학습하는 것을 특징으로 하고,
상기 중앙서버(100)는 상기 주인과 직원의 얼굴이미지 및 상기 주인과 직원의 특정 행동 이미지가 센싱되는 경우 상기 성인인증이 필요한 제품이 전시된 무인매대는 해당 무인매대에 설치된 별도의 버튼없이 온/오프 될 수 있는 것을 특징으로 하는, 유무인 판매관리 제어 시스템.The method according to claim 1,
The central server 100 is characterized in that it learns the face image of the owner and the employee and the specific action image of the owner and the employee in a deep learning method,
When the central server 100 senses the face image of the owner and the employee and the specific behavior image of the owner and the employee, the unmanned kiosk on which the product requiring adult authentication is displayed is turned on / without a separate button installed in the unmanned kiosk. An unattended sales management control system, characterized in that it can be turned off. 청구항 2에 있어서,
상기 중앙서버(100)는, 상기 카메라(400)를 통해 설정된 시간 동안 매장 주인과 직원의 얼굴 이미지가 센싱되지 않고, 매장 주인과 직원의 특정 행동 이미지를 통해 해당 매장의 주인과 직원이 부재라 판단시, 상기 성인인증이 필요한 제품이 전시된 무인매대는 오픈시키지 않는 것을 특징으로 하는, 유무인 판매관리 제어 시스템.3. The method according to claim 2,
The central server 100 determines that the store owner and the employee are absent through the specific behavioral image of the store owner and the employee without sensing the face image of the store owner and the employee for the time set through the camera 400 City, the unmanned sales management control system, characterized in that the unmanned kiosk on which the product requiring adult authentication is displayed is not opened. 청구항 3에 있어서,
상기 중앙서버(100)와 실시간으로 연동될 수 있는 별도의 앱과 웹이 설치된 스마트폰(200)을 포함하되,
상기 앱 또는 웹 실행시 해당 매장 내의 주인과 직원의 부재 여부 신호가 상기 중앙서버(100)를 매개로 송신되고, 상기 앱 또는 웹을 통해 해당 매장의 주인과 직원을 호출할 수 있는 별도의 콜버튼이 표시되어, 해당 콜버튼 선택시 해당 매장의 주인 또는 직원을 호출할 수 있는 것을 특징으로 하고,
설정된 거리 범위 내에 현재 매장 내에 주인 또는 직원이 근무하고 있는 매장의 위치를 상기 중앙서버(100)에서 상기 앱을 통해 송신할 수 있는 것을 특징으로 하는, 유무인 판매관리 제어 시스템.


4. The method according to claim 3,
Including a smartphone 200 installed with a separate app and web that can be linked in real time with the central server 100,
When the app or the web is executed, a signal whether the owner and the employee in the store are absent is transmitted via the central server 100, and a separate call button that can call the store owner and the employee through the app or the web is displayed, characterized in that when the corresponding call button is selected, the owner or staff of the corresponding store can be called,
The central server (100) can transmit the location of the store where the owner or the employee is currently working within the set distance range through the app.
KR1020200165416A 2020-12-01 2020-12-01 Manned and manless controlling system for managing sale KR102529874B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200165416A KR102529874B1 (en) 2020-12-01 2020-12-01 Manned and manless controlling system for managing sale

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200165416A KR102529874B1 (en) 2020-12-01 2020-12-01 Manned and manless controlling system for managing sale

Publications (2)

Publication Number Publication Date
KR20220076680A true KR20220076680A (en) 2022-06-08
KR102529874B1 KR102529874B1 (en) 2023-05-04

Family

ID=81980742

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200165416A KR102529874B1 (en) 2020-12-01 2020-12-01 Manned and manless controlling system for managing sale

Country Status (1)

Country Link
KR (1) KR102529874B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150044067A (en) * 2013-10-15 2015-04-24 에스케이플래닛 주식회사 System, User Device, Identification card Issue Device, Finger print Authentication Device and Method for issuing the idendification card using the finger print information
KR20180101110A (en) 2017-03-03 2018-09-12 김창범 Belt for sensing muscle contraction and relaxation
KR102061423B1 (en) * 2018-07-19 2019-12-31 이충근 System for monitoring unmanned convenience store
KR20200034242A (en) * 2018-09-21 2020-03-31 (주)엔조이소프트 Selective unattended store system for underage monitoring and operation method of the same

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150044067A (en) * 2013-10-15 2015-04-24 에스케이플래닛 주식회사 System, User Device, Identification card Issue Device, Finger print Authentication Device and Method for issuing the idendification card using the finger print information
KR20180101110A (en) 2017-03-03 2018-09-12 김창범 Belt for sensing muscle contraction and relaxation
KR102061423B1 (en) * 2018-07-19 2019-12-31 이충근 System for monitoring unmanned convenience store
KR20200034242A (en) * 2018-09-21 2020-03-31 (주)엔조이소프트 Selective unattended store system for underage monitoring and operation method of the same

Also Published As

Publication number Publication date
KR102529874B1 (en) 2023-05-04

Similar Documents

Publication Publication Date Title
US20200372743A1 (en) Face based door entry
KR102061423B1 (en) System for monitoring unmanned convenience store
JP4115329B2 (en) Customer management system, program for realizing functions of the system, and recording medium
US11960586B2 (en) Face recognition system, face matching apparatus, face recognition method, and storage medium
US8750576B2 (en) Method of managing visiting guests by face recognition
CN105741451B (en) Information processing system and information processing method
US11367285B2 (en) Automated store system and server
US11887463B2 (en) Systems and methods for card-handling by point of sale devices
JP2009009231A (en) Security management system and security management method
KR102451378B1 (en) Unmanned store management system
WO2016088401A1 (en) Security system
JPWO2020115890A1 (en) Information processing equipment, information processing methods, and programs
JP6951796B1 (en) Image recognition device, authentication system, image recognition method and program
CN103456104B (en) Delinquency prevention system and delinquency prevention method
US11749044B2 (en) Gate control device, gate control method, and gate control program
TWM570489U (en) Smart store shopping system
KR102529874B1 (en) Manned and manless controlling system for managing sale
KR102227908B1 (en) Method for the guidance of elderly persons in smart automated teller machine using facial recognition
KR102615937B1 (en) Kiosk system based on customer serving algorithms using face recognition check-in
JP7237871B2 (en) Target detection method
US20230162193A1 (en) Sales support apparatus, sales support method, and nontransitory computer-readable storage medium
JP7391729B2 (en) mechanical parking device
US12039510B2 (en) Information processing apparatus, information processing method, and storage medium
US20230368639A1 (en) Server device, visitor notification system, visitor notification method, and storage medium
WO2022034881A1 (en) Store system, store management device, store management method, and program

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant