KR102566007B1 - 무인 매장용 블랙리스트 등록 방법 및 이를 이용한 블랙 리스트 등록 시스템 - Google Patents

무인 매장용 블랙리스트 등록 방법 및 이를 이용한 블랙 리스트 등록 시스템 Download PDF

Info

Publication number
KR102566007B1
KR102566007B1 KR1020200174570A KR20200174570A KR102566007B1 KR 102566007 B1 KR102566007 B1 KR 102566007B1 KR 1020200174570 A KR1020200174570 A KR 1020200174570A KR 20200174570 A KR20200174570 A KR 20200174570A KR 102566007 B1 KR102566007 B1 KR 102566007B1
Authority
KR
South Korea
Prior art keywords
information
blacklist
control system
payment
video
Prior art date
Application number
KR1020200174570A
Other languages
English (en)
Other versions
KR20220084762A (ko
Inventor
오창남
Original Assignee
주식회사 에스원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스원 filed Critical 주식회사 에스원
Priority to KR1020200174570A priority Critical patent/KR102566007B1/ko
Publication of KR20220084762A publication Critical patent/KR20220084762A/ko
Application granted granted Critical
Publication of KR102566007B1 publication Critical patent/KR102566007B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/14—Central alarm receiver or annunciator arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements

Abstract

본 발명 무인 매장용 블랙리스트 등록방법은 컨트롤러가 설정된 시간에 따라 출입문의 록킹을 해제하여 매장을 오픈하도록 제어하는 단계와, 컨트롤러가 도어락 모듈로부터 출입자의 출입으로 생성되는 출입문 오픈 정보를 수신하고 출입자의 출입문 오픈 시간정보를 관제 시스템으로 전송하는 단계와, 카메라가 해당 출입자를 촬영하고 촬영된 출입자 영상 스트림 정보를 관제 시스템으로 전송하는 단계와, 관제 시스템이 출입문 오픈시간정보, 출입자 영상 스트림 정보를 영상 분석 서버로 전송하는 단계와, 영상 분석 서버가 수신된 출입문 오픈 시간 정보 및 출입자 영상 스트림 정보를 기초로 출입문 오픈, 해당 출입자 움직임 및 결제 구역내 해당 출입자 움직임 여부를 판단하여 분석하는 단계와, 결제 구역내 해당 출입자 움직임이 없는 경우, 분석 정보를 관제 시스템으로 전송하는 단계와, 관제 시스템이 분석 정보를 기초로 해당 출입자 움직임 정보를 저장하고 결제 단말기와 연동하여 결제 정보 수신 여부를 판단하는 단계와, 결제 정보 수신이 없는 경우, 관제 시스템이 결제 이상으로 판단하고, 결제 이상 정보를 관리자 점주의 블랙리스트 설정뷰어로 전송하여 팝업창으로 제공하도록하는 단계와, 점주의 블랙리스트 설정뷰어가 결제 이상 이벤트 발생 영상 정보를 관제 시스템에 요청하는 단계와, 관제 시스템이 결제 이상에 해당하는 출입자의 출입문 이벤트 영상 스트림, 해당 출입자 움직임 검출 영상 스트림 및 결제 이상 영상 스트림 정보를 저장하고 저장된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 점주의 블랙리스트 설정뷰어로 전송하는 단계와, 점주의 블랙리스트 설정뷰어가 수신된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴을 판단하는 단계와, 점주의 블랙리스트 설정뷰어가 절도범 얼굴 정보를 영상 분석 서버로 전송하는 단계와, 점주의 블랙리스트 설정뷰어가 관제 시스템에 블랙리스트 영상 백업을 요청하는 단계와, 영상 분석 서버가 수신된 절도범 얼굴 정보에서 특징점을 추출하고 추출된 얼굴 특징점을 저장하는 단계와, 관제 시스템이 요청받은 블랙리스트 영상 백업 정보를 영상 분석 서버로 전송하는 단계와, 영상 분석 서버가 수신된 영상 백업 정보에서 얼굴 정보들을 추출하는 단계와, 영상 분석 서버가 추출된 얼굴 정보들에서 사람별도 ID를 부여하고 얼굴 특징점을 추출하는 단계와, 영상 분석 서버가 추출된 각 사람별 얼굴 특징점과 기저장된 절도범 얼굴 특징점을 비교하여 일치도를 점수로 산정하는 단계와, 영상 분석 서버가 산정된 점수가 기 설정되어 저장된 기준 점수 이상인 경우 블랙리스트로 판단하고 블랙리스트 정보와 해당 블랙리스트로 설정된 ID 정보를 관제시스템으로 전송하는 단계와, 관제 시스템이 실시간으로 해당 블랙리스트 정보와 해당 ID 정보를 팝업창으로 제공하고 점주의 블랙리스트 설정뷰어로 알람 정보를 SMS 또는 Push 메시지 등과 같은 방법으로 전송하는 단계를 포함하여 이루어지는 것을 특징으로 하는 것이다.

Description

무인 매장용 블랙리스트 등록 방법 및 이를 이용한 블랙 리스트 등록 시스템{Black List Registeration Method for Manless Shop and System thereof}
본 발명은 편의점, 슈퍼와 같은 일반 매장에서 상품을 취득하고 결제하지 않고 매장을 나가는 경우에 상품 절도범을 등록하여 관리하기 위한 것이다. 일반적으로 현재의 매장들은 24시간 녹화 시스템을 구축하여 관리하고 있으나, 절도범들을 고객과 구분하여 관리하기가 어려우므로 본 발명에서는 이를 용이하게 관리하고자 하는 것이다.
본 발명과 관련된 종래 기술은 대한민국 등록특허 제10-1437678호(2014. 09. 03. 공고)에 게시되어 있는 것이다. 도 1은 상기 종래의 피플 카운팅 기능을 갖는 무인 방범시스템 구성도이다. 상기도 1에서 종래의 피플 카운팅 기능을 갖는 무인 방범시스템은 감지 센서부(220)와, 고객 감지부(230)와, 경보부(240), 무인 방범 단말기(210)와, 중앙 관제서버(250)와, 매장 관리서버(260)를 포함하여 이루어진다. 상기 감지 센서부(220)는 다양한 종류의 감지센서로 이루어질 수 있지만, 대표적으로 도어 감지센서(222), 열선 감지 센서(224), 적외선 감지센서(226) 중 어느 하나 이상으로 이루어질 수 있으며, 매장의 출입구 쪽에 설치됨이 바람직하다. 여기서 도어 감지센서(222)는 창문이나 출입문이 강제로 열릴 경우 이를 감지하는 센서이며, 열선 감지센서(224)는 침입자의 인체열을 감지하는 센서이고, 적외선 감지센서(226)는 인체에 의해 차단되는 적외선 변화을 검출하여 침입자를 감지하는 센서를 의미한다. 고객 감지부(230)는 매장의 각 단위섹터(S1~ S6)에 위치하는 고객을 인식하여 감지신호를 검출하여 무인 방범 단말기(210)에 전송하는 역할을 담당한다. 또한, 고객 감지부(230)는 감지 센서부(220)와 마찬가지로 다양한 종류의 센서로 구성될 수 있지만, 바람직하게는 적외선 감지센서, 열선 감지센서 또는 카메라(232) 중 어느 하나로 구성될 수 있다. 여기서, 적외선 감지센서와 열선 감지센서의 경우 검출되는 감지신호는 적외선 변화에 의한 적외선 감지신호를 의미하며, 카메라(232)의 경우 영상 이미지가 될 수 있는 것이다.
상기와 같이 구성된 종래 기술은 창문 등으로 침입하는 절도범을 감지할 수는 있으나 무인 매징에서 매장 오픈 시간에 출입문을 통하여 들어오고 결제를 하지 않고 상품을 가지고 나가는 절도범에 대하여는 검출할 수 없는 문제점이 있는 것이다. 따라서 본 발명의 목적은 매장 오픈 시간에 출입문으로 입장하고 상품을 취득한 후에 결제 단말기에서 결제하지 아니하고 나가는 절도범을 등록하여 차후에 절도범의 출입시 이를 관리하여 도난을 방지하기 위한 것이다.
상기와 같은 목적을 가진 본 발명 무인 매장용 블랙리스트 등록방법은 컨트롤러가 설정된 시간에 따라 출입문의 록킹을 해제하여 매장을 오픈하도록 제어하는 단계와, 컨트롤러가 도어락 모듈로부터 출입자의 출입으로 생성되는 출입문 오픈 정보를 수신하고 출입자의 출입문 오픈 시간정보를 관제 시스템으로 전송하는 단계와, 카메라가 해당 출입자를 촬영하고 촬영된 출입자 영상 스트림 정보를 관제 시스템으로 전송하는 단계와, 관제 시스템이 출입문 오픈시간정보, 출입자 영상 스트림 정보를 영상 분석 서버로 전송하는 단계와, 영상 분석 서버가 수신된 출입문 오픈 시간 정보 및 출입자 영상 스트림 정보를 기초로 출입문 오픈, 해당 출입자 움직임 및 결제 구역내 해당 출입자 움직임 여부를 판단하여 분석하는 단계와, 결제 구역내 해당 출입자 움직임이 없는 경우, 분석 정보를 관제 시스템으로 전송하는 단계와, 관제 시스템이 분석 정보를 기초로 해당 출입자 움직임 정보를 저장하고 결제 단말기와 연동하여 결제 정보 수신 여부를 판단하는 단계와, 결제 정보 수신이 없는 경우, 관제 시스템이 결제 이상으로 판단하고, 결제 이상 정보를 관리자 점주의 블랙리스트 설정뷰어로 전송하여 팝업창으로 제공하도록하는 단계와, 점주의 블랙리스트 설정뷰어가 결제 이상 이벤트 발생 영상 정보를 관제 시스템에 요청하는 단계와, 관제 시스템이 결제 이상에 해당하는 출입자의 출입문 이벤트 영상 스트림, 해당 출입자 움직임 검출 영상 스트림 및 결제 이상 영상 스트림 정보를 저장하고 저장된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 점주의 블랙리스트 설정뷰어로 전송하는 단계와, 점주의 블랙리스트 설정뷰어가 수신된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴을 판단하는 단계와, 점주의 블랙리스트 설정뷰어가 절도범 얼굴 정보를 영상 분석 서버로 전송하는 단계와, 점주의 블랙리스트 설정뷰어가 관제 시스템에 블랙리스트 영상 백업을 요청하는 단계와, 영상 분석 서버가 수신된 절도범 얼굴 정보에서 특징점을 추출하고 추출된 얼굴 특징점을 저장하는 단계와, 관제 시스템이 요청받은 블랙리스트 영상 백업 정보를 영상 분석 서버로 전송하는 단계와, 영상 분석 서버가 수신된 영상 백업 정보에서 얼굴 정보들을 추출하는 단계와, 영상 분석 서버가 추출된 얼굴 정보들에서 사람별도 ID를 부여하고 얼굴 특징점을 추출하는 단계와, 영상 분석 서버가 추출된 각 사람별 얼굴 특징점과 기저장된 절도범 얼굴 특징점을 비교하여 일치도를 점수로 산정하는 단계와, 영상 분석 서버가 산정된 점수가 기 설정되어 저장된 기준 점수 이상인 경우 블랙리스트로 판단하고 블랙리스트 정보와 해당 블랙리스트로 설정된 ID 정보를 관제시스템으로 전송하는 단계와, 관제 시스템이 실시간으로 해당 블랙리스트 정보와 해당 ID 정보를 팝업창으로 제공하고 점주의 블랙리스트 설정뷰어로 알람 정보를 SMS 또는 Push 메시지 등과 같은 방법으로 전송하는 단계를 포함하여 이루어지는 것을 특징으로 하는 것이다.
상기와 같이 구성된 본 발명 무인 매장용 블랙리스트 등록 방법 및 이를 이용한 블랙 리스트 등록 시스템은 미결제 판단을 시스템적으로 이루어지므로 미결제 시 이상 상황 확인 시간 및 블랙리스트 등록 시간을 단출할 수 있는 효과가 있는 것이다. 또한, 본 발명은 절도범 발견 시 Push 메시지 전달에 따른 신속히 대응할 수 있는 효과가 있는 것이다. 또한, 본 발명은 절도 영상을 자동으로 백업하여 보관하므로 절도 증거를 보존할 수 있는 효과가 있는 것이다.
도 1은 종래의 피플 카운팅 기능을 갖는 무인 방범시스템 구성도,
도 2는 본 발명 무인 매장용 블랙리스트 등록방법 제1실시 예 제어 흐름도,
도 3은 본 발명 무인 매장용 블랙리스트 등록방법 제2실시 예 제어 흐름도,
도 4는 본 발명 무인 매장용 블랙리스트 등록 시스템 제1실시 예 구성도,
도 5는 본 발명 무인 매장용 블랙리스트 등록 시스템 제2실시 예 구성도이다.
상기와 같은 효과를 가지는 본 발명 무인 매장용 블랙리스트 등록 방법 및 이를 이용한 블랙 리스트 등록 시스템을 도 2 내지 도 5를 기초로 하여 설명하면 다음과 같다.
도 2는 본 발명 무인 매장용 블랙리스트 등록방법 제1실시 예 제어 흐름도이다. 상기도 2에서 본 발명 무인 매장용 블랙리스트 등록방법 제1실시 예는 컨트롤러가 설정된 시간에 따라 출입문의 록킹을 해제하여 매장을 오픈하도록 제어하는 단계(S11)와, 컨트롤러가 출입문 모듈로부터 출입자의 출입으로 생성되는 출입문 오픈 정보를 수신하고 출입자의 출입문 오픈 시간정보를 관제 시스템으로 전송하는 단계(S12)와, 카메라가 출입문을 통과하여 입장하는 해당 출입자를 촬영하고 촬영된 출입자 영상 스트림 정보를 관제 시스템으로 전송하는 단계(S13)와, 관제 시스템이 출입문 오픈시간정보, 출입자 영상 스트림 정보를 영상 분석 서버로 전송하는 단계(S14)와, 영상 분석 서버가 수신된 출입문 오픈 시간 정보 및 출입자 영상 스트림 정보를 기초로 출입문 오픈, 해당 출입자 움직임 및 결제 구역내 해당 출입자 움직임 여부를 판단하여 분석하는 단계(S15)와, 결제 구역내 해당 출입자 움직임이 없는 경우, 분석 정보를 관제 시스템으로 전송하는 단계(S16)와, 관제 시스템이 분석 정보를 기초로 해당 출입자 움직임 정보를 저장하고 매장에 설치된 결제 단말기와 연동하여 결제 정보 수신 여부를 판단하는 단계(S17)와, 결제 정보 수신이 없는 경우, 관제 시스템이 결제 이상으로 판단하고, 결제 이상 정보를 관리자 점주의 블랙리스트 설정뷰어로 전송하여 팝업창으로 제공하도록하는 단계(S18)와, 점주의 블랙리스트 설정뷰어가 결제 이상 이벤트 발생 영상 정보를 관제 시스템에 요청하는 단계(S19)와, 관제 시스템이 결제 이상에 해당하는 출입자의 출입문 이벤트 영상 스트림, 해당 출입자 움직임 검출 영상 스트림 및 결제 이상 영상 스트림 정보를 저장하고 저장된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 점주의 블랙리스트 설정뷰어로 전송하는 단계(S20)와, 점주의 블랙리스트 설정뷰어가 수신된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴을 판단하는 단계(S21)와, 점주의 블랙리스트 설정뷰어가 절도범 얼굴 정보를 영상 분석 서버로 전송하는 단계(S22)와, 점주의 블랙리스트 설정뷰어가 관제 시스템에 블랙리스트 영상 백업을 요청하는 단계(S23)와, 영상 분석 서버가 수신된 절도범 얼굴 정보에서 특징점을 추출하고 추출된 얼굴 특징점을 저장하는 단계(S24)와, 관제 시스템이 요청받은 블랙리스트 영상 백업 정보를 영상 분석 서버로 전송하는 단계(S25)와, 영상 분석 서버가 수신된 영상 백업 정보에서 얼굴 정보들을 추출하는 단계(S26)와, 영상 분석 서버가 추출된 얼굴 정보들에서 사람별도 ID를 부여하고 얼굴 특징점을 추출하는 단계(S27)와, 영상 분석 서버가 추출된 각 사람별 얼굴 특징점과 기저장된 절도범 얼굴 특징점을 비교하여 일치도를 점수로 산정하는 단계(S28)와, 영상 분석 서버가 산정된 점수가 기 설정되어 저장된 기준 점수 이상인 경우 블랙리스트로 판단하고 블랙리스트 정보와 해당 블랙리스트로 설정된 ID 정보를 관제시스템으로 전송하는 단계(S29)와, 관제 시스템이 실시간으로 해당 블랙리스트 정보와 해당 ID 정보를 팝업창으로 제공하고 점주의 블랙리스트 설정뷰어로 알람 정보를 SMS 또는 Push 메시지 등과 같은 방법으로 전송하는 단계(S30)를 포함하여 이루어지는 것을 특징으로 하는 것이다. 상기 예는 절도범이 1명인 경우 실시 예이다. 상기에서 출입문 오픈 시간 정보는 출입문에 출입자가 접근하는 경우 이를 센싱하여 출입문을 오픈 출입자가 매장으로 들어오는 시간 정보이며, 매장에 있던 출입자가 매장 밖으로 나가는 경우에는 터치 스위치에 의하여 출입문이 열리도록 하여 매장 내부로 들어오고 매장 밖으로 나가는 것을 구분하도록 하는 것이다. 또한 상기 점주의 블랙리스트 설정뷰어가 수신된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴을 판단하는 단계(S21)는 점주가 블랙리스트 설정뷰어에서 표출된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 기초로 해당 출입자가 절도범인지 여부를 판단하는 것이고 상기 블랙리스트 설정뷰어는 스마트 단말기일 수 있는 것이다.
도 3은 본 발명 무인 매장용 블랙리스트 등록방법 제2실시 예 제어 흐름도이다. 상기도 3에서 본 발명 무인 매장용 블랙리스트 등록방법 제2실시 예는 컨트롤러가 설정된 시간에 따라 출입문의 록킹을 해제하여 매장을 오픈하도록 제어하는 단계(S31)와, 컨트롤러가 출입문 모듈로부터 출입자의 출입으로 생성되는 출입문 오픈 정보를 수신하고 출입자의 출입문 오픈 시간정보를 관제 시스템으로 전송하는 단계(S32)와, 카메라가 출입문을 통과하여 입장하는 해당 출입자를 촬영하고 촬영된 출입자 영상 스트림 정보를 관제 시스템으로 전송하는 단계(S33)와, 관제 시스템이 출입문 오픈시간정보, 출입자 영상 스트림 정보를 영상 분석 서버로 전송하는 단계(S34)와, 영상 분석 서버가 수신된 출입문 오픈 시간 정보 및 출입자 영상 스트림 정보를 기초로 출입문 오픈, 해당 출입자 움직임 및 결제 구역내 해당 출입자 움직임 여부를 판단하여 분석하는 단계(S35)와, 결제 구역내 출입자의 움직임이 없는 경우, 분석 정보를 관제 시스템으로 전송하는 단계(S36)와, 관제 시스템이 분석 정보를 기초로 출입자 움직임 정보를 저장하고 결제 단말기와 연동하여 결제 정보 수신 여부를 판단하는 단계(S37)와, 결제 정보 수신이 없는 경우, 관제 시스템이 결제 이상으로 판단하고, 결제 이상 정보를 관리자 점주의 블랙리스트 설정뷰어로 전송하여 팝업창으로 제공하도록하는 단계(S38)와, 점주의 블랙리스트 설정뷰어가 결제 이상 이벤트 발생 영상 정보를 관제 시스템에 요청하는 단계(S39)와, 관제 시스템이 결제 이상에 해당하는 출입자의 출입문 이벤트 영상 스트림, 해당 출입자 움직임 검출 영상 스트림 및 결제 이상 영상 스트림 정보를 저장하고 저장된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 점주의 블랙리스트 설정뷰어로 전송하는 단계(S40)와, 점주의 블랙리스트 설정뷰어가 수신된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴들을 판단하는 단계(S41)와, 점주의 블랙리스트 설정뷰어가 절도범 얼굴 정보들을 영상 분석 서버로 전송하는 단계(S42)와, 점주의 블랙리스트 설정뷰어가 관제 시스템에 블랙리스트 영상 백업을 요청하는 단계(S43)와, 영상 분석 서버가 수신된 절도범 얼굴들 정보에서 각 얼굴의 특징점을 추출하고 추출된 각 얼굴 의 특징점과 각 얼굴에 부여된 고유 ID를 저장하는 단계(S44)와, 관제 시스템이 요청받은 블랙리스트 영상 백업 정보를 영상 분석 서버로 전송하는 단계(S45)와, 영상 분석 서버가 수신된 영상 백업 정보에서 얼굴 정보들을 추출하는 단계(S46)와, 영상 분석 서버가 추출된 얼굴 정보들에서 사람별도 얼굴 특징점을 추출하는 단계(S47)와, 영상 분석 서버가 추출된 각 사람별 얼굴 특징점과 기저장된 절도범 얼굴 특징점들을 비교하여 일치도를 점수로 각각 산정하는 단계(S48)와, 영상 분석 서버가 산정된 각 점수가 기 설정되어 저장된 기준 점수 이상인 경우 해당 얼굴 정보를 블랙리스트로 판단하고 블랙리스트 정보와 해당 블랙리스트에 매칭하는 ID 정보들을 관제시스템으로 전송하는 단계(S49)와, 관제 시스템이 실시간으로 해당 블랙리스트 정보와 상기 블랙리스트에 매칭하는 각 ID 정보들을 팝업창으로 제공하고 점주의 블랙리스트 설정뷰어로 알람 정보를 SMS 또는 Push 메시지 등과 같은 방법으로 전송하는 단계(S50)를 포함하여 이루어지는 것을 특징으로 하는 것이다. 상기 실시 예는 절도범이 다수인 경우의 예이고, 또한 상기 예는 상기와 같은 프로세스로 블랙리스트 정보를 생성하고 생성된 블랙리스트 정보를 관제 시스템에 저장하고 있다가 카메라가 새롭게 전송하는 실시간 영상정보에서 얼굴 정보를 추출하고 추출된 얼굴 정보와 기저장된 블랙리스트 얼굴 정보를 비교하여 일치하는 경우 가까운 경찰서 서버로 즉시 알람을 제공하게 할 수도 있는 것이다. 또한, 상기 영상 분석 서버가 수신된 절도범 얼굴들 정보에서 각 얼굴의 특징점을 추출하고 추출된 각 얼굴 의 특징점과 각 얼굴에 부여된 고유 ID를 저장하는 단계(S44)는 절도범 얼굴 1은 ID #1, 절도범 얼굴 2는 ID #2 등과 같이 ID를 부여하고 각 ID별로 각 해당 얼굴 특징점을 저장하는 것이다.
도 4는 본 발명 무인 매장용 블랙리스트 등록 시스템 제1실시 예 구성도이다. 상기도 4에서 본 발명 무인 매장용 블랙리스트 등록 시스템 제1실시 예는 컨트롤러로부터 제어 신호를 수신하여 출입문의 록킹을 해제토록 제어하고 출입문에 설치되어 있는 센서에 의하여 생성되는 출입문 오픈 시간 정보를 생성하여 컨트롤러로 전송하는 출입문 모듈(10)과, 설정된 시간, 예를 들어 오전 09시에 록킹 해제 정보를 출입문 모듈로 전송하여 출입문 록킹을 해제하도록 하며, 출입자의 출입으로 생성되는 출입문 오픈 시간 정보를 출입문 모듈로부터 수신하여 관제 시스템으로 전송하는 컨트롤러(20)와, 컨트롤러부로부터 수신된 출입문 오픈시간 정보, 출입자 영상 스트림 정보를 영상 분석 서버로 전송하고, 영상 분석 서버로부터 수신된 분석 정보를 기초로 해당 출입자의 움직임 정보를 저장하며 결제 단말기와 연동하여 결제정보 수신 여부를 판단하고, 일정 시간 동안 결제 정보 수신이 없는 경우 결제 이상으로 판단하고 결제 이상 정보를 점주의 블랙리스트 설정 뷰어로 전송하며, 점주의 블랙리스트 뷰어로부터 블랙리스트 영상 백업을 요청받고 요청받은 블랙리스트 영상 백업 정보를 영상 분석 서버로 전송하고, 영상 분석 서버로부터 블랙리스트 정보와 해당 블랙리스트로 설정된 ID 정보를 수신하고, 수신된 블랙리스트와 해당 ID정보를 팝업창으로 제공하며, 알람정보를 점주의 블랙리스트 설정 뷰어로 전송하는 관제 시스템(30)과, 관제 시스템으로부터 수신된 출입문 오픈시간 정보, 출입자 영상 스트림 정보를 기초로 출입문 오픈 시간, 해당 출입자 움직임 정보 및 해당 출입자의 결제 구역내 움직임 여부를 판단하여 분석하는 것으로 결제 구역 내 출입자 움직임 정보가 없는 경우에는 분석 정보를 관제 시스템으로 전송하고, 점주의 블랙리스트 설정 뷰어로부터 절도범 얼굴 정보를 수신하며, 수신된 절도범 얼굴 정보에서 특징점을 추출하고 추출된 얼굴 특징점을 저장하며, 관제 시스템으로부터 수신된 영상 백업 정보에서 얼굴 정보들을 추출하고 추출된 얼굴 정보 각각에 각 ID를 부여하고 얼굴 특징점을 추출하며 추출된 각 얼굴 특징점과 기저장된 절도범 얼굴 특징점을 비교하여 일치도를 점수로 산정하며 산정된 점수가 기설정되어 저장된 기준 점수 이상인 경우 블랙리스트로 판단하고, 판단된 블랙리스트와 해당 블랙리스트의 ID 정보를 관제 시스템으로 전송하는 영상 분석 서버(40)와, 관제 시스템으로부터 결제 이상 정보를 수신하여 팝업창으로 제공하며, 결제 이상 이벤트 발생 영상 정보를 관제 시스템으로 요청하고 관제 시스템으로부터 해당 출입자의 출입문 이벤트, 출입자의 움직임 및 결제 이상 영상 스트림를 수신하며, 수신된 출입자의 출입문 이벤트, 출입자의 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴을 판단하고, 판단된 절도범 얼굴 정보를 영상 분석 서버로 전송하고, 관제 시스템에 블랙리스트 영상 백업을 요청하고, 관제 시스템으로부터 알람 정보를 수신하여 표출하는 점주의 블랙리스트 설정 뷰어(50)로 구성된 것을 특징으로 하는 것이다.
도 5는 본 발명 무인 매장용 블랙리스트 등록 시스템 제2실시 예 구성도이다. 상기도 5에서 본 발명 무인 매장용 블랙리스트 등록 시스템 제2실시 예는 컨트롤러로부터 제어 신호를 수신하여 출입문의 록킹을 해제토록 제어하고 출입문에 설치되어 있는 센서에 의하여 생성되는 출입문 오픈 시간 정보를 생성하여 컨트롤러로 전송하는 출입문 모듈(10-1)과, 설정된 시간, 예를 들어 오전 09시에 록킹 해제 정보를 출입문 모듈로 전송하여 출입문 록킹을 해제하도록 하며, 출입자의 출입으로 생성되는 출입문 오픈 시간 정보를 출입문 모듈로부터 수신하여 관제 시스템으로 전송하는 컨트롤러(20-1)와, 컨트롤러부로부터 수신된 출입문 오픈시간 정보, 출입자 영상 스트림 정보를 영상 분석 서버로 전송하고, 영상 분석 서버로부터 수신된 분석 정보를 기초로 해당 출입자의 움직임 정보를 저장하며 결제 단말기와 연동하여 결제정보 수신 여부를 판단하고, 일정 시간 동안 결제 정보 수신이 없는 경우 결제 이상으로 판단하고 결제 이상 정보를 점주의 블랙리스트 설정 뷰어로 전송하며, 점주의 블랙리스트 뷰어로부터 블랙리스트 영상 백업을 요청받고 요청받은 블랙리스트 영상 백업 정보를 영상 분석 서버로 전송하고, 영상 분석 서버로부터 블랙리스트 정보와 해당 블랙리스트로 설정된 고유 ID 정보들을 수신하고, 수신된 블랙리스트와 해당 ID정보들을 팝업창으로 제공하며 알람정보를 점주의 블랙리스트 설정 뷰어로 전송하는 관제 시스템(30-1)과, 관제 시스템으로부터 수신된 출입문 오픈시간 정보, 출입자 영상 스트림 정보를 기초로 출입문 오픈 시간, 해당 출입자 움직임 정보 및 해당 출입자의 결제 구역내 움직임 여부를 판단하여 분석하는 것으로 결제 구역 내 출입자 움직임 정보가 없는 경우에는 분석 정보를 관제 시스템으로 전송하고, 점주의 블랙리스트 설정 뷰어로부터 절도범 얼굴 정보들을 수신하며, 수신된 각 절도범 얼굴 정보에서 특징점을 추출하고 추출된 각 얼굴의 특징점을 저장하며, 관제 시스템으로부터 수신된 영상 백업 정보에서 얼굴 정보들을 추출하고 추출된 얼굴 정보 각각에 각 ID(예,ID #1, ID #2, …)를 부여하고 각각의 얼굴 특징점을 추출하며 추출된 각 얼굴의 특징점과 기저장된 각각의 절도범 얼굴 특징점을 비교하여 일치도를 점수로 산정하며 산정된 점수가 기설정되어 저장된 기준 점수 이상인 경우 블랙리스트로 판단하고, 판단된 블랙리스트와 해당 블랙리스트의 고유 ID 정보들을 관제 시스템으로 전송하는 영상 분석 서버(40-1)와, 관제 시스템으로부터 결제 이상 정보를 수신하여 팝업창으로 제공하며, 결제 이상 이벤트 발생 영상 정보를 관제 시스템으로 요청하고 관제 시스템으로부터 해당 출입자의 출입문 이벤트, 출입자의 움직임 및 결제 이상 영상 스트림를 수신하며, 수신된 출입자의 출입문 이벤트, 출입자의 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴들을 판단하고, 판단된 절도범 얼굴 정보들을 영상 분석 서버로 전송하고, 관제 시스템에 블랙리스트 영상 백업을 요청하고, 관제 시스템으로부터 알람 정보를 수신하여 표출하는 점주의 블랙리스트 설정 뷰어(50-1)로 구성된 것을 특징으로 하는 것이다. 상기에서 관제 시스템(30-1)은 영상 분석 서버로부터 블랙리스트 정보와 해당 ID 정보들을 수신하여 저장하고 있다가, 출입문으로 들어오는 새로운 출입자를 촬영한 카메라로부터 실시간으로 수신되는 출입자 영상 정보에서 얼굴 정보를 추출하고 추출된 얼굴 정보와 기저장된 블랙리스트 정보들을 비교하여 일치하거나 비교 결과가 기 설정된 기준 이상인 경우 알람 정보를 인근 경찰서 서버로 전송하는 것을 더 포함하여 구성할 수도 있는 것이다. 상기 실시 예 2는 절도범이 다수인 경우에 적용할 수 있는 것이다.
10, 10-1 : 출입문 모듈, 20, 20-1 : 컨트롤러,
30, 30-1 : 관제시스템, 40, 40-1 : 영상 분석 서버,
50, 50-1 : 점주의 블랙리스트 설정 뷰어

Claims (13)

  1. 편의점 또는 슈퍼의 무인 매장에서 상품을 취득하고 결제하지 않고 매장을 나가는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법 에 있어서,
    상기 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법은,
    컨트롤러가 설정된 시간에 따라 출입문의 록킹을 해제하여 매장을 오픈하도록 제어하는 단계(S11)와;
    컨트롤러가 출입문 모듈로부터 출입자의 출입으로 생성되는 출입문 오픈 정보를 수신하고 출입자의 출입문 오픈 시간정보를 관제 시스템으로 전송하는 단계(S12)와;
    카메라가 출입문을 통과하여 입장하는 해당 출입자를 촬영하고 촬영된 출입자 영상 스트림 정보를 관제 시스템으로 전송하는 단계(S13)와;
    관제 시스템이 출입문 오픈시간정보, 출입자 영상 스트림 정보를 영상 분석 서버로 전송하는 단계(S14)와;
    영상 분석 서버가 수신된 출입문 오픈 시간 정보 및 출입자 영상 스트림 정보를 기초로 출입문 오픈, 해당 출입자 움직임 및 결제 구역내 해당 출입자 움직임 여부를 판단하여 분석하는 단계(S15)와;
    결제 구역내 해당 출입자 움직임이 없는 경우, 영상 분석 서버가 분석 정보를 관제 시스템으로 전송하는 단계(S16)와;
    관제 시스템이 분석 정보를 기초로 해당 출입자 움직임 정보를 저장하고 결제 단말기와 연동하여 결제 정보 수신 여부를 판단하는 단계(S17)와;
    결제 정보 수신이 없는 경우, 관제 시스템이 결제 이상으로 판단하고, 결제 이상 정보를 관리자 점주의 블랙리스트 설정뷰어로 전송하여 팝업창으로 제공하도록하는 단계(S18)와;
    점주의 블랙리스트 설정뷰어가 결제 이상 이벤트 발생 영상 정보를 관제 시스템에 요청하는 단계(S19)와;
    관제 시스템이 결제 이상에 해당하는 출입자의 출입문 이벤트 영상 스트림, 해당 출입자 움직임 검출 영상 스트림 및 결제 이상 영상 스트림 정보를 저장하고 저장된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 점주의 블랙리스트 설정뷰어로 전송하는 단계(S20)와;
    점주의 블랙리스트 설정뷰어가 수신된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴을 판단하는 단계(S21)와;
    점주의 블랙리스트 설정뷰어가 절도범 얼굴 정보를 추출하여 영상 분석 서버로 전송하는 단계(S22)와;
    점주의 블랙리스트 설정뷰어가 관제 시스템에 블랙리스트 영상 백업을 요청하는 단계(S23)와;
    영상 분석 서버가 수신된 절도범 얼굴 정보에서 특징점을 추출하고 추출된 얼굴 특징점을 저장하는 단계(S24)와;
    관제 시스템이 요청받은 블랙리스트 영상 백업 정보를 영상 분석 서버로 전송하는 단계(S25)와;
    영상 분석 서버가 수신된 영상 백업 정보에서 얼굴 정보들을 추출하는 단계(S26)와;
    영상 분석 서버가 추출된 얼굴 정보들에서 사람별도 ID를 부여하고 얼굴 특징점을 추출하는 단계(S27)와;
    영상 분석 서버가 추출된 각 사람별 얼굴 특징점과 기저장된 절도범 얼굴 특징점을 비교하여 일치도를 점수로 산정하는 단계(S28)와;
    영상 분석 서버가 산정된 점수가 기 설정되어 저장된 기준 점수 이상인 경우 블랙리스트로 판단하고 블랙리스트 정보를 관제시스템으로 전송하는 단계(S29)와;
    관제 시스템이 실시간으로 해당 블랙리스트 정보를 팝업창으로 제공하는 단계(S30)를 포함하여 이루어지는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법.
  2. 제1항에 있어서
    상기 관제 시스템이 실시간으로 해당 블랙리스트 정보와 해당 ID 정보를 팝업창으로 제공하는 단계(S30)는,
    점주의 블랙리스트 설정뷰어로 알람 정보를 SMS 또는 Push 메시지 등과 같은 방법으로 전송하는 것을 더 포함하여 이루어지는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법.
  3. 제1항에 있어서,
    상기 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법은,
    관제시스템이 블랙리스트 정보를 저장하고 있다가 카메라가 새롭게 전송하는 실시간 영상정보에서 얼굴 정보를 추출하고 추출된 얼굴 정보와 기저장된 블랙리스트 얼굴 정보를 비교하여 일치하는 경우 가까운 경찰서 서버로 즉시 알람을 제공하는 것을 더 포함하여 이루어지는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법.
  4. 제1항에 있어서,
    상기 점주의 블랙리스트 설정뷰어는,
    점주의 스마트 단말기일 수 있는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법.
  5. 편의점 또는 슈퍼의 무인 매장에서 상품을 취득하고 결제하지 않고 매장을 나가는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법 에 있어서,
    상기 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법은,
    컨트롤러가 설정된 시간에 따라 출입문의 록킹을 해제하여 매장을 오픈하도록 제어하는 단계(S31)와;
    컨트롤러가 출입문 모듈로부터 출입자의 출입으로 생성되는 출입문 오픈 정보를 수신하고 출입자의 출입문 오픈 시간정보를 관제 시스템으로 전송하는 단계(S32)와;
    카메라가 출입문을 통과하여 입장하는 해당 출입자를 촬영하고 촬영된 출입자 영상 스트림 정보를 관제 시스템으로 전송하는 단계(S33)와;
    관제 시스템이 출입문 오픈시간정보, 출입자 영상 스트림 정보를 영상 분석 서버로 전송하는 단계(S34)와;
    영상 분석 서버가 수신된 출입문 오픈 시간 정보 및 출입자 영상 스트림 정보를 기초로 출입문 오픈, 해당 출입자 움직임 및 결제 구역내 해당 출입자 움직임 여부를 판단하여 분석하는 단계(S35)와;
    결제 구역내 출입자의 움직임이 없는 경우, 영상 분석 서버가 분석 정보를 관제 시스템으로 전송하는 단계(S36)와;
    관제 시스템이 분석 정보를 기초로 출입자 움직임 정보를 저장하고 매장 내 결제 단말기와 연동하여 결제 정보 수신 여부를 판단하는 단계(S37)와;
    결제 정보 수신이 없는 경우, 관제 시스템이 결제 이상으로 판단하고, 결제 이상 정보를 관리자 점주의 블랙리스트 설정뷰어로 전송하여 팝업창으로 제공하도록하는 단계(S38)와;
    점주의 블랙리스트 설정뷰어가 결제 이상 이벤트 발생 영상 정보를 관제 시스템에 요청하는 단계(S39)와;
    관제 시스템이 결제 이상에 해당하는 출입자의 출입문 이벤트 영상 스트림, 해당 출입자 움직임 검출 영상 스트림 및 결제 이상 영상 스트림 정보를 저장하고 저장된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 점주의 블랙리스트 설정뷰어로 전송하는 단계(S40)와;
    점주의 블랙리스트 설정뷰어가 수신된 해당 출입자의 출입문 이벤트, 출입자 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴들을 판단하는 단계(S41)와;
    점주의 블랙리스트 설정뷰어가 절도범 얼굴 정보들을 영상 분석 서버로 전송하는 단계(S42)와;
    점주의 블랙리스트 설정뷰어가 관제 시스템에 블랙리스트 영상 백업을 요청하는 단계(S43)와;
    영상 분석 서버가 수신된 절도범 얼굴들 정보에서 각 얼굴의 특징점을 추출하고 추출된 각 얼굴의 특징점과 각 얼굴에 부여된 고유 ID를 저장하는 단계(S44)와;
    관제 시스템이 요청받은 블랙리스트 영상 백업 정보를 영상 분석 서버로 전송하는 단계(S45)와;
    영상 분석 서버가 수신된 영상 백업 정보에서 얼굴 정보들을 추출하는 단계(S46)와;
    영상 분석 서버가 추출된 얼굴 정보들에서 사람별도 얼굴 특징점을 추출하는 단계(S47)와;
    영상 분석 서버가 추출된 각 사람별 얼굴 특징점과 기저장된 절도범 얼굴 특징점들을 비교하여 일치도를 점수로 각각 산정하는 단계(S48)와;
    영상 분석 서버가 산정된 각 점수가 기 설정되어 저장된 기준 점수 이상인 경우 해당 얼굴 정보를 블랙리스트로 판단하고 블랙리스트 정보와 해당 블랙리스트에 매칭하는 ID 정보들을 관제시스템으로 전송하는 단계(S49);
    및 관제 시스템이 실시간으로 해당 블랙리스트 정보와 상기 블랙리스트에 매칭하는 각 ID 정보들을 팝업창으로 제공하는 단계(S50)를 포함하여 이루어지는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법.
  6. 제5항에 있어서,
    상기 관제 시스템이 실시간으로 해당 블랙리스트 정보와 상기 블랙리스트에 매칭하는 각 ID 정보들을 팝업창으로 제공하는 단계(S50)는,
    점주의 블랙리스트 설정뷰어로 알람 정보를 SMS 또는 Push 메시지 등과 같은 방법으로 전송하는 것을 더 포함하여 이루어지는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법.
  7. 제5항에 있어서,
    상기 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법은,
    관제시스템이 블랙리스트 정보를 저장하고 있다가 카메라가 새롭게 전송하는 실시간 영상정보에서 얼굴 정보를 추출하고 추출된 얼굴 정보와 기저장된 블랙리스트 얼굴 정보를 비교하여 일치하는 경우 가까운 경찰서 서버로 즉시 알람을 제공하는 것을 더 포함하여 이루어지는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법.
  8. 제5항에 있어서,
    상기 점주의 블랙리스트 설정뷰어는,
    점주의 스마트 단말기일 수 있는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록방법.
  9. 편의점 또는 슈퍼의 무인 매장에서 상품을 취득하고 결제하지 않고 매장을 나가는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록 시스템에 있어서,
    상기 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록 시스템은,
    컨트롤러로부터 제어 신호를 수신하여 출입문의 록킹을 해제토록 제어하고 출입문에 설치되어 있는 센서에 의하여 생성되는 출입문 오픈 시간 정보를 생성하여 컨트롤러로 전송하는 출입문 모듈(10)과;
    설정된 시간에 록킹 해제 정보를 출입문 모듈로 전송하여 출입문 록킹을 해제하도록 하며, 출입자의 출입으로 생성되는 출입문 오픈 시간 정보를 출입문 모듈로부터 수신하여 관제 시스템으로 전송하는 컨트롤러(20)와;
    컨트롤러부로부터 수신된 출입문 오픈시간 정보, 출입자 영상 스트림 정보를 영상 분석 서버로 전송하고, 영상 분석 서버로부터 수신된 분석 정보를 기초로 해당 출입자의 움직임 정보를 저장하며 결제 단말기와 연동하여 결제정보 수신 여부를 판단하고, 일정 시간 동안 결제 정보 수신이 없는 경우 결제 이상으로 판단하고 결제 이상 정보를 점주의 블랙리스트 설정 뷰어로 전송하며, 점주의 블랙리스트 뷰어로부터 블랙리스트 영상 백업을 요청받고 요청받은 블랙리스트 영상 백업 정보를 영상 분석 서버로 전송하고, 영상 분석 서버로부터 블랙리스트 정보를 수신하고, 수신된 블랙리스트를 팝업창으로 제공하는 관제 시스템(30)과;
    관제 시스템으로부터 수신된 출입문 오픈시간 정보, 출입자 영상 스트림 정보를 기초로 출입문 오픈 시간, 해당 출입자 움직임 정보 및 해당 출입자의 결제 구역내 움직임 여부를 판단하여 분석하는 것으로 결제 구역 내 출입자 움직임 정보가 없는 경우에는 분석 정보를 관제 시스템으로 전송하고, 점주의 블랙리스트 설정 뷰어로부터 절도범 얼굴 정보를 수신하며, 수신된 절도범 얼굴 정보에서 특징점을 추출하고 추출된 얼굴 특징점을 저장하며, 관제 시스템으로부터 수신된 영상 백업 정보에서 얼굴 정보들을 추출하고 추출된 얼굴 정보 각각에 각 ID를 부여하고 얼굴 특징점을 추출하며 추출된 각 얼굴 특징점과 기저장된 절도범 얼굴 특징점을 비교하여 일치도를 점수로 산정하며 산정된 점수가 기설정되어 저장된 기준 점수 이상인 경우 블랙리스트로 판단하고, 판단된 블랙리스트를 관제 시스템으로 전송하는 영상 분석 서버(40);
    및 관제 시스템으로부터 결제 이상 정보를 수신하여 팝업창으로 제공하며, 결제 이상 이벤트 발생 영상 정보를 관제 시스템으로 요청하고 관제 시스템으로부터 해당 출입자의 출입문 이벤트, 출입자의 움직임 및 결제 이상 영상 스트림를 수신하며, 수신된 출입자의 출입문 이벤트, 출입자의 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴을 판단하고, 판단된 절도범 얼굴 정보를 영상 분석 서버로 전송하고, 관제 시스템에 블랙리스트 영상 백업을 요청하고, 관제 시스템으로부터 알람 정보를 수신하여 표출하는 점주의 블랙리스트 설정 뷰어(50)로 구성된 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록 시스템.
  10. 제9항에 있어서,
    상기 관제 시스템은,
    점주의 블랙리스트 설정뷰어로 알람 정보를 SMS 또는 Push 메시지를 전송하는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록 시스템.
  11. 제9항에 있어서,
    상기 관제시스템은,
    블랙리스트 정보를 저장하고 있다가 카메라가 새롭게 전송하는 실시간 영상정보에서 얼굴 정보를 추출하고 추출된 얼굴 정보와 기저장된 블랙리스트 얼굴 정보를 비교하여 일치하는 경우 가까운 경찰서 서버로 즉시 알람을 제공하는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록 시스템.
  12. 편의점 또는 슈퍼의 무인 매장에서 상품을 취득하고 결제하지 않고 매장을 나가는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록 시스템에 있어서,
    상기 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록 시스템은,
    컨트롤러로부터 제어 신호를 수신하여 출입문의 록킹을 해제토록 제어하고 출입문에 설치되어 있는 센서에 의하여 생성되는 출입문 오픈 시간 정보를 생성하여 컨트롤러로 전송하는 출입문 모듈(10-1)과;
    설정된 시간에 록킹 해제 정보를 출입문 모듈로 전송하여 출입문 록킹을 해제하도록 하며, 출입자의 출입으로 생성되는 출입문 오픈 시간 정보를 출입문 모듈로부터 수신하여 관제 시스템으로 전송하는 컨트롤러(20-1)와;
    컨트롤러부로부터 수신된 출입문 오픈시간 정보, 출입자 영상 스트림 정보를 영상 분석 서버로 전송하고, 영상 분석 서버로부터 수신된 분석 정보를 기초로 해당 출입자의 움직임 정보를 저장하며 결제 단말기와 연동하여 결제정보 수신 여부를 판단하고, 일정 시간 동안 결제 정보 수신이 없는 경우 결제 이상으로 판단하고 결제 이상 정보를 점주의 블랙리스트 설정 뷰어로 전송하며, 점주의 블랙리스트 뷰어로부터 블랙리스트 영상 백업을 요청받고 요청받은 블랙리스트 영상 백업 정보를 영상 분석 서버로 전송하고, 영상 분석 서버로부터 블랙리스트 정보와 해당 블랙리스트로 설정된 고유 ID 정보들을 수신하고, 수신된 블랙리스트와 해당 ID정보들을 팝업창으로 제공하며 알람정보를 점주의 블랙리스트 설정 뷰어로 전송하는 관제 시스템(30-1)과;
    관제 시스템으로부터 수신된 출입문 오픈시간 정보, 출입자 영상 스트림 정보를 기초로 출입문 오픈 시간, 해당 출입자 움직임 정보 및 해당 출입자의 결제 구역내 움직임 여부를 판단하여 분석하는 것으로 결제 구역 내 출입자 움직임 정보가 없는 경우에는 분석 정보를 관제 시스템으로 전송하고, 점주의 블랙리스트 설정 뷰어로부터 절도범 얼굴 정보들을 수신하며, 수신된 각 절도범 얼굴 정보에서 특징점을 추출하고 추출된 각 얼굴의 특징점을 저장하며, 관제 시스템으로부터 수신된 영상 백업 정보에서 얼굴 정보들을 추출하고 추출된 얼굴 정보 각각에 각 ID를 부여하고 각각의 얼굴 특징점을 추출하며 추출된 각 얼굴의 특징점과 기저장된 각각의 절도범 얼굴 특징점을 비교하여 일치도를 점수로 산정하며 산정된 점수가 기설정되어 저장된 기준 점수 이상인 경우 블랙리스트로 판단하고, 판단된 블랙리스트와 해당 블랙리스트의 고유 ID 정보들을 관제 시스템으로 전송하는 영상 분석 서버(40-1);
    및 관제 시스템으로부터 결제 이상 정보를 수신하여 팝업창으로 제공하며, 결제 이상 이벤트 발생 영상 정보를 관제 시스템으로 요청하고 관제 시스템으로부터 해당 출입자의 출입문 이벤트, 출입자의 움직임 및 결제 이상 영상 스트림를 수신하며, 수신된 출입자의 출입문 이벤트, 출입자의 움직임 및 결제 이상 영상 스트림을 기초로 절도범 얼굴들을 판단하고, 판단된 절도범 얼굴 정보들을 영상 분석 서버로 전송하고, 관제 시스템에 블랙리스트 영상 백업을 요청하고, 관제 시스템으로부터 알람 정보를 수신하여 표출하는 점주의 블랙리스트 설정 뷰어(50-1)로 구성된 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록 시스템.
  13. 제12항에 있어서,
    상기 관제시스템은,
    블랙리스트 정보를 저장하고 있다가 카메라가 새롭게 전송하는 실시간 영상정보에서 얼굴 정보를 추출하고 추출된 얼굴 정보와 기저장된 블랙리스트 얼굴 정보를 비교하여 일치하는 경우 가까운 경찰서 서버로 즉시 알람을 제공하는 것을 특징으로 하는 상품 절도범을 등록하여 관리하기 위한 무인 매장용 블랙리스트 등록 시스템.
KR1020200174570A 2020-12-14 2020-12-14 무인 매장용 블랙리스트 등록 방법 및 이를 이용한 블랙 리스트 등록 시스템 KR102566007B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200174570A KR102566007B1 (ko) 2020-12-14 2020-12-14 무인 매장용 블랙리스트 등록 방법 및 이를 이용한 블랙 리스트 등록 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200174570A KR102566007B1 (ko) 2020-12-14 2020-12-14 무인 매장용 블랙리스트 등록 방법 및 이를 이용한 블랙 리스트 등록 시스템

Publications (2)

Publication Number Publication Date
KR20220084762A KR20220084762A (ko) 2022-06-21
KR102566007B1 true KR102566007B1 (ko) 2023-08-09

Family

ID=82221322

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200174570A KR102566007B1 (ko) 2020-12-14 2020-12-14 무인 매장용 블랙리스트 등록 방법 및 이를 이용한 블랙 리스트 등록 시스템

Country Status (1)

Country Link
KR (1) KR102566007B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101818066B1 (ko) 2017-09-21 2018-01-12 강해일 재난경보 및 재난훈련 기능을 구비한 엘이디 조명등 시스템
KR102519077B1 (ko) 2022-07-11 2023-04-05 주식회사 에이치앤티 전방위 광고 및 비상벨 알림 기능을 갖는 폴대형 cctv 전광판장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101818066B1 (ko) 2017-09-21 2018-01-12 강해일 재난경보 및 재난훈련 기능을 구비한 엘이디 조명등 시스템
KR102519077B1 (ko) 2022-07-11 2023-04-05 주식회사 에이치앤티 전방위 광고 및 비상벨 알림 기능을 갖는 폴대형 cctv 전광판장치

Also Published As

Publication number Publication date
KR20220084762A (ko) 2022-06-21

Similar Documents

Publication Publication Date Title
CN108053204B (zh) 自动结算方法及售卖设备
KR102061423B1 (ko) 무인 편의점 모니터링 시스템
EP1346327B1 (en) Apparatus and method for resolution of entry/exit conflicts for security monitoring systems
US11928694B2 (en) System providing self-service access to locked merchandise
US20080018738A1 (en) Video analytics for retail business process monitoring
JP2009009231A (ja) セキュリティ管理システムおよびセキュリティ管理方法
CN106164994A (zh) 数字损失/事故防御系统、方法和程序
WO2008039401A2 (en) Video analytics for banking business process monitoring
KR20210141234A (ko) 무인판매 시스템
KR20200092608A (ko) 공동현관 및 지하 주차장 출입문의 출입 인증 시스템 및 이를 이용한 출입 인증 방법
KR101492799B1 (ko) 감시영역 입퇴실자 추적을 통한 출입 통제 기능을 가지는 출입 통제 통합 영상 저장 시스템 및 그 방법
JP4617286B2 (ja) 不正通過者検出装置及びこれを利用した不正通過者録画システム
KR102566007B1 (ko) 무인 매장용 블랙리스트 등록 방법 및 이를 이용한 블랙 리스트 등록 시스템
KR20140119368A (ko) 매장 관리 및 출입 통제 시스템
KR20200018990A (ko) 사무실에서의 얼굴 인증을 통한 입실과 퇴실 관리 시스템 및 이를 이용한 입실과 퇴실 관리방법
Gavaskar et al. A novel design and implementation of IoT based real-time ATM surveillance and security system
KR20190072323A (ko) 영상 감시 시스템 및 영상 감시방법
JP6044911B1 (ja) 入退室管理システム
JP5529593B2 (ja) 画像監視装置
KR20200041513A (ko) 임대주택의 불법전대 모니터링시스템 및 방법
JP2002236986A (ja) 警備システム
JP5649862B2 (ja) 画像監視装置
KR100974944B1 (ko) 공동주택 보안 시스템 및 그것의 서비스방법
KR20220152887A (ko) 보스메인중앙서버에 의한 무인매장관리시스템
KR102049244B1 (ko) 안면인식을 이용한 회원관리 및 방문객 모니터링 장치 및 방법

Legal Events

Date Code Title Description
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant