KR102107533B1 - Pos 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템 - Google Patents

Pos 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템 Download PDF

Info

Publication number
KR102107533B1
KR102107533B1 KR1020160039208A KR20160039208A KR102107533B1 KR 102107533 B1 KR102107533 B1 KR 102107533B1 KR 1020160039208 A KR1020160039208 A KR 1020160039208A KR 20160039208 A KR20160039208 A KR 20160039208A KR 102107533 B1 KR102107533 B1 KR 102107533B1
Authority
KR
South Korea
Prior art keywords
pos
information
transaction
image
money
Prior art date
Application number
KR1020160039208A
Other languages
English (en)
Other versions
KR20170112315A (ko
Inventor
마송훈
김인호
한재웅
Original Assignee
제이씨스퀘어주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 제이씨스퀘어주식회사 filed Critical 제이씨스퀘어주식회사
Priority to KR1020160039208A priority Critical patent/KR102107533B1/ko
Priority to PCT/KR2016/015528 priority patent/WO2017142191A1/ko
Publication of KR20170112315A publication Critical patent/KR20170112315A/ko
Application granted granted Critical
Publication of KR102107533B1 publication Critical patent/KR102107533B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N5/232—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Accounting & Taxation (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Resources & Organizations (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Finance (AREA)
  • Alarm Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Cash Registers Or Receiving Machines (AREA)

Abstract

본 발명은 각 매장에 설치된 POS 단말과 POS 단말의 주위를 촬영하는 카메라를 연동하여 POS 단말과 연결된 POS 금전통의 상태를 모니터링하고, 모니터링 결과 POS 금전통이 열린 것으로 확인되면 즉시 관리자에게 알리거나, POS 단말에서 발생된 거래내역정보를 조회하여 POS 금전통의 열림이 정상 거래에 의한 것인지 여부를 판단한 후 정상 거래에 의한 것이 아닌 경우에 해당 관리자에게 알림으로써 매장 직원들의 부정 행위 또는 비상 상황 발생을 원격에서 감시하는 POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템을 제공한다.

Description

POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템{SYSTEM FOR MORNITORING CASH DRAWER OF STORE USING POS TERMINAL AND CAMERA IN STORE}
본 발명은 각 매장에 설치된 POS 단말과 카메라를 연동하여 매장의 금전통의 상태를 모니터링하는 POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템 에 관한 것이다.
일반적으로, 쇼핑 센터나 대형 매장에서는 상품이 너무 많이 보관되어 관리상의 어려움으로 발생하는 재고손실, 상품의 재고가 없어서 팔지 못하여 발생하는 기회손실, 고객의 부정이나 매장 직원의 부정에 의해 매장에서 생기는 상품분실손실, 계산대 직원의 계산 실수나 부정에 의해 발생하는 결제손실 등에 의해 매출 손실이 발생하고 있다.
이중 재고손실이나 기회손실은 각 매장에 포스(POS) 단말을 이용하여 상품 관리 및 고객 관리를 전산화하는 시스템 도입으로 해소하였고, 상품분실손실은 매장 내 상품진열대 인근에 감시카메라를 설치함으로써 해소하고자 하고 있다.
그런데, 계산대 직원이 POS 단말에 고객이 구입한 상품코드(제조업체코드, 품목코드 등)을 입력하지 않고 대금을 가로채거나, 카드 결제를 취소하는 과정에서 해당 취소 금액의 현금을 계산대 직원이 인출하여 가로채거나, 또는 상품을 친한 고객에게 공짜로 주는 등 계산대에서 발생되는 결제손실에 대해서는 차단할 방법이 아직 없다는 문제점이 있다.
따라서, 본 출원인은 상기와 같은 문제점을 해결하기 위하여 본 발명을 제안하게 되었으며, 이와 관련된 선행기술문헌으로는 대한민국 공개특허 제10-2002-0015681호(발명의 명칭: POS 데이터를 이용한 디지털영상감시 시스템 및 방법, 공개일: 2003.09.26.)가 있다.
본 발명은 각 매장에 설치된 POS 단말과 POS 단말의 주위를 촬영하는 카메라를 연동하여 POS 단말과 연결된 POS 금전통의 상태를 모니터링함으로써 POS 금전통이 열린 것으로 확인되면 즉시 관리자에게 알리는, POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템을 제공하는 데 그 목적이 있다.
특히, 본 발명은 촬영 영상 분석을 통해 POS 금전통이 열린 것으로 확인되면 POS 단말에서 발생된 거래내역정보 또는 음성 정보에 기초하여 부정 거래 여부를 판단함으로써 매장 직원들의 부정 행위나 도난 여부를 원격에서 감시하고 신속한 조치가 가능하도록 하는 데 궁극적인 목적이 있다.
상기한 과제를 달성하기 위한 본 발명의 POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템은, 매장에 설치된 POS 단말의 주위를 촬영하는 카메라로부터 촬영 영상을 수집하고 상기 촬영 영상을 시간 정보와 매칭하여 저장하는 영상 처리 서버; 및 상기 POS 단말에서 발생하는 상품 판매에 대한 결제를 처리하는 POS 서버로부터 상기 상품 판매에 수반되는 거래내역정보를 전달받는 서비스 제공 서버;를 포함하고, 상기 영상 처리 서버는, 상기 촬영 영상을 미리 설정된 기준영상과 비교 분석하여 상기 POS 단말과 연결된 POS 금전통의 상태를 모니터링하는 것을 특징으로 한다.
상기 영상 처리 서버는, 상기 촬영 영상에서 상기 POS 금전통을 포함한 일정 영역을 추출한 후 상기 일정 영역에 대해 상기 기준 영상과 비교 분석하여 상기 POS 금전통의 상태를 모니터링한다.
상기 영상 처리 서버는, 상기 모니터링 결과 상기 POS 금전통이 열림 것으로 확인되면 해당 촬영 영상에 대응되는 인덱스 정보를 상기 서비스 제공 서버로 전송할 수 있다.
상기 서비스 제공 서버는, 상기 인덱스 정보를 수신하면 상기 POS 서버로부터 전달받은 거래내역정보에 기초하여 상기 POS 금전통의 열림이 정상 거래에 의한 것인지 여부를 판단하고, 상기 정상 거래에 의한 것이 아닌 비정상 거래에 의한 것인 경우 해당 관리자 단말에 알릴 수 있다.
이때, 상기 서비스 제공 서버는, 상기 POS 서버로부터 전달받은 거래내역정보로부터 상기 인덱스 정보에 포함된 POS 금전통의 열림발생시간에 대응되는 거래내역정보가 없거나 상기 거래내역정보가 있더라도 카드 거래인 경우 상기 POS 금전통의 열림이 상기 비정상 거래에 의한 것이라고 판단할 수 있다.
또한, 본 발명의 POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템은, 상기 관리자 단말에 설치되고 상기 서비스 제공 서버로부터 상기 POS 금전통의 열림이 비정상 거래에 의한 것이라는 알림을 수신하여 상기 관리자 단말의 화면에 표시하며, 상기 알림으로부터 받은 상기 POS 금전통의 열림발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 해당 영상 정보를 요청하고 요청한 영상 정보를 전달받은 서비스 어플리케이션;을 더 포함할 수 있다.
이때, 상기 영상 처리 서버는, 상기 서비스 어플리케이션으로부터 상기 영상 정보의 요청이 있으면, 상기 저장된 촬영 영상에 대하여 상기 시간 정보를 근거로 상기 POS 금전통의 열림발생시간에 대응되는 영상 정보를 캡쳐하고, 캡쳐한 영상 정보를 상기 서비스 어플리케이션을 통해 상기 관리자 단말로 전송한다.
또한, 상기 영상 처리 서버는, 상기 저장된 촬영 영상에 대하여 상기 POS 금전통의 열림발생시간을 기준으로 상기 열림발생시간보다 일정시간 앞선 시간으로부터 미리 설정된 주기 동안의 영상 정보를 캡쳐한다.
또한, 상기 영상 처리 서버는, 상기 POS 단말 인근에 설치되어 음성 신호를 입력받는 마이크로부터 음성 정보를 수집하고 상기 음성 정보를 시간 정보와 매칭하여 저장하며, 음성 알고리즘을 통해 상기 음성 정보에 기 설정된 단어 또는 문장이 포함되어 있는지 여부를 분석할 수 있다.
상기 분석 결과 상기 음성 정보에 기 설정된 단어 또는 문장이 포함되어 있으면, 상기 영상 처리 서버는, 해당 음성정보 또는 상기 음성정보와 대응되는 인덱스 정보를 상기 서비스 제공 서버 또는 해당 관리자 단말에 전송하여 알릴 수 있다.
본 발명에 따르면, 각 매장 내 설치된 POS 금전통의 주변을 촬영하고 촬영된 영상 분석을 통해 POS 금전통이 열린 것으로 확인되면 즉시 관리자에게 알림으로써 원격에서 실시간 모니터링이 가능한 효과가 있다.
특히, 본 발명은 영상 분석을 통해 POS 금전통이 열린 것으로 확인되면 POS 단말에서 발생된 거래내역정보를 조회하여 POS 금전통의 열림이 정상 거래에 의한 것인지 판단하고, 정상 거래에 의한 것이 아닌 경우 즉시 관리자에게 알림으로써 원격에서 매장 직원들의 부정 행위 또는 도난 여부를 실시간 확인할 수 있고 신속한 조치가 가능한 효과가 있다.
또한, 본 발명은 매장 내 POS 금전통의 인근에 설치된 마이크로부터 음성 정보를 수집하여 비상 상황을 음성 신호로 실시간 감시함으로써 신속한 대처가 가능하도록 하는 효과가 있다.
도 1은 본 발명의 실시예에 따른 매장의 금전통 모니터링 시스템을 나타낸 구성도이다.
도 2는 본 발명의 실시예에 따른 모니터링 시스템에 적용되는 영상 처리 서버의 구성을 나타낸 도면이다.
도 3은 본 발명의 실시예에 따른 매장의 금전통 모니터링 방법을 설명하기 위한 전체 흐름도이다.
도 4는 본 발명의 실시예에 따른 매장의 금전통 모니터링 방법에서 부정 거래를 판단하는 방법을 설명하기 위한 흐름도이다.
본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다.
또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서 상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예를 상세하게 설명한다.
먼저 도 1을 참조하면, 도 1은 본 발명의 실시예에 따른 매장의 금전통 모니터링 시스템(이하, 모니터링 시스템이라 칭함)을 나타낸 구성도이다.
본 발명의 실시예에 따른 모니터링 시스템은 각 매장의 계산대에 구비되는 POS 단말(10)과 POS 금전통(20), 카메라(30), 마이크(40), 영상 처리 서버(NVR; 100), 서비스 제공 서버(200), POS 서버(300), 서비스 애플리케이션(400)을 포함한다.
POS 단말(10)은 상품 판매 시점에서 상품 정보나 고객 정보를 수집, 기억, 전송하는 장치로서, 최근 결제 수단과 결합하여 판매 시점의 상품명이나 가격 등의 거래내역정보를 POS 서버(100)로 전달하여 수집 및 기록한다.
POS 단말(10)은 각 매장에 설치되거나 휴대 가능한 소형 단말기 형태로 계산대에 마련될 수 있다.
일반적으로 POS 단말(10)은 상품에 찍힌 바코드를 인식하는 리더기와, 바코드 또는 상품의 가격 등 필요한 숫자 등을 입력하기 위한 입력키, 리더기와 입력키에서 입력받은 정보들을 직원이 확인할 수 있도록 출력하는 포스모니터, 영수증 등을 인쇄하는 프린트 등으로 구성된다.
POS 금전통(20)은 금전을 보관하며, POS 단말(10)과 연결되어 상품 판매에 대한 결제 시 차액에 대한 금전을 지급하기 위해 POS 단말(10)의 조작에 의해 개폐될 수 있다. 예를 들어, POS 단말(10)에 POS 금전통(20)의 개폐와 관련된 버튼이 구비되고 버튼이 선택되면 POS 금전통(20)이 자동 열릴 수 있다. 통상 POS 금전통(20)은 금전통 자체에 잠금장치가 구비되어 있어 이의 조작에 따라 개폐된다.
카메라(20)는 POS 단말(10)과 연결된 POS 금전통(20) 및 이를 조작하는 직원을 감시하기 위한 것으로, POS 단말(10)의 주위를 촬영하고 촬영된 영상(이하 촬영 영상)을 영상 처리 서버(100)로 전달한다.
본 실시예에 따른 카메라(20)는 POS 단말(10)과 1:1 로 설치될 수 있으며, 촬영 영상을 영상 처리 서버(100)로 전달할 때 카메라(20)의 관리번호도 함께 전달할 수 있다. 카메라(20)의 관리번호는 IP(Internet Protocol) 주소가 될 수 있다.
POS 서버(300)는 각 매장의 POS 단말(10)에서 발생하는 상품 판매에 대한 결제를 처리한다.
특히, POS 서버(300)는 POS 단말(10)로부터 상품 판매에 수반하는 거래내역정보를 수신하여 저장하고, 저장된 거래내역정보를 서비스 제공 서버(200)로 전송한다. 전송 시 거래내역정보가 발생된 POS 단말(10)의 관리번호를 거래내역정보와 매칭하여 전송할 수 있다.
서비스 제공 서버(200)는 POS 서버(300)로부터 POS 단말(10)에서 발생된 거래내역정보를 전달받아 저장하고, 매장의 관리자로부터 회원 가입을 통해 관리자 단말(410)을 등록해 둔다.
영상 처리 서버(100)는 카메라(30)의 촬영 영상을 전달받아 녹화, 검색 및 재생을 지원해주는 장치이다.
일 예로, 영상 처리 서버(100)는 NVR(Network Video Recoder) 시스템을 이용할 수 있다. NVR 시스템은 IP 네트워크에서 직접 디지털 이미지 신호를 받아 처리하기 때문에 네트워크가 존재하는 곳이라면 어디든 설치가 가능하고, 카메라가 설치된 장소에서 크게 벗어날 수 없는 DVR 시스템과는 큰 장점이 있다. 또한, NVR 시스템은 네트워크 대역폭 범주 내에 무한 개의 카메라 설치가 가능하고, 네트워크 연결만 되어 있으면 카메라의 정보 등록만으로 자동 연결이 가능하여 시스템의 설치 및 유지 비용을 절감할 수 있다.
본 실시예에서, 영상 처리 서버(100)는 카메라(30)를 통해 촬영된 촬영 영상을 시간정보와 매칭하여 수집 및 저장하고, 촬영 영상을 영상 분석하여 POS 금전통(20)의 상태를 모니터링한다. 모니터링 결과 POS 금전통(20)이 열린 것으로 확인되면 서비스 제공 서버(200)로 해당 촬영 영상 또는 촬영 영상에 대응되는 인덱스(index) 정보를 전송한다. 여기서, 인덱스 정보는 촬영 영상을 식별할 수 있는 정보로서 POS 금전통(20)의 열림발생시간이 포함된다.
본 실시예에서, 영상 분석은 촬영 영상에서 POS 금전통(20)을 포함한 일정 영역을 추출하고, 추출된 일정 영역을 미리 설정된 기준 영상과 비교 분석하는 것으로 수행된다.
그러면, 서비스 제공 서버(200)는 영상 처리 서버(100)로부터 전송받은 촬영 영상 또는 촬영 영상에 대응되는 인덱스 정보를 기 등록된 관리자 단말(410)의 서비스 어플리케이션(400)으로 전송한다.
관리자 단말(410)은 매장의 관리자가 소지한 단말로, 실시간 확인이 가능한 스마트 폰이 될 수 있다. 그러나, 이에 한정하는 것은 아니며 서버간 네트워크를 통해 데이터 송수신이 가능하고 영상 정보를 재생할 수 있는 단말이라면 그 종류에 관계없이 적용할 수 있을 것이다. 매장의 관리자는 매장의 사장, 점주 등이 될 수 있다.
서비스 어플리케이션(400)은 관리자 단말(410)에 설치되고, 관리자 단말(410)에 의해 실행될 때 서비스 제공 서버(200)로부터 촬영 영상 또는 촬영 영상에 대응되는 인덱스 정보를 수신하며 수신한 정보를 관리자 단말(410)의 화면에 표시한다.
또한, 서비스 어플리케이션(400)은 수신한 정보가 인덱스 정보의 경우 인덱스 정보에 포함된 POS 금전통(20)의 열림발생시간에 기초하여 영상 처리 서버(100) 또는 서비스 제공 서버(200)에 상세 영상 정보를 요청할 수 있는 화면을 제공하고, 상기 요청에 의해 영상 처리 서버(100) 또는 서비스 제공 서버(200)로부터 해당 상세 영상 정보를 전달받는다. 이때, 영상 처리 서버(100) 또는 서비스 제공 서버(200)로부터 전달받은 상세 영상 정보는 POS 금전통(20)의 열림발생시간에 대응되는 촬영 영상을 일부 캡쳐한 영상 정보이다.
이를 위해, 영상 처리 서버(100)에서는 서비스 어플리케이션(400)으로부터 상세 영상 정보의 요청이 있으면 데이터베이스에 저장된 촬영 영상에 대하여 시간 정보를 근거로 POS 금전통(20)의 열림발생시간정보에 대응되는 촬영 영상을 캡쳐하고 캡쳐한 영상을 서비스 제공 서버(200) 또는 서비스 어플리케이션(400)으로 전송한다.
또한, 영상 처리 서버(100)는 캡쳐 시, 저장된 촬영 영상에 대하여 POS 금전통(20)의 열림발생시간을 기준으로 상기 열림발생시간 보다 일정시간 앞선 시간으로부터 미리 설정된 주기 동안에 촬영된 촬영 영상을 캡쳐할 수 있다.
이러한 구성에 의해 본 발명의 모니터링 시스템은, 기본적으로 영상 처리 서버(100)가 카메라를 통해 수집한 촬영 영상을 분석하여 POS 금전통(20)이 열린 것으로 확인되면 이를 서비스 제공 서버(200)를 통해 해당 관리자 단말에게 알린다.
여기에 추가적으로, 모니터링 시스템은 영상 처리 서버(100)가 카메라를 통해 수집한 촬영 영상을 분석하여 POS 금전통(20)이 열린 것으로 확인되면 POS 금전통(20)의 열림이 정상 거래에 의한 것인지 여부를 판단하여, 정상 거래에 의한 것이 아닌 경우에 대해서만 해당 관리자 단말에게 알리도록 할 수 있다.
이를 위해 서비스 제공 서버(200)는 영상 처리 서버(100)로부터 전송받은 촬영 영상 또는 촬영 영상에 대응되는 인덱스 정보에 기초하여 POS 서버(300)로부터 전달받은 거래내역정보를 조회한다. 촬영 영상 또는 촬영 영상에 대응되는 인덱스 정보에는 POS 금전통(20)의 열림발생시간이 포함되어 있다.
따라서, 서비스 제공 서버(200)는 POS 서버(300)로부터 전달받은 거래내역정보로부터 촬영 영상 또는 인덱스 정보에 포함되어 있는 POS 금전통(20)의 열림발생시간과 대응되는 거래내역정보가 있는지, 거래내역정보가 있으면 거래종류가 카드거래인지 여부를 확인하여 정상 거래 또는 비정상 거래에 의한 열림인지를 판단한다.
예컨대, 서비스 제공 서버(200)는 POS 서버(300)로부터 전달받은 거래내역정보로부터 POS 금전통(20)의 열림발생시간과 대응되는 거래내역정보가 없거나, 상기 거래내역정보가 있더라도 카드 거래인 경우 POS 금전통(20)의 열림이 비정상 거래에 의한 것이라고 판단할 수 있다.
이와 같은 맥락으로, 본 실시예에 따른 서비스 어플리케이션(400)은 기본적으로 매장에 설치된 POS 금전통(20)에 대하여 거래내역정보와는 관계없이 POS 금전통(20)이 열린 것으로 확인되면 이의 알림을 수신하도록 설정되어 있지만, 선택적으로 비정상 거래에 의해 열린 경우에 대해서만 이의 알림을 수신하도록 설정할 수 있다. 또한, 서비스 애플리케이션(400)은 이의 선택적 설정을 각 POS 단말(10)마다 개별적으로 설정이 가능하도록 제공할 수 있다.
이를 위해 서비스 애플리케이션(400)은 수신 설정 화면을 제공하며, 제공된 수신 설정 화면에서 POS 단말(10)별 개별 설정이 요청되면 POS 단말(10)의 등록을 위한 POS 단말 사전 등록 화면을 제공할 수 있다.
한편, 영상 처리 서버(100)는 POS 단말(10) 인근에 설치되어 POS 단말(10) 주변에서 발생되는 음성 정보를 입력받는 마이크(40)와 연계되어 POS 금전통을 모니터링할 수 있다.
구체적으로 설명하면, 영상 처리 서버(100)는 마이크(40)로부터 입력받은 음성정보를 수집하고 음성 정보를 시간 정보와 매칭하여 저장한다. 그리고, 음성 알고리즘을 통해 음성 정보에 기 설정된 단어 또는 문장이 포함되어 있는지 여부를 분석하여 도난 등의 비상 상황을 모니터링한다.
분석 결과 음성 정보에 기 설정된 단어 또는 문장이 포함되어 있으면, 영상 처리 서버(100)는 해당 음성 정보 또는 음성정보와 대응되는 인덱스 정보를 서비스 제공 서버(200)로 전송하여 비상 상황을 알릴 수 있다. 또, 서비스 제공 서버(200)를 거치지 않고 해당 관리자 단말에게 전송하여 비상 상황을 알릴 수 있다. 이 경우, 영상 처리 서버(100)에 관리자 단말에 관한 정보가 저장되어 있다.
이러한 구성에 따르면, 본 발명의 실시예에 따른 서비스 어플리케이션(400)은 영상 처리 서버(100) 또는 서비스 제공 서버(200)로부터 비상 상황이 발생한 알림을 수신하여 상기 관리자 단말의 화면에 표시하고, 상기 알림으로부터 받은 음성정보 발생시간을 기초하여 영상 처리 서버(100) 또는 서비스 제공 서버(200)로 해당 음성 정보 또는 영상 정보를 요청하고 요청한 음성 정보 또는 영상 정보를 전달받을 수 있다.
본 실시예에서, 영상 처리 서버(100)는 매장에 설치되어 매장에 설치된 카메라와 실시간 데이터 송수신이 가능하도록 마련되며, 서비스 제공 서버(200)는 매장이 아닌 영상 처리 서버(100)와 독립적으로 마련되어 영상 처리 서버(100)로부터 촬영 영상에 관한 알림만 수신하는 것으로 정의할 수 있다. 그러나, 이에 한정하는 것은 아니며, 영상 처리 서버(100)가 매장이 아닌 원격에 마련될 수 있으며 또는 서비스 제공 서버(200)에 포함되어 구현되는 것도 가능하다.
도 2는 영상 처리 서버의 구성을 나타낸 도면이다.
영상 처리 서버(100)는 도 2에 도시된 영상 저장부(110), 영상 분석부(120), 영상 캡쳐부(130), 음성 분석부(140), 데이터베이스(DB; 150)를 포함하여 구성된다.
영상 저장부(110)는 카메라로부터 촬영 영상을 수집하고 수집한 촬영 영상을 시간정보와 매칭하여 데이터베이스(150)에 저장한다. 시간 정보는 촬영 영상에 포함되어 있으며 추후 원하는 시점의 촬영 영상을 검색할 수 있도록 시간 정보를 추출하여 매칭하는 작업을 수행할 수 있다. 촬영 영상에는 비디오 정보뿐만 아니라 음성 정보를 포함할 수 있다.
영상 분석부(120)는 카메라로부터 수집한 촬영 영상을 데이터베이스(150)에 기 저장된 기준 영상과 비교 분석하여 기준 영상과 일치하는 지 여부를 판단한다. 상기 판단을 통해 POS 금전통이 열린 상태인지를 모니터링한다.
특히, 본 실시예에 따른 영상 분석부(120)는 촬영 영상에서 POS 금전통을 포함한 일부 영역을 추출하고, 추출된 일부 영역에 대해 기준 영상과 비교 분석할 수 있다. 기준 영상과 일치하는 영상이 존재하면 POS 금전통이 열린 것으로 판단한다.
음성 분석부(140)는 POS 단말 인근에 설치된 마이크로부터 입력되는 음성 정보를 수집하고 수집한 음성 정보를 시간정보와 매칭하여 데이터베이스(150)에 저장한다. 그리고, 저장된 음성 정보를 음성알고리즘을 통해 분석하여 음성 정보에 기준 음성 즉, 기 설정된 단어 또는 문장이 포함되어 있는지를 판단한다. 판단 결과, 음성 정보에 기 설정된 단어 또는 문장이 포함되어 있으면 POS 금전통이 도난되었거나 또는 위험 상황인 것으로 판단할 수 있다.
음성 분석부(140)에서 음성 정보를 수집하는 구성은 영상 저장부(110)에서 수행할 수 있다.
영상 캡쳐부(130)는 영상 분석부(120) 또는 음성 분석부(140)에서 판단한 결과 POS 금전통이 열린 것으로 판단하거다 또는 비상 상황으로 판단하는 경우 해당 촬영 영상 또는 해당 음성 정보나, 이들에 대응되는 각 인덱스 정보를 생성하여 서비스 제공 서버 또는 관리자 단말에게 전송한다.
해당 촬영 영상 또는 해당 음성 정보를 전송하는 경우, 영상 캡쳐부(130)는 데이터베이스(150)에 저장된 촬영 영상 또는 음성 정보에서 POS 금전통의 열림발생시간 또는 음성 정보 발생시간과 대응되는 영상 정보 또는 음성 정보를 캡쳐하고 캡쳐된 영상 정보 또는 음성 정보를 전송할 수 있다. 캡쳐는 시간정보를 기준으로 즉, POS 금전통의 열림발생시간 또는 음성정보 발생시간 보다 일정시간 앞선 시점으로부터 미리 설정된 주기 동안의 정보를 캡쳐한다.
이하, 본 발명의 실시예에 따른 모니터링 시스템에 기초하여 매장의 금전통을 모니터링하는 방법에 대하여 구체적으로 설명한다.
도 3은 본 발명의 실시예에 따른 POS 금전통의 모니터링 방법을 설명하기 위한 전체 흐름도이다.
S100 단계에서, 영상 처리 서버(100)는 POS 단말의 주위를 촬영하는 카메라로부터 촬영 영상을 수집하고 수집한 촬영 영상을 시간 정보와 매칭하여 저장함으로써 영상의 검색 및 재생이 가능하도록 지원한다.
S110 단계에서, 서비스 제공 서버(200)는 POS 단말과 연결된 POS 서버로부터 각 매장의 POS 단말에서 발생된 거래내역정보를 수신하고 이를 저장한다.
위 S100 단계 및 S110 단계는 시간의 흐름상 어느 것이 먼저 수행되고 연동되는 것이 아니라, 각 POS 단말 및 카메라에서 발생되는 여부에 따라 개별적으로 정보를 수집하고 저장하는 과정으로 볼 수 있다.
다음 S120 단계에서, 영상 처리 서버(100)가 수집된 촬영 영상을 기준 영상과 비교 분석한다. 이때, 수집된 촬영 영상에 POS 금전통을 포함한 일부 영역만을 추출하고 추출된 일부 영역에 대하여 기준 영상을 비교 분석할 수 있다.
모니터링 결과, S130 단계에서와 같이, 영상 처리 서버(100)가 촬영 영상과 기준 영상간 일치 여부에 따라 POS 금전통이 열린 상태인지를 모니터링한다.
촬영 영상과 기준 영상이 일치하면, 영상 처리 서버(100)는 S140 단계와 같이, POS 금전통이 열린 것으로 판단하고 이를 알리기 위한 인덱스 정보를 서비스 제공 서버(200)로 전송한다. 인덱스 정보에는 POS 금전통이 열린 발생시간 즉, POS 금전통의 열림발생시간을 포함한다.
다음 S150 단계에서, 서비스 제공 서버(200)가 인덱스 정보를 기 등록된 관리자 단말의 서비스 어플리케이션(400)으로 전송한다. 이를 통해 서비스 어플리케이션(400)은 관리자 단말의 화면을 통해 인덱스 정보를 표시하고, 인덱스 정보에 대하여 상세 영상 정보를 요청할 수 있는 선택 화면을 제공할 수 있다.
다음 S170 단계에서, 사용자로부터 상세 영상 정보를 요청이 있으면 서비스 어플리케이션(400)이 인덱스 정보에 포함된 POS 금전통의 열림발생시간에 기초하여 상세 영상 정보를 요청한다.
다음 S180 및 S190 단계에서, 영상 처리 서버(100)가 인덱스 정보에 대응되는 발생시간정보를 근거로 해당 촬영 영상을 캡쳐하고, 캡쳐한 촬영 영상을 서비스 어플리케이션(400)을 통해 관리자 단말에게 전송한다.
상기의 과정에서 서비스 어플리케이션(400)은 상세 영상 정보를 영상 처리 서버(100)에 요청하고 영상 처리 서버(100)를 통해 전달받지만, 이에 한정하지 않고 서비스 제공 서버(200)를 경유하여 요청하고 전달받을 수 있다. 이러한 경우, 서비스 어플리케이션(400)이 서비스 제공 서버(200)에 상세 영상 정보를 요청하면 서비스 제공 서버(200)가 영상 처리 서버(100)로부터 해당 영상 정보를 전달받고 이를 서비스 어플리케이션(400)으로 제공하게 된다.
한편, 상기의 S140 단계에서, 영상 처리 서버(100)가 인덱스 정보 대신 해당 촬영 영상 정보를 서비스 제공 서버(200)로 전송할 수 있다. 이 경우 관리자가 바로 해당 촬영 영상을 확인할 수 있다.
도 4는 도 3의 단계들을 통한 모니터링 방법에서 POS 금전통의 열림이 정상 거래에 의한 것인지 판단하여 정상 거래가 아닌 경우에 대해서만 선별적으로 알리는 과정을 설명하고 있다.
S200 단계에서, 서비스 제공 서버가 영상 처리 서버로부터 인덱스 정보를 수신하면, 인덱스 정보에 포함되는 시간정보를 근거로 POS 서버로부터 전달받은 거래내역정보를 조회한다.
다음 S210 단계에서, 서비스 제공 서버가 거래내역정보에서 POS 금전통의 열림발생시간에 대응되는 거래내역정보가 있는지, 거래내역정보가 있으면 거래종류가 카드거래인지 여부를 확인하여 정상 거래에 의한 열림인지를 판단한다.
다음 S220 단계에서 정상 거래에 의한 열림이면 관리자 단말에게 알리지 않고 종료한다.
정상 거래에 의한 열림이 아니면 즉, 비정상 거래에 의한 열림이면 S230 단계와 같이, 서비스 제공 서버가 해당 관리자 단말의 서비스 어플리케이션으로 인덱스 정보를 전송할 수 있다.
상기의 단계에서 부가적으로, 서비스 제공 서버가 POS 서버로부터 전달받은 거래내역정보에 대하여 거래종류가 정상 거래인지, 거래취소, 환불, 결제변경에 따른 비정상 거래인지 여부를 구분할 수 있다.
거래내역정보가 비정상 거래에 해당되면, 서비스 제공 서버가 해당 거래내역정보를 서비스 어플리케이션을 통해 관리자 단말로 알리고, 관리자 단말의 요청에 의해 비정상 거래가 발생한 시점의 영상 정보를 제공함으로써 계산대 직원의 실수나 부정행위를 원격에서 확인할 수 있도록 한다.
이상의 설명은 본 발명을 예시적으로 설명한 것에 불과하며, 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술적 사상에서 벗어나지 않는 범위에서 다양한 변형이 가능할 것이다. 따라서 본 발명의 명세서에 개시된 실시예들은 아래의 특허청구범위에 의해 해석 되어야 하며, 그와 균등한 범위 내에 있는 모든 기술도 본 발명의 범위에 포함되는 것으로 해석해야 할 것이다.
10: POS 단말 20: POS 금전통
30: 카메라 100: 영상 처리 서버
200: 서비스 제공 서버 300: POS 서버
400: 서비스 애플리케이션 410: 관리자 단말
110: 영상 저장부 120: 영상 분석부
130: 영상 캡쳐부 140: 음성 분석부
150: 데이터베이스(DB)

Claims (12)

  1. NVR(Network Video Recoder) 시스템을 이용하여, 매장에 설치된 POS 단말의 주위를 촬영하는 카메라로부터 촬영 영상을 수집하고 상기 촬영 영상을 시간 정보와 매칭하여 저장하는 영상 처리 서버;
    상기 POS 단말에서 발생하는 상품 판매에 대한 결제를 처리하는 POS 서버로부터 상기 상품 판매에 수반되는 거래내역정보를 전달받는 서비스 제공 서버; 및
    관리자 단말에 설치되고 상기 서비스 제공 서버로부터 상기 POS 단말과 연결된 POS 금전통의 열림이 비정상 거래에 의한 것이라는 알림을 수신하여 상기 관리자 단말의 화면에 표시하는 서비스 어플리케이션;
    을 포함하고,
    상기 영상 처리 서버는,
    상기 촬영 영상에서 상기 POS 금전통을 포함한 일정 영역을 추출한 후 상기 일정 영역에 대해 미리 설정된 기준 영상과 비교 분석하여 상기 기준 영상과의 일치 여부에 따라 상기 POS 금전통이 열린 상태인지를 판단하고, 상기 POS 금전통이 열린 것으로 확인되면 해당 촬영 영상에 대응되는 인덱스 정보를 상기 서비스 제공 서버로 전송하고,
    상기 서비스 제공 서버는,
    상기 인덱스 정보를 수신하면 상기 POS 서버로부터 전달받은 거래내역정보로부터 상기 인덱스 정보에 포함된 POS 금전통의 열림발생시간에 대응되는 거래내역정보가 없거나 상기 거래내역정보가 있더라도 카드 거래인 경우, 상기 POS 금전통의 열림이 비정상 거래에 의한 것이라고 판단하고, 상기 비정상 거래에 의한 것인 경우 해당 관리자 단말에 알리며,
    상기 서비스 어플리케이션은,
    상기 서비스 제공 서버로부터 상기 인덱스 정보를 수신한 경우, 상기 인덱스 정보에 포함된, 상기 POS 금전통의 열림발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 상세 영상 정보를 요청할 수 있는 화면을 제공하고, 상기 요청에 의해 상기 영상 처리 서버 또는 상기 서비스 제공 서버로부터 해당 상세 영상 정보를 전달받으며,
    상기 영상 처리 서버는,
    상기 서비스 어플리케이션으로부터 상세 영상 정보의 요청이 있으면 데이터베이스에 저장된 촬영 영상에 대하여 상기 시간 정보를 근거로 상기 POS 금전통의 열림발생시간에 대응되는 촬영 영상을 캡쳐하고, 상기 캡쳐한 촬영 영상을 상기 서비스 어플리케이션을 통해 상기 관리자 단말로 전송하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 제1항에 있어서,
    상기 영상 처리 서버는,
    상기 저장된 촬영 영상에 대하여 상기 POS 금전통의 열림발생시간을 기준으로 상기 열림발생시간보다 일정시간 앞선 시간으로부터 미리 설정된 주기 동안의 영상 정보를 캡쳐하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템.
  9. 제1항에 있어서,
    상기 영상 처리 서버는,
    상기 POS 단말 인근에 설치되어 음성 신호를 입력받는 마이크로부터 음성 정보를 수집하고 상기 음성 정보를 시간 정보와 매칭하여 저장하며, 음성 알고리즘을 통해 상기 음성 정보에 기 설정된 단어 또는 문장이 포함되어 있는지 여부를 분석하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템.
  10. 제9항에 있어서,
    상기 영상 처리 서버는,
    상기 분석 결과 상기 음성 정보에 기 설정된 단어 또는 문장이 포함되어 있으면 해당 음성정보 또는 상기 음성정보와 대응되는 인덱스 정보를 상기 서비스 제공 서버 또는 해당 관리자 단말에 전송하여 알리는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템.
  11. 제10항에 있어서,
    상기 서비스 어플리케이션은,
    상기 영상 처리 서버 또는 상기 서비스 제공 서버로부터 상기 해당 음성정보에 관한 알림을 수신하여 상기 관리자 단말의 화면에 표시하고, 상기 알림으로부터 받은 음성정보 발생시간에 기초하여 상기 영상 처리 서버 또는 상기 서비스 제공 서버에 해당 음성 정보 또는 영상 정보를 요청하고 요청한 음성 정보 또는 영상 정보를 전달받는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템.
  12. 제1항에 있어서,
    상기 서비스 제공 서버는,
    상기 POS 서버로부터 전달받은 거래내역정보에 대하여 거래종류가 정상 거래인지, 거래취소, 환불, 결제변경에 의한 비정상 거래인지 여부를 구분하고, 상기 비정상 거래의 거래내역정보를 해당 관리자 단말로 전송하는 것을 특징으로 하는 POS 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템.
KR1020160039208A 2016-02-16 2016-03-31 Pos 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템 KR102107533B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020160039208A KR102107533B1 (ko) 2016-03-31 2016-03-31 Pos 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템
PCT/KR2016/015528 WO2017142191A1 (ko) 2016-02-16 2016-12-29 포스 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160039208A KR102107533B1 (ko) 2016-03-31 2016-03-31 Pos 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템

Publications (2)

Publication Number Publication Date
KR20170112315A KR20170112315A (ko) 2017-10-12
KR102107533B1 true KR102107533B1 (ko) 2020-05-07

Family

ID=60141617

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160039208A KR102107533B1 (ko) 2016-02-16 2016-03-31 Pos 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템

Country Status (1)

Country Link
KR (1) KR102107533B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110365943A (zh) * 2019-07-19 2019-10-22 福建恒锋电子科技有限公司 一种基于数字矩阵大屏的视频监控方法及系统
CN114764962A (zh) 2021-01-14 2022-07-19 东芝泰格有限公司 不正当行为识别装置及存储介质、不正当行为识别方法
JP2023016269A (ja) 2021-07-21 2023-02-02 東芝テック株式会社 情報処理システム、情報処理装置及びその制御プログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101281846B1 (ko) * 2012-11-29 2013-07-03 이상온 스마트 프론트 시스템
KR101511496B1 (ko) * 2014-09-30 2015-04-13 주식회사 포인트시스템 Pos단말기에서의 부정행위 감시 시스템 및 감시 방법

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110008649A (ko) * 2009-07-20 2011-01-27 (주)블루비스 Ｐｏｓ 관리 시스템 및 그 방법
KR20140121764A (ko) * 2012-01-05 2014-10-16 비자 인터네셔널 서비스 어소시에이션 트랜잭션 영상 캡처 장치, 방법 및 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101281846B1 (ko) * 2012-11-29 2013-07-03 이상온 스마트 프론트 시스템
KR101511496B1 (ko) * 2014-09-30 2015-04-13 주식회사 포인트시스템 Pos단말기에서의 부정행위 감시 시스템 및 감시 방법

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
https://ettrends.etri.re.kr/ettrends/117/0905001463/24-3_128_138.pdf (2009.06.)
https://www.boannews.com/media/view.asp?idx=8152
https://www.edaily.co.kr/news/read?newsId=01941766609405656&mediaCodeNo=257

Also Published As

Publication number Publication date
KR20170112315A (ko) 2017-10-12

Similar Documents

Publication Publication Date Title
US10477156B2 (en) Video analytics system
US10755259B2 (en) Intelligent video verification of point of sale (POS) transactions
US7474330B2 (en) System and method for integrating and characterizing data from multiple electronic systems
US9569938B1 (en) Video content analysis using point of sale data
US20040024709A1 (en) System and method for determining the identity of a party associated with a transaction
JP2016513296A (ja) セルフチェックアウト端末における不正行為の検証
US20230044612A1 (en) Transaction Terminal Fraud Processing
KR102244430B1 (ko) Pc방 무인 관제 시스템, 서버 및 방법
KR102107533B1 (ko) Pos 단말과 카메라를 이용한 매장의 금전통 모니터링 시스템
WO2016135860A1 (ja) カード確認システム
WO2017142191A1 (ko) 포스 단말과 카메라를 이용한 매장의 상품거래 원격 모니터링 시스템 및 방법
US20240119809A1 (en) Hand action tracking for card slot tampering
JP2010072989A (ja) 電子化ジャーナルと映像の統合管理システム
JP2011096182A (ja) 例外処理管理装置、例外処理管理装置の制御方法およびプログラム
EP4047538A1 (en) Self-checkout system and method
KR20210070745A (ko) 매장 포스 영상 검색 시스템
KR20180109807A (ko) 포스(pos) 단말과 카메라를 이용한 매장의 거래 모니터링 시스템 및 방법
KR101281846B1 (ko) 스마트 프론트 시스템
KR20170096463A (ko) 포스(pos) 단말과 카메라를 이용한 매장의 거래 모니터링 시스템 및 방법
KR101958417B1 (ko) 횡령 사고 방지를 위해 pos 단말기의 조작을 감시하는 pos 보안시스템
CN111709667A (zh) 自助取款的风险处理方法和装置
JP2011100172A (ja) 例外処理管理装置、例外処理管理装置の制御方法およびプログラム
US11881089B2 (en) Monitoring and predicting physical force attacks on transaction terminals
KR100877014B1 (ko) 금융 자동화 기기
KR20220000102A (ko) IoT 기반의 POS NDVR 시스템

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
J201 Request for trial against refusal decision
J301 Trial decision

Free format text: TRIAL NUMBER: 2018101000292; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20180122

Effective date: 20190801

S901 Examination by remand of revocation
E902 Notification of reason for refusal
GRNO Decision to grant (after opposition)
GRNT Written decision to grant