KR102420151B1 - Mobile ondemand cctv system based on collective cross check and tracking - Google Patents

Mobile ondemand cctv system based on collective cross check and tracking Download PDF

Info

Publication number
KR102420151B1
KR102420151B1 KR1020210082502A KR20210082502A KR102420151B1 KR 102420151 B1 KR102420151 B1 KR 102420151B1 KR 1020210082502 A KR1020210082502 A KR 1020210082502A KR 20210082502 A KR20210082502 A KR 20210082502A KR 102420151 B1 KR102420151 B1 KR 102420151B1
Authority
KR
South Korea
Prior art keywords
target
information
tracking
image
subject
Prior art date
Application number
KR1020210082502A
Other languages
Korean (ko)
Inventor
김왕석
박승하
Original Assignee
주식회사 앤더스팟
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 앤더스팟 filed Critical 주식회사 앤더스팟
Priority to KR1020210082502A priority Critical patent/KR102420151B1/en
Application granted granted Critical
Publication of KR102420151B1 publication Critical patent/KR102420151B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/26—Government or public services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4524—Management of client data or end-user data involving the geographical location of the client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173—End-user applications, e.g. Web browser, game

Abstract

The present invention relates to a mobile on-demand CCTV system based on collective recognition tracking. An objective of the present invention is to use a mobile communication terminal of a user as a CCTV, identify wanted criminals, missing people, and people targeted for protection and management through matching analysis and face recognition for images collected by mobile communication terminals, and track corresponding subjects by procuring the locations and moving paths of the corresponding subjects based on data identified as the corresponding subjects. According to one embodiment of the present invention, the mobile on-demand CCTV system based on collective recognition tracking comprises: a user application installed on a mobile communication terminal, transmitting a subject image photographed through a camera of the mobile communication terminal to a management server, and transmitting photographing location information to the management server in accordance with a matching result for the subject image received from the management server; and the management server connected to the mobile communication terminal through a mobile communication network, executing a matching process between face recognition information of a photographing subject of the subject image and facial feature information of a preregistered target subject to provide a matching result for the user application, receiving a tracking report for a corresponding target subject when matching, and tracking the location of the corresponding target subject based on the subject image and the photographing location information.

Description

집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템{MOBILE ONDEMAND CCTV SYSTEM BASED ON COLLECTIVE CROSS CHECK AND TRACKING} MOBILE ONDEMAND CCTV SYSTEM BASED ON COLLECTIVE CROSS CHECK AND TRACKING

본 발명의 실시예는 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템에 관한 것이다.An embodiment of the present invention relates to a mobile on-demand CCTV system based on collective cognitive tracking.

최근 거리의 일반인들을 다양한 위험 및 범죄로부터 보호하고, 회사의 보안을 유지하고, 보안 구역의 출입을 승인 받은 자만 출입할 수 있도록 하기 위해 CCTV 시스템, DVR 시스템, 출입통제시스템 등과 같은 영상 기반의 보안 시스템들이 거리 및 건물에 설치되고 있다. Video-based security systems, such as CCTV systems, DVR systems, and access control systems, to protect the public on the street from various dangers and crimes, maintain company security, and allow only those who have been approved to enter the security area. are being installed on streets and buildings.

일반적으로 CCTV와 같은 보안 및 감시 시스템은 24시간 감시가 필요한 주택가, 학교, 놀이터 주변의 방범 취약지역, 근무요원이 상시 관리할 수 없는 취약 개소, 은행, 백화점, 공항, 항만, 회사 등의 시설물 등에 카메라 등의 장비를 구축하고, 이와 네트워크로 연결된 원격지의 중앙관제센터에 현장 영상을 실시간으로 전송하여 표시 및 기록함으로써 상황 관리자가 모니터링을 통해 각종 사고나 위험 상황, 범죄 등을 사전에 예방하고, 안전 점검 및 다양한 정보를 수집하여 후속 대책이나 수습 조치를 취할 수 있는 데다 적은 인력으로도 많은 감시 장소의 이상 유무를 파악할 수 있음은 물론 추후 범죄수사나 실종자 찾기 등에 필요한 핵심적인 정보를 제공한다. In general, security and monitoring systems such as CCTV are used in residential areas that require 24-hour monitoring, crime prevention areas around schools and playgrounds, vulnerable locations that cannot be managed by working personnel at all times, and facilities such as banks, department stores, airports, ports, and companies. By building equipment such as cameras and transmitting, displaying and recording on-site images in real time to a remote central control center connected to the network, situation managers monitor various accidents, dangerous situations, and crimes in advance, and It is possible to take follow-up measures or corrective measures by collecting inspection and various information, and it is possible to identify the presence or absence of abnormalities in many monitoring areas with a small number of personnel, as well as providing essential information necessary for future criminal investigations or finding missing persons.

이러한 종래의 CCTV와 같은 보안 및 감시 시스템의 구축을 위해서는 실질적으로 CCTV, 이미지처리 소프트웨어, 서버, 스토리지, 통신을 위한 케이블 등의 구성들이 필요하며, 설치 방식 또한 고정형으로 물리적인 공간에 별도로 설치된다. 그리고, CCTV 구입 및 설치, 서버/스토리지 비용, 이들의 운영 관리 등을 위해 상당한 비용이 들며, CCTV의 해상도(HD급이 200만 화소) 또한 높지 않아 촬영된 영상의 이미지 처리, 얼굴 인식 등을 위한 적지 않은 소요 시간이 들며 그 정확도 또한 높지 않다는 다양한 문제가 있다.In order to construct a security and monitoring system such as the conventional CCTV, components such as CCTV, image processing software, server, storage, and cables for communication are actually required, and the installation method is also fixed and separately installed in a physical space. In addition, it costs a lot for CCTV purchase and installation, server/storage cost, and their operation management, etc., and the resolution of CCTV (HD level is 2 million pixels) is also not high, so it is used for image processing of captured images, face recognition, etc. There are various problems in that it takes a considerable amount of time and the accuracy is not high.

등록특허공보 제10-2012672호(등록일자: 2019년08월14일)Registered Patent Publication No. 10-2012672 (Registration Date: August 14, 2019)

본 발명의 실시예는, 사용자의 모바일 통신단말을 CCTV로 이용하고, 모바일 통신단말들에서 수집되는 영상들에 대한 안면인식 및 매칭 분석을 통해 수배자, 실종자, 보호관리대상자를 식별하며, 해당 대상자로 식별된 자료들을 기반으로 해당 대상자들의 위치 및 동선 확보를 통해 추적할 수 있는 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템을 제공한다.An embodiment of the present invention uses the user's mobile communication terminal as a CCTV, and identifies wanted, missing, and protection management targets through facial recognition and matching analysis of images collected from mobile communication terminals, Based on the identified data, we provide a mobile on-demand CCTV system based on collective cognitive tracking that can be tracked by securing the location and movement of the subject.

본 발명의 실시예에 따른 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템은, 모바일 통신단말에 설치되고, 모바일 통신단말의 카메라를 통해 촬영된 대상자이미지를 관리 서버로 전송하고, 상기 관리 서버로부터 수신되는 상기 대상자이미지에 대한 매칭 결과에 따라 촬영위치정보를 상기 관리 서버로 전송하는 사용자 어플리케이션; 및 모바일 통신단말과 이동통신망을 통해 연결되고, 상기 대상자이미지의 촬영대상자의 안면인식정보 및 기 등록된 타깃대상자의 안면특징정보 간의 매칭 프로세스를 실행하여 상기 사용자 어플리케이션으로 매칭 결과를 제공하고, 매칭 시 해당 타깃대상자에 대한 추적신고를 접수하고, 상기 대상자이미지와 상기 촬영위치정보를 기반으로 해당 타깃대상자의 위치를 추적하는 관리 서버를 포함한다.The mobile on-demand CCTV system based on collective cognitive tracking according to an embodiment of the present invention is installed in a mobile communication terminal, transmits a target image photographed through a camera of the mobile communication terminal to a management server, and receives from the management server a user application for transmitting photographing location information to the management server according to the matching result for the target image to be; and a mobile communication terminal and a mobile communication network, and executes a matching process between the facial recognition information of the subject image of the subject image and the facial feature information of the previously registered target subject to provide a matching result to the user application, and when matching and a management server that receives a tracking report for the target target and tracks the location of the target target based on the target image and the photographing location information.

또한, 상기 사용자 어플리케이션은, 모바일 통신단말의 카메라를 통해 영상을 촬영하여 상기 대상자이미지를 생성하며, 모바일 통신단말로부터 상기 촬영위치정보 및 촬영시간정보를 각각 획득하는 대상자이미지 촬영부; 상기 대상자이미지를 상기 관리 서버로 전송하여 매칭 결과를 요청하는 대상자 매칭 요청부; 및 상기 관리 서버로부터 매칭 여부에 대한 결과를 수신하되, 기 등록된 타깃대상자와 매칭되는 결과를 수신하는 경우 상기 촬영위치정보 및 상기 촬영시간정보를 상기 관리 서버로 전송하는 대상자 추적정보 제공부를 포함할 수 있다.In addition, the user application, by taking an image through the camera of the mobile communication terminal to generate the target image, the target image capturing unit for obtaining the shooting location information and the shooting time information from the mobile communication terminal, respectively; a target matching request unit for requesting a matching result by transmitting the target image to the management server; and a subject tracking information providing unit for receiving a result of whether or not matching from the management server, and transmitting the photographing location information and the photographing time information to the management server when receiving a result matching with a pre-registered target subject can

또한, 상기 사용자 어플리케이션은, 상기 관리 서버로부터 수배자, 실종자 및 보호관리대상자 중 적어도 하나에 대한 타깃대상자 현황정보를 수신하여 제공하는 타깃대상자 현황정보 제공부; 및 수배자, 실종자 및 보호관리대상자 중 적어도 하나의 타깃대상자에 대한 텍스트 및 이미지 중 적어도 하나의 검색 요청 콘텐츠를 입력하고, 상기 관리 서버로 상기 검색 요청 콘텐츠를 대한 검색을 요청하며, 상기 관리 서버로부터 검색요청에 따른 타깃대상자 상세정보를 수신하여 제공하는 타깃대상자 상세정보 검색부를 더 포함할 수 있다.In addition, the user application may include: a target target status information providing unit for receiving and providing target target status information for at least one of a wanted person, a missing person, and a protection management target from the management server; and inputting at least one search request content among texts and images for at least one target person among wanted persons, missing persons, and persons subject to protection management, requesting a search for the search request contents to the management server, and searching from the management server It may further include a target target detailed information search unit for receiving and providing detailed target target information according to the request.

또한, 상기 사용자 어플리케이션은, 추적 중인 해당 타깃대상자의 추적 위치 별로 상기 촬영시간정보 및 타깃대상자 일치율정보가 부가된 추적위치지도정보를 상기 관리 서버로부터 수신 받아 제공하는 타깃대상자 추적위치지도정보 제공부; 및 추적 중인 해당 타깃대상자에 대한 상기 촬영위치정보와 타깃대상자 일치율정보가 상기 촬영시간정보의 순으로 정렬된 추적경과리스트정보를 상기 관리 서버로부터 수신 받아 제공하는 타깃대상자 추적경과리스트정보 제공부를 더 포함할 수 있다.In addition, the user application may include: a target target tracking location map information providing unit for receiving and providing tracking location map information to which the shooting time information and target target matching rate information are added for each tracking location of the target target being tracked from the management server; and a target subject tracking history list information providing unit that receives and provides tracking history list information in which the shooting location information and target target match rate information for the target subject being tracked are arranged in the order of the shooting time information from the management server can do.

또한, 상기 관리 서버는, 상기 사용자 어플리케이션으로부터 수신된 상기 대상자이미지에 대한 안면인식 프로세스를 수행하고, 상기 대상자이미지에 대한 안면인식 결과와 기 등록된 타깃대상자의 안면특징정보 간의 매칭 프로세스를 실행하여 매칭 여부에 대한 결과를 제공하는 타깃대상자 매칭 실행부; 상기 타깃대상자 매칭 실행부의 매칭 여부에 대한 결과로 기 등록된 타깃대상자와 매칭되는 경우, 기 등록된 타깃대상자에 대한 추적 신고를 접수하는 타깃대상자 추적 신고 접수부; 및 상기 타깃대상자 추적 신고 접수부를 통해 추적 신고 접수 처리한 모바일 통신단말로 상기 대상자이미지의 상기 촬영위치정보와 촬영시간정보를 요청하여 수신하고, 수신된 상기 촬영위치정보와 상기 촬영시간정보를 해당 타깃대상자에 대한 추적정보로 제1 데이터베이스에 저장하는 타깃대상자 추적정보 관리부를 포함할 수 있다.In addition, the management server performs a facial recognition process for the target image received from the user application, and executes a matching process between the facial recognition result for the target image and the registered target target's facial feature information to match Target target matching execution unit that provides a result on whether or not; a target target tracking report receiving unit for receiving a tracking report for a previously registered target target when matching with a previously registered target target as a result of the matching of the target target matching execution unit; and requesting and receiving the shooting location information and shooting time information of the target image from the mobile communication terminal that has received and processed the tracking report through the target subject tracking report reception unit, and sets the received shooting location information and the shooting time information to the corresponding target. It may include a target target tracking information management unit for storing the tracking information for the target in the first database.

또한, 상기 관리 서버는, 수배자 현황정보, 실종자 현황정보 및 보호관리대상자 현황정보 중 적어도 하나를 등록 관리하며, 상기 사용자 어플리케이션으로 제공하는 타깃대상자 현황정보 관리부; 및 상기 사용자 어플리케이션으로부터 수배자, 실종자 및 보호관리대상자 중 적어도 하나의 타깃대상자에 대한 텍스트 및 이미지 중 적어도 하나의 검색 요청 콘텐츠를 수신하고, 수배자 상세정보, 실종자 상세정보 및 보호관리대상자 상세정보를 기반으로 미리 구축된 제2 데이터베이스로부터 상기 검색 요청 콘텐츠에 해당하는 타깃대상자정보를 상기 사용자 어플리케이션으로 제공하는 타깃대상자 상세정보 관리부를 더 포함할 수 있다.In addition, the management server, the wanted status information, the missing person status information, and manages at least one of the protection management target status information, the target target status information management unit provided to the user application; And receiving from the user application at least one search request content of text and images for at least one target target of wanted, missing person and protection management target, based on wanted person detailed information, missing person detailed information and protection management target detailed information The method may further include a target target detailed information management unit configured to provide target target information corresponding to the search request content to the user application from a pre-built second database.

또한, 상기 관리 서버는, 상기 타깃대상자 추적정보 관리부를 통해 관리되는 타깃대상자 추적정보가 적용된 추적위치지도정보를 생성하되, 추적 위치 별로 상기 촬영시간정보 및 타깃대상자 일치율정보를 부가하여 생성하는 타깃대상자 추적위치지도정보 관리부; 및 상기 타깃대상자 추적정보 관리부를 통해 관리되는 타깃대상자 추적정보를 리스트화하되, 상기 촬영위치정보와 타깃대상자 일치율정보를 상기 촬영시간정보의 순으로 해당 리스트를 정렬하여 해당 타깃대상자에 대한 추적경과리스트정보를 생성하는 타깃대상자 추적경과리스트정보 관리부를 더 포함할 수 있다.In addition, the management server generates the tracking location map information to which the target target tracking information managed through the target target tracking information management unit is applied, and adds the shooting time information and target target matching rate information for each tracking location. tracking location map information management unit; and a list of target target tracking information managed through the target target tracking information management unit, by arranging the list of the shooting location information and target target matching rate information in the order of the shooting time information, and tracking the target target for the target target. It may further include a target subject tracking history list information management unit for generating information.

또한, 상기 대상자이미지 촬영부는, 모바일 통신단말의 카메라 사진 촬영 모드에서 기 설정된 물리버튼 또는 가상버튼을 조작하여 상기 대상자이미지를 생성하는 제1 대상자이미지 촬영부; 및 모바일 통신단말의 카메라 동영상 촬영 모드를 통한 촬영 동작 중에 촬영되는 영상 내 얼굴을 인식하되, 미리 설정된 얼굴 인식 각도 조건에 부합되는 경우 스냅샷을 생성하여 적어도 하나 이상의 대상자후보이미지를 생성하되, 사용자로부터 적어도 하나의 인물이 특정되도록 선택 받기 위한 사용자 인터페이스를 제공하고, 사용자 인터페이스에 의해 선택된 인물이미지에 대한 특정정보를 포함하는 상기 대상자이미지를 생성하는 제2 대상자이미지 촬영부를 포함할 수 있다.In addition, the subject image capturing unit, a first subject image capturing unit for generating the subject image by operating a preset physical button or virtual button in the camera photo shooting mode of the mobile communication terminal; and a face in an image taken during a shooting operation through a camera video shooting mode of a mobile communication terminal is recognized, and when a preset face recognition angle condition is met, a snapshot is generated to generate at least one target candidate image, but from the user It may include a second subject image photographing unit that provides a user interface for receiving selection so that at least one person is specified, and generates the target image including specific information on the person image selected by the user interface.

본 발명에 따르면, 사용자의 모바일 통신단말을 CCTV로 이용하고, 모바일 통신단말들에서 수집되는 영상들에 대한 안면인식 및 매칭 분석을 통해 수배자, 실종자, 보호관리대상자를 식별하며, 해당 대상자로 식별된 자료들을 기반으로 해당 대상자들의 위치 및 동선 확보를 통해 추적할 수 있는 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템을 제공할 수 있다.According to the present invention, the user's mobile communication terminal is used as a CCTV, and the wanted person, the missing person, and the person subject to protection management are identified through facial recognition and matching analysis of the images collected from the mobile communication terminals, and identified as the target. Based on the data, it is possible to provide a mobile on-demand CCTV system based on collective cognitive tracking that can be tracked by securing the location and movement of the subject.

도 1은 본 발명의 실시예에 따른 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템의 대략적 구현 형태와 동작을 나타낸 개요도이다.
도 2는 본 발명의 실시예에 따른 타깃대상자(수배자, 실종자, 보호관리대상자)의 신고 접수를 위한 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템의 동작을 설명하기 위해 나타낸 도면이다.
도 3은 본 발명의 실시예에 따른 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템을 통해 타깃대상자의 현황정보, 검색, 추적정보를 확인하는 동작을 설명하기 위해 나타낸 도면이다.
도 4는 본 발명의 실시예에 따른 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템의 구성을 나타낸 블록도이다.
도 5는 본 발명의 실시예에 따른 사용자 어플리케이션의 구성을 나타낸 도면이다.
도 6은 본 발명의 실시예에 따른 대상자이미지 촬영부의 구성을 나타낸 블록도이다.
도 7은 본 발명의 실시예에 따른 대상자이미지 촬영부의 실행 화면을 나타낸 도면이다.
도 8은 본 발명의 실시예에 따른 타깃대상자 현황정보 제공부의 실행 화면을 나타낸 도면이다.
도 9 및 도 10은 본 발명의 실시예에 따른 타깃대상자 상세정보 검색부의 실행 화면을 나타낸 도면이다.
도 11은 본 발명의 실시예에 따른 타깃대상자 추적위치지도정보 제공부의 실행 화면을 나타낸 도면이다.
도 12는 본 발명의 실시예에 따른 타깃대상자 추적경과리스트정보 제공부의 실행 화면을 나타낸 도면이다.
도 13은 본 발명의 실시예에 따른 관리 서버의 구성을 나타낸 블록도이다.1 is a schematic diagram showing a schematic implementation form and operation of a mobile on-demand CCTV system based on collective cognitive tracking according to an embodiment of the present invention.
2 is a diagram illustrating the operation of a mobile on-demand CCTV system based on collective cognitive tracking for receiving a report of a target target (wanted person, missing person, protection management target) according to an embodiment of the present invention.
3 is a diagram illustrating an operation of checking the status information, search, and tracking information of a target target through a mobile on-demand CCTV system based on collective cognitive tracking according to an embodiment of the present invention.
4 is a block diagram showing the configuration of a mobile on-demand CCTV system based on collective cognitive tracking according to an embodiment of the present invention.
5 is a diagram showing the configuration of a user application according to an embodiment of the present invention.
6 is a block diagram showing the configuration of a subject image photographing unit according to an embodiment of the present invention.
7 is a view showing an execution screen of the subject image capturing unit according to an embodiment of the present invention.
8 is a view showing an execution screen of a target target status information providing unit according to an embodiment of the present invention.
9 and 10 are views showing execution screens of the target target detailed information search unit according to an embodiment of the present invention.
11 is a view showing an execution screen of a target subject tracking location map information providing unit according to an embodiment of the present invention.
12 is a view showing an execution screen of a target subject tracking history list information providing unit according to an embodiment of the present invention.
13 is a block diagram showing the configuration of a management server according to an embodiment of the present invention.

본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.Terms used in this specification will be briefly described, and the present invention will be described in detail.

본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.The terms used in the present invention have been selected as currently widely used general terms as possible while considering the functions in the present invention, but these may vary depending on the intention or precedent of a person skilled in the art, the emergence of new technology, and the like. In addition, in a specific case, there is a term arbitrarily selected by the applicant, and in this case, the meaning will be described in detail in the description of the corresponding invention. Therefore, the term used in the present invention should be defined based on the meaning of the term and the overall content of the present invention, rather than the name of a simple term.

명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나 이상의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.In the entire specification, when a part "includes" a certain component, it means that other components may be further included, rather than excluding other components, unless otherwise stated. In addition, terms such as "... unit" and "module" described in the specification mean a unit that processes at least one function or operation, which may be implemented as hardware or software, or a combination of hardware and software. .

아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다. Hereinafter, with reference to the accompanying drawings, the embodiments of the present invention will be described in detail so that those skilled in the art can easily carry out the embodiments of the present invention. However, the present invention may be embodied in several different forms and is not limited to the embodiments described herein. And in order to clearly explain the present invention in the drawings, parts irrelevant to the description are omitted, and similar reference numerals are attached to similar parts throughout the specification.

도 1은 본 발명의 실시예에 따른 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템의 대략적 구현 형태와 동작을 나타낸 개요도이고, 도 2는 본 발명의 실시예에 따른 타깃대상자(수배자, 실종자, 보호관리대상자)의 신고 접수를 위한 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템의 동작을 설명하기 위해 나타낸 도면이고, 도 3은 본 발명의 실시예에 따른 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템을 통해 타깃대상자의 현황정보, 검색, 추적정보를 확인하는 동작을 설명하기 위해 나타낸 도면이고, 도 4는 본 발명의 실시예에 따른 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템의 구성을 나타낸 블록도이고, 도 5는 본 발명의 실시예에 따른 사용자 어플리케이션의 구성을 나타낸 도면이고, 도 6은 본 발명의 실시예에 따른 대상자이미지 촬영부의 구성을 나타낸 블록도이고, 도 7은 본 발명의 실시예에 따른 대상자이미지 촬영부의 실행 화면을 나타낸 도면이고, 도 8은 본 발명의 실시예에 따른 타깃대상자 현황정보 제공부의 실행 화면을 나타낸 도면이고, 도 9 및 도 10은 본 발명의 실시예에 따른 타깃대상자 상세정보 검색부의 실행 화면을 나타낸 도면이고, 도 11은 본 발명의 실시예에 따른 타깃대상자 추적위치지도정보 제공부의 실행 화면을 나타낸 도면이고, 도 12는 본 발명의 실시예에 따른 타깃대상자 추적경과리스트정보 제공부의 실행 화면을 나타낸 도면이며, 도 13은 본 발명의 실시예에 따른 관리 서버의 구성을 나타낸 블록도이다.1 is a schematic diagram showing the approximate implementation form and operation of a mobile on-demand CCTV system based on collective cognitive tracking according to an embodiment of the present invention, and FIG. 2 is a target target (wanted person, missing person, protection) according to an embodiment of the present invention It is a diagram illustrating the operation of a mobile on-demand CCTV system based on collective cognitive tracking for receiving a report of a person to be managed), and FIG. 3 is a mobile on-demand CCTV system based on collective cognitive tracking according to an embodiment of the present invention It is a diagram illustrating the operation of checking the status information, search, and tracking information of the target target through 5 is a diagram showing the configuration of a user application according to an embodiment of the present invention, FIG. 6 is a block diagram showing the configuration of a subject image capturing unit according to an embodiment of the present invention, and FIG. 7 is an embodiment of the present invention It is a view showing an execution screen of a target image capturing unit according to an example, and FIG. 8 is a diagram showing an execution screen of a target subject status information providing unit according to an embodiment of the present invention, and FIGS. 9 and 10 are according to an embodiment of the present invention It is a view showing an execution screen of a target target detailed information search unit, and FIG. 11 is a diagram showing an execution screen of a target target tracking location map information providing unit according to an embodiment of the present invention, and FIG. 12 is a target target according to an embodiment of the present invention. It is a view showing an execution screen of the tracking history list information providing unit, and FIG. 13 is a block diagram showing the configuration of a management server according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 실시예에 따른 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템(1000)은 사용자 어플리케이션(100) 및 관리 서버(200) 중 적어도 하나를 포함할 수 있다.Referring to FIG. 1 , a mobile on-demand CCTV system 1000 based on collective cognitive tracking according to an embodiment of the present invention may include at least one of a user application 100 and a management server 200 .

상기 사용자 어플리케이션(100)은, 모바일 통신단말(10)에 설치되고, 모바일 통신단말(10)의 카메라를 통해 촬영된 대상자이미지를 관리 서버(200)로 전송하고, 관리 서버(200)로부터 수신되는 대상자이미지에 대한 매칭 결과에 따라 촬영위치정보를 관리 서버(200)로 전송할 수 있다.The user application 100 is installed in the mobile communication terminal 10, and transmits the target image photographed through the camera of the mobile communication terminal 10 to the management server 200, and is received from the management server 200 The photographing location information may be transmitted to the management server 200 according to the matching result for the target image.

이를 위해 사용자 어플리케이션(100)은 도 5에 도시된 바와 같이 대상자이미지 촬영부(110), 타깃대상자 매칭 요청부(120), 타깃대상자 추적정보 제공부(130), 타깃대상자 현황정보 제공부(140), 타깃대상자 상세정보 검색부(150), 타깃대상자 추적위치지도정보 제공부(160) 및 타깃대상자 추적경과리스트정보 제공부(170) 중 적어도 하나를 포함할 수 있다.To this end, the user application 100 includes a target image photographing unit 110, a target target matching request unit 120, a target target tracking information providing unit 130, and a target target status information providing unit 140, as shown in FIG. ), the target subject detailed information search unit 150 , the target subject tracking location map information providing unit 160 , and the target subject tracking history list information providing unit 170 may include at least one.

상기 대상자이미지 촬영부(110)는, 모바일 통신단말(10)의 카메라를 통해 영상을 촬영하여 대상자이미지를 생성하며, 모바일 통신단말(10)로부터 촬영위치정보 및 촬영시간정보를 각각 획득할 수 있다. 여기서, 대상자이미지는 일반 사용자가 수배자, 실종자, 보호관리대상자라고 추종하는 인물을 촬영한 영상으로 사진이나 동영상 형태의 데이터일 수 있다.The subject image photographing unit 110 generates an image of the subject by taking an image through the camera of the mobile communication terminal 10, and may obtain photographing location information and photographing time information from the mobile communication terminal 10, respectively. . Here, the target image is an image that a general user follows as a wanted person, a missing person, or a person subject to protection management, and may be data in the form of a photo or a video.

이를 위해 대상자이미지 촬영부(110)는 도 6에 도시된 바와 같이 제1 대상자이미지 촬영부(111) 및 제2 대상자이미지 촬영부(112) 중 적어도 하나를 포함할 수 있다.To this end, the subject image capturing unit 110 may include at least one of the first subject image capturing unit 111 and the second subject image capturing unit 112 as shown in FIG. 6 .

상기 제1 대상자이미지 촬영부(111)는, 도 7의 (a)에 도시된 바와 같이 모바일 통신단말(10)의 카메라 사진 촬영 모드에서 기 설정된 물리버튼 또는 가상버튼을 조작하여 대상자이미지를 생성할 수 있다. 이러한 제1 대상자이미지 촬영부(111)는 사용자에 의해 모바일 통신단말(10)에서 제공하는 물리버튼 또는 가상버튼의 조작을 통해 촬영하여 대상자이미지를 생성할 수 있다. 또한, 제1 대상자이미지 촬영부(111)는 촬영대상자의 얼굴을 인식하되, 미리 설정된 얼굴 인식 각도 조건(예를 들어, 촬영대상자가 카메라 정면을 바라보고 있는 조건 등)을 만족하는 경우 자동 촬영할 수 있으며, 이때, 자동으로 연속 사진 촬영을 실행하여 관리 서버(200)에서 해당 대상자 안면인식률을 높이기 위한 다양한 이미지자료를 확보할 수 있다. The first subject image photographing unit 111 operates a preset physical button or virtual button in the camera photo shooting mode of the mobile communication terminal 10 to generate a subject image as shown in (a) of FIG. 7 . can The first subject image capturing unit 111 may generate a subject image by photographing by the user through manipulation of a physical button or a virtual button provided by the mobile communication terminal 10 . In addition, the first subject image photographing unit 111 recognizes the subject's face, but automatically shoots when a preset face recognition angle condition (for example, a condition in which the subject is facing the camera) is satisfied. In this case, it is possible to secure various image data for increasing the target face recognition rate in the management server 200 by automatically executing continuous photo shooting.

상기 제2 대상자이미지 촬영부(112)는, 모바일 통신단말(10)의 카메라 동영상 촬영 모드를 통한 촬영 동작 중에 촬영되는 영상 내 얼굴을 인식하되, 미리 설정된 얼굴 인식 각도 조건에 부합되는 경우 스냅샷을 생성하여 적어도 하나 이상의 대상자후보이미지를 생성하되, 사용자로부터 적어도 하나의 인물이 특정되도록 선택 받기 위한 사용자 인터페이스를 제공하고, 사용자 인터페이스에 의해 선택된 인물이미지에 대한 특정정보를 포함하는 대상자이미지를 생성할 수 있다. 예를 들어, 도 7의 (b)에 도시된 바와 같이 동영상 촬영을 통해 화면 상에 표시되는 인물들의 얼굴을 위치를 인식하여 인식된 얼굴 위치에 박스 이미지가 표시될 수 있는데, 박스 이미지 내 촬영대상자의 얼굴이 카메라 정면을 바라보는 것으로 인식되면 스냅샷을 생성하고, 해당 스냅샵을 하나의 대상자이미지로 저장할 수 있으며, 이러한 스냅샷은 동영상 촬영 중에 얼굴 인식 각도 조건에 부합하는 한 계속해서 생성될 수 있다. 이는, 군중 속에서 촬영하고자 하는 대상자를 특정하여 촬영하기 어려운 상황에서 해당 대상자이미지를 획득하기 위한 기능으로, 동영상 촬영을 통해 촬영대상자가 영상 속에 담기도록 하여 촬영 가능한 상태를 만든 후, 얼굴 인식 각도 조건에 따라 적어도 하나 이상의 스냅샷을 생성하고, 스냅샷 또는 동영상 촬영 영상을 통해 제공되는 사용자 인터페이스를 통해 최종적으로 촬영하고자 하는 적어도 하나 이상의 대상자를 특정하여 대상자이미지를 생성함으로써, 군중 속에서 촬영하고자 하는 대상자를 특정함으로써, 추후 관리 서버(200)에서 인식하고자 하는 대상의 얼굴을 효과적으로 인식할 수 있도록 한다.The second subject image photographing unit 112 recognizes a face in an image captured during a photographing operation through the camera video recording mode of the mobile communication terminal 10, but takes a snapshot if it meets a preset face recognition angle condition It is possible to generate at least one or more target candidate images by generating, providing a user interface for receiving selection from the user so that at least one person is specified, and generating a target image including specific information about the person image selected by the user interface. have. For example, as shown in (b) of FIG. 7 , a box image may be displayed at the recognized face position by recognizing the positions of the faces of people displayed on the screen through video shooting. When the face of the person is recognized as facing the front of the camera, a snapshot can be created and the snapshot can be saved as a single target image, and these snapshots can be created continuously as long as the face recognition angle conditions are met during video recording. have. This is a function to acquire an image of a subject in a situation where it is difficult to specify a subject to be photographed in a crowd, and after making a state in which the subject to be photographed is included in the image through video recording, face recognition angle condition By generating at least one or more snapshots according to the method, and generating a target image by specifying at least one or more subjects to be finally photographed through a user interface provided through a snapshot or video recording image, a subject who wants to be photographed in a crowd By specifying , it is possible to effectively recognize the face of the target to be recognized later by the management server 200 .

상기 타깃대상자 매칭 요청부(120)는, 대상자이미지 촬영부(110)를 통해 대상자이미지를 획득하면, 해당 대상자이미지를 관리 서버(200)로 전송하여 매칭 결과를 요청할 수 있다. 여기서, 매칭 결과의 요청이란 대상자이미지에 포함된 촬영대상자가 기 등록되어 있는 수배자, 실종자, 보호관리대상자 중에 해당사항이 있는지를 요청함을 의미한다.When the target target matching request unit 120 obtains the target image through the target image photographing unit 110 , the target target image may be transmitted to the management server 200 to request a matching result. Here, the request for the matching result means to request whether the subject included in the subject image is among the previously registered wanted persons, missing persons, and persons subject to protection management.

한편, 본 실시예에 따른 사용자 어플리케이션(100)은 관리 서버(200)로 대상자이미지를 전송하여 매칭을 요청하는 것으로 기본 구성될 수 있으나, 사용자 어플리케이션(100)에서 얼굴 매칭 프로그램을 별도로 구축하고, 관리 서버(200)로부터 타깃대상자이미지와 얼굴에 대한 특징정보들을 미리 다운로드함으로써 사용자 어플리케이션(100) 자체적으로 얼굴 매칭 프로세스를 실시하여도 무방하다.On the other hand, the user application 100 according to the present embodiment may be basically configured to send a target image to the management server 200 to request matching, but separately build and manage a face matching program in the user application 100 The user application 100 itself may perform the face matching process by downloading the target subject image and feature information on the face in advance from the server 200 .

상기 타깃대상자 추적정보 제공부(130)는, 관리 서버(200)로부터 매칭 여부에 대한 결과를 수신하되, 기 등록된 타깃대상자와 매칭되는 결과(즉, 사용자가 제공한 대상자이미지의 대상자가 기 등록된 타깃대상자 중 적어도 하나와 일치한다는 결과)를 수신하는 경우 대상자이미지에 대한 촬영위치정보 및 촬영시간정보를 관리 서버(200)로 전송할 수 있다.The target subject tracking information providing unit 130 receives the result of whether or not the match is received from the management server 200, but the result matching the pre-registered target subject (that is, the subject of the subject image provided by the user is pre-registered) When receiving a result that matches at least one of the target subjects), the shooting location information and the shooting time information for the target image may be transmitted to the management server 200 .

상기 타깃대상자 현황정보 제공부(140)는, 관리 서버(200)로부터 수배자, 실종자 및 보호관리대상자 중 적어도 하나에 대한 타깃대상자 현황정보를 수신하여 제공할 수 있다. 예를 들어, 도 8에 도시된 바와 같이, 수배자의 경우 신규수배자 인원수, 신규수배자 중 검거된 인원수에 대한 수치적 현황정보를 확인할 수 있고, 실종자의 경우 신규실종자의 인원수, 신규실종자 중 검거된 인원수에 대한 수치적 현황정보를 확인할 수 있으며, 보호관리대상자의 경우 신규 등록된 인원수에 대한 수치적 현황정보를 확인할 수 있다.The target target status information providing unit 140 may receive and provide target target status information about at least one of a wanted person, a missing person, and a protection management target from the management server 200 . For example, as shown in FIG. 8 , in the case of wanted persons, numerical status information on the number of new wanted persons and the number of persons arrested among new wanted persons can be checked, and in the case of missing persons, the number of new missing persons and the number of persons arrested among new missing persons You can check the numerical current status information about

상기 타깃대상자 상세정보 검색부(150)는, 수배자, 실종자 및 보호관리대상자 중 적어도 하나의 타깃대상자에 대한 텍스트 및 이미지 중 적어도 하나의 검색 요청 콘텐츠를 입력하고, 관리 서버(200)로 검색 요청 콘텐츠를 대한 검색을 요청하며, 관리 서버(200)로부터 검색요청에 따른 타깃대상자 상세정보를 수신하여 제공할 수 있다. 예를 들어, 도 9에 도시된 바와 같이 찾고자 하는 타깃대상자 즉 수배자, 실종자 및 보호관리대상자 등의 이름에 대한 텍스트 정보를 검색란에 입력하여 해당 타깃대상자에 대한 검색을 요청하거나, 이미지 검색을 통해 타깃대상자에 대한 검색을 요청할 수 있다. 또한, 타깃대상자의 이름이 아니라 타깃대상자에 대한 일반적인 검색 요청, 예를 들어, 수배자들에 대한 추적정보, 신규수배자정보에 대한 정보 요청, 실종자들에 대한 추적정보, 신규실종자정보에 대한 정보 요청도 가능하며, 해당 요청에 대한 다양한 정보들을 도 10에 도시된 바와 같이 제공할 수 있다.The target target detailed information search unit 150 inputs at least one search request content among texts and images for at least one target target of a wanted person, a missing person, and a person subject to protection management, and sends the search request content to the management server 200 . may request a search for , and may receive and provide target target detailed information according to the search request from the management server 200 . For example, as shown in FIG. 9 , text information about the name of the target person to be found, such as a wanted person, a missing person, and a person subject to protection management, is input into the search box to request a search for the target person, or an image search to You can request a search for a subject. In addition, not the name of the target target, but a general search request for the target target, for example, tracking information about wanted people, information request for new wanted information, tracking information about missing people, information request for new missing person information It is possible, and various information about the corresponding request may be provided as shown in FIG. 10 .

상기 타깃대상자 추적위치지도정보 제공부(160)는, 추적 중인 해당 타깃대상자의 추적 위치 별로 촬영시간정보 및 타깃대상자 일치율정보가 부가된 추적위치지도정보를 관리 서버(200)로부터 수신 받아 제공할 수 있다. 예를 들어, 어떠한 수배자가 추적 신고 접수가 된 상태에서 해당 수배자에 대한 추적 신고 접수가 누적되면, 해당 수배자에 대한 이미지, 촬영위치정보, 촬영시간정보가 누적되는데, 이러한 누적정보를 기반으로 도 11에 도시된 바와 같이 지도 상에서 해당 수배자가 어느 지점에서 사용자들에 의해 발견이 되었는지를 표시하여 제공할 수 있으며, 각 표시 지점(수배자 발견 및 촬영지점)을 선택하면, 해당 지점에서 발견된 시간 즉 촬영시간에 대한 정보와 함께 타깃대상자 일치율정보(대상자와 타깃대상자 간의 얼굴 매칭율)를 제공할 수 있다. The target subject tracking location map information providing unit 160 may receive and provide tracking location map information to which shooting time information and target target match rate information are added from the management server 200 for each tracking location of the target target being tracked. have. For example, if tracking reports are accumulated for a wanted person while a tracking report is received, images, shooting location information, and shooting time information about the wanted person are accumulated. As shown in Fig., it is possible to display and provide at which point the wanted person was discovered by users on the map. It is possible to provide target target matching rate information (a face matching rate between a target and a target target) together with time information.

상기 타깃대상자 추적경과리스트정보 제공부(170)는, 추적 중인 해당 타깃대상자에 대한 촬영위치정보와 타깃대상자 일치율정보가 촬영시간정보의 순으로 정렬된 추적경과리스트정보를 관리 서버(200)로부터 수신 받아 제공할 수 있다. 예를 들어, 도 12에 도시된 바와 같이, 수배자 홍길동에 대하여 총 7건 접수 건에 대하여 신고 접수 시간 순으로 정렬되며, 정렬된 각 항목 별로 제보된 영상의 촬영시간과 촬영위치(위도, 경도) 및 대상자와 타깃대상자 간의 얼굴 매칭율에 대한 정보를 각각 제공할 수 있다.The target subject tracking history list information providing unit 170 receives the tracking history list information in which shooting location information and target target match rate information for the target subject being tracked are arranged in the order of shooting time information from the management server 200 can receive and provide. For example, as shown in FIG. 12 , for a total of 7 cases received for wanted person Hong Gil-dong, they are sorted in the order of report reception time, and the shooting time and shooting location (latitude, longitude) of the reported video for each sorted item. and information on a face matching rate between the subject and the target subject, respectively.

상기 관리 서버(200)는, 모바일 통신단말과 이동통신망을 통해 연결되고, 상기 대상자이미지의 촬영대상자의 안면인식정보 및 기 등록된 타깃대상자의 안면특징정보 간의 매칭 프로세스를 실행하여 상기 사용자 어플리케이션으로 매칭 결과를 제공하고, 매칭 시 해당 타깃대상자에 대한 추적신고를 접수하고, 상기 대상자이미지와 상기 촬영위치정보를 기반으로 해당 타깃대상자의 위치를 추적The management server 200 is connected to a mobile communication terminal through a mobile communication network, and executes a matching process between the facial recognition information of the subject to be photographed of the subject image and the facial feature information of the previously registered target subject to match the user application Provides a result, receives a tracking report for the target target during matching, and tracks the target target's location based on the target image and the shooting location information

이를 위해 관리 서버(200)는 도 13에 도시된 바와 같이, 타깃대상자 매칭 실행부(210), 타깃대상자 추적 신고 접수부(220), 타깃대상자 추적정보 관리부(230), 타깃대상자 현황정보 관리부(240), 타깃대상자 상세정보 관리부(250), 타깃대상자 추적위치지도정보 관리부(260) 및 타깃대상자 추적경과리스트 관리부(270) 중 적어도 하나를 포함할 수 있다.To this end, as shown in FIG. 13 , the management server 200 includes a target target matching execution unit 210 , a target target tracking report receiving unit 220 , a target target tracking information management unit 230 , and a target target status information management unit 240 . ), the target target detailed information management unit 250 , the target target tracking location map information management unit 260 , and the target target tracking history list management unit 270 .

상기 타깃대상자 매칭 실행부(210)는, 사용자 어플리케이션(100)으로부터 수신된 대상자이미지에 대한 안면인식 프로세스를 수행하고, 대상자이미지에 대한 안면인식 결과와 기 등록된 타깃대상자의 안면특징정보 간의 매칭 프로세스를 실행하여 매칭 여부에 대한 결과를 제공할 수 있다. 이때, 대상자이미지에 대한 안면인식 결과는 수배자, 실종자, 보호관리대상자 등의 다양한 카테고리의 타깃대상자들과의 얼굴 매칭을 위해 각각 적용될 수 있으며, 사용자가 매칭 요청을 할 때 수배자, 실종자 또는 보호관리대상자 등의 타깃을 설정하면 모든 타깃의 카테고리에 대한 얼굴 매칭을 수행하지 않고 특정 타깃의 카테고리 내에서만 얼굴 매칭을 수행할 수도 있다. 또한, 타깃대상자 매칭 실행부(210)는 얼굴 매칭 프로세스 결과 매칭 여부에 대한 결과와 함께 매칭율에 대한 수치적 정보도 제공할 수 있으며, 이는 상술한 일치율정보에 반영될 수 있으며, 특정 타깃대상자에 대한 얼굴 매칭 결과가 누적될 때마다 일치율정보(얼굴 매칭율)는 평균치를 계산되어 반영될 수 있다.The target target matching execution unit 210 performs a facial recognition process for the target image received from the user application 100, and a matching process between the facial recognition result for the target image and the registered target target's facial feature information can be executed to provide a result of whether or not a match is made. At this time, the facial recognition result for the target image can be applied for face matching with target targets of various categories such as wanted person, missing person, protection management target, etc. If the target is set, face matching may be performed only within a specific target category without performing face matching for all target categories. In addition, the target target matching execution unit 210 may provide numerical information on the matching rate along with the result of whether the face matching process result is matched, which may be reflected in the above-described matching rate information, and may be applied to a specific target target. Whenever face matching results are accumulated, the matching rate information (face matching rate) may be calculated and reflected as an average value.

상기 타깃대상자 추적 신고 접수부(220)는, 타깃대상자 매칭 실행부(210)의 매칭 여부에 대한 결과로 기 등록된 타깃대상자와 매칭되는 경우, 기 등록된 타깃대상자에 대한 추적 신고를 접수할 수 있다. 이와 같이 추적 신고가 신규로 접수되면 해당 타깃대상자에 대한 항목을 별도로 생성하고, 해당 신규 항목에 대하여 지속적으로 접수되는 데이터들을 누적시킬 수 있다. 한편, 모바일 통신단말(10)은 신고 접수 시 해당 단말의 전화번호, 단말고유식별번호 등을 함께 타깃대상자 추적 신고 접수부(220)로 제공할 수 있다.The target target tracking report receiving unit 220 may receive a tracking report for the pre-registered target target if the target target matching execution unit 210 matches the registered target target as a result of matching. . As such, when a tracking report is newly received, an item for the corresponding target person may be separately created, and data continuously received for the new item may be accumulated. On the other hand, the mobile communication terminal 10 may provide the target target tracking report reception unit 220 together with the phone number of the terminal, the terminal unique identification number, etc. when receiving the report.

상기 타깃대상자 추적정보 관리부(230)는, 타깃대상자 추적 신고 접수부(220)를 통해 추적 신고 접수 처리한 모바일 통신단말(10)로 대상자이미지의 촬영위치정보와 촬영시간정보를 요청하여 수신하고, 수신된 촬영위치정보와 촬영시간정보를 해당 타깃대상자에 대한 추적정보로 제1 데이터베이스(231)에 저장할 수 있다. 좀 더 구체적으로, 사용자가 제공한 대상자이미지에 포함된 인물이 어떠한 타깃대상자와 미리 설정된 기준치 이상의 일치율을 나타내는 경우 타깃대상자 추적 신고 접수부(220)에 의해 추적 신고 접수되며, 이때 타깃대상자 추적정보 관리부(230)는 대상자이미지의 촬영위치정보와 촬영시간정보를 요청하고 그에 따른 정보들을 수신할 수 있다.The target subject tracking information management unit 230 requests and receives the shooting location information and shooting time information of the target image from the mobile communication terminal 10 that has received and processed the tracking report through the target target tracking report receiving unit 220, and receives, The captured photographing location information and photographing time information may be stored in the first database 231 as tracking information for a corresponding target person. More specifically, if the person included in the target image provided by the user exhibits a matching rate greater than or equal to a preset reference value with a certain target target, the tracking report is received by the target target tracking report receiving unit 220, at this time the target target tracking information management unit ( 230) may request photographing location information and photographing time information of the target image and receive information accordingly.

상기 타깃대상자 현황정보 관리부(240)는, 수배자 현황정보, 실종자 현황정보 및 보호관리대상자 현황정보 중 적어도 하나를 등록 관리하며, 사용자 어플리케이션(100)으로 제공할 수 있다. 예를 들어 도 8에 도시된 바와 같이, 수배자의 경우 신규수배자 인원수, 신규수배자 중 검거된 인원수에 대한 수치적 현황정보를 제공할 수 있고, 실종자의 경우 신규실종자의 인원수, 신규실종자 중 검거된 인원수에 대한 수치적 현황정보를 제공할 수 있으며, 보호관리대상자의 경우 신규 등록된 인원수에 대한 수치적 현황정보를 제공할 수 있다.The target target status information management unit 240 may register and manage at least one of wanted status information, missing person status information, and protection management target status information, and provide it to the user application 100 . For example, as shown in Figure 8, in the case of wanted, it is possible to provide numerical status information on the number of new wanted people and the number of people arrested among new wanted people, and in the case of missing people, the number of new missing people, the number of people arrested among new missing people It is possible to provide numerical current status information about

상기 타깃대상자 상세정보 관리부(250)는, 사용자 어플리케이션(100)으로부터 수배자, 실종자 및 보호관리대상자 중 적어도 하나의 타깃대상자에 대한 텍스트 및 이미지 중 적어도 하나의 검색 요청 콘텐츠를 수신하고, 수배자 상세정보, 실종자 상세정보 및 보호관리대상자 상세정보를 기반으로 미리 구축된 제2 데이터베이스(251)로부터 검색 요청 콘텐츠에 해당하는 타깃대상자정보를 사용자 어플리케이션(100)으로 제공할 수 있다. 예를 들어, 도 9에 도시된 바와 같이 사용자 어플리케이션(100)을 통해 찾고자 하는 타깃대상자 즉 수배자, 실종자 및 보호관리대상자 등의 이름에 대한 텍스트 형태의 검색어를 입력 받아 특정 타깃대상자에 대한 검색을 요청 받을 수 있고, 이미지 검색을 통해 타깃대상자에 대한 검색을 요청 받을 수 있다. 이러한 검색 요청 결과로, 타깃대상자의 이름이 아니라 타깃대상자에 대한 일반적인 검색 요청, 예를 들어, 도 10에 도시된 바와 같이 추적 중인 수배자들에 대한 상세정보, 신규 수배자들에 대한 상세정보 등을 제공할 수 있다.The target target detailed information management unit 250 receives, from the user application 100, at least one search request content of text and an image for at least one target target of wanted, missing, and protection management, wanted detailed information, Target target information corresponding to the search request content may be provided to the user application 100 from the second database 251 built in advance based on the detailed information of the missing person and the detailed information of the person subject to protection management. For example, as shown in FIG. 9 , a search for a specific target target is requested by inputting a search word in the form of a text for the name of the target target, that is, wanted, missing, and protection management target through the user application 100 as shown in FIG. You can receive a search request for a target person through image search. As a result of such a search request, a general search request for a target person, not the name of the target person, for example, detailed information about wanted people being tracked as shown in FIG. 10, detailed information about new wanted people, etc. are provided can do.

상기 타깃대상자 추적위치지도정보 관리부(260)는, 타깃대상자 추적정보 관리부(250)를 통해 관리되는 타깃대상자 추적정보가 적용된 추적위치지도정보를 생성하되, 추적 위치 별로 상기 촬영시간정보를 부가하여 생성할 수 있다. 예를 들어, 어떠한 수배자가 추적 신고 접수가 된 상태에서 해당 수배자에 대한 추적 신고 접수가 누적되면, 해당 수배자에 대한 이미지, 촬영위치정보, 촬영시간정보가 누적되는데, 이러한 누적정보를 기반으로 도 11에 도시된 바와 같이 지도 상에서 해당 수배자가 어느 지점에서 사용자들에 의해 발견이 되었는지를 표시하여 제공할 수 있으며, 각 표시 지점(수배자 발견 및 촬영지점)에서 발견된 시간 즉 촬영시간에 대한 정보와 함께 타깃대상자 일치율정보(대상자와 타깃대상자 간의 얼굴 매칭율)를 제공할 수 있다. The target subject tracking location map information management unit 260 generates the tracking location map information to which the target target tracking information managed through the target target tracking information management unit 250 is applied, by adding the shooting time information for each tracking location. can do. For example, if tracking reports are accumulated for a wanted person while a tracking report is received, images, shooting location information, and shooting time information about the wanted person are accumulated. As shown in , it is possible to display and provide at which point the wanted person was discovered by users on the map, and the time at which the wanted person was found at each display point (the wanted person discovery and shooting point), that is, along with information about the shooting time. It is possible to provide target target matching rate information (a face matching rate between the target and the target target).

상기 타깃대상자 추적경과리스트 관리부(270)는, 타깃대상자 추적정보 관리부(260)를 통해 관리되는 타깃대상자 추적정보를 리스트화하되, 촬영위치정보와 타깃대상자 일치율정보를 촬영시간정보의 순으로 해당 리스트를 정렬하여 해당 타깃대상자에 대한 추적경과리스트정보를 생성할 수 있다. 예를 들어, 도 12에 도시된 바와 같이, 수배자 홍길동에 대하여 총 7건 접수 건에 대하여 신고 접수 시간 순으로 정렬되며, 정렬된 각 항목 별로 제보된 영상의 촬영시간과 촬영위치(위도, 경도) 및 대상자와 타깃대상자 간의 얼굴 매칭율에 대한 정보를 각각 제공할 수 있다.The target subject tracking history list management unit 270 lists the target subject tracking information managed through the target subject tracking information management unit 260, and lists the shooting location information and the target subject matching rate information in the order of shooting time information. You can create tracking history list information for the target target by sorting them. For example, as shown in FIG. 12 , for a total of 7 cases received for wanted person Hong Gil-dong, they are sorted in the order of report reception time, and the shooting time and shooting location (latitude, longitude) of the reported video for each sorted item. and information on a face matching rate between the subject and the target subject, respectively.

본 실시예에 따른 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템은, 모바일 통신단말의 카메라를 통해 카메라의 화면에 들어온 얼굴 이미지를 모바일 통신단말 또는 관리 서버에 저장된 얼굴 이미지와 비교하여 일차적으로 이미지 매칭 일치율을 파악하고, 그와 함께 주변의 다른 모바일 통신단말에서 파악된 이미지들을 함께 수집하여 유사성이 높은 동일 이미지가 이동하는 동선까지 함께 파악함으로써 대상 확인의 정확성을 높이고, 최종적으로 찾고자 하는 대상의 위치 및 동선까지 구체적으로 확보할 수 있다.The mobile on-demand CCTV system based on collective cognitive tracking according to this embodiment compares the face image entered on the screen of the camera through the camera of the mobile communication terminal with the face image stored in the mobile communication terminal or management server, and first image matching Accuracy of target identification is improved by identifying the coincidence rate, and images identified from other nearby mobile communication terminals are collected together to identify the movement path of the same image with high similarity, and the location and location of the target to be finally found It is possible to secure the route in detail.

또한, 이미지 인식 기술의 정확도가 매우 높지만 환경과 위치에 따라 인식률이 차이가 발생함을 고려하여 집합적 인지를 통한 다중 정보 비교와 함께 위치 인식 기술을 연계함으로써 이미지 인식, 특히 안면 인식 기술의 제약을 상황 기반의 인지 및 추적을 통해 극복할 수 있다. 또한, 비용, 관리 및 활용의 측면에서 고정형 CCTV보다 월등히 뛰어난 모바일 통신단말의 카메라를 활용함으로써 높은 해상도를 통한 이미지 인식률 증가, 집합적 교차 인지를 통한 대상 파악 정확성 증가, 스냅샷을 통한 이미지 처리로 데이터 트랜잭션 감소, CCTV 사각지대의 감소 효과를 기대할 수 있다. In addition, considering that the accuracy of the image recognition technology is very high, but the recognition rate differs depending on the environment and location, by linking the location recognition technology with multiple information comparison through collective recognition, the limitations of image recognition, especially facial recognition technology, are eliminated. This can be overcome through situational awareness and tracking. In addition, by utilizing a camera of a mobile communication terminal that is far superior to a fixed CCTV in terms of cost, management and utilization, the image recognition rate through high resolution increases, the target identification accuracy increases through collective cross recognition, and data through image processing through snapshots Transaction reduction and CCTV blind spots can be expected to be reduced.

또한, 경찰청, 행정안전부, 여성가족부, 지자체 등과 같은 공공기관과 협조하여 일급범죄자, 현상범, 실종자, 보호관리대상자 데이터베이스를 연계하고 경찰 또는 인가된 사용자들의 모바일 통신단말이 언제 어디서나 온디맨드 CCTV 역할을 할 수 있도록 구현됨으로써, 공익적인 측면에서 여론의 지지가 확보되면 일반인들에게까지 확대될 수 있다.In addition, in cooperation with public institutions such as the National Police Agency, the Ministry of Public Administration and Security, the Ministry of Gender Equality and Family, and local governments, the database of first-class criminals, present criminals, missing persons, and persons subject to protection management is linked, and the mobile communication terminals of the police or authorized users can play the role of on-demand CCTV anytime, anywhere. By implementing it so that public opinion is supported in the public interest, it can be extended to the general public.

또한, 개별 모바일 통신단말의 절차는 모두 동일하며 모바일 통신단말의 카메라가 활성화될 때부터 이미지 매칭 및 위치정보를 보내는 과정은 특별한 수작업 없이 자동화 과정으로 연계, 사용자의 참여가 증가할수록 집합적 정보의 분석 과정을 통해 정보의 유효성이 증가할 수 있다. 즉, 등록된 대상 관련 수집된 정보(위치정보, 이미지 매칭 일치율)를 지속적으로 축적하고 추적하여 정확한 대상 확인 및 대상의 이동경로 확인, 모바일 통신단말을 통해서 수집된 정보가 많을수록 높은 정확성을 확보할 수 있다.In addition, the procedures for individual mobile communication terminals are all the same, and from the time the camera of the mobile communication terminal is activated, the process of image matching and sending location information is linked to an automated process without special manual work. As the user's participation increases, collective information analysis The process can increase the validity of the information. That is, by continuously accumulating and tracking the collected information related to the registered object (location information, image matching matching rate), the more accurate the object and the movement path of the object, the higher the accuracy can be secured. have.

이상에서 설명한 것은 본 발명에 의한 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템을 실시하기 위한 하나의 실시예에 불과한 것으로서, 본 발명은 상기 실시예에 한정되지 않고, 이하의 특허청구범위에서 청구하는 바와 같이 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변경 실시가 가능한 범위까지 본 발명의 기술적 정신이 있다고 할 것이다.What has been described above is only one embodiment for implementing a mobile on-demand CCTV system based on collective cognitive tracking according to the present invention, and the present invention is not limited to the above embodiment, but is claimed in the claims below. As such, without departing from the gist of the present invention, it will be said that the technical spirit of the present invention exists to the extent that various modifications can be made by anyone with ordinary knowledge in the field to which the present invention belongs.

1000: 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템
100: 사용자 어플리케이션
110: 대상자이미지 촬영부
111: 제1 대상자이미지 촬영부
112: 제2 대상자이미지 촬영부
120: 대상자 매칭 요청부
130: 대상자 추적정보 제공부
140: 타깃대상자 현황정보 제공부
150: 타깃대상자 상세정보 검색부
160: 타깃대상자 추적위치지도정보 제공부
170: 타깃대상자 추적경과리스트정보 제공부
200: 관리 서버
210: 타깃대상자 매칭 실행부
220: 타깃대상자 추적 신고 접수부
230: 타깃대상자 추적정보 관리부
231: 제1 데이터베이스
240: 타깃대상자 현황정보 관리부
250: 타깃대상자 상세정보 관리부
251: 제2 데이터베이스
260: 타깃대상자 추적위치지도정보 관리부
270: 타깃대상자 추적경과리스트 관리부
10: 모바일 통신단말1000: Mobile on-demand CCTV system based on collective cognitive tracking
100: user application
110: subject image photographing unit
111: first subject image photographing unit
112: second subject image photographing unit
120: target matching request unit
130: subject tracking information providing unit
140: target target status information providing unit
150: target target detailed information search unit
160: target target tracking location map information providing unit
170: target subject tracking progress list information providing unit
200: management server
210: target target matching execution unit
220: Target target tracking report reception unit
230: target subject tracking information management unit
231: first database
240: target target status information management unit
250: target target detailed information management unit
251: second database
260: target subject tracking location map information management unit
270: target subject tracking history list management unit
10: mobile communication terminal

Claims (7)

모바일 통신단말에 설치되고, 모바일 통신단말의 카메라를 통해 촬영된 대상자이미지를 관리 서버로 전송하고, 상기 관리 서버로부터 수신되는 상기 대상자이미지에 대한 매칭 결과에 따라 촬영위치정보를 상기 관리 서버로 전송하는 사용자 어플리케이션; 및
모바일 통신단말과 이동통신망을 통해 연결되고, 상기 대상자이미지의 촬영대상자의 안면인식정보 및 기 등록된 타깃대상자의 안면특징정보 간의 매칭 프로세스를 실행하여 상기 사용자 어플리케이션으로 매칭 결과를 제공하고, 매칭 시 해당 타깃대상자에 대한 추적신고를 접수하고, 상기 대상자이미지와 상기 촬영위치정보를 기반으로 해당 타깃대상자의 위치를 추적하는 관리 서버를 포함하고,
상기 사용자 어플리케이션은,
모바일 통신단말의 카메라를 통해 영상을 촬영하여 상기 대상자이미지를 생성하며, 모바일 통신단말로부터 상기 촬영위치정보 및 촬영시간정보를 각각 획득하는 대상자이미지 촬영부;
상기 대상자이미지를 상기 관리 서버로 전송하여 매칭 결과를 요청하는 대상자 매칭 요청부; 및
상기 관리 서버로부터 매칭 여부에 대한 결과를 수신하되, 기 등록된 타깃대상자와 매칭되는 결과를 수신하는 경우 상기 촬영위치정보 및 상기 촬영시간정보를 상기 관리 서버로 전송하는 대상자 추적정보 제공부를 포함하고,
상기 대상자이미지 촬영부는,
모바일 통신단말의 카메라 사진 촬영 모드에서 기 설정된 물리버튼 또는 가상버튼을 조작하여 상기 대상자이미지를 생성하는 제1 대상자이미지 촬영부; 및
모바일 통신단말의 카메라 동영상 촬영 모드를 통한 동영상 촬영 동작 중에 촬영되는 영상 내 다수의 얼굴을 인식하여 인식된 얼굴 위치에 박스 이미지를 각각 표시하고, 상기 박스 이미지 내의 각 얼굴에 대하여 미리 설정된 얼굴 인식 각도 조건에 부합되는 경우 스냅샷을 생성하되, 동영상 촬영 중에 얼굴 인식 각도 조건에 부합되는 한 계속해서 생성하여 적어도 하나 이상의 대상자후보이미지를 생성하고, 대상자후보이미지를 생성하기 위해 스냅샵에서 사용자로부터 적어도 하나의 인물이 특정되도록 선택 받기 위한 사용자 인터페이스를 제공하고, 사용자 인터페이스에 의해 선택된 인물이미지에 대한 특정정보를 포함하는 상기 대상자이미지를 생성하는 제2 대상자이미지 촬영부를 포함하는 것을 특징으로 하는 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템.
It is installed in the mobile communication terminal, transmits the target image photographed through the camera of the mobile communication terminal to the management server, and transmits the photographing location information to the management server according to the matching result for the target image received from the management server user application; and
It is connected through a mobile communication terminal and a mobile communication network, and executes a matching process between the facial recognition information of the subject image of the subject image and the facial feature information of the previously registered target subject to provide a matching result to the user application, A management server that receives a tracking report for a target person, and tracks the location of the target target based on the target image and the photographing location information,
The user application is
a subject image capturing unit for generating the subject image by taking an image through the camera of the mobile communication terminal, and obtaining the photographing location information and the photographing time information from the mobile communication terminal, respectively;
a target matching request unit for requesting a matching result by transmitting the target image to the management server; and
Receiving a result of whether or not matching from the management server, including a subject tracking information providing unit that transmits the photographing location information and the photographing time information to the management server when receiving a result matching with a pre-registered target target;
The subject image photographing unit,
a first subject image capturing unit for generating the subject image by manipulating a preset physical button or a virtual button in a camera photo capturing mode of the mobile communication terminal; and
A plurality of faces in an image captured during a video recording operation through a camera video recording mode of a mobile communication terminal are recognized and a box image is displayed at the recognized face position, respectively, and a preset face recognition angle condition for each face in the box image Creates a snapshot if it meets the criteria, but continues to create as long as it meets the face recognition angle condition during video recording to generate at least one target candidate image, and at least one Collective cognitive tracking base, comprising: a second target image capturing unit that provides a user interface for receiving a selection so that a person is specified, and generates the target image including specific information on the person image selected by the user interface 's mobile on-demand CCTV system.
 삭제delete 제1 항에 있어서,
상기 사용자 어플리케이션은,
상기 관리 서버로부터 수배자, 실종자 및 보호관리대상자 중 적어도 하나에 대한 타깃대상자 현황정보를 수신하여 제공하는 타깃대상자 현황정보 제공부; 및
수배자, 실종자 및 보호관리대상자 중 적어도 하나의 타깃대상자에 대한 텍스트 및 이미지 중 적어도 하나의 검색 요청 콘텐츠를 입력하고, 상기 관리 서버로 상기 검색 요청 콘텐츠를 대한 검색을 요청하며, 상기 관리 서버로부터 검색요청에 따른 타깃대상자 상세정보를 수신하여 제공하는 타깃대상자 상세정보 검색부를 더 포함하는 것을 특징으로 하는 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템.
The method of claim 1,
The user application is
a target target status information providing unit for receiving and providing target target status information about at least one of a wanted person, a missing person, and a protection management target from the management server; and
Inputs at least one search request content among texts and images for at least one target person among wanted people, missing persons, and persons subject to protection management, requests a search for the search request content to the management server, and requests a search from the management server Collective cognitive tracking-based mobile on-demand CCTV system, characterized in that it further comprises a target target detailed information search unit for receiving and providing detailed target target information according to the
 제3 항에 있어서,
상기 사용자 어플리케이션은,
추적 중인 해당 타깃대상자의 추적 위치 별로 상기 촬영시간정보 및 타깃대상자 일치율정보가 부가된 추적위치지도정보를 상기 관리 서버로부터 수신 받아 제공하는 타깃대상자 추적위치지도정보 제공부; 및
추적 중인 해당 타깃대상자에 대한 상기 촬영위치정보와 타깃대상자 일치율정보가 상기 촬영시간정보의 순으로 정렬된 추적경과리스트정보를 상기 관리 서버로부터 수신 받아 제공하는 타깃대상자 추적경과리스트정보 제공부를 더 포함하는 것을 특징으로 하는 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템.
4. The method of claim 3,
The user application is
a target target tracking location map information providing unit for receiving and providing tracking location map information to which the shooting time information and target target match rate information are added for each tracking location of the target target being tracked from the management server; and
Further comprising a target subject tracking history list information providing unit for receiving from the management server tracking history list information in which the shooting location information and target target match rate information for the target subject being tracked are arranged in the order of the shooting time information A mobile on-demand CCTV system based on collective cognitive tracking, characterized in that.
 제1 항에 있어서,
상기 관리 서버는,
상기 사용자 어플리케이션으로부터 수신된 상기 대상자이미지에 대한 안면인식 프로세스를 수행하고, 상기 대상자이미지에 대한 안면인식 결과와 기 등록된 타깃대상자의 안면특징정보 간의 매칭 프로세스를 실행하여 매칭 여부에 대한 결과를 제공하는 타깃대상자 매칭 실행부;
상기 타깃대상자 매칭 실행부의 매칭 여부에 대한 결과로 기 등록된 타깃대상자와 매칭되는 경우, 기 등록된 타깃대상자에 대한 추적 신고를 접수하는 타깃대상자 추적 신고 접수부; 및
상기 타깃대상자 추적 신고 접수부를 통해 추적 신고 접수 처리한 모바일 통신단말로 상기 대상자이미지의 상기 촬영위치정보와 촬영시간정보를 요청하여 수신하고, 수신된 상기 촬영위치정보와 상기 촬영시간정보를 해당 타깃대상자에 대한 추적정보로 제1 데이터베이스에 저장하는 타깃대상자 추적정보 관리부를 포함하는 것을 특징으로 하는 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템.
The method of claim 1,
The management server,
Performing a facial recognition process for the target image received from the user application, and executing a matching process between the facial recognition result for the target image and the facial feature information of the pre-registered target target to provide a result of whether to match target target matching execution unit;
a target target tracking report receiving unit that receives a tracking report for a pre-registered target target when matching with a previously registered target target as a result of the matching of the target target matching execution unit; and
Request and receive the shooting location information and shooting time information of the target image from the mobile communication terminal that has received and processed the tracking report through the target target tracking report reception unit, and transmits the received shooting location information and the shooting time information to the target target person A mobile on-demand CCTV system based on collective cognitive tracking, characterized in that it comprises a target target tracking information management unit that stores the tracking information in the first database as tracking information for the.
 제5 항에 있어서,
상기 관리 서버는,
수배자 현황정보, 실종자 현황정보 및 보호관리대상자 현황정보 중 적어도 하나를 등록 관리하며, 상기 사용자 어플리케이션으로 제공하는 타깃대상자 현황정보 관리부; 및
상기 사용자 어플리케이션으로부터 수배자, 실종자 및 보호관리대상자 중 적어도 하나의 타깃대상자에 대한 텍스트 및 이미지 중 적어도 하나의 검색 요청 콘텐츠를 수신하고, 수배자 상세정보, 실종자 상세정보 및 보호관리대상자 상세정보를 기반으로 미리 구축된 제2 데이터베이스로부터 상기 검색 요청 콘텐츠에 해당하는 타깃대상자정보를 상기 사용자 어플리케이션으로 제공하는 타깃대상자 상세정보 관리부를 더 포함하는 것을 특징으로 하는 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템.
6. The method of claim 5,
The management server,
Wanted status information, missing person status information, and manages at least one of the status information of the target person for protection management, and provides the target target status information management unit to the user application; and
Receives from the user application at least one search request content of text and images for at least one target of wanted, missing, and protection management, and based on wanted detailed information, missing person detailed information and protection management target detailed information in advance The mobile on-demand CCTV system based on collective cognitive tracking further comprises a target target detailed information manager that provides target target information corresponding to the search request content from the built second database to the user application.
 제5 항에 있어서,
상기 관리 서버는,
상기 타깃대상자 추적정보 관리부를 통해 관리되는 타깃대상자 추적정보가 적용된 추적위치지도정보를 생성하되, 추적 위치 별로 상기 촬영시간정보 및 타깃대상자 일치율정보를 부가하여 생성하는 타깃대상자 추적위치지도정보 관리부; 및
상기 타깃대상자 추적정보 관리부를 통해 관리되는 타깃대상자 추적정보를 리스트화하되, 상기 촬영위치정보와 타깃대상자 일치율정보를 상기 촬영시간정보의 순으로 해당 리스트를 정렬하여 해당 타깃대상자에 대한 추적경과리스트정보를 생성하는 타깃대상자 추적경과리스트정보 관리부를 더 포함하는 것을 특징으로 하는 집합적 인지 추적 기반의 모바일 온디맨드 CCTV 시스템.
6. The method of claim 5,
The management server,
a target target tracking location map information management unit for generating tracking location map information to which target target tracking information managed through the target target tracking information management unit is applied, and adding the shooting time information and target target matching rate information for each tracking location; and
Listing the target target tracking information managed through the target target tracking information management unit, sorting the list of the shooting location information and the target target matching rate information in the order of the shooting time information, tracking history list information for the target target Collective cognitive tracking-based mobile on-demand CCTV system, characterized in that it further comprises a target subject tracking history list information management unit to generate a.
KR1020210082502A 2021-06-24 2021-06-24 Mobile ondemand cctv system based on collective cross check and tracking KR102420151B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210082502A KR102420151B1 (en) 2021-06-24 2021-06-24 Mobile ondemand cctv system based on collective cross check and tracking

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210082502A KR102420151B1 (en) 2021-06-24 2021-06-24 Mobile ondemand cctv system based on collective cross check and tracking

Publications (1)

Publication Number Publication Date
KR102420151B1 true KR102420151B1 (en) 2022-07-13

Family

ID=82401369

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210082502A KR102420151B1 (en) 2021-06-24 2021-06-24 Mobile ondemand cctv system based on collective cross check and tracking

Country Status (1)

Country Link
KR (1) KR102420151B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110138049A (en) * 2010-06-18 2011-12-26 주식회사 시큐인포 Monitoring system using smart phone
KR20180070057A (en) * 2016-12-16 2018-06-26 주식회사 아렌네 Method and system for matching lost companion animal and found companion animal and computer-readable recording medium having a program
KR20190093799A (en) * 2018-01-17 2019-08-12 경북대학교 산학협력단 Real-time missing person recognition system using cctv and method thereof
KR102012672B1 (en) 2019-01-17 2019-08-21 대주씨앤에스 주식회사 Anti-crime system and method using face recognition based people feature recognition

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110138049A (en) * 2010-06-18 2011-12-26 주식회사 시큐인포 Monitoring system using smart phone
KR20180070057A (en) * 2016-12-16 2018-06-26 주식회사 아렌네 Method and system for matching lost companion animal and found companion animal and computer-readable recording medium having a program
KR20190093799A (en) * 2018-01-17 2019-08-12 경북대학교 산학협력단 Real-time missing person recognition system using cctv and method thereof
KR102012672B1 (en) 2019-01-17 2019-08-21 대주씨앤에스 주식회사 Anti-crime system and method using face recognition based people feature recognition

Similar Documents

Publication Publication Date Title
US10812761B2 (en) Complex hardware-based system for video surveillance tracking
KR101297295B1 (en) Security control system by face recognition
US20200334470A1 (en) Methods and apparatus for automated surveillance systems
US20160224837A1 (en) Method And System For Facial And Object Recognition Using Metadata Heuristic Search
US20060200307A1 (en) Vehicle identification and tracking system
WO2018116488A1 (en) Analysis server, monitoring system, monitoring method, and program
US20190087464A1 (en) Regional population management system and method
US20100111377A1 (en) Method for Incorporating Facial Recognition Technology in a Multimedia Surveillance System
KR102039277B1 (en) Pedestrian face recognition system and method thereof
KR102039279B1 (en) System and method for supporting police work using image recognition
KR101417930B1 (en) The CCTV monitor in The Intelligent control system
CN107038675A (en) A kind of public security inventory management system and its operation method
KR102011226B1 (en) Security management system by face recognition and method
CN112258718A (en) Human body temperature measurement and personnel identification method and system
US11308792B2 (en) Security systems integration
KR101005568B1 (en) Intelligent security system
KR101084914B1 (en) Indexing management system of vehicle-number and man-image
Mehra et al. Home security system using iot and aws cloud services
US20190147734A1 (en) Collaborative media collection analysis
CN113920660A (en) Safety monitoring method and system suitable for safety storage equipment
KR102420151B1 (en) Mobile ondemand cctv system based on collective cross check and tracking
KR101936390B1 (en) Method And Apparatus for Providing Tracking Service based on Closed Circuit Tele-Vision
CN112580470A (en) City visual perception method and device, electronic equipment and storage medium
US9426628B1 (en) Multi-location wireless device tracking
JP2019159377A (en) Monitoring system, server device, monitoring method, and monitoring program

Legal Events

Date Code Title Description
GRNT Written decision to grant