KR101487461B1 - 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템 - Google Patents
개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템 Download PDFInfo
- Publication number
- KR101487461B1 KR101487461B1 KR1020140078725A KR20140078725A KR101487461B1 KR 101487461 B1 KR101487461 B1 KR 101487461B1 KR 1020140078725 A KR1020140078725 A KR 1020140078725A KR 20140078725 A KR20140078725 A KR 20140078725A KR 101487461 B1 KR101487461 B1 KR 101487461B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- mpeg
- module
- frame
- detector
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
- H04N1/3872—Repositioning or masking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
본 발명은 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에 관한 것이다. 본 발명의 제 1 측면은, 통신망(20), CCTV 카메라 집합체(30), NVR 서버(40), 이미지 프로세싱 서버(50)를 포함하는 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에 있어서, 이미지 프로세싱 서버(50)는, 얼굴 디텍터(53a-1)를 구비한 오브젝트 디텍터(53a), 그리고 오브젝트 트래커(53b)를 포함하여, 오브젝트 파인더 모듈(53)에 의해 얼굴 디텍터(53a-1)에 이전 프레임과 현재 프레임을 비교 분석하여 변화된 부분을 검출하고 이를 사람, 그리고 사람의 얼굴인지 아닌지를 판별하며, 오브젝트 트래커(53b)에 의해 도출된 객체인 사람 및 얼굴에 대한 트래킹을 수행하여 객체에 대한 안정적인 추적 모듈을 제공하는 오브젝트 파인더 모듈(53); 및 오브젝트 마스킹(55a), MPEG 인코더(55c), 이미지 인크립터(55b), 파일 라이터(55d)를 포함하여 개인정보보호 기능을 수행하며, 오브젝트 마스킹(55a)에 의해 사람 또는 얼굴로 인식된 객체를 시각적으로 알아볼 수 없도록 마스킹 처리하며, MPEG 인코더(55c)에 의해 MPEG 인코딩을 수행하고, 이미지 인크립터(55b)에 의해 객체를 포함하는 이미지에 대한 인크립트를 수행하며, 파일 라이터(55d)에 의해 외부로 목적 영상을 출력하는 기능을 수행하는 오브젝트 드로우 모듈(55); 을 포함하는 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템을 제공함에 있다.
이에 의해, 인덱싱 기능이 제공되어 필요시 식별대상 인원의 검색이 신속하고 원활하게 이루어질 수 있고, 개인정보의 마스킹 처리가 수행됨에 따라 개인정보보호법 발효에 대응하여 개인영상에 대한 정보도 보호될 수 있을 뿐만 아니라, 권한자에게는 원본 영상을 제공함으로써, CCTV 카메라 영상 관제 시스템상에서의 개인영상 정보 관리를 위한 통합 관리 기능을 제공하도록 하기 위한 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템을 제공하기 위한 것이다.
뿐만 아니라, 본 발명은, 실외환경에 적합하도록 객체 인식과 추적을 통해 객체를 인덱싱 처리하고, 이를 바탕으로 얼굴 검출을 병행함으로써, 검출속도, 오검출 등의 문제를 개선할 수 있는 효과를 제공한다.
이에 의해, 인덱싱 기능이 제공되어 필요시 식별대상 인원의 검색이 신속하고 원활하게 이루어질 수 있고, 개인정보의 마스킹 처리가 수행됨에 따라 개인정보보호법 발효에 대응하여 개인영상에 대한 정보도 보호될 수 있을 뿐만 아니라, 권한자에게는 원본 영상을 제공함으로써, CCTV 카메라 영상 관제 시스템상에서의 개인영상 정보 관리를 위한 통합 관리 기능을 제공하도록 하기 위한 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템을 제공하기 위한 것이다.
뿐만 아니라, 본 발명은, 실외환경에 적합하도록 객체 인식과 추적을 통해 객체를 인덱싱 처리하고, 이를 바탕으로 얼굴 검출을 병행함으로써, 검출속도, 오검출 등의 문제를 개선할 수 있는 효과를 제공한다.
Description
본 발명은 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에 관한 것으로, 보다 구체적으로는, 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 솔루션을 제공함으로써, CCTV 영상에서 검출되는 영상이나, NVR(Network Video Recorder) 등의 영상저장장치에 저장된 영상을 활용해 객체 탐지 및 추적, 디지털포렌식(digital forensic: 디지털 정보를 분석해 범죄 단서를 찾는 수사기법) 등의 분야에 활용 가능하도록 하기 위한 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에 관한 것이다.
일반적으로 CCTV 카메라, DVR 등과 같은 보안 및 감시용 영상 시스템은 24시간 감시가 필요한 주택가나 학교, 놀이터 주변의 방범 취약지, 근무요원이 상시 관리할 수 없는 취약 개소, 은행, 백화점, 공항, 항만 따위의 공공 시설물 등에 감시 카메라 등의 장비를 구축하고, 이와 네트워크로 연결된 원격지의 중앙관제센터에 현장 영상을 실시간으로 전송하여 표시 및 기록함으로써 상황 관리자가 모니터링을 통해 각종 사고나 위험 상황, 범죄 등을 사전에 예방하는 안전 점검 및 다양한 정보를 수집하여 후속 대책이나 수습 조치를 취할 수 있는 데다 적은 인력으로도 많은 감시 장소의 이상 유무를 파악할 수 있음은 물론 추후 범죄수사나 실종자(미아) 찾기 등에 필요한 핵심적인 정보를 제공할 수 있다.
이와 같은 종래의 보안 및 감시용 영상 시스템의 장점에도 불구하고 2011년 9월 30일 개인정보보호법에 따라 안전행정부에서 영상정보처리기기 설치, 운영 가이드라인에서 제시하는 개인정보 보호 규정을 준수하기 위해 현재까지 무방비로 노출되고 있는 CCTV 카메라에 의해 촬영된 개인영상 정보보호 강화를 위한 기술개발이 요구되고 있다.
[관련기술문헌]
1. ZigBee와 CCTV를 이용한 상황관제 시스템과 어린이보호 시스템(State Monitoring System using ZigBee and CCTV)(특허출원번호 제10-2010-0016329호)
2. 개인정보 보호를 위한 차량 촬영 시스템 및 그 제어방법(Vehicle monitering system with privacy protection and the method thereof)(특허출원번호 제10-2009-0005670호)
본 발명은 상기의 문제점을 해결하기 위한 것으로, 개인영상 정보 관리를 위한 통합 관리 기능을 제공하도록 하기 위한 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템을 제공하기 위한 것이다.
또한, 본 발명은 실외환경에 적합하도록 객체 인식과 추적을 통해 객체를 인덱싱 처리하고, 이를 바탕으로 얼굴 검출을 병행함으로써, 검출속도, 오검출 등의 문제를 개선하도록 하기 위한 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템을 제공하기 위한 것이다.
그러나 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기의 목적을 달성하기 위해 본 발명의 실시예에 따른 얼굴인식 보안 관제 시스템은, 통신망(20), CCTV 카메라 집합체(30), NVR 서버(40), 이미지 프로세싱 서버(50)를 포함하는 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에 있어서,
CCTV 영상 개체 검출을 위한 이미지 프로세싱 서버(50)는 이미지 프로세스 모듈(51), 이미지 큐 모듈(52), 오브젝트 파인더 모듈(53), 오브젝트 드로우 모듈(55)을 포함하되,
상기 이미지 프로세스 모듈(51)은 MPEG 디코더(51a)와, 상기 MPEG 디코더(51a)에 연결되는 프레임 캡쳐(51b)를 포함하되, 상기 MPEG 디코더(51a)에 의해 CCTV 영상과 NVR 저장영상 중에서 선택된 어느 하나의 영상에 대한 MPEG 디코딩이 수행되도록 한 후, 상기 프레임 캡쳐(51b)에 의해 MPEG 디코딩된 영상의 프레임이 추출되도록 하는 것이고,
상기 이미지 큐 모듈(52)은 상기 이미지 프로세스 모듈(51)에 의해 MPEG 디코딩된 후 프레임이 추출된 영상을 상기 오브젝트 파인더 모듈(53)로 프레임별로 차례로 제공하는 것이며,
상기 오브젝트 파인더 모듈(53)은 얼굴 디텍터(53a-1)를 구비한 오브젝트 디텍터(53a)과, 상기 오브젝트 디텍터(53a)에 연결되는 오브젝트 트래커(53b)를 포함하여 상기 이미지 큐 모듈(52)로부터 입력되는 MPEG 디코딩된 영상의 프레임들에 대한 객체 관리 기능을 수행하되, 상기 오브젝트 디텍터(53a)의 얼굴 디텍터(53a-1)는 입력되는 MPEG 디코딩된 영상의 이전 프레임과 현재 프레임을 비교 분석하여 변화된 부분을 검출한 다음, 검출된 변화된 부분이 사람 얼굴인지 여부를 판별하게 되고, 상기 오브젝트 트래커(53b)는 상기 얼굴 디텍터(53a-1)에 의해 검출된 객체인 사람 얼굴에 대한 정보를 상기 얼굴 디텍터(53a-1)로부터 전달받아 상기 이미지 큐 모듈(52)로부터 연속해서 입력되는 MPEG 디코딩된 영상의 프레임들에서의 사람 얼굴에 대한 트래킹을 수행하는 것이고,
상기 오브젝트 드로우 모듈(55)은 오브젝트 마스킹(55a)과, 상기 오브젝트 마스킹(55a)에 연결되는 이미지 인크립터(55b), 상기 이미지 인크립터(55b)에 연결되는 MPEG 인코더(55c), 상기 MPEG 인코더(55c)에 연결되는 파일 라이터(55d)를 포함하여 개인정보보호 기능을 수행하되, 상기 오브젝트 마스킹(55a)는 사람 얼굴로 인식된 객체를 시각적으로 알아볼 수 없도록 마스킹 처리를 수행하고, 상기 이미지 인크립터(55b)는 마스킹 처리된 사람 얼굴로 인식된 객체를 포함하는 이미지를 상기 오브젝트 마스킹(55a)으로부터 전달받아 마스킹 처리된 사람 얼굴로 인식된 객체를 포함하는 이미지에 대한 인크립트를 수행하며, 상기 MPEG 인코더(55c)는 상기 이미지 인크립터(55b)로부터 인크립트된 이미지를 전달받아 MPEG 인코딩을 수행하고, 상기 파일 라이터(55d)는 상기 MPEG 인코더(55c)로부터 MPEG 인코딩된 목적 영상파일을 외부로 출력하는 것을 특징으로 한다.
CCTV 영상 개체 검출을 위한 이미지 프로세싱 서버(50)는 이미지 프로세스 모듈(51), 이미지 큐 모듈(52), 오브젝트 파인더 모듈(53), 오브젝트 드로우 모듈(55)을 포함하되,
상기 이미지 프로세스 모듈(51)은 MPEG 디코더(51a)와, 상기 MPEG 디코더(51a)에 연결되는 프레임 캡쳐(51b)를 포함하되, 상기 MPEG 디코더(51a)에 의해 CCTV 영상과 NVR 저장영상 중에서 선택된 어느 하나의 영상에 대한 MPEG 디코딩이 수행되도록 한 후, 상기 프레임 캡쳐(51b)에 의해 MPEG 디코딩된 영상의 프레임이 추출되도록 하는 것이고,
상기 이미지 큐 모듈(52)은 상기 이미지 프로세스 모듈(51)에 의해 MPEG 디코딩된 후 프레임이 추출된 영상을 상기 오브젝트 파인더 모듈(53)로 프레임별로 차례로 제공하는 것이며,
상기 오브젝트 파인더 모듈(53)은 얼굴 디텍터(53a-1)를 구비한 오브젝트 디텍터(53a)과, 상기 오브젝트 디텍터(53a)에 연결되는 오브젝트 트래커(53b)를 포함하여 상기 이미지 큐 모듈(52)로부터 입력되는 MPEG 디코딩된 영상의 프레임들에 대한 객체 관리 기능을 수행하되, 상기 오브젝트 디텍터(53a)의 얼굴 디텍터(53a-1)는 입력되는 MPEG 디코딩된 영상의 이전 프레임과 현재 프레임을 비교 분석하여 변화된 부분을 검출한 다음, 검출된 변화된 부분이 사람 얼굴인지 여부를 판별하게 되고, 상기 오브젝트 트래커(53b)는 상기 얼굴 디텍터(53a-1)에 의해 검출된 객체인 사람 얼굴에 대한 정보를 상기 얼굴 디텍터(53a-1)로부터 전달받아 상기 이미지 큐 모듈(52)로부터 연속해서 입력되는 MPEG 디코딩된 영상의 프레임들에서의 사람 얼굴에 대한 트래킹을 수행하는 것이고,
상기 오브젝트 드로우 모듈(55)은 오브젝트 마스킹(55a)과, 상기 오브젝트 마스킹(55a)에 연결되는 이미지 인크립터(55b), 상기 이미지 인크립터(55b)에 연결되는 MPEG 인코더(55c), 상기 MPEG 인코더(55c)에 연결되는 파일 라이터(55d)를 포함하여 개인정보보호 기능을 수행하되, 상기 오브젝트 마스킹(55a)는 사람 얼굴로 인식된 객체를 시각적으로 알아볼 수 없도록 마스킹 처리를 수행하고, 상기 이미지 인크립터(55b)는 마스킹 처리된 사람 얼굴로 인식된 객체를 포함하는 이미지를 상기 오브젝트 마스킹(55a)으로부터 전달받아 마스킹 처리된 사람 얼굴로 인식된 객체를 포함하는 이미지에 대한 인크립트를 수행하며, 상기 MPEG 인코더(55c)는 상기 이미지 인크립터(55b)로부터 인크립트된 이미지를 전달받아 MPEG 인코딩을 수행하고, 상기 파일 라이터(55d)는 상기 MPEG 인코더(55c)로부터 MPEG 인코딩된 목적 영상파일을 외부로 출력하는 것을 특징으로 한다.
삭제
삭제
삭제
삭제
삭제
본 발명의 실시예에 따른 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템은, 인덱싱 기능이 제공되어 필요시 식별대상 인원의 검색이 신속하고 원활하게 이루어질 수 있고, 개인정보의 마스킹 처리가 수행됨에 따라 개인정보보호법 발효에 대응하여 개인영상에 대한 정보도 보호될 수 있을 뿐만 아니라, 권한자에게는 원본 영상을 제공함으로써, CCTV 카메라 영상 관제 시스템상에서의 개인영상 정보 관리를 위한 통합 관리 기능을 제공하도록 하기 위한 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템을 제공하기 위한 것이다.
뿐만 아니라, 본 발명의 다른 실시예에 따른 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템은, 실외환경에 적합하도록 객체 인식과 추적을 통해 객체를 인덱싱 처리하고, 이를 바탕으로 얼굴 검출을 병행함으로써, 검출속도, 오검출 등의 문제를 개선할 수 있는 효과를 제공한다.
도 1은 본 발명의 실시예에 따른 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템을 나타내는 도면이다.
도 2는 본 발명의 실시예에 따른 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에서 CCTV 영상 개체 검출을 위한 이미지 프로세싱 서버(50)의 구성을 나타내는 도면이다.
도 3은 본 발명의 실시예에 따른 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에서 CCTV 영상 재생을 위한 이미지 프로세싱 서버(50)의 구성을 나타내는 도면이다.
도 2는 본 발명의 실시예에 따른 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에서 CCTV 영상 개체 검출을 위한 이미지 프로세싱 서버(50)의 구성을 나타내는 도면이다.
도 3은 본 발명의 실시예에 따른 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에서 CCTV 영상 재생을 위한 이미지 프로세싱 서버(50)의 구성을 나타내는 도면이다.
이하, 본 발명의 바람직한 실시예의 상세한 설명은 첨부된 도면들을 참조하여 설명할 것이다. 하기에서 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.
본 명세서에 있어서는 어느 하나의 구성요소가 다른 구성요소로 데이터 또는 신호를 '전송'하는 경우에는 구성요소는 다른 구성요소로 직접 상기 데이터 또는 신호를 전송할 수 있고, 적어도 하나의 또 다른 구성요소를 통하여 데이터 또는 신호를 다른 구성요소로 전송할 수 있음을 의미한다.
도 1은 본 발명의 실시예에 따른 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템을 나타내는 도면이다.
도 1을 참조하면, 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템은 미디어 플레이어(Media Player)(10), 통신망(20), CCTV 카메라 집합체(30), NVR 서버(40), 웹서버(50a), 이미지 프로세싱 서버(50), DB 서버(60), 그리고 영상처리 운영자 단말(70)을 포함한다.
미디어 플레이어(Media Player)(10)는 정보주체 단말(11) 및 요청기관 단말(12)로 구성되며, CCTV 카메라 집합체(30)는 제 1 CCTV 카메라(30-1) 내지 제 n CCTV 카메라(30-n: n은 2 이상의 자연수)로 구성된다.
CCTV 카메라 집합체(30)는 통신망(20)을 통해 NVR 서버(40), 웹서버(50a), 이미지 프로세싱 서버(50), DB 서버(60) 및 권한인증 서버(80), 그 밖의 시스템과 데이터 송수신을 수행한다. 여기서, 방화벽(W) 및 백본 스위치(S)는 NVR 서버(40), 웹서버(50a), 이미지 프로세싱 서버(50), DB 서버(60) 및 권한인증 서버(80)를 하나의 그룹으로 하여 통신망(20)의 최 전단에 형성되는 것이 바람직하다.
이러한 구성을 통해 이미지 프로세싱 서버(50)는 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 솔루션을 제공하며, 제 1 CCTV 카메라 내지 제 n CCTV 카메라(30-1 내지 30-n)에서 검출되는 "CCTV 영상"이나, NVR(Network Video Recorder) 서버(40) 등의 영상저장장치에 저장된 "NVR 저장영상"을 활용해 객체 탐지 및 추적, 디지털포렌식(digital forensic) 등의 분야에 제공될 수 있다.
도 2는 본 발명의 실시예에 따른 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에서 CCTV 영상 개체 검출을 위한 이미지 프로세싱 서버(50)의 구성을 나타내는 도면이다.
도 2를 참조하면, 이미지 프로세싱 서버(50)는 이미지 프로세스 모듈(51), 이미지 큐 모듈(52), 오브젝트 파인더 모듈(53), 오브젝트 익스트랙터(54), 오브젝트 드로우 모듈(55)을 포함한다.
이미지 프로세스 모듈(51)은 MPEG 디코더(51a)와, MPEG 디코더(51a)에 연결되는 프레임 캡쳐(51b)를 포함하는 것으로, MPEG 디코더(51a)에 의해 CCTV 영상과 NVR 저장영상 중에서 선택된 어느 하나의 영상에 대한 MPEG 디코딩이 수행되도록 한 후, 프레임 캡쳐(51b)에 의해 MPEG 디코딩된 영상의 프레임이 추출되도록 한다.
이미지 큐 모듈(52)은 이미지 프로세스 모듈(51)에 의해 MPEG 디코딩된 후 프레임이 추출된 영상을 오브젝트 파인더 모듈(53)로 프레임별로 차례로 제공하는 것이다.
오브젝트 파인더 모듈(53)은 얼굴 디텍터(53a-1)를 구비한 오브젝트 디텍터(53a)과, 오브젝트 디텍터(53a)에 연결되는 오브젝트 트래커(53b)를 포함하는 것으로, 이미지 큐 모듈(52)로부터 입력되는 MPEG 디코딩된 영상의 프레임들에 대한 객체 관리 기능을 수행한다. 여기서 오브젝트 디텍터(53a)의 얼굴 디텍터(53a-1)는 입력되는 MPEG 디코딩된 영상의 이전 프레임과 현재 프레임을 비교 분석하여 변화된 부분을 검출한 다음, 검출된 변화된 부분이 사람 얼굴인지 여부를 판별하게 되고, 오브젝트 트래커(53b)는 얼굴 디텍터(53a-1)에 의해 검출된 객체인 사람 얼굴에 대한 정보를 얼굴 디텍터(53a-1)로부터 전달받아 이미지 큐 모듈(52)로부터 연속해서 입력되는 MPEG 디코딩된 영상의 프레임들에서의 사람 얼굴에 대한 트래킹을 수행한다. 이를 통해 사람 얼굴 객체에 대한 안정적인 추적이 수행될 수 있게 된다.
오브젝트 익스트랙터(54)는 오브젝트 아이덴티파이어(54a), 오브젝트 비교기(54b), 오브젝트 인덱서(54c)를 포함함으로써, 객체로 인식된 부분에 대한 오브젝트 아이덴티파이어(54a)에 의해 트래킹되는 객체의 이동속도 및 이동방향 등의 정보를 추가하고 특정 ID값을 부여하도록 한다. 그리고 오브젝트 익스트랙터(54)의 오브젝트 비교기(54b)는 다음 프레임에서 해당 객체가 검출되지 않더라도 객체가 존재할 부분을 산정 및 추적하여 놓치는 부분을 최소화하도록 하며 각 프레임에서 객체가 검출될 경우 오브젝트 인덱서(54c)에 의해 해당 객체가 검출된 프레임의 정보(검출시간, 프레임의 수 등)를 추출하여 객체의 섬네일 이미지와 함께 목록화 하여 정보를 저장하도록 한다. 오브젝트 인덱서(54c)은 인식된 객체(사람 및 얼굴)에 대한 인덱싱 모듈로, 트래킹 대상(추적 대상)에 대한 해당 객체인 사람의 섬네일 이미지 정보를 가져와 얼굴 부분만을 따로 검출하여 얼굴정보 검출 속도 개선과 함께 별도의 목록화 처리를 수행하는 것이 바람직하다.
오브젝트 드로우 모듈(55)은 오브젝트 마스킹(55a)과, 오브젝트 마스킹(55a)에 연결되는 이미지 인크립터(55b), 이미지 인크립터(55b)에 연결되는 MPEG 인코더(55c), MPEG 인코더(55c)에 연결되는 파일 라이터(55d)를 포함하여 개인정보보호 기능을 수행하는 것이다. 여기서 오브젝트 마스킹(55a)는 사람 얼굴로 인식된 객체를 시각적으로 알아볼 수 없도록 마스킹 처리를 수행하고, 이미지 인크립터(55b)는 마스킹 처리된 사람 얼굴로 인식된 객체를 포함하는 이미지를 오브젝트 마스킹(55a)으로부터 전달받아 마스킹 처리된 사람 얼굴로 인식된 객체를 포함하는 이미지에 대한 인크립트를 수행하며, MPEG 인코더(55c)는 이미지 인크립터(55b)로부터 인크립트된 이미지를 전달받아 MPEG 인코딩을 수행하고, 파일 라이터(55d)는 상기 MPEG 인코더(55c)로부터 MPEG 인코딩된 목적 영상파일을 외부로 출력한다.
한편, 오브젝트 드로우 모듈(55)은 오브젝트 마스킹(55a)에 의한 마스킹 처리된 영상 확인을 위한 언마스킹 모듈를 포함하는데, 보안처리되어 마스킹 된 영상을 재생하게 될시 손상되지 않은 원본 영상을 볼 수 있는 권한이 있는 사람이나 기관이 소유하게 되는 미디어 플레이어(Media Player)(10)이나 영상처리 운영자 단말(70)의 요청이 있을 경우 마스킹 된 부분을 복원하여 원본 영상이 재생되도록 하는 것이 바람직하다. 여기서 보안처리되어 마스킹 된 영상을 재생하게 될시 손상되지 않은 원본 영상을 볼 수 있는 권한이 있는 사람이나 기관이 소유하게 되는 미디어 플레이어(Media Player)(10)에는 정보주체 단말(11) 및 요청기관 단말(12)이 포함된다.
그리고 이미지 인크립터(55b)는 영상 배포시 유출을 대비한 암호화 모듈로, 영상을 외부로 배포할 경우 유출될 경우를 대비하여 영상에서 추출된 정보를 AES 256bit 형식의 알고리즘을 활용하여 암호화 및 복호화를 제공한다.
도 3은 본 발명의 실시예에 따른 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에서 CCTV 영상 재생을 위한 이미지 프로세싱 서버(50)의 구성을 나타내는 도면이다. 도 3을 참조하면, CCTV 영상 재생을 위한 이미지 프로세싱 서버(50)는 이미지 프로세스 모듈(51), 이미지 큐 모듈(52), 인증 모듈(56), 스크린(57)을 포함하며, 통신망(20)을 통해 권한인증 서버(80)와 데이터 송수신을 수행한다. 그리고 이미지 프로세스 모듈(51)은 MPEG 디코더(51a), 프레임 캡쳐(51b), 프레임 카운터(51c) 및 이미지 디크립터(51d), 그 밖의 오브젝트 드로우 모듈(55)을 포함한다.
여기서, MPEG 디코더(51a)에 의해 MPEG 디코딩된 CCTV 영상 및 NVR 저장영상을 MPEG 디코딩을 수행하고, 프레임 캡쳐(51b)에 의해 프레임을 추출하는 기능이 완료되면, 이미지 프로세스 모듈(51)의 프레임 카운터(51c)는 스크린(57)으로의 CCTV 영상 재생을 위한 프레임 캡쳐(51b)에 의해 캡쳐된 프레임에 대한 카운팅을 수행하며, 이미지 디크립터(51d)은 프레임에 대한 오브젝트 드로우 모듈(55)로 영상에 대한 디크립트를 수행하여 전송한다.
이에 따라, 오브젝트 드로우 모듈(55)은 정보주체의 영상정보 열람권 보장을 위한 선별 마스킹 모듈을 제공하며, 특정 영상에서 사람으로 인식된 객체가 다수일 경우 권한이 있는 사람에 해당하는 정보만을 언마스킹하여 보여주어 본인 이외의 정보는 인식할 수 없도록 하는 기능을 제공하는 것이 바람직하다.
그리고 인증 모듈(56)은 이미지 디크립터(51d)로부터 디크립트된 영상 프레임에 대한 통신망(20)을 통해 권한인증 서버(80)와 데이터 송수신에 의해 사용자 권한 설정의 기능을 수행한다.
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
삭제
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.
컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
이상과 같이, 본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
10: 미디어 플레이어
11: 정보주체 단말
12: 요청기관 단말
20: 통신망
30-1 내지 30-n: 제 1 CCTV 카메라 내지 제 n CCTV 카메라
40: NVR 서버
50: 이미지 프로세싱 서버
51: 이미지 프로세스 모듈
51a: MPEG 디코더
51b: 프레임 캡쳐
51c: 프레임 카운터
51d: 이미지 디크립터
52: 이미지 큐 모듈
53: 오브젝트 파인더 모듈
53a: 오브젝트 디텍터
53a-1: 얼굴 디텍터
53b: 오브젝트 트래커
54: 오브젝트 익스트랙터
54a: 오브젝트 아이덴티파이어
54b: 오브젝트 비교기
54c: 오브젝트 인덱서
55: 오브젝트 드로우 모듈
55a: 오브젝트 마스킹
55b: 이미지 인크립터
55c: MPEG 인코더
55d: 파일 라이터
56: 인증 모듈
57: 스크린
60: DB 서버
70: 영상처리 운영자 단말
80: 권한인증 서버
11: 정보주체 단말
12: 요청기관 단말
20: 통신망
30-1 내지 30-n: 제 1 CCTV 카메라 내지 제 n CCTV 카메라
40: NVR 서버
50: 이미지 프로세싱 서버
51: 이미지 프로세스 모듈
51a: MPEG 디코더
51b: 프레임 캡쳐
51c: 프레임 카운터
51d: 이미지 디크립터
52: 이미지 큐 모듈
53: 오브젝트 파인더 모듈
53a: 오브젝트 디텍터
53a-1: 얼굴 디텍터
53b: 오브젝트 트래커
54: 오브젝트 익스트랙터
54a: 오브젝트 아이덴티파이어
54b: 오브젝트 비교기
54c: 오브젝트 인덱서
55: 오브젝트 드로우 모듈
55a: 오브젝트 마스킹
55b: 이미지 인크립터
55c: MPEG 인코더
55d: 파일 라이터
56: 인증 모듈
57: 스크린
60: DB 서버
70: 영상처리 운영자 단말
80: 권한인증 서버
Claims (6)
- 통신망(20), CCTV 카메라 집합체(30), NVR 서버(40), 이미지 프로세싱 서버(50)를 포함하는 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템에 있어서,
CCTV 영상 개체 검출을 위한 이미지 프로세싱 서버(50)는 이미지 프로세스 모듈(51), 이미지 큐 모듈(52), 오브젝트 파인더 모듈(53), 오브젝트 드로우 모듈(55)을 포함하되,
상기 이미지 프로세스 모듈(51)은 MPEG 디코더(51a)와, 상기 MPEG 디코더(51a)에 연결되는 프레임 캡쳐(51b)를 포함하되, 상기 MPEG 디코더(51a)에 의해 CCTV 영상과 NVR 저장영상 중에서 선택된 어느 하나의 영상에 대한 MPEG 디코딩이 수행되도록 한 후, 상기 프레임 캡쳐(51b)에 의해 MPEG 디코딩된 영상의 프레임이 추출되도록 하는 것이고,
상기 이미지 큐 모듈(52)은 상기 이미지 프로세스 모듈(51)에 의해 MPEG 디코딩된 후 프레임이 추출된 영상을 상기 오브젝트 파인더 모듈(53)로 프레임별로 차례로 제공하는 것이며,
상기 오브젝트 파인더 모듈(53)은 얼굴 디텍터(53a-1)를 구비한 오브젝트 디텍터(53a)과, 상기 오브젝트 디텍터(53a)에 연결되는 오브젝트 트래커(53b)를 포함하여 상기 이미지 큐 모듈(52)로부터 입력되는 MPEG 디코딩된 영상의 프레임들에 대한 객체 관리 기능을 수행하되, 상기 오브젝트 디텍터(53a)의 얼굴 디텍터(53a-1)는 입력되는 MPEG 디코딩된 영상의 이전 프레임과 현재 프레임을 비교 분석하여 변화된 부분을 검출한 다음, 검출된 변화된 부분이 사람 얼굴인지 여부를 판별하게 되고, 상기 오브젝트 트래커(53b)는 상기 얼굴 디텍터(53a-1)에 의해 검출된 객체인 사람 얼굴에 대한 정보를 상기 얼굴 디텍터(53a-1)로부터 전달받아 상기 이미지 큐 모듈(52)로부터 연속해서 입력되는 MPEG 디코딩된 영상의 프레임들에서의 사람 얼굴에 대한 트래킹을 수행하는 것이고,
상기 오브젝트 드로우 모듈(55)은 오브젝트 마스킹(55a)과, 상기 오브젝트 마스킹(55a)에 연결되는 이미지 인크립터(55b), 상기 이미지 인크립터(55b)에 연결되는 MPEG 인코더(55c), 상기 MPEG 인코더(55c)에 연결되는 파일 라이터(55d)를 포함하여 개인정보보호 기능을 수행하되, 상기 오브젝트 마스킹(55a)는 사람 얼굴로 인식된 객체를 시각적으로 알아볼 수 없도록 마스킹 처리를 수행하고, 상기 이미지 인크립터(55b)는 마스킹 처리된 사람 얼굴로 인식된 객체를 포함하는 이미지를 상기 오브젝트 마스킹(55a)으로부터 전달받아 마스킹 처리된 사람 얼굴로 인식된 객체를 포함하는 이미지에 대한 인크립트를 수행하며, 상기 MPEG 인코더(55c)는 상기 이미지 인크립터(55b)로부터 인크립트된 이미지를 전달받아 MPEG 인코딩을 수행하고, 상기 파일 라이터(55d)는 상기 MPEG 인코더(55c)로부터 MPEG 인코딩된 목적 영상파일을 외부로 출력하는 것을 특징으로 하는 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템. - 삭제
- 삭제
- 삭제
- 삭제
- 삭제
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140078725A KR101487461B1 (ko) | 2014-06-26 | 2014-06-26 | 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140078725A KR101487461B1 (ko) | 2014-06-26 | 2014-06-26 | 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR101487461B1 true KR101487461B1 (ko) | 2015-01-28 |
Family
ID=52592781
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140078725A KR101487461B1 (ko) | 2014-06-26 | 2014-06-26 | 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101487461B1 (ko) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104869366A (zh) * | 2015-06-02 | 2015-08-26 | 四川正好科技发展有限公司 | 报警监控寻人系统及基于其的多功能自动寻人方法 |
KR101972428B1 (ko) | 2018-10-11 | 2019-04-25 | 주식회사 사라다 | 개인 정보 보호를 위한 모드 설정이 가능한 영상 처리 장치 및 방법 |
WO2020080571A1 (ko) * | 2018-10-16 | 2020-04-23 | 전자부품연구원 | 영상정보기기에서의 개인정보의 비식별화 방법 및 시스템 |
KR102253672B1 (ko) * | 2019-11-25 | 2021-05-18 | 주식회사 렙딥 | 영상 보안 시스템 및 그에 대한 보안 관리 장치 |
KR102500252B1 (ko) | 2022-01-20 | 2023-02-17 | (주)에이아이매틱스 | 얼굴 개인정보 보호 기술을 이용한 기계학습 데이터베이스 구축 시스템 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20110043775A (ko) * | 2008-08-19 | 2011-04-27 | 디지맥 코포레이션 | 콘텐트 처리를 위한 방법들 및 시스템들 |
KR20110070735A (ko) * | 2009-12-18 | 2011-06-24 | 한국전자통신연구원 | 영상의 프라이버시 마스킹 방법 및 장치 |
KR20120075487A (ko) * | 2009-10-28 | 2012-07-06 | 디지맥 코포레이션 | 센서-기반 모바일 검색, 관련 방법들 및 시스템들 |
KR20130114037A (ko) * | 2013-09-04 | 2013-10-16 | 엠엠피씨 주식회사 | 프라이버시 영역의 마스킹 및 복원 방법 |
-
2014
- 2014-06-26 KR KR1020140078725A patent/KR101487461B1/ko active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20110043775A (ko) * | 2008-08-19 | 2011-04-27 | 디지맥 코포레이션 | 콘텐트 처리를 위한 방법들 및 시스템들 |
KR20120075487A (ko) * | 2009-10-28 | 2012-07-06 | 디지맥 코포레이션 | 센서-기반 모바일 검색, 관련 방법들 및 시스템들 |
KR20110070735A (ko) * | 2009-12-18 | 2011-06-24 | 한국전자통신연구원 | 영상의 프라이버시 마스킹 방법 및 장치 |
KR20130114037A (ko) * | 2013-09-04 | 2013-10-16 | 엠엠피씨 주식회사 | 프라이버시 영역의 마스킹 및 복원 방법 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104869366A (zh) * | 2015-06-02 | 2015-08-26 | 四川正好科技发展有限公司 | 报警监控寻人系统及基于其的多功能自动寻人方法 |
KR101972428B1 (ko) | 2018-10-11 | 2019-04-25 | 주식회사 사라다 | 개인 정보 보호를 위한 모드 설정이 가능한 영상 처리 장치 및 방법 |
WO2020080571A1 (ko) * | 2018-10-16 | 2020-04-23 | 전자부품연구원 | 영상정보기기에서의 개인정보의 비식별화 방법 및 시스템 |
KR102253672B1 (ko) * | 2019-11-25 | 2021-05-18 | 주식회사 렙딥 | 영상 보안 시스템 및 그에 대한 보안 관리 장치 |
KR102500252B1 (ko) | 2022-01-20 | 2023-02-17 | (주)에이아이매틱스 | 얼굴 개인정보 보호 기술을 이용한 기계학습 데이터베이스 구축 시스템 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8929545B2 (en) | Surveillance video transmission apparatus and method and surveillance video receiving apparatus and method | |
US10297126B2 (en) | Privacy masking video content of alarm exceptions and mask verification | |
KR101487461B1 (ko) | 개인영상 정보보호 기능이 탑재된 얼굴인식 보안 관제 시스템 | |
Wickramasuriya et al. | Privacy protecting data collection in media spaces | |
US20110096922A1 (en) | Image processing apparatus and image processing method | |
US10116910B2 (en) | Imaging apparatus and method of providing imaging information | |
US8917909B2 (en) | Surveillance including a modified video data stream | |
KR100962529B1 (ko) | 객체 추적 방법 | |
US20070201694A1 (en) | Privacy management in imaging system | |
US9432390B2 (en) | Scene identification system and methods | |
KR101425505B1 (ko) | 객체인식기술을 이용한 지능형 경계 시스템의 감시 방법 | |
KR20130047223A (ko) | 모니터링 영상 기반의 프라이버시 영역 보호 방법 및 장치 | |
KR101951605B1 (ko) | 영상의 유출을 방지하기 위한 cctv 영상 보안 시스템 | |
US9628874B2 (en) | Imaging apparatus and method of providing video summary | |
JPWO2009013822A1 (ja) | 映像監視装置および映像監視プログラム | |
KR102077632B1 (ko) | 로컬 영상분석과 클라우드 서비스를 활용하는 하이브리드 지능형 침입감시 시스템 | |
KR102046591B1 (ko) | 영상 감시 시스템 및 영상 감시방법 | |
US20240078783A1 (en) | Image processing system, image processing method, and non-transitory computer-readable storage medium | |
KR20180135130A (ko) | 동적 영상정보 마스킹 장치 및 방법 | |
JP2016122892A (ja) | 映像装置 | |
CN113038089B (zh) | 智能识别的动态自解码处理方法、装置、电子设备及存储介质 | |
Fleck et al. | Towards secure and privacy sensitive surveillance | |
JP2005346545A (ja) | 監視装置及びプログラム | |
CN110519562B (zh) | 移动侦测方法、装置和系统 | |
KR20230050187A (ko) | 보행자 얼굴 검출 정보를 매개로 한 영상 보안 장치 및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20171116 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20181210 Year of fee payment: 5 |