KR101458136B1 - 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체 - Google Patents

영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체 Download PDF

Info

Publication number
KR101458136B1
KR101458136B1 KR1020140023976A KR20140023976A KR101458136B1 KR 101458136 B1 KR101458136 B1 KR 101458136B1 KR 1020140023976 A KR1020140023976 A KR 1020140023976A KR 20140023976 A KR20140023976 A KR 20140023976A KR 101458136 B1 KR101458136 B1 KR 101458136B1
Authority
KR
South Korea
Prior art keywords
data
frame
image
face region
unmasking
Prior art date
Application number
KR1020140023976A
Other languages
English (en)
Inventor
진우상
민관기
김영진
김호
Original Assignee
김호
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김호 filed Critical 김호
Priority to KR1020140023976A priority Critical patent/KR101458136B1/ko
Application granted granted Critical
Publication of KR101458136B1 publication Critical patent/KR101458136B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678—User interface
    • G08B13/19686—Interfaces masking personal details for privacy, e.g. blurring faces, vehicle license plates
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/19—Recognition using electronic means
    • G06V30/192—Recognition using electronic means using simultaneous comparisons or correlations of the image signals with a plurality of references
    • G06V30/194—References adjustable by an adaptive method, e.g. learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

본 발명은 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체에 관한 것이다.
본 발명의 일측면에 따르면, 영상 촬영 기기로부터 영상 데이터를 수신하면 상기 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출하고, 상기 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리하여 마스킹된 데이터를 생성하고, 상기 각각의 프레임에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터를 생성하고, 상기 마스킹된 데이터 및 메타 데이터를 인코딩하여 제공하는 영상 처리 서버; 및 사용자로부터 상기 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신하면, 상기 사용자의 권한을 확인하여 상기 확인 결과에 따라 상기 영상 처리 서버로부터 수신한 인코딩된 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하고, 상기 메타 데이터를 이용하여 상기 마스킹된 데이터를 언마스킹 처리하는 감시 서버를 포함하는 영상 처리 시스템이 개시된다.

Description

영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체 {VIDEO PROCESSING METHOD, VIDEO PROCESSING SERVER PERFORMING THE SAME, MONITORING SERVER PERFORMING THE SAME, SYSTEM PERFORMING THE SAME AND STORAGE MEDIUM STORING THE SAME}
본 발명의 실시예들은 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체에 관한 것이다.
일반적으로 사람이 많이 왕래하는 오피스 빌딩이나 은행과 같은 각종 영업소 및 아파트의 엘리베이터나 주차장 등에는 그 지역의 진행상황을 파악하거나 안전을 위하여 감시카메라를 설치하여 감시하고 있다.
감시카메라는 하나의 영상입력부를 구비하여 지정된 장소를 촬영하고 그 촬영된 영상을 영상 출력장치인 모니터 등으로 전송하여 감시자로 하여금 촬영된 부분을 확인할 수 있도록 사용된다.
이와 같은 감시카메라는, 범죄가 발생했을 때, 범죄자를 색출해 내는데 큰 역할을 담당하고 있음에 따라, 최근에 현금인출기 등에도 설치되고 있다.
그러나, 이러한 감시카메라로부터 촬영된 영상이 특정지역 예컨대, 경비실이나 또는 관리실, 파출소 등에 설치된 모니터로 송출되어 출력됨에 따라, 일반사람들은 자신이 범죄자가 아님에도 불구하고 감시카메라에 촬영되어 타인의 모니터를 통해 모니터링된다는 점에 대해서 매우 불편함을 느낄 수 있다.
뿐만 아니라, 범죄자가 아닌 일반사람들까지도 감시카메라에 촬영되어 타인에게 자신의 생활을 노출시키는 결과를 가져옴에 따라 개인 사생활 침해 논란이 끊이지 않고 있는 실정이다.
대한민국 공개특허 제10-2012-0066393호 (2012.06.22 공개)
본 발명은 영상 촬영 기기에 의해 생성된 영상 데이터 중 특히 얼굴과 같은 민감한 부위를 마스킹하여 감시 서버에 제공하고, 감시 서버에서는 권한이 있는 사용자만이 언마스킹하여 원래의 영상 데이터로 복원하여 모니터링할 수 있게 함으로써, 카메라 모니터링이 진행될 때 개인정보보호의 요구를 보다 철저히 실현할 수 있어, CCTV와 같은 카메라 감시환경에 대한 사람들의 거부감을 해소할 수 있도록 하는 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체를 제공하는 것을 목적으로 한다.
또한 본 발명은 기 설치된 영상 처리 서버에 마스킹 처리를 위한 소프트웨어적 모듈의 부가 설치를 통해 구현 가능하도록 구성되어, 물리적인 기기 변경이 없이도 기 설치된 CCTV 시스템을 프라이버시 보호가 가능한 지능형 CCTV 시스템으로 기능 향상시킬 수 있도록 하는 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체를 제공하는 것을 목적으로 한다.
본 발명이 해결하고자 하는 과제는 이상에서 언급한 과제(들)로 제한되지 않으며, 언급되지 않은 또 다른 과제(들)은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상술한 본 발명의 목적을 달성하기 위한 본 발명의 일측면에 따르면, 영상 촬영 기기로부터 영상 데이터를 수신하면 상기 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출하는 얼굴 영역 검출부; 상기 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리하는 마스킹 처리부; 상기 각각의 프레임에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터를 생성하는 메타 데이터 생성부; 및 상기 마스킹된 데이터 및 메타 데이터를 인코딩하는 인코딩부를 포함하는 영상 처리 서버가 개시된다.
본 발명의 또 다른 일측면에 따르면, 영상 처리 서버와 연결된 감시 서버에 있어서, 상기 영상 처리 서버로부터 수신한 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하는 디코딩부; 상기 메타 데이터를 이용하여 상기 마스킹된 데이터를 언마스킹 처리하는 언마스킹 처리부; 및 사용자로부터 상기 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신하면, 상기 사용자의 권한을 확인하고 상기 확인 결과에 따라 상기 디코딩부 및 언마스킹 처리부의 동작을 제어하는 제어부를 포함하는 감시 서버가 개시된다.
본 발명의 또 다른 일측면에 따르면, 영상 처리 서버에서 실행되는 영상 처리 방법에 있어서, 영상 촬영 기기로부터 영상 데이터를 수신하면 상기 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출하는 단계; 상기 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리하는 단계; 상기 각각의 프레임에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터를 생성하는 단계; 및 상기 마스킹된 데이터 및 메타 데이터를 인코딩하는 단계를 포함하는 영상 처리 방법이 개시된다.
본 발명의 또 다른 일측면에 따르면, 영상 처리 서버와 연결된 감시 서버에서 실행되는 영상 처리 방법에 있어서, 사용자로부터 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신하면, 상기 사용자의 권한을 확인하는 단계; 상기 확인 결과에 따라 상기 영상 처리 서버로부터 수신한 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하는 단계; 및 상기 메타 데이터를 이용하여 상기 마스킹된 데이터를 언마스킹 처리하는 단계를 포함하는 영상 처리 방법이 개시된다.
본 발명의 또 다른 일측면에 따르면, 영상 촬영 기기로부터 영상 데이터를 수신하면 상기 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출하고, 상기 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리하여 마스킹된 데이터를 생성하고, 상기 각각의 프레임에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터를 생성하고, 상기 마스킹된 데이터 및 메타 데이터를 인코딩하여 제공하는 영상 처리 서버; 및 사용자로부터 상기 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신하면, 상기 사용자의 권한을 확인하여 상기 확인 결과에 따라 상기 영상 처리 서버로부터 수신한 인코딩된 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하고, 상기 메타 데이터를 이용하여 상기 마스킹된 데이터를 언마스킹 처리하는 감시 서버를 포함하는 영상 처리 시스템이 개시된다.
본 발명의 또 다른 일측면에 따르면, 영상 처리 서버에서 실행되는 영상 처리 방법을 실행하기 위한 프로그램을 저장하는 기록 매체에 있어서, 영상 촬영 기기로부터 영상 데이터를 수신하면 상기 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출하는 기능; 상기 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리하는 기능; 상기 각각의 프레임에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터를 생성하는 기능; 및 상기 마스킹된 데이터 및 메타 데이터를 인코딩하는 기능을 포함하는 기록 매체가 개시된다.
본 발명의 또 다른 일측면에 따르면, 영상 처리 서버와 연결된 감시 서버에서 실행되는 영상 처리 방법을 실행하기 위한 프로그램을 저장하는 기록 매체에 있어서, 사용자로부터 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신하면, 상기 사용자의 권한을 확인하는 기능; 상기 확인 결과에 따라 상기 영상 처리 서버로부터 수신한 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하는 기능; 및 상기 메타 데이터를 이용하여 상기 마스킹된 데이터를 언마스킹 처리하는 기능을 포함하는 기록 매체가 개시된다.
기타 실시예들의 구체적인 사항들은 상세한 설명 및 첨부 도면들에 포함되어 있다.
본 발명의 이점 및/또는 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다.
본 발명에 따르면, 영상 처리 서버가 영상 촬영 기기에 의해 생성된 영상 데이터를 마스킹하여 감시 서버에 제공하고, 감시 서버에서는 권한이 있는 사용자만이 언마스킹하여 원래의 영상 데이터로 복원하여 모니터링할 수 있게 함으로써 카메라 모니터링이 진행될 때 개인정보보호의 요구를 보다 철저히 실현할 수 있어 CCTV와 같은 카메라 감시환경에 대한 사람들의 거부감을 해소할 수 있다는 효과가 있다.
또한, 본 발명은, 기 설치된 영상 처리 서버에 마스킹 처리를 위한 소프트웨어적 모듈의 부가 설치를 통해 구현 가능하도록 구성되어, 물리적인 기기 변경이 없이도 기 설치된 CCTV 시스템을 프라이버시 보호가 가능한 지능형 CCTV 시스템으로 기능 향상시킬 수 있도록 한다는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 영상 처리 시스템을 설명하기 위한 네트워크 구성도이다.
도 2는 본 발명의 일 실시예에 따른 영상 처리 서버를 설명하기 위한 블록도이다.
도 3은 본 발명의 일 실시예에 따른 감시 서버를 설명하기 위한 블록도이다.
도 4는 본 발명에 따른 영상 처리 방법의 일 실시예를 설명하기 위한 흐름도이다.
도 5는 본 발명에 따른 영상 처리 방법의 다른 일 실시예를 설명하기 위한 흐름도이다.
도 6은 얼굴 영역을 검출하기 위한 직사각형 피쳐(대칭형, 비대칭형)를 나타내는 도면이다.
도 7은 도 6의 직사각형 피쳐를 이용하여 얼굴 영역을 검출하는 과정을 설명하기 위한 참조도이다.
도 8은 얼굴 영역을 마스킹 처리하는 과정을 설명하기 위한 참조도이다.
도 9는 메타 데이터를 생성하는 과정을 설명하기 위한 참조도이다.
이하에서는 첨부된 도면을 참조하여 본 발명의 실시예들을 상세히 설명하기로 한다.
본 명세서에서 사용된 용어 중 "마스킹 처리"는 영상 데이터의 각각의 프레임에 대해서 특정 영역을 왜곡시키는 처리를 의미한다.
또한, "특정"이라는 용어는 사용자의 입력 또는 서버의 제어 동작에 의해 설정되는 소정의 설정 조건을 의미한다.
도 1은 본 발명의 일 실시예에 따른 영상 처리 시스템을 설명하기 위한 네트워크 구성도이다.
도 1을 참조하면, 영상 처리 시스템은 영상 촬영 기기(100), 영상 처리 서버(200) 및 감시 서버(300)를 포함한다.
영상 촬영 기기(100)는 영상 데이터(예를 들어, 동영상 데이터)를 촬영하여 영상 처리 서버(200)에 제공하는 장치이다. 이러한 영상 촬영 기기(100)는 캠코더, 카메라를 포함하는 스마트폰, CCTV 등이 될 수 있다.
영상 처리 서버(200)는 영상 촬영 기기(100)로부터 영상 데이터를 수신하고, 영상 데이터를 분석하여 얼굴 정보를 추출하여 마스킹 처리하고 인코딩하여 네트워크를 통해 감시 서버(300)에 스트리밍 전송한다. 이때, 영상 처리 서버(200)는 마스킹 처리한 얼굴 영역에 대한 정보(예를 들어, 얼굴 영역에 대한 좌표 정보)를 메타데이터로 생성하여 함께 감시 서버(300)에 스트리밍 전송할 수 있다. 이러한 영상 처리 서버(200)는 이하의 도 2를 참조하여 보다 구체적으로 설명하기로 한다.
감시 서버(300)는 사용자로부터 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신하면, 사용자의 권한을 확인하여 확인 결과에 따라 영상 처리 서버(200)로부터 수신한 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하고, 메타 데이터를 이용하여 마스킹된 데이터를 언마스킹 처리한다. 이러한 감시 서버(300)는 이하의 도 3을 참조하여 보다 구체적으로 설명하기로 한다.
도 2는 본 발명의 일 실시예에 따른 영상 처리 서버를 설명하기 위한 블록도이다.
도 2를 참조하면, 영상 처리 서버(200)는 얼굴 영역 검출부(210), 마스킹 처리부(220), 메타 데이터 생성부(230), 인코딩부(240) 및 송신부(250)를 포함한다.
얼굴 영역 검출부(210)는 영상 촬영 기기(도 1, 100)로부터 수신된 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출하고, 검출된 얼굴 영역을 마스킹 처리부(220) 및 메타 데이터 생성부(230)에 각각 제공한다.
일 실시예에서, 얼굴 영역 검출부(210)는 영상 데이터의 각각의 프레임에서 얼굴후보영역을 검출하고, 상기 검출된 얼굴후보영역에 대한 직사각형 피쳐(또는 4각 특징점 모델)을 정의하며, 상기 직사각형 피쳐를 AdaBoost 학습 알고리즘에 의하여 학습시킨 학습자료에 기초하여 얼굴영역을 검출하되, 직사각형 형태로 얼굴영역을 검출할 수 있다. 이러한 얼굴영역 검출의 상세한 과정은 본 발명자가 제안한 바 있는 대한민국 등록특허 제10-1216123호(2012년12월20일 등록), 대한민국 등록특허 제 10-1216115호(2012년12월20일 등록) 등을 통해 이해될 수 있으며, 그 상세한 설명은 생략한다.
마스킹 처리부(220)는 얼굴 영역 검출부(210)로부터 각각의 프레임에서 검출된 얼굴 영역을 수신하면, 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리하여 인코딩부(240)에 제공한다. 즉, 마스킹 처리부(220)는 영상 데이터의 각각의 프레임에 대해서 특정 영역을 왜곡시킬 수 있다.
일 실시예에서, 마스킹 처리부(220)는 각각의 프레임에서 검출된 얼굴 영역을 특정 픽셀 크기의 블록으로 나누어 복수의 블록을 생성하고, 복수의 블록 각각에 대해서 특정 좌표의 색상 정보로 해당 블록을 단일색 처리하여 마스킹 처리할 수 있다.
예를 들어, 마스킹 처리부(220)는 얼굴 영역을 2 * 2 픽셀크기의 블록으로 나누어 복수의 블록을 생성하고, 복수의 블록 각각에 대해서 (0, 0)위치의 색상 정보로 해당 블록을 단일색 처리하여 마스킹 처리할 수 있다.
이러한 실시예와는 달리, 마스킹 처리부(220)는 가우시안블러링, 영상모자이크화, 유사영상으로의 치환 등 공지의 영상 왜곡 기술을 이용하여 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리할 수도 있다.
메타 데이터 생성부(230)는 얼굴 영역 검출부(210)로부터 각각의 프레임에서 검출된 얼굴 영역을 수신하면, 메타 데이터를 생성할 수 있다. 바람직하게, 상기 메타 데이터는 상기 각각의 프레임에서 검출된 얼굴 영역의 좌표 정보를 포함하며, 상기 얼굴 영역의 원본 이미지 정보 또는 상기 얼굴 영역의 원본 이미지로부터 추출된 얼굴 인식 특징 정보 중 적어도 하나를 포함한다. 상기 얼굴 인식 특징 정보는 특정 사용자의 얼굴 영역에 대한 언마스킹을 위해 사용되는 정보로 바이너리(Binary) 형태가 될 수 있다. 상기 얼굴 영역의 원본 이미지 정보는 예를 들어, 비트맵 정보로 구현될 수 있다. 메타 데이터 생성부(230)는 메타 데이터를 인코딩부(240)에 제공한다.
여기에서, 얼굴 영역의 좌표 정보는 {왼쪽 위 좌표, 오른쪽 아래 좌표} 순으로 구성될 수 있고, 예를 들어 {(100, 60), (170, 145)}일 수 있다. 얼굴 영역의 비트맵 정보는 [R][G][B]로 구성될 수 있고, 예를 들어 [B][G][R][B][G][R][B][G][R][B][G][R] 과 같이 구성될 수 있다.
인코딩부(240)는 마스킹 처리부(220) 및 메타 데이터 생성부(230) 각각으로부터 마스킹된 데이터 및 메타 데이터를 수신하면, 마스킹된 데이터 및 메타 데이터를 인코딩한다.
송신부(250)는 인코딩된 데이터를 감시 서버(도 1, 300)에 제공한다.
일 실시예에서, 송신부(250)는 스트리밍 서비스를 통해 인코딩된 데이터를 감시 서버(300)에 제공할 수 있다. 이때, 송신부(250)는 영상 데이터의 각각의 프레임별로 인코딩된 데이터를 생성하여 감시 서버(300)에 제공할 수 있다.
도 3은 본 발명의 일 실시예에 따른 감시 서버를 설명하기 위한 블록도이다.
도 3을 참조하면, 감시 서버(300)는 수신부(310), 디코딩부(320), 언마스킹 처리부(330) 및 제어부(340)를 포함한다.
수신부(310)는 영상 처리 서버(도 1, 200)로부터 데이터를 수신하면, 데이터를 디코딩부(320)에 제공한다.
일 실시예에서, 수신부(310)는 영상 처리 서버(200)로부터 스트리밍 서비스를 통해 영상 데이터의 각각의 프레임을 수신하면, 각각의 프레임을 순차적으로 디코딩부(320)에 제공한다.
디코딩부(320)는 제어부(340)의 제어에 따라 수신부(310)를 통해 수신된 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하여 언마스킹 처리부(330)에 제공한다.
언마스킹 처리부(330)는 디코딩부(320)로부터 수신된 메타 데이터를 이용하여 마스킹된 데이터를 언마스킹 처리한다.
일 실시예에서, 언마스킹 처리부(330)는 마스킹된 데이터의 각각의 프레임 중 특정 프레임에 대응되는 메타 데이터를 파싱하여 얼굴 영역의 좌표 정보를 추출하고, 특정 프레임에서 좌표 정보에 해당하는 얼굴 영역을 원래대로 복원할 수 있다. 보다 구체적으로, 언마스킹 처리부(330)는 특정 프레임에서 얼굴 영역의 좌표 정보의 비트맵 정보를 메타 데이터에 포함된 비트맵 정보로 치환하여 얼굴 영역을 원래대로 복원할 수 있다.
다른 일 실시예에서, 언마스킹 처리부(330)는 메타 데이터에 포함된 얼굴 인식 특징 정보를 이용하여 특정 감시 대상에 대한 언마스킹을 처리할 수 있다. 예를 들어, 언마스킹 처리부(330)는 메타 데이터에 포함된 얼굴 인식 특징 정보가 사용자 A(또는 사용자 A로 볼 수 있는 고유 특징)를 지시하는 경우, 사용자 A(또는 사용자 A로 볼 수 있는 고유 특징)가 포함된 마스킹 영역에 대해서만 언마스킹을 처리할 수 있다.
언마스킹 처리부(330)는 제어부(340)의 제어에 따라 마스킹된 데이터에 포함된 모든 마스킹 영역 또는 특정 마스킹 영역에 대한 언마스킹을 처리한다.
제어부(340)는 감시 서버(300)의 다른 구성 요소들을 제어하여 영상 처리 방법이 실행되도록 한다.
제어부(330)는 수신부(310)를 통해 사용자로부터 마스킹된 데이터에 대한 언마스킹 처리를 요청하는 입력을 수신하면, 사용자의 권한을 확인하여 확인 결과에 따라 마스킹된 데이터의 언마스킹을 처리하도록 언마스킹 처리부(330)를 제어한다.
일 실시예에서, 제어부(340)는 사용자의 권한을 확인하여 해당 사용자가 마스킹된 데이터에 포함된 모든 마스킹 영역에 대한 언마스킹 권한을 가진 사용자라고 판단되는 경우, 해당 마스킹된 데이터의 언마스킹을 처리하도록 언마스킹 처리부(330)를 제어할 수 있다.
다른 일 실시예에서, 제어부(340)는 사용자의 권한을 확인하여 사용자가 마스킹된 데이터에 포함된 특정 마스킹 영역에 대한 언마스킹 권한을 가진 사용자라고 판단되는 경우, 메타 데이터에 포함된 얼굴 인식 특징 정보를 이용하여 특정 마스킹 영역에 대한 언마스킹을 처리하도록 상기 언마스킹 처리부(330)를 제어할 수 있다.
도 4는 본 발명에 따른 영상 처리 방법의 일 실시예를 설명하기 위한 흐름도이다.
도 4를 참조하면, 영상 처리 서버(200)는 영상 촬영 기기로부터 영상 데이터를 수신한다(단계 S410). 영상 처리 서버(200)는 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출한다(단계 S420).
영상 처리 서버(200)는 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리한다(단계 S430). 단계 S430에 대한 일 실시예에서, 영상 처리 서버(200)는 각각의 프레임에서 검출된 얼굴 영역을 특정 픽셀 크기의 블록으로 나누어 복수의 블록을 생성하고, 복수의 블록 각각에 대해서 특정 좌표의 색상 정보로 해당 블록을 단일색 처리하여 마스킹된 데이터를 생성할 수 있다.
영상 처리 서버(200)는 각각의 프레임에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터를 생성한다(단계 S440). 단계 S440에 대한 일 실시예에서, 영상 처리 서버(200)는 상기 각각의 프레임에서 검출된 얼굴 영역의 좌표 정보를 포함하며, 상기 얼굴 영역의 원본 이미지 정보 또는 상기 얼굴 영역의 원본 이미지로부터 추출된 얼굴 인식 특징 정보 중 적어도 하나를 포함하는 메타 데이터를 생성할 수 있다. 여기에서, 얼굴 인식 특징 정보는 특정 사용자의 얼굴 영역에 대한 언마스킹을 위해 사용되는 정보로 바이너리 형태일 수 있다.
영상 처리 서버(200)는 마스킹된 데이터 및 메타 데이터를 인코딩한다(단계 S450).
도 5는 본 발명에 따른 영상 처리 방법의 다른 일 실시예를 설명하기 위한 흐름도이다.
도 5를 참조하면, 감시 서버(300)는 사용자로부터 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신한다(단계 S510). 감시 서버(300)는 사용자의 권한을 확인한다(단계 S520). 감시 서버(300)는 사용자의 권한을 확인한 결과 사용자가 권한이 있는 사용자라고 판단한 경우(단계 S530), 영상 처리 서버로부터 수신한 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출한다(단계 S540). 감시 서버(300)는 메타 데이터를 이용하여 상기 마스킹된 데이터를 언마스킹 처리한다(단계 S550).
단계 S550에 대한 일 실시예에서, 감시 서버(300)는 마스킹된 데이터의 각각의 프레임 중 특정 프레임에 대응되는 메타 데이터를 파싱하여 얼굴 영역의 좌표 정보를 추출하고, 특정 프레임에서 좌표 정보에 해당하는 얼굴 영역을 원래대로 복원한다. 보다 구체적으로, 감시 서버(300)는 특정 프레임에서 얼굴 영역의 좌표 정보의 비트맵 정보를 메타 데이터에 포함된 비트맵 정보로 치환하여 얼굴 영역을 원래대로 복원할 수 있다.
도 6은 얼굴 영역을 검출하기 위한 직사각형 피쳐(대칭형, 비대칭형)를 나타내는 도면이고, 도 7은 도 6의 직사각형 피쳐를 이용하여 얼굴 영역을 검출하는 과정을 설명하기 위한 참조도이다. 상기 도 6 또는 도 7에 예시된 직사각형은 얼굴영역 검출을 위한 피쳐로 이해될 수 있으며, 정면 얼굴영역의 특징을 잘 반영하고 있는 대칭적인 성질을 가진 하 라이크 피쳐(haar-like feature)(a)와, 비정면 얼굴영역의 특징을 반영하여 제안된 비대칭성의 직사각형 피쳐(b)로 더욱 이해될 수 있다.
도 6 및 도 7을 참조하면, 영상 처리 서버(도 1, 200)는 영상 촬영 기기(도 1, 100)로부터 영상 데이터의 각각의 프레임 중 특정 프레임을 수신하면, 특정 프레임에서 얼굴 영역을 검출한다. 즉, 영상 처리 서버(200)는 직사각형 피쳐(대칭형 또는 비대칭형)를 이용한 AdaBoost기반 얼굴분류기를 이용하여 프레임에서 얼굴 영역을 검출할 수 있다.
일반적으로, 정면 얼굴 영역을 포함하는 프레임에는 눈, 코, 입과 같이 얼굴의 고유한 구조적 특성들이 화상에 전반적으로 골고루 분포되어 있으며 대칭적이다. 하지만, 비정면 얼굴 영역을 포함하는 프레임에는 눈, 코, 입과 같이 얼굴의 고유한 구조적 특성들이 화상에 골고루 분포되어 있지 않기 때문에 대칭적이지 못하고 좁은 범위에 밀집되어 있으며 얼굴윤곽이 직선이 아니므로 배경영역이 많이 섞어져 있다.
따라서, 도 6의 (a)와 같은 대칭적인 피쳐를 이용하면 비정면 얼굴 영역에 대한 높은 검출성능을 얻기 어려울 수 있다는 점을 더욱 감안하여, 본 실시예에서는 더욱 바람직하게는, 도 6의 (a)와 같은 대칭적인 피쳐뿐만 아니라 도 6의 (b)와 같은 비대칭적인 피쳐를 사용한다. 도 6의 (b)와 같은 비대칭적인 피쳐는 도 6의 (a)와 같은 대칭적인 피쳐와 달리 비대칭적인 형태, 구조, 모양으로 구성되어 비정면 얼굴의 구조적 특성을 잘 반영하고 있어 비정면 얼굴 영역에 대한 검출 효과가 뛰어나다. 즉, 도 6의 (a)와 같은 대칭적인 피쳐를 이용하여 도 7의 (a)와 같은 프레임에서 얼굴 영역을 검출할 수 있고, 도 6의 (b)와 같은 비대칭적인 피쳐를 이용하여 도 7의 (b)와 같은 프레임에서 얼굴 영역을 검출할 수 있다. 비대칭성의 직사각형 피쳐(b)의 유효성에 대해서는 본 발명자가 제안한 바 있는 대한민국 등록특허 제10-1216123호(2012년12월20일 등록), 대한민국 등록특허 제 10-1216115호(2012년12월20일 등록) 등을 통해 이해될 수 있으며, 그 상세한 설명은 생략한다.
도 8은 얼굴 영역을 마스킹 처리하는 과정을 설명하기 위한 참조도이다.
도 8을 참조하면, 영상 처리 서버(도 1, 200)는 영상 촬영 기기(도 1, 100)로부터 영상 데이터의 각각의 프레임 중 특정 프레임(810)를 수신하면, 특정 프레임(810)에서 얼굴 영역(811)을 검출한다. 여기에서, 얼굴 영역(811)을 검출하는 과정은 상술하였으므로, 이에 대한 중복 설명은 생략하기로 한다.
영상 처리 서버(200)는 특정 프레임(810)에서 검출된 얼굴 영역(811)을 특정 픽셀 크기의 블록으로 나누어 참조번호(820)과 같이 복수의 블록을 생성한다.
그런 다음, 영상 처리 서버(200)는 참조번호(830)과 같이 복수의 블록 각각에 대해서 특정 좌표의 색상 정보로 해당 블록을 단일색 처리하여 얼굴 영역(810)을 참조번호(830)와 같이 마스킹 처리한다.
예를 들어, 영상 처리 서버(200)는 복수의 블록 중 특정 블록의 (0,0)의 색상이 핑크인 경우 해당 블록의 색을 핑크 색으로 단일 처리한다. 결과적으로, 영상 처리 서버(200)는 이러한 과정을 거쳐서 참조번호(840)과 같은 마스킹된 데이터를 생성할 수 있다.
도 9는 메타 데이터를 생성하는 과정을 설명하기 위한 참조도이다.
도 9를 참조하면, 영상 처리 서버(도 1, 200)는 영상 촬영 기기(도 1, 100)로부터 영상 데이터의 각각의 프레임 중 특정 프레임(910)을 수신하면, 특정 프레임(910)에서 얼굴 영역을 검출한다. 여기에서, 얼굴 영역을 검출하는 과정은 상술하였으므로, 이에 대한 중복 설명은 생략하기로 한다.
그런 다음, 영상 처리 서버(200)는 프레임에서 검출된 얼굴 영역을 각각 마스킹 처리하여 마스킹된 데이터(920)를 생성한다. 여기에서, 얼굴 영역을 마스킹 처리하는 과정은 도 8에서 설명하였으므로, 이에 대한 상세한 설명은 생략하기로 한다.
영상 처리 서버(200)는 프레임(910)에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터(930)를 생성한다. 메타 데이터(930)는 프레임(910)에서 검출된 얼굴 영역의 원본 이미지(예, 비트맵 정보), 얼굴 영역의 좌표 정보 및 얼굴 인식 특징 정보를 포함한다. 이러한 메타 데이터(930)의 구조는 아래 [표 1]과 같이 예시될 수 있다.
Figure 112014019996856-pat00001
[표 1]을 참조하면, 메타 데이터는 영상 데이터의 각각의 프레임별로 해당 프레임의 얼굴 영역의 정보를 포함한다.
메타 데이터에 포함된 <위치> <왼쪽 위 좌표> 100,60 </왼쪽 위 좌표> <오른쪽 아래 좌표> 170, 145 </오른쪽 아래 좌표> </위치>는 얼굴 영역의 좌표 정보를 나타낸다. 이러한 얼굴 영역의 좌표 정보는 감시 서버(도 1, 300)에서 프레임에서 복원 대상인 얼굴 영역을 검출하는데 사용될 수 있다.
메타 데이터에 포함된 <비트맵> [B][G][R][B][G][R][B][G][R][B][G][R], [B][G][R][B][G][R][B][G][R][B][G][R]...</비트맵>은 얼굴 영역의 비트맵 정보(RGB 정보)를 나타낸다. 이러한 얼굴 영역의 비트맵 정보는 감시 서버(도 1, 300)에서 프레임의 얼굴 영역을 원래대로 복원하는데 사용될 수 있다.
본 발명의 실시예 들은 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터 판독가능 매체를 포함한다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD, USB 드라이브와 같은 광기록 매체, 플롭티컬 디스크와 같은 자기-광 매체, 및 롬, 램, 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 상기 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수도 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
지금까지 본 발명에 따른 구체적인 실시예에 관하여 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서는 여러 가지 변형이 가능함은 물론이다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허 청구의 범위뿐 아니라 이 특허 청구의 범위와 균등한 것들에 의해 정해져야 한다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명 사상은 아래에 기재된 특허청구범위에 의해서만 파악되어야 하고, 이의 균등 또는 등가적 변형 모두는 본 발명 사상의 범주에 속한다고 할 것이다.
100: 영상 촬영 기기
200: 영상 처리 서버
210: 얼굴 영역 검출부
220: 마스킹 처리부
230: 메타 데이터 생성부
240: 인코딩부
250: 송신부
300: 감시 서버
310: 수신부
320: 디코딩부
330: 언마스킹 처리부
340: 제어부

Claims (17)

  1. 영상 촬영 기기로부터 영상 데이터를 수신하면 상기 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출하는 얼굴 영역 검출부;
    상기 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리하는 마스킹 처리부;
    상기 각각의 프레임에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터를 생성하는 메타 데이터 생성부- 상기 메타 데이터는 상기 각각의 프레임에서 검출된 얼굴 영역의 좌표 정보를 포함하며, 상기 얼굴 영역의 원본 이미지 정보를 포함함-; 및
    상기 마스킹된 데이터 및 메타 데이터를 인코딩하는 인코딩부를 포함하는
    영상 처리 서버.
  2. 제1항에 있어서,
    상기 얼굴 영역 검출부는
    상기 영상 데이터의 각각의 프레임에서 얼굴후보영역을 검출하고, 상기 검출된 얼굴후보영역에 대한 직사각형 피쳐를 정의하며, 상기 직사각형 피쳐를 AdaBoost 학습 알고리즘에 의하여 학습시킨 학습자료에 기초하여 얼굴영역을 검출하되, 직사각형 형태로 얼굴영역을 검출하도록 구성된 것을 특징으로 하는
    영상 처리 서버.
  3. 제2항에 있어서,
    상기 마스킹 처리부는
    상기 각각의 프레임에서 검출된 얼굴 영역을 특정 픽셀 크기의 블록으로 나누어 복수의 블록을 생성하고, 상기 복수의 블록 각각에 대해서 특정 좌표의 색상 정보로 해당 블록을 단일색 처리하는 것을 특징으로 하는
    영상 처리 서버.
  4. 제2항에 있어서,
    상기 메타 데이터는
    상기 각각의 프레임에서 검출된 얼굴 영역의 원본 이미지로부터 추출된 얼굴 인식 특징 정보를 더욱 포함하는 것을 특징으로 하는
    영상 처리 서버.
  5. 제4항에 있어서,
    상기 얼굴 인식 특징 정보는 특정 사용자의 얼굴 영역에 대한 언마스킹을 위해 사용되는 정보로 바이너리(Binary) 형태인 것을 특징으로 하는
    영상 처리 서버.
  6. 영상 처리 서버와 연결된 감시 서버에 있어서,
    상기 영상 처리 서버로부터 수신한 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하는 디코딩부- 상기 메타 데이터는 영상 데이터의 각각의 프레임에서 검출된 얼굴 영역의 좌표 정보를 포함하며, 상기 얼굴 영역의 원본 이미지 정보를 포함함-;
    상기 메타 데이터를 이용하여 상기 마스킹된 데이터를 언마스킹 처리하는 언마스킹 처리부; 및
    사용자로부터 상기 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신하면, 상기 사용자의 권한을 확인하고 상기 확인 결과에 따라 상기 디코딩부 및 언마스킹 처리부의 동작을 제어하는 제어부를 포함하는
    감시 서버.
  7. 제6항에 있어서,
    각각의 프레임에서 검출된 상기 얼굴 영역은 직사각형 형태이며,
    상기 메타 데이터는
    영상 데이터의 각각의 프레임에서 검출된 직사각형 형태의 얼굴 영역의 원본 이미지로부터 추출된 얼굴 인식 특징 정보를 더욱 포함하는 것을 특징으로 하는
    감시 서버.
  8. 제6항에 있어서,
    상기 언마스킹 처리부는
    상기 마스킹된 데이터의 각각의 프레임 중 특정 프레임에 대응되는 메타 데이터를 파싱하여 얼굴 영역의 좌표 정보를 추출하고, 상기 특정 프레임에서 상기 좌표 정보에 해당하는 얼굴 영역을 원본 이미지로 복원하는 것을 특징으로 하는
    감시 서버.
  9. 제8항에 있어서,
    상기 언마스킹 처리부는
    상기 특정 프레임에서 상기 좌표 정보에 해당하는 얼굴 영역의 마스킹 처리된 비트맵 정보를 상기 메타 데이터에 포함된 비트맵 정보로 치환하여 원본 이미지로 복원하는 것을 특징으로 하는
    감시 서버.
  10. 제6항에 있어서,
    상기 제어부는
    상기 사용자가 상기 마스킹된 데이터에 포함된 모든 마스킹 영역에 대한 언마스킹 권한을 가진 사용자라고 판단되는 경우, 상기 마스킹된 데이터의 언마스킹을 처리하도록 상기 언마스킹 처리부를 제어하는 것을 특징으로 하는
    감시 서버.
  11. 제7항에 있어서,
    상기 제어부는
    상기 사용자가 상기 마스킹된 데이터에 포함된 특정 마스킹 영역에 대한 언마스킹 권한을 가진 사용자라고 판단되는 경우, 상기 메타 데이터에 포함된 얼굴 인식 특징 정보를 이용하여 상기 특정 마스킹 영역에 대한 언마스킹을 처리하도록 상기 언마스킹 처리부를 제어하는 것을 특징으로 하는
    감시 서버.
  12. 제7항에 있어서,
    상기 얼굴 인식 특징 정보는 특정 사용자의 얼굴 영역에 대한 언마스킹을 위해 사용되는 정보로 바이너리(Binary) 형태인 것을 특징으로 하는
    감시 서버.
  13. 영상 처리 서버에서 실행되는 영상 처리 방법에 있어서,
    영상 촬영 기기로부터 영상 데이터를 수신하면 상기 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출하는 단계;
    상기 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리하는 단계;
    상기 각각의 프레임에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터를 생성하는 단계- 상기 메타 데이터는 상기 각각의 프레임에서 검출된 얼굴 영역의 좌표 정보를 포함하며, 상기 얼굴 영역의 원본 이미지 정보를 포함함-; 및
    상기 마스킹된 데이터 및 메타 데이터를 인코딩하는 단계를 포함하는
    영상 처리 방법.
  14. 영상 처리 서버와 연결된 감시 서버에서 실행되는 영상 처리 방법에 있어서,
    사용자로부터 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신하면, 상기 사용자의 권한을 확인하는 단계;
    상기 확인 결과에 따라 상기 영상 처리 서버로부터 수신한 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하는 단계- 상기 메타 데이터는 영상 데이터의 각각의 프레임에서 검출된 얼굴 영역의 좌표 정보를 포함하며, 상기 얼굴 영역의 원본 이미지 정보를 포함함-; 및
    상기 메타 데이터를 이용하여 상기 마스킹된 데이터를 언마스킹 처리하는 단계를 포함하는
    영상 처리 방법.
  15. 영상 촬영 기기로부터 영상 데이터를 수신하면 상기 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출하고, 상기 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리하여 마스킹된 데이터를 생성하고, 상기 각각의 프레임에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터를 생성하고, 상기 마스킹된 데이터 및 메타 데이터를 인코딩하여 제공하는 영상 처리 서버- 상기 메타 데이터는 상기 각각의 프레임에서 검출된 얼굴 영역의 좌표 정보를 포함하며, 상기 얼굴 영역의 원본 이미지 정보를 포함함-; 및
    사용자로부터 상기 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신하면, 상기 사용자의 권한을 확인하여 상기 확인 결과에 따라 상기 영상 처리 서버로부터 수신한 인코딩된 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하고, 상기 메타 데이터를 이용하여 상기 마스킹된 데이터를 언마스킹 처리하는 감시 서버를 포함하는
    영상 처리 시스템.
  16. 영상 처리 서버에서 실행되는 영상 처리 방법을 실행하기 위한 프로그램을 저장하는 기록 매체에 있어서,
    영상 촬영 기기로부터 영상 데이터를 수신하면 상기 영상 데이터의 각각의 프레임에서 얼굴 영역을 검출하는 기능;
    상기 각각의 프레임에서 검출된 얼굴 영역을 마스킹 처리하는 기능;
    상기 각각의 프레임에서 검출된 얼굴 영역의 정보를 기초로 메타 데이터를 생성하는 기능- 상기 메타 데이터는 상기 각각의 프레임에서 검출된 얼굴 영역의 좌표 정보를 포함하며, 상기 얼굴 영역의 원본 이미지 정보를 포함함-; 및
    상기 마스킹된 데이터 및 메타 데이터를 인코딩하는 기능을 포함하는
    기록 매체.
  17. 영상 처리 서버와 연결된 감시 서버에서 실행되는 영상 처리 방법을 실행하기 위한 프로그램을 저장하는 기록 매체에 있어서,
    사용자로부터 마스킹된 데이터의 언마스킹 처리를 요청하는 입력을 수신하면, 상기 사용자의 권한을 확인하는 기능;
    상기 확인 결과에 따라 상기 영상 처리 서버로부터 수신한 데이터를 디코딩하여 마스킹된 데이터 및 메타 데이터를 추출하는 기능- 상기 메타 데이터는 영상 데이터의 각각의 프레임에서 검출된 얼굴 영역의 좌표 정보를 포함하며, 상기 얼굴 영역의 원본 이미지 정보를 포함함-; 및
    상기 메타 데이터를 이용하여 상기 마스킹된 데이터를 언마스킹 처리하는 기능을 포함하는
    기록 매체.
KR1020140023976A 2014-02-28 2014-02-28 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체 KR101458136B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140023976A KR101458136B1 (ko) 2014-02-28 2014-02-28 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140023976A KR101458136B1 (ko) 2014-02-28 2014-02-28 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체

Publications (1)

Publication Number Publication Date
KR101458136B1 true KR101458136B1 (ko) 2014-11-05

Family

ID=52289349

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140023976A KR101458136B1 (ko) 2014-02-28 2014-02-28 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체

Country Status (1)

Country Link
KR (1) KR101458136B1 (ko)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101621723B1 (ko) 2015-02-13 2016-05-19 경일대학교산학협력단 얼굴 인식 기반 프라이버시 보호를 위한 영상 처리 장치, 이를 위한 방법 및 이 방법이 기록된 컴퓨터 판독 가능한 기록매체
KR20160066068A (ko) * 2014-11-28 2016-06-10 전자부품연구원 동영상 마스킹 처리방법 및 장치
KR20170022592A (ko) * 2015-08-21 2017-03-02 삼성전자주식회사 전자 장치 및 이의 콘텐트 변형 방법
CN106791655A (zh) * 2016-12-24 2017-05-31 深圳云天励飞技术有限公司 一种视频处理方法及装置
WO2018101533A1 (ko) * 2016-12-01 2018-06-07 한화테크윈주식회사 영상 처리 장치 및 방법
KR101894399B1 (ko) * 2017-08-22 2018-09-04 첵트 엘엘씨 개인 정보 보호 기능을 포함한 모니터링 시스템 및 그 방법
KR101911900B1 (ko) * 2017-07-20 2018-10-29 주식회사 이고비드 사생활 보호 카메라와 그 시스템 및 얼굴 인식 기반 실시간 자동 영상 익명화 방법
WO2019017720A1 (ko) * 2017-07-20 2019-01-24 주식회사 이고비드 사생활 보호를 위한 카메라 시스템 및 그 방법
KR102082235B1 (ko) * 2018-10-15 2020-02-27 주식회사 에스원 영상 감시 시스템의 프라이버시 보호 장치 및 이를 이용한 프라이버시 보호 방법
WO2020067615A1 (ko) * 2018-09-28 2020-04-02 주식회사 이고비드 익명화 성능을 향상시키기 위한 영상 익명화 장치의 제어 방법 및 이를 위한 장치
KR20200091715A (ko) * 2019-01-23 2020-07-31 한국전자통신연구원 마스킹 영역 처리 시스템 및 방법
KR20230050187A (ko) * 2021-10-07 2023-04-14 (주)나임기술 보행자 얼굴 검출 정보를 매개로 한 영상 보안 장치 및 그 방법
KR102621196B1 (ko) * 2023-07-10 2024-01-09 주식회사 웹게이트 개인 영상정보 보호 cctv 시스템
KR102680196B1 (ko) * 2023-02-27 2024-07-01 동국대학교 산학협력단 얼굴 영역 보호 및 복원 장치 및 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100564372B1 (ko) * 2003-07-01 2006-03-29 정욱진 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템및 방법
KR20070048841A (ko) * 2005-11-07 2007-05-10 엘지전자 주식회사 감시용 카메라의 프라이버시 마스크 표시 제어방법
KR20120066393A (ko) * 2010-12-14 2012-06-22 한국전자통신연구원 차량용 영상 기록 및 제공 장치와 이를 이용한 지역 정보 획득 장치 및 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100564372B1 (ko) * 2003-07-01 2006-03-29 정욱진 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템및 방법
KR20070048841A (ko) * 2005-11-07 2007-05-10 엘지전자 주식회사 감시용 카메라의 프라이버시 마스크 표시 제어방법
KR20120066393A (ko) * 2010-12-14 2012-06-22 한국전자통신연구원 차량용 영상 기록 및 제공 장치와 이를 이용한 지역 정보 획득 장치 및 방법

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160066068A (ko) * 2014-11-28 2016-06-10 전자부품연구원 동영상 마스킹 처리방법 및 장치
KR101641646B1 (ko) * 2014-11-28 2016-07-21 전자부품연구원 동영상 마스킹 처리방법 및 장치
US10062406B2 (en) 2014-11-28 2018-08-28 Korea Electronics Technology Institute Video masking processing method and apparatus
KR101621723B1 (ko) 2015-02-13 2016-05-19 경일대학교산학협력단 얼굴 인식 기반 프라이버시 보호를 위한 영상 처리 장치, 이를 위한 방법 및 이 방법이 기록된 컴퓨터 판독 가능한 기록매체
US10671745B2 (en) 2015-08-21 2020-06-02 Samsung Electronics Co., Ltd. Electronic apparatus and method of transforming content thereof
KR20170022592A (ko) * 2015-08-21 2017-03-02 삼성전자주식회사 전자 장치 및 이의 콘텐트 변형 방법
WO2017034225A1 (en) * 2015-08-21 2017-03-02 Samsung Electronics Co., Ltd. Electronic apparatus and method of transforming content thereof
US11423168B2 (en) 2015-08-21 2022-08-23 Samsung Electronics Co., Ltd. Electronic apparatus and method of transforming content thereof
KR102407133B1 (ko) 2015-08-21 2022-06-10 삼성전자주식회사 전자 장치 및 이의 콘텐트 변형 방법
WO2018101533A1 (ko) * 2016-12-01 2018-06-07 한화테크윈주식회사 영상 처리 장치 및 방법
US10805527B2 (en) 2016-12-01 2020-10-13 Hanwha Techwin Co., Ltd. Image processing device and method
CN106791655A (zh) * 2016-12-24 2017-05-31 深圳云天励飞技术有限公司 一种视频处理方法及装置
WO2019017720A1 (ko) * 2017-07-20 2019-01-24 주식회사 이고비드 사생활 보호를 위한 카메라 시스템 및 그 방법
KR101911900B1 (ko) * 2017-07-20 2018-10-29 주식회사 이고비드 사생활 보호 카메라와 그 시스템 및 얼굴 인식 기반 실시간 자동 영상 익명화 방법
KR101894399B1 (ko) * 2017-08-22 2018-09-04 첵트 엘엘씨 개인 정보 보호 기능을 포함한 모니터링 시스템 및 그 방법
WO2020067615A1 (ko) * 2018-09-28 2020-04-02 주식회사 이고비드 익명화 성능을 향상시키기 위한 영상 익명화 장치의 제어 방법 및 이를 위한 장치
KR102082235B1 (ko) * 2018-10-15 2020-02-27 주식회사 에스원 영상 감시 시스템의 프라이버시 보호 장치 및 이를 이용한 프라이버시 보호 방법
KR20200091715A (ko) * 2019-01-23 2020-07-31 한국전자통신연구원 마스킹 영역 처리 시스템 및 방법
KR102544626B1 (ko) * 2019-01-23 2023-06-19 한국전자통신연구원 마스킹 영역 처리 시스템 및 방법
KR20230050187A (ko) * 2021-10-07 2023-04-14 (주)나임기술 보행자 얼굴 검출 정보를 매개로 한 영상 보안 장치 및 그 방법
KR102530463B1 (ko) 2021-10-07 2023-05-10 (주)나임기술 보행자 얼굴 검출 정보를 매개로 한 영상 보안 장치 및 그 방법
KR102680196B1 (ko) * 2023-02-27 2024-07-01 동국대학교 산학협력단 얼굴 영역 보호 및 복원 장치 및 방법
KR102621196B1 (ko) * 2023-07-10 2024-01-09 주식회사 웹게이트 개인 영상정보 보호 cctv 시스템

Similar Documents

Publication Publication Date Title
KR101458136B1 (ko) 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체
US12118792B2 (en) Surveillance camera system and surveillance camera control apparatus
US10062406B2 (en) Video masking processing method and apparatus
US10943095B2 (en) Methods and systems for matching extracted feature descriptors for enhanced face recognition
WO2021236296A9 (en) Maintaining fixed sizes for target objects in frames
US9817982B2 (en) Identity authentication system
US20130108105A1 (en) Apparatus and method for masking privacy region based on monitored video image
WO2017151241A2 (en) Video processing
US9454675B2 (en) Apparatus and method for protecting personal information of recorded image, and computer-readable recording medium having computer program recorded therein
KR101911900B1 (ko) 사생활 보호 카메라와 그 시스템 및 얼굴 인식 기반 실시간 자동 영상 익명화 방법
KR20190054702A (ko) 영상에서 객체의 행동을 인식하는 방법 및 그 장치
KR102277929B1 (ko) 얼굴 인식에 기반한 실시간 얼굴 마스킹 시스템 및 이를 이용한 실시간 얼굴 마스킹 방법
US9554016B2 (en) System, and method for controlling the system
CN112861104A (zh) 身份验证方法及相关装置
KR20210036609A (ko) 영상 처리 장치 및 방법
JP6679373B2 (ja) 顔検出装置、顔検出方法及び顔認識システム
CN111091056A (zh) 图像中的墨镜识别方法及装置、电子设备、存储介质
WO2017157435A1 (en) A method and system for visual privacy protection for mobile and wearable devices
KR102183689B1 (ko) 실시간 영상의 객체 마스킹 처리 시스템 및 이를 이용한 마스킹 처리 방법
KR101973766B1 (ko) 모바일을 위한 효율적 워터마킹 방법 및 장치
JP6064995B2 (ja) 情報処理装置、情報処理方法およびプログラム
KR102530463B1 (ko) 보행자 얼굴 검출 정보를 매개로 한 영상 보안 장치 및 그 방법
KR20200094844A (ko) 딥러닝을 이용한 얼굴 인식 장치 및 그것의 동작 방법
Yi Abnormal event detection method for ATM video and its application
Dinesh et al. In-Theatre Real Time Piracy Detection and Discouraging System

Legal Events

Date Code Title Description
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20171023

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20191024

Year of fee payment: 6