KR20140012474A - 얼굴인식 기반의 개인정보보호 장치 및 방법 - Google Patents

얼굴인식 기반의 개인정보보호 장치 및 방법 Download PDF

Info

Publication number
KR20140012474A
KR20140012474A KR1020120079444A KR20120079444A KR20140012474A KR 20140012474 A KR20140012474 A KR 20140012474A KR 1020120079444 A KR1020120079444 A KR 1020120079444A KR 20120079444 A KR20120079444 A KR 20120079444A KR 20140012474 A KR20140012474 A KR 20140012474A
Authority
KR
South Korea
Prior art keywords
face
privacy
image
area
personal information
Prior art date
Application number
KR1020120079444A
Other languages
English (en)
Other versions
KR101936802B1 (ko
Inventor
유장희
박소희
이용진
최진우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020120079444A priority Critical patent/KR101936802B1/ko
Priority to US13/947,055 priority patent/US20140023248A1/en
Publication of KR20140012474A publication Critical patent/KR20140012474A/ko
Application granted granted Critical
Publication of KR101936802B1 publication Critical patent/KR101936802B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678—User interface
    • G08B13/19686—Interfaces masking personal details for privacy, e.g. blurring faces, vehicle license plates
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Collating Specific Patterns (AREA)

Abstract

얼굴인식 기반의 개인정보보호 방법에 있어서, CCTV/DVR 등의 영상감시 시스템에 기록/저장되는 비디오 영상정보에서 얼굴인식 기술을 기반으로 검색대상이 되는 특정인을 검출한 후, 검출된 특정인과 특정인을 제외한 나머지 얼굴 영상에 대하여 선택적으로 프라이버시 마스킹 또는 모자이크 처리를 수행함으로써 개인정보의 유출을 방지시킬 수 있도록 한다. 또한, DVR/영상저장장치 등 대용량 비디오 영상정보에서 얼굴인식 기술을 적용하여 효과적으로 특정인을 포함하는 또는 제외하는 선택적 프라이버시 마스킹 또는 모자이크 처리 방법을 적용하여, 비디오 영상에 대한 개인정보보호의 자동화를 가능하게 한다. 즉, 개인정보보호의 자동화를 통해 개인정보보호법의 규정에 따라 개인영상정보를 제공하는 경우 타인 영상에 대한 모자이크 처리를 위하여 필수적인 기존의 매우 소모적이고 어려운 작업들을 보다 손쉽고 효율적으로 수행 할 수 있다.

Description

얼굴인식 기반의 개인정보보호 장치 및 방법{APPARATUS AND METHOD FOR PROTECTING PRIVACY BASED ON FACE RECOGNITION}
본 발명은 영상감시 시스템 등 저장된 비디오 영상에서 얼굴인식 기반의 개인정보보호에 관한 것으로, CCTV/DVR(digital video recorder) 등의 영상감시 시스템에 기록/저장되는 비디오 영상정보에서 얼굴인식 기술을 기반으로 검색대상이 되는 특정인을 검출한 후, 검출된 특정인 또는 특정인을 제외한 나머지 얼굴 영상에 대하여 선택적으로 프라이버시 마스킹(privacy masking) 또는 모자이크(mosaic) 처리를 수행함으로써 개인정보의 유출을 방지시키는 얼굴인식 기반의 개인정보보호 장치 및 방법에 관한 것이다.
최근 들어, 치안 및 안전을 목적으로 하는 CCTV/DVR 영상감시 시스템들이 급속한 속도로 보급 및 설치되고 있다. 이러한 시스템들은 최근 들어 고화질화 및 고 배율화를 통하여 원거리에서도 다양한 영상정보의 수집이 가능하며, 그 정보의 양은 다루기 힘들만큼 급격히 증가하고 있는 추세이다.
그러나 사건이 발생한 경우 이러한 대용량의 영상정보들로부터 필요한 정보, 특히 특정인을 검색해야 하는 경우가 빈번하게 발생하고 있으나 이러한 작업은 매우 소모적이고 어려운 작업이다.
한편, 위 설명한 바와 같이 현재 CCTV/DVR 기반 영상감시 시스템의 급속한 보급에 따라 개인의 프라이버시 보호에 대한 문제들이 중요한 이슈가 되고 있다.
위와 같은 개인의 프라이버시 보호를 위한 방안으로, 최근의 개인정보보호법 규정에서는 CCTV/DVR 등의 영상정보를 제공하는 경우 타인 영상은 모자이크 처리를 하도록 하고 있으나 이를 위한 만족할만한 자동화된 방법이 개발되어 있지 않아 주로 수작업에 의존하여야 하는 문제가 있다.
또한, CCTV/DVR 등에서 얼굴, 번호판 등의 개인정보를 보호하기 위한 다양한 방법들이 개발되고 있으나, 주로 실시간 CCTV 감시 환경에서 기존의 객체 검출 방법을 이용하여 검출된 객체 영역을 모두 마스킹 하거나 암호 키를 이용한 Scrambling 또는 암호화 하는 방법, 즉 영상에 변형을 가한 후 필요 시 복원하는 방법들이 사용되고 있다.
그러나 이러한 방법은 주로 CCTV 영상을 저장 또는 모니터링(monitoring) 하는 과정에서 사용되는 기술로 이미 저장된 영상을 분석하는 경우에 적용되는 방법과는 다소 차이가 있다.
따라서, 기존에 비디오 영상정보의 무단 유출ㆍ공개 금지를 위하여, 주로 수작업에 의존하고 있는 모자이크 처리방법 등 비디오 영상정보에 대한 개인정보보호 기술의 자동화를 위한 새로운 기술의 개발이 필요하다.
(특허문헌)
대한민국 공개특허번호 10-2012-0053451호 공개일자 2012년 05월 25일에는 차량용 프라이버시 마스킹 장치와 이를 이용한 프라이버시 보호 방법에 관한 기술이 개시되어 있다.
본 발명은 CCTV/DVR 등의 영상감시 시스템에 기록/저장되는 비디오 영상정보에서 얼굴인식 기술을 기반으로 검색대상이 되는 특정인을 검출한 후, 검출된 특정인 또는 특정인을 제외한 나머지 얼굴 영상에 대하여 선택적으로 프라이버시 마스킹 또는 모자이크 처리를 수행함으로써 개인정보의 유출을 방지시키는 얼굴인식 기반의 개인정보보호 장치 및 방법을 제공하고자 한다.
상술한 본 발명은 개인정보보호 장치로서, 검색대상 비디오 영상에 대해 각각의 영상 프레임으로 분리하는 영상 프레임 분리부와, 상기 각각의 영상 프레임에서 얼굴 영역을 검출하는 얼굴 검출부와, 상기 얼굴 영역에서 추출된 얼굴의 얼굴 정보와 검색대상 얼굴의 얼굴 정보를 비교하여 동일한 얼굴인지 여부를 판단하는 얼굴 인식부와, 상기 검색대상 얼굴과 동일한 것으로 판단된 얼굴과 동일하지 않은 것으로 판단된 얼굴을 구별하여 선택적으로 해당 얼굴 영역을 가리는 영상처리를 수행하는 프라이버시 처리부를 포함한다.
또한, 상기 프라이버시 처리부는, 상기 검색대상 얼굴과 동일한 것으로 판단된 얼굴과 동일하지 않은 것으로 판단된 얼굴을 구별하여 선택적으로 해당 얼굴 또는 사람 영역을 프라이버시 마스킹 또는 모자이크 처리하는 것을 특징으로 한다.
또한, 상기 프라이버시 처리부는, 상기 검색대상 얼굴과 동일한 얼굴로 판단되지 않는 얼굴에 대해 해당 얼굴 또는 해당 얼굴의 사람 영역을 프라이버시 마스킹 또는 모자이크 처리하는 것을 특징으로 한다.
또한, 상기 장치는, 상기 각각의 영상 프레임에서 사람 영역을 검출하는 사람 검출부를 더 포함하는 것을 특징으로 한다.
또한, 상기 얼굴 검출부는, 상기 사람 영역에서 얼굴 영역을 검출하는 것을 특징으로 한다.
또한, 상기 장치는, 기 설정된 조건에 따라 상기 프라이버시 처리부에서의 프라이버시 마스킹 또는 모자이크를 위한 영상처리 영역을 결정하는 프라이버시 레벨 선택부를 더 포함하는 것을 특징으로 한다.
또한, 상기 영상 프레임 분리부는, 상기 입력된 검색대상 비디오 영상을 디코딩하고, 비디오 시퀀스를 각각의 영상 프레임으로 분리하는 것을 특징으로 한다.
또한, 상기 얼굴 검출부는, Knowledge-based 방식, Feature invariant 방식, Template matching 방식, 또는 Appearance-based 방식 등과 같은 방법을 사용하여 상기 얼굴 영역의 검출을 수행하는 것을 특징으로 한다.
또한, 상기 얼굴 인식부는, Gabor Filter, PCA(Principal Component Analysis), FDA(Fisher Discriminant Analysis), ICA(Independent Component Analysis), LBP(local Binary Feature) 또는 SVM(Support Vector machine) 등과 같은 방법을 사용하여 상기 얼굴 영역에 대한 얼굴 인식을 수행하는 것을 특징으로 한다.
또한, 본 발명은 개인정보보호 방법으로서, 검색대상 비디오 영상에 대해 각각의 영상 프레임으로 분리하는 단계와, 상기 각각의 영상 프레임에서 얼굴 영역을 검출하는 단계와, 상기 얼굴 영역에서 추출된 얼굴의 얼굴 정보와 검색대상 얼굴의 얼굴 정보를 비교하여 동일한 얼굴인지 여부를 판단하는 단계와, 상기 검색대상 얼굴과 동일한 것으로 판단된 얼굴과 동일하지 않은 것으로 판단된 얼굴을 구별하여 선택적으로 해당 얼굴 영역을 가리는 영상처리를 수행하는 단계를 포함한다.
또한, 상기 얼굴 영역을 검출하는 단계는, 상기 각각의 영상 프레임에서 사람 영역을 검출하는 단계와, 상기 사람 영역에서 얼굴 영역을 검출하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기 영상처리를 수행하는 단계에서, 상기 검색대상 얼굴과 동일한 것으로 판단된 얼굴과 동일하지 않은 것으로 판단된 얼굴을 구별하여 선택적으로 해당 얼굴 또는 해당 얼굴의 사람 영역을 프라이버시 마스킹 또는 모자이크 처리하는 것을 특징으로 한다.
또한, 상기 영상처리를 수행하는 단계에서, 상기 검색대상 얼굴과 동일한 얼굴로 판단되지 않는 얼굴에 대해 해당 얼굴 또는 해당 얼굴의 사람 영역을 프라이버시 마스킹 또는 모자이크 처리하는 것을 특징으로 한다.
또한, 상기 영상처리를 수행하는 단계에서, 기 설정된 조건에 따라 결정된 프라이버시 마스킹 또는 모자이크를 위한 영상처리 영역에 대응되는 영상처리를 수행하는 것을 특징으로 한다.
또한, 상기 영상 프레임으로 분리하는 단계는, 상기 입력된 검색대상 비디오 영상을 디코딩하는 단계와, 상기 디코딩된 비디오 영상의 비디오 시퀀스를 각각의 영상 프레임으로 분리하는 단계를 포함하는 것을 특징으로 한다.
본 발명은 얼굴인식 기반의 개인정보보호 방법에 있어서, CCTV/DVR 등의 영상감시 시스템에 기록/저장되는 비디오 영상정보에서 얼굴인식 기술을 기반으로 검색대상이 되는 특정인을 검출한 후, 검출된 특정인 또는 특정인을 제외한 나머지 얼굴 영상에 대하여 선택적으로 프라이버시 마스킹 또는 모자이크 처리를 수행함으로써 개인정보의 유출을 방지시킬 수 있도록 하는 이점이 있다.
또한, DVR/영상저장장치 등 대용량 비디오 영상정보에서 얼굴인식 기술을 적용하여 효과적으로 특정인을 포함하는 또는 제외하는 선택적 프라이버시 마스킹 또는 모자이크 처리 방법을 적용하여, 비디오 영상에 대한 개인정보보호의 자동화를 가능하게 하는 이점이 있다. 즉, 개인정보보호의 자동화를 통해 개인정보보호법의 규정에 따라 개인영상정보를 제공하는 경우 타인 영상에 대한 모자이크 처리를 위하여 필수적인 기존의 매우 소모적이고 어려운 작업들을 보다 손쉽고 효율적으로 수행 할 수 있는 이점이 있다.
또한, 얼굴정보뿐만 아니라 동일한 방법을 적용하여 차량 번호판 등에 대하여도 개인정보보호의 자동화를 기대할 수 있으며, 특정인의 고속 검색에도 효과적으로 대처할 수 있는 이점이 있다. 따라서 보다 효과적으로 개인정보보호법을 준수하고, 이를 지원하기 위한 관련 기술의 개발에 크게 기여할 수 있다.
도 1은 본 발명의 실시예에 따른 얼굴인식 기반의 개인정보보호 장치의 상세 블록 구성도,
도 2는 본 발명의 실시예에 따른 개인정보보호 장치에서 얼굴영역과 사람영역이 검출된 예시 화면도,
도 3은 본 발명의 실시예에 따른 개인정보보호 장치에서 얼굴영역이 검출된 예시 화면도,
도 4는 본 발명의 실시예에 따른 검색대상 얼굴과 검출된 얼굴 영역의 비교 화면 예시도,
도 5는 본 발명의 실시예에 따른 개인정보의 보호를 위한 마스킹 처리 예시 화면도,
도 6은 본 발명의 실시예에 따른 개인정보보호 장치에서 개인정보의 보호를 위한 동작 제어 흐름도.
이하, 첨부된 도면을 참조하여 본 발명의 동작 원리를 상세히 설명한다. 하기에서 본 발명을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
첨부된 블록도의 각 블록과 흐름도의 각 단계의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수도 있다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 블록도의 각 블록 또는 흐름도 각 단계에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 블록도의 각 블록 및 흐름도의 각 단계에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.
또한, 각 블록 또는 각 단계는 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실시 예들에서는 블록들 또는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들 또는 단계들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.
도 1은 본 발명의 실시예에 따른 얼굴인식 기반의 개인정보보호 장치의 상세 블록 구성을 도시한 것으로, 본 발명의 개인정보보호 장치(100)는 영상 프레임 분리부(102), 사람 검출부(104), 얼굴 검출부(106), 얼굴 인식부(108), 프라이버시 처리부(110), 프라이버시 레벨 선택부(112) 등을 포함한다.
먼저, 개인정보보호 장치(100)는 프라이버시 마스킹(privacy masking) 또는 모자이크(mosaic) 처리 대상 또는 비 대상을 선택하기 위하여, 사진영상 등의 검색대상 얼굴정보를 입력한다. 이때 입력되는 검색대상 얼굴정보는 1개 이상일 수 있으며, 보다 효과적으로 얼굴인식 기술을 적용하여 검색 성능을 높이기 위하여, 검색대상 얼굴정보를 보정 또는 얼굴의 특징정보를 선택할 수 있다. 위와 같이 검색대상 얼굴정보를 입력한 후, 개인정보보호 장치(100)는 검색대상 비디오 영상을 입력하여 검색대상 비디오 영상에서 얼굴 인식을 통해 검색대상 얼굴정보와 일치하는 얼굴 영역 또는 일치하지 않는 얼굴 영역에 대하여 사용자에 의해 지정되는 조건에 따라 선택적으로 프라이버시 마스킹 또는 모자이크 처리 등을 통해 개인정보를 보호할 수 있도록 가공한 개인정보보호 비디오 영상을 출력하게 된다.
이하, 도 1을 참조하여 본 발명의 개인정보보호 장치(100)의 각 구성요소에서의 검색대상 얼굴정보와 검색대상 비디오 영상을 처리하는 동작을 상세히 설명하기로 한다.
영상 프레임 분리부(102)는 검색대상 비디오 영상을 읽어들이고, 입력된 비디오 영상의 분석을 위하여 비디오 영상을 디코딩(decoding)하고, 비디오 시퀀스(video sequence)를 각각의 영상 프레임(image frame)으로 분리한다.
이와 같이 각각의 분리된 영상 프레임에서 사람의 얼굴인식을 위해서는 얼굴 인식을 수행할 얼굴영역을 검출하는 것이 필요하며, 이때 얼굴검출을 보다 효과적으로 수행하기 위하여 필요에 따라 사람영역을 먼저 검출하고 검출된 사람 영역에서 얼굴을 검출할 수 있다.
즉, 사람 검출부(104)에서는 영상 프레임 분리부(102)로부터 분리된 각각의 영상 프레임에서 사람 영역을 검출하고, 얼굴 검출부(106)에서는 사람 검출부(104)에서 검출된 사람 영역 또는 영상 프레임에서 얼굴을 검출한다.
이때, 얼굴 검출부(106)에서의 얼굴 검출 방법으로는 일반적으로 Knowledge-based 방법, Feature invariant 방법, Template matching 방법, Appearance-based 방법 등 매우 다양한 방법이 적용될 수 있다.
얼굴 검출부(106)를 통하여 각각의 비디오 프레임에서 검출된 얼굴정보는 초기에 입력된 검색대상 얼굴정보와 특징추출 및 분류 또는 인식 과정을 거쳐 얼굴 인식부에서 검색대상 얼굴정보와 동일한 얼굴 여부를 판단하게 된다. 이때, 얼굴인식을 위하여는 Gabor Filter, PCA(Principal Component Analysis), FDA(Fisher Discriminant Analysis), ICA(Independent Component Analysis), LBP(local Binary Feature), SVM(Support Vector machine) 등과 같은 다양한 특징추출 및 인식 알고리즘이 적용 될 수 있다.
그리고, 일반적으로 검출된 얼굴영역들은 입력된 검색대상 얼굴과 동일한 얼굴로 판단되지 않는 경우 타인으로 정의하여, 프라이버시 마스킹 또는 모자이크 처리를 하게 된다. 이러한 방법은 검색대상 이외의 타인에 얼굴정보를 노출 시키지 않기 위하여 얼굴영역을 숨기는데 그 목적이 있다.
즉, 프라이버시 처리부(110)에서는 얼굴 인식부(108)에서의 얼굴 인식 결과 입력된 검색대상 얼굴과 동일한 얼굴로 판단되지 않는 타인의 얼굴에 대해서는 해당 얼굴 전체를 마스킹 하는 프라이버시 마스킹 처리 또는 모자이크 처리를 수행한다.
이때, 프라이버시 마스킹 또는 모자이크 처리 대상은 응용에 따라 위와 반대로 동일한 얼굴로 검색된 경우에 수행하는 방법을 사용 할 수도 있다. 또한 사람 검출부(104)를 적용한 경우 프라이버시 마스킹 또는 모자이크 처리를 얼굴뿐만 아니라 사람영역 전체를 대상으로 할 수도 있으며, 이러한 과정의 수행 여부를 판단 할 수 있도록 미리 정해진 조건에 따라 선택적으로 프라이버시 마스킹 또는 모자이크 처리 대상 및 영역 등을 결정할 수 있는 프라이버시 레벨 선택부(112)를 구성 할 수도 있다.
즉, 프라이버시 레벨 선택부(112)는 미리 정해진 조건에 따라 프라이버시 마스킹 또는 모자이크 처리를 얼굴뿐만 아니라 사람영역 전체를 대상으로 할 것인지 여부를 결정하고, 결정된 사항을 프라이버시 처리부(110)로 제공하여 프라이버시 처리부(110)에서 결정된 사항에 따라 프라이버시 마스킹 또는 모자이크 처리를 얼굴 또는 사람영역 전체에 대해 처리할 수 있도록 한다.
이러한 과정을 거쳐서 비디오 영상정보는 개인정보보호가 적용된 비디오 영상으로 변환되게 된다.
도 2는 본 발명의 실시예에 따라 비디오 영상의 각각의 영상 프레임에서 사람 검출부(104)와 얼굴 검출부(106)를 통하여 검출된 사람영역과 얼굴 영역을 예시한 도면이며, 도 3은 얼굴 검출부(106)를 통하여 검출된 얼굴영역을 예시한 도면이다.
도 4는 얼굴 인식부(108)에서 얼굴인식 기술을 적용하여 비디오 영상에서 검출된 얼굴 영역과 검색대상 얼굴 정보를 비교하는 예시를 도시하였으며, 위와 같은 비교에 따라 동일한 얼굴로 검출된 얼굴 영역을 제외하고, 나머지 검출된 얼굴 영역을 마스킹 처리한 예를 도시하였다.
위 도 5에서와 같이 검색대상 얼굴과 동일하지 않은 것으로 판단된 얼굴 영역에 대해서는 개인정보의 보호를 위해 마스킹 처리함으로써 개인정보보호가 적용된 비디오 영상을 얻을 수 있게 되는 것이다.
또한, 위와 같은 개인정보보호 비디오 영상을 얼굴 검출과 얼굴 인식, 마스킹 또는 모자이크 처리 등의 수순으로 자동으로 수행함에 따라 종래 수작업으로 모자이크 처리를 수행하는 것과 비교하여 보다 간편하고 신속하게 비디오 영상의 모자이크 처리 작업을 수행할 수 있게 된다.
도 6은 본 발명의 실시예에 따른 얼굴인식 기반의 개인정보보호 장치(100)에서 개인정보보호를 위한 모자이크 처리 흐름을 도시한 것이다. 이하, 도 1 내지 도 6을 참조하여 본 발명의 실시예를 상세히 설명하기로 한다.
먼저, 개인정보보호 장치(100)는 프라이버시 마스킹 또는 모자이크 처리 대상 또는 비 대상을 선택하기 위하여, 사진영상 등의 검색대상 얼굴정보를 입력한다(S600). 이때 입력되는 검색대상 얼굴정보는 1개 이상일 수 있으며, 보다 효과적으로 얼굴인식 기술을 적용하여 검색 성능을 높이기 위하여, 검색대상 얼굴정보를 보정 또는 얼굴의 특징정보를 선택할 수 있다.
이어, 위와 같이 검색대상 얼굴정보를 입력한 후, 개인정보보호 장치(100)는 검색대상 비디오 영상을 입력하여(S602) 검색대상 비디오 영상에서 얼굴 인식을 통해 검색대상 얼굴정보와 일치하는 얼굴을 검출하고 검출된 얼굴에 대해 프라이버시 마스킹 또는 모자이크 처리 등을 통해 개인정보를 보호할 수 있도록 가공한 개인정보보호 비디오 영상을 출력하게 된다. 상기 방법에서 검색대상 얼굴정보 입력(S600)과 검색대상 비디오 영상 입력(S602)의 순서는 달리할 수도 있다.
위와 같이 검색대상 비디오 영상이 입력되는 경우, 개인정보보호 장치(100)는 입력된 비디오 영상의 분석을 위하여 비디오 영상을 디코딩하고, 비디오 시퀀스(sequence)를 각각의 영상 프레임으로 분리한다.
이어, 개인정보보호 장치(100)는 각각의 분리된 영상 프레임에서 얼굴 인식을 수행할 얼굴영역을 검출한다(S604). 이때, 얼굴검출을 보다 효과적으로 수행하기 위하여 필요에 따라 사람영역을 먼저 검출하고 검출된 사람 영역에서 얼굴을 검출할 수 있다.
즉, 개인정보보호 장치(100)는 분리된 각각의 영상 프레임에서 도 2에서 보여지는 바와 같이 사람 영역을 검출하고, 다시 검출된 사람 영역에서 도 3에서 보여지는 바와 같이 얼굴 영역을 검출할 수 있다.
이때, 얼굴 검출 방법으로는 일반적으로 Knowledge-based 방법, Feature invariant 방법, Template matching 방법, Appearance-based 방법 등이 사용될 수 있다.
이어, 개인정보보호 장치(100)는 검색대상 비디오 영상에서 검출된 얼굴영역에 대하여 얼굴 인식을 수행하여(S605) 검색대상 얼굴정보와 동일한 얼굴인지 여부를 판단한다(S606).
이때, 얼굴인식을 위해서는 Gabor Filter, PCA(Principal Component Analysis), FDA(Fisher Discriminant Analysis), ICA(Independent Component Analysis), LBP(local Binary Feature), SVM(Support Vector machine) 등과 같은 다양한 특징추출 및 인식 알고리즘이 적용 될 수 있다.
이와 같은 판단결과, 입력된 검색대상 얼굴과 동일한 얼굴로 판단되지 않는 경우 개인정보보호 장치(100)는 해당 얼굴을 타인으로 정의하여, 도 5에서 보여지는 바와 같이 프라이버시 마스킹 또는 모자이크 처리를 수행한다(S608).
이때, 프라이버시 마스킹 또는 모자이크 처리 대상은 응용에 따라 위와 반대로 동일한 얼굴로 검색된 경우에 수행하는 방법을 사용 할 수도 있다. 또한 개인정보보호의 범위를 사람영역으로 적용한 경우 프라이버시 마스킹 또는 모자이크 처리를 얼굴뿐만 아니라 사람영역 전체를 대상으로 수행할 수도 있다.
이에 따라, 개인정보보호 장치(100)는 검색대상 비디오 영상에서 검출된 얼굴들에 검색대상 얼굴이 아닌 경우 해당 얼굴들을 순차적으로 프라이버시 마스킹 또는 모자이크 처리하여 개인정보가 보호된 개인정보보호 영상을 생성시킨다(S610).
상기한 바와 같이, 얼굴인식 기반의 개인정보보호 방법에 있어서, CCTV/DVR 등의 영상감시 시스템에 기록/저장되는 비디오 영상정보에서 얼굴인식 기술을 기반으로 검색대상이 되는 특정인을 검출한 후, 검출된 특정인 또는 특정인을 제외한 나머지 얼굴 영상에 대하여 선택적으로 프라이버시 마스킹 또는 모자이크 처리를 수행함으로써 개인정보의 유출을 방지시킬 수 있도록 한다.
또한, DVR/영상저장장치 등 대용량 비디오 영상정보에서 얼굴인식 기술을 적용하여 효과적으로 특정인을 포함하는 또는 제외하는 선택적 프라이버시 마스킹 또는 모자이크 처리 방법을 적용하여, 비디오 영상에 대한 개인정보보호의 자동화를 가능하게 한다. 즉, 개인정보보호의 자동화를 통해 개인정보보호법의 규정에 따라 개인영상정보를 제공하는 경우 타인 영상에 대한 모자이크 처리를 위하여 필수적인 기존의 매우 소모적이고 어려운 작업들을 보다 손쉽고 효율적으로 수행 할 수 있다.
한편 상술한 본 발명의 설명에서는 구체적인 실시예에 관해 설명하였으나, 여러 가지 변형이 본 발명의 범위에서 벗어나지 않고 실시될 수 있다. 따라서 발명의 범위는 설명된 실시 예에 의하여 정할 것이 아니고 특허청구범위에 의해 정하여져야 한다.
102 : 영상 프레임 분리부 104 : 사람 검출부
106 : 얼굴 검출부 108 : 얼굴 인식부
110 : 프라이버시 처리부 112 : 프라이버시 레벨 선택부

Claims (15)

  1. 개인정보보호 장치로서,
    검색대상 비디오 영상에 대해 각각의 영상 프레임으로 분리하는 영상 프레임 분리부와,
    상기 각각의 영상 프레임에서 얼굴 영역을 검출하는 얼굴 검출부와,
    상기 얼굴 영역에서 추출된 얼굴의 얼굴 정보와 검색대상 얼굴의 얼굴 정보를 비교하여 동일한 얼굴인지 여부를 판단하는 얼굴 인식부와,
    상기 검색대상 얼굴과 동일한 것으로 판단된 얼굴과 동일하지 않은 것으로 판단된 얼굴을 구별하여 선택적으로 해당 얼굴 영역을 가리는 영상처리를 수행하는 프라이버시 처리부
    를 포함하는 개인정보보호 장치.
  2. 제 1 항에 있어서,
    상기 장치는,
    상기 각각의 영상 프레임에서 사람 영역을 검출하는 사람 검출부를 더 포함하는 개인정보보호 장치.
  3. 제 2 항에 있어서,
    상기 얼굴 검출부는,
    상기 사람 영역에서 얼굴 영역을 검출하는 개인정보보호 장치.
  4. 제 1 항에 있어서,
    상기 프라이버시 처리부는,
    상기 검색대상 얼굴과 동일한 것으로 판단된 얼굴과 동일하지 않은 것으로 판단된 얼굴을 구별하여 선택적으로 해당 얼굴 또는 사람 영역을 프라이버시 마스킹 또는 모자이크 처리하는 개인정보보호 장치.
  5. 제 1 항에 있어서,
    상기 프라이버시 처리부는,
    상기 검색대상 얼굴과 동일한 얼굴로 판단되지 않는 얼굴에 대해 해당 얼굴 또는 해당 얼굴의 사람 영역을 프라이버시 마스킹 또는 모자이크 처리하는 개인정보보호 장치.
  6. 제 1 항에 있어서,
    상기 장치는,
    기 설정된 조건에 따라 상기 프라이버시 처리부에서의 프라이버시 마스킹 또는 모자이크를 위한 영상처리 영역을 결정하는 프라이버시 레벨 선택부를 더 포함하는 개인정보보호 장치.
  7. 제 1 항에 있어서,
    상기 영상 프레임 분리부는,
    상기 입력된 검색대상 비디오 영상을 디코딩하고, 비디오 시퀀스를 각각의 영상 프레임으로 분리하는 개인정보보호 장치.
  8. 제 1 항에 있어서,
    상기 얼굴 검출부는,
    Knowledge-based 방식, Feature invariant 방식, Template matching 방식, 또는 Appearance-based 방식 중 적어도 하나 이상의 방식을 사용하여 상기 얼굴 영역의 검출을 수행하는 개인정보보호 장치.
  9. 제 1 항에 있어서,
    상기 얼굴 인식부는,
    Gabor Filter, PCA(Principal Component Analysis), FDA(Fisher Discriminant Analysis), ICA(Independent Component Analysis), LBP(local Binary Feature) 또는 SVM(Support Vector machine) 중 적어도 하나의 방식을 사용하여 상기 얼굴 영역에 대한 얼굴 인식을 수행하는 개인정보보호 장치.
  10. 개인정보보호 방법으로서,
    검색대상 비디오 영상에 대해 각각의 영상 프레임으로 분리하는 단계와,
    상기 각각의 영상 프레임에서 얼굴 영역을 검출하는 단계와,
    상기 얼굴 영역에서 추출된 얼굴의 얼굴 정보와 검색대상 얼굴의 얼굴 정보를 비교하여 동일한 얼굴인지 여부를 판단하는 단계와,
    상기 검색대상 얼굴과 동일한 것으로 판단된 얼굴과 동일하지 않은 것으로 판단된 얼굴을 구별하여 선택적으로 해당 얼굴 영역을 가리는 영상처리를 수행하는 단계
    를 포함하는 개인정보보호 방법.
  11. 제 10 항에 있어서,
    상기 얼굴 영역을 검출하는 단계는,
    상기 각각의 영상 프레임에서 사람 영역을 검출하는 단계와,
    상기 사람 영역에서 얼굴 영역을 검출하는 단계
    를 포함하는 개인정보보호 방법.
  12. 제 10 항에 있어서,
    상기 영상처리를 수행하는 단계에서,
    상기 검색대상 얼굴과 동일한 것으로 판단된 얼굴과 동일하지 않은 것으로 판단된 얼굴을 구별하여 선택적으로 해당 얼굴 또는 해당 얼굴의 사람 영역을 프라이버시 마스킹 또는 모자이크 처리하는 개인정보보호 방법.
  13. 제 10 항에 있어서,
    상기 영상처리를 수행하는 단계에서,
    상기 검색대상 얼굴과 동일한 얼굴로 판단되지 않는 얼굴에 대해 해당 얼굴 또는 해당 얼굴의 사람 영역을 프라이버시 마스킹 또는 모자이크 처리하는 개인정보보호 방법.
  14. 제 10 항에 있어서,
    상기 영상처리를 수행하는 단계에서,
    기 설정된 조건에 따라 결정된 프라이버시 마스킹 또는 모자이크를 위한 영상처리 영역에 대응되게 상기 영상처리를 수행하는 개인정보보호 방법.
  15. 제 10 항에 있어서,
    상기 영상 프레임으로 분리하는 단계는,
    상기 입력된 검색대상 비디오 영상을 디코딩하는 단계와,
    상기 디코딩된 비디오 영상의 비디오 시퀀스를 각각의 영상 프레임으로 분리하는 단계
    를 포함하는 개인정보보호 방법.
KR1020120079444A 2012-07-20 2012-07-20 얼굴인식 기반의 개인정보보호 장치 및 방법 KR101936802B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120079444A KR101936802B1 (ko) 2012-07-20 2012-07-20 얼굴인식 기반의 개인정보보호 장치 및 방법
US13/947,055 US20140023248A1 (en) 2012-07-20 2013-07-20 Apparatus and method for protecting privacy information based on face recognition

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120079444A KR101936802B1 (ko) 2012-07-20 2012-07-20 얼굴인식 기반의 개인정보보호 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20140012474A true KR20140012474A (ko) 2014-02-03
KR101936802B1 KR101936802B1 (ko) 2019-01-09

Family

ID=49946577

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120079444A KR101936802B1 (ko) 2012-07-20 2012-07-20 얼굴인식 기반의 개인정보보호 장치 및 방법

Country Status (2)

Country Link
US (1) US20140023248A1 (ko)
KR (1) KR101936802B1 (ko)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101677111B1 (ko) * 2016-03-14 2016-11-17 주식회사우경정보기술 보행자의 얼굴 검출 기반의 동적 객체 영상 프라이버시 보호 장치 및 그 방법
WO2016191528A1 (en) * 2015-05-26 2016-12-01 University Of Florida Research Foundation, Inc. Pre-capture de-identification (pcdi) imaging system and pcdi optics assembly
KR20170022592A (ko) * 2015-08-21 2017-03-02 삼성전자주식회사 전자 장치 및 이의 콘텐트 변형 방법
US9911002B2 (en) 2014-07-31 2018-03-06 Samsung Electronics Co., Ltd. Method of modifying image including photographing restricted element, and device and system for performing the method
WO2018070762A1 (en) * 2016-10-10 2018-04-19 Hyperconnect, Inc. Device and method of displaying images
WO2018088608A1 (ko) * 2016-11-08 2018-05-17 한화테크윈주식회사 영상처리장치 및 그의 영상제공방법
KR101894399B1 (ko) 2017-08-22 2018-09-04 첵트 엘엘씨 개인 정보 보호 기능을 포함한 모니터링 시스템 및 그 방법
KR20180123998A (ko) * 2018-11-06 2018-11-20 주식회사 하이퍼커넥트 영상 표시 방법, 장치 및 컴퓨터 판독 가능한 기록매체
KR20180129562A (ko) * 2017-05-27 2018-12-05 주식회사 하이퍼커넥트 영상 통화 장치 및 영상 통화 방법
KR101952623B1 (ko) 2017-09-14 2019-02-27 (주)글루버 개인정보 보호처리된 영상 서비스 방법 및 장치
KR101972428B1 (ko) 2018-10-11 2019-04-25 주식회사 사라다 개인 정보 보호를 위한 모드 설정이 가능한 영상 처리 장치 및 방법
KR101989842B1 (ko) * 2017-12-07 2019-06-17 주식회사 하이퍼커넥트 단말기 및 그것의 영상 처리 방법
KR102034648B1 (ko) * 2018-05-16 2019-10-22 재단법인 아산사회복지재단 의료영상 관리 시스템, 방법 및 컴퓨터 판독 가능한 기록매체
KR20190124600A (ko) * 2018-04-26 2019-11-05 한국전자통신연구원 신경망 학습에 기반한 적층형 다종 영상 객체 보호 장치, 시스템 및 방법
KR102123248B1 (ko) * 2020-01-30 2020-06-16 김선진 프라이버시 보호를 위한 얼굴인식 기반 실시간 영상처리 시스템
US11048785B2 (en) 2018-02-14 2021-06-29 Samsung Electronics Co., Ltd Method and apparatus of performing authentication
KR102277929B1 (ko) * 2020-02-21 2021-07-14 한국기술교육대학교 산학협력단 얼굴 인식에 기반한 실시간 얼굴 마스킹 시스템 및 이를 이용한 실시간 얼굴 마스킹 방법
US11184582B2 (en) 2019-10-01 2021-11-23 Hyperconnect, Inc. Terminal and operating method thereof
US11323659B2 (en) 2017-04-17 2022-05-03 Hyperconnect Inc. Video communication device, video communication method, and video communication mediating method
US11553157B2 (en) 2016-10-10 2023-01-10 Hyperconnect Inc. Device and method of displaying images
US11716424B2 (en) 2019-05-10 2023-08-01 Hyperconnect Inc. Video call mediation method
US11825236B2 (en) 2020-01-31 2023-11-21 Hyperconnect Inc. Terminal and operating method thereof

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9639740B2 (en) * 2007-12-31 2017-05-02 Applied Recognition Inc. Face detection and recognition
US9721148B2 (en) * 2007-12-31 2017-08-01 Applied Recognition Inc. Face detection and recognition
KR20130047223A (ko) * 2011-10-31 2013-05-08 한국전자통신연구원 모니터링 영상 기반의 프라이버시 영역 보호 방법 및 장치
CN104021350B (zh) * 2014-05-13 2016-07-06 小米科技有限责任公司 隐私信息隐藏方法及装置
CN105407261A (zh) * 2014-08-15 2016-03-16 索尼公司 图像处理装置、方法以及电子设备
US9661091B2 (en) 2014-09-12 2017-05-23 Microsoft Technology Licensing, Llc Presence-based content control
CN105574467A (zh) * 2014-10-09 2016-05-11 多媒体影像解决方案有限公司 用于具有人物辨识的相机的隐私
JP6493417B2 (ja) 2015-01-15 2019-04-03 日本電気株式会社 情報出力装置、カメラ、情報出力システム、情報出力方法及びプログラム
CN104766052B (zh) * 2015-03-24 2018-10-16 广州视源电子科技股份有限公司 一种人脸识别方法、系统及用户终端、服务器
EP3295696A1 (en) * 2015-05-11 2018-03-21 Deutsche Telekom AG In-device privacy control mechanism for wearable smart devices
CN106484704A (zh) * 2015-08-25 2017-03-08 中兴通讯股份有限公司 一种图片处理方法及装置
US9967446B2 (en) * 2015-09-09 2018-05-08 Itx-M2M Co., Ltd. Personalized shopping mall system using virtual camera
JP6504364B2 (ja) * 2015-11-27 2019-04-24 パナソニックＩｐマネジメント株式会社 モニタリング装置、モニタリングシステムおよびモニタリング方法
CN107294915B (zh) * 2016-04-01 2020-11-10 宇龙计算机通信科技(深圳)有限公司 图像采集方法、系统及终端
EP3526964B1 (en) 2016-10-14 2024-02-21 Genetec Inc. Masking in video stream
US10157307B2 (en) * 2016-10-20 2018-12-18 Facebook, Inc. Accessibility system
DE102016223859A1 (de) * 2016-11-30 2018-05-30 Robert Bosch Gmbh Kamera zur Überwachung eines Überwachungsbereiches und Überwachungsvorrichtung sowie Verfahren zur Überwachung eines Überwachungsbereiches
JP7054492B2 (ja) * 2017-01-23 2022-04-14 株式会社Revo 情報加工モジュール、情報加工方法、情報加工プログラム及び情報処理装置
JP6572293B2 (ja) * 2017-03-21 2019-09-04 キヤノン株式会社 画像処理装置、画像処理装置の制御方法及びプログラム
EP3379471A1 (en) 2017-03-21 2018-09-26 Canon Kabushiki Kaisha Image processing apparatus, method of controlling image processing apparatus, and storage medium
JP7030534B2 (ja) 2018-01-16 2022-03-07 キヤノン株式会社 画像処理装置および画像処理方法
CN108366196B (zh) * 2018-01-25 2020-09-01 西安中科创达软件有限公司 一种保护图片隐私的方法
CN108427918B (zh) * 2018-02-12 2021-11-30 杭州电子科技大学 基于图像处理技术的人脸隐私保护方法
RU2681364C1 (ru) 2018-02-16 2019-03-06 ООО "Ай Ти Ви групп" Система и способ сокрытия объектов в видеоархиве по требованию пользователей
US20190349517A1 (en) * 2018-05-10 2019-11-14 Hanwha Techwin Co., Ltd. Video capturing system and network system to support privacy mode
KR20200042979A (ko) * 2018-10-16 2020-04-27 전자부품연구원 영상정보기기에서의 개인정보의 비식별화 방법 및 시스템
US11425335B2 (en) 2018-11-19 2022-08-23 Hewlett-Packard Development Company, L.P. Protecting privacy in video content
US10769915B2 (en) * 2018-12-31 2020-09-08 TCL Research America Inc. Privacy preserving camera
JP6635208B1 (ja) * 2019-02-22 2020-01-22 日本電気株式会社 検索装置、検索方法、およびプログラム
CN111614973A (zh) * 2019-02-26 2020-09-01 北京嘀嘀无限科技发展有限公司 视频打码方法、装置和电子设备
CN111614959B (zh) * 2019-02-26 2023-02-03 北京嘀嘀无限科技发展有限公司 一种视频打码方法、装置以及电子设备
WO2020179052A1 (ja) * 2019-03-07 2020-09-10 日本電気株式会社 画像処理装置、制御方法、及びプログラム
CN111754386B (zh) * 2019-03-26 2023-08-18 杭州海康威视数字技术股份有限公司 图像区域屏蔽方法、装置、设备及存储介质
KR20200114275A (ko) * 2019-03-28 2020-10-07 삼성전자주식회사 전자 장치 및 이미지에 포함된 개인 정보의 보안 방법
US10762607B2 (en) 2019-04-10 2020-09-01 Alibaba Group Holding Limited Method and device for sensitive data masking based on image recognition
EP3751851A1 (en) * 2019-06-14 2020-12-16 Axis AB Method of highlighting an object of interest in an image or video
CN110363172A (zh) * 2019-07-22 2019-10-22 曲靖正则软件开发有限公司 一种视频处理方法、装置、电子设备及可读存储介质
CN110472074A (zh) * 2019-08-15 2019-11-19 北京字节跳动网络技术有限公司 多媒体文件的处理方法、装置、终端及存储介质
US11831947B2 (en) * 2019-10-15 2023-11-28 Motorola Solutions, Inc. Video analytics conflict detection and mitigation
CN110955912B (zh) * 2019-10-29 2023-08-08 平安科技（深圳）有限公司 基于图像识别的隐私保护方法、装置、设备及其存储介质
KR102341075B1 (ko) 2020-03-06 2021-12-20 주식회사 테스트웍스 이미지에 포함된 객체의 선택적 비식별화 장치 및 방법
US11899805B2 (en) * 2020-09-11 2024-02-13 IDEMIA National Security Solutions LLC Limiting video surveillance collection to authorized uses
KR102629732B1 (ko) * 2020-12-11 2024-01-29 한국전자통신연구원 외곽선 기반 프라이버시 마스킹 장치, 외곽선 기반 프라이버시 마스킹 복원 장치 및 프라이버시 마스킹 영역 디스크립터 공유 방법
CN112597861B (zh) * 2020-12-16 2022-03-18 南京甄视智能科技有限公司 支持高频使用缓冲机制的混合模式人脸识别方法与系统
CN113014830A (zh) * 2021-03-01 2021-06-22 鹏城实验室 视频虚化方法、装置、设备及存储介质
KR102541131B1 (ko) * 2021-11-15 2023-06-08 세종대학교산학협력단 멀티 모델을 이용한 cctv 영상의 강건한 얼굴 비식별화 방법 및 시스템
CN114390295B (zh) * 2021-12-09 2022-08-19 慧之安信息技术股份有限公司 一种视频隐私保护方法和装置
KR102628904B1 (ko) * 2022-06-03 2024-01-24 주식회사 넷온 개인정보를 비식별화할 수 있는 엣지 컴퓨팅 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004062560A (ja) * 2002-07-30 2004-02-26 Omron Corp 顔照合装置および顔照合方法
JP2008236141A (ja) * 2007-03-19 2008-10-02 Sony Corp 画像処理装置、画像処理方法
KR20080111325A (ko) * 2007-06-18 2008-12-23 에스케이 텔레콤주식회사 Ａａｍ을 이용한 3차원 얼굴 모델링 방법 및 시스템,그리고 이에 적용되는 장치
KR100903816B1 (ko) * 2007-12-21 2009-06-24 한국건설기술연구원 정지영상에서의 얼굴추출시스템과 그 방법
JP2012078900A (ja) * 2010-09-30 2012-04-19 Nec Corp 情報保護装置、情報保護方法およびプログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2003280516A1 (en) * 2002-07-01 2004-01-19 The Regents Of The University Of California Digital processing of video images
US7428314B2 (en) * 2003-12-03 2008-09-23 Safehouse International Inc. Monitoring an environment
JP4650579B2 (ja) * 2009-03-30 2011-03-16 日本ビクター株式会社 ビデオデータ記録装置、ビデオデータ再生装置、およびビデオデータ記録方法、ビデオデータ再生方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004062560A (ja) * 2002-07-30 2004-02-26 Omron Corp 顔照合装置および顔照合方法
JP2008236141A (ja) * 2007-03-19 2008-10-02 Sony Corp 画像処理装置、画像処理方法
KR20080111325A (ko) * 2007-06-18 2008-12-23 에스케이 텔레콤주식회사 Ａａｍ을 이용한 3차원 얼굴 모델링 방법 및 시스템,그리고 이에 적용되는 장치
KR100903816B1 (ko) * 2007-12-21 2009-06-24 한국건설기술연구원 정지영상에서의 얼굴추출시스템과 그 방법
JP2012078900A (ja) * 2010-09-30 2012-04-19 Nec Corp 情報保護装置、情報保護方法およびプログラム

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9911002B2 (en) 2014-07-31 2018-03-06 Samsung Electronics Co., Ltd. Method of modifying image including photographing restricted element, and device and system for performing the method
WO2016191528A1 (en) * 2015-05-26 2016-12-01 University Of Florida Research Foundation, Inc. Pre-capture de-identification (pcdi) imaging system and pcdi optics assembly
KR20170022592A (ko) * 2015-08-21 2017-03-02 삼성전자주식회사 전자 장치 및 이의 콘텐트 변형 방법
US11423168B2 (en) 2015-08-21 2022-08-23 Samsung Electronics Co., Ltd. Electronic apparatus and method of transforming content thereof
KR101677111B1 (ko) * 2016-03-14 2016-11-17 주식회사우경정보기술 보행자의 얼굴 검출 기반의 동적 객체 영상 프라이버시 보호 장치 및 그 방법
US11553157B2 (en) 2016-10-10 2023-01-10 Hyperconnect Inc. Device and method of displaying images
WO2018070762A1 (en) * 2016-10-10 2018-04-19 Hyperconnect, Inc. Device and method of displaying images
US11102450B2 (en) 2016-10-10 2021-08-24 Hyperconnect, Inc. Device and method of displaying images
WO2018088608A1 (ko) * 2016-11-08 2018-05-17 한화테크윈주식회사 영상처리장치 및 그의 영상제공방법
US10819904B2 (en) 2016-11-08 2020-10-27 Hanwha Techwin Co., Ltd. Image processing device and image providing method therefor
US11722638B2 (en) 2017-04-17 2023-08-08 Hyperconnect Inc. Video communication device, video communication method, and video communication mediating method
US11323659B2 (en) 2017-04-17 2022-05-03 Hyperconnect Inc. Video communication device, video communication method, and video communication mediating method
KR20180129562A (ko) * 2017-05-27 2018-12-05 주식회사 하이퍼커넥트 영상 통화 장치 및 영상 통화 방법
KR101894399B1 (ko) 2017-08-22 2018-09-04 첵트 엘엘씨 개인 정보 보호 기능을 포함한 모니터링 시스템 및 그 방법
KR101952623B1 (ko) 2017-09-14 2019-02-27 (주)글루버 개인정보 보호처리된 영상 서비스 방법 및 장치
KR101989842B1 (ko) * 2017-12-07 2019-06-17 주식회사 하이퍼커넥트 단말기 및 그것의 영상 처리 방법
US11720658B2 (en) 2018-02-14 2023-08-08 Samsung Electronics Co., Ltd. Method and apparatus of performing authentication
US11048785B2 (en) 2018-02-14 2021-06-29 Samsung Electronics Co., Ltd Method and apparatus of performing authentication
KR20190124600A (ko) * 2018-04-26 2019-11-05 한국전자통신연구원 신경망 학습에 기반한 적층형 다종 영상 객체 보호 장치, 시스템 및 방법
WO2019221586A1 (ko) * 2018-05-16 2019-11-21 재단법인 아산사회복지재단 의료영상 관리 시스템, 방법 및 컴퓨터 판독 가능한 기록매체
KR102034648B1 (ko) * 2018-05-16 2019-10-22 재단법인 아산사회복지재단 의료영상 관리 시스템, 방법 및 컴퓨터 판독 가능한 기록매체
KR101972428B1 (ko) 2018-10-11 2019-04-25 주식회사 사라다 개인 정보 보호를 위한 모드 설정이 가능한 영상 처리 장치 및 방법
KR20180123998A (ko) * 2018-11-06 2018-11-20 주식회사 하이퍼커넥트 영상 표시 방법, 장치 및 컴퓨터 판독 가능한 기록매체
US11716424B2 (en) 2019-05-10 2023-08-01 Hyperconnect Inc. Video call mediation method
US11184582B2 (en) 2019-10-01 2021-11-23 Hyperconnect, Inc. Terminal and operating method thereof
KR102123248B1 (ko) * 2020-01-30 2020-06-16 김선진 프라이버시 보호를 위한 얼굴인식 기반 실시간 영상처리 시스템
US11825236B2 (en) 2020-01-31 2023-11-21 Hyperconnect Inc. Terminal and operating method thereof
KR102277929B1 (ko) * 2020-02-21 2021-07-14 한국기술교육대학교 산학협력단 얼굴 인식에 기반한 실시간 얼굴 마스킹 시스템 및 이를 이용한 실시간 얼굴 마스킹 방법

Also Published As

Publication number Publication date
US20140023248A1 (en) 2014-01-23
KR101936802B1 (ko) 2019-01-09

Similar Documents

Publication Publication Date Title
KR101936802B1 (ko) 얼굴인식 기반의 개인정보보호 장치 및 방법
Abdullah et al. Face recognition for criminal identification: An implementation of principal component analysis for face recognition
US20130108105A1 (en) Apparatus and method for masking privacy region based on monitored video image
KR100695155B1 (ko) 가리어진 얼굴 검출장치 및 방법과 이를 이용한 부정거래자식별장치 및 방법
US9454675B2 (en) Apparatus and method for protecting personal information of recorded image, and computer-readable recording medium having computer program recorded therein
CN109002786B (zh) 人脸检测方法、设备及计算机可读存储介质
TWI507998B (zh) 視訊分析
CN111626243B (zh) 口罩遮挡人脸的身份识别方法、装置及存储介质
CN110675582A (zh) 一种自动报警方法及装置
RU2713876C1 (ru) Способ и система выявления тревожных событий при взаимодействии с устройством самообслуживания
CN111652185A (zh) 一种基于违章行为识别的安全施工方法、系统、装置及存储介质
CN112507892A (zh) 基于深度学习的特种场所重点人员穿着识别处理的系统、方法、装置、处理器及其存储介质
CN108108696B (zh) 一种安全防护方法、装置及系统
KR102601432B1 (ko) 이미지 또는 비디오에서 관심 물체를 강조하는 방법
US11605224B2 (en) Automated media editing operations in consumer devices
KR101422084B1 (ko) 배경 모델링을 사용하여 검지된 물체 영역 내 파티클 필터를 이용한 시점간 연계 추적 시스템 및 방법
CN108334811B (zh) 一种人脸图像处理方法及装置
CN113222809B (zh) 实现隐私保护的图片处理方法及装置
KR101627260B1 (ko) 개인정보 보호장치 및 방법
KR20210144064A (ko) 페이크 얼굴 검출 장치 및 검출 방법
JP7456511B2 (ja) 匿名化された人物検出のための情報処理装置、情報処理方法、及びプログラム
EP3837821B1 (en) Assessing condition of real-world objects
US20220198812A1 (en) Method for detecting groceries in corridor, terminal device and storage medium
US20230410352A1 (en) Method for object detection using cropped images
Mathivanan Suspicious human activity detection

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant