KR102100582B1 - 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체 - Google Patents

영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체 Download PDF

Info

Publication number
KR102100582B1
KR102100582B1 KR1020190013339A KR20190013339A KR102100582B1 KR 102100582 B1 KR102100582 B1 KR 102100582B1 KR 1020190013339 A KR1020190013339 A KR 1020190013339A KR 20190013339 A KR20190013339 A KR 20190013339A KR 102100582 B1 KR102100582 B1 KR 102100582B1
Authority
KR
South Korea
Prior art keywords
image
privacy
size
generating
ciphertext
Prior art date
Application number
KR1020190013339A
Other languages
English (en)
Inventor
임강빈
이경률
Original Assignee
순천향대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 순천향대학교 산학협력단 filed Critical 순천향대학교 산학협력단
Priority to KR1020190013339A priority Critical patent/KR102100582B1/ko
Priority to CN201910918066.1A priority patent/CN111526325A/zh
Priority to US16/593,511 priority patent/US11520931B2/en
Application granted granted Critical
Publication of KR102100582B1 publication Critical patent/KR102100582B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245Protecting personal data, e.g. for financial or medical purposes
    • G06F21/6263Protecting personal data, e.g. for financial or medical purposes during internet communication, e.g. revealing personal data from cookies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245Protecting personal data, e.g. for financial or medical purposes
    • G06F21/6254Protecting personal data, e.g. for financial or medical purposes by anonymising data, e.g. decorrelating personal data from the owner's identification
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/602Providing cryptographic facilities or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245Protecting personal data, e.g. for financial or medical purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/04Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/913Television signal processing therefor for scrambling ; for copy protection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/913Television signal processing therefor for scrambling ; for copy protection
    • H04N2005/91357Television signal processing therefor for scrambling ; for copy protection by modifying the video signal
    • H04N2005/91364Television signal processing therefor for scrambling ; for copy protection by modifying the video signal the video signal being scrambled

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Bioethics (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Medical Informatics (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체를 개시한다. 본 발명의 일 측면에 따른 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법은, 프라이버시 영역에 해당하는 영상을 형태보존암호 기술을 이용하여 암호화함으로써, 암호화에 따라 요구되는 추가적인 공간의 낭비를 방지할 수 있으며, 이와 동시에 개인 정보의 노출 문제를 해결할 수 있는 효과가 있다.

Description

영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체{Privacy masking method using format preserving encryption in image security system, RECORDING MEDIUM FOR PERFORMING THE METHOD}
본 발명은 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체에 관한 것으로, 더욱 상세하게는 수집된 영상에서 프라이버시 영역을 암호화함에 있어서 형태보존암호 기술을 이용함으로써 보다 효율적으로 프라이버시 영역에 대한 마스킹을 수행하는 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체에 관한 것이다.
개인 및 공공의 안전을 위하여 도로, 건물과 같은 장소에 CCTV(closed circuit television)와 같은 영상을 기록하기 위한 장치를 설치하여 장소를 감시하는 영상감시시스템이 등장하였다. 영상감시시스템은 다양한 장소에서 촬영되는 영상을 실시간으로 수집하고 기록하며, 기록된 영상은 차후 사건, 사고의 발생 시 증거자료로 활용된다. 이러한 이유로, 카메라로부터 전달되고 기록되는 영상의 신뢰성을 향상시키기 위하여 무결성과 기밀성을 제공하는 영상보안시스템이 등장하였다.
하지만, 이러한 영상감시시스템 및 영상보안시스템은 사람 및 차량번호 등과 같은 개인정보가 영상에 포함되므로, 개인정보 유출 및 사생활 침해 등과 같은 문제점이 발생할 수 있다.
이러한 문제점을 해결하고자 영상보안시스템에서 영상 내의 개인정보와 관련된 영역을 보호하는 프라이버시 마스킹 기술이 등장하였다. 프라이버시 마스킹 기술은 영상 내 개인정보와 관련된 영역을 암호화하여 저장하며, 차후 영상의 확인이 필요할 때 수사기관에서 암호화된 영상을 복호화하여 증거를 확보할 수 있다. 이러한 기술은 전체 영상을 암/복호화하는데 필요한 시간의 낭비를 보완하고자 개인정보와 관련된 영역만을 암호화하지만, 암호 기술의 특성상 암호에 필요한 데이터의 크기는 블록 크기로 고정되는데, 만약, 마스킹할 영역의 크기가 블록 크기와 동일하지 않을 경우에는 부가적인 저장소를 활용하거나 저장공간의 낭비, 영상 크기의 증가와 같은 문제점이 발생한다.
한국공개특허 제2011-0038839호(2011.04.15 공개)
본 발명은 상기와 같은 문제점을 해결하기 위해 제안된 것으로서, 형태보존암호 기술을 활용한 프라이버시 마스킹 기술을 이용하여 프라이버시 영역에 해당하는 영상을 암호화하면서 요구되는 추가 공간의 낭비 및 영상의 크기 증가를 방지할 수 있는 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체를 제공하는데 그 목적이 있다.
본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 일 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허청구범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
상기와 같은 목적을 달성하기 위한 본 발명의 일 측면에 따른 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법은, 영상 감지 시스템으로부터 하나 이상의 장소에서 촬영된 영상을 수신하는 단계; 상기 수신된 영상 내에 프라이버시와 관련된 정보가 존재하는지 확인하는 단계; 상기 확인 결과, 프라이버시와 관련된 정보가 존재하는 경우, 상기 수신된 영상에서 프라이버시 영역을 추출하는 단계; 상기 추출된 프라이버시 영역에 대한 이미지의 크기를 계산하는 단계; 상기 계산된 이미지 크기와 동일하게 암호문의 생성을 위한 블록크기를 생성하는 단계; 상기 생성된 블록크기에 따라 형태보존암호 기술을 이용하여 암호문을 생성하고, 생성된 암호문을 이용해 프라이버시 마스킹 이미지를 생성하는 단계; 및 상기 영상 감지 시스템으로부터 수신한 영상 내에 프라이버시와 관련된 영역에 상기 암호화된 프라이버시 영역 이미지를 삽입하는 단계;를 포함한다.
상기 계산된 이미지 크기와 동일하게 암호문의 생성을 위한 블록크기를 생성하는 단계는, 고정된 크기의 블록크기를 생성하는 1차 블록크기 생성단계; 및 상기 계산된 이미지 크기에서 상기 생성한 고정된 크기의 블록크기를 뺀 가변적 크기의 블록크기를 생성하는 2차 블록크기 생성단계;를 포함하는 것을 특징으로 한다.
상기 생성된 블록크기에 따라 형태보존암호 기술을 이용하여 암호문을 생성하고, 생성된 암호문을 이용해 프라이버시 마스킹 이미지를 생성하는 단계는, 상기 생성된 블록크기에 따라 형태보존암호 기술을 이용하여 암호문을 생성하고, 생성된 암호문을 프라이버시 영역에 해당하는 위치에 삽입하여 암호화된 프라이버시 영역 이미지를 생성하는 단계를 포함하는 것을 특징으로 한다.
상기 형태보존암호 기술은 암호화를 원하는 이미지의 크기에 따라 암호문의 길이를 가변적으로 결정하여 프라이버시 영역을 마스킹하는 것을 특징으로 한다.
상기 프라이버시와 관련된 정보는, 사람의 얼굴, 차량 번호 및 노출 금지 영역 중 적어도 어느 하나인 것을 특징으로 한다.
상기와 같은 목적을 달성하기 위한 본 발명의 다른 측면에 따른 기록매체는, 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법을 수행하기 위한, 컴퓨터 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체이다.
본 발명의 일 측면에 따르면, 프라이버시 영역에 해당하는 영상을 형태보존암호 기술을 이용하여 암호화함으로써, 암호화에 따라 요구되는 추가적인 공간의 낭비를 방지할 수 있으며, 이와 동시에 개인 정보의 노출 문제를 해결할 수 있는 효과가 있다.
또한, 영상을 암호화하면서 발생하는 이미지의 크기를 증가시키지 않아 저장 공간을 보다 효율적으로 사용할 수 있는 효과가 있다.
본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 실시예를 예시하는 것이며, 발명을 실시하기 위한 구체적인 내용들과 함께 본 발명의 기술사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석되어서는 아니 된다.
도 1은 본 발명의 일 실시예에 따른 프라이버시 마스킹 방법을 수행하는 시스템의 개략적인 구성도,
도 2는 본 발명의 일 실시예에 따른 프라이버시 마스킹 방법의 흐름을 개략적으로 도시한 도면,
도 3은 본 발명의 일 실시예에 따른 형태보존암호 기술을 이용한 이미지 암호화 과정과 종래 기술에 따른 이미지 암호화 과정의 일 예를 도시한 도면,
도 4는 본 발명의 일 실시예에 따른 영상 내의 프라이버시 영역에 마스킹 처리된 일 예를 도시한 도면이다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일 실시예를 상세히 설명하기로 한다.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 “포함”한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 “…부” 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
도 1은 본 발명의 일 실시예에 따른 프라이버시 마스킹 방법을 수행하는 시스템의 개략적인 구성도이다.
도 1을 참조하면, 본 실시예에 따른 시스템은 영상 감시 시스템(100) 및 영상 보안 시스템(200)을 포함한다.
영상 감시 시스템(100)은, CCTV, IP 카메라 등과 같은 영상을 촬영할 수 있는 감시 카메라를 이용하여 다양한 장소에서 영상을 촬영하여 실시간으로 수집하고 기록할 수 있다. 이후, 수집된 영상은 후술하는 영상 보안 시스템(200)으로 전송될 수 있다. 이때, 영상 감시 시스템(100)과 영상 보안 시스템(200)은 네트워크(N)를 통해 연결되어 정보를 송수신할 수 있다. 네트워크(N)는 인터넷망, 인트라넷망, 이동통신망, 위성 통신망 등 다양한 유무선 통신 기술을 이용하여 인터넷 프로토콜로 데이터를 송수신할 수 있는 망을 의미할 수 있다. 한편, 네트워크는 LAN(Local Area Network), WAN(Wide Area Network) 등의 폐쇄형 네트워크, 인터넷과 같은 개방형 네트워크뿐만 아니라, CDMA(Code Division Multiple Access), WCDMA(Wideband Code Division Multiple Access), GSM(Global System for Mobile Communication), LTE(Long Term Evolution), EPC(Evolved Packet Core) 등의 네트워크와 향후 구현될 차세대 네트워크 및 컴퓨팅 네트워크를 통칭할 수 있다.
영상 보안 시스템(200)은, 영상 감시 시스템(100)의 감시 카메라가 촬영하여 수집한 영상의 신뢰성을 향상시키기 위하여 무결성 및 기밀성을 제공할 수 있다. 본 실시 예에 따르면, 영상 보안 시스템(200)은 수집한 영상 내의 개인정보와 관련된 영역을 보호하기 위해 프라이버시 마스킹 기술을 이용하여 영상 내의 개인정보와 관련된 영역을 암호화하여 저장할 수 있다. 이때, 개인정보는 사람의 얼굴, 차량번호 등과 같이 프라이버시와 관련된 정보를 의미할 수 있다.
한편, 영상 보안 시스템(200)은 수집한 영상 내의 개인정보와 관련된 영역을 보호하기 위해 프라이버시 마스킹 기술을 이용하여 영상 내의 개인정보와 관련된 영역을 암호화하여 저장하되, 형태보존암호 기술을 이용하여 프라이버시 영역에 대한 마스킹을 수행한다. 즉, 종래에는 영상 내에 존재하는 개인정보의 노출로 인한 개인정보 유출 및 사생활 침해 문제가 발생하는 문제를 해결하기 위해 개인정보가 포함된 영역을 마스킹 처리하는 프라이버시 마스킹 기술을 도입하였으나, 이러한 프라이버시 마스킹 기술은 프라이버시 영역에 해당하는 영상을 암호화하면서 요구되는 추가 공간이 필요함에 따른 저장 공간이 낭비되는 문제점이 발생하였다. 하지만, 본 발명에 따른 형태보존암호 기술을 이용하여 프라이버시 영역에 대한 마스킹을 수행하게 되면, 상술한 바와 같이 저장 공간이 낭비되는 문제점을 해결할 수 있다.
영상 보안 시스템(200)에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법에 대해서는 후술하는 도 2를 통해 보다 자세히 설명하기로 한다.
도 2는 본 발명의 일 실시예에 따른 프라이버시 마스킹 방법의 흐름을 개략적으로 도시한 도면, 도 3은 본 발명의 일 실시예에 따른 형태보존암호 기술을 이용한 이미지 암호화 과정과 종래 기술에 따른 이미지 암호화 과정의 일 예를 도시한 도면이다
도 2를 참조하면, 본 실시예에 따른 프라이버시 마스킹 방법은 영상 감지 시스템으로부터 하나 이상의 장소에서 촬영된 영상을 수신하는 단계(S210), 수신된 영상 내에 프라이버시와 관련된 정보가 존재하는지 확인하는 단계(S220), 확인 결과, 프라이버시와 관련된 정보가 존재하는 경우, 수신된 영상에서 프라이버시 영역을 추출하는 단계(S230), 추출된 프라이버시 영역에 대한 이미지의 크기를 계산하는 단계(S240), 계산된 이미지 크기와 동일하게 암호문의 생성을 위한 블록크기를 생성하는 단계(S250), 생성된 블록크기에 따라 형태보존암호 기술을 이용하여 암호문을 생성하고, 생성된 암호문을 이용해 프라이버시 마스킹 이미지를 생성하는 단계(S260) 및 영상 감지 시스템으로부터 수신한 영상 내에 프라이버시와 관련된 영역에 암호화된 프라이버시 영역 이미지를 삽입하는 단계(S270)를 포함한다.
먼저, 영상 감지 시스템으로부터 하나 이상의 장소에서 촬영된 영상을 수신하는 단계(S210)는, 영상 보안 시스템(200)이 영상 감지 시스템으로부터 네트워크를 통해 CCTV, IP 카메라 등을 통해 촬영된 영상을 수신한다. 이때, 수신한 영상 내에는 프라이버시와 관련된 정보가 포함될 수 있다. 여기서, 프라이버시와 관련된 정보는 공개될 경우 프라이버시 침해가 발생될 수 있는 사람의 얼굴, 차량 번호 정보뿐만 아니라, 프라이버시 영역과 같이 프라이버시 보호가 필요한 군사시설, 건물의 창문 등과 같은 노출 금지 영역을 포함할 수 있다.
수신된 영상 내에 프라이버시와 관련된 정보가 존재하는지 확인하는 단계(S220)는, 영상 보안 시스템(200)이 S210 단계에서 영상 감지 시스템으로부터 수신한 영상 내에 프라이버시와 관련된 정보가 포함되는지 확인하는 것으로, 영상 보안 시스템(200)은 공지된 다양한 알고리즘을 이용하여 영상 내에서 프라이버시와 관련된 정보의 존재 여부를 확인할 수 있다.
확인 결과, 프라이버시와 관련된 정보가 존재하는 경우, 수신된 영상에서 프라이버시 영역을 추출하는 단계(S230)는, 영상 보안 시스템(200)이 수신된 영상 내에서 프라이버시 보호가 필요한 영역을 추출하는 것이며, 예를 들어, 사람을 식별할 수 있는 얼굴 및 자동차를 식별할 수 있는 자동차 번호판 등이 영상에 포함되어 있는 경우, 사람의 얼굴 및 자동차 번호판을 프라이버시 마스킹하기 위해 추출하는 것이다. 이때, 영상 보안 시스템(200)은 공지된 다양한 알고리즘을 이용하여 영상 내의 프라이버시 보호가 필요한 영역을 추출할 수 있다. 일 예로, 영상 보안 시스템(200)은 영상의 에지정보, 형태정보, 컬러분포정보 및 프라이버시 영역의 학습정보 중 적어도 어느 하나를 이용하여 프라이버시 영역을 검출할 수 있다. 예컨대, 영상에 대한 분석을 통해 에지정보를 획득할 수 있으며, 에지정보를 이용하여 얼굴과 얼굴 이외 부분 사이의 경계를 검출할 수 있으며, 영상에 대한 분석 결과와 얼굴 형태 등에 대한 형태정보를 비교하여 영상 중에서 얼굴이 존재하는지 여부를 판단할 수 있다. 또한, 컬러분포정보를 이용하여 얼굴 고유의 컬러분포정보와 비교할 수 있으므로, 보다 정확하게 얼굴 영역을 검출할 수도 있다. 또한, Adaboost 학습 기법 등을 포함하는 프라이버시 영역의 학습정보를 이용하여 얼굴 영역을 검출할 수도 있다.
한편, 본 실시예에서는 수신된 영상에서 프라이버시와 관련된 정보가 존재하는지를 확인하고 프라이버시 영역을 추출하는 과정을 나누어 설명하였지만, 하나의 과정으로 진행될 수 있으며 이때, 수신된 영상에서 사람의 얼굴 인식, 차량 번호판 인식 등을 위해 다양한 종류의 영상 분석 및 인식 알고리즘을 이용하여 영상 내에 프라이버시와 관련된 정보가 존재하는지 확인하고 프라이버시 영역을 추출할 수 있다.
추출된 프라이버시 영역에 대한 이미지의 크기를 계산하는 단계(S240)는, 영상 보안 시스템(200)이 프라이버시 마스킹이 필요한 프라이버시 영역에 대한 이미지의 크기를 계산하는 것이다. 이처럼 이미지의 크기를 계산하는 이유는, 후술할 형태보존암호 기술을 이용하여 암호문을 생성하기 위한 블록의 크기를 결정하는데 활용하기 위함이다.
계산된 이미지 크기와 동일하게 암호문의 생성을 위한 블록크기를 생성하는 단계(S250)는, 영상 보안 시스템(200)이 암호문을 생성할 블록의 크기를 프라이버시 영역의 크기(S240 단계에서 계산된 이미지 크기)와 동일하도록 나눈다. 예를 들어, S240 단계에서 계산된 프라이버시 영역의 크기가 257비트라고 하면, S250단계에서는 계산된 프라이버시 영역의 크기와 동일하도록 블록의 크기를 나눈다. 이때, 본 실시예에 따르면, 영상 보안 시스템(200)이 암호문을 생성할 블록의 크기를 프라이버시 영역의 크기(S240 단계에서 계산된 이미지 크기)와 동일하도록 나누되, 먼저 고정된 크기의 블록크기를 생성하고(1차 블록크기 생성), 계산된 프라이버시 영역의 크기에서 상기 생성한 고정된 크기의 블록크기를 뺀 가변적 크기의 블록크기를 생성한다(2차 블록크기 생성). 예를 들어, S240 단계에서 계산된 프라이버시 영역의 크기가 257비트라고 하면, 128비트의 고정된 크기의 블록크기를 생성한 후, 계산된 프라이버시 영역의 크기(257비트)에서 상기 생성한 고정된 크기의 블록크기(128비트)를 뺀 가변적 크기의 블록크기(129비트)를 생성한다. 이처럼, S250단계는 임의의 프라이버시 영역의 크기가 계산되더라도 가변적으로 블록의 크기를 결정함에 따라 저장 공간이 낭비되는 것을 방지할 수 있다. 즉, 도 3에 도시된 바와 같이, 종래에는 프라이버시 마스킹이 필요한 부분의 이미지 크기가 257비트인 경우, 블록의 크기가 256비트인 경우에는 1비트가 모자라게 되어 256비트의 블록크기가 더 필요함에 따라 255비트에는 정보 저장이 불가능하여 저장 공간의 낭비가 발생하지만, 본 실시예에 따르면 암호문의 크기를 가변적으로 생성할 수 있으므로, 저장 공간이 낭비되는 것을 방지할 수 있다.
생성된 블록크기에 따라 형태보존암호 기술을 이용하여 암호문을 생성하고, 생성된 암호문을 이용해 프라이버시 마스킹 이미지를 생성하는 단계(S260)는, 영상 보안 시스템(200)이 S250 단계에서 생성된 블록크기에 따라 형태보존암호 기술을 이용하여 암호문을 생성한다. 형태보존암호 기술은 평문과 동일한 형태의 암호문을 생성하기 위한 것이다. 예컨대, 10진수로 표기되는 주민등록번호, SSN(Social Security Number)와 같은 정보도 동일한 형태인 10진수로 표현되는 암호문을 생성한다. 또한, 본 실시에서는 형태보존암호 기술을 이용하여 암호문의 길이를 가변적으로 생성이 가능하므로 저장 공간이 낭비되는 것을 방지할 수 있다. 형태보존암호 기술은 공지된 것으로 상세한 설명은 생략하기로 한다. 한편, 마스킹이란 암호화, 모자이크, 스크램블링, 블러 필터 등을 이용하여 개인정보 보호 처리가 수행되어야 되는 부분을 알아볼 수 없도록 처리하는 다양한 개인정보 보호 처리 방법을 가리킬 수 있다. 개인 정보 보호 처리 영역은 마스킹 방법에 따라 검게 표시되거나, 블러 영역으로 표현될 수 있다. 이후, 영상 보안 시스템(200)은 생성된 암호문을 이용해 프라이버시 마스킹 이미지를 생성한다. 즉, 영상 보안 시스템(200)은 생성된 암호문을 프라이버시 영역에 해당하는 위치에 삽입하여 암호화된 프라이버시 영역 이미지를 생성한다. 이처럼, 추출된 프라이버시 영역에 형태보존암호 기술을 이용하여 암호문을 생성하고, 생성된 암호문을 이용해 생성된 프라이버시 마스킹 이미지를 삽입함으로써 원본 이미지에 대한 변경을 하지 않으므로, 프라이버시 마스킹의 복원을 보다 손쉽게 진행할 수 있어, 관련 이미지가 범죄, 테러에 대한 식별을 목적으로 하는 제출자료로 사용될 경우 효율적으로 사용할 수 있다.
영상 감지 시스템으로부터 수신한 영상 내에 프라이버시와 관련된 영역에 암호화된 프라이버시 영역 이미지를 삽입하는 단계(S270)는, 영상 보안 시스템(200)이 도 4에 도시된 바와 같이, 암호화된 프라이버시 영역 이미지를 영상 감지 시스템으로부터 수신한 영상 내에 삽입하여 개인정보와 관련된 영역을 보호하여 개인정보 유출 및 사생활 침해가 발생하는 것을 방지할 수 있다. 도 4는 본 발명의 일 실시예에 따른 영상 내의 프라이버시 영역에 마스킹 처리된 일 예를 도시한 도면으로, 어느 장소에서 촬영된 영상에 포함된 사람이 마스킹 처리(프라이버시 영역에 대한 마스킹)(PA)된 것을 확인할 수 있다.
본 발명의 실시예에 따른 방법들은 애플리케이션으로 구현되거나 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는, 본 발명을 위한 특별히 설계되고 구성된 것들이거니와 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media) 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
본 명세서는 많은 특징을 포함하는 반면, 그러한 특징은 본 발명의 범위 또는 특허청구범위를 제한하는 것으로 해석되어서는 아니 된다. 또한, 본 명세서의 개별적인 실시예에서 설명된 특징들은 단일 실시예에서 결합되어 구현될 수 있다. 반대로, 본 명세서의 단일 실시예에서 설명된 다양한 특징들은 개별적으로 다양한 실시예에서 구현되거나, 적절히 결합되어 구현될 수 있다.
도면에서 동작들이 특정한 순서로 설명되었으나, 그러한 동작들이 도시된 바와 같은 특정한 순서로 수행되는 것으로 또는 일련의 연속된 순서, 또는 원하는 결과를 얻기 위해 모든 설명된 동작이 수행되는 것으로 이해되어서는 안 된다. 특정 환경에서 멀티태스킹 및 병렬 프로세싱이 유리할 수 있다. 아울러, 상술한 실시예에서 다양한 시스템 구성요소의 구분은 모든 실시예에서 그러한 구분을 요구하지 않는 것으로 이해되어야 한다. 상술한 앱 구성요소 및 시스템은 일반적으로 단일 소프트웨어 제품 또는 멀티플 소프트웨어 제품에 패키지로 구현될 수 있다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것은 아니다.
100 : 영상 감시 시스템
200 : 영상 보안 시스템

Claims (6)

  1. 영상 감지 시스템으로부터 하나 이상의 장소에서 촬영된 영상을 수신하는 단계;
    상기 수신된 영상 내에 프라이버시와 관련된 정보가 존재하는지 확인하는 단계;
    상기 확인 결과, 프라이버시와 관련된 정보가 존재하는 경우, 상기 수신된 영상에서 프라이버시 영역을 추출하는 단계;
    상기 추출된 프라이버시 영역에 대한 이미지의 크기를 계산하는 단계;
    상기 계산된 이미지 크기와 동일하게 암호문의 생성을 위한 블록크기를 생성하는 단계;
    상기 생성된 블록크기에 따라 형태보존암호 기술을 이용하여 암호문을 생성하고, 생성된 암호문을 이용해 프라이버시 마스킹 이미지를 생성하는 단계; 및
    상기 영상 감지 시스템으로부터 수신한 영상 내에 프라이버시와 관련된 영역에 상기 암호화된 프라이버시 마스킹 이미지를 삽입하는 단계;를 포함하고,
    상기 계산된 이미지 크기와 동일하게 암호문의 생성을 위한 블록크기를 생성하는 단계는,
    고정된 크기의 블록크기를 생성하는 1차 블록크기 생성단계; 및
    상기 계산된 이미지 크기에서 상기 생성한 고정된 크기의 블록크기를 뺀 가변적 크기의 블록크기를 생성하는 2차 블록크기 생성단계;를 포함하며,
    상기 계산된 이미지 크기와 동일하게 암호문의 생성을 위한 블록크기를 생성하는 단계는,
    임의의 프라이버시 영역의 크기가 계산되더라도 가변적으로 블록의 크기를 결정함에 따라 저장 공간이 낭비되는 것을 방지하는 것을 특징으로 하는 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법.
  2. 삭제
  3. 제 1 항에 있어서,
    상기 생성된 블록크기에 따라 형태보존암호 기술을 이용하여 암호문을 생성하고, 생성된 암호문을 이용해 프라이버시 마스킹 이미지를 생성하는 단계는,
    상기 생성된 블록크기에 따라 형태보존암호 기술을 이용하여 암호문을 생성하고, 생성된 암호문을 프라이버시 영역에 해당하는 위치에 삽입하여 암호화된 프라이버시 영역 이미지를 생성하는 단계를 포함하는 것을 특징으로 하는 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법.
  4. 제 3 항에 있어서,
    상기 형태보존암호 기술은 암호화를 원하는 이미지의 크기에 따라 암호문의 길이를 가변적으로 결정하여 프라이버시 영역을 마스킹하는 것을 특징으로 하는 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법.
  5. 제 1 항에 있어서,
    상기 프라이버시와 관련된 정보는,
    사람의 얼굴, 차량 번호 및 노출 금지 영역 중 적어도 어느 하나인 것을 특징으로 하는 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법.

  6. 삭제
KR1020190013339A 2019-02-01 2019-02-01 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체 KR102100582B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020190013339A KR102100582B1 (ko) 2019-02-01 2019-02-01 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체
CN201910918066.1A CN111526325A (zh) 2019-02-01 2019-09-26 利用形态保存加密技术的隐私遮蔽方法及记录介质
US16/593,511 US11520931B2 (en) 2019-02-01 2019-10-04 Privacy masking method using format-preserving encryption in image security system and recording medium for performing same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190013339A KR102100582B1 (ko) 2019-02-01 2019-02-01 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체

Publications (1)

Publication Number Publication Date
KR102100582B1 true KR102100582B1 (ko) 2020-04-13

Family

ID=70224701

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190013339A KR102100582B1 (ko) 2019-02-01 2019-02-01 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체

Country Status (3)

Country Link
US (1) US11520931B2 (ko)
KR (1) KR102100582B1 (ko)
CN (1) CN111526325A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102298911B1 (ko) * 2020-06-23 2021-09-08 정문성 웹 기반의 개인정보 보호 서비스 시스템의 제어방법
KR20220083433A (ko) 2020-12-11 2022-06-20 한국전자통신연구원 외곽선 기반 프라이버시 마스킹 장치, 외곽선 기반 프라이버시 마스킹 복원 장치 및 프라이버시 마스킹 영역 디스크립터 공유 방법

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4202746A4 (en) * 2020-09-24 2024-01-03 Jvckenwood Corp STORAGE DEVICE, STORAGE METHOD AND PROGRAM
WO2023201392A1 (en) * 2022-04-20 2023-10-26 Muthiah Annamalai Privacy preserving safety risk detection system and method

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110038839A (ko) 2009-10-09 2011-04-15 한국전자통신연구원 감시영상의 프라이버시 정보 보호 장치 및 방법
KR101648188B1 (ko) * 2015-02-13 2016-08-16 경일대학교산학협력단 개별 객체 프라이버시 보호를 위한 영상 처리 장치, 이를 위한 방법 및 이 방법이 기록된 컴퓨터 판독 가능한 기록매체
KR101746167B1 (ko) * 2016-01-28 2017-06-13 경일대학교산학협력단 프라이버시 보호를 위한 영상 처리 장치, 이를 위한 방법 및 이 방법이 기록된 컴퓨터 판독 가능한 기록매체
KR20170084601A (ko) * 2016-01-12 2017-07-20 한화테크윈 주식회사 압축된 비디오로부터 프라이버시 영역을 암호화하는 장치 및 방법

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8385609B2 (en) * 2008-10-21 2013-02-26 Flashfoto, Inc. Image segmentation
JP5269033B2 (ja) * 2009-12-18 2013-08-21 韓國電子通信研究院 映像のプライバシーマスキング方法及び装置
JP5273087B2 (ja) * 2010-04-14 2013-08-28 株式会社Jvcケンウッド 映像処理装置および映像処理方法
TWI502477B (zh) * 2014-01-29 2015-10-01 Wistron Corp 顯示畫面遮蔽方法、電子裝置與電腦程式產品
US11121867B2 (en) * 2016-02-19 2021-09-14 Micro Focus Llc Encryption methods based on plaintext length

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110038839A (ko) 2009-10-09 2011-04-15 한국전자통신연구원 감시영상의 프라이버시 정보 보호 장치 및 방법
KR101648188B1 (ko) * 2015-02-13 2016-08-16 경일대학교산학협력단 개별 객체 프라이버시 보호를 위한 영상 처리 장치, 이를 위한 방법 및 이 방법이 기록된 컴퓨터 판독 가능한 기록매체
KR20170084601A (ko) * 2016-01-12 2017-07-20 한화테크윈 주식회사 압축된 비디오로부터 프라이버시 영역을 암호화하는 장치 및 방법
KR101746167B1 (ko) * 2016-01-28 2017-06-13 경일대학교산학협력단 프라이버시 보호를 위한 영상 처리 장치, 이를 위한 방법 및 이 방법이 기록된 컴퓨터 판독 가능한 기록매체

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Zheli Liu ET AL:"Format Compliant Degradation for PNG Image", 2013 Fourth International Conference on Emerging Intelligent Data and Web Technologies, 2013(2013.09.09.) 1부.* *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102298911B1 (ko) * 2020-06-23 2021-09-08 정문성 웹 기반의 개인정보 보호 서비스 시스템의 제어방법
KR20220083433A (ko) 2020-12-11 2022-06-20 한국전자통신연구원 외곽선 기반 프라이버시 마스킹 장치, 외곽선 기반 프라이버시 마스킹 복원 장치 및 프라이버시 마스킹 영역 디스크립터 공유 방법
KR20240015129A (ko) 2020-12-11 2024-02-02 한국전자통신연구원 외곽선 기반 프라이버시 마스킹 장치, 외곽선 기반 프라이버시 마스킹 복원 장치 및 프라이버시 마스킹 영역 디스크립터 공유 방법

Also Published As

Publication number Publication date
US11520931B2 (en) 2022-12-06
US20200250341A1 (en) 2020-08-06
CN111526325A (zh) 2020-08-11

Similar Documents

Publication Publication Date Title
KR102100582B1 (ko) 영상보안시스템에서 형태보존암호 기술을 이용한 프라이버시 마스킹 방법 및 이를 수행하기 위한 기록 매체
KR101378295B1 (ko) 영상의 프라이버시 마스킹 방법 및 장치
KR20120035299A (ko) 프라이버시 보호를 위한 영상 보호처리 장치와, 그를 이용한 영상 보안 시스템 및 그 방법
KR101951605B1 (ko) 영상의 유출을 방지하기 위한 cctv 영상 보안 시스템
KR20200053751A (ko) 얼굴 마스킹 장치 및 방법
KR101746167B1 (ko) 프라이버시 보호를 위한 영상 처리 장치, 이를 위한 방법 및 이 방법이 기록된 컴퓨터 판독 가능한 기록매체
JPWO2009013822A1 (ja) 映像監視装置および映像監視プログラム
CN110610456A (zh) 摄像系统以及视频处理方法
JP2023534417A (ja) 合成再暗号化画像を使用した画像配信
KR102019362B1 (ko) Cctv 영상 데이터 분산 처리 장치 및 그 방법
CN114741708A (zh) 一种模型数据的处理方法、装置及设备
CN110572604B (zh) 摄像系统以及视频处理方法
Engelberg et al. Classification of encrypted IoT traffic despite padding and shaping
CN105279443A (zh) 一种照片加密、解密的方法及装置
Liu et al. A data-aware confidential tunnel for wireless sensor media networks
KR20180065183A (ko) Cctv 카메라 영상보안 암호화 임베디드 모듈
US20230156037A1 (en) Methods and system for providing security to critical systems connected to a computer network
CN112800454B (zh) 案场数据的处理方法、相关装置及计算机可读介质
Abboud Multifactor authentication for software protection
KR101979102B1 (ko) 영상 인증 방법 및 그 장치
KR102130782B1 (ko) 블록체인을 이용한 영상 저장 방법 및 그 장치
Lin et al. Moving object detection in the encrypted domain
JP5718757B2 (ja) 画像管理装置、画像管理プログラム、および画像管理方法
KR102530406B1 (ko) 개인 정보 보호를 위한 블록체인 기반 영상 시스템 및 영상 처리 방법
CN116150796B (zh) 用于数据防泄露系统的数据防护方法和装置

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant