KR20180064279A - 영상 데이터의 무결성 검증 장치 및 방법 - Google Patents

영상 데이터의 무결성 검증 장치 및 방법 Download PDF

Info

Publication number
KR20180064279A
KR20180064279A KR1020170146787A KR20170146787A KR20180064279A KR 20180064279 A KR20180064279 A KR 20180064279A KR 1020170146787 A KR1020170146787 A KR 1020170146787A KR 20170146787 A KR20170146787 A KR 20170146787A KR 20180064279 A KR20180064279 A KR 20180064279A
Authority
KR
South Korea
Prior art keywords
verification
individual
frame
integrity
image
Prior art date
Application number
KR1020170146787A
Other languages
English (en)
Inventor
김무섭
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Publication of KR20180064279A publication Critical patent/KR20180064279A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/64Protecting data integrity, e.g. using checksums, certificates or signatures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/602Providing cryptographic facilities or services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
    • H04N5/367

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Bioethics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)

Abstract

영상 데이터의 무결성 검증 장치 및 방법이 개시된다. 본 발명에 따른 영상 데이터의 무결성 검증 장치에 의해 수행되는 영상 데이터의 무결성 검증 방법은, 영상 데이터의 무결성 검증 장치에 의해 수행되는 영상 데이터의 무결성 검증 방법에 있어서, 영상 데이터의 프레임 영상을 개별 영역으로 분할하는 단계, 상기 개별 영역으로 분할된 상기 프레임 영상의 개별 검증값 원본 및 대표 검증값 원본을 포함하는 검증 데이터를 생성하여, 저장하는 단계, 상기 프레임 영상의 프레임 헤더에 상기 대표 검증값 원본을 추가하여, 상기 프레임 영상을 저장하는 단계, 검증 대상 프레임의 개별 검증값 및 대표 검증값을 연산하는 단계, 그리고 연산된 상기 개별 검증값 및 상기 대표 검증값과 상기 검증 대상 프레임에 대응되는 상기 검증 데이터를 비교하여, 상기 검증 대상 프레임의 무결성을 검증하는 단계를 포함한다.

Description

영상 데이터의 무결성 검증 장치 및 방법{APPARATUS AND METHOD FOR INTEGRITY VERIFICATION OF IMAGE DATA}
본 발명은 영상 데이터의 무결성 검증 기술에 관한 것으로, 특히 멀티 채널 이미지 센서의 영상 데이터에 대한 신뢰성을 제공하기 위하여, 영상 데이터의 위변조 여부를 검사하여 무결성을 검증하는 기술에 관한 것이다.
사물 인터넷 기술의 발달로, 초연결 사회(Hyper Connected Society)가 구축되고, 지속적으로 데이터가 생성 및 축적된다. 방대한 양의 빅데이터가 모두 데이터 센터의 서버에서 처리되기에는 어려움이 있으며, 효율적인 처리를 위하여 데이터의 처리를 분산할 필요가 있다.
컴퓨팅 파워가 많이 필요한 데이터의 처리는 서버에서 수행하고, 이미지 센서 등의 센서(에지)에서도 기본적인 연산의 처리나 판단을 수행하는 에지 컴퓨팅의 중요성이 증가하고 있다. 이때, 이미지 센서 데이터의 효율적인 분석을 위해서는, 처리 대상이 되는 이미지 센서 데이터의 신뢰성이 우선적으로 확보되어야 한다.
사물 인터넷에 활용되는 대표적인 이미지 센서인 차량용 영상 기록 장치는 차량의 운행과 관련된 영상 정보를 실시간으로 저장하여, 사고 상황이나 차량의 운행 과정에서 발생하는 제반 상황들을 저장한다. 최근에는 차량 사고와 관련하여 사고 원인을 판별하는 증거 자료로 차량용 영상 기록 장치의 영상 정보가 많이 활용되고 있다.
이러한 차량용 영상 데이터의 신뢰성을 제공하는 방법으로, 데이터의 무결성을 검증하는 기술이 개발되고 있다. 데이터의 무결성(Integrity)은 데이터가 사고 또는 의도적인 수정, 변경, 부분 삭제되거나 파괴되지 않고, 원래 데이터를 그대로 유지하고 있음을 나타내는 특성으로, 데이터의 무결성은 데이터의 진위 여부를 판단하는데 사용된다.
최근에는 이미지 센서의 전면 영상뿐 아니라 후면이나 측면 영상까지 촬영하여 저장하는 멀티채널 이미지 센서가 사용되고 있는 추세이나, 이러한 다수의 입력 영상들의 무결성 검증을 위한 방법은 아직 제시되지 않고 있다.
그리고, 기존의 일부 차량용 영상기록 장치에 적용되는 무결성 검증 방법은 영상데이터 위변조가 발생한 영상 데이터의 프레임 정보만 알 수 있을 뿐, 위변조가 발생한 영상 프레임의 어느 위치의 데이터가 위변조 되었는지 정확한 위치를 판별하지는 못하고 있다.
한국 등록 특허 제1665199호, 2016년 10월 05일 공고(명칭: 차량용 블랙박스의 영상 위ㆍ변조 탐지 시스템 및 방법)
본 발명의 목적은 이미지 센서에서 수집된 영상 데이터에 대한 신뢰성을 제공하는 것이다.
또한, 본 발명의 목적은 멀티 채널 이미지 센서의 영상 데이터를 안전하게 저장하고, 영상 데이터에 대한 무결성 검증을 수행하는 것이다.
또한, 본 발명의 목적은 영상 데이터의 무결성 검증을 수행한 결과를 기반으로, 위변조가 발생한 영역을 사용자에게 알리는 것이다.
상기한 목적을 달성하기 위한 본 발명에 따른 영상 데이터의 무결성 검증 장치에 의해 수행되는 영상 데이터의 무결성 검증 방법은 영상 데이터의 프레임 영상을 개별 영역으로 분할하는 단계, 상기 개별 영역으로 분할된 상기 프레임 영상의 개별 검증값 원본 및 대표 검증값 원본을 포함하는 검증 데이터를 생성하여, 저장하는 단계, 상기 프레임 영상의 프레임 헤더에 상기 대표 검증값 원본을 추가하여, 상기 프레임 영상을 저장하는 단계, 검증 대상 프레임의 개별 검증값 및 대표 검증값을 연산하는 단계, 그리고 연산된 상기 개별 검증값 및 상기 대표 검증값과 상기 검증 대상 프레임에 대응되는 상기 검증 데이터를 비교하여, 상기 검증 대상 프레임의 무결성을 검증하는 단계를 포함한다.
이때, 상기 검증 대상 프레임의 무결성을 검증하는 단계는, 연산된 상기 대표 검증값과, 상기 검증 대상 프레임의 상기 프레임 헤더에 저장된 상기 대표 검증값 원본을 비교하는 단계, 그리고 연산된 상기 개별 검증값과, 상기 검증 대상 프레임에 대응되도록 저장된 상기 개별 검증값 원본을 비교하는 단계를 포함할 수 있다.
이때, 상기 프레임 영상을 저장하는 단계는, 상기 검증 데이터가 저장되는 영역과 구분된 메모리 영역에 상기 프레임 영상을 저장할 수 있다.
이때, 상기 검증 대상 프레임의 무결성을 검증하는 단계는, 상기 대표 검증값과 상기 대표 검증값 원본을 비교하는 단계, 상기 대표 검증값의 비교 결과 일치하는 경우, 상기 검증 대상 프레임의 원본 프레임 영상인 것으로 판단하는 단계, 상기 대표 검증값의 비교 결과 일치하지 않는 경우, 상기 개별 검증값과 상기 개별 검증값 원본을 비교하는 단계, 상기 개별 검증값의 비교 결과 일치하지 않는 경우, 상기 검증 대상 프레임이 위변조 된 것으로 판단하는 단계를 포함할 수 있다.
이때, 상기 프레임 영상을 개별 영역으로 분할하는 단계는, 복수의 멀티 채널 이미지 센서들로부터 입력받은 상기 프레임 영상들을 하나의 가상 프레임 영상으로 변환하고, 상기 가상 프레임 영상을 상기 개별 영역으로 분할할 수 있다.
이때, 상기 검증 데이터를 생성하여, 저장하는 단계는, 상기 개별 영역을 가로 방향으로 스캔하거나 세로 방향으로 스캔하여, 상기 검증 데이터를 생성할 수 있다.
이때, 상기 검증 데이터를 생성하여, 저장하는 단계는, 현재 스캔되는 개별 영역의 상기 개별 검증값 원본 생성 시, 이전에 스캔된 개별 영역의 상기 개별 검증값 원본과 연접하여 체인 방식으로 상기 개별 영역의 개별 검증값 원본을 생성할 수 있다.
이때, 상기 프레임 영상을 개별 영역으로 분할하는 단계는, 상기 프레임 영상의 크기를 기반으로, 상기 개별 영역의 크기를 설정하고, 설정된 크기의 상기 개별 영역으로 상기 프레임 영상을 분할할 수 있다.
이때, 상기 검증 대상 프레임의 개별 검증값 및 대표 검증값을 연산하는 단계는, 상기 검증 대상 프레임의 개별 영역에 암호 알고리즘을 적용하여, 상기 개별 영역에 대한 상기 개별 검증값을 생성하는 단계, 상기 검증 대상 프레임에 상응하는 복수의 상기 개별 검증값들에 상기 암호 알고리즘을 적용하여, 상기 검증 대상 프레임에 대한 상기 대표 검증값을 생성하는 단계를 포함할 수 있다.
또한, 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 장치는 영상 데이터의 프레임 영상을 개별 영역으로 분할하고, 상기 개별 영역으로 분할된 상기 프레임 영상의 개별 검증값 원본 및 대표 검증값 원본을 포함하는 검증 데이터를 생성하여, 저장하는 검증 데이터 생성부, 상기 프레임 영상의 프레임 헤더에 상기 대표 검증값 원본을 추가하여, 상기 프레임 영상을 저장하는 프레임 영상 저장부, 그리고 검증 대상 프레임의 개별 검증값 및 대표 검증값을 연산하고, 연산된 상기 개별 검증값 및 상기 대표 검증값과 상기 검증 대상 프레임에 대응되는 상기 검증 데이터를 비교하여, 상기 검증 대상 프레임의 무결성을 검증하는 무결성 검증부를 포함한다.
이때, 상기 무결성 검증부는, 연산된 상기 대표 검증값과, 상기 검증 대상 프레임의 상기 프레임 헤더에 저장된 상기 대표 검증값 원본을 비교하고, 연산된 상기 개별 검증값과, 상기 검증 대상 프레임에 대응되도록 저장된 상기 개별 검증값 원본을 비교할 수 있다.
이때, 상기 프레임 영상 저장부는, 상기 검증 데이터가 저장되는 영역과 구분된 메모리 영역에 상기 프레임 영상을 저장할 수 있다.
이때, 상기 무결성 검증부는, 상기 대표 검증값과 상기 대표 검증값 원본을 비교하고, 상기 대표 검증값의 비교 결과 일치하는 경우, 상기 검증 대상 프레임의 원본 프레임 영상인 것으로 판단하며, 상기 대표 검증값의 비교 결과 일치하지 않는 경우, 상기 개별 검증값과 상기 개별 검증값 원본을 비교하고, 상기 개별 검증값의 비교 결과 일치하지 않는 경우, 상기 검증 대상 프레임이 위변조 된 것으로 판단할 수 있다.
이때, 상기 검증 데이터 생성부는, 복수의 멀티 채널 이미지 센서들로부터 입력받은 상기 프레임 영상들을 하나의 가상 프레임 영상으로 변환하고, 상기 가상 프레임 영상을 상기 개별 영역으로 분할할 수 있다.
이때, 상기 검증 데이터 생성부는, 상기 개별 영역을 가로 방향으로 스캔하거나 세로 방향으로 스캔하여, 상기 검증 데이터를 생성할 수 있다.
이때, 상기 검증 데이터 생성부는, 현재 스캔되는 개별 영역의 상기 개별 검증값 원본 생성 시, 이전에 스캔된 개별 영역의 상기 개별 검증값 원본과 연접하여 체인 방식으로 상기 개별 영역의 개별 검증값 원본을 생성할 수 있다.
이때, 상기 검증 데이터 생성부는, 상기 프레임 영상의 크기를 기반으로, 상기 개별 영역의 크기를 설정하고, 설정된 크기의 상기 개별 영역으로 상기 프레임 영상을 분할할 수 있다.
이때, 상기 무결성 검증부는, 상기 검증 대상 프레임의 개별 영역에 암호 알고리즘을 적용하여, 상기 개별 영역에 대한 상기 개별 검증값을 생성하고, 상기 검증 대상 프레임에 상응하는 복수의 상기 개별 검증값들에 상기 암호 알고리즘을 적용하여, 상기 검증 대상 프레임에 대한 상기 대표 검증값을 생성할 수 있다.
본 발명에 따르면, 이미지 센서에서 수집된 영상 데이터에 대한 신뢰성을 제공할 수 있다.
또한 본 발명에 따르면, 멀티 채널 이미지 센서의 영상 데이터를 안전하게 저장하고, 영상 데이터에 대한 무결성 검증을 수행할 수 있다.
또한 본 발명에 따르면, 영상 데이터의 무결성 검증을 수행한 결과를 기반으로, 위변조가 발생한 영역을 사용자에게 알릴 수 있다.
도 1은 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 장치가 적용되는 환경을 개략적으로 나타낸 도면이다.
도 2는 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 장치의 구성을 나타낸 블록도이다.
도 3은 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 방법을 설명하기 위한 순서도이다.
도 4는 본 발명의 일실시예에 따른 검증 데이터 생성 과정을 설명하기 위한 도면이다.
도 5는 본 발명의 일실시예에 따른 영상 데이터 분할 및 매칭 과정을 설명하기 위한 도면이다.
도 6은 본 발명의 일실시예에 따른 영상 데이터 및 검증 데이터를 저장하는 과정을 설명하기 위한 도면이다.
도 7은 본 발명의 일실시예에 따른 검증 대상 프레임의 무결성 검증 과정을 설명하기 위한 도면이다.
도 8은 본 발명의 일실시예에 따른 무결성 검증부가 검증 대상 프레임의 무결성을 검증하는 방법을 설명하기 위한 순서도이다.
도 9는 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 블록도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세하게 설명하고자 한다.
그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 장치가 적용되는 환경을 개략적으로 나타낸 도면이다.
도 1에 도시한 바와 같이, 영상 데이터의 무결성 검증 장치(200)는 이미지 센서 장치(100)와 연결되는 형태로 구현되거나, 이미지 센서 장치(200)에 추가적으로 탑재되는 형태로 구현될 수 있다.
여기서, 이미지 센서 장치(100)는 멀티 채널 이미지 센서일 수 있다. 이미지 센서 장치(100)는 이미지 센서, 의료 영상 촬영 장비, 감시용 카메라, 스마트폰 등과 같이, 영상을 촬영하는 이미지 장치를 의미할 수 있으며, 이미지 센서 장치(100)의 종류는 이에 한정되지 않는다.
도 1과 같이, 이미지 센서 장치(100)는 하나 이상의 카메라(110), 영상 데이터 수집부(120), 통신부(130), 메모리(140) 및 출력 장치(150)를 포함할 수 있다.
이미지 센서 장치(100)는 하나 이상의 카메라(110)로부터 촬영된 영상 데이터를 수집하여 인코딩 등의 처리를 수행한다. 그리고 이미지 센서 장치(100)는 통신부(130)를 통해 영상 데이터를 외부로 전송하거나, 메모리(140)에 영상 데이터를 저장할 수 있다.
일반적으로 메모리(140)는 이미지 센서 장치(100) 내부에 착탈식으로 탑재되는 SD 메모리 또는 내장형 메모리 장치일 수 있다. 그리고 이미지 센서 장치(100)는 통신부(130)를 통하여 영상 데이터를 외부로 전송하거나, 원격지의 특정 서버 또는 클라우드 시스템 등에 데이터를 저장할 수 있으며, 이미지 센서 장치(100)가 영상 데이터를 저장하는 방법은 이에 한정되지 않는다.
또한, 이미지 센서 장치(100)는 출력 장치(150)를 포함하여, 메모리(140)에 저장된 영상 데이터를 출력할 수 있다. 이미지 센서 장치(100)가 차량용 블랙박스인 경우, 사용자가 내부에 저장된 데이터를 확인할 수 있도록 하기 위하여, 디스플레이 장치와 같은 출력 장치(150)를 포함할 수 있다.
그리고 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 장치(200)는 이미지 센서 장치(100)의 영상 데이터를 입력받아 검증 데이터를 생성하고, 영상 데이터의 프레임 헤더에 검증 데이터를 추가하여 저장한다. 이때, 영상 데이터의 무결성 검증 장치(200)는 이미지 센서 장치(100)의 메모리(140)에 검증 데이터 및 영상 데이터를 저장하거나, 별도의 저장 장치에 검증 데이터 및 영상 데이터를 저장할 수 있다.
또한, 영상 데이터의 무결성 검증 장치(200)는 저장된 영상 데이터의 검증 대상 프레임에 대한 무결성 검증을 수행한다. 이때, 영상 데이터의 무결성 검증 장치(200)는 검증 대상 프레임의 개별 검증값 및 대표 검증값을 계산하고, 계산된 개별 검증값 및 대표 검증값과 기 생성되어 저장된 검증 데이터를 비교하여, 해당 검증 대상 프레임에 대한 무결성 검증을 수행할 수 있다.
영상 데이터의 무결성 검증 장치(200)는 무결성 검증을 수행하여, 해당 검증 대상 프레임이 위변조 되었는지 여부를 판단할 수 있으며, 위변조 된 검증 대상 프레임의 영역을 표시하여 출력할 수 있다.
이와 같이, 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 장치(200)는 영상 데이터가 이해 관계에 따라 임의로 삭제되거나 수정될 수 없도록, 물리적 또는 논리적으로 분리된 메모리 영역에 검증 데이터 및 프레임 영상을 저장하고, 접근 권한이 부여된 경우에만 데이터의 삭제가 가능하도록 구현될 수 있다.
이를 통하여, 영상 데이터의 무결성 검증 장치(200)는 이미지 센서 장치(100)의 영상 데이터를 안전하게 저장하고, 증거 영상이나 영상 분석 시 활용되는 이미지 센서 장치(100)의 신뢰성을 향상시킬 수 있다.
이하에서는 도 2를 통하여 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 장치의 구성에 대하여 더욱 상세하게 설명한다.
도 2는 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 장치의 구성을 나타낸 블록도이다.
도 2와 같이, 영상 데이터의 무결성 검증 장치(200)는 검증 데이터 생성부(210), 프레임 영상 저장부(220), 무결성 검증부(230)를 포함한다.
검증 데이터 생성부(210)는 영상 데이터의 프레임 영상을 개별 영역으로 분할하고, 개별 영역으로 분할된 프레임 영상의 검증 데이터를 생성한다.
영상 데이터는 하나 이상의 멀티 채널 이미지 센서들로부터 입력받은 것일 수 있으며, 영상 데이터의 무결성 검증 장치(200)가 도 1의 이미지 센서 장치(100)로부터 전달받은 것일 수 있다. 그리고 복수의 프레임 영상들을 입력받은 경우, 검증 데이터 생성부(210)는 복수의 프레임 영상들을 하나의 가상 프레임 영상으로 변환하고, 가상 프레임 영상을 개별 영역으로 분할할 수 있다.
검증 데이터 생성부(210)는 개별 영역에 대한 개별 검증값 원본 및 프레임 영상에 대한 대표 검증값 원본을 포함하는 검증 데이터를 생성하며, 생성된 검증 데이터는 프레임 영상에 대응되는 메모리 영역에 저장된다. 이때, 검증 데이터 생성부(210)는 각각의 개별 영역에 대해 암호 알고리즘을 수행하여, 개별 검증값 원본을 생성하고, 생성된 개별 검증값 원본을 기반으로 프레임 영상의 대표 검증값 원본을 생성할 수 있다.
그리고 검증 데이터 생성부(210)는 영상 데이터를 효율적으로 처리하기 위하여, 일정한 크기나 영역으로 프레임 영상을 분할한다. 이때, 검증 데이터 생성부(210)는 프레임 영상의 크기를 기반으로, 프레임 영상을 분할하는 단위인 개별 영역의 크기를 설정하고, 설정된 개별 영역으로 프레임 영상을 분할할 수 있다.
영상 데이터가 풀 HD(Full HD) 영상인 경우, 하나의 프레임 영상도 데이터의 크기가 매우 크다. 따라서, 대용량의 프레임을 처리하기 위하여, 검증 데이터 생성부(210)는 영상 데이터의 크기를 기반으로 개별 영역의 크기를 설정하고, 개별 영역으로 프레임 영상을 분할하여 처리할 수 있다.
또한, 검증 데이터 생성부(210)는 개별 영역을 가로 방향으로 스캔하거나, 세로 방향으로 스캔하여 검증 데이터를 생성하거나, 개별 영역을 복수의 세부 영역으로 구분하여 검증 데이터를 생성할 수 있다. 그리고 검증 데이터 생성부(210)는 현재 스캔되는 개별 영역의 개별 검증값 원본 생성 시, 이전에 스캔된 개별 영역의 개별 검증값 원본과 연접하여, 체인 방식으로 개별 검증값 원본을 생성할 수 있다.
그리고 검증 데이터 생성부(210)는 영상 데이터 분할/매칭 모듈, 개별 검증값 생성 모듈, 대표 검증값 생성 모듈을 포함할 수 있다.
다음으로 프레임 영상 저장부(220)는 프레임 영상의 프레임 헤더에 대표 검증값 원본을 추가하여, 프레임 영상을 저장한다. 여기서, 프레임 헤더에 추가된 대표 검증값 원본은 해당 프레임 영상에 대한 무결성 검증을 수행할 때, 프레임 영상의 대표 검증값과 비교되는 기준으로 활용된다.
그리고 프레임 영상 저장부(220)는 검증 데이터가 저장되는 메모리 영역과 구분되는 메모리 영역에 프레임 영상을 저장할 수 있다. 이때, 검증 데이터가 저장되는 메모리 영역과 프레임 영상이 저장되는 메모리 영역은 일대일 대응된다.
마지막으로, 무결성 검증부(230)는 검증 대상 프레임의 개별 검증값 및 대표 검증값을 연산한다. 그리고 연산된 개별 검증값 및 대표 검증값과 검증 대상 프레임에 대응되는 검증 데이터를 비교하여, 검증 대상 프레임에 대한 무결성 검증을 수행한다.
무결성 검증부(230)가 검증 대상 프레임에 대한 대표 검증값 및 개별 검증값을 연산하는 과정은, 검증 데이터 생성부(210)가 개별 검증값 원본 및 대표 검증값 원본을 포함하는 검증 데이터를 생성하는 과정과 실질적으로 동일할 수 있다. 즉, 무결성 검증부(230)는 검증 대상 프레임의 개별 영역에 암호 알고리즘을 적용하여 개별 영역에 대한 개별 검증값을 생성하고, 검증 대상 프레임에 상응하는 복수의 개별 검증값들에 암호 알고리즘을 적용하여 대표 검증값을 생성할 수 있다.
그리고 무결성 검증부(230)는 연산된 대표 검증값과 검증 대상 프레임에 대응되는 검증 데이터의 대표 검증값 원본을 비교한다. 이때, 무결성 검증부(230)는 대표 검증값과 검증 대상 프레임에 대응되도록 저장된 대표 검증값 원본을 비교하거나, 대표 검증값과 검증 대상 프레임의 프레임 헤더에 저장된 대표 검증값 원본을 비교할 수 있다.
설명의 편의상, 무결성 검증부(230)가 검증 데이터의 대표 검증값 원본 또는 프레임 헤더에 저장된 대표 검증값 원본을 이용하여, 무결성 검증을 수행하는 것으로 설명하였으나 이에 한정하지 않고, 무결성 검증부(230)는 연산된 대표 검증값, 검증 데이터의 대표 검증값 원본 및 프레임 헤더에 저장된 대표 검증값 원본 총 세 개의 검증값을 비교하여, 검증 대상 프레임에 대한 무결성 검증을 수행할 수 있다.
대표 검증값의 비교 결과 일치하는 것으로 판단된 경우, 무결성 검증부(230)는 검증 대상 프레임이 원본 프레임 영상인 것으로 판단할 수 있다. 반면, 대표 검증값의 비교 결과 일치하지 않는 것으로 판단된 경우, 무결성 검증부(230)는 검증 대상 프레임이 위변조된 것으로 판단할 수 있다.
그리고 무결성 검증부(230)는 개별 검증값과 검증 대상 프레임에 대응되도록 저장된 검증 데이터의 개별 검증값 원본을 비교하여, 무결성 검증을 수행할 수 있다. 이때, 무결성 검증부(230)는 대표 검증값을 비교한 결과 상이한 것으로 판단된 경우에만 개별 검증값의 비교를 수행할 수 있다.
무결성 검증부(230)는 검증 대상 프레임에 대한 무결성 검증 결과를 출력할 수 있다. 이때, 무결성 검증부(230)는 위변조된 것으로 판단된 프레임 영상의 영역을 표시하여 출력함으로써, 사용자들이 위변조된 영역을 용이하게 식별 가능하도록 할 수 있다.
그리고 무결성 검증부(230)는 영상 데이터 분할 모듈, 개별 검증값 계산 모듈, 대표 검증값 계산 모듈, 개별 검증값 비교 모듈, 대표 검증값 비교 모듈, 무결성 판단 모듈을 포함할 수 있다.
설명의 편의를 위하여, 영상 데이터의 무결성 검증 장치(200)가 이미지 센서 장치(100)의 메모리(140)에 검증 데이터 및 프레임 영상을 저장하는 것으로 설명하였으나 이에 한정하지 않고, 영상 데이터의 무결성 검증 장치(200)는 내부에 구비된 메모리 또는 영상 데이터의 무결성 검증 장치(200)와 연결된 외부의 저장 장치에 검증 데이터 및 프레임 영상을 저장할 수 있다.
또한, 영상 데이터의 무결성 검증 장치(200)는 검증 대상 프레임에 대한 무결성 검증의 수행 결과를 이미지 센서 장치(100)의 출력 장치(150)를 통해 출력하거나, 영상 데이터의 무결성 검증 장치(200) 내부에 구비된 메모리 또는 영상 데이터의 무결성 검증 장치(200)와 연결된 외부의 출력 장치를 통하여, 무결성 검증의 수행 결과를 출력할 수 있다.
이하에서는 도 3 내지 도 7을 통하여 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 장치에 의해 수행되는 영상 데이터의 무결성 검증 방법에 대하여 더욱 상세하게 설명한다.
도 3은 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 방법을 설명하기 위한 순서도이다.
영상 데이터의 무결성 검증 방법은 크게 검증 데이터 생성 과정과 무결성 검증 과정으로 구분될 수 있다. 후술할 S310 단계 내지 S330 단계는 검증 데이터 생성 과정을 의미하고, S340 단계 내지 S360 단계는 무결성 검증 과정을 의미한다.
먼저, 영상 데이터의 무결성 검증 장치(200)는 프레임 영상을 개별 영역으로 분할한다(S310).
도 4는 본 발명의 일실시예에 따른 검증 데이터 생성 과정을 설명하기 위한 도면이다.
도 4에 도시한 바와 같이, 영상 데이터의 무결성 검증 장치(200)의 검증 데이터 생성부(210)는 영상 데이터 분할/매칭 모듈(211), 개별 검증값 생성 모듈(213), 대표 검증값 생성 모듈(215)을 포함할 수 있다.
그리고 영상 데이터 분할/매칭 모듈(211)은 입력받은 영상 데이터의 프레임 영상을 일정한 크기 또는 일정한 영역인 개별 영역으로 구분한다. 영상 데이터가 다중 이미지 센서 영상인 경우, 영상 데이터 분할/매칭 모듈(211)은 각각의 개별 이미지 센서로부터 입력받은 영상 데이터를 분할된 개별 영역에 일대일 매칭할 수 있다.
도 5는 본 발명의 일실시예에 따른 영상 데이터 분할 및 매칭 과정을 설명하기 위한 도면이다.
이미지 센서가 1개인 경우, 영상 데이터의 무결성 검증 장치(200)는 입력받은 프레임 영상 그대로를 대표 프레임 영상(20)으로 적용할 수 있다. 또한, 영상 데이터의 무결성 검증 장치(200)는 영상 처리에 적합한 크기로 프레임 영상을 분할하여 개별 영역을 설정할 수 있다.
이때, 영상 데이터의 무결성 검증 장치(200)는 대표 프레임 영상(20)의 개별 영역을 또 다시 4개의 세부 영역으로 구분(510)할 수 있다. 영상 데이터의 무결성 검증 장치(200)는 세부 영역을 계속 세분화하여 구분할 수 있으며, 프레임 영상의 크기 또는 시스템의 연산 처리 능력에 따라, 세부 영역으로 구분할 수 있다.
구분된 세부 영역은 개별 검증값 생성 모듈(213)의 입력으로 사용되어, 각각의 세부 영역에 대한 개별 검증값 원본 생성에 활용될 수 있다. 이때, 구분된 세부 영역별로 순차적으로 개별 검증값 생성 모듈(213)에 입력되거나, 세로 방향 스캔(520) 또는 가로 방향 스캔(530)하여 개별 검증값 생성 모듈(213)에 입력될 수 있다.
다시 도 3에 대하여 설명하면, 영상 데이터의 무결성 검증 장치(200)는 검증 데이터를 생성하여 저장한다(S320).
영상 데이터의 무결성 검증 장치(200)는 분할된 개별 영역별로 개별 검증값 원본 및 대표 검증값 원본을 포함하는 검증 데이터를 생성한다. S310 단계에서 세부 영역으로 구분된 경우, 영상 데이터의 무결성 검증 장치(200)는 세부 영역별로 개별 검증값 및 대표 검증값 원본을 생성할 수 있다.
영상 데이터의 무결성 검증 장치(200)는 개별 영역의 영상으로부터 메타 데이터를 추출하거나, 개별 영역의 영상 데이터(픽셀 값)에 암호 알고리즘을 적용하여 개별 검증값 원본을 생성할 수 있다. 여기서, 메타 데이터는 개별 영역의 영상의 색상이나 객체의 형태 등을 의미할 수 있다.
그리고 영상 데이터의 무결성 검증 장치(200)는 암호 알고리즘 중 해시 연산이나 대칭키 연산 등을 적용하여 검증 데이터를 생성할 수 있다. 일반적으로 해시 연산은 다양한 크기의 입력 데이터에 대하여 일정한 크기의 값을 출력하며, 단방향성 연산이다. 따라서, 해시 연산은 동일한 데이터의 1비트만 변경하여도 전혀 다른 값을 출력하는 애벌런치효과(Avalanche effect)가 있어, 무결성 검증에 효율적으로 활용될 수 있다.
설명의 편의를 위하여, 영상 데이터의 무결성 검증 장치(200)가 개별 영역에 해시 연산을 적용하여 검증 데이터를 생성하는 것으로 설명하였으나 이에 한정하지 않고, 해시 연산과 유사한 기능을 목적으로 하는 알고리즘이나 다른 연산을 적용하여 검증 데이터를 생성할 수 있다.
또한, 영상 데이터의 무결성 검증 장치(200)는 개별 영역 별로 생성된 개별 검증값 원본들을 순차적인 체인 방식으로 연결하여, 프레임 영상(대표 프레임)에 대한 대표 검증값 원본을 생성할 수 있다. 이때, 영상 데이터의 무결성 검증 장치(200)는 대표 검증값 원본 생성 시에도 해시 연산을 활용할 수 있다.
즉, 영상 데이터의 무결성 검증 장치(200)는 이전 개별 영역의 해시 결과값에 현재 개별 영역의 해시 결과값을 연접(Concatenate)하여 동일한 해시 연산을 수행하거나, 대표 프레임에 대한 개별 검증값 원본들을 차례로 연접한 후 한 번에 해시 연산을 수행하여 대표 프레임에 대한 대표 검증값 원본을 생성할 수 있다.
그리고 도 4에 도시한 바와 같이, 개별 검증값 생성 모듈(213)은 개별 검증값 원본을 생성하여 메모리(240)에 저장하고, 생성된 개별 검증값 원본을 대표 검증값 생성 모듈(215)로 전달한다. 또한, 대표 검증값 생성 모듈(215)은 대표 검증값 원본을 생성하여 메모리(240)에 저장하고, 생성된 대표 검증값 원본을 프레임 영상 저장부(220)에 저장한다.
다음으로 영상 데이터의 무결성 검증 장치(200)는 프레임 영상에 대표 검증값 원본을 추가하여 저장한다(S330).
도 4와 같이, 영상 데이터의 무결성 검증 장치(200)의 프레임 영상 저장부(220)는 프레임 영상에 대표 검증값 생성 모듈(215)로부터 전달받은 대표 검증값 원본을 추가하여, 메모리(240)에 저장한다.
일반적으로, 프레임 단위의 영상 데이터는 프레임 헤더와 데이터 영역으로 구성된다. 프레임 영상 저장부(220)는 프레임 영상의 프레임 헤더에 대표 검증값 원본을 추가하여, 프레임 영상을 저장할 수 있다.
그리고 S320 단계에서 생성된 검증 데이터와 S330 단계에서 저장되는 프레임 영상은 일대일 대응을 이루는 메모리 영역에 각각 저장되며, 검증 데이터가 저장되는 메모리 영역과 프레임 영상이 저장되는 메모리 영역은 서로 구분된 메모리 영역일 수 있다.
도 6은 본 발명의 일실시예에 따른 영상 데이터 및 검증 데이터를 저장하는 과정을 설명하기 위한 도면이다.
도 6에 도시한 바와 같이, 프레임 영상 저장부(220)가 프레임 영상을 저장하는 영상 데이터 저장 영역(241)과 개별 검증값 원본 및 대표 검증값 원본이 저장되는 검증 데이터 저장 영역(245)은 서로 구분되는 영역이다. 영상 데이터 저장 영역(241)은 일반적인 이미지 센서 장치의 메모리와 동일한 기능을 수행하며, 사용자가 뷰어 프로그램을 이용하여 저장된 영상 데이터를 확인할 수 있도록 사용자의 접근이 가능한 영역이다.
반면, 검증 데이터 저장 영역(245)은 영상 데이터 저장 영역(241)에 대한 검증 데이터를 저장하는 분리된 영역으로, 사용자가 접근할 수 없는 영역으로 설정될 필요가 있다.
영상 데이터 저장 영역(241)과 검증 데이터 저장 영역(245) 총 두 개의 영역을 구성하기 위하여, 메모리 영역(240)은 논리적으로 구분되거나, 물리적으로 구분된 메모리 장치를 사용할 수 있다. 그리고 영상 데이터 저장 영역(241)에 저장되는 프레임 영상과 검증 데이터 저장 영역(245)에 저장되는 검증 데이터는 일대일(1:1) 대응되는 형태로 저장되어, 프레임 영상 검증 시 사용될 수 있다.
영상 데이터의 무결성 검증 장치(200)는 내부의 메모리(240) 또는 이미지 센서 장치(100)의 메모리(140)가 아닌 별도의 외부 저장 장치를 사용하여 프레임 영상 및 검증 데이터를 저장할 수 있으며, 무선 데이터 전송을 활용하여 외부 서버, 저장 장치, 클라우드 장치 등에 저장할 수 있다.
다음으로, 영상 데이터의 프레임 영상에 대한 무결성 검증을 요청받은 경우, 영상 데이터의 무결성 검증 장치(200)는 검증 대상 프레임의 개별 검증값 및 대표 검증값을 연산한다(S340).
영상 데이터의 무결성 검증 장치(200)는 무결성 검증을 요청받은 검증 대상 프레임의 개별 검증값 및 대표 검증값을 연산한다. 여기서, 검증 대상 프레임은 메모리에 저장된 프레임 영상을 의미할 수 있다.
도 7은 본 발명의 일실시예에 따른 검증 대상 프레임의 무결성 검증 과정을 설명하기 위한 도면이다.
개별 검증값 및 대표 검증값을 연산하는 과정은 도 3의 S320 단계에서 개별 검증값 원본 및 대표 검증값 원본을 생성하는 과정과 실질적으로 동일할 수 있다. 즉, 영상 데이터의 무결성 검증 장치(200)의 무결성 검증부(230)는 검증 데이터 생성부(210)와 실질적으로 동일한 방법으로, 검증 대상 프레임의 개별 검증값 및 대표 검증값을 연산할 수 있다.
도 7에 도시한 바와 같이, 영상 데이터 분할 모듈(231)은 이미지 센서 시스템의 내부 또는 외부의 메모리로부터 검증 대상이 되는 영상 데이터를 프레임 단위로 읽어온다. 이때, 영상 데이터 분할 모듈(231)은 영상 데이터 저장 영역으로부터 검증 대상 프레임을 읽어올 수 있으며, 검증 대상 프레임의 대표 검증값과 데이터 영역을 구분한다.
영상 데이터 분할 모듈(231)은 검증 대상 프레임의 영상 데이터를 개별 영역(또는 세부 영역)으로 구분하여 개별 검증값 계산 모듈(232)로 전달한다. 그리고 영상 데이터 분할 모듈(231)은 검증 대상 프레임에서 추출된 대표 검증값을 대표 검증값 비교 모듈(235)로 전달한다.
그리고 개별 검증값 계산 모듈(232)은 영상 데이터 분할 모듈(231)로부터 입력받은 개별 영역에 대한 개별 검증값을 연산한다. 이때, 개별 검증값 계산 모듈(232)은 도 2의 개별 검증값 생성 모듈(213)과 동일한 방법으로, 개별 영역에 암호 알고리즘을 수행하여 개별 검증값을 생성하고, 생성된 개별 검증값을 대표 검증값 계산 모듈(233) 및 개별 검증값 비교 모듈(234)로 전송할 수 있다.
또한, 대표 검증값 계산 모듈(233)은 계산된 개별 검증값들을 이용하여 매 프레임의 대표 검증값을 계산하고, 계산된 대표 검증값을 대표 검증값 비교 모듈(235)로 전송할 수 있다.
다시 도 3에 대하여 설명하면, 영상 데이터의 무결성 검증 장치(200)는 검증 대상 프레임의 개별 검증값 및 대표 검증값과, 검증 대상 프레임에 상응하는 검증 데이터를 비교하여, 검증 대상 프레임의 무결성을 검증한다(S350).
도 7에 도시한 바와 같이, 영상 데이터의 무결성 검증 장치(200)의 대표 검증값 비교 모듈(235)은 메모리의 검증 데이터 저장 영역에 저장된 대표 검증값 원본과, 대표 검증값 계산 모듈(233)에서 계산된 대표 검증값이 일치하는지 여부를 판단한다. 이때, 대표 검증값 비교 모듈(235)은 검증 대상 프레임에서 추출된 대표 검증값과 계산된 대표 검증값이 일치하는지 여부를 판단하거나, 대표 검증값 원본, 추출된 대표 검증값 및 계산된 대표 검증값이 모두 일치하는지 여부를 판단할 수도 있다.
또한, 개별 검증값 비교 모듈(234)은 개별 검증값 생성 모듈(213)에서 계산된 개별 검증값과, 메모리의 검증 데이터 저장 영역에 저장된 개별 검증값 원본을 비교한다. 즉, 개별 검증값 비교 모듈(234)은 계산된 개별 검증값과 저장된 개별 검증값 원본이 일치하는지 여부를 판단한다.
그리고 무결성 판단 모듈(236)은 개별 검증값 비교 모듈(234)의 결과와 대표 검증값 비교 모듈(235)의 결과를 기반으로, 검증 대상 프레임의 무결성 여부를 판단할 수 있다. 이때, 무결성 판단 모듈(236)은 대표 검증값 비교 모듈(235)의 비교 결과가 일치하는지 판단하여, 검증 대상 프레임의 무결성 여부를 판단할 수 있다.
대표 검증값 비교 모듈(235)의 비교 결과가 일치하지 않는 것으로 판단된 경우, 무결성 판단 모듈(236)은 개별 검증값 비교 모듈(234)의 비교 결과가 일치하는지 여부를 판단하여 위변조가 발생한 개별 영역을 검출할 수 있다.
즉, 무결성 판단 모듈(236)은 대표 검증값 비교 모듈(235)의 비교 결과 일치하는 것으로 판단된 경우, 해당 검증 대상 프레임이 원본 프레임 영상인 것으로 판단할 수 있다.
반면, 대표 검증값 비교 모듈(235)의 비교 결과가 일치하지 않는 것으로 판단된 경우, 무결성 판단 모듈(236)은 검증 대상 프레임이 위변조 된 것으로 판단한다. 그리고 무결성 판단 모듈(236)은 개별 검증값 비교 모듈(234)의 비교 결과를 기반으로, 위변조가 발생한 개별 영역을 검출할 수 있다.
마지막으로, 영상 데이터의 무결성 검증 장치(200)는 검증 대상 프레임에 대한 무결성 검증의 수행 결과를 출력한다(S360).
영상 데이터의 무결성 검증 장치(200)는 검증 대상 프레임이 원본 프레임 영상인지, 위변조된 프레임 영상인지 여부를 출력하여, 사용자에게 제공할 수 있다. 특히, 검증 대상 프레임이 위변조된 프레임 영상인 것으로 판단된 경우, 영상 데이터의 무결성 검증 장치(200)는 개별 검증값을 비교한 결과 일치하지 않는 영역(불일치 영역)의 정보를 출력할 수 있다.
이와 같이, 영상 데이터의 무결성 검증 장치(200)는 수정, 변경, 부분 삭제 또는 파괴 등의 위변조가 발생한 개별 영역을 검증 대상 프레임 상에서 경고 표시하여, 사용자가 위변조된 개별 영역을 용이하게 식별할 수 있도록 한다.
또한, 영상 데이터의 무결성 검증 장치(200)는 원본 프레임 영상인 것으로 판단된 경우 해당 검증 대상 프레임을 디스플레이하고, 위변조된 프레임 영상인 것으로 판단된 경우 위변조된 개별 영역(불일치 영역)을 표시하는 형태로 구현될 수 있다.
이하에서는 도 8을 통하여, 본 발명의 일실시예에 따른 영상 데이터의 무결성 검증 장치의 무결성 검증부가 검증 대상 프레임의 무결성을 검증하는 방법에 대하여 더욱 상세하게 설명한다.
도 8은 본 발명의 일실시예에 따른 무결성 검증부가 검증 대상 프레임의 무결성을 검증하는 방법을 설명하기 위한 순서도이다.
도 8의 무결성 검증 과정은 영상 데이터의 무결성 검증 장치(200)의 무결성 검증부(230)에 의해 수행되며, 메모리에 저장된 동영상 단위로 무결성 검증 과정이 수행되고, 각 동영상은 프레임 단위로 위변조 여부가 판단된다.
먼저, 영상 데이터 분할 모듈(231)은 검증 대상 프레임을 읽어온다(S810).
영상 데이터 분할 모듈(231)은 검증 대상이 되는 영상 데이터의 검증 대상 프레임을 읽어오고, 읽어온 검증 대상 프레임의 대표 검증값 및 데이터 영역을 구분한다.
또한, 영상 데이터 분할 모듈(231)은 검증 대상 프레임을 개별 영역으로 구분하여 개별 검증값 계산 모듈(232)에 입력하고, 검증 대상 프레임의 대표 검증값을 대표 검증값 비교 모듈(235)로 전달할 수 있다.
다음으로, 개별 검증값 계산 모듈(232) 및 대표 검증값 계산 모듈(233)은 각각 개별 검증값 및 대표 검증값을 계산한다(S820).
이때, 개별 검증값 계산 모듈(232)은 계산된 개별 검증값들을 대표 검증값 계산 모듈(233)로 전달하고, 대표 검증값 계산 모듈(233)은 개별 검증값들을 이용하여, 검증 대상 프레임에 대한 대표 검증값을 계산할 수 있다.
그리고 대표 검증값 비교 모듈(235)은 대표 검증값이 일치하는지 여부를 판단하고(S830), 대표 검증값이 일치하는 것으로 판단된 경우 해당 검증 대상 프레임이 원본 프레임 영상인 것으로 판단하며, 후술할 S870 단계를 수행할 수 있다.
이때, 대표 검증값 비교 모듈(235)은 대표 검증값 계산 모듈(233)에서 계산된 대표 검증값과, 검증 데이터로 저장된 대표 검증값 원본을 비교하거나, 계산된 대표 검증값과 S810 단계에서 검증 대상 프레임으로부터 추출된 대표 검증값을 비교하여, 대표 검증값이 일치하는지 여부를 판단할 수 있다.
반면, 대표 검증값이 일치하지 않는 것으로 판단된 경우, 개별 검증값 비교 모듈(234)은 개별 검증값이 일치하는지 여부를 판단한다(S840).
개별 검증값 비교 모듈(234)은 개별 검증값 계산 모듈(232)에서 계산된 개별 검증값과 검증 데이터로 저장된 개별 검증값 원본을 비교하여, 개별 검증값이 일치하는지 여부를 판단할 수 있다.
대표 검증값이 일치하지 않는 것으로 판단된 경우, 무결성 검증부(230)는 해당 검증 대상 프레임이 위변조된 것으로 판단한다. 그리고 무결성 검증부(230)는 위변조된 개별 영역을 검출하기 위하여 S840 단계를 수행할 수 있다.
개별 검증값 비교부(234)는 개별 검증값이 일치하지 않는 경우, 해당 개별 영역이 위변조된 것으로 판단하고, 해당 개별 영역(불일치 영역)을 표시하여 사용자에게 제공할 수 있다(S850).
이때, 무결성 검증부(230)는 개별 검증값이 일치하지 않는 개별 영역인 불일치 영역을 무결성이 의심되는 개별 영역으로 판단하고, 내부의 출력 장치를 통하여 불일치 영역을 출력하거나, 외부의 출력 장치를 이용하여 불일치 영역을 출력할 수 있다.
그리고 무결성 검증부(230)는 개별 검증값이 일치하는지 여부를 판단한 해당 개별 영역이 검증 대상 프레임의 마지막 개별 영역인지 여부를 판단하고(S860) 개별 검증값의 일치 여부 판단 과정을 반복 수행하여 검증 대상 프레임의 전체 개별 영역에 대한 개별 검증값 일치 여부를 판단할 수 있다.
해당 개별 영역이 검증 대상 프레임의 끝이 아닌 경우, 무결성 검증부(230)는 다음 개별 영역에 대한 일치 여부를 판단하기 위하여, 다음 개별 영역의 개별 검증값을 읽어와 S840 단계를 다시 수행한다.
또한, 무결성 검증부(230)는 해당 개별 영역이 검증 대상 프레임의 마지막 개별 영역인 것으로 판단된 경우, 해당 검증 대상 프레임이 검증 대상이 되는 영상 데이터의 마지막 프레임인지 여부를 판단하여(S870), 영상 데이터의 전체 프레임에 대한 위변조 여부 검사를 수행할 수 있다.
현재의 검증 대상 프레임이 영상 데이터의 마지막 프레임인 경우 무결성 검증부(230)는 무결성 검증 과정의 수행을 종료하고, 마지막 프레임이 아닌 경우 다음 프레임을 읽어오는 S810 단계 이후의 과정을 반복하여 수행할 수 있다.
도 9는 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 블록도이다.
도 9를 참조하면, 본 발명의 실시예는 컴퓨터로 읽을 수 있는 기록매체와 같은 컴퓨터 시스템(900)에서 구현될 수 있다. 도 9에 도시된 바와 같이, 컴퓨터 시스템(900)은 버스(920)를 통하여 서로 통신하는 하나 이상의 프로세서(910), 메모리(930), 사용자 인터페이스 입력 장치(940), 사용자 인터페이스 출력 장치(950) 및 스토리지(960)를 포함할 수 있다. 또한, 컴퓨터 시스템(900)은 네트워크(980)에 연결되는 네트워크 인터페이스(970)를 더 포함할 수 있다. 프로세서(910)는 중앙 처리 장치 또는 메모리(930)나 스토리지(960)에 저장된 프로세싱 인스트럭션들을 실행하는 반도체 장치일 수 있다. 메모리(930) 및 스토리지(960)는 다양한 형태의 휘발성 또는 비휘발성 저장 매체일 수 있다. 예를 들어, 메모리는 ROM(931)이나 RAM(932)을 포함할 수 있다.
따라서, 본 발명의 실시예는 컴퓨터로 구현된 방법이나 컴퓨터에서 실행 가능한 명령어들이 기록된 비일시적인 컴퓨터에서 읽을 수 있는 매체로 구현될 수 있다. 컴퓨터에서 읽을 수 있는 명령어들이 프로세서에 의해서 수행될 때, 컴퓨터에서 읽을 수 있는 명령어들은 본 발명의 적어도 한 가지 태양에 따른 방법을 수행할 수 있다.
이상에서와 같이 본 발명에 따른 영상 데이터의 무결성 검증 장치 및 방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
10: 입력 영상 20: 대표 프레임
100: 이미지 센서 장치 110: 카메라
120: 영상 데이터 수집부 130: 통신부
140: 메모리 150: 출력 장치
200: 영상 데이터의 무결성 검증 장치
210: 검증 데이터 생성부 211: 영상 데이터 분할/매칭 모듈
213: 개별 검증값 생성 모듈 215: 대표 검증값 생성 모듈
220: 프레임 영상 저장부 230: 무결성 검증부
231: 영상 데이터 분할 모듈 232: 개별 검증값 계산 모듈
233: 대표 검증값 계산 모듈 234: 개별 검증값 비교 모듈
235: 대표 검증값 비교 모듈 236: 무결성 판단 모듈
240: 메모리 241: 영상 데이터 저장 영역
245: 검증 데이터 저장 영역 250: 출력 장치
510: 세부 영역 구분 520: 세로 방향 스캔
530: 가로 방향 스캔 900: 컴퓨터 시스템
910: 프로세서 920: 버스
930: 메모리 931: 롬
932: 램 940: 사용자 인터페이스 입력 장치
950: 사용자 인터페이스 출력 장치
960: 스토리지 970: 네트워크 인터페이스
980: 네트워크

Claims (1)

  1. 영상 데이터의 무결성 검증 장치에 의해 수행되는 영상 데이터의 무결성 검증 방법에 있어서,
    영상 데이터의 프레임 영상을 개별 영역으로 분할하는 단계,
    상기 개별 영역으로 분할된 상기 프레임 영상의 개별 검증값 원본 및 대표 검증값 원본을 포함하는 검증 데이터를 생성하여, 저장하는 단계,
    상기 프레임 영상의 프레임 헤더에 상기 대표 검증값 원본을 추가하여, 상기 프레임 영상을 저장하는 단계,
    검증 대상 프레임의 개별 검증값 및 대표 검증값을 연산하는 단계, 그리고
    연산된 상기 개별 검증값 및 상기 대표 검증값과 상기 검증 대상 프레임에 대응되는 상기 검증 데이터를 비교하여, 상기 검증 대상 프레임의 무결성을 검증하는 단계
    를 포함하는 영상 데이터의 무결성 검증 방법.
KR1020170146787A 2016-12-05 2017-11-06 영상 데이터의 무결성 검증 장치 및 방법 KR20180064279A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160164649 2016-12-05
KR20160164649 2016-12-05

Publications (1)

Publication Number Publication Date
KR20180064279A true KR20180064279A (ko) 2018-06-14

Family

ID=62629099

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170146787A KR20180064279A (ko) 2016-12-05 2017-11-06 영상 데이터의 무결성 검증 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20180064279A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200003971A (ko) * 2018-07-03 2020-01-13 한양대학교 에리카산학협력단 영상의 프라이버시 보호 및 변조 방지를 위한 영상 처리 장치, 영상 검증 장치 및 그 방법
KR20200063839A (ko) 2018-11-28 2020-06-05 (주)유엠로직스 핑거프린트 및 3D n-gram을 혼합한 영상 데이터 무결성 검증 방법 및 그 시스템
US20220094551A1 (en) * 2020-09-21 2022-03-24 Jason Burt Verification of the reliability of software and devices against assertions and guarantees

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101665199B1 (ko) 2014-11-20 2016-10-13 순천향대학교 산학협력단 차량용 블랙박스의 영상 위ㆍ변조 탐지 시스템 및 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101665199B1 (ko) 2014-11-20 2016-10-13 순천향대학교 산학협력단 차량용 블랙박스의 영상 위ㆍ변조 탐지 시스템 및 방법

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200003971A (ko) * 2018-07-03 2020-01-13 한양대학교 에리카산학협력단 영상의 프라이버시 보호 및 변조 방지를 위한 영상 처리 장치, 영상 검증 장치 및 그 방법
KR20200063839A (ko) 2018-11-28 2020-06-05 (주)유엠로직스 핑거프린트 및 3D n-gram을 혼합한 영상 데이터 무결성 검증 방법 및 그 시스템
US20220094551A1 (en) * 2020-09-21 2022-03-24 Jason Burt Verification of the reliability of software and devices against assertions and guarantees
US11936791B2 (en) * 2020-09-21 2024-03-19 Jason Burt Verification of the reliability of software and devices against assertions and guarantees

Similar Documents

Publication Publication Date Title
US11195037B2 (en) Living body detection method and system, computer-readable storage medium
US20230215197A1 (en) Systems and Methods for Detection and Localization of Image and Document Forgery
US11030437B2 (en) Liveness detection method and liveness detection system
CN110222573B (zh) 人脸识别方法、装置、计算机设备及存储介质
US8126197B2 (en) Method for image quality assessment using quality vectors
CN104205865B (zh) 用于认证视频内容的方法和装置
JP2020525947A (ja) 操作された画像の検出
US8538164B2 (en) Image patch descriptors
KR101548928B1 (ko) 불변적인 시각적 장면 및 객체 인식
KR20180064279A (ko) 영상 데이터의 무결성 검증 장치 및 방법
CN111339897B (zh) 活体识别方法、装置、计算机设备和存储介质
CN113642639B (zh) 活体检测方法、装置、设备和存储介质
Lin et al. Convolutional neural networks for face anti-spoofing and liveness detection
alZahir et al. Image forgery detection using image similarity
US8164633B2 (en) Calibration apparatus and method for imaging devices and computer program
Bagiwa et al. Digital video inpainting detection using correlation of hessian matrix
US20220294635A1 (en) Method for proving original of data, and apparatus therefor
WO2018107574A1 (zh) 一种对印防伪特征的检测方法及装置
US8453248B2 (en) Method and devices for video processing rights enforcement
US20210099772A1 (en) System and method for verification of video integrity based on blockchain
WO2018189962A1 (ja) 物体認識装置、物体認識システム、及び物体認識方法
CN112287905A (zh) 车辆损伤识别方法、装置、设备及存储介质
Edmunds et al. Fake face detection based on radiometric distortions
KR20210081852A (ko) 객체 검출 모델 학습 장치 및 방법
Abraham Digital image forgery detection approaches: A review and analysis