KR20220142800A - System and method for video integrity verification and original recovery based on Blockchain network - Google Patents

System and method for video integrity verification and original recovery based on Blockchain network Download PDF

Info

Publication number
KR20220142800A
KR20220142800A KR1020210049275A KR20210049275A KR20220142800A KR 20220142800 A KR20220142800 A KR 20220142800A KR 1020210049275 A KR1020210049275 A KR 1020210049275A KR 20210049275 A KR20210049275 A KR 20210049275A KR 20220142800 A KR20220142800 A KR 20220142800A
Authority
KR
South Korea
Prior art keywords
image data
verification
frame
image
verified
Prior art date
Application number
KR1020210049275A
Other languages
Korean (ko)
Other versions
KR102524271B1 (en
Inventor
강윤구
김태영
홍준기
김순태
Original Assignee
유저인사이트 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 유저인사이트 주식회사 filed Critical 유저인사이트 주식회사
Priority to KR1020210049275A priority Critical patent/KR102524271B1/en
Publication of KR20220142800A publication Critical patent/KR20220142800A/en
Application granted granted Critical
Publication of KR102524271B1 publication Critical patent/KR102524271B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64715—Protecting content from unauthorized alteration within the network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/64—Protecting data integrity, e.g. using checksums, certificates or signatures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/12—Applying verification of the received information
    • H04L63/123—Applying verification of the received information received data contents, e.g. message integrity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics

Abstract

According to an embodiment of the present disclosure, a method for verifying and recovering video integrity is provided. The method includes the steps of: receiving a forgery verification request, wherein the forgery verification request includes at least one of a timestamp of video data to be verified and the video data to be verified; analyzing the video data to be verified; and inquiring a transaction according to the timestamp time of the video data to be verified on a blockchain network, comparing information stored in the transaction with an analysis result of the video data to be verified, and determining whether the video data to be verified is forged or falsified.

Description

블록체인 네트워크 기반 영상 무결성 검증 및 원본 복원 방법 및 시스템{System and method for video integrity verification and original recovery based on Blockchain network}{System and method for video integrity verification and original recovery based on Blockchain network}

본 개시는 영상 무결성 검증 및 복원 방법 및 시스템에 관한 것으로, 보다 상세히는 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법 및 시스템에 관한 것이다. The present disclosure relates to a method and system for verifying and restoring image integrity, and more particularly, to a method and system for verifying and restoring image integrity based on a blockchain network.

사회의 다양성과 복잡성으로 다양한 강력 범죄가 증가하고 있다. 이에 대한 대응책으로 CCTV를 설치하여 공공안전을 도모하고, 범죄 발생시 객관적인 증거로 사용하고 있다. 그러나, 실제 범죄 발생시 CCTV 영상정보에 대한 보안관리 부실과 내외부의 악의적 사용자들의 해킹 공격에 의한 영상정보 조작 및 사고로 인하여 증거로 사용되지 못하는 경우가 발생한다. Due to the diversity and complexity of society, various violent crimes are increasing. As a countermeasure against this, CCTV is installed to promote public safety and is used as objective evidence in case of a crime. However, when a crime actually occurs, there are cases where it cannot be used as evidence due to poor security management of CCTV image information and manipulation of image information and accidents caused by hacking attacks by malicious users inside and outside.

이러한 문제점을 해결하기 위해 블록체인 기술을 통해 CCTV의 영상 무결성을 보장하기 위한 연구를 진행하고 있다. 종래의 연구에서는 영상정보와 타임스탬프를 공용 블록체인 플랫폼인 비트코인에 저장하여 특정 시점의 영상의 조작을 방지하는 기술이 공개된 바 있다. 공용 블록체인을 사용하여 영상의 무결성을 보장해주는 연구들의 경우 개인정보에 민감한 영상 정보가 공중에 유통되는 문제 및 네트워크 사용에 따른 비용(예: 코인)을 지불해야 한다는 문제점이 있다. 이에 대한 해결책으로 사설 블록체인을 도입하고 영상에 워터마크(Water Mark)를 사용하는 기술이 공개되었으나, 단순히 영상이 조작되었다는 정도의 정보만을 제공할 뿐, 특정 영상 내 어느 부분이 조작이 되었는지를 알 수 없고 또한 원본을 복구하기 어렵다는 문제점이 여전히 존재한다. To solve this problem, research is being conducted to ensure the video integrity of CCTV through blockchain technology. In a previous study, a technique for preventing manipulation of images at a specific point in time by storing image information and timestamps in Bitcoin, a public blockchain platform, has been disclosed. In the case of studies that use a public blockchain to ensure the integrity of images, there are problems in that image information sensitive to personal information is distributed to the public and a cost (eg, coins) must be paid for using the network. As a solution to this, a private blockchain was introduced and a technology to use a watermark in the video was released, but it only provides information about the extent to which the video has been manipulated, and it is possible to know which part of a specific video has been manipulated. There is still a problem that the original cannot be recovered and that it is difficult to recover the original.

본 발명이 해결하고자 하는 기술적 과제는, 영상의 위변조 여부, 위변조 정보 및 원본 복원을 제공하는 영상 무결성 검증 및 원본 복원 방법 및 시스템을 제공하는 것이다. The technical problem to be solved by the present invention is to provide an image integrity verification and original restoration method and system that provide forgery or falsification of an image, forgery information, and original restoration.

본 발명이 해결하고자 하는 다른 기술적 과제는 영상의 핵심 정보를 저장함으로써 데이터 용량과 처리속도에서 성능향상을 제공하는 것이다. Another technical problem to be solved by the present invention is to provide performance improvement in data capacity and processing speed by storing core information of an image.

본 발명의 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명의 기술분야에서의 통상의 기술자에게 명확하게 이해될 수 있을 것이다.The technical problems of the present invention are not limited to the technical problems mentioned above, and other technical problems not mentioned will be clearly understood by those skilled in the art from the following description.

본 개시의 일 특징에 의하면, 영상 무결성을 검증하고 복원하는 방법이 제공된다. 상기 방법은 위변조 검증 요청을 수신하는 단계 - 상기 위변조 검증 요청은 검증 대상 영상 데이터의 촬영시간(Timestamp) 및 검증 대상 영상 데이터 중 적어도 하나를 포함함 -; 상기 검증 대상 영상 데이터를 분석하는 단계; 및 블록체인 네트워크 상의, 상기 검증 대상 영상 데이터의 촬영시간에 따른 트랜잭션을 조회하여 트랜잭션에 저장된 정보와 상기 검증 대상 영상 데이터의 분석 결과를 비교하여 상기 검증 대상 영상 데이터의 위변조 여부를 판단하는 단계; 를 포함할 수 있다. According to one aspect of the present disclosure, a method for verifying and restoring image integrity is provided. The method includes: receiving a forgery verification request, wherein the forgery verification request includes at least one of a photographing time (Timestamp) of the verification target image data and the verification target image data; analyzing the verification target image data; and determining whether the verification target image data is forged or falsified by inquiring a transaction according to the recording time of the verification target image data on a block chain network and comparing the information stored in the transaction with the analysis result of the verification target image data; may include.

본 개시의 일 실시예에 의하면, 상기 방법은 상기 검증 대상 영상 데이터의 촬영시간에 대응하는 기준 영상 데이터를 수신하는 단계; 및 상기 검증 대상 영상 데이터와 상기 기준 영상 데이터를 비교하여 상기 검증 대상 영상 데이터의 I-Frame 별 위변조 여부를 분석하는 단계; 를 더 포함할 수 있다. According to an embodiment of the present disclosure, the method includes: receiving reference image data corresponding to a photographing time of the image data to be verified; and comparing the verification target image data with the reference image data to analyze whether the verification target image data is forged or altered for each I-Frame; may further include.

본 개시의 일 실시예에 의하면, 상기 검증 대상 영상 데이터를 분석하는 단계는 상기 검증 대상 영상 데이터의 I-Frame, 상기 검증 대상 영상 데이터의 I-Frame의 암호화값, 및 상기 검증 대상 영상 데이터의 I-Frame 집합의 암호화값 중 적어도 하나를 구할 수 있다. According to an embodiment of the present disclosure, the analyzing of the verification target image data includes an I-Frame of the verification target image data, an encrypted value of the I-Frame of the verification target image data, and an I of the verification target image data. -At least one of the encrypted values of the Frame set can be obtained.

본 개시의 일 실시예에 의하면, 상기 트랜잭션에 저장된 정보는 상기 검증 대상 영상 데이터의 촬영시간에 대응하는 기준 영상 데이터의 I-Frame 집합의 암호화값일 수 있다. According to an embodiment of the present disclosure, the information stored in the transaction may be an encryption value of an I-Frame set of reference image data corresponding to a recording time of the image data to be verified.

본 개시의 일 실시예에 의하면, 상기 블록체인 네트워크 상의, 상기 검증 대상 영상 데이터의 촬영시간에 따른 트랜잭션을 조회하여 트랜잭션에 저장된 정보와 상기 검증 대상 영상 데이터의 분석 결과를 비교하여 상기 검증 대상 영상 데이터의 위변조 여부를 판단하는 단계는 상기 검증 대상 영상 데이터의 I-Frame 집합의 암호화값과 기준 영상 데이터의 I-Frame 집합의 암호화값을 비교하여 그 값이 동일하다면 영상조작이 없다고 판단할 수 있다. According to an embodiment of the present disclosure, the verification target image data is compared with information stored in the transaction by inquiring a transaction according to the shooting time of the verification target image data on the block chain network and the analysis result of the verification target image data In the step of determining whether to forge or not, compare the encrypted value of the I-Frame set of the verification target image data with the encrypted value of the I-Frame set of the reference image data, and if the values are the same, it may be determined that there is no image manipulation.

본 개시의 일 실시예에 의하면, 상기 기준 영상 데이터를 수신하는 단계는 상기 검증 대상 영상 데이터가 촬영된 촬영시간에 대응하는 기준 영상 데이터의 I-Frame을 수신할 수 있다. According to an embodiment of the present disclosure, the receiving of the reference image data may include receiving an I-Frame of reference image data corresponding to a photographing time at which the verification target image data was captured.

본 개시의 일 실시예에 의하면, 상기 검증 대상 영상 데이터와 상기 기준 영상 데이터를 비교하여 상기 검증 대상 영상 데이터의 I-Frame 별 위변조 여부를 분석하는 단계는 촬영시간을 기준으로 상기 검증 대상 영상 데이터의 I-Frame의 암호화값과 상기 기준 영상 데이터의 I-Frame의 암호화값을 비교하여 양 I-Frame의 암호화값이 동일하면 해당 촬영시간의 검증 대상 영상 데이터의 위변조가 없다고 분석하고, 기준 영상 데이터의 I-Frame의 암호화값이 누락된 경우 해당 촬영시간의 검증 대상 영상 데이터가 삭제되었다고 분석하고, 기준 영상 데이터의 I-Frame의 암호화값이 다른 경우 해당 촬영시간의 검증 대상 영상 데이터가 수정되었다고 판단하고, 기준 영상 데이터의 I-Frame의 암호화값이 추가된 경우 해당 촬영시간의 검증 대상 영상데이터가 추가되었다고 분석할 수 있다. According to an embodiment of the present disclosure, the step of comparing the verification target image data and the reference image data to analyze whether the verification target image data is forged or falsified for each I-Frame is based on the shooting time of the verification target image data. By comparing the encryption value of the I-Frame and the encryption value of the I-Frame of the reference image data, if the encryption values of both I-Frames are the same, it is analyzed that there is no forgery or falsification of the image data to be verified at the corresponding shooting time, and If the encryption value of the I-Frame is missing, it is analyzed that the video data to be verified at the recording time has been deleted, and if the encryption value of the I-Frame of the reference video data is different, it is determined that the video data to be verified at the recording time has been modified. , when the encryption value of the I-Frame of the reference image data is added, it can be analyzed that the image data to be verified for the corresponding shooting time is added.

본 개시의 일 실시예에 의하면, 상기 방법은 위변조 영상에 대해 복원을 수행하는 단계를 더 포함할 수 있다. According to an embodiment of the present disclosure, the method may further include performing restoration on the forged image.

본 개시의 일 실시예에 의하면, 상기 위변조 영상에 대해 복원을 수행하는 단계는 촬영시간을 기준으로 검증 대상 영상 데이터의 I-Frame의 암호화값과 기준 영상 데이터의 I-Frame의 암호화값을 각각 비교하여, 서로 상이한 경우 검증 대상 영상 데이터의 I-Frame을 기준 영상 데이터의 I-Frame으로 수정할 수 있다. According to an embodiment of the present disclosure, in the step of performing restoration on the forged image, the encryption value of the I-Frame of the image data to be verified and the encryption value of the I-Frame of the reference image data are compared based on the shooting time, respectively. Accordingly, when they are different from each other, the I-Frame of the image data to be verified may be corrected to the I-Frame of the reference image data.

본 개시의 일 실시예에 의하면, 위변조 검증 결과를 출력하는 사용자 인터페이스를 제공하는 단계를 더 포함하고, 상기 사용자 인터페이스는 제1 화면, 제2 화면 및 타임라인을 포함하고, 상기 제1 화면은 상기 검증 대상 영상 데이터를 표시하고 상기 제2 화면에는 상기 기준 영상 데이터를 표시하고, 상기 제1 화면에는 상기 검증 대상 영상 데이터의 I-Frame의 이미지 파일을 기초로 제1 영상을 표시하고, 상기 제2 화면에는 상기 기준 영상 데이터의 I-Frame 이미지 파일을 기초로 제2 영상을 표시하며, 상기 타임라인은 상기 검증 대상 영상과 상기 기준 영상을 촬영시간에 따라 표시할 수 있다. According to an embodiment of the present disclosure, further comprising the step of providing a user interface for outputting a forgery verification result, wherein the user interface includes a first screen, a second screen, and a timeline, the first screen is the Displaying image data to be verified, displaying the reference image data on the second screen, displaying a first image on the first screen based on an image file of an I-Frame of the image data to be verified, and the second screen A second image may be displayed on the screen based on the I-Frame image file of the reference image data, and the timeline may display the verification target image and the reference image according to the shooting time.

본 개시의 일 실시예에 의하면, 상기 기준 영상 데이터는 영상 기록 장치로부터 촬영 영상 데이터를 수신하여, 상기 촬영 영상 데이터에서 추출한 핵심정보를 통신가능하도록 연결된 데이터 저장소에 저장한 데이터일 수 있다. According to an embodiment of the present disclosure, the reference image data may be data that receives captured image data from an image recording device and stores core information extracted from the captured image data in a data storage connected to communicate.

본 개시의 일 실시예에 의하면, 상기 핵심정보는 상기 촬영 영상 데이터의 I-Frame이고, 상기 데이터 저장소는 IPFS(InterPlanetary File System)일 수 있다. According to an embodiment of the present disclosure, the core information may be an I-Frame of the captured image data, and the data storage may be an InterPlanetary File System (IPFS).

본 개시의 다른 특징에 의하면, 프로그램을 기록한 컴퓨터 판독가능 기록매체로서, 상기 프로그램은 명령어들을 포함하고, 상기 명령어들은 컴퓨터에 의해 실행될 때 전술한 방법을 수행하는, 컴퓨터 판독가능 기록매체가 제공될 수 있다. According to another feature of the present disclosure, there may be provided a computer-readable recording medium recording a program, the program including instructions, and the instructions performing the above-described method when executed by a computer. have.

본 개시의 또 다른 특징에 의하면, 블록체인 네트워크 기반 영상 무결성 검증 및 복원 시스템이 제공될 수 있다. 상기 시스템은 영상 검증/복원 서버, 분산 파일 시스템 및 블록체인 네트워크를 포함하고, 상기 검증/복원 서버는 영상 데이터를 수신하고, 상기 영상 데이터에서 추출한 I-Frame을 상기 분산 파일 시스템으로 전송하며, 상기 영상 데이터의 I-Frame의 집합의 해쉬값을 하나의 트랜잭션으로 생성하여 상기 블록체인 네트워크에 전송하고, 특정 영상에 대한 위변조 검증을 수행하도록 구성될 수 있다. According to another feature of the present disclosure, a blockchain network-based image integrity verification and restoration system may be provided. The system includes an image verification/restore server, a distributed file system, and a blockchain network, wherein the verification/restore server receives image data and transmits an I-Frame extracted from the image data to the distributed file system, and It may be configured to generate a hash value of a set of I-Frames of image data as one transaction, transmit it to the blockchain network, and perform forgery verification on a specific image.

본 개시의 일 실시예에 의하면, 상기 검증/복원 서버는 검증 대상 영상 데이터와 영상이 촬영된 촬영 시간을 포함하는 검증 요청을 수신하고, 상기 검증 대상 영상 데이터의 I-Frame 정보 및 그 해쉬값을 산출하고 상기 블록체인 네트워크 상의, 상기 검증 대상 영상 데이터의 촬영시간에 따른 트랜잭션을 조회하여 트랜잭션에 저장된 정보와 상기 검증 대상 영상 데이터의 분석 결과를 비교하여 상기 검증 대상 영상 데이터의 위변조 여부를 판단하도록 구성될 수 있다. According to an embodiment of the present disclosure, the verification/restore server receives the verification request including the verification target image data and the shooting time at which the image was taken, and calculates the I-Frame information of the verification target image data and its hash value. Calculating and querying the transaction according to the shooting time of the video data to be verified on the blockchain network, and comparing the information stored in the transaction with the analysis result of the video data to be verified to determine whether the video data to be verified is forged or not. can be

본 발명의 실시예들에 따른 블록체인 네트워크 기반 영상 무결성 검증 및 원본 복원 방법 및 시스템에 의하면, 다음과 같은 발명의 효과를 얻을 수 있다.According to the blockchain network-based image integrity verification and original restoration method and system according to embodiments of the present invention, the following effects can be obtained.

영상의 위변조 여부, 위변조 정보 및 원본 복원을 제공하는 영상 무결성 검증 및 원본 복원을 제공할 수 있다. It is possible to provide image integrity verification and original restoration that provides forgery or falsification of the image, forgery information, and original restoration.

영상의 핵심 정보를 저장함으로써 데이터 용량과 처리속도에서 성능 향상을 제공할 수 있다. By storing the core information of the image, it is possible to provide performance improvement in data capacity and processing speed.

본 발명의 효과들은 이상에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.Effects of the present invention are not limited to the effects mentioned above, and other effects not mentioned will be clearly understood by those skilled in the art from the following description.

도 1은 본 개시의 일 실시예에 따른 영상 무결성 검증 및 복원 시스템의 전체 구성을 개념적으로 도시한 도면이다.
도 2는 본 개시의 일 실시예에 따른 영상 검증/복원 서버의 기능을 개념적으로 도시한 도면이다.
도 3은 본 개시의 일 실시예에 따라, 영상 검증/복원 서버(120)에서 검증 대상 영상에 대한 위변조 검증 수행하는 흐름을 보여주는 예시적인 동작 흐름도이다.
도 4는 본 개시의 일 실시예에 따라 위변조 검증 요청의 형식을 도시하는 도면이다.
도 5는 본 개시의 일 실시예에 따라 영상의 I-Frame과 그 해쉬값을 도시하는 도면이다.
도 6은 본 개시의 일 실시예에 따라 블록체인 네트워크 상에서 공유되는 스마트컨트랙트에 저장된 트랜잭션을 도시하는 도면이다.
도 7은 본 개시의 일 실시예에 따라 검증 대상 영상의 I-Frame 집합의 루트 해쉬값과 기준 영상의 I-Frame 집합의 루트 해쉬값을 도시하는 도면이다.
도 8은 본 개시의 일 실시예에 따라 영상 검증/복원 서버가 분산 파일 시스템으로 영상의 I-Frame 조회(Timestamp: 20210121 03:12)를 요청하고, 분산 파일 시스템으로부터 기준 영상의 I-Frame을 수신하는 동작을 도식화하여 도시하는 도면이다.
도 9는 본 개시의 일 실시예에 따라 영상 검증/복원 서버가 타임스탬프 기준으로 검증 대상 영상의 I-Frame과 기준 영상의 I-Frame의 해쉬값을 각각 구하는 단계를 도시하는 도면이다.
도 10은 본 개시의 일 실시예에 따라 검증 대상 영상의 위변조 여부 식별 방법을 도시하는 도면이다.
도 11은 본 개시의 일 실시예에 따라 영상 검증/복원 서버에서 위변조 검증 결과를 출력하는 사용자 인터페이스를 도시하는 도면이다. 1 is a diagram conceptually illustrating an overall configuration of an image integrity verification and restoration system according to an embodiment of the present disclosure.
2 is a diagram conceptually illustrating a function of an image verification/restore server according to an embodiment of the present disclosure.
3 is an exemplary operation flowchart illustrating a flow of performing forgery verification on a verification target image in the image verification/restore server 120 according to an embodiment of the present disclosure.
4 is a diagram illustrating a format of a forgery verification request according to an embodiment of the present disclosure.
5 is a diagram illustrating an I-Frame of an image and a hash value thereof according to an embodiment of the present disclosure.
6 is a diagram illustrating a transaction stored in a smart contract shared on a blockchain network according to an embodiment of the present disclosure.
7 is a diagram illustrating a root hash value of an I-Frame set of an image to be verified and a root hash value of an I-Frame set of a reference image according to an embodiment of the present disclosure.
8 is an image verification/restore server requesting an I-Frame inquiry (Timestamp: 20210121 03:12) of an image to a distributed file system according to an embodiment of the present disclosure, and receiving an I-Frame of a reference image from the distributed file system It is a diagram schematically showing the operation of receiving.
9 is a diagram illustrating a step in which an image verification/restore server obtains hash values of an I-Frame of an image to be verified and an I-Frame of a reference image, respectively, based on a timestamp, according to an embodiment of the present disclosure.
10 is a diagram illustrating a method of identifying whether an image to be verified is forged or tampered with according to an embodiment of the present disclosure.
11 is a diagram illustrating a user interface for outputting a forgery verification result from an image verification/restore server according to an embodiment of the present disclosure.

본 발명은 [표 1]에 기재된 과제의 지원을 받아 출원을 진행하는 것이다.The present invention is to proceed with the application with the support of the subject described in [Table 1].

과제고유번호Assignment identification number JBTPSW-2020-A-01 JBTPSW-2020-A-01 부처명Buddha name 전라북도 Jeollabuk do 과제관리(전문)기관명Project Management (Professional) Name of Institution (재)전북테크노파크 Jeonbuk Techno Park 연구사업명Research project name 우수아이디어제품화연구개발지원사업 Excellent idea commercialization R&D support project 연구과제명Research project name VMS 호환 및 설명 가능 영상 무결성 지원 블록체인 기반
CCTV 관제시스템 연구 개발VMS compatible and explainable video integrity support Blockchain based
CCTV control system research and development 기여율Contribution rate 1/1 1/1 과제수행기관명Name of the organization performing the task 유저인사이트 User Insight 연구기간Research period 2020.05.01 ~ 2021.04.30 2020.05.01 ~ 2021.04.30

이하, 첨부 도면을 참조하여 본 개시의 실시예에 관하여 상세히 설명한다. 이하에서는, 본 개시의 요지를 불필요하게 흐릴 우려가 있다고 판단되는 경우, 이미 공지된 기능 및 구성에 관한 구체적인 설명을 생략한다. 또한, 이하에서 설명하는 내용은 어디까지나 본 개시의 일 실시예에 관한 것일 뿐 본 개시가 이로써 제한되는 것은 아님을 알아야 한다.Hereinafter, embodiments of the present disclosure will be described in detail with reference to the accompanying drawings. Hereinafter, when it is determined that there is a risk of unnecessarily obscuring the subject matter of the present disclosure, detailed descriptions of already known functions and configurations will be omitted. In addition, it should be understood that the contents described below are only related to one embodiment of the present disclosure, and the present disclosure is not limited thereto.

본 명세서에서 사용되는 용어는 단지 특정한 실시예를 설명하기 위해 사용되는 것으로 본 개시를 한정하려는 의도에서 사용된 것이 아니다. 예를 들면, 단수로 표현된 구성요소는 문맥상 명백하게 단수만을 의미하지 않는다면 복수의 구성요소를 포함하는 개념으로 이해되어야 한다. 또한, 본 개시의 명세서에서, '포함하다' 또는 '가지다' 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것일 뿐이고, 이러한 용어의 사용에 의해 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 배제하려는 것은 아니다.The terms used herein are used only to describe specific embodiments and are not intended to limit the present disclosure. For example, an element expressed in a singular should be understood as a concept including a plurality of elements unless the context clearly means only the singular. In addition, in the specification of the present disclosure, terms such as 'comprise' or 'have' are only intended to designate that the features, numbers, steps, operations, components, parts, or combinations thereof described in the specification exist, and such The use of the term is not intended to exclude the possibility of the presence or addition of one or more other features or numbers, steps, operations, components, parts, or combinations thereof.

본 명세서에 기재된 실시예에 있어서 '부'는 적어도 하나의 기능이나 동작을 수행하는 기능적 부분을 의미하며, 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의 '부'는, 특정한 하드웨어로 구현될 필요가 있는 '부'를 제외하고는, 적어도 하나의 소프트웨어 모듈로 일체화되어 적어도 하나의 프로세서로 구현될 수 있다. 덧붙여, 달리 정의되지 않는 한 기술적 또는 과학적인 용어를 포함하여, 본 명세서에서 사용되는 모든 용어들은 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의된 용어들은, 관련 기술의 문맥상 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 개시의 명세서에서 명백하게 달리 정의하지 않는 한 과도하게 제한 또는 확장하여 해석되지 않는다는 점을 알아야 한다.In the embodiments described in the present specification, 'unit' means a functional part that performs at least one function or operation, and may be implemented as hardware or software, or a combination of hardware and software. In addition, the plurality of 'units' may be integrated into at least one software module and implemented with at least one processor, except for 'units' that need to be implemented with specific hardware. In addition, unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this disclosure belongs. It should be noted that commonly used terms defined in the dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related art, and should not be construed as unduly limited or expanded unless explicitly defined otherwise in the specification of the present disclosure. should know

본 명세서에 대한 설명에 앞서, 본 명세서에서 사용되는 몇몇 용어들에 대하여 명확하게 하기로 한다.Prior to the description of the present specification, some terms used in the present specification will be clarified.

본 명세서에서, 영상기록장치란, 네트워크 비디오 리코더(Network Video Recorder: NVR), 통합영상관제시스템(Video Management System: VMS)이나 소프트웨어 또는 솔루션 등, 촬영 영상을 기록하는 장치를 의미한다. In the present specification, a video recording device refers to a device for recording a captured video, such as a network video recorder (NVR), a video management system (VMS), software, or a solution.

본 명세서에서, IPFS란 "InterPlanetary File System"의 약자로, 분산형 파일 시스템에 데이터를 저장하고 인터넷으로 공유하기 위한 시스템이다. IPFS는 데이터의 내용을 변환한 해쉬값을 이용하여 전 세계 여러 컴퓨터에 분산 저장되어 있는 콘텐츠를 찾아서 데이터를 조각조각으로 잘게 나눠서 빠른 속도로 가져온 후 하나로 합쳐서 보여주는 방식으로 동작할 수 있다. In this specification, IPFS is an abbreviation of "InterPlanetary File System" and is a system for storing data in a distributed file system and sharing it over the Internet. IPFS uses hash values converted from data contents to find contents distributed and stored in various computers around the world, breaks the data into small pieces, retrieves them at high speed, and displays them together.

본 명세서에서, 블록체인 네트워크란, 블록체인 알고리즘에 따라 동작하는 복수의 블록체인 노드로 구성된 P2P 구조의 네트워크를 의미한다.In this specification, a blockchain network refers to a P2P-structured network composed of a plurality of blockchain nodes operating according to a blockchain algorithm.

본 명세서에서, 블록체인 데이터란 블록체인 네트워크를 구성하는 각각의 블록체인 노드가 유지하는 데이터로, 적어도 하나의 블록이 체인 형태의 자료 구조로 구성되는 데이터를 의미한다. 각 블록에 기록된 데이터가 트랜잭션 데이터인 경우, 상기 블록체인 데이터는 분산 원장으로 이용될 수 있다. 다만, 각 블록에 기록되는 데이터의 종류는 얼마든지 달라질 수 있다. In this specification, block chain data is data maintained by each block chain node constituting a block chain network, and means data in which at least one block is configured as a chain-type data structure. When the data recorded in each block is transaction data, the block chain data can be used as a distributed ledger. However, the type of data recorded in each block may vary.

이하, 첨부된 도면을 참조하여, 본 개시의 실시예에 대해 구체적으로 설명하기로 한다.Hereinafter, with reference to the accompanying drawings, an embodiment of the present disclosure will be described in detail.

도 1은 본 개시의 일 실시예에 따른 영상 무결성 검증 및 복원 시스템의 전체 구성을 개념적으로 도시한 도면이다. 1 is a diagram conceptually illustrating an overall configuration of an image integrity verification and restoration system according to an embodiment of the present disclosure.

도시된 바에 의하면, 영상 무결성 검증 및 복원 시스템(100)은 적어도 하나의 영상촬영장치(105), 적어도 하나의 영상기록장치(110), 영상 검증/복원 서버(120), 분산 파일 시스템(130) 및 블록체인 네트워크(140)를 포함할 수 있다. As shown, the image integrity verification and restoration system 100 includes at least one image capturing device 105 , at least one image recording device 110 , an image verification/restoration server 120 , and a distributed file system 130 . and a blockchain network 140 .

본 개시의 일 실시예에 의하면, 복수의 영상촬영장치(105)는 카메라를 통해 장면을 촬영하는 장치로서, 스마트 폰, PC, 감시용 카메라, 그리고 의료용 카메라 등과 같은 다양한 유형의 전자 장치에 포함되거나, CCTV와 같은 하나의 독립된 전자 장치로 영상을 촬영할 수 있는 모든 종류의 장치를 포함할 수 있다. According to an embodiment of the present disclosure, the plurality of image photographing apparatuses 105 are apparatuses for photographing a scene through a camera, and may be included in various types of electronic devices such as a smart phone, a PC, a surveillance camera, and a medical camera, or the like. , may include all kinds of devices capable of capturing images with one independent electronic device such as CCTV.

본 개시의 일 실시예에 의하면, 복수의 영상기록장치(110)는 영상을 저장하는 장치이다. 일 실시예에서, 영상기록장치(110)는 적어도 하나의 영상촬영장치(105)에서 촬영된 영상 데이터를 수신하고 저장할 수 있다. 일 실시예에서, 영상기록장치(110)는 영상 데이터를 영상 검증/복원 서버(120)로 전송할 수 있다. 일 실시예에서, 영상기록장치(110)는 실시간으로, 주기적으로 또는 요청에 따라 영상 데이터를 영상 검증/복원 서버(120)로 전송할 수 있다.According to an embodiment of the present disclosure, the plurality of image recording apparatuses 110 are apparatuses for storing images. In an embodiment, the image recording apparatus 110 may receive and store image data captured by the at least one image photographing apparatus 105 . In an embodiment, the image recording apparatus 110 may transmit image data to the image verification/restore server 120 . In an embodiment, the image recording apparatus 110 may transmit image data to the image verification/restore server 120 in real time, periodically or upon request.

본 개시의 일 실시예에 의하면, 영상 검증/복원 서버(120)는 특정 영상이 위변조되었는지를 검증하고 위변조된 경우 원본 영상을 복원할 수 있다. According to an embodiment of the present disclosure, the image verification/restore server 120 may verify whether a specific image has been forged or forged, and may restore the original image if forged.

일 실시예에서, 영상 검증/복원 서버(120)는 영상 데이터를 수신하여 저장 및 관리할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 영상기록장치(110)로부터 영상 데이터를 수신하여 저장 및 관리할 수 있다. In an embodiment, the image verification/restore server 120 may receive, store, and manage image data. In an embodiment, the image verification/restore server 120 may receive, store, and manage image data from the image recording apparatus 110 .

일 실시예에서, 영상 검증/복원 서버(120)는 영상 데이터를 분석하여 분석한 결과값과 함께 영상 데이터를 저장 및 관리할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 영상 데이터 및/또는 영상 데이터에서 추출한 핵심정보를 저장 및 관리할 수 있다. 일 실시예에서, 핵심정보는 I-Frame일 수 있다. 여기서 I-Frame이란, MPEG 표준 비디오 압축 기술에서 사용되는 용어로 인코딩된 이미지 프레임 그룹(Group of Pictures: GOP)의 기준이 되는 핵심 프레임을 의미한다. GOP의 첫 프레임은 반드시 I-Frame으로 시작하며, I-Frame 은 이전 다른 프레임을 참조하지 않고 입력 원본 그대로 저장된 프레임이다. In an embodiment, the image verification/restore server 120 may analyze the image data and store and manage the image data together with the analyzed result value. In an embodiment, the image verification/restore server 120 may store and manage image data and/or core information extracted from the image data. In one embodiment, the core information may be an I-Frame. Here, I-Frame is a term used in MPEG standard video compression technology and refers to a core frame that is a standard of a group of pictures (GOP) encoded. The first frame of GOP must start with I-Frame, and I-Frame is a frame that is saved as the original input without reference to other previous frames.

CCTV 영상은 많은 데이터양을 보유하고 있어 이를 전부 저장하여 모든 노드가 공유하게 되면 데이터 용량과 처리속도에서 성능이 저하될 수 있다. 예컨대, 영상 해상도에 따른 1분당 영상의 파일 사이즈는 Full HD의 (30FPS)의 경우 1분당 124mb의 크기를 가지며 UHD의 경우 348mb를 가지고 있다. 그리고 일반적으로 대부분의 CCTV는 Full HD(30FPS)의 해상도를 가지고 있다. 만약 영상기록장치가 CCTV 영상을 10분 단위로 저장된다고 하면 평균적으로 124GB를 가지게 된다. 그대로 저장하게 될 경우, 처리 부하속도가 증가하게 된다. 따라서 본 개시에서는 영상의 핵심 정보가 되는 I-Frame을 추출하여 저장함으로써 저장해야 하는 데이터 양을 줄일 수 있다. CCTV video has a large amount of data, so if all the nodes store it and share it, the performance may deteriorate in data capacity and processing speed. For example, the file size of an image per minute according to the image resolution is 124mb per minute in the case of Full HD (30FPS) and 348mb in the case of UHD. And in general, most CCTVs have Full HD (30FPS) resolution. If the video recording device stores CCTV images in units of 10 minutes, it will have an average of 124GB. If it is stored as it is, the processing load speed increases. Therefore, in the present disclosure, it is possible to reduce the amount of data to be stored by extracting and storing the I-Frame, which is the core information of the image.

일 실시예에서, 영상 검증/복원 서버(120)는 영상 데이터 및/또는 영상 데이터의 핵심정보를 통신가능하게 연결된 저장소(130)에 저장 및 관리할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 영상 데이터 및/또는 영상 데이터의 핵심정보를 통신가능하게 연결된 분산 파일 시스템(130)을 이용하여 저장 및 관리할 수 있다. 일 실시예에서, 분산 파일 시스템(130)은 IPFS(InterPlanetary File System)일 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 영상 데이터에서 I-Frame을 추출하여 해당 I-Frame을 분산 파일 시스템(130)에 저장할 수 있다. In an embodiment, the image verification/restore server 120 may store and manage image data and/or core information of the image data in the communicatively connected storage 130 . In an embodiment, the image verification/restore server 120 may store and manage image data and/or core information of the image data using the communicatively connected distributed file system 130 . In one embodiment, the distributed file system 130 may be an InterPlanetary File System (IPFS). In an embodiment, the image verification/restore server 120 may extract an I-Frame from image data and store the corresponding I-Frame in the distributed file system 130 .

일 실시예에서, 영상 검증/복원 서버(120)는 영상 데이터에서 추출한 I-Frame의 해쉬값을 구할 수 있다. In an embodiment, the image verification/restore server 120 may obtain a hash value of an I-Frame extracted from image data.

일 실시예에서, 영상 검증/복원 서버(120)는 블록체인 네트워크(140)를 이용하여 영상 데이터를 저장 및 관리할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 I-Frame의 해쉬값을 이용하여 트랜잭션을 생성하고, 생성된 트랜잭션을 블록체인 네트워크(140)로 전송할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 I-Frame을 이미지 해쉬 알고리즘을 통해 해쉬화하고, 각 I-Frame의 해쉬값을 Merkle Tree에서 Sha-256 해쉬 알고리즘과 조합 후 전체 영상에 대한 하나의 트랜잭션으로 생성하여, 즉 I-Frame 집합의 해쉬값을 하나의 트랜잭션으로 생성하여 해당 트랜잭션 정보를 블록체인의 스마트컨트랙트에 저장할 수 있다. In an embodiment, the image verification/restore server 120 may store and manage image data using the block chain network 140 . In one embodiment, the image verification/restore server 120 may generate a transaction using the hash value of the I-Frame, and transmit the generated transaction to the blockchain network 140 . In one embodiment, the image verification/restore server 120 hashes the I-Frame through an image hash algorithm, and combines the hash value of each I-Frame with the Sha-256 hash algorithm in Merkle Tree. By creating one transaction, that is, by generating the hash value of the I-Frame set as one transaction, the transaction information can be stored in the smart contract of the block chain.

일 실시예에서, 영상 검증/복원 서버(120)는 특정 영상에 대한 위변조 검증을 수행할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 특정 영상에 대한 위변조 검증 요청을 수신하고 특정 영상의 위변조 여부를 판단할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 저장 및/또는 관리하는 기준 영상 데이터와 특정 영상 데이터(검증 대상 영상 데이터)를 비교 및 분석하여 특정 영상 데이터가 조작되었는지를 검증할 수 있다. In an embodiment, the image verification/restore server 120 may perform forgery verification on a specific image. In an embodiment, the image verification/restore server 120 may receive a forgery verification request for a specific image and determine whether the specific image is forgery or not. In an embodiment, the image verification/restore server 120 may verify whether specific image data has been manipulated by comparing and analyzing the stored and/or managed reference image data and specific image data (verification target image data).

본 개시의 일 실시예에 의하면, 분산 파일 시스템(130)은 물리적으로 서로 다른 컴퓨터끼리 네트워크로 연결하여 사용자가 분산된 동일파일을 쉽게 액세스하고 관리할 수 있게 할 수 있는 시스템이다. 일 실시예에서, 분산 파일 시스템(130)은 IPFS일 수 있다. According to an embodiment of the present disclosure, the distributed file system 130 is a system that allows users to easily access and manage the same distributed files by physically connecting different computers to each other through a network. In one embodiment, distributed file system 130 may be IPFS.

일 실시예에서, 분산 파일 시스템(130)은 영상 검증/복원 서버(120)로부터 영상 데이터를 수신하고 저장할 수 있다. 일 실시예에서, 분산 파일 시스템(130)은 영상 검증/복원 서버(120)로부터 영상 데이터의 핵심정보(예: I-Frame)를 수신하고, 수신된 핵심정보를 저장할 수 있다. In an embodiment, the distributed file system 130 may receive and store image data from the image verification/restore server 120 . In an embodiment, the distributed file system 130 may receive core information (eg, I-Frame) of image data from the image verification/restore server 120 and store the received core information.

본 개시의 일 실시예에 의하면, 블록체인 네트워크(140)는 블록체인 알고리즘에 따라 동작하는 복수의 블록체인 노드로 구성된 P2P 구조의 네트워크이다. 일 실시예에서, 블록체인 네트워크는(140)는 사설 블록체인 네트워크(예: HyperLedger Fabric)일 수 있다. According to an embodiment of the present disclosure, the block chain network 140 is a P2P structure network composed of a plurality of block chain nodes operating according to a block chain algorithm. In one embodiment, the blockchain network 140 may be a private blockchain network (eg, HyperLedger Fabric).

일 실시예에서, 블록체인 네트워크(140) 내 블록체인 노드는 영상 검증/복원 서버(120)로부터 수신한 트랜잭션으로 블록을 생성하여 블록체인 네트워크(140) 상에서 공유할 수 있다. 일 실시예에서, 블록체인 네트워크(140) 내 블록체인 노드는 영상 검증/복원 서버(120)로부터 검증 대상 영상의 암호화값과 일치되는 암호화값에 대한 조회요청을 수신하고, 해당 암호화값과 일치하는 트랜잭션을 영상 검증/복원 서버(120)로 전송할 수 있다. 일 실시예에서, 블록체인 네트워크(140) 내 블록체인 노드는 영상 검증/복원 서버(120)로부터 검증 대상 영상의 해쉬값을 수신하고 해당 해쉬값과 일치하는 트랜잭션이 블록체인 네트워크(140) 상에 있는지 여부를 True/False로 영상 검증/복원 서버(120)로 전송할 수 있다. 일 실시예에서, 블록체인 네트워크(140) 내 블록체인 노드는 영상 검증/복원 서버(120)로부터 검증 대상 영상의 I-Frame 집합의 해쉬값을 수신하고 해당 해쉬값과 일치하는 트랜잭션이 블록체인 네트워크(140) 상에 있는 경우 해당 트랜잭션을 영상 검증/복원 서버(120)로 전송할 수 있다. 일 실시예에서, 블록체인 네트워크(140) 내 블록체인 노드는 영상 검증/복원 서버(120)로부터 검증 대상 영상의 촬영시간 수신하고 해당 촬영시간과 일치하는 트랜잭션이 블록체인 네트워크(140) 상에 있는 경우 해당 트랜잭션을 영상 검증/복원 서버(120)로 전송할 수 있다. In one embodiment, the block chain node in the block chain network 140 may create a block with the transaction received from the image verification/restore server 120 and share it on the block chain network 140 . In one embodiment, the blockchain node in the blockchain network 140 receives a query request for an encryption value that matches the encryption value of the verification target image from the image verification/restore server 120, and matches the encryption value. The transaction may be transmitted to the image verification/restore server 120 . In one embodiment, the blockchain node in the blockchain network 140 receives the hash value of the image to be verified from the image verification/restore server 120, and a transaction matching the hash value is performed on the blockchain network 140 Whether or not there is True/False may be transmitted to the image verification/restore server 120 . In one embodiment, the blockchain node in the blockchain network 140 receives the hash value of the I-Frame set of the image to be verified from the image verification/restore server 120, and a transaction matching the hash value is performed on the blockchain network If it is on 140 , the transaction may be transmitted to the image verification/restore server 120 . In one embodiment, the block chain node in the block chain network 140 receives the recording time of the video to be verified from the video verification/restore server 120 and a transaction matching the recording time is on the block chain network 140 In this case, the transaction may be transmitted to the image verification/restore server 120 .

도 2는 본 개시의 일 실시예에 따른 영상 검증/복원 서버의 기능을 개념적으로 도시한 도면이다. 2 is a diagram conceptually illustrating a function of an image verification/restore server according to an embodiment of the present disclosure.

도시된 바와 같이, 본 개시의 일 실시예에서, 영상 검증/복원 서버(120)는 입출력부(121), 제어부(122), 통신부(127) 및 저장부(128)를 포함할 수 있다. 도 2에 도시된 구성요소들은 영상 무결성 검증 및 원본 복원 시스템에서 작동 가능한 영상 검증/복원 서버(120)의 모든 기능을 반영한 것이 아니고 필수적인 것도 아니어서, 영상 검증/복원 서버(120)는 도시된 구성요소들 보다 많은 구성요소를 포함하거나 그 보다 적은 구성요소를 포함할 수 있음을 인식하여야 한다. As shown, in an embodiment of the present disclosure, the image verification/restore server 120 may include an input/output unit 121 , a control unit 122 , a communication unit 127 , and a storage unit 128 . The components shown in FIG. 2 do not reflect all functions of the image verification/restore server 120 that can be operated in the image integrity verification and original restoration system and are not essential, so the image verification/restore server 120 is the illustrated configuration. It should be appreciated that it may include more or fewer elements than elements.

본 개시의 일 실시예에서, 영상 검증/복원 서버(120)의 입출력부(121)는 다양한 형태의 입력을 입력받고, 해당 입력에 따른 결과를 출력할 수 있다. 일 실시예에서, 입력은 특정 영상에 대한 검증 요청일 수 있다. 일 실시예에서, 입력은 특정 영상이 녹화된 촬영시간(예: 타임스탬프)에 대한 입력일 수 있다. 일 실시예에서, 출력은 해당 영상이 위변조되었는지 여부, 위변조된 부분에 대한 정보, 해당 영상의 (저장된) 기준 영상 중 적어도 하나일 수 있다. In an embodiment of the present disclosure, the input/output unit 121 of the image verification/restore server 120 may receive various types of inputs and output results according to the corresponding inputs. In an embodiment, the input may be a verification request for a specific image. In an embodiment, the input may be an input for a recording time (eg, a timestamp) at which a specific image was recorded. In an embodiment, the output may be at least one of whether or not the corresponding image has been forged, information about the forged or forged part, and a (stored) reference image of the corresponding image.

제어부(122)는 일반적으로 영상 검증/복원 서버(120)의 전반적인 동작을 제어하도록 구성될 수 있다. 일 실시예에서, 제어부(122)는 특정 영상이 위변조되었는지를 검증하고 위변조된 경우 원본 영상을 복원할 수 있다. 일 실시예에서, 제어부(122)는 영상 검증/복원과 관련된 제어를 위해 핵심정보 생성부(123), 암호화부(124), 검증부(125), 트랜잭션 조회/생성부(126)를 포함할 수 있으나, 제어부(122)의 구성이 이에 한정되는 것은 아니다.The controller 122 may be configured to generally control the overall operation of the image verification/restore server 120 . In an embodiment, the controller 122 may verify whether a specific image has been forged or forged, and may restore the original image if it is forged. In one embodiment, the control unit 122 may include a core information generation unit 123, an encryption unit 124, a verification unit 125, and a transaction inquiry/generation unit 126 for control related to image verification/restoration. However, the configuration of the control unit 122 is not limited thereto.

본 개시의 일 실시예에서, 핵심정보 생성부(123)는 영상 데이터를 분석하여 영상의 핵심정보를 생성할 수 있다. 일 실시예에서, 핵심정보 생성부(123)는 영상 데이터를 분석하여 영상 데이터의 I-Frame 정보를 추출할 수 있다. 여기서 I-Frame이란, MPEG 표준 비디오 압축 기술에서 사용되는 용어로 인코딩된 이미지 프레임 그룹(Group of Pictures: GOP)의 기준이 되는 핵심 프레임을 의미한다. GOP의 첫 프레임은 반드시 I-Frame으로 시작하며, I-Frame 은 이전 다른 프레임을 참조하지 않고 입력 원본 그대로 저장된 프레임이다. In an embodiment of the present disclosure, the core information generating unit 123 may analyze the image data to generate core information of the image. In an embodiment, the core information generator 123 may extract I-Frame information of the image data by analyzing the image data. Here, I-Frame is a term used in MPEG standard video compression technology and refers to a core frame that is a standard of a group of pictures (GOP) encoded. The first frame of GOP must start with I-Frame, and I-Frame is a frame that is saved as the original input without reference to other previous frames.

본 개시의 일 실시예에서, 암호화부(124)는 영상 데이터 및/또는 영상 데이터의 핵심정보를 암호화할 수 있다. 일 실시예에서, 암호화부(124)는 영상 데이터의 I-Frame 정보를 암호화할 수 있다. 일 실시예에서, 암호화부(124)는 영상 데이터의 I-Frame 정보를 해쉬화하여 해쉬값을 구할 수 있다. In an embodiment of the present disclosure, the encryption unit 124 may encrypt image data and/or core information of the image data. In an embodiment, the encryption unit 124 may encrypt I-Frame information of image data. In an embodiment, the encryption unit 124 may obtain a hash value by hashing the I-Frame information of the image data.

본 개시의 일 실시예에서, 검증/복원부(125)는 특정 영상에 대한 위변조 검증을 수행할 수 있다. 일 실시예에서, 검증/복원부(125)는 입출력부(121) 및/또는 통신부(127)를 통해 특정 영상에 대한 위변조 검증 요청을 수신할 수 있다. 일 실시예에서, 위변조 검증 요청은 영상이 촬영된 촬영시간일 수 있다. In an embodiment of the present disclosure, the verification/restore unit 125 may perform forgery verification on a specific image. In an embodiment, the verification/restore unit 125 may receive a forgery verification request for a specific image through the input/output unit 121 and/or the communication unit 127 . In an embodiment, the forgery verification request may be a shooting time at which the image was captured.

일 실시예에서, 검증/복원부(125)는 위변조 검증 요청에 대응하여 통신부(127)를 통해 특정 시간대에 대한 영상을 수신할 수 있다. 일 실시예에서, 일 실시예에서, 검증/복원부(125)는 외부에 위치한 영상기록장치(110)로부터 특정 시간대에 녹화된 영상, 즉 검증 대상 영상을 수신할 수 있다. In an embodiment, the verification/restore unit 125 may receive an image for a specific time period through the communication unit 127 in response to a forgery verification request. In one embodiment, in one embodiment, the verification/restore unit 125 may receive an image recorded at a specific time period, that is, an image to be verified, from the image recording device 110 located outside.

일 실시예에서, 검증/복원부(125)는 핵심정보 생성부(123)를 통해 검증 대상 영상 데이터를 분석하여 검증 대상 영상 데이터의 I-Frame 정보를 추출할 수 있다. 여기서 I-Frame은 이미지 파일, Hash 값, Timestamp 정보를 포함할 수 있다. 일 실시예에서, 검증/복원부(125)는 영상 데이터의 I-Frame 정보를 추출하며 I-Frame의 Timestamp 정보를 구할 수 있다. In an embodiment, the verification/restore unit 125 may analyze the verification target image data through the core information generator 123 to extract I-Frame information of the verification target image data. Here, I-Frame may include image file, hash value, and Timestamp information. In an embodiment, the verification/restore unit 125 may extract I-Frame information of the image data and obtain Timestamp information of the I-Frame.

일 실시예에서, 검증/복원부(125)는 암호화부(124)를 통해 검증 대상 영상을 암호화하여 그 결과값을 수신할 수 있다. 일 실시예에서, 검증/복원부(125)는 암호화부(124)를 통해 검증 대상 영상을 해싱하고 그 해쉬값을 수신할 수 있다. 일 실시예에서, 검증/복원부(125)는 암호화부(124)의 Restful API를 통해 해당 특정 영상의 해쉬화를 수행하고 그 해쉬값을 수신할 수 있다. In an embodiment, the verification/restore unit 125 may encrypt the verification target image through the encryption unit 124 and receive the result. In an embodiment, the verification/restore unit 125 may hash the verification target image through the encryption unit 124 and receive the hash value. In an embodiment, the verification/restore unit 125 may perform hashing of the specific image through the Restful API of the encryption unit 124 and receive the hash value.

일 실시예에서, 검증/복원부(125)는 트랜잭션 생성/조회부(126)를 통해 검증 대상 영상이 촬영된 촬영시간에 따른 트랜잭션에 기록된 암호화한 결과값(예: 해쉬값)을 수신하고 검증 대상 영상에 대한 위변조 검증을 수행할 수 있다. 일 실시예에서, 검증/복원부(125)는 검증 대상 영상의 I-Frame 집합의 루트 해쉬값과 블록체인에 저장된 기준 영상의 I-Frame 집합의 루트 해쉬값을 비교하여 그 값이 동일하다면 영상조작이 없다고 판단할 수 있다. 다른 실시예에서, 검증/복원부(125)는 검증 대상 영상의 I-Frame의 루트 해쉬값과 블록체인에 저장된 기준 영상의 I-Frame의 루트 해쉬값을 비교하여 그 값이 상이하면 영상조작이 있다고 판단할 수 있다. 일 실시예에서, 검증/복원부(125)는 검증 대상 영상의 I-Frame의 해쉬값과 블록체인에 저장된 기준 영상의 I-Frame의 해쉬값을 비교하여 그 값이 동일하다면 영상조작이 없다고 판단할 수 있다. 다른 실시예에서, 검증/복원부(125)는 검증 대상 영상의 I-Frame의 해쉬값과 블록체인에 저장된 기준 영상의 I-Frame의 해쉬값을 비교하여 그 값이 상이하면 영상조작이 있다고 판단할 수 있다. In one embodiment, the verification/restore unit 125 receives an encrypted result value (eg, a hash value) recorded in the transaction according to the shooting time at which the verification target image was captured through the transaction generation/inquiry unit 126 and Forgery verification can be performed on the verification target image. In one embodiment, the verification/restore unit 125 compares the root hash value of the I-Frame set of the image to be verified with the root hash value of the I-Frame set of the reference image stored in the block chain, and if the value is the same, the image It can be concluded that there is no manipulation. In another embodiment, the verification/restore unit 125 compares the root hash value of the I-Frame of the image to be verified with the root hash value of the I-Frame of the reference image stored in the block chain. It can be judged that there is In one embodiment, the verification/restore unit 125 compares the hash value of the I-Frame of the image to be verified with the hash value of the I-Frame of the reference image stored in the block chain and determines that there is no image manipulation if the value is the same. can do. In another embodiment, the verification/restore unit 125 compares the hash value of the I-Frame of the image to be verified with the hash value of the I-Frame of the reference image stored in the block chain, and determines that there is image manipulation if the value is different can do.

일 실시예에서, 검증/복원부(125)는 검증 대상 영상의 각 I-Frame 별 위변조 여부를 판단할 수 있다. 일 실시예에서, 검증/복원부(125)는 촬영시간에 따른 검증 대상 영상의 모든 I-Frame 각각을 동일한 촬영시간에 따른 블록체인에 저장된 기준 영상의 모든 I-Frame에 각각에 대해 타임스탬프 기준으로 해쉬값을 비교하여 각 I-Frame 별 위변조 여부를 판단할 수 있다. In an embodiment, the verification/restore unit 125 may determine whether the verification target image is forged or forged for each I-Frame. In one embodiment, the verification/restoration unit 125 sets each of the I-Frames of the image to be verified according to the shooting time based on the timestamp for each of the I-Frames of the reference image stored in the block chain according to the same shooting time. By comparing the hash values, it is possible to determine whether forgery or not for each I-Frame.

일 실시예에서, 검증/복원부(125)는 타임스탬프 기준으로 검증 대상 영상의 I-Frame과 기준 영상의 I-Frame의 해쉬값을 비교하여, 양 I-Frame의 해쉬값이 동일하면 해당 타임스탬프의 검증 대상 영상이 위변조가 없다고 판단하고, 기준 영상의 I-Frame의 해쉬값이 누락된 경우 해당 타임스탬프의 검증 대상 영상이 삭제되었다고 판단하고, 기준 영상의 I-Frame의 해쉬값이 다른 경우 해당 타임스탬프의 검증 대상 영상이 수정되었다고 판단하고, 기준 영상의 I-Frame의 해쉬값이 추가된 경우 해당 타임스탬프의 검증 대상 영상이 추가되었다고 판단할 수 있다. In one embodiment, the verification/restore unit 125 compares the hash values of the I-Frame of the verification target image and the I-Frame of the reference image based on the timestamp, and when the hash values of both I-Frames are the same, the corresponding time If it is determined that the verification target image of the stamp is free of forgery and falsification and the hash value of the I-Frame of the reference image is missing When it is determined that the verification target image of the corresponding timestamp has been modified and the hash value of the I-Frame of the reference image is added, it may be determined that the verification target image of the corresponding timestamp has been added.

본 개시의 일실시예에서, 검증/복원부(125)는 위변조된 영상에 대해서 복원을 수행할 수 있다. 검증/복원부(125)는 타임스탬프 기준으로 검증 대상 영상의 I-Frame과 기준 영상의 I-Frame의 해쉬값을 비교하여, 검증 대상 영상의 I-Frame을 기준 영상의 I-Frame으로 수정함으로써 위변조된 영상에 대해서 복원을 수행할 수 있다.In an embodiment of the present disclosure, the verification/restore unit 125 may perform restoration on a forged or forged image. The verification/restore unit 125 compares the hash values of the I-Frame of the verification target image and the I-Frame of the reference image based on the timestamp, and corrects the I-Frame of the verification target image to the I-Frame of the reference image. Restoration may be performed on the forged or modulated image.

본 개시의 일 실시예에서, 트랜잭션 조회/생성부(126)는 블록체인 네트워크(140)에 전송할 트랜잭션을 생성할 수 있다. 일 실시예에서, 트랜잭션 조회/생성부(126)는 I-Frame의 해쉬값을 이용하여 트랜잭션을 생성하고, 생성된 트랜잭션을 블록체인 네트워크(140)로 전송할 수 있다. 일 실시예에서, 트랜잭션 조회/생성부(126)는 I-Frame을 이미지 해쉬 알고리즘을 통해 해쉬화하고, 각 I-Frame의 해쉬값을 머클 트리(Merkle tree)에서 Sha-256 해쉬 알고리즘과 조합 후 전체 영상에 대한 하나의 트랜잭션으로 생성하여 해당 트랜잭션 정보를 블록체인의 스마트컨트랙트에 저장할 수 있다. 일 실시예에서, 트랜잭션 생성/조회부(126)는 트랜잭션을 조회할 수 있다. 일 실시예에서, 트랜잭션 생성/조회부(126)는 검증 대상 영상의 촬영시간(Timestamp)에 따른 트랜잭션을 조회할 수 있다. 일 실시예에서, 트랜잭션 생성/조회부(126)는 트랜잭션에 기록된 해쉬값을 분석하여 통신부(127)를 통해 검증/복원부(125)로 전송할 수 있다. In an embodiment of the present disclosure, the transaction inquiry/generation unit 126 may generate a transaction to be transmitted to the blockchain network 140 . In one embodiment, the transaction inquiry/generation unit 126 may generate a transaction using the hash value of the I-Frame, and transmit the generated transaction to the blockchain network 140 . In one embodiment, the transaction inquiry/generation unit 126 hashes the I-Frame through an image hash algorithm, and combines the hash value of each I-Frame with the Sha-256 hash algorithm in a Merkle tree. By creating one transaction for the entire video, the transaction information can be stored in the smart contract of the blockchain. In an embodiment, the transaction creation/inquiry unit 126 may inquire a transaction. In an embodiment, the transaction generating/inquiring unit 126 may inquire a transaction according to a photographing time (Timestamp) of an image to be verified. In an embodiment, the transaction generation/inquiry unit 126 may analyze the hash value recorded in the transaction and transmit it to the verification/restore unit 125 through the communication unit 127 .

이상으로 설명한 실시예에서, 제어부(122)는 하드웨어적 측면에서 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers) 및 마이크로 프로세서(microprocessors) 중 적어도 하나를 이용하여 구현될 수 있다. 절차나 단계 또는 기능을 포함하는 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는, 하드웨어 플랫폼 상에서 실행가능한 펌웨어/소프트웨어 모듈로 구현될 수 있다. 소프트웨어 모듈은 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 이 경우, 소프트웨어 모듈은 제어부(122)에 저장되거나 저장부(127)와 제어부(122)에 분산 저장될 수 있으며 제어부(122)에 의해 실행될 수 있다.In the embodiment described above, the control unit 122 in terms of hardware ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable) It may be implemented using at least one of gate arrays, processors, controllers, micro-controllers, and microprocessors. Embodiments including procedures, steps, or functions include at least one It may be implemented as a firmware/software module executable on a hardware platform to perform the function or operation of the software module.The software module may be implemented by a software application written in an appropriate programming language. ) or may be distributed and stored in the storage unit 127 and the control unit 122 , and may be executed by the control unit 122 .

본 개시의 일 실시예에서, 통신부(126)는 영상 검증/복원 서버(120)가 영상기록장치(110), 분산 파일 시스템(130), 블록체인 네트워크(140)와 같은 네트워크 상의 엔터티와 통신할 수 있도록 지원하는 하드웨어 및/또는 펌웨어로 구현될 수 있다. 일 실시예에서, 통신부(126)는 영상 데이터를 수신할 수 있다. 일 실시예에서, 통신부(126)는 영상기록장치(110)로부터 영상 데이터를 수신하여 저장 및 관리할 수 있다. 일 실시예에서, 통신부(126)는 영상 데이터 및/또는 영상 데이터의 핵심정보를 전송할 수 있다. 일 실시예에서, 통신부(126)는 I-Frame 데이터를 분산 파일 시스템(130)으로 전송할 수 있다. In one embodiment of the present disclosure, the communication unit 126 communicates with an entity on a network such as the image verification/restore server 120 , the image recording device 110 , the distributed file system 130 , and the blockchain network 140 . It may be implemented in hardware and/or firmware that supports the In an embodiment, the communication unit 126 may receive image data. In an embodiment, the communication unit 126 may receive, store, and manage image data from the image recording apparatus 110 . In an embodiment, the communication unit 126 may transmit image data and/or core information of the image data. In an embodiment, the communication unit 126 may transmit I-Frame data to the distributed file system 130 .

본 개시의 일 실시예에서, 저장부(127)는 전술한 바와 같이 영상 검증/복원 서버(120)의 동작을 위한 소프트웨어 모듈 및/또는 데이터를 저장할 수 있고 입/출력되는 데이터를 또한 저장할 수 있다. 저장부(127)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), RAM(Random Access Memory), SRAM(Static Random Access Memory), ROM(Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장 매체를 포함할 수 있다. 일 실시예에서, 저장부(127)는 저장부(127)와는 별도로 또는 저장부(127)와 연계하여 인터넷(Internet)상에서 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작하도록 구성될 수 있다.In an embodiment of the present disclosure, the storage unit 127 may store a software module and/or data for the operation of the image verification/restore server 120 as described above, and may also store input/output data. . The storage unit 127 includes a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (eg, SD or XD memory, etc.), RAM (Random Access Memory), SRAM (Static Random Access Memory), ROM (Read-Only Memory), EEPROM (Electrically Erasable Programmable Read-Only Memory), PROM (Programmable Read-Only Memory) magnetic memory, magnetic disk, optical disk It may include at least one type of storage medium. In one embodiment, the storage unit 127 may be configured to operate separately from the storage unit 127 or in connection with the storage unit 127 in connection with a web storage that performs a storage function on the Internet. can

도 3은 본 개시의 일 실시예에 따라, 영상 검증/복원 서버(120)에서 검증 대상 영상에 대한 위변조 검증 수행하는 흐름을 보여주는 예시적인 동작 흐름도이다. 도 4 내지 도 11은 본 개시의 일 실시예에 따라 위변조 검증 수행하는 각 단계를 구체적으로 보여주는 예시적인 도면이다. 3 is an exemplary operation flowchart illustrating a flow of performing forgery verification on a verification target image in the image verification/restore server 120 according to an embodiment of the present disclosure. 4 to 11 are exemplary views specifically showing each step of performing forgery verification according to an embodiment of the present disclosure.

먼저, 단계(S301)에서, 영상 검증/복원 서버(120)는 검증 대상 영상 데이터에 대한 위변조 검증 요청을 수신할 수 있다. 도 4는 본 개시의 일 실시예에 따라 위변조 검증 요청의 형식을 도시하는 도면이다. 일 실시예에서, 도 4에 도시된 바와 같이, 위변조 검증 요청은 검증 대상 영상 및/또는 검증 대상 영상이 촬영된 촬영시간 정보(예: Timestamp 20210121 03:12~03:13)를 포함할 수 있다. First, in step S301 , the image verification/restore server 120 may receive a forgery verification request for verification target image data. 4 is a diagram illustrating a format of a forgery verification request according to an embodiment of the present disclosure. In one embodiment, as shown in FIG. 4 , the forgery verification request may include information on a recording time (eg, Timestamp 20210121 03:12 ~ 03:13) at which the verification target image and/or the verification target image was captured. .

단계(S303)에서, 영상 검증/복원 서버(120)는 검증 대상 영상 데이터를 분석할 수 있다. 도 5는 본 개시의 일 실시예에 따라 영상의 I-Frame과 그 해쉬값을 도시하는 도면이다. 도시된 바와 같이, 영상 검증/복원 서버(120)는 검증 대상 영상 데이터를 분석하여 검증 대상 영상 데이터의 I-Frame 정보 및 그 해쉬값을 구할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 검증 대상 영상의 I-Frame을 해싱하여 그 해쉬값을 구할 수 있다. In step S303 , the image verification/restore server 120 may analyze the verification target image data. 5 is a diagram illustrating an I-Frame of an image and a hash value thereof according to an embodiment of the present disclosure. As shown, the image verification/restore server 120 may analyze the verification target image data to obtain I-Frame information of the verification target image data and a hash value thereof. In an embodiment, the image verification/restore server 120 may obtain a hash value by hashing the I-Frame of the image to be verified.

도 5는 본 개시의 일 실시예에 따라, 영상 검증/복원 서버의 검증 대상 영상 데이터를 분석하는 단계를 도시하는 도면이다. 도 5에 도시된 바와 같이, 영상 검증/복원 서버(120)는 각각의 I-Frame의 해쉬값을 구할 수 있다. 예컨대, 첫번째 I-Frame의 해쉬값은 "Bca7...", 두번째 I-Frame의 해쉬값은 "91b8...", 세번째 I-Frame의 해쉬값은 "0703...", 마지막 I-Frame의 해쉬값은 "1208..." 일 수 있다. 5 is a diagram illustrating a step of analyzing verification target image data of an image verification/restore server according to an embodiment of the present disclosure. As shown in FIG. 5 , the image verification/restore server 120 may obtain a hash value of each I-Frame. For example, the hash value of the first I-Frame is "Bca7...", the hash value of the second I-Frame is "91b8...", the hash value of the third I-Frame is "0703...", and the last I- The hash value of Frame may be "1208...".

단계(S305)에서 영상 검증/복원 서버(120)는 검증 대상 영상이 촬영된 촬영시간에 따른 트랜잭션을 조회하여 트랙잭션에 기록된 정보를 수신할 수 있다. 일 실시예에서, 트랜잭션에 기록된 정보는 기준 영상의 I-Frame 집합의 루트 해쉬값일 수 있다. 여기서 기준 영상이란 영상 검증/복원 서버(120)가 영상기록장치(110)로부터 영상을 수신하여 원본으로서 저장한 영상을 의미한다. 일 실시예에서, 영상 검증/복원 서버(120)는 블록체인 네트워크(140)로부터 검증 대상 영상이 촬영된 촬영시간에 따른 트랜잭션을 조회하여 트랙잭션에 기록된 기준 영상의 I-Frame 집합의 루트 해쉬값을 수신할 수 있다. In step S305, the image verification/restore server 120 may receive information recorded in the transaction by inquiring a transaction according to the shooting time at which the verification target image was captured. In an embodiment, the information recorded in the transaction may be a root hash value of the I-Frame set of the reference image. Here, the reference image refers to an image that the image verification/restore server 120 receives from the image recording device 110 and stores it as an original. In one embodiment, the image verification/restore server 120 inquires the transaction according to the shooting time at which the verification target image was captured from the blockchain network 140, and the root hash value of the I-Frame set of the reference image recorded in the transaction. can receive

도 6은 본 개시의 일 실시예에 따라 블록체인 네트워크 상에서 공유되는 스마트컨트랙트에 저장된 트랜잭션을 도시하는 도면이다. 도시된 바와 같이, 트랜잭션에 저장된 정보는 영상이 촬영된 촬영시간(Time Stamp 20210121 03:12) 및 영상의 I-Frame 집합의 루트 해쉬값(Bc, 91, 07, ..., 12)을 포함할 수 있다. 6 is a diagram illustrating a transaction stored in a smart contract shared on a blockchain network according to an embodiment of the present disclosure. As shown, the information stored in the transaction includes the shooting time at which the image was taken (Time Stamp 20210121 03:12) and the root hash value of the I-Frame set of the image (Bc, 91, 07, ..., 12). can do.

단계(S307)에서 영상 검증/복원 서버(120)는 검증 대상 영상의 위변조여부를 판단할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 검증 대상 영상의 I-Frame 집합의 루트 해쉬값과 기준 영상의 I-Frame 집합의 루트 해쉬값을 비교하여 그 값이 동일하다면 영상조작이 없다고 판단할 수 있다. 다른 실시예에서, 검증/복원부(125)는 검증 대상 영상의 I-Frame의 루트 해쉬값과 기준 영상의 I-Frame의 루트 해쉬값을 비교하여 그 값이 상이하면 영상조작이 있다고 판단할 수 있다. In step S307, the image verification/restore server 120 may determine whether the verification target image is forged or altered. In one embodiment, the image verification/restore server 120 compares the root hash value of the I-Frame set of the verification target image with the root hash value of the I-Frame set of the reference image, and if the value is the same, there is no image manipulation. can judge In another embodiment, the verification/restore unit 125 compares the root hash value of the I-Frame of the verification target image with the root hash value of the I-Frame of the reference image and determines that there is image manipulation if the values are different. have.

도 7은 본 개시의 일 실시예에 따라 검증 대상 영상의 I-Frame 집합의 루트 해쉬값과 기준 영상의 I-Frame 집합의 루트 해쉬값을 도시하는 도면이다. 예를 들어, 검증 대상 영상의 I-Frame 집합의 루트 해쉬값은 (Bc, 91, 07,... , 12)이고, 기준 영상의 I-Frame 집합의 루트 해쉬값은 (Bc, 91, 07,... , 12)일 수 있다. 도 7에 도시된 예에서, 검증 대상 영상의 루트 해쉬값과 기준 영상의 루트 해쉬값이 동일하므로 영상 검증/복원 서버(120)는 검증 대상 영상의 위변조가 없다고 판단할 수 있다. 이 경우, 단계(S313)으로 분기하여, 영상 검증/복원 서버(120)는 위변조 검증 결과를 출력할 수 있다. 7 is a diagram illustrating a root hash value of an I-Frame set of an image to be verified and a root hash value of an I-Frame set of a reference image according to an embodiment of the present disclosure. For example, the root hash value of the I-Frame set of the image to be verified is (Bc, 91, 07,... , 12), and the root hash value of the I-Frame set of the reference image is (Bc, 91, 07) ,... , 12). In the example shown in FIG. 7 , since the root hash value of the verification target image and the root hash value of the reference image are the same, the image verification/restore server 120 may determine that there is no forgery of the verification target image. In this case, branching to step S313, the image verification/restore server 120 may output a forgery verification result.

만약, 검증 대상 영상의 루트 해쉬값과 기준 영상의 루트 해쉬값이 상이한 경우, 단계(S309)로 분기한다. If the root hash value of the verification target image is different from the root hash value of the reference image, the process branches to step S309.

단계(S309)에서 영상 검증/복원 서버(120)는 검증 대상 영상이 촬영된 촬영시간에 대응하는 기준 영상의 I-Frame을 수신할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 분산 파일 시스템(130)에 저장된 영상의 I-Frame 중 검증 대상 영상이 촬영된 촬영시간에 대응하는 기준 영상의 I-Frame으로 수신할 수 있다.In step S309, the image verification/restore server 120 may receive an I-Frame of the reference image corresponding to the shooting time at which the verification target image was captured. In an embodiment, the image verification/restore server 120 may receive as an I-Frame of a reference image corresponding to a shooting time at which the verification target image was captured among I-Frames of images stored in the distributed file system 130 . .

도 8은 본 개시의 일 실시예에 따라 영상 검증/복원 서버가 분산 파일 시스템으로 영상의 I-Frame 조회(Timestamp: 20210121 03:12)를 요청하고, 분산 파일 시스템으로부터 기준 영상의 I-Frame을 수신하는 동작을 도식화하여 도시하는 도면이고, 도 9는 본 개시의 일 실시예에 따라 영상 검증/복원 서버가 타임스탬프 기준으로 검증 대상 영상의 I-Frame과 기준 영상의 I-Frame의 해쉬값을 각각 구하는 단계를 도시하는 도면이다. 도 9에 도시된 바와 같이, 타임스탬프 시간 기준(Timestamp 20210121 03:12)으로 하여 검증 대상 영상의 I-Frame 별 해쉬값은 첫번째 I-Frame의 해쉬값은 "Bca7...", 두번째 I-Frame의 해쉬값은 "91b8...", 세번째 I-Frame의 해쉬값은 "0703...", 마지막 I-Frame의 해쉬값은 "1208..." 일 수 있다. 기준 영상의 I-Frame 별 해쉬값은 첫번째 I-Frame의 해쉬값은 "Bcab77...", 두번째 I-Frame의 해쉬값은 "91b817...", 세번째 I-Frame의 해쉬값은 "070ef5...", 마지막 I-Frame의 해쉬값은 "120c46..." 일 수 있다. 8 is an image verification/restore server requesting an I-Frame inquiry (Timestamp: 20210121 03:12) of an image to a distributed file system according to an embodiment of the present disclosure, and receiving an I-Frame of a reference image from the distributed file system It is a diagram schematically showing the operation of receiving, and FIG. 9 is a hash value of the I-Frame of the image to be verified and the I-Frame of the reference image by the image verification/restore server based on the timestamp according to an embodiment of the present disclosure It is a figure which shows each obtaining step. As shown in FIG. 9 , the hash value for each I-Frame of the image to be verified using the timestamp time reference (Timestamp 20210121 03:12) is "Bca7...", the second I- The hash value of the Frame may be "91b8...", the hash value of the third I-Frame may be "0703...", and the hash value of the last I-Frame may be "1208...". For each I-Frame of the reference image, the hash value of the first I-Frame is "Bcab77...", the hash value of the second I-Frame is "91b817...", and the hash value of the third I-Frame is "070ef5" ...", the hash value of the last I-Frame may be "120c46...".

단계(S311)에서 영상 검증/복원 서버(120)는 검증 대상 영상의 각 I-Frame 별 위변조 여부를 분석할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 타임스탬프 기준으로 검증 대상 영상의 I-Frame과 기준 영상의 I-Frame의 해쉬값을 각각 비교하여, 특정 I-Frame의 영상 위변조여부, 즉, 수정, 삭제, 추가 여부를 분석할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 타임스탬프 기준으로 검증 대상 영상의 I-Frame과 기준 영상의 I-Frame의 해쉬값을 비교하여 양 I-Frame의 해쉬값이 동일하면 해당 타임스탬프의 검증 대상 영상이 위변조가 없다고 분석하고, 기준 영상의 I-Frame의 해쉬값이 누락된 경우 해당 타임스탬프의 검증 대상 영상이 삭제되었다고 분석하고, 기준 영상의 I-Frame의 해쉬값이 다른 경우 해당 타임스탬프의 검증 대상 영상이 수정되었다고 판단하고, 기준 영상의 I-Frame의 해쉬값이 추가된 경우 해당 타임스탬프의 검증 대상 영상이 추가되었다고 분석할 수 있다. In step S311, the image verification/restore server 120 may analyze whether the verification target image is forged or altered for each I-Frame. In one embodiment, the image verification/restore server 120 compares the hash values of the I-Frame of the verification target image and the I-Frame of the reference image based on the timestamp, respectively, to determine whether the image of a specific I-Frame is forged or not, that is, , it can be analyzed whether it is modified, deleted, or added. In one embodiment, the image verification/restore server 120 compares the hash values of the I-Frame of the verification target image and the I-Frame of the reference image based on the timestamp, and if the hash values of both I-Frames are the same, the corresponding time If the verification target image of the stamp is analyzed that there is no forgery and falsification, and the hash value of the I-Frame of the reference image is missing, it is analyzed that the verification image of the corresponding timestamp has been deleted, and the hash value of the I-Frame of the reference image is different When it is determined that the verification target image of the corresponding timestamp has been modified and the hash value of the I-Frame of the reference image is added, it may be analyzed that the verification target image of the corresponding timestamp has been added.

도 10은 본 개시의 일 실시예에 따라 검증 대상 영상의 위변조 여부 식별 방법을 도시하는 도면이다. 예컨대, 제1 사례에서 기준 영상의 I-Frame 별 해쉬값이 (Bc, 91b, 07,... ,12)이고, 검증 대상 영상의 I-Frame 별 해쉬값이 Bc, 91b, 07,... ,12, Bc, 91b)인 경우, 뒷부분 (Bc, 91b)의 해쉬값을 가지는 검증 대상 영상의 I-Frame은 추가된 것으로 분석될 수 있다. 제2 사례에서, 기준 영상의 I-Frame 별 해쉬값이 (Bc, 91b, 07,... ,12)이고, 검증 대상 영상의 I-Frame 별 해쉬값이 (-, -, 07,... ,12)인 경우, 앞부분 검증 대상 영상의 I-Frame은 삭제된 것으로 분석될 수 있다. 제3 사례에서, 기준 영상의 I-Frame 별 해쉬값이 (Bc, 91b, 07,... ,12)이고, 검증 대상 영상의 I-Frame 별 해쉬값이 (Bc, 12, 19,... ,12)인 경우, 해쉬값이 상이한 (12, 19)에 대응하는 검증 대상 영상의 I-Frame은 수정된 것으로 분석될 수 있다. 10 is a diagram illustrating a method of identifying whether an image to be verified is forged or tampered with according to an embodiment of the present disclosure. For example, in the first case, the hash value for each I-Frame of the reference image is (Bc, 91b, 07,... ,12), and the hash value for each I-Frame of the image to be verified is Bc, 91b, 07,.. .,12, Bc, 91b), the I-Frame of the verification target image having the hash value of the rear part (Bc, 91b) may be analyzed as being added. In the second case, the hash value for each I-Frame of the reference image is (Bc, 91b, 07,... ,12), and the hash value for each I-Frame of the image to be verified is (-, -, 07,.. .,12), the I-Frame of the image to be verified in the previous part can be analyzed as being deleted. In the third case, the hash value for each I-Frame of the reference image is (Bc, 91b, 07,... ,12), and the hash value for each I-Frame of the image to be verified is (Bc, 12, 19,.. .,12), the I-Frame of the verification target image corresponding to (12, 19) having different hash values may be analyzed as being modified.

선택적으로 영상 검증/복원 서버(120)는 위변조된 영상에 대해서 복원을 수행할 수 있다. 일 실시예에서, 영상 검증/복원 서버(120)는 타임스탬프 기준으로 검증 대상 영상의 I-Frame과 기준 영상의 I-Frame의 해쉬값을 비교하여, 검증 대상 영상의 I-Frame을 기준 영상의 I-Frame으로 수정함으로써 위변조된 영상에 대해서 복원을 수행할 수 있다.Optionally, the image verification/restore server 120 may perform restoration on the forged image. In an embodiment, the image verification/restore server 120 compares the hash value of the I-Frame of the verification target image with the I-Frame of the reference image based on the timestamp, and compares the I-Frame of the verification target image with the reference image. By modifying the I-Frame, it is possible to restore the forged image.

단계(S313)에서, 영상 검증/복원 서버(120)는 검증 대상 영상의 위변조 검증 결과를 출력할 수 있다.In step S313, the image verification/restore server 120 may output a forgery verification result of the verification target image.

도 11은 본 개시의 일 실시예에 따라 영상 검증/복원 서버에서 위변조 검증 결과를 출력하는 사용자 인터페이스를 도시하는 도면이다. 11 is a diagram illustrating a user interface for outputting a forgery verification result from an image verification/restore server according to an embodiment of the present disclosure.

도시된 바와 같이, 화면을 분할하여 제1 화면(1101)에는 검증 대상 영상을 표시하고 제2 화면(1103)에는 기준 영상을 표시할 수 있다. 일 실시예에서, 제1 화면(1101)에는 검증 대상 영상에서 추출한 I-Frame의 이미지 파일을 기초로 영상을 표시할 수 있다. 일 실시예에서, 제2 화면(1103)에는 분산 저장 시스템(130)에 저장된 기준 영상의 I-Frame 이미지 파일을 기초로 영상을 표시할 수 있다. 일 실시예에서, 출력화면에서는 타임라인 UI(1105)를 사용하여 촬영 시간에 따른 검증 대상 영상과 기준 영상을 비교할 수 있다. As shown, the screen may be divided to display a verification target image on the first screen 1101 and a reference image on the second screen 1103 . In an embodiment, an image may be displayed on the first screen 1101 based on an image file of an I-Frame extracted from the image to be verified. In an embodiment, an image may be displayed on the second screen 1103 based on an I-Frame image file of a reference image stored in the distributed storage system 130 . In an embodiment, the output screen may use the timeline UI 1105 to compare the verification target image and the reference image according to the shooting time.

당업자라면 알 수 있듯이, 본 개시는 본 명세서에서 기술된 예시에 한정되는 것이 아니라 본 개시의 범주를 벗어나지 않는 범위 내에서 다양하게 변형, 재구성 및 대체될 수 있다. 예를 들어, 본원에 기술된 다양한 기술들은 하드웨어 또는 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수 있다. As will be appreciated by those skilled in the art, the present disclosure is not limited to the examples described herein, and various modifications, reconstructions, and substitutions may be made without departing from the scope of the present disclosure. For example, the various techniques described herein may be implemented by hardware or software, or a combination of hardware and software.

본 개시의 일 실시예에 따른 컴퓨터 프로그램은, 컴퓨터 프로세서 등에 의해 판독 가능한 저장 매체, 예컨대 EPROM, EEPROM, 플래시 메모리장치와 같은 비휘발성 메모리, 내장형 하드 디스크와 착탈식 디스크 같은 자기 디스크, 광자기 디스크, 및 CDROM 디스크 등을 포함한 다양한 유형의 저장 매체에 저장된 형태로 구현될 수 있다. 또한, 프로그램 코드(들)는 어셈블리어나 기계어로 구현될 수 있고, 전기 배선이나 케이블링, 광섬유, 또는 기타 임의의 다른 형태의 전송 매체를 통해 전송되는 형태로 구현될 수도 있다. 본 개시의 진정한 사상 및 범주에 속하는 모든 변형 및 변경을 이하의 특허청구범위에 의해 모두 포괄하고자 한다.A computer program according to an embodiment of the present disclosure includes a storage medium readable by a computer processor or the like, such as EPROM, EEPROM, nonvolatile memory such as a flash memory device, magnetic disk such as an internal hard disk and a removable disk, a magneto-optical disk, and It may be implemented in a form stored in various types of storage media including a CDROM disk. In addition, the program code(s) may be implemented in assembly language or machine language, and may be implemented in a form transmitted through electric wiring, cabling, optical fiber, or any other type of transmission medium. All modifications and variations falling within the true spirit and scope of the present disclosure are intended to be embraced by the following claims.

105: 영상촬영장치
110: 영상기록장치
120: 영상 검증/복원 서버
130: 저장소(분산 파일 시스템)
140: 블록체인 네트워크105: video recording device
110: video recording device
120: video verification / restoration server
130: Storage (Distributed File System)
140: blockchain network

Claims (15)

영상 무결성을 검증하고 복원하는 방법으로서,
위변조 검증 요청을 수신하는 단계 - 상기 위변조 검증 요청은 검증 대상 영상 데이터의 촬영시간(Timestamp) 및 검증 대상 영상 데이터 중 적어도 하나를 포함함 -;
상기 검증 대상 영상 데이터를 분석하는 단계; 및
블록체인 네트워크 상의, 상기 검증 대상 영상 데이터의 촬영시간에 따른 트랜잭션을 조회하여 트랜잭션에 저장된 정보와 상기 검증 대상 영상 데이터의 분석 결과를 비교하여 상기 검증 대상 영상 데이터의 위변조 여부를 판단하는 단계;
를 포함하는 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.A method for verifying and restoring image integrity, comprising:
receiving a forgery verification request, wherein the forgery verification request includes at least one of a photographing time (Timestamp) of the verification target image data and the verification target image data;
analyzing the verification target image data; and
determining whether the verification target image data is forged or falsified by inquiring a transaction according to the shooting time of the verification target image data on a block chain network and comparing the information stored in the transaction with the analysis result of the verification target image data;
A blockchain network-based image integrity verification and restoration method comprising a. 제1항에 있어서,
상기 검증 대상 영상 데이터의 촬영시간에 대응하는 기준 영상 데이터를 수신하는 단계; 및
상기 검증 대상 영상 데이터와 상기 기준 영상 데이터를 비교하여 상기 검증 대상 영상 데이터의 I-Frame 별 위변조 여부를 분석하는 단계; 를 더 포함하는 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.According to claim 1,
receiving reference image data corresponding to a recording time of the image data to be verified; and
comparing the verification target image data and the reference image data to analyze whether the verification target image data is forged or falsified for each I-Frame; A blockchain network-based image integrity verification and restoration method further comprising a. 제1항에 있어서,
상기 검증 대상 영상 데이터를 분석하는 단계는 상기 검증 대상 영상 데이터의 I-Frame, 상기 검증 대상 영상 데이터의 I-Frame의 암호화값, 및 상기 검증 대상 영상 데이터의 I-Frame 집합의 암호화값 중 적어도 하나를 구하는 것인 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.According to claim 1,
The analyzing of the verification target image data may include at least one of an I-Frame of the verification target image data, an I-Frame encryption value of the verification target image data, and an encryption value of an I-Frame set of the verification target image data. A blockchain network-based image integrity verification and restoration method to obtain 제1항에 있어서,
상기 트랜잭션에 저장된 정보는 상기 검증 대상 영상 데이터의 촬영시간에 대응하는 기준 영상 데이터의 I-Frame 집합의 암호화값인 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.The method of claim 1,
The information stored in the transaction is an encrypted value of an I-Frame set of reference image data corresponding to the recording time of the image data to be verified, a block chain network-based image integrity verification and restoration method. 제1항에 있어서,
상기 블록체인 네트워크 상의, 상기 검증 대상 영상 데이터의 촬영시간에 따른 트랜잭션을 조회하여 트랜잭션에 저장된 정보와 상기 검증 대상 영상 데이터의 분석 결과를 비교하여 상기 검증 대상 영상 데이터의 위변조 여부를 판단하는 단계는
상기 검증 대상 영상 데이터의 I-Frame 집합의 암호화값과 기준 영상 데이터의 I-Frame 집합의 암호화값을 비교하여 그 값이 동일하다면 영상조작이 없다고 판단하는 것인 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.According to claim 1,
The step of inquiring a transaction according to the shooting time of the video data to be verified on the blockchain network and comparing the information stored in the transaction with the analysis result of the video data to be verified to determine whether the video data to be verified is forgery or not
Blockchain network-based image integrity verification and restoration in which it is determined that there is no image manipulation by comparing the encrypted value of the I-Frame set of the verification target image data and the I-Frame set of the reference image data and the value is the same Way. 제2항에 있어서,
상기 기준 영상 데이터를 수신하는 단계는
상기 검증 대상 영상 데이터가 촬영된 촬영시간에 대응하는 기준 영상 데이터의 I-Frame을 수신하는 것인 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.3. The method of claim 2,
Receiving the reference image data includes:
A blockchain network-based image integrity verification and restoration method for receiving an I-Frame of reference image data corresponding to a shooting time at which the image data to be verified is captured. 제2항에 있어서,
상기 검증 대상 영상 데이터와 상기 기준 영상 데이터를 비교하여 상기 검증 대상 영상 데이터의 I-Frame 별 위변조 여부를 분석하는 단계는
촬영시간을 기준으로 상기 검증 대상 영상 데이터의 I-Frame의 암호화값과 상기 기준 영상 데이터의 I-Frame의 암호화값을 비교하여 양 I-Frame의 암호화값이 동일하면 해당 촬영시간의 검증 대상 영상 데이터의 위변조가 없다고 분석하고, 기준 영상 데이터의 I-Frame의 암호화값이 누락된 경우 해당 촬영시간의 검증 대상 영상 데이터가 삭제되었다고 분석하고, 기준 영상 데이터의 I-Frame의 암호화값이 다른 경우 해당 촬영시간의 검증 대상 영상 데이터가 수정되었다고 판단하고, 기준 영상 데이터의 I-Frame의 암호화값이 추가된 경우 해당 촬영시간의 검증 대상 영상데이터가 추가되었다고 분석하는 것인 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.3. The method of claim 2,
The step of comparing the verification target image data and the reference image data to analyze whether the verification target image data is forged or altered for each I-Frame is
Based on the recording time, the encryption value of the I-Frame of the image data to be verified is compared with the encryption value of the I-Frame of the reference image data. Analyze that there is no forgery or alteration of the I-Frame of the reference image data, and if the encryption value of the I-Frame of the reference image data is missing, it is analyzed that the image data to be verified for the corresponding shooting time has been deleted. When it is determined that the video data to be verified at the time has been modified, and if the I-Frame encryption value of the reference video data is added, it is analyzed that the video data to be verified at the corresponding shooting time has been added. Blockchain network-based video integrity verification and restoration Way. 제2항에 있어서,
위변조 영상에 대해 복원을 수행하는 단계를 더 포함하는 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.3. The method of claim 2,
A blockchain network-based image integrity verification and restoration method further comprising the step of performing restoration on the forged image. 제8항에 있어서,
상기 위변조 영상에 대해 복원을 수행하는 단계는 촬영시간을 기준으로 검증 대상 영상 데이터의 I-Frame의 암호화값과 기준 영상 데이터의 I-Frame의 암호화값을 각각 비교하여, 서로 상이한 경우 검증 대상 영상 데이터의 I-Frame을 기준 영상 데이터의 I-Frame으로 수정하는 것인 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.9. The method of claim 8,
The restoration of the forged image is performed by comparing the encryption value of the I-Frame of the image data to be verified with the encryption value of the I-Frame of the reference image data based on the shooting time, and if they are different from each other, the image data to be verified A blockchain network-based image integrity verification and restoration method that modifies the I-Frame of the reference image data to the I-Frame of the reference image data. 제2항에 있어서,
위변조 검증 결과를 출력하는 사용자 인터페이스를 제공하는 단계를 더 포함하고,
상기 사용자 인터페이스는 제1 화면, 제2 화면 및 타임라인을 포함하고,
상기 제1 화면은 상기 검증 대상 영상 데이터를 표시하고 상기 제2 화면에는 상기 기준 영상 데이터를 표시하고, 상기 제1 화면에는 상기 검증 대상 영상 데이터의 I-Frame의 이미지 파일을 기초로 제1 영상을 표시하고, 상기 제2 화면에는 상기 기준 영상 데이터의 I-Frame 이미지 파일을 기초로 제2 영상을 표시하며,
상기 타임라인은 상기 검증 대상 영상과 상기 기준 영상을 촬영시간에 따라 표시하는 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.3. The method of claim 2,
Further comprising the step of providing a user interface for outputting a forgery verification result,
The user interface includes a first screen, a second screen, and a timeline,
The first screen displays the verification target image data, the second screen displays the reference image data, and the first screen displays a first image based on an I-Frame image file of the verification target image data. and displaying a second image on the second screen based on the I-Frame image file of the reference image data,
The timeline is a block chain network-based image integrity verification and restoration method for displaying the verification target image and the reference image according to the shooting time. 제2항에 있어서,
상기 기준 영상 데이터는 영상 기록 장치로부터 촬영 영상 데이터를 수신하여, 상기 촬영 영상 데이터에서 추출한 핵심정보를 통신가능하도록 연결된 데이터 저장소에 저장한 데이터인 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.3. The method of claim 2,
The reference image data is data that receives captured image data from an image recording device and stores key information extracted from the captured image data in a communicatively connected data storage, a block chain network-based image integrity verification and restoration method. 제11항에 있어서,
상기 핵심정보는 상기 촬영 영상 데이터의 I-Frame이고,
상기 데이터 저장소는 IPFS(InterPlanetary File System)인 블록체인 네트워크 기반 영상 무결성 검증 및 복원 방법.12. The method of claim 11,
The core information is an I-Frame of the captured image data,
The data storage is an IPFS (InterPlanetary File System) blockchain network-based image integrity verification and restoration method. 프로그램을 기록한 컴퓨터 판독가능 기록매체로서, 상기 프로그램은 명령어들을 포함하고, 상기 명령어들은 컴퓨터에 의해 실행될 때 제1항 내지 제12항에 따른 방법을 수행하는, 컴퓨터 판독가능 기록매체.A computer-readable recording medium recording a program, the program including instructions, which, when executed by a computer, perform the method according to any one of claims 1 to 12. 블록체인 네트워크 기반 영상 무결성 검증 및 복원 시스템으로서,
상기 시스템은 영상 검증/복원 서버, 분산 파일 시스템 및 블록체인 네트워크를 포함하고,
상기 검증/복원 서버는 영상 데이터를 수신하고, 상기 영상 데이터에서 추출한 I-Frame을 상기 분산 파일 시스템으로 전송하며, 상기 영상 데이터의 I-Frame의 집합의 해쉬값을 하나의 트랜잭션으로 생성하여 상기 블록체인 네트워크에 전송하고, 특정 영상에 대한 위변조 검증을 수행하도록 구성되는 블록체인 네트워크 기반 영상 무결성 검증 및 복원 시스템. As a blockchain network-based image integrity verification and restoration system,
The system includes an image verification/restore server, a distributed file system and a blockchain network,
The verification/restore server receives image data, transmits an I-Frame extracted from the image data to the distributed file system, generates a hash value of a set of I-Frames of the image data as one transaction, and generates the block A blockchain network-based video integrity verification and restoration system configured to transmit to a chain network and perform forgery verification on a specific video. 제14항에 있어서,
상기 검증/복원 서버는 검증 대상 영상 데이터와 영상이 촬영된 촬영 시간을 포함하는 검증 요청을 수신하고, 상기 검증 대상 영상 데이터의 I-Frame 정보 및 그 해쉬값을 산출하고 상기 블록체인 네트워크 상의, 상기 검증 대상 영상 데이터의 촬영시간에 따른 트랜잭션을 조회하여 트랜잭션에 저장된 정보와 상기 검증 대상 영상 데이터의 분석 결과를 비교하여 상기 검증 대상 영상 데이터의 위변조 여부를 판단하도록 구성되는 블록체인 네트워크 기반 영상 무결성 검증 및 복원 시스템. 15. The method of claim 14,
The verification/restore server receives the verification request including the verification target image data and the shooting time at which the image was taken, calculates I-Frame information of the verification target image data and its hash value, and calculates the A blockchain network-based image integrity verification and restoration system.
KR1020210049275A 2021-04-15 2021-04-15 System and method for video integrity verification and original recovery based on Blockchain network KR102524271B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210049275A KR102524271B1 (en) 2021-04-15 2021-04-15 System and method for video integrity verification and original recovery based on Blockchain network

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210049275A KR102524271B1 (en) 2021-04-15 2021-04-15 System and method for video integrity verification and original recovery based on Blockchain network

Publications (2)

Publication Number Publication Date
KR20220142800A true KR20220142800A (en) 2022-10-24
KR102524271B1 KR102524271B1 (en) 2023-04-24

Family

ID=83805739

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210049275A KR102524271B1 (en) 2021-04-15 2021-04-15 System and method for video integrity verification and original recovery based on Blockchain network

Country Status (1)

Country Link
KR (1) KR102524271B1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102153673B1 (en) * 2019-12-18 2020-09-08 제주대학교 산학협력단 Method, system and recordable medium for storing and transmission processing of intelligent CCTV video data using the edge blockchain
KR102213839B1 (en) * 2019-07-11 2021-02-08 제주대학교 산학협력단 Method for preventing video falsification and apparatus therefor

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102213839B1 (en) * 2019-07-11 2021-02-08 제주대학교 산학협력단 Method for preventing video falsification and apparatus therefor
KR102153673B1 (en) * 2019-12-18 2020-09-08 제주대학교 산학협력단 Method, system and recordable medium for storing and transmission processing of intelligent CCTV video data using the edge blockchain

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
강민구 외4, 블록체인 기반 CCTV 영상정보 무결성 지원 방안, 제22회 한국 소프트웨어공학 학술대회 논문집(KCSE 2020), pp.336-339, 2020.2.3* *

Also Published As

Publication number Publication date
KR102524271B1 (en) 2023-04-24

Similar Documents

Publication Publication Date Title
WO2021208952A1 (en) Block chain-based image data recording, obtaining and verifying
US20210287322A1 (en) Robust selective image, video, and audio content authentication
US11368289B1 (en) Video registration and authentication using blockchain
WO2019236470A1 (en) Blockchain-embedded secure digital camera system to verify audiovisual authenticity
CN112235323B (en) Evidence obtaining method and device based on block chain, electronic equipment and readable storage medium
US20230074748A1 (en) Digital forensic image verification system
US20220329446A1 (en) Enhanced asset management using an electronic ledger
CN112003888B (en) Blockchain-based certificate management method, device, equipment and readable medium
US20200278948A1 (en) Method, apparatus and system for managing electronic fingerprint of electronic file
KR20200018159A (en) Method of prevention of forgery and theft of photo
KR20210007452A (en) Method for preventing video falsification and apparatus therefor
KR102323650B1 (en) Image/sound acquiring or editing apparatus for creating an original image/sound file or a deepfake modified file having metadata related to file creating history, hashbank server for receiving and storing hash values related to an original image/sound file or a deepfake modified file, and server and mathod for receiving and processing an original image/recorded sound file or a deepfake modified file
US10891702B2 (en) Duplicate image evidence management system for verifying authenticity and integrity
US20210099772A1 (en) System and method for verification of video integrity based on blockchain
KR102453076B1 (en) Verification system and method supporting integrity of video using blockchain
KR102083870B1 (en) contact imprint management system for video surveillance by use of blockchain and biometric authentication
CN115114677B (en) Network crime service platform based on block chain evidence obtaining and storing technology and application method
KR102524271B1 (en) System and method for video integrity verification and original recovery based on Blockchain network
CN112966042A (en) Law enforcement recorder information processing method and system based on block chain
KR101855905B1 (en) Video export processing server, video export web server and video export management system, and digital video integraty verification method for encrypted videos
JP2022013298A (en) Information processing system
CN109271811B (en) Group signature-based electronic material evidence tamper-proof storage method
Bexheti et al. Securely Storing and Sharing Memory Cues in Memory Augmentation Systems: A Practical Approach
Xie et al. PROVES: Establishing Image Provenance using Semantic Signatures
JP7170929B1 (en) Information processing device, information processing method and program

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant