KR20220091371A - 수정된 비디오의 인코딩 - Google Patents

수정된 비디오의 인코딩 Download PDF

Info

Publication number
KR20220091371A
KR20220091371A KR1020210166131A KR20210166131A KR20220091371A KR 20220091371 A KR20220091371 A KR 20220091371A KR 1020210166131 A KR1020210166131 A KR 1020210166131A KR 20210166131 A KR20210166131 A KR 20210166131A KR 20220091371 A KR20220091371 A KR 20220091371A
Authority
KR
South Korea
Prior art keywords
image frames
encoded image
encoded
input image
source
Prior art date
Application number
KR1020210166131A
Other languages
English (en)
Inventor
위안 송
에드팜 빅터
브란젠 라스
Original Assignee
엑시스 에이비
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엑시스 에이비 filed Critical 엑시스 에이비
Publication of KR20220091371A publication Critical patent/KR20220091371A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2347—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving video stream encryption
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/10—Protecting distributed programs or content, e.g. vending or licensing of copyrighted material ; Digital rights management [DRM]
    • G06F21/106—Enforcing content protection by specific content processing
    • G06F21/1062—Editing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/64—Protecting data integrity, e.g. using checksums, certificates or signatures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/12—Applying verification of the received information
    • H04L63/126—Applying verification of the received information the source of the received data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/08—Key distribution or management, e.g. generation, sharing or updating, of cryptographic keys or passwords
    • H04L9/0816—Key establishment, i.e. cryptographic processes or cryptographic protocols whereby a shared secret becomes available to two or more parties, for subsequent use
    • H04L9/0819—Key transport or distribution, i.e. key establishment techniques where one party creates or otherwise obtains a secret value, and securely transfers it to the other(s)
    • H04L9/0825—Key transport or distribution, i.e. key establishment techniques where one party creates or otherwise obtains a secret value, and securely transfers it to the other(s) using asymmetric-key encryption or public key infrastructure [PKI], e.g. key signature or public key certificates
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3236—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using cryptographic hash functions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3247—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials involving digital signatures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2351—Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving encryption of additional data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H04N21/2541—Rights Management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2665—Gathering content from different sources, e.g. Internet and satellite
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4353—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving decryption of additional data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/926—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
    • H04N5/9261—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation involving data reduction
    • H04N5/9262—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation involving data reduction using predictive coding

Abstract

비디오 스트림 처리 방법은 입력 이미지 프레임들의 제1/제2 소스(401)로부터 발생하는 이미지 데이터를 포함하는 입력 이미지 프레임들의 제1/제2 세트(110a)를 수신하는 단계(S1010;S1020); 입력 이미지 프레임 세트들을 인코딩된 이미지 프레임들의 제1/제2 세트(110b; 120b)로 인코딩하여, 결합된 비디오 스트림(100)을 형성하는 단계(S1040), 이때 인코딩된 이미지 프레임들의 제1 세트의 인코딩된 이미지 프레임은 하나 이상의 다른 인코딩된 이미지 프레임들의 제1 세트의 인코딩된 이미지 프레임을 배타적으로 참조하고; 인코딩된 이미지 프레임들의 제2 세트의 인코딩된 이미지 프레임은 인코딩된 이미지 프레임들의 제1 세트의 인코딩된 이미지 프레임 및 인코딩된 이미지 프레임들의 제2 세트의 다른 인코딩된 이미지 프레임을 모두 참조함; 제1/제2 키를 사용하여, 인코딩된 이미지 프레임의 제1/제2 세트의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제1/제2 서명 그룹에 서명하는 단계(S1050; S1060)를 포함하며, 이때 각각의 키는 각각의 소스와 관계가 있다.

Description

수정된 비디오의 인코딩 {ENCODING OF MODIFIED VIDEO}
본 발명은 수정된 비디오를 인코딩하기 위한 방법 및 장치에 관한 것이다.
오늘날, 감시 비디오 카메라는 보안, 안전 및 증거 수집과 관련된 많은 응용 분야에서 널리 사용되고 있다. 일반적으로, 이들 카메라들의 비디오 스트림은 예를 들어 그래픽 오버레이의 적용에 의해 수정된다. 이러한 수정들은 예를 들어 캡처의 시간 및/또는 카메라 식별자를 나타내는 오버레이를 포함할 수 있다. 상기 수정은 바운딩 박스(bounding box)들 및/또는 이벤트 마커(event marker)들을 더 포함할 수 있다. 따라서 상기 수정은 비디오 스트림을 보는 운영자가 그 내용을 해석하거나 이해하는 것을 돕기 위해 적용될 수 있다. 개인 정보의 보호에 대한 법적 요구 사항을 준수하기 위해 상기 수정이 또한 적용될 수 있으며 이러한 수정의 주목할만한 예로는 프라이버시 마스크(privacy mask)가 있다.
설득력 있게 수정되고/되거나 컴퓨터에서 생성된 비디오, 예를 들어, 소위 딥 페이크(deep fake)는, 예를 들어 캡처된 비디오의 증거 가치를 약화시키고 캡처된 비디오에 대한 신뢰가 감소함에 따라 감시 카메라가 덜 유용하게 되는 것으로 이어질 수 있으므로, 큰 보안성 문제를 나타낸다. 이는 전술한 바와 같이 악의적이지 않은 목적으로 수정된 감시 카메라 비디오의 경우 특히 그렇다. 이에 대한 응답으로 수정된 비디오와 수정되지 않은 비디오가 서로 독립적으로 인코딩되고 처리될 수 있다.
따라서, 이에 비추어 볼 때, 본 기술 분야의 개선이 필요하다.
본 발명의 목적은 적어도 종래 기술의 이슈들 중 일부를 완화하고 수정된 캡처된 비디오를 인코딩하기 위한 개선된 해결책을 제공하는 것이다.
제1 양태에 따르면, 입력 이미지 프레임들의 제1 소스로부터 발생하는 이미지 데이터를 포함하는 제1 입력 이미지 프레임 세트를 수신하는 단계; 입력 이미지 프레임들의 제2 소스로부터 발생하는 이미지 데이터를 포함하는 제2 입력 이미지 프레임 세트를 수신하는 단계; 상기 제1 입력 이미지 프레임 세트 및 상기 제2 입력 이미지 프레임 세트를 각각 제1 인코딩된 이미지 프레임 세트 및 제2 인코딩된 이미지 프레임 세트로 인코딩하여, 결합된 비디오 스트림을 형성하되, 상기 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임은 상기 제1 인코딩된 이미지 프레임 세트의 하나 이상의 다른 인코딩된 이미지 프레임을 배타적으로 참조하고, 상기 제2 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임은 상기 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임과 상기 제2 인코딩된 이미지 프레임 세트의 다른 인코딩된 이미지 프레임을 모두 참조하는 단계; 제1 키를 사용하여, 상기 제1 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제1 서명 그룹에 서명하되, 상기 제1 키는 입력 이미지 프레임들의 제1 소스와 관련되는 단계; 및 제2 키를 사용하여, 상기 제2 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제2 서명 그룹에 서명하되, 상기 제2 키는 입력 이미지 프레임들의 제2 소스와 관련되는 단계를 포함하는, 비디오 스트림 처리 방법이 제공된다.
"인코딩"은 비디오 코딩 분야에서 알려진 바와 같이 이해되어야 하며, 이는 예를 들어 가능하게 압축된 것으로, 비트스트림에서 입력 이미지 프레임을 나타내는 것을 포함할 수 있다.
"참조(Referencing)"는 비디오 코딩 분야에서 일반적으로 알려진 것으로 이해되어야 하며, 여기서 인코딩된 바와 같은 프레임의 부분들은 잠재적으로 동일한 프레임의 다른 부분들을 참조할 수 있고/있거나, 각각의 인코딩된 이미지 프레임은 잠재적으로 인코딩된 비디오 스트림의 다른 이미지 프레임들을 참조할 수 있다. 전형적으로, 제1 프레임 또는 그 일부의 인코딩은 제2 프레임에 대한 차이, 또는 제2 프레임으로부터 예측된 진화(predicted evolution)와의 차이를 인코딩하는 것에 기초할 수 있으며, 인코딩된 바와 같은 제1 프레임은 이에 의해 제2 프레임을 참조한다. 이는 소위 인터 프레임 코딩(inter frame coding)의 경우를 포함한다.
"서명"은 컴퓨터 암호화 분야에서 일반적으로 알려진 바와 같이, 서명 중에 사용된 키의 ID(identity)를 나타내는, 비트 또는 바이트의 집합, 문자열 등의 표현을 생성하는 것으로 이해되어야 한다. 따라서, 제1 및 제2 키는 관련된 소스의 식별을 가능하게 하는 암호화 유형 키로 이해될 수 있다.
"키"는 컴퓨터 암호화 분야에서 일반적으로 알려진 바와 같이, 서명 중에 사용되는 비트 또는 바이트의 집합, 문자열 등과 같은 임의의 표현으로 이해되어야 한다. 공개 키 암호법(public key cryptography)의 경우, 알려진 바와 같이, 키는 청구된 바와 같이 서명에 사용되는 개인 키일 수 있고, 대응하는 공개 키를 가질 수 있으며, 이는 나중에 서명 중에 생성된 서명을 확인하는 데 사용될 수 있다.
제1 입력 이미지 프레임 세트는, 예를 들어, 캡처 디바이스의 이미지센서에 의해 기록된 것과 같이, 오리지널 픽셀 데이터만을 포함하는 이미지 프레임들일 수 있다. 제2 입력 이미지 프레임 세트는, 예를 들어, 오리지널 픽셀 데이터와 비교하여 수정 또는 변경을 포함하는 이미지 프레임들로 이해될 수 있다. 입력 이미지 프레임들의 제1 소스는 캡처 디바이스 또는 그 이미지센서와 결부될 수 있다. 대안적으로 또는 추가적으로, 이미지 프레임들의 제1 소스는 비디오 스토어에 저장된 비디오 데이터와 같이, 저장된 비디오 데이터와 결부될 수 있다. 입력 이미지 프레임들의 제2 소스는 비디오 처리 유닛, 즉, 처리를 수행하고 이미지 프레임 픽셀 데이터에 수정들을 적용하는 것을 수행할 수 있는 엔티티(entity)와 결부될 수 있다.
일반적으로, 소스는 하드웨어 기반, 예를 들어 이미지센서 또는 인코더 및/또는 소프트웨어 기반, 예를 들어 비일시적 컴퓨터 판독 가능 저장 매체에 저장된 명령어들로 될 수 있다.
예를 들어, 서명은 별도의 서명 유닛에서, 인코더에서 또는 다른 곳에서 수행될 수 있다.
결합된 비디오 스트림을 인코딩하는 것은, 제1 인코딩된 이미지 프레임 세트의 프레임이 해당 세트의 하나 이상의 프레임을 배타적으로 참조하는 반면, 제2 인코딩된 이미지 프레임 세트의 인코딩된 프레임이 제1 세트의 프레임과 제2 세트의 프레임 모두를 참조하여, 입력 이미지 프레임들의 제1 소스로부터 오리지널 픽셀 또는 이미지 데이터를 영구적으로 또는 취소불가능하게 변경하지 않으면서, 단일 비디오 스트림에서 양 소스의 전체 정보를 제공하는 것을 가능하게 하며, 따라서 이는 이들의 픽셀 데이터에 대한 수정없이, 출력 결합된 비디오 스트림에 효과적으로 포함될 수 있다. 또한, 이러한 인코딩 방식을 사용하여, 제1 인코딩된 이미지 프레임 세트의 오리지널 이미지 데이터가, 결합된 비디오 스트림의 제2 이미지 프레임 세트를 인코딩하기 위한 기초로서 사용될 수 있고, 데이터의 중복을 피할 수 있다. 이에 의해, 수정되지 않은 상태와 수정된 상태의 2개의 완전한 비디오 스트림에 대한 과도한 인코딩, 전송 및 저장 리소스가 방지될 수 있다.
또한, 각각이 이미지 프레임의 각 소스에 대해 관련된 키를 갖는, 제1 인코딩된 이미지 프레임 세트의 하나 이상의 이미지 프레임을 포함하는 제1 서명 그룹 및 제2 이미지 프레임 세트의 하나 이상의 이미지 프레임을 포함하는 제2 서명 그룹의 별도 서명을 통해, 오버레이와 같은 제2 소스로부터의 이미지들이 존재함에도 불구하고, 제1 소스로부터의 이미지들의 무결성(integrity)이 서명을 통해 검증될 수 있다. 또한, 제2 소스의 이미지들의 무결성이 별도로 검증될 수 있다.
일반적으로, 입력 이미지 프레임들의 제1 소스로부터의 데이터는 상대적으로 더 높은 보안 레벨과 결부될 수 있고 입력 이미지 프레임들의 제2 소스로부터의 데이터는 상대적으로 더 낮은 보안 레벨과 결부될 수 있다. 예를 들어, 이미지 센서에서 직접 들어오는 입력 이미지 프레임들을 나타내는 입력 이미지 프레임들의 제1 소스와, 비디오 센서의 카메라 다운스트림에 추가될 수 있는, 오버레이와 결부된 입력 이미지 프레임들의 제2 소스의 경우, 센서로부터 직접적으로 들어온 데이터는, 오버레이와 비교할 때, 변조(tampering) 가능성이 적을 수 있으며, 따라서 더 높은 레벨의 신뢰와 결부될 수 있다. 추가로, 제1 입력 이미지 프레임 세트는 센서를 떠난 이후로 변경 또는 변조되지 않았음을 보장할 수 있는 반면, 제2 입력 이미지 프레임 세트는 카메라를 떠난 이후로 변조되지 않았다는 것만 보장될 수 있다.
다른 예에서, 예를 들어 픽셀 데이터 수정들을 포함하는 입력 이미지 프레임들의 제2 소스가 인코더 또는 캡처 디바이스의 제공자와 반드시 관련되지 않은 다른 자(party)와 결부되거나 그로부터 발생한다면, 별도의 서명이 특히 유용할 수 있다. 이 경우, 대응하는 데이터는, 이러한 다른 자로부터의 데이터가 카메라 제조자 또는 카메라 소유자의 제어 하에 있지 않는 것이 가능하고 추가 전 또는 추가 동안 수정되거나 변조되었을 수 있으므로, 더 낮은 레벨의 신뢰와 결부될 수 있다.
별도의 서명을 통해, 오버레이의 형태에서와 같이 이미지 프레임들의 제2 소스로부터의 데이터의 존재의 경우에도, 이미지 프레임들의 제1 소스와 결부된 더 높은 레벨의 신뢰가 유지될 수 있다. 따라서, 하나의 결합된 비디오 스트림 내의 모든 이미지 정보를 유지하면서 보안성이 향상된다.
따라서, 요약하면, 이 방법은 수정을 통해 비디오를 인코딩하는 안전하고 효율적인 방법을 유리하게 제공할 수 있다.
상기 제2 서명 그룹은 제2 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임에 의해 참조되는 제1 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임을 추가로 포함할 수 있다.
이는, 제2 소스로부터의 수정들을 포함하여, 제1 소스로부터의 이미지들의 조합을 확인하는 것을 가능하게 하여, 보안성과 유연성을 향상시킨다.
상기 방법은 입력 이미지 프레임들의 제3 소스로부터 발생하는 이미지 데이터를 포함하는 제3 입력 이미지 프레임 세트를 수신하는 단계를 추가로 포함할 수 있는데, 상기 인코딩하는 단계는 제3 입력 이미지 프레임 세트를 제3 인코딩된 이미지 프레임 세트로 인코딩하여, 결합된 비디오 스트림의 일부분을 형성하는 단계를 추가로 포함하고, 상기 제3 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임은 상기 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임 및 상기 제3 인코딩된 이미지 프레임 세트의 다른 인코딩된 이미지 프레임 모두를 참조하며, 상기 방법은, 제3 키를 사용하여, 제3 인코딩된 이미지 프레임 세트의 하나 이상의 이미지 프레임을 포함하는 제3 서명 그룹에 서명하는 단계를 추가로 포함하며, 상기 제3 키는 입력 이미지 프레임들의 제3 소스에 관한 것이다.
제3 입력 이미지 프레임 세트는, 예를 들어, 제2 입력 이미지 프레임 세트과 유사한 방식으로, 제1 소스로부터의 오리지널 픽셀 데이터와 비교하여 수정 또는 변경을 포함하는 이미지 프레임들을 포함할 수 있다. 일 예로, 제2 소스는 인코더 또는 캡처 디바이스와 직접 결부되고 상기 인코더 또는 캡처 디바이스의 제공자에 의해 감독되거나 승인되는 픽셀 데이터 수정들의 소스로서 이해될 수 있다. 제3 소스는 인코더 또는 캡처 디바이스의 제공자와 반드시 관련될 필요는 없는 다른 자와 대신 결부된 픽셀 데이터 수정들의 소스로서 이해될 수 있다.
제3 입력 이미지 프레임 세트는 오리지널 픽셀 데이터를 영구적으로 그리고 취소 불가능하게 변경하지 않으면서 수정된 이미지 프레임들이 동일한 결합된 비디오 스트림으로 인코딩될 독립적이고 개별적인 픽셀 데이터의 추가 레벨의 추가를 가능하게 할 수 있다. 원칙적으로, 대응하여 수신되고 동일한 결합된 비디오 스트림으로 인코딩될 예를 들어 제4, 제5 등 이미지 프레임들의 추가의 세트를 방해하는 것은 없다.
상기 방법은 제1 인코딩된 이미지 프레임 세트를 디스플레이되지 않을 이미지 프레임들로서 지정하는 단계를 추가로 포함할 수 있다. 이러한 지정은 예를 들어 제1 인코딩된 이미지 프레임 세트의 각각의 프레임에 적용되는 ND(No Display) 플래그의 형태를 취할 수 있다.
이는 결합된 비디오 스트림에서 식별될, 제1 키로 서명된, 제1 인코딩된 이미지 프레임 세트에 포함된 이미지 프레임들을 식별하는 편리하고 효율적인 방법을 가능하게 한다. 본 개시에서, 이러한 지정은, 결합된 비디오 스트림이 실제 디스플레이에서 디스플레이되지 않더라도, 결합된 비디오 스트림에서 제1 인코딩된 이미지 프레임 세트를 식별하기 위해 사용될 수 있다는 점에 유의해야 한다.
더욱이, 결합된 비디오 스트림은 이에 의해 인코딩될 수 있어, 표준 비디오 디코더는, 결합된 비디오 스트림을 디코딩할 때, 예를 들어 임력 이미지 프레임들의 제2 소스로부터 발생된 오버레이를 포함하여, 임력 이미지 프레임들의 제2 소스에 의해 수정된 바와 같이, 예를 들어 디스플레이, 저장 및/또는 분석을 위해 디코딩된 비디오 스트림을 출력할 것이다. 한편, 이러한 디코더는 디스플레이되지 않을 이미지 프레임으로 지정된, 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임들을 무시할 것이다. 따라서, 결합된 비디오 스트림은 이러한 표준 비디오 디코더를 사용하여 디코딩될 때 수정없이 사용 가능할 것이며, 결합된 비디오 스트림의 일반적인 사용일 수 있는 오버레이들을 포함하여 쉽게 재생하는 것을 가능하게 한다. 한편, 입력 이미지 프레임들의 제1 소스로부터의 모든 정보는, 수정 없이, 결합된 비디오 스트림에 포함되고 따라서 특별히 조정된, 디코더를 이용하여 그로부터 추출 가능할 수 있고, 이는 결합된 비디오 스트림으로부터 디스플레이되지 않을 이미지 프레임들로 지정된 인코딩된 이미지 프레임들을 추출할 수 있으며, 디코딩된 비디오 스트림에서, 디코딩됨에 따라, 이들 이미지 프레임들을 출력한다. 따라서, 요약하면, 이는 사용하기 쉬운 방식으로 결합된 비디오 스트림을 인코딩하는 것을 가능하게 하며, 제1 키와 제2 키에 의해 서명됨에 따라, 양 소스로부터의 모든 정보를 계속 포함할 수 있다.
입력 이미지 프레임들의 제1 소스는 비디오 캡처 장치의 이미지센서일 수 있다. 이는 제1 입력 이미지 프레임 세트가 어떠한 수정도 적용되지 않으면서 캡처된 것으로 인코딩되는 것을 가져올 수 있다.
입력 이미지 프레임들의 제2 소스는 비디오 캡처 장치의 이미지 센서 이외의 다른 센서일 수 있다. 이미지 센서 이외의 다른 센서는 예를 들어 적외선 센서, 레이더 센서, 레이저/라이더(laser/lidar) 센서 등이 될 수 있다. 다른 센서 데이터, 예를 들어 레이더 데이터에 기초한 그래픽 오버레이는 제1 입력 이미지 프레임 세트에 영향을 주지 않으면서 결합된 비디오 스트림에 통합될 수 있다.
입력 이미지 프레임들의 제2 소스는 비디오 처리 유닛일 수 있다. 이러한 비디오 처리 유닛은 예를 들어 인코더와 같이 비디오의 적절한 처리가 가능한 임의의 장치, 방법, 시스템 또는 소프트웨어로 이해될 수 있다. 이미지 프레임 또는 비디오를 수정할 수 있는 다른 장치, 방법 또는 시스템 또한 비디오 처리 유닛으로 고려될 수 있다. 비디오 처리 유닛은 컴퓨터로 구현될 수 있다. 예를 들어, 비디오 처리 유닛은 이미지 데이터의 제1 소스와 결부된, 어플리케이션 프로그래밍 인터페이스(application programming interface; API)를 이용하여 구현되었을 수 있다. 비디오 처리 유닛은 비디오 처리 파이프라인일 수 있다.
비디오 처리 유닛은 그래픽 오버레이 추가 기능을 포함할 수 있다. 이러한 그래픽 오버레이 추가 기능은 임의의 종류의 그래픽 오버레이를 이미지 프레임들 상에 추가할 수 있는 임의의 장치, 방법 또는 시스템으로 이해되어야 한다.
제1 키는 해시 함수 키(hash function key)일 수 있고/있거나 제2 키는 해시 함수 키일 수 있다. 이는 암호화 해시 함수와 관련된 제1 및/또는 제2 키로 이해될 수 있다. 해시 키들은 승인되지 않거나 악의적인 서명이 이와 같이 감지되지 않으면서 발생할 확률 또는 가능성을 줄임으로써 증가된 보안성을 제공한다.
인코딩은 제1 입력 이미지 프레임 세트 및 제2 입력 이미지 프레임 세트를 각각 제1 인코딩된 이미지 프레임 세트 및 제2 인코딩된 이미지 프레임 세트로 인터 인코딩하는 것을 포함할 수 있다.
인코딩은 제1 입력 이미지 프레임 세트 및 제2 입력 이미지 프레임 세트를 각각 제1 인코딩된 이미지 프레임 세트 및 제2 인코딩된 이미지 프레임 세트로 예측 인코딩하는 것을 포함할 수 있다. 예측 인코딩은 임의의 특정 이미지 프레임을 인코딩할 때 선행 이미지 프레임들이 참조로 사용되는 인터 프레임 인코딩의 유형으로 이해될 수 있다.
상기 방법은 제1 키를 사용한 서명에 관련된 서명 및 제2 키를 사용한 서명에 관련된 서명 중 적어도 하나를, 결합된 비디오 스트림과 결부시키는 단계를 추가로 포함할 수 있다. 예를 들어, 서명하는 것으로부터의 하나 이상의 서명은 결합된 비디오 스트림에 포함될 수 있고 따라서 그 안에 포함될 수 있다. 대안적으로, 하나 이상의 서명은 결합된 비디오 스트림과 별개일 수 있지만, 예를 들어 동일한 디렉토리, 데이터베이스, 파일 시스템, 저장 설비 등으로 또는 동일한 데이터 스트림, 채널, 연결 등을 통해 전송됨으로써, 이와 결부될 수 있다.
서명은 각각의 키를 사용한 서명으로 인해 발생하는 비트들 또는 바이트들, 문자열 등의 집합으로 이해되어야 한다.
상기 방법은, 디코더에서, 결합된 비디오 스트림을 디코딩하는 단계를 추가로 포함할 수 있다. 이러한 비디오 디코더는 비디오를 디코딩할 수 있는 임의의 장치, 방법 또는 시스템으로 이해될 수 있다. 디코더는 컴퓨터로 구현될 수 있다.
상기 방법은 상기 결합된 비디오 스트림에 포함된 서명을 체크하는 단계 및 상기 체크의 결과에 관련되는 데이터를 상기 디코딩된 비디오 스트림과 결부시키는 단계를 추가로 포함할 수 있다.
이는 서명 체크의 결과를 사용자에게 나타내는 기술적으로 특히 효율적인 방법을 가능하게 한다.
상기 방법은 상기 결합된 비디오 스트림의 이미지 프레임의 출처(origin)를 결정하는 단계 및 상기 출처의 결정에 기초하여 데이터를 상기 이미지 프레임과 결부시키는 단계를 추가로 포함할 수 있다.
이는 사용자에게 출처의 결정의 결과를 나타내는 기술적으로 특히 효율적인 방법을 가능하게 한다.
제2 양태에 따르면, 처리 능력을 갖는 장치 상에서 실행될 때, 제1 양태에 따른 방법을 구현하기 위한 명령어들 저장된 비일시적 컴퓨터 판독가능 저장 매체가 제공된다.
상기 제2 양태는 이들의 고유한 관계에 기인하여, 제1 양태와 유사한 이점을 제공할 수 있다.
제3 양태에 따르면, 입력 이미지 프레임들의 제1 소스로부터 발생하는 이미지 데이터를 포함하여, 제1 인코딩된 이미지 프레임 세트를 수신하고; 입력 이미지 프레임들의 제2 소스로부터 발생하는 이미지 데이터를 포함하여, 제2 인코딩된 이미지 프레임 세트를 수신하고; 제1 입력 이미지 프레임 세트 및 제2 입력 이미지 프레임 세트를 각각 제1 인코딩된 이미지 프레임 세트 및 제2 인코딩된 이미지 프레임 세트로 인코딩하여, 결합된 비디오 스트림을 형성하되, 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임은 제1 인코딩된 이미지 프레임 세트의 하나 이상의 이미지 프레임을 배타적으로 참조하고, 제2 인코딩된 이미지 프레임 세트 중 하나의 인코딩된 이미지 프레임은 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임 및 제2 인코딩된 이미지 프레임 세트의 다른 인코딩된 이미지 프레임을 모두 참조하며, 제1 키를 사용하여, 제1 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제1 서명 그룹에 서명하되, 제1 키는 입력 이미지 프레임들의 제1 소스에 관련된 것이며; 제2 키를 사용하여, 제2 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제2 서명 그룹에 서명하도록 구성된 프로세서를 포함하고, 제2 키는 입력 이미지 프레임들의 제2 소스에 관련되는, 비디오 처리 시스템이 제공된다.
제3 양태는 이들의 고유한 관계에 기인하여 제1 양태와 유사한 이점을 제공할 수 있다.
상기 비디오 처리 시스템은 결합된 비디오 스트림을 디코딩하도록 구성된, 디코더를 추가로 포함할 수 있다.
본 발명의 적용 가능성의 추가의 범주는 이하에 주어진 상세한 설명으로부터 명백해질 것이다. 그러나, 상세한 설명 및 특정 실시예들은, 본 발명의 바람직한 실시예들을 나타내면서, 본 발명의 범주 내에서 다양한 변경 및 수정이 상세한 설명으로부터 당업자에게 명백해질 것이기 때문에, 단지 예시의 목적으로 제공되는 것으로 이해되어야 한다.
따라서, 본 발명은 설명된 장치의 특정 구성 부품들 또는 설명된 방법들의 동작들로 제한되는 것은 아니며 이러한 장치 및 방법은 청구범위의 범주 내에서 변할될 수 있다는 것이 이해되어야 한다.
본 발명의 상기 및 기타 양태들은 첨부된 도면을 참조하여 이하에서 보다 상세하게 설명될 것이다. 도면은 제한적인 것으로 간주되어서는 안된다: 대신 도면은 설명 및 이해의 목적으로 간주되어야 한다.
도면에 도시된 바와 같이, 층들 및 영역들의 크기는 예시적인 목적을 위해 과장된 것일 수 있으며, 따라서 일반적인 구조들을 예시하기 위해 제공된다. 동일한 참조 번호는 전체에 걸쳐 동일한 요소를 지칭한다.
도 1은 비디오 스트림을 처리하는 방법 예에 대한 순서도를 도시한다.
도 2는 결합된 비디오 스트림을 형성하는 제1 인코딩된 이미지 프레임 세트 및 제2 인코딩된 이미지 프레임 세트를 도시한다.
도 3은 결합된 비디오 스트림을 형성하는 제1 인코딩된 이미지 프레임 세트, 제2 인코딩된 이미지 프레임 세트 및 제3 인코딩된 이미지 프레임 세트를 도시한다.
도 4는 추가 단계들을 포함하는 비디오 스트림을 처리하는 방법 예에 대한 순서도를 도시한다.
도 5는 비디오 처리 시스템 및 그 구성요소를 도시한다.
본 발명은 이제 첨부된 도면을 참조하여 이하에서 더욱 완전하게 설명될 것이며, 본 발명의 현재의 바람직한 실시예들이 도시된다. 그러나, 본 발명은 청구범위의 범주 내에서 많은 상이한 형태로 실시될 수 있고, 본 명세서에서 설명된 실시예들로 제한되는 것으로 해석되어서는 안 된다.
도 1은 비디오 스트림을 처리하는 방법 예를 도시한다. 동시에, 방법 예를 수행하도록 구성된 비디오 처리 시스템(400)을 도시하는 도 5를 참조한다.
방법 예에 대한 선택적인, 추가 단계들은 도 1을 포함하여, 본 개시의 순서도에서 점선 테두리가 있는 박스들로 예시된다. 박스들 사이의 화살표는 단계를 수행하기 위한 순서의 예를 나타내지만, 단계 순서에 대한 다른 대안들을 배제하는 것으로 이해되어서는 안된다.
S1010에서, 제1 입력 이미지 프레임 세트(110a)가 수신된다. 제1 입력 이미지 프레임 세트(110a)는 입력 이미지 프레임들의 제1 소스(401)로부터 발생하는 이미지 데이터를 포함하고(도 5 참조) 인코더(410)에서 수신될 수 있다(도 5 참조).
S1020에서, 제2 입력 이미지 프레임 세트(120a)가 수신된다. 제2 입력 이미지 프레임 세트(120a)(도 2 참조)는 입력 이미지 프레임들의 제2 소스(402)로부터 발생하는 이미지 데이터를 포함하고(도 5 참조) 또한 인코더(410)에서 수신될 수 있다(도 5 참조).
S1040에서, 인코더(410)에서, 제1 입력 이미지 프레임 세트(110a) 및 제2 입력 이미지 프레임 세트(110a)가 각각 제1 인코딩된 이미지 프레임 세트(110b) 및 제2 인코딩된 이미지 프레임 세트(120b)로 인코딩되어, 결합된 비디오 스트림(100)을 형성한다(도 5 참조). 인코딩은 예를 들어 H.261, H.262, H.263, H.264/AVC, H.265/HEVC, VP8, VP9, 또는 AV1와 같은 비디오 코딩 포맷 및/또는 표준에 따른 비트스트림으로 수행될 수 있다.
S1050에서, 제1 인코딩된 이미지 프레임 세트(110b)의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제1 서명 그룹이 제1 키를 사용하여 서명된다. 제1 키는 입력 이미지 프레임들의 제1 소스(401)에 관한 것이다. 서명은 예를 들어 선택적인 별도의 서명 유닛(411)에서, 인코더(410)에서, 또는 다른 곳에서 수행될 수 있다(도 5 참조).
S1060에서, 제2 인코딩된 이미지 프레임 세트(110b)의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제2 서명 그룹이 제2 키를 사용하여 서명된다. 제2 키는 입력 이미지 프레임들의 제2 소스(401)에 관한 것이다. 서명은 예를 들어 서명 유닛(411)에서, 인코더(410)에서, 또는 다른 곳에서 수행될 수 있다 (도 5 참조).
도 2는 제1 인코딩된 이미지 프레임 세트(110b) 및 제2 인코딩된 이미지 프레임 세트(120b)가 결합된 비디오 스트림(100)에 배치될 수 있는 방법 및 각각의 프레임이 서로를 참조하는 방법을 도시한다. 도면에서 참조는 화살표로 표시되며 도면은 가장 왼쪽의 이미지 프레임이 제1 이미지 프레임이고 가장 오른쪽의 이미지 프레임이 마지막 이미지 프레임인, 이미지 프레임들의 시간 순의 시퀀스에 대응하는 것으로 이해되어야 한다.
다른 프레임을 참조하는 하나의 프레임은, 예를 들어 비디오 인코딩 분야에서 알려진 바와 같이 예측형 인터 프레임 인코딩에 대응할 수 있다.
또한 도 2를 참조하면, 여기에서 볼 수 있는 바와 같이, 제1 인코딩된 이미지 프레임 세트(110b)의 이미지 프레임-이 예에서 각각의 이미지 프레임-은 제1 인코딩된 이미지 프레임 세트(110b)의 다른 이미지 프레임을 배타적으로 참조한다.
또한, 이 예에서는, 제1 인코딩된 이미지 프레임 세트의 하나의 이미지 프레임 또는 각각의 이미지 프레임이 제1 인코딩된 이미지 프레임 세트(110b)의 복수의 선행 이미지 프레임을 배타적으로 참조하거나, 또는 제1 인코딩된 이미지 프레임 세트(110b)의 프레임이 제1 인코딩된 이미지 프레임 세트(110b)의 하나 이상의 다른 이미지 프레임들을 시간적으로 순방향 및 역방향 모두 배타적으로 참조하는 것과 같이 다른 구성들도 동일하게 가능함에도 불구하고, 제1 인코딩된 이미지 프레임 세트의 각각의 이미지 프레임은 제1 인코딩된 이미지 프레임 세트(110b)에 포함된 선행 이미지 프레임을 배타적으로 참조한다.
도 2는 제2 인코딩된 이미지 프레임 세트(120b)의 이미지 프레임이 어떻게 제1 인코딩된 이미지 프레임 세트(110b)의 이미지 프레임과 제2 인코딩된 이미지 프레임 세트(120b)의 다른 이미지 프레임 모두를 참조하는 지를 추가로 도시한다.
따라서, 인코딩 S1040은 제1 인코딩된 이미지 프레임 세트(110b) 및 제2 인코딩된 이미지 프레임 세트(120b)를 예측 인코딩하여, 결합된 비디오 스트림(100)을 형성하는 것을 포함할 수 있다.
예를 들어, 제1 입력 이미지 프레임 세트(110a)는 비디오 캡처 장치(403)(도 5 참조)에 의해 캡처된 바와 같은, 오리지널 이미지 데이터 또는 오리지널 픽셀 데이터를 포함할 수 있다.
도 1 및 5를 다시 참조하면, 입력 이미지 프레임들의 제1 소스(401)는 이미지 센서(404)일 수 있다. 입력 이미지 프레임들의 제1 소스(401)는 비디오 캡처 장치(403)의 이미지 센서(404)일 수 있다. 이미지 프레임들의 제1 소스(401)는 다른 방식으로도 비디오 캡처 장치(403)의 일부이거나, 이와 결부될 수 있다. 입력 이미지 프레임들의 제1 소스(401)는 비디오 캡처 장치(403)에 의해 캡처된 바와 같은, 오리지널 이미지 데이터 또는 오리지널 픽셀 데이터의 소스일 수 있다. 입력 이미지 프레임들의 제1 소스(401)는 이미지 센서(404) 또는 비디오 캡처 장치(403)와 직접 결부될 수 있다.
비디오 캡처 장치(403)는 이미지센서(404)를 포함할 수 있다. 비디오 캡처 장치(403)는 이미지센서(404)와 전기적 및/또는 무선 연결되도록 구성 및/또는 배치될 수 있다. 비디오 캡처 장치(403)는 비디오, 즉 후속 이미지 프레임들의 시퀀스를 캡처하도록 적응 또는 구성될 수 있다. 비디오 캡처 장치(403)는 대안적으로 비디오 카메라로 지칭되거나 이해될 수 있다. 비디오 캡처 장치(403)는 디지털 유형의 비디오 캡처 장치일 수 있다. 비디오 캡처 장치(403)는 모니터링 및/또는 감시 유형의 비디오 캡처 장치일 수 있다. 비디오 캡처 장치(403)는 감시 유형 비디오 캡처 장치일 수 있다. 비디오 캡처 장치(403)는 팬/틸트/줌 유형의 비디오 캡처 장치일 수 있다. 비디오 캡처 장치(403)는 정적 또는 고정된 비디오 캡처 장치일 수 있다. 비디오 캡처 장치(403)는 휴대용 또는 웨어러블 비디오 캡처 장치일 수 있다.
비디오 캡처 장치(403)는 캡처된 이미지 데이터 및/또는 이미지 프레임들을 저장하기 위한 매체를 포함할 수 있다. 비디오 캡처 장치(403)는 캡처된 이미지 데이터 및/또는 이미지 프레임들을 전송하도록 배치 및/또는 구성된 송신기를 포함할 수 있다.
비디오 캡처 장치(403)는 네트워크 연결 유형의 비디오 캡처 장치일 수 있다. 비디오 캡처 장치(403)는 광학적으로, 전기적으로, 또는 무선으로 네트워크에 연결될 수 있다. 네트워크는 예를 들어 근거리 통신망(LAN) 유형 네트워크, 광역 통신망(WAN) 유형 네트워크 또는 무선 근거리 통신망(WLAN) 유형 네트워크일 수 있다.
이미지센서(404)는 비디오 캡처 장치(403)의 일부일 수 있다. 이미지센서(404)는 상보형 금속-산화물-반도체(CMOS) 유형의 이미지 센서일 수 있다. 이미지센서(404)는 전하 결합 소자(CCD) 유형의 이미지 센서일 수 있다. 이미지센서(404)는 액티브-픽셀 센서(APS) 유형의 이미지 센서일 수 있다. 이미지센서(404)는 실리콘 기반의 이미지 센서일 수 있다.
예를 들어, 제1 입력 이미지 프레임 세트(110a)는 캡처된 이후로 수정, 편집 및/또는 변조되지 않은 것과 같이, 수정되지 않은 또는 편집되지 않은 이미지 데이터를 포함할 수 있다.
대안적으로, 제1 입력 이미지 프레임 세트(110a)는, 추가로, 캡처된 바와 같은 이미지 데이터에 대한 추가, 예를 들어 감시 카메라에서 추가된 오버레이 및/또는 캡처된 이미지 데이터와 동일한 발신자에 의한 추가를 포함할 수 있다. 이에 의해, 이 경우, 제1 입력 이미지 프레임 세트(110a)를 형성하는, 임의의 가능한 추가와 함께, 캡처된 이미지 데이터는 입력 이미지 프레임들의 제1 소스로부터 발생하는 것으로 보일 수 있다.
제2 입력 이미지 프레임 세트(120a)는 편집되거나 수정된 이미지 데이터, 또는 픽셀 데이터를 포함할 수 있다. 제2 입력 이미지 프레임 세트(120a)는, 예를 들어, 그래픽 오버레이 요소, 예를 들어, 바운딩 박스, 프라이버시 마스크, 표시자, 메시지, 또는 텍스트, 숫자, 기호 등의 형태의 다른 유형의 오버레이 정보를 포함할 수 있다. 예를 들어, 이러한 오버레이 정보는, 아래에 추가로 예시된 바와 같이, 다른 센서(405)로부터와 같은 센서 데이터와 관련될 수 있다. 제2 입력 이미지 프레임 세트(120a)은 제1 입력 이미지 프레임 세트(110a)에 기초할 수 있다. 제2 입력 이미지 프레임 세트(120a)는 예를 들어, 이미지 프레임들에 추가된 그래픽 오버레이 요소들과 함께 제1 입력 이미지 프레임 세트(110a)의 이미지 프레임들을 포함할 수 있다. 따라서 제2 입력 이미지 프레임 세트(120a)는, 예를 들어 비디오 캡처 장치(403)에 의해 캡처된 바와 같은, 입력 이미지 프레임들의 제1 소스로부터의 이미지 데이터에 대한 수정, 편집 및/또는 변경을 포함하는 것으로 이해될 수 있다.
제1 입력 이미지 프레임 세트(110a)와 비교하여, 제2 입력 이미지 프레임 세트(120a)에 포함된 이미지 데이터의 수정, 편집 또는 변경은 제1 입력 이미지 프레임 세트(110a)의 분석 또는 평가에 기초할 수 있다. 예를 들어, 제1 입력 이미지 프레임 세트(110a)의 이미지 프레임들의 특정 부분들을 가리기 위해 프라이버시 마스크를 생성하는 데 이미지 분석 알고리즘이 사용될 수 있다. 그 후 프라이버시 마스크는 그렇지 않으면 비어 있는 이미지 프레임에 또는 제1 입력 이미지 프레임 세트(110a)로부터 이미지 프레임의 사본에 적용될 수 있다. 프라이버시 마스크를 갖는 이미지 프레임들은 제2 입력 이미지 프레임 세트(120a)에 대응할 수 있다.
입력 이미지 프레임들의 제2 소스(402)는 비디오 캡처 장치(403)의 이미지센서(404)와 다른 센서(405)일 수 있다. 입력 이미지 프레임들의 제2 소스(402), 예를 들어 다른 센서(405)는 비디오 캡처 장치(403)의 일부일 수 있고/있거나 이미지센서(404)와 동일한 하우징 내에 수용될 수 있다. 대안적으로 입력 이미지 프레임들의 제2 소스(402)는 물리적으로 분리되어 있고/있거나 비디오 캡처 장치(403) 또는 입력 이미지 프레임들의 제1 소스(401)로부터 적어도 약간의 거리에 위치되어 있고/있거나 물리적으로 분리되어 있을 수 있다.
다른 센서(405)는 다른 이미지센서일 수 있다. 다른 센서(405)는 적외선(IR) 유형 센서, 예를 들어 IR 카메라 또는 IR 비디오 캡처 장치의 IR 이미지센서일 수 있다. IR 카메라 또는 IR 비디오 캡처 장치의 IR 이미지 센서. 다른 센서(405)는 광 센서일 수 있다. 다른 센서(405)는 무선 감지 및 거리 측정(ranging), 레이더 유형 센서일 수 있다. 다른 센서(405)는 광 검출 및 거리 측정, LIDAR 유형 센서일 수 있다. 다른 센서(405)는 모션 센서일 수 있다. 다른 센서(405)는 이미지화되는 장면의 3D 표현을 하도록 구성된 3D 촬상 센서, 열 카메라 또는 분광계일 수 있다.
제1 키는 입력 이미지 프레임들의 제1 소스(401)에 관련되거나, 이와 결부되거나, 또는 다른 방식으로 관련될 수 있다. 제1 키는 입력 이미지 프레임들의 단일 제1 소스(401), 예를 들어, 고유의 비디오 캡처 장치(403)에 관련된 개별 키일 수 있다. 대안적으로 제1 키는 이미지 프레임들의 복수의 제1 소스(401)에 대해 공유되는 키일 수 있다.
제1 키는 입력 이미지 프레임들의 제1 소스(401)를 개발, 제조, 제공 및/또는 유지관리하는 엔티티, 예를 들어 비디오 캡처 장치(403)에 속하거나 결부될 수 있다. 제1 키는 동일한 엔티티에 대해 안전하게 및/또는 배타적으로 액세스될 수 있다. 제1 키는 캡처된 이미지 데이터가 관련 관할 내에서 사용되거나 또는 처리되는 방식을 감독하거나 규제하는 사법 또는 정부 기관에 속하거나 결부될 수 있다. 입력 이미지 프레임들의 제1 소스(401)는 동일한 엔티티와 결부될 수 있다.
제1 키는, 공지된 바와 같이, 공개 키 암호법의 원리에 따라 제1 공개 키와 쌍을 이루는 제1 개인 키일 수 있다. 제1 개인 키 및 제1 공개 키는 입력 이미지 프레임들의 제1 소스(401)에서 생성되었거나 생성되었을 수 있다.
일 예로, 제1 키로 제1 서명 그룹의 서명하는 단계(S1050)는 제1 서명 그룹에 포함된 제1 인코딩된 이미지 프레임 세트(110b)의 하나 이상의 인코딩된 이미지 프레임의 이미지 데이터의 해시를 연산하고, 제1 개인 키를 사용하여 결과적인 해시를 암호화하는 것을 포함할 수 있다.
해시 함수는 암호화 해시 함수일 수 있다. 해시 함수는 보안 해시 알고리즘(SHA) 또는 디지털 서명 알고리즘(DSA) 유형의 해시 함수일 수 있다. 해시 함수는 SHA-0, SHA-1, SHA-2, SHA-3 등의 유형의 해시 함수일 수 있다.
제1 키로 서명하는 단계(S1050)는 서명을 가져올 수 있는데, 이는 제1 키를 사용한 서명의 결과로 비트 또는 바이트, 문자열 등의 집합일 수 있다. 따라서 제1 키로 서명하는 단계(S1050)와 관련된 서명은, 결합된 비디오 스트림(100)과 결부될 수 있다. 선택적으로, 공개 키는 결합된 비디오 스트림(100)과 결부될 수도 있다. 예를 들어, 서명하는 것으로부터의 하나 이상의 서명 및/또는 공개 키는 결합된 비디오 스트림에 포함될 수 있고 따라서 그 안에 포함될 수 있다. 대안적으로, 예를 들어, 서명 및/또는 공개 키는 결합된 비디오 스트림(100)과 별개일 수 있지만, 예를 들어 동일한 디렉토리, 데이터베이스, 파일 시스템 또는 저장 설비에서 또는 동일한 데이터 스트림, 채널, 연결 등을 통해 전송됨으로써 이와 결부될 수 있다.
제2 키는 입력 이미지 프레임들의 제2 소스(402)와 관련되거나, 이와 결부되거나, 또는 다른 방식으로 관련될 수 있다. 제2 키는 입력 이미지 프레임들(402)의 하나의 제2 소스(402)와 관련된 개별 키일 수 있다. 대안적으로 제2 키는 이미지 프레임들의 복수의 제2 소스(402)에 대해 공유되는 키일 수 있다.
제2 키는 입력 이미지 프레임들의 제1 소스(401)를 개발, 제조, 제공 및/또는 유지 관리하는 엔티티 및/또는 입력 이미지 프레임들의 제2 소스(402)에 대해 동일한 작업을 수행하는 엔티티에 속하거나 결부될 수 있다. 일반적으로, 이 두가지 엔티티는 다를 수 있지만, 이들은 동일할 수도 있다.
제2 키는 이미지 프레임들의 제1 및 제2 소스(401, 402)를 개발, 제조, 제공 및/또는 유지 관리하는 엔터티가 아닌 제3 엔터티에 속하거나 결부될 수 있다. 제2 키는 캡처된 이미지 데이터가 관련 관할(jurisdiction) 내에서 사용되거나 처리되는 방식을 감독하거나 규제하는 사법 또는 정부 기관(judicial or governmental entity)에 속하거나 결부될 수 있다. 제2 키는 위에서 언급한 엔터티들 중 하나에 안전하게 및/또는 배타적으로 액세스할 수 있다.
제2 키는, 제1 키와 유사하게, 공개 키 암호법에서 알려진 바와 같이 제2 공개 키와 쌍을 이루는 제2 개인 키일 수 있다. 제1 키로 서명하는 단계(S1050)과 마찬가지로, 제2 키로 서명하는 단계(S1060)에서 서명이 생성될 수 있다. 따라서 제2 키로 서명하는 단계(S1050)에 관련된 서명은, 예를 들어 결합된 비디오 스트림 내의 서명을 포함하는 것을 통해, 결합된 비디오 스트림(100)과 결부될 수 있다. 선택적으로, 제2 공개 키는 결합된 비디오 스트림(100)과 결부될 수도 있다. 대안적으로, 서명 및/또는 제2 공개 키는 제1 키로 서명하는 단계(S1050)과 관련하여 위에서 예시된 바와 같이, 어떤 다른 방식으로 결합된 비디오 스트림(100)과 결부될 수 있다.
입력 이미지 프레임들의 제2 소스(402)는 비디오 처리 유닛(406)(도 5 참조)일 수 있다. 비디오 처리 유닛(406)은 예를 들어, 바운딩 박스, 프라이버시 마스크, 표시기, 메시지 또는 텍스트, 숫자, 기호 등의 형태의 다른 오버레이 정보와 같은 그래픽 오버레이 요소들을 포함하는 이미지 프레임에 관한 이미지 데이터 또는 이를 포함하는 이미지 프레임을 생성할 수 있다.
비디오 처리 유닛(406)은 입력 이미지 프레임들의 제1 소스(401)에 의해 캡처된 이미지들을 이미지 데이터의 특정 형태로 처리하도록 적응되거나 구성될 수 있다.
비디오 처리 유닛(406)은 그래픽 오버레이 추가 기능을 포함할 수 있다. 그래픽 오버레이 추가 기능은 예를 들어 이미지 프레임에 그래픽 오버레이 요소들을 예를 들어 제1 입력 이미지 프레임 세트(110a)의 이미지 프레임들에 추가하도록 구성되거나 적용될 수 있다. .
인코더(410)(도 5 참조)는 인코딩을 수행하기 위해 하드웨어에 의존하는 물리적 하드웨어 기반의 인코더일 수 있다. 인코더(410)는 인코딩을 수행하기 위해 프로그래밍 또는 코드에 의존하는 소프트웨어 기반의 인코더일 수 있다. 또한 인코더(410)는 두가지의 조합일 수 있다. 인코더(410)는 비디오 캡처 장치(403)와 통합될 수 있다. 인코더(410)는 예를 들어 비디오 캡처 장치(403)와 같은 동일한 물리적 하우징 내에 배치될 수 있다. 인코더(410)는 비디오 캡처 장치(403)와 전기적 및/또는 무선 연결되도록 구성 및/또는 배치될 수 있다. 인코더(410)는 표준 인코더일 수 있다.
또한 도 1을 참조하면, 상기 방법 예는 인코더(410)에서 입력 이미지 프레임들의 제3 소스로부터 발생하는 이미지 데이터를 포함하는 제3 입력 이미지 프레임 세트(130a)를 수신하는 단계(S2030)를 추가로 포함할 수 있다.
상기 방법 예는 서명 유닛(411)과 같은 별도의 유닛에서, 또는 인코더(410)에서, 또는 다른 곳에서 제3 키를 사용하여 제3 인코딩된 이미지 프레임 세트(130)에 서명하는 단계(S2070)를 추가로 포함할 수 있다. 제3 키는 입력 이미지 프레임들의 제3 소스와 관련될 수 있다.
서명 단계(S1050, S1060, S2070)은 하나 이상의 이미지 프레임을 포함하는 서명 그룹에 대하여 수행된다. 일반적으로, 서명 그룹은, 결합된 비디오 스트림에서, 비디오 인코딩 분야에서 알려진 개념인 GOP(group of pictures)에서 각각의 인코딩된 이미지 프레임 세트의 이미지 프레임들에 대응할 수 있다. 대안적으로, 서명 단계는 프레임 단위로 수행될 수 있다. 이 경우, 서명 그룹은 서명된 프레임에 대응한다.
제2 서명 그룹은 제2 이미지 프레임 세트의 인코딩된 이미지 프레임들을 배타적으로 포함할 수 있다. 대안적으로, 제2 서명 그룹은 제1 인코딩된 이미지 프레임 세트 및 제2 이미지 프레임 세트 모두로부터의 이미지 프레임들을 포함할 수 있으며, 제2 서명 그룹에 있는 제1 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임은 제2 서명 그룹에 있는 제2 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임에 의해 참조된다.
서명 단계(S1050, S1060, S2070)은 인코딩 단계(S1040) 이후에 또는 인코딩과 병행하여 수행될 수 있으며, 본 개시는 어느 하나의 대안을 배제하는 것으로 이해되어서는 안 된다.
서명은 서명 유닛(411) 또는 인코더(410)의 서명 기능에 의해 수행될 수 있다.
도 3은 제1 입력 이미지 프레임 세트(110a) 및 제2 입력 이미지 프레임 세트(120a)를 인코딩하는 단계(S1040)가 어떻게 제3 입력 이미지 프레임 세트(130a)를 제3 인코딩된 이미지 프레임 세트(130b)로 인코딩하여, 결합된 비디오 스트림(100)을 형성하는 단계를 추가로 포함할 수 있는지를 도시한다. 이 도면은 어떻게 제3 인코딩된 이미지 프레임 세트(130)의 이미지 프레임이 제1 인코딩된 이미지 프레임 세트(110b)의 이미지 프레임과 제3 인코딩된 이미지 프레임 세트(130)의 다른 이미지 프레임을 모두 참조하는지를 도시한다.
도 3에서 참조들은, 도 2의 경우와 같이, 화살표들로 표시되며, 도면은 이미지 프레임들의 시간적 순서에 대응하며, 가장 왼쪽의 이미지 프레임은 제1 이미지 프레임이고 가장 오른쪽의 이미지 프레임은 마지막 이미지 프레임이 되는 것으로 이해되어야 한다.
도 3은 제1 인코딩된 이미지 프레임 세트, 제2 인코딩된 이미지 프레임 세트 및 제3 인코딩된 이미지 프레임 세트(110b, 120b, 130b)가 어떻게 결합된 비디오 스트림(100)에 배치될 수 있는지, 그리고 각각의 이미지 프레임들이 어떻게 서로를 참조하는지를 도시한다. 제1 인코딩된 이미지 프레임 세트(110b) 및 제2 인코딩된 이미지 프레임 세트(120b)에서 참조는 도 2와 관련하여 위에서 설명된 바와 같다. 또한, 제3 인코딩된 이미지 프레임 세트(130b)의 모든 프레임에 대해 도시된 바와 같이, 인코딩된 이미지 프레임은, 제1 인코딩된 이미지 프레임 세트(110b)의 인코딩된 이미지 프레임 및 제3 인코딩된 이미지 프레임 세트(130b)의 다른 인코딩된 이미지 프레임 모두를 참조할 수 있다.
이는 인코딩하는 단계(S1040)가 제1 입력 이미지 프레임 세트(110a), 제2 입력 이미지 프레임 세트(120a) 및 선택적으로 제3 입력 이미지 프레임 세트(130a)를 결합된 비디오 스트림(100)에서 제1 인코딩된 이미지 프레임 세트(110b), 제2 인코딩된 이미지 프레임 세트(120b) 및 제3 인코딩된 이미지 프레임 세트(130b)로 각각 인터 인코딩하는 단계를 포함하는 것으로 이해될 수 있다.
인코딩 단계(S1040)는 제1 입력 이미지 프레임 세트(110a), 제2 입력 이미지 프레임 세트(120a), 및 선택적으로 제3 입력 이미지 프레임 세트(130a)를 각각 결합된 비디오 스트림(100)에서 제1 인코딩된 이미지 프레임 세트(110b), 제2 인코딩된 이미지 프레임 세트(120b) 및 제3 인코딩된 이미지 프레임 세트(130b)로 예측 인코딩하는 것을 포함할 수 있다.
제3 입력 이미지 프레임 세트(130a)는 제2 입력 이미지 프레임 세트(120a)와 동일한 방식으로 이해될 수 있다. 제3 입력 이미지 프레임 세트(130a)는, 예를 들어, 제1 입력 이미지 프레임 세트(110a)에 존재하는 것, 즉, 오리지널 이미지 데이터와 상이한 또는 추가의 이미지 데이터, 또는 제2 입력 이미지 프레임 세트(120a)를 포함할 수 있다.
입력 이미지 프레임들의 제3 소스는 이미지 프레임들의 제1 및 제2 소스(401, 402)과 그 내용 또는 용도가 유사하거나 동일한 입력 이미지 프레임들의 부가 또는 추가 소스로 이해될 수 있다.
제3 키는 제2 키와 동일한 방식으로 이해될 수 있다. 제3 키는 입력 이미지 프레임들의 제3 소스에 관련되거나 결부되거나 다른 방식으로 관련될 수 있다. 제3 키는 입력 이미지 프레임들의 제3의 제1 소스와 관련된 개별 키일 수 있다. 대안적으로 제2 키는 이미지 프레임들의 복수의 제3 소스(402)에 대해 공유된 키일 수 있다. 제3 키는 제1 및 제2 키와 유사하게 해시 함수 키일 수 있다.
제1 키로 서명하는 단계(S1050) 및 제2 키로 서명하는 단계(S1060)와 마찬가지로 제3 키로 서명하는 단계(S2070)는 서명이 생성될 수 있으며, 이는 예를 들어 해시일 수 있다. 따라서 제3 키로 서명하는 단계(S2070)과 관련된 서명은, 예를 들어 결합된 비디오 스트림 내의 서명을 포함하는 것을 통해, 결합된 비디오 스트림(100)과 결부될 수 있다. 대안적으로, 서명은, 위에서 예시된 바와 같이, 결합된 비디오 스트림(100)과 일부 다른 방식으로 결부될 수 있다.
대응하는 추가 키들이 있는 이미지 프레임들의 추가 소스들로부터의 추가 이미지 프레임 세트들이 본 명세서에 개시된 3개의 이미지 프레임 세트, 이미지 프레임들의 소스 및 키들과 동일한 원리에 따라 전적으로 가능하다.
일 예는 인코더(401)에서, 제1 인코딩된 이미지 프레임 세트(110b)를 디스플레이되지 않을 이미지 프레임들로서 지정하는 단계(S2042)를 추가로 포함할 수 있다.
또한, 상기 예는 인코더(401)에서, 제2 인코딩된 이미지 프레임 세트(120b) 및/또는 제3 인코딩된 이미지 프레임 세트(130b)를 디스플레이될 이미지 프레임들로 지정하는 단계를 추가로 포함할 수 있다.
이에 의해, 인코딩된 이미지 프레임 세트들(110b, 120b, 130b) 중 어느 하나의 이미지 프레임들은 사용되는 비디오 코딩 형식에 따라 예를 들어 디스플레이되지 않는 것, 즉 디스플레이 없음으로 지정, 마크 또는 태깅될 수 있다.
표시되지 않을 이미지 프레임들의 이러한 지정은 예를 들어 H.265, H.266/VVC, EVC 및 AV1와 같은 비디오 코딩 표준에서 정의된 바와 같이, 각각의 프레임에서 ND(No Display; 디스플레이 없음) 플래그의 형태를 취할 수 있다.
대안적으로 이미지 프레임 세트들(110b, 120b, 130b) 중 어느 하나의 이미지 프레임들은 사용된 비디오 코딩 형식에 따라, 디스플레이, 즉 디스플레이되도록 지정, 마크 또는 태깅될 수 있다. 인코딩된 이미지 프레임들에 대해 지정, 마킹 또는 태깅이 수행될 수 있다.
제1 인코딩된 이미지 프레임 세트를 예를 들어 ND 플래그로 태깅(tagging)하는 것은, 기존 디코더로 디코딩할 때 출력 비디오 스트림에 그들이 포함되지 않는 것을 가져올 방식으로, 결합된 비디오 스트림(100)에 서명된 제1 인코딩된 이미지 프레임 세트(110b)를 포함할 가능성을 제공한다. 오히려, 그러면, 디코딩된 이미지 프레임들이, 참조에 기인하여 제1 및 제2 이미지 프레임 세트의 결합된 이미지 데이터를 포함하여, 디코더로부터의 출력 비디오 스트림에 포함될 것이다. 또한 제3 인코딩된 이미지 프레임 세트(103b)가 결합된 비디오 스트림(100)에 포함되는 상황에서도 동일하게 적용된다.
실제, 표준 디코더는 예를 들어 디스플레이, 분석 또는 저장을 위해 디스플레이-없음 이미지 프레임들로 지정, 마크 또는 태그된 이미지 프레임들을 출력 비디오 스트림으로 전달하거나 전송하지 않을 것이다. 반대로, 표준 디코더는 예를 들어 디스플레이, 분석 또는 저장을 위해 디스플레이 이미지 프레임들로 지정, 마크 또는 태그된 이미지 프레임들을 출력 비디오 스트림으로 전달하거나 전송할 것이다.
도 4는 도 1과 관련하여 위에서 개시된 것에 더하여 추가적인 선택적인 단계들을 포함하는 비디오 스트림을 처리하는 방법 예를 도시한다.
이 예는 결합된 비디오 스트림(100)을 디코더(420)(도 5 참조)에서 디코딩하는 단계(S3080)를 추가로 포함할 수 있다.
예를 들어, 디코딩은 디코딩된 이미지 프레임 세트(230)를 포함하는 디코딩된 비디오 스트림을 가져올 수 있다(도 5 참조). 디코딩된 이미지 프레임 세트(230)는 제2 입력 이미지 프레임 세트(120a)에 의해 수정된 바와 같은, 제1 입력 이미지 프레임 세트(110a)에 대응할 수 있다. 이는, 예를 들어, 표준 디코더로서 작동하는 디코더(420)의 경우일 수 있다.
추가적으로 또는 대안적으로, 디코딩은, 전술한 바와 같이, 예를 들어 결합된 비디오 스트림으로부터 디스플레이되지 않을 태그가 붙은 프레임들을 추출하는 디코더(420)를 통해, 제1 입력 이미지 프레임 세트(110a)에 직접 대응하는 다른 디코딩된 이미지 프레임 세트(110c)(도 5 참조)를 포함하는 또 다른 디코딩된 비디오 스트림을 가져올 수 있다.
디코더(420)는 디코딩을 수행하기 위해 하드웨어에 의존하는 물리적 하드웨어 기반 디코더일 수 있다. 디코더(420)는 디코딩을 수행하기 위해 프로그래밍 또는 코드에 의존하는 소프트웨어 기반 디코더일 수 있다. 디코더(420)는 또한 상기 둘의 조합일 수 있다. 디코더(420)는 비디오 캡처 장치(403), 저장 유닛, 디스플레이 유닛(430), 또는 디스플레이 장치와 통합될 수 있다. 디코더(420)는 예를 들어, 비디오 캡처 장치(403), 저장 유닛, 디스플레이 유닛(430) 또는 디스플레이 장치와 동일한 물리적 하우징 내에 위치할 수 있다. 디코더(420)는 비디오 캡처 디바이스(403), 저장 유닛, 디스플레이 유닛(430) 및/또는 디스플레이 장치와 전기 및/또는 무선 연결되도록 구성 및/또는 배치될 수 있다. 디코더(420)는 표준 디코더일 수 있다.
이미지 프레임 서명 또는 서명의 체크 단계(S3090)는 디코딩 단계(S3080) 이전, 병행하여 또는 이후에 수행될 수 있다.
이미지 프레임 서명의 체크 단계(S3090)는 서명 시 사용된 개인 키에 대응하는 공개 키를 사용할 수 있다. 공개 키는 결합된 이미지 스트림(100)으로부터 검색되었을 수 있다. 대안적으로, 공개 키는, 전송된 비디오 데이터에 유효성 검사가 필요할 때 동시에 사용할 준비가 된, 카메라 식별자와 같은 대응 이미지 소스 식별자와 함께 저장되었을 수 있다. 확인 단계(S3090)는 공개 키를 사용하여 서명을 포함하는 해시를 해독하여, 해시의 결과를 다시 사용할 수 있도록 하는 단계를 포함할 수 있다. 추가의 해시가, 서명동안 사용된 것과 동일한 해시 알고리즘을 사용하여, 수신된 이미지 데이터에 기초하여 연산될 수 있으며, 결과적인 추가의 해시는 해독된 해시와 비교되어 송신자의 신원과 비디오 데이터가 수정되지 않았다는 것을 확인할 수 있다.
체크 단계는 GOP 단위 또는 프레임 단위와 같이 서명 그룹 단위로 수행될 수 있다. 체크는 서명 체커 유닛(431)에 의해 수행될 수 있다. 체크는 서명 결과를 발행할 수 있다. 결과는 예를 들어 정상(ok) 또는 비정상(not ok) 결과의 형태일 수 있다. 정상 또는 비정상과 같은 결과에 기초하여, 서명 체커 유닛(431) 또는 디코더(420)는 디코딩된 이미지 프레임에서, 예를 들어, 이미지 프레임(230)의 디코딩된 세트 또는 디코딩된 이미지 프레임(110c)의 다른 세트의 일부로서, 각각의 정상 또는 비정상 상태에 따라 선택된 그리고 이에 관련된 대응하는 마커(421, 422)를 배치할 수 있다(S3092). 따라서, 마커의 특성은 체크의 결과에 관련된 데이터를 구성하고, 해당 데이터는 이미지 프레임이 일부를 형성하는 디코딩된 비디오 스트림과 결부된다.
디코더(420) 또는 저장 장치, 또는 디스플레이 장치 또는 비디오 재생 장치는 상기 서명 체커 유닛(431)(도 5 참조)을 포함할 수 있다. 서명 체커 유닛(431)은 예를 들어, 전기적 또는 무선 연결에 의해 통신 가능하게 디코더(420)에 연결될 수 있다. 서명 체커 유닛(431)은 디코더(420)에 물리적으로 연결되거나 디코더와 통합될 수 있다.
이미지 프레임의 출처 또는 출처의 진위를 결정하는 단계(S3100)는 디코딩 단계(S3080)를 수행하기 전에, 병렬로, 또는 후에 수행될 수 있다. 이 체크는 프레임 단위로 수행될 수 있고, 예를 들어 프레임이 표시되지 않을 이미지로 지정되었는지 아니면 표시되지 않는 이미지로 지정되지 않았는지에 기초할 수 있다. 대안적으로, 출처 체크는 결합된 비디오 스트림의 서명에 기초할 수 있다.
출처 체크는 출처 체커 유닛(432)(도 5 참조)에 의해 또는 디코더(420)에서 수행될 수 있다. 상기 프레임이 표시되지 않을 이미지 프레임으로 지정되었다면, 출처 체크는 이미지 프레임이 입력 이미지 프레임들의 제1 소스로부터 생성된 것으로 결정할 수 있다. 상기 프레임이 표시되지 않을 이미지 프레임으로 지정되지 않았다면, 출처 체크는 이미지 프레임의 적어도 일부가 입력 이미지 프레임들의 제2 소스로부터 생성되었된 것으로 결정할 수 있다.
이미지 프레임이 출처 체커 유닛(432)에 의해 이미지 프레임들의 제2 소스의 이미지 프레임들의 제1 소스로부터 유래되었는지 여부를 결정하는 것에 기초하여, 출처 체커 유닛(432) 또는 디코더(420)는 이미지 프레임에서 이미지 프레임들의 제1 소스에 관련된 마커(421) 또는 이미지 프레임들의 제2 소스에 관련된 마커(422)를 배치할 수 있다(S3012).
따라서, 마커(421, 422)는 판단 S3010의 결과에 기초하여 데이터를 구성하고, 그 데이터는 마커(421, 422)의 형태로 이미지 프레임과 결부된다.
디코더(420) 또는 디스플레이 장치 또는 비디오 재생 장치는 상기 출처 체커 유닛(432)을 포함할 수 있다. 출처 체커 유닛(432)은 예를 들어, 전기적 또는 무선 연결에 의해, 디코더(420)에 통신 가능하게 연결될 수 있다. 출처 체커 유닛(432)은 디코더(420)에 물리적으로 연결되거나 디코더(420)와 통합될 수 있다.
마커(421, 422)에 대안적으로 또는 이에 추가하여, 서명 체크의 결과에 관한 데이터 및/또는 출처의 결정에 기초한 데이터는 디코딩된 이미지 프레임 세트(110c, 230)의 이미지 프레임의 헤더에 추가될 수 있다. 데이터는 디코딩된 이미지 프레임 세트(110c)의 이미지 프레임의 로그에 추가될 수 있다. 데이터는 디코딩된 이미지 프레임 세트(110c, 230)의 이미지 프레임의 메타데이터에 추가될 수 있다.
마커(421, 422)는 변경된 픽셀 값과 같이, 디코딩된 이미지 프레임 세트(110c, 230)의 이미지 프레임에 직접 추가될 수 있다. 마커(421, 422)는 그래픽 오버레이 요소, 예를 들어 바운딩 박스, 프라이버시 마스크, 표시기, 메시지, 또는 텍스트, 숫자, 기호 등의 형태로 된 다른 유형의 오버레이 정보를 포함할 수 있다. 마커(421, 422)는 디코딩된 이미지 프레임 세트(110c, 230)의 이미지 프레임의 코너 근처 및/또는 에지 근처에 추가될 수 있다.
데이터는 디코더(420) 또는 디코딩된 결합 비디오 스트림을 재생하는 디스플레이 장치 또는 유닛이 디코딩된 이미지 프레임 세트(110c, 230)의 이미지 프레임의 픽셀들을 수정함으로써 미리 정의된 마킹을 준비하게 하도록 구성될 수 있다. 마커(421)는 이미지 프레임들의 출처를 나타내도록 구성될 수 있다. 마커(421, 422)는 입력 이미지 프레임들의 제1 소스(401)가 디코딩된 이미지 프레임 세트(110c, 230)의 진정한 출처인지 여부를 나타내도록 구성될 수 있다.
마커(421, 422)는 입력 이미지 프레임들의 제1 소스(401)와 결부된 아이콘, 이미지 및/또는 로고 타입을 포함할 수 있다. 마커(421, 422)는 이미지 프레임들의 제1 소스(401)가 디코딩된 이미지 프레임 세트(110c, 230)의 진정한 출처인지 여부를 나타내기 위해, 컬러 코딩을 포함할 수 있다. 예를 들어, 녹색으로 채색된 마커(421, 422)는 이미지 프레임들의 제1 소스(401)가 디코딩된 이미지 프레임 세트(110c, 230)의 진정한 출처인 것을 나타낼 수 있고 적색으로 채색된 추가된 마커(421)는 그렇지 않은 것을 나타낼 수 있다.
데이터, 예를 들어, 마커(421, 422)는 문제의 이미지 프레임이 캡처 이후에 수정, 편집 또는 변경되었는지 여부를 비디오 스트림을 보는 오퍼레이터에게 나타내도록 적응되거나 구성될 수 있다.
일부 실시예들에서, 이미지 프레임들의 제1 소스(401)가 입력 이미지 프레임 세트(110a)의 진정한 출처로 결정되면, 데이터가 추가되지 않는다. 이 경우, 데이터는 이미지 프레임들의 제1 소스(401)가 입력 이미지 프레임 세트(110a)의 진정한 출처로 결정되지 않은 경우에만 추가될 수 있다.
위에서 설명된 교시들은 컴퓨터로 구현될 수 있다. 이를 위해, 비일시적 컴퓨터 판독가능 저장 매체가 제공될 수 있다. 비일시적 컴퓨터 판독 가능 저장 매체는 처리 능력을 갖는 장치 상에서 실행될 때, 방법 예를 구현하기 위해 저장된 명령어들을 포함한다.
비일시적 컴퓨터 판독가능 저장 매체 및/또는 처리 능력을 갖는 장치는 인코더(410) 및/또는 디코더(420)의 일부이거나 예를 들어 전기적 및/또는 무선 연결에 의해 인코더(410) 및/또는 디코더(420)에 통신가능하게 연결될 수 있다. 비일시적 컴퓨터 판독가능 저장 매체 및/또는 처리 능력을 갖는 장치는 인코더(410) 및/또는 디코더(420)에 물리적으로 연결되고/되거나 인코더(410) 및/또는 디코더(420)와 통합될 수 있다.
추가로, 개시된 실시예들에 대한 변형이 도면, 개시내용 및 첨부된 청구범위의 연구로부터, 청구된 발명을 실시함에 있어 당업자에 의해 이해되고 영향을 받을 수 있다.

Claims (15)

  1. 비디오 스트림을 처리하는 방법으로서,
    입력 이미지 프레임들의 제1 소스로부터 발생하는 이미지 데이터를 포함하는 제1 입력 이미지 프레임 세트를 수신하는 단계;
    입력 이미지 프레임들의 제2 소스로부터 발생하는 이미지 데이터를 포함하는 제2 입력 이미지 프레임 세트를 수신하되, 상기 제2 입력 이미지 프레임 세트는 상기 제1 입력 이미지 프레임 세트에 대한 수정 또는 변경을 포함하는 단계;
    상기 제1 입력 이미지 프레임 세트 및 상기 제2 입력 이미지 프레임 세트를 각각 제1 인코딩된 이미지 프레임 세트 및 제2 인코딩된 이미지 프레임 세트로 인코딩하여, 결합된 비디오 스트림을 형성하되, 상기 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임은 상기 제1 인코딩된 이미지 프레임 세트의 하나 이상의 다른 인코딩된 이미지 프레임을 배타적으로 참조하고, 상기 제2 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임은 상기 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임과 상기 제2 인코딩된 이미지 프레임 세트의 다른 인코딩된 이미지 프레임을 모두 참조하는 단계;
    제1 키를 사용하여, 상기 제1 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제1 서명 그룹에 서명하되, 상기 제1 키는 입력 이미지 프레임들의 제1 소스와 관련되는 단계; 및
    제2 키를 사용하여, 상기 제2 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제2 서명 그룹에 서명하되, 상기 제2 키는 입력 이미지 프레임들의 제2 소스와 관련되는 단계를 포함하는, 방법.
  2. 제1항에 있어서,
    상기 제2 서명 그룹은 상기 제2 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임에 의해 참조되는 상기 제1 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임을 추가로 포함하는, 방법.
  3. 제1항에 있어서,
    입력 이미지 프레임들의 제3 소스로부터 발생하는 이미지 데이터를 포함하는 제3 입력 이미지 프레임 세트를 수신하는 단계를 추가로 포함하고,
    상기 인코딩하는 단계는 제3 입력 이미지 프레임 세트를 제3 인코딩된 이미지 프레임 세트로 인코딩하여, 결합된 비디오 스트림의 일부분을 형성하는 단계를 추가로 포함하고, 상기 제3 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임은 상기 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임 및 상기 제3 인코딩된 이미지 프레임 세트의 다른 인코딩된 이미지 프레임 모두를 참조하며, 상기 방법은:
    제3 키를 사용하여, 제3 인코딩된 이미지 프레임 세트의 하나 이상의 이미지 프레임을 포함하는 제3 서명 그룹에 서명하는 단계를 추가로 포함하며, 상기 제3 키는 입력 이미지 프레임들의 제3 소스에 관한 것인, 방법.
  4. 제1항에 있어서,
    상기 제1 인코딩된 이미지 프레임 세트를 디스플레이되지 않을 이미지 프레임들로 지정하는 단계를 추가로 포함하는, 방법.
  5. 제1항에 있어서,
    상기 입력 이미지 프레임들의 제1 소스는 비디오 캡처 디바이스의 이미지센서인, 방법.
  6. 제5항에 있어서,
    상기 입력 이미지 프레임들의 제2 소스는 상기 비디오 캡처 디바이스의 이미지센서와 다른 센서인, 방법.
  7. 제1항에 있어서,
    상기 입력 이미지 프레임들의 제2 소스는 비디오 처리 유닛인, 방법.
  8. 제7항에 있어서,
    상기 비디오 처리 유닛은 그래픽 오버레이 추가 기능을 포함하는, 방법.
  9. 제1항에 있어서,
    상기 제1 키는 해시 함수 키이고, 그리고/또는 상기 제2 키는 해시 함수 키인, 방법.
  10. 제1항에 있어서,
    상기 인코딩하는 단계는 상기 제1 입력 이미지 프레임 세트 및 상기 제2 입력 이미지 프레임 세트를 상기 제1 인코딩된 이미지 프레임 세트 및 상기 제2 인코딩된 이미지 프레임 세트로 각각 인터 및/또는 예측 인코딩하는 단계를 포함하는, 방법.
  11. 제1항에 있어서,
    상기 제1 키를 사용하여 서명하는 것에 관한 서명, 및
    상기 제2 키를 사용하여 서명하는 것에 관한 서명 중 적어도 하나를 상기 결합된 비디오 스트림과 결부시키는 단계를 추가로 포함하는, 방법.
  12. 제1항에 있어서,
    디코더에서, 상기 결합된 비디오 스트림을 디코딩하는 단계;
    상기 결합된 비디오 스트림에 포함된 서명을 체크하는 단계; 및
    상기 체크의 결과에 관한 데이터를 디코딩된 비디오 스트림과 결부시키는 단계를 추가로 포함하는, 방법.
  13. 제1항에 있어서,
    디코더에서, 상기 결합된 비디오 스트림을 디코딩하는 단계;
    상기 결합된 비디오 스트림의 이미지 프레임의 출처를 결정하는 단계;
    상기 출처의 결정에 기초한 데이터를 상기 이미지 프레임과 결부시키는 단계를 추가로 포함하는, 방법.
  14. 처리 능력을 갖는 장치 상에서 실행될 때, 제1항 내지 제13항 중 어느 한 항에 따른 방법을 구현하기 위한 명령어들이 저장된, 비일시적 컴퓨터 판독가능 저장 매체.
  15. 이하를 수행하도록 구성된 프로세서를 포함하는 비디오 처리 시스템:
    입력 이미지 프레임들의 제1 소스로부터 발생하는 이미지 데이터를 포함하는 제1 입력 이미지 프레임 세트를 수신하고;
    입력 이미지 프레임들의 제2 소스로부터 발생하는 이미지 데이터를 포함하는 제2 입력 이미지 프레임 세트를 수신하되, 상기 제2 입력 이미지 프레임 세트는 상기 제1 이미지 프레임 세트에 대한 수정 또는 변경을 포함하고;
    제1 입력 이미지 프레임 세트 및 제2 입력 이미지 프레임 세트를 각각 제1 인코딩된 이미지 프레임 세트 및 제2 인코딩된 이미지 프레임 세트로 인코딩하여, 결합된 비디오 스트림을 형성하되, 상기 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임은 제1 인코딩된 이미지 프레임 세트 중 하나 이상의 이미지 프레임을 배타적으로 참조하고, 상기 제2 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임은 상기 제1 인코딩된 이미지 프레임 세트의 인코딩된 이미지 프레임 및 상기 제2 인코딩된 이미지 프레임 세트의 다른 인코딩된 이미지 프레임을 모두 참조하며,
    제1 키를 사용하여, 상기 제1 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제1 서명 그룹에 서명하되, 상기 제1 키는 입력 이미지 프레임들의 제1 소스에 관련된 것이며;
    제2 키를 사용하여, 상기 제2 인코딩된 이미지 프레임 세트의 하나 이상의 인코딩된 이미지 프레임을 포함하는 제2 서명 그룹에 서명하되, 상기 제2 키는 입력 이미지 프레임들의 제2 소스에 관련됨.
KR1020210166131A 2020-12-23 2021-11-26 수정된 비디오의 인코딩 KR20220091371A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP20216915.7A EP4020998A1 (en) 2020-12-23 2020-12-23 Encoding of modified video
EP20216915.7 2020-12-23

Publications (1)

Publication Number Publication Date
KR20220091371A true KR20220091371A (ko) 2022-06-30

Family

ID=73857052

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210166131A KR20220091371A (ko) 2020-12-23 2021-11-26 수정된 비디오의 인코딩

Country Status (6)

Country Link
US (1) US20220201312A1 (ko)
EP (1) EP4020998A1 (ko)
JP (1) JP2022100261A (ko)
KR (1) KR20220091371A (ko)
CN (1) CN114666589A (ko)
TW (1) TW202226841A (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11790694B1 (en) * 2021-02-17 2023-10-17 Bank Of America Corporation Video player for secured video stream

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2602332C1 (ru) * 2013-01-21 2016-11-20 Долби Лабораторис Лайсэнзин Корпорейшн Перекодировка метаданных
US10297126B2 (en) * 2015-09-16 2019-05-21 Sensormatic Electronics, LLC Privacy masking video content of alarm exceptions and mask verification
US10122781B2 (en) * 2016-01-29 2018-11-06 Roku Inc. Selection of video segments for adaptive streaming
US10652594B2 (en) * 2016-07-07 2020-05-12 Time Warner Cable Enterprises Llc Apparatus and methods for presentation of key frames in encrypted content
EP3672244B1 (en) * 2018-12-20 2020-10-28 Axis AB Methods and devices for encoding and decoding a sequence of image frames in which the privacy of an object is protected

Also Published As

Publication number Publication date
TW202226841A (zh) 2022-07-01
CN114666589A (zh) 2022-06-24
EP4020998A1 (en) 2022-06-29
JP2022100261A (ja) 2022-07-05
US20220201312A1 (en) 2022-06-23

Similar Documents

Publication Publication Date Title
US9094733B2 (en) Methods and systems for cryptographic access control of video
Lin et al. Issues and solutions for authenticating MPEG video
US11178123B2 (en) Video communication data security
Fridrich Security of fragile authentication watermarks with localization
JP4602931B2 (ja) 画像セットの完全性を保証する方法
JP4313873B2 (ja) 電子機器及びデータ処理方法
JP4097773B2 (ja) デジタル画像編集システム
US8938095B2 (en) Verification method, verification device, and computer product
CN102932650B (zh) 视频数据完整性保护和验证方法、设备和系统
US20220201312A1 (en) Encoding of modified video
KR101200345B1 (ko) 점진적 차이값 히스토그램 기반의 가역 워터마킹을 이용한 블록단위 영상 인증방법
CN115280791A (zh) 数字媒体完整性的指示
US20230179787A1 (en) Method and device for signing an encoded video sequence
CN110544199A (zh) 一种图像处理方法、装置、存储介质和电子设备
WO2024040474A1 (zh) 加密图像水印处理方法及装置、显示设备
EP4195661A1 (en) Methods of adding and validating a digital signature in a video data segment
Alaa Watermarking Images for Fact–Checking and Fake News Inquiry
Sudha et al. Efficient Analysis And Secure Client Side Image Using Fingerprint Embedding
US20240048394A1 (en) Validation of signatures of a video stream encoded in layers
EP4369704A1 (en) Signing video for reduced bit rate
CN115695909A (zh) 视频播放方法、电子设备及存储介质
Shah et al. Collaborative Blockchain-based Crypto-Efficient Scheme for Protecting Visual Contents
CN115695942A (zh) 视频分发方法、装置、电子设备及存储介质
CN116249981A (zh) 视频编解码中的图像分割
CN115550730A (zh) 视频发布方法、装置、电子设备及存储介质