KR102525127B1 - 수정된 이미지들에서 원본 이미지들 복원하기 위한 방법 및 장치 - Google Patents

수정된 이미지들에서 원본 이미지들 복원하기 위한 방법 및 장치 Download PDF

Info

Publication number
KR102525127B1
KR102525127B1 KR1020180084977A KR20180084977A KR102525127B1 KR 102525127 B1 KR102525127 B1 KR 102525127B1 KR 1020180084977 A KR1020180084977 A KR 1020180084977A KR 20180084977 A KR20180084977 A KR 20180084977A KR 102525127 B1 KR102525127 B1 KR 102525127B1
Authority
KR
South Korea
Prior art keywords
image
modified
pixel
information
residual
Prior art date
Application number
KR1020180084977A
Other languages
English (en)
Other versions
KR20190074189A (ko
Inventor
다니엘 안솔레구이
알베르트 사-가리가
토마조 마에스트리
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to EP18890347.0A priority Critical patent/EP3714425B1/en
Priority to PCT/KR2018/012502 priority patent/WO2019124708A1/en
Priority to US16/771,433 priority patent/US11455757B2/en
Priority to CN201880077256.9A priority patent/CN111406276B/zh
Publication of KR20190074189A publication Critical patent/KR20190074189A/ko
Application granted granted Critical
Publication of KR102525127B1 publication Critical patent/KR102525127B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/003—Reconstruction from projections, e.g. tomography
    • G06T11/006—Inverse problem, transformation from projection-space into object-space, e.g. transform methods, back-projection, algebraic methods
    • G06T5/001—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/77—Retouching; Inpainting; Scratch removal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/602—Providing cryptographic facilities or services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/606—Protecting data by securing the transmission between two devices or processes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0021—Image watermarking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/08—Key distribution or management, e.g. generation, sharing or updating, of cryptographic keys or passwords
    • H04L9/0816—Key establishment, i.e. cryptographic processes or cryptographic protocols whereby a shared secret becomes available to two or more parties, for subsequent use
    • H04L9/0819—Key transport or distribution, i.e. key establishment techniques where one party creates or otherwise obtains a secret value, and securely transfers it to the other(s)
    • H04L9/0825—Key transport or distribution, i.e. key establishment techniques where one party creates or otherwise obtains a secret value, and securely transfers it to the other(s) using asymmetric-key encryption or public key infrastructure [PKI], e.g. key signature or public key certificates
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/08—Key distribution or management, e.g. generation, sharing or updating, of cryptographic keys or passwords
    • H04L9/0861—Generation of secret information including derivation or calculation of cryptographic keys or passwords
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/08—Key distribution or management, e.g. generation, sharing or updating, of cryptographic keys or passwords
    • H04L9/0891—Revocation or update of secret information, e.g. encryption key update or rekeying
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/08—Key distribution or management, e.g. generation, sharing or updating, of cryptographic keys or passwords
    • H04L9/0894—Escrow, recovery or storing of secret information, e.g. secret key escrow or cryptographic key storage
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20224—Image subtraction

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Health & Medical Sciences (AREA)
  • Bioethics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Algebra (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Physics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Image Processing (AREA)

Abstract

이미지를 처리하기 위한 방법으로서, 제1 이미지를 수정된 제2 이미지와 비교하는 과정과, 상기 수정된 제2 이미지는 적어도 하나의 대체된 픽셀의 적어도 하나의 픽셀 값이 수정된 상기 제1 이미지의 사본을 포함하고, 상기 비교의 결과에 기초하여, 상기 수정된 제2 이미지와 결합되어 상기 제1 이미지를 복원할 수 있는 제1 이미지 복원 정보를 생성하는 과정을 포함하는 이미지를 처리하기 위한 방법이 개시된다. 대응하는 이미지를 복원하기 위한 방법은 이미지 복원 정보를 수정된 제2 이미지와 결합하여 제1 이미지를 복원하는 과정을 포함한다. 상기 방법들을 구현하기 위한 장치가 또한 개시된다.

Description

수정된 이미지들에서 원본 이미지들 복원하기 위한 방법 및 장치 {METHOD AND APPARATUS FOR RECONSTRUCTION OF ORIGINAL IMAGES FROM MODIFIED IMAGES}
본 개시(disclosure)는 수정된 이미지 사본으로부터 원본 이미지가 복원될 수 있게 하는 방법, 장치 및 컴퓨터 프로그램에 관한 것이다.
멀티미디어 컨텐츠를 만들 때, 일부 컨텐츠 제작자는 원본 컨텐츠를 다양한 방식으로 수정하고자 할 수 있다. 예를 들어, 이미지나 비디오와 같은 원본 컨텐츠는 워터마크 추가, 개인 정보와 충돌되는 컨텐츠 변경(예를 들어, 로고 또는 얼굴 흐리게 하기), 아이콘, 글 쓰기 또는 색칠하기와 같은 꾸미기 추가, 필터 적용 또는 대화형 객체 추가에 의해서 편집 중에 수정될 수 있다. 편집된 이미지나 비디오를 만들기 위해 원본 컨텐츠가 수정되면, 원본 컨텐츠는 영구적으로 소실된다. 필요한 경우, 원본 컨텐츠의 사본을 편집된 이미지나 비디오와 함께 저장함으로써, 원본 컨텐츠를 보존할 수도 있다.
이미지 복원 기술은 이미지의 미지 영역을 채우는 것과 관련된 기술로서, 사본 이미지의 수정된 부분을 제거하고, 원본 이미지의 제거된 부분을 회복하는 것을 포함한다. 수정된 사본 이미지로부터 원본 이미지를 효율적으로 복원하기 위한 방법이 필요하다. 본 발명은 이러한 맥락에서 이루어진 것이다.
상술한 바와 같은 논의를 바탕으로, 본 개시(disclosure)는, 상기의 기술적 과제를 달성하기 위한 본 개시의 다양한 실시 예들에 따르면, 수정된 이미지 사본으로부터 원본 이미지를 복원하기 위한 방법 및 장치를 제공한다.
본 개시의 다양한 실시 예들에 따르면, 이미지 처리 방법에 있어서, 제1 이미지를 수정된 제2 이미지와 비교하는 과정과, 상기 수정된 제2 이미지는 적어도 하나의 대체된 픽셀의 픽셀 값들이 수정된 상기 제1 이미지의 사본을 포함하고, 상기 비교의 결과에 기초하여, 상기 수정된 제2 이미지와 결합되어 상기 제1 이미지를 복원할 수 있는 제1 이미지 복원 정보를 생성하는 과정을 포함하는 이미지 처리 방법이 제공된다.
본 개시의 다양한 실시 예들에 따르면, 이미지를 복원하기 위한 방법에 있어서, 수정된 제2 이미지와 연관된 제1 이미지 복원 정보를 획득하는 과정과, 제1 이미지를 복원하기 위해 상기 제1 이미지 복원 정보를 상기 수정된 제2 이미지와 결합하는 과정을 포함하고, 상기 수정된 제2 이미지는 적어도 하나의 픽셀이 대체된 상기 제1 이미지의 사본을 포함하는 방법이 제공된다.
본 개시의 다양한 실시 예들에 따르면, 비일시적 컴퓨터 판독 가능 저장 매체에 있어서, 실행될 때에, 상기 방법을 수행하는 컴퓨터 프로그램 명령들을 저장하도록 구성된 비일시적 컴퓨터 판독가능 저장 매체가 제공된다.
본 개시의 다양한 실시 예들에 따르면, 이미지를 처리하기 위한 장치에 있어서, 적어도 하나의 프로세서; 및 상기 적어도 하나의 프로세서에 의해 실행 가능한 컴퓨터 프로그램 명령들을 저장한 메모리를 포함하고, 상기 적어도 하나의 프로세서는, 제1 이미지를 수정된 제2 이미지와 비교하고, 상기 수정된 제2 이미지는 적어도 하나의 픽셀이 대체된 상기 제1 이미지의 사본을 포함하며, 상기 비교의 결과에 기초하여, 상기 수정된 제2 이미지와 결합되어 상기 제1 이미지를 복원할 수 있는 이미지 복원 정보를 생성하도록 구성된 장치가 제공된다.
본 개시의 다양한 실시 예들에 따르면, 이미지를 복원하기 위한 장치에 있어서, 적어도 하나의 프로세서; 및 상기 적어도 하나의 프로세서에 의해 실행 가능한 컴퓨터 프로그램 명령들을 저장한 메모리를 포함하고, 상기 적어도 하나의 프로세서는, 수정된 제2 이미지와 연관된 이미지 복원 정보를 획득하고, 제1 이미지를 복원하기 위해 상기 이미지 복원 정보를 상기 수정된 제2 이미지와 결합하도록 구성되며, 상기 수정된 제2 이미지는 적어도 하나의 픽셀이 대체된 상기 제1 이미지의 사본을 포함하는 장치가 제공된다.
본 개시의 다양한 실시 예들에 따르면, 수정된 이미지 사본으로부터 원본 이미지의 복원을 수행할 수 있다.
본 개시에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
이하, 첨부된 도면들을 참고하여 본 개시의 실시 예들에 대해 단지 예시의 방법으로 설명하도록 한다.
도 1은 본 개시의 일 실시 예에 따른 이미지를 처리하기 위한 방법을 나타내는 흐름도를 도시한다.
도 2는 본 개시의 일 실시 예에 따른 원본 이미지와 추가 컨텐츠를 결합함으로써 얻어진 수정된 이미지를 도시한다.
도 3은 본 개시의 일 실시 예에 따른 이미지 복원 정보를 생성하는 방법을 도시한다.
도 4는 본 개시의 일 실시 예에 따른 이미지 복원 정보를 사용하여 원본 이미지를 복원하는 방법을 도시한다.
도 5는 본 개시의 일 실시 예에 따른 이미지를 복원하기 위한 방법을 나타내는 흐름도를 도시한다.
도 6은 본 개시의 일 실시 예에 따른 제1 수정된 이미지 및 제2 수정된 이미지에 대한 제1 이미지 복원 정보 및 제2 이미지 복원 정보를 생성하는 방법을 도시한다.
도 7은 본 개시의 일 실시 예에 따른 제1 이미지 복원 정보 및 제2 이미지 복원 정보를 사용하여 제1 수정된 이미지 및 원본 이미지를 복원하는 방법을 도시한 것이다.
도 8은 본 개시의 일 실시 예에 따른 이미지를 처리하기 위한 장치 및 이미지를 복원하기 위한 장치를 포함하는 시스템을 도시한 것이다.
도 9는 본 개시의 일 실시 예에 따른 이미지를 처리하기 위한 방법을 나타내는 흐름도를 도시한다.
도 10은 본 개시의 일 실시 예에 따른 이미지를 복원하기 위한 방법을 나타내는 흐름도를 도시한다.
이하의 상세한 설명에서는, 본 개시의 특정한 예시적인 실시 예들이 단지 예시로서 도시 및 설명되어 있다. 당업자가 알 수 있는 바와 같이, 본 설명된 실시 예들은 본 개시의 범위를 일탈하지 않는 범위 내에서 다양한 방식으로 수정될 수 있다. 따라서, 도면 및 설명은 본질적으로 한정이 아닌 예시적인 것으로 간주되어야한다. 명세서 전체에 걸쳐 동일한 참고 부호는 동일한 구성 요소를 지칭한다.
도 1을 참고하면, 본 개시의 일 실시 예에 따른 이미지 처리 방법을 나타내는 흐름도가 도시되어 있다. 실시 예에 따르면, 본 방법의 모든 단계들이 동일한 장치에서 수행될 수 있거나, 또는 상이한 단계들이 상이한 장치들에서 수행될 수도 있다. 도 1에 도시된 단계들 중의 임의의 단계는 특정 실시 예에 따라 소프트웨어 또는 하드웨어로 수행될 수도 있다. 하나 이상의 단계들이 소프트웨어로 수행될 경우, 본 방법을 수행하기 위한 장치는 하나 이상의 프로세서들을 포함하는 처리 유닛과, 처리 유닛에 의해 실행될 때에 각각의 방법 단계들을 수행하는 컴퓨터 프로그램 명령들을 저장한 컴퓨터 판독가능 메모리를 포함할 수 있다.
먼저, 101 단계에서, 제1 이미지를 제2 이미지와 비교한다. 제2 이미지는 하나 이상의 픽셀들의 픽셀 값들이 수정된 제1 이미지의 사본이며, 이하 수정된 제2 이미지라고 한다. 예를 들어, 원본 이미지의 픽셀 값들은 원본 이미지의 상부에 워터마크, 로고, 아이콘 또는 다른 유형의 컨텐츠와 같은 추가 컨텐츠를 오버레이함으로써 수정될 수 있으며, 이에 따라 수정된 제2 이미지에서는 이 추가 컨텐츠의 위치에 있는 원본 픽셀 정보가 소실된다.
도 2는 본 개시의 일 실시 예에 따른, 원본 이미지를 추가 컨텐츠와 결합함으로써 얻어진 수정된 제2 이미지의 예를 도시한 것이다. 본 실시 예에서, 수정된 제2 이미지 220은 방송사의 로고 211이 화면의 우측 상부 모서리의 컨텐츠 상에 중첩된 360도 비디오의 프레임이다. 다른 실시 예들에서는, 본 명세서에 개시된 기술들이 2 차원 비디오, 스케일러블 비디오 또는 스틸 이미지들과 같은, 360도 비디오 이외의 다른 유형의 컨텐츠들에 적용될 수도 있다.
계속해서 도 1을 참고하면, 102 단계에서는, 비교의 결과에 기초하여 제1 이미지 복원 정보가 생성된다. 제1 이미지 복원 정보는 제1 이미지를 복원하기 위해 수정된 제2 이미지와 결합될 수 있다. 예를 들어, 이하에서 더 상세히 설명되는 바와 같이, 제1 이미지 복원 정보는 제1 이미지 내의 대응하는 픽셀들의 값과 수정된 제2 이미지의 차이로서 계산되는 레지듀얼 픽셀 값들을 포함할 수 있으며, 또는 수정된 제2 이미지에서 대체된 원본 픽셀들의 값을 포함할 수도 있다.
그 다음, 본 실시 예에서, 103 단계에서는 제1 이미지 복원 정보가 암호화된다. 제1 이미지 복원 정보에 암호화를 적용하면 원본 컨텐츠에 대하여 접근할 수 있는 자에 대한 제어를 컨텐츠 제작자가 제어할 수 있게 된다. 다른 실시 예들에서는 상이한 암호화 기술들이 사용될 수도 있다. 예를 들어, 103 단계에서 대칭 또는 비대칭 암호화가 제1 이미지 복원 정보를 암호화하는데 사용될 수도 있다. 일부 실시 예들에서는, 임의의 당사자가 제1 이미지 복원 정보에 액세스하여 이에 따라 원본 이미지를 복원할 수 있도록 암호화가 생략될 수도 있다.
비대칭 암호화가 사용될 경우에는, 개인 키(private key) 보유자만이 제1 이미지 복원 정보를 복호화하여 원본 이미지를 복원하는 것을 진행할 수 있다. 동시에, 비대칭 암호화는 누구나 컨텐츠를 작성하고 공개 키(public key)를 사용하여 암호화를 적용함으로써 제1 이미지 복원 정보를 보호할 수 있게 한다.
일부 실시 예들에서, 복수의 별도의 레이어들에 있는 추가 컨텐츠가 원본 이미지와 결합될 수도 있다. 이러한 실시 예들에서는, 별도의 이미지 복원 정보가 추가 컨텐츠의 각 레이어에 대해 생성될 수 있으며, 이에 따라 특정 레이어들로부터 추가 컨텐츠를 제거함으로써 중간의 수정된 이미지들이 복원될 수 있게 된다. 복수의 레이어들에 대한 이미지 복원 정보가 생성될 경우, 각 레이어에 대한 이미지 복원 정보는 다른 레이어에 대한 정보와 독립적으로 암호화될 수 있다. 예를 들어, 하나의 레이어의 추가 컨텐츠에 대한 이미지 복원 정보가 대칭 암호화를 사용하여 암호화될 수 있고, 다른 레이어의 추가 컨텐츠에 대한 이미지 복원 정보는 비대칭 암호화를 사용하여 암호화될 수도 있다.
또한, 복수의 레이어들에 대한 이미지 복원 정보가 생성될 경우, 상이한 레이어들에 대한 이미지 복원 정보가 상이한 키들을 사용하여 암호화될 수도 있다. 예를 들어, 한 집단의 사용자들이 수정된 이미지에서 최상부 레이어의 추가 컨텐츠를 제거할 수는 있지만, 모든 레이어들에 대해 복호화 키를 소유한 사용자들만이 원본 컨텐츠에 액세스할 수 있게 된다.
이미지 복원 정보의 사용을 통해, 본 개시의 실시 예들은 원본 컨텐츠가 수정된 이후에 그것이 후속적으로 복구될 수 있게 한다. 103 단계와 관련하여 전술한 바와 같이, 암호화를 적용함으로써, 디코딩 키 보유자만이 원본 컨텐츠에 액세스할 수 있게 되는 것을 보장할 수 있다.
본 실시 예에서, 제1 이미지 복원 정보가 생성되어 암호화되고 나면, 104 단계에서, 암호화된 제1 이미지 복원 정보가, 수정된 제2 이미지와 연관된 메타데이터로서 저장된다. 예를 들어, 제1 이미지 복원 정보는 수정된 제2 이미지 그 자체와 동일한 파일에 저장될 수 있다. 대안적으로, 제1 이미지 복원 정보는 수정된 제2 이미지와 별도로 저장될 수 있다. 예를 들어, 제1 이미지 복원 정보가 서버에 저장되어 원본 이미지를 복원하고자 하는 사용자에게 요청 시에 제공될 수 있다.
도 3을 참고하면, 본 개시의 일 실시 예에 따른 이미지 복원 정보를 생성하는 방법이 도시되어 있다. 본 실시 예에서, 레지듀얼 값 330을 포함하는 제1 이미지 복원 정보가 생성된다. 각각의 레지듀얼 값 330은, 원본 픽셀 값이 수정된 제2 이미지 320 내의 추가 컨텐츠 310의 픽셀로 대체된 픽셀과 관련된 것이다. 원본 값이 추가 컨텐츠 310의 픽셀로 대체된 픽셀은 이하에서 "대체된 픽셀"이라 부른다.
도 3에 도시된 바와 같이, 본 실시 예에서, 원본 이미지 300은 도 2에 도시된 예와 유사하게, 이미지의 우측 상부 모서리에 로고 311를 포함하는 추가 컨텐츠 310와 결합된다. 원본 이미지 300를 추가 컨텐츠 310과 결합할 경우, 추가 컨텐츠의 각 픽셀은 원본 이미지 300 내의 동일한 위치에 있는 픽셀을 대체하게 된다. 이러한 방식으로 원본 이미지 300를 추가 컨텐츠 310과 결합함으로써, 하나 이상의 대체된 픽셀들을 포함하는 수정된 제2 이미지 320가 생성된다.
각각의 레지듀얼 값은 제1 또는 제2 이미지들 300, 320 중 다른 하나의 이미지 내의 대응 픽셀의 값으로부터 제1 또는 제2 이미지들 중 하나의 이미지 내의 픽셀의 값을 감산함으로써 생성된다. 여기서, "대응" 픽셀이란 다른 이미지에서 현재 처리중인 픽셀과 동일한 위치에 있는 하나의 이미지 내의 픽셀을 지칭하는 것이다. 본 실시 예에서는, 원본 이미지 300 내의 픽셀의 값을, 수정된 제2 이미지 320 내의 동일한 위치에 있는 대응 픽셀의 값에서 감산한다.
제1 이미지 복원 정보 330로서 레지듀얼 값들을 사용하는 경우, 레지듀얼 값들이 저장되는 포맷은 특정 실시 예에 따라 달라질 수 있다. 예를 들어, 일부 실시 예들에서, 대체된 픽셀들의 레지듀얼 값들은 대체된 픽셀들의 좌표와 함께 수정된 제2 이미지 320에 포함된 메타데이터로서 저장될 수 있다.
다른 실시 예들에서, 레지듀얼 값들은 레지듀얼 이미지로서 저장될 수 있다. 레지듀얼 이미지에서, 수정된 제2 이미지 310 내의 대체된 픽셀과 동일한 위치에 있는 픽셀은 대체된 픽셀에 대한 레지듀얼 값을 저장하는데 사용된다. 레지듀얼 이미지 내의 모든 다른 픽셀들, 즉 대체된 픽셀에 대응하지 않는 모든 픽셀들은 0으로 설정될 수 있으며, 그 이유는 그 대응 픽셀들이 수정된 제2 이미지 320 및 원본 제1 이미지 300에서 동일한 픽셀을 갖기 때문이다. 많은 레지듀얼 값들이 0으로 될 것이기 때문에, 레지듀얼 이미지의 파일 크기는 원본 이미지 파일에 비해 상대적으로 작을 수 있다. 그러므로 레지듀얼 이미지는 총 파일 크기를 크게 증가시킴 없이 수정된 제2 이미지 320에 임베드되는 메타데이터로서 저장될 수 있다.
레지듀얼 이미지는 제1 또는 제2 이미지들 300, 320 중 다른 이미지로부터 제1 또는 제2 이미지 300, 320 중 하나의 이미지를 감산함으로써 생성될 수 있다. 일부 실시 예들에서, 감산 계산은 수정된 제2 이미지 320 내의 각 픽셀에 대해 수행될 수 있으며, 이에 따라 제1 및 제2 이미지들 300, 320과 동일한 크기 및 해상도를 갖는 레지듀얼 이미지가 생성된다. 수정된 제2 이미지 320 내의 대체되지 않은 픽셀들에 대한 계산은 0의 값을 반환하게 되며, 그 이유는 이 픽셀들은 원본 제1 이미지 300 내의 것들과 동일한 값을 갖기 때문이다.
대안적으로, 레지듀얼 이미지는 추가 컨텐츠 310에 포함된 픽셀들의 좌표를 확인하고, 수정된 제2 이미지 320 내의 대응 픽셀 위치들에 대한 계산만을 수행함으로써 생성될 수도 있다. 레지듀얼 이미지 내의 임의의 나머지 픽셀들의 값은, 수정된 제2 이미지 320 및 원본 제1 이미지 300 내의 대응 픽셀들이 서로 동일한 값을 가질 것으로 가정될 수 있기 때문에, 각 픽셀에 대한 계산을 수행함 없이도 자동으로 0으로 설정될 수 있으며, 따라서 계산의 결과는 0으로 된다. 이러한 접근 방식은 불필요한 계산을 수행하지 않아도 되므로 처리 부담을 줄일 수 있다. 그러나, 일부 실시 예들에서는, 레지듀얼 이미지 내의 모든 픽셀에 대한 레지듀얼 값을 계산하는 것이 유익할 수도 있다. 예를 들어, 수정된 제2 이미지 320가 압축되어 있는 경우, 수정된 제2 이미지 320 내의 일부 픽셀들의 값은 그것들이 추가 컨텐츠 310로 대체되지 않았더라도 제1 이미지 300 내의 대응 픽셀들의 값과 다를 수 있다.
일부 실시 예들에서, 레지듀얼 값들은 제1 및 제2 이미지들 300, 320의 픽셀 값들보다 높은 정밀도로 저장될 수 있다. 예를 들어, 일 실시예서 원본 제1 이미지 300의 각 픽셀 값은 8 비트를 사용하여 저장될 수 있고, 각각의 레지듀얼 값은 원본 값들에 비해 +2 비트 정밀도로 저장될 수 있으며, 이것은 각각의 레지듀얼 값이 10 비트를 사용하여 저장될 수 있음을 의미한다. 이러한 접근 방식은 이미지의 밝거나 어두운 부분들에서 발생하는 새처레이션(saturation)을 방지할 수 있다.
제1 및 제2 이미지들 300, 320과 동일한 크기 및 해상도를 갖는 레지듀얼 이미지를 사용하는 대신에, 일부 실시 예들에서 레지듀얼 이미지는 제1 및 제2 이미지들 300, 320 각각보다 작은 크기를 갖는 부분 이미지의 형태를 취할 수도 있다. 부분 레지듀얼 이미지는 제2 이미지의 대응하는 부분으로부터 제1 이미지의 일부를 감산함으로써 생성될 수 있다. 예를 들어, 추가 컨텐츠가 N1ХN2 픽셀 크기의 영역으로 제한되면, 해상도 N1ХN2의 부분 레지듀얼 이미지는, 다른 이미지 300, 320의 대응 픽셀들로부터 제1 및 제2 이미지들 300, 320 중 하나의 이미지의 N1ХN2 내의 픽셀들을 감산하는 것만에 의해 생성될 수 있다. 이러한 방식으로, 부분 레지 듀얼 이미지는 제1 및 제2 이미지들 각각보다 낮은 해상도를 가질 수 있다.
부분 레지듀얼 이미지가 생성될 경우, 제1 이미지 복원 정보는 또한 제1 이미지 및 제2 이미지 내의 부분 이미지의 위치를 식별시키는 정보를 포함할 수 있다. 일부 실시 예들에서, 예를 들어, 추가 컨텐츠가 항상 이미지 내의 동일한 위치를 점유한다는 것이 미리 알려져 있을 경우에는, 이 정보가 생략될 수 있다. 이것은 예를 들어 비디오의 모든 프레임들에서 항상 동일한 화면 위치에 표시되는 방송사 로고의 경우에 적용될 수 있다.
부분 레지듀얼 이미지들이 사용되는 일부 실시 예들에서, 레지듀얼 이미지는 제1 및 제2 이미지들 300, 320의 전체 영역에 걸쳐 분포된 복수의 부분 이미지 영역들로 분할될 수 있다. 레지듀얼 이미지는 제2 이미지 320 내의 하나 이상의 픽셀들이 수정된 부분 이미지 영역들에 대한 부분적 이미지들만을 포함할 수 있다. 예를 들어, 각각의 부분 이미지 영역은 인덱스에 의해 식별될 수 있으며, 부분 이미지는 그 부분 이미지와 관련된 부분 이미지 영역의 인덱스에 대응하는 식별자와 함께 저장될 수 있다.
프레임들의 시퀀스를 포함하는 비디오 파일의 경우에, 각각의 프레임은 이미지의 전체 영역에 걸쳐 분포된 복수의 부분 이미지 영역들로 분할될 수 있다. 복수의 부분 이미지 영역들은 크기가 동일하거나, 또는 크기가 상이할 수도 있다. 예를 들어, 비디오를 로고 또는 워터마크의 형태의 추가 컨텐츠와 결합함으로써 비디오의 픽셀들이 수정되면, 복수의 수정된 프레임들이 얻어진다. 임의의 주어진 수정된 프레임에서, 각각의 부분 이미지 영역은 수정된 픽셀들, 즉 원래 버전의 프레임에 대해 수정된 픽셀들을 포함하거나 포함하지 않을 수도 있다. 수정된 프레임의 부분 이미지 영역 내의 픽셀들을 원본 버전의 프레임의 대응 픽셀들과 비교함으로써, 특정 부분 이미지 영역에 수정된 픽셀들이 있는지 여부를 확인할 수 있다.
부분 이미지 영역들은 상이한 방식들로 식별될 수도 있으며, 예를 들어 영역 한 모서리의 좌표 또는 영역 중심의 좌표를 사용하여 식별되거나, 또는 각 영역에 대하여 고유 인덱스를 할당함으로써 식별될 수도 있다. 본 실시 예에서, 각각의 부분 이미지 영역은 영역의 좌측 상부 모서리에 있는 픽셀의 좌표들을 사용하여 식별된다. 예를 들어, 좌표가 0,0인 부분 이미지 영역은 프레임의 좌측 상부에 있는 영역이다. 0,0의 영역이 비디오의 처음 100개의 프레임 동안 수정된 픽셀들을 포함하는 것으로 가정하면, 0,0의 영역에 대해 100개의 프레임의 부분 레지듀얼 비디오가 생성될 수 있다. 부분 레지듀얼 비디오는 비디오의 처음 100개의 프레임들 각각에 대한 부분 레지듀얼 이미지를 포함한다.
동일한 영역이 프레임 1000 내지 1100에서 수정된 픽셀들을 포함하면, 부분 레지듀얼 이미지들의 새로운 시퀀스가 1000 내지 1100의 타임 스탬프를 갖는 부분 레지듀얼 비디오에 추가될 수 있으며, 이것은 이러한 부분 레지듀얼 이미지들이 수정된 비디오 내의 타임 스탬프 1000 내지 1100에 있는 각각의 수정된 프레임들과 결합되어야 함을 나타낸다. 이러한 방식으로, 해당 영역이 프레임 101과 프레임 999 사이에 어떠한 수정된 픽셀도 포함하지 않기 때문에, 수정된 비디오의 1100개의 프레임에 대하여 단지 200개 프레임의 부분 레지듀얼 비디오만이 필요하게 된다. 이러한 접근 방식은 비디오 파일에 대한 이미지 복원 정보를 저장하는 효율적인 방식을 제공한다.
일 대안으로서, 일부 실시 예들에서는, 부분 레지듀얼 비디오가 프레임 101 내지 999 사이에 제로 컨텐츠를 갖는 부분 레지듀얼 이미지들을 부가하는 것으로 확장될 수 있다. 다른 대안으로서, 1000 내지 1100의 타임 스탬프를 갖는 새로운 시퀀스의 부분 레지듀얼 이미지들이, 프레임 1 내지 100에 대한 부분 레지듀얼 비디오의 연속으로서가 아니라, 새로운 부분 레지듀얼 비디오로서 저장될 수 있다.
도 3에 도시된 실시 예에서, 제1 이미지 복원 정보는 레지듀얼 값들을 포함한다. 다른 실시 예들에서는, 제1 이미지 복원 정보가 상이한 형태로 제공될 수 있다. 예를 들어, 일부 실시 예들에서, 제1 이미지 복원 정보는 대체된 픽셀과 각각 연관된 하나 이상의 원본 픽셀 값들을 포함할 수 있다. 각각의 원본 픽셀 값은 제1 이미지 300 내의 대응 픽셀의 값을 포함한다. 원본 픽셀 값들이 제1 이미지 복원 정보로서 제공되는 경우, 수정된 제2 이미지 내의 대응 픽셀들을 원본 픽셀 값들로 대체함으로써 원본 이미지가 복원될 수 있다.
도 4를 참고하면, 도 3에서 생성된 이미지 복원 정보를 사용하여 원본 이미지를 복원하는 방법이 본 개시의 일 실시 예에 따라 도시되어 있다. 제1 이미지 300 내의 상기 하나 이상의 대응 픽셀들의 값을 결정하기 위해, 수정된 제2 이미지 320 내의 하나 이상의 대응 픽셀들과 하나 이상의 레지듀얼 값을 합산함으로써 제1 이미지 복원 정보가 수정된 제2 이미지 320과 결합된다. 이러한 방식으로, 원본 이미지 300의 사본 400이 얻어질 수 있다. 예를 들어, 제1 이미지 복원 정보가 레지듀얼 이미지를 포함하는 경우, 원본 이미지는 레지듀얼 이미지를 수정된 제2 이미지와 합산함으로써 복원될 수 있다.
여기서 '합산(summing)'은 원본 이미지에서 수정된 이미지를 빼서 레지듀얼이 얻어졌는지(또는 그 반대의 경우도 가능), 또는 원본 이미지와 수정된 이미지를 합하여 레지듀얼이 얻어졌는지에 따라, 가산 또는 감산을 포함할 수 있다. 예를 들어, n 번째 픽셀에 대한 레지듀얼 값 Rn은 다음의 [수학식 1] 또는 [수학식 2]와 같이 정의될 수 있다:
Figure 112018072141862-pat00001
Figure 112018072141862-pat00002
[수학식 1] 및 [수학식 2]에서, Rn은 n 번째 픽셀에 대한 레지듀얼 값이고, On은 원본 이미지 내의 n 번째 픽셀의 원본 값이며, Mn은 수정된 이미지 내의 n 번째 픽셀의 수정된 값이다.
상기 [수학식 1]의 경우, 다음의 [수학식 3]과 같이 원본 픽셀 값들을 계산함으로써 원본 이미지가 복원될 수 있다:
Figure 112018072141862-pat00003
또한, 상기 [수학식 2]의 경우, 다음과 같이 원본 픽셀 값들을 계산함으로써 원본 이미지가 복원될 수 있다:
Figure 112018072141862-pat00004
[수학식 3] 및 [수학식 4]에서, On은 원본 이미지 내의 n 번째 픽셀의 원본 값이고, Rn은 n 번째 픽셀에 대한 레지듀얼 값이며, Mn은 수정된 이미지 내의 n 번째 픽셀의 수정된 값이다.
도 5를 참고하면, 본 개시의 일 실시 예에 따른 이미지 복원 방법을 나타내는 흐름도가 도시되어 있다. 실시 예에 따르면, 본 방법의 모든 단계들이 동일한 장치에서 수행될 수 있거나, 또는 상이한 단계들이 상이한 장치들에서 수행될 수도 있다. 도 5에 도시된 단계들 중의 임의의 단계는 특정 실시 예에 따라 소프트웨어 또는 하드웨어로 수행될 수도 있다. 하나 이상의 단계들이 소프트웨어로 수행될 경우, 본 방법을 수행하기 위한 장치는 하나 이상의 프로세서들을 포함하는 처리 유닛과, 처리 유닛에 의해 실행될 때에 각각의 방법 단계들을 수행하는 컴퓨터 프로그램 명령들을 저장한 컴퓨터 판독가능 메모리를 포함할 수 있다.
본 방법은 수정된 제2 이미지와 연관된 제1 이미지 복원 정보를 획득함으로써 501 단계에서 시작된다. 예를 들어, 501 단계에서는, 제1 이미지 복원 정보가 저장 장치로부터 검색되거나 방송 스트림을 통해 수신될 수 있다. 제1 이미지 복원 정보가 수정된 제2 이미지 내의 메타데이터로서 임베드되어 있는 경우, 501 단계에서는 제1 이미지 복원 정보와 수정된 제2 이미지가 동시에 얻어질 수 있다.
본 실시 예에서, 도 5에 도시된 방법은 도 1에 도시된 것과 유사한 방법을 사용하여 생성된 제1 이미지 복원 정보에 기초하여 이미지를 복원하도록 구성되며, 여기서 제1 이미지 복원 정보는 암호화된다. 이와 같이, 도 5의 방법은 단계 S502에서 제1 이미지 복원 정보를 복호화함으로써 시작된다. 제1 이미지 복원 정보가 암호화되지 않은 실시 예에서는, 502 단계가 생략될 수도 있다.
그 다음, 503 단계에서는 제1 이미지 복원 정보 330이 제1 이미지 400를 복원하기 위해 수정된 제2 이미지 320과 결합된다. 제1 이미지 복원 정보 330가 수정된 제2 이미지 320와 결합되는 프로세스는 제1 이미지 복원 정보 330가 제공되는 포맷에 따라 달라질 수 있다. 예를 들어, 도 4를 참고하여 전술한 실시 예에서, 제1 이미지 300의 원본 픽셀 값들을 결정하기 위해 하나 이상의 레지듀얼 값들을 수정된 제2 이미지 320 내의 하나 이상의 대응 픽셀들과 합산함으로써, 제1 이미지 복원 정보 330이 수정된 제2 이미지 320과 결합된다. 대안적으로, 제1 이미지 복원 정보 330이 제1 이미지 300의 원본 픽셀 값들을 포함하고 있을 경우에는, 제1 이미지 복원 정보 330으로부터 수정된 제2 이미지 320의 픽셀들을 대응하는 원본 픽셀 값들로 대체함으로써 제1 이미지 복원 정보 330 및 수정된 제2 이미지 320이 결합될 수 있다.
일부 실시 예들에서, 복수의 별도의 레이어들에 있는 추가 컨텐츠가 원본 이미지와 결합될 수도 있다. 이러한 실시 예들에서는, 별도의 이미지 복원 정보가 추가 컨텐츠의 각 레이어에 대해 생성될 수 있으며, 이에 따라 특정 레이어들로부터 추가 컨텐츠를 제거함으로써 중간의 수정된 이미지들이 복원될 수 있게 된다.
이제 도 6을 참고하면, 본 개시의 일 실시 예에 따른, 제1 및 제2 수정된 이미지들에 대한 제1 이미지 복원 정보 및 제2 이미지 복원 정보를 생성하는 방법이 도시되어 있다. 추가 컨텐츠에 대한 두 개의 레이어가 도 6에 도시되어 있지만, 그 원리는 임의의 수의 레이어로 확장될 수 있다는 것을 이해할 것이다.
도 6의 실시 예에서, 도 3과 관련하여 전술한 것과 유사한 방법을 사용하여 제1 수정된 이미지 621를 생성하기 위해 원본 이미지 600이 제1 추가 컨텐츠 611과 결합된다. 그 다음, 도 3과 관련하여 전술한 것과 유사한 방법을 사용하여 제2 수정된 이미지 622를 생성하기 위해 제1 수정된 이미지 621이 제2 추가 컨텐츠 612와 결합된다. 제1 추가 컨텐츠 611과 제2 추가 컨텐츠 612의 상대적인 위치들에 따라, 제1 추가 컨텐츠 611의 하나 이상의 픽셀들이 제2 추가 컨텐츠 612로 대체될 수 있다. 따라서, 제2 추가 컨텐츠 612가 제1 추가 컨텐츠 611보다 상위의 레이어를 점유하는 것으로 간주될 수 있으며, 결국 이것은 원본 이미지 600보다 상위의 레이어를 점유하는 것으로 고려될 수 있다.
도 6에 도시된 바와 같이, 제1 이미지 복원 정보 631 및 제2 이미지 복원 정보 632가 생성된다. 제1 이미지 복원 정보 631은 원본 이미지 600를 복원하기 위해 제1 수정된 이미지 621과 결합될 수 있다. 제1 이미지 복원 정보 631는, 도 1과 관련하여 전술한 방법을 이용하여, 제1 수정된 이미지 621을 원본 이미지 600과 비교함으로써 생성될 수 있다. 제2 이미지 복원 정보 632는 제1 수정된 이미지 621를 복원하기 위해 제2 수정된 이미지 622와 결합될 수 있다. 또한, 제2 이미지 복원 정보 632는 도 1과 관련하여 전술한 방법을 사용하여, 제2 수정된 이미지 622를 제1 수정된 이미지 621와 비교함으로써 생성될 수 있다.
본 실시 예에서, 제1 이미지 복원 정보 631은 제1 수정된 이미지 621 내의 대응하는 대체된 픽셀로부터 원본 이미지 600의 픽셀 값을 감산함으로써 생성되고, 제2 이미지 복원 정보 632는 제2 수정된 이미지 622 내의 대응하는 대체된 픽셀로부터 제1 수정된 이미지 621의 픽셀 값을 감산함으로써 생성된다. 여기서, 제2 수정된 이미지 622 내의 "대체된 픽셀(replaced pixel)"은 제2 추가 컨텐츠 612로 대체된 제1 수정된 이미지 621의 픽셀을 지칭하는 것이다. 이러한 방식으로, 제1 이미지 복원 정보 631 및 제2 이미지 복원 정보 632는 모두 레지듀얼 값으로서 생성된다.
다른 실시 예에서, 제1 이미지 복원 정보 631 및 제2 이미지 복원 정보 632 중 하나 또는 이 둘 모두는 상이한 포맷으로 생성될 수 있다. 예를 들어, 일 실시 예에서, 제1 이미지 복원 정보 631는 제1 수정된 이미지 621 내의 대응 픽셀들과 원본 이미지 600 간의 차이로서 계산되는 레지듀얼 값들을 포함할 수 있으며, 제2 이미지 복원 정보 632는 제2 수정된 이미지 622 내의 임의의 대체된 픽셀들에 대한 제1 수정된 이미지 621로부터 원본 픽셀 값들을 포함할 수 있다. 전술한 바와 같이, 각 레이어에 대한 이미지 복원 정보는 다른 레이어에 대한 정보와 독립적으로 암호화될 수 있으며, 다른 키들을 사용하여 암호화될 수도 있다.
도 7을 참고하면, 도 6에서 생성된 제1 및 제2 이미지 복원 정보를 사용하여 제1 수정된 이미지 및 원본 이미지를 복원하는 방법이 본 개시의 실시 예에 따라 도시되어 있다. 본 방법은 제1 수정된 이미지 621를 복원하기 위해 제2 이미지 복원 정보 612를 제2 수정된 이미지 622와 결합함으로써 시작된다. 도 5의 503 단계와 관련하여 전술한 바와 같이, 제2 이미지 복원 정보 612이 제2 수정된 이미지 622와 결합되는 프로세스는 제2 이미지 복원 정보 612가 제공되는 포맷에 따라 달라질 수 있다.
도 4에 도시된 방법에서와 같이, 원본 이미지 600 내의 상기 하나 이상의 대응 픽셀들의 값들을 결정하기 위해, 하나 이상의 레지듀얼 값들을 제1 수정된 이미지 621 내의 하나 이상의 대응 픽셀들과 합산함으로써 제1 이미지 복원 정보 611이 이어서 제1 수정된 이미지 621과 결합될 수 있다. 이러한 방식으로, 원본 이미지 600의 사본 700이 재구성될 수 있다. 제1 이미지 복원 정보 611 및 제2 이미지 복원 정보 612 중 어느 하나가 암호화되면, 이 정보는 복호화된 정보를 각각의 제1 또는 제2 수정된 이미지 621, 622와 결합하기 이전에 적절한 복호화 키를 사용하여 복호화될 수 있다. 전술한 바와 같이, 다른 키들이 제1 이미지 복원 정보 611 및 제2 이미지 복원 정보 612를 복호화하는데 사용될 수 있다.
본 실시 예에서는 단지 2 개의 레이어만이 설명되었지만, 도 7과 관련하여 본 명세서에서 설명된 원리들은 임의의 수의 레이어들로 확장되어, 중간의 수정된 이미지들 및 원본 이미지가 복원될 수 있음을 이해할 것이다.
도 8을 참고하면, 본 개시의 일 실시 예에 따른 이미지 처리 장치 및 이미지 복원 장치를 포함하는 시스템이 도시되어 있다. 본 실시 예에서, 시스템은 이미지 복원 정보를 생성하기 위한 이미지 처리 장치 800을 포함하며, 또한 이미지 처리 장치 800에 의해 생성된 이미지 복원 정보 및 수정된 이미지에 기초하여 원본 이미지를 복원하기 위한 별도의 이미지 복원 장치 900을 포함한다. 다른 실시 예들에서는, 이미지 처리 장치 800 및 이미지 복원 장치 900의 일부 또는 모든 구성 요소들이 단일의 물리적 장치로 구현될 수도 있다.
이미지 처리 장치 800은 하나 이상의 프로세서들 811을 포함하는 이미지 처리 유닛 810, 및 컴퓨터 프로그램 명령들을 저장하도록 구성된 메모리 812를 포함한다. 이미지 처리 유닛 810이 본 실시 예에서는 소프트웨어로 구현되지만, 다른 실시 예들에서는 이미지 처리 유닛 810이 예를 들어, 필드 프로그래머블 게이트 어레이(FPGA) 칩을 사용하여 하드웨어로 구현될 수도 있다.
이미지 처리 유닛 810의 하나 이상의 프로세서들 811에 의해 실행될 때에, 메모리 812에 저장된 컴퓨터 프로그램 명령들은 이미지 처리 장치 800로 하여금 원본 이미지와 수정된 이미지를 비교하게 한다. 이 비교의 결과에 기초하여, 이미지 처리 장치 800은 수정된 제2 이미지과 결합되어 원본 화상을 복원할 수 있는 이미지 복원 정보를 생성한다. 메모리 812에 저장된 컴퓨터 프로그램 명령들은 이미지 처리 장치 800로 하여금 이미지 복원 정보를 생성하기 위해 본 명세서에서 개시된 방법들 중 임의의 것을 수행하게 하도록 구성될 수 있다.
또한, 본 실시 예에서 이미지 처리 장치 800은 이미지 복원 정보를 암호화하기 위한 암호화 유닛 820을 더 포함한다. 암호화 유닛 820은 예를 들면 하드웨어 암호화 유닛을 포함할 수 있다. 다른 실시 예에서, 암호화 유닛 820은 메모리 812에 저장되는 추가 컴퓨터 프로그램 명령들의 형태인 소프트웨어로 구현될 수 있다. 또한, 일부 실시 예들에서는 암호화가 적용되지 않을 수도 있고, 암호화 유닛 820이 생략될 수도 있다.
이미지 복원 장치 900는 하나 이상의 프로세서들 911을 포함하는 이미지 복원 유닛 910, 및 컴퓨터 프로그램 명령들을 저장하도록 구성된 메모리 912를 포함한다. 이미지 복원 유닛 910이 본 실시 예에서는 소프트웨어로 구현되지만, 다른 실시 예들에서는, 이미지 복원 유닛 910이 예를 들어, 필드 프로그래머블 게이트 어레이(FPGA) 칩을 사용하여 하드웨어로 구현될 수도 있다.
이미지 복원 유닛 910의 하나 이상의 프로세서들 911에 의해 실행될 때에, 메모리 912에 저장된 컴퓨터 프로그램 명령들은 이미지 복원 장치 900로 하여금 수정된 이미지와 관련된 이미지 복원 정보를 얻고, 이 이미지 복원 정보를 수정된 이미지와 결합하여 원본 이미지의 사본을 복원하게 한다. 메모리 912에 저장된 컴퓨터 프로그램 명령들은 이미지 복원 장치 900으로 하여금 이미지 복원 정보에 기초하여 이미지를 복원하기 위해 본 명세서에서 개시된 방법들 중 임의의 것을 수행하게 하도록 구성될 수 있다.
또한, 본 실시 예에서 이미지 복원 장치 900은 이미지 복원 정보를 암호화하기 위한 복호화 유닛 920을 더 포함한다. 복호화 유닛 920은 예를 들어 하드웨어 암호화 유닛을 포함할 수 있다. 다른 실시 예에서, 복호화 유닛 920은 메모리 912에 저장된 추가적인 컴퓨터 프로그램 명령들의 형태인 소프트웨어로 구현될 수 있다. 또한, 일부 실시 예들에서는, 암호화가 적용되지 않을 수도 있으며, 복호화 유닛 920이 생략될 수도 있다.
도 9는 본 개시의 일 실시 예에 따른 이미지 처리 방법을 나타내는 흐름도를 도시한다.
도 9를 참고하면, 901 단계에서 이미지 처리 장치는 제1 이미지를 수정된 제2 이미지와 비교한다. 다양한 실시 예들에 따르면, 수정된 제2 이미지는 적어도 하나의 대체된 픽셀의 픽셀 값들이 수정된 제1 이미지의 사본을 포함할 수 있다. 다양한 실시 예들에 따르면, 제1 이미지 및 수정된 제2 이미지는 비디오 프레임들의 적어도 하나의 시퀀스에 대응할 수 있다.
903 단계에서, 이미지 처리 장치는 901 단계의 비교의 결과에 기초하여 수정된 제2 이미지와 결합되어 제1 이미지를 복원할 수 있는 제1 이미지 복원 정보를 생성한다. 다양한 실시 예들에 따르면, 제1 이미지 복원 정보는 적어도 하나의 대체된 픽셀 중 하나와 각각 연관된 적어도 하나의 레지듀얼 값(residual value)을 포함할 수 있다. 다양한 실시 예들에 따르면, 제1 이미지 복원 정보는 제1 이미지 또는 제2 이미지 중 하나를 제1 이미지 또는 제2 이미지 중 다른 하나로부터 감산함으로써 생성되는 레지듀얼 이미지를 포함할 수 있다. 다양한 실시 예들에 따르면, 레지듀얼 이미지는, 제1 이미지 및 제2 이미지 각각보다 작은 사이즈를 가진 부분 이미지를 포함하며, 부분 이미지는, 제1 이미지의 부분을 제2 이미지의 대응 부분으로부터 감산함으로써 생성될 수 있다. 다양한 실시 예들에 따르면, 제1 이미지 복원 정보는 제1 이미지 및 제2 이미지 내의 부분 이미지의 위치를 식별시키는 정보를 포함할 수 있다. 다양한 실시 예들에 따르면, 레지듀얼 이미지는 제1 이미지 및 제2 이미지의 전체 영역에 걸쳐 분포된 복수의 부분 이미지 영역들로 분할되며, 다양한 실시 예들에 따르면, 레지듀얼 이미지는, 적어도 하나의 픽셀이 제2 이미지에서 수정된 부분 이미지 영역들 중 대응하는 부분 이미지 영역과 각각 연관된 적어도 하나의 부분 이미지를 포함할 수 있다. 다양한 실시 예들에 따르면, 제1 이미지 복원 정보는 적어도 하나의 대체된 픽셀 중 하나와 각각 연관된 적어도 하나의 원본 픽셀 값을 포함하며, 이 각각의 원본 픽셀 값은 제1 이미지 내의 대체된 픽셀의 값일 수 있다.
다양한 실시 예들에 따르면, 도 9의 이미지 처리 방법은 이미지 처리 장치가 제1 이미지 복원 정보를 암호화하는 과정을 더 포함할 수 있다. 다양한 실시 예들에 따르면, 도 9의 이미지 처리 방법은 이미지 처리 장치가 제2 이미지를 수정된 제3 이미지와 비교하는 과정과, 수정된 제3 이미지는 적어도 하나의 픽셀이 대체된 제2 이미지의 사본을 포함하고, 이미지 처리 장치가 비교의 결과에 기초하여, 제2 이미지를 복원하도록 수정된 제3 이미지와 결합될 수 있는 제2 이미지 복원 정보를 생성하는 과정을 더 포함할 수 있다. 다양한 실시 예들에 따르면, 도 9의 이미지 처리 방법은 이미지 처리 장치가 제2 이미지 복원 정보를 암호화하는 과정을 더 포함하며, 제1 이미지 복원 정보를 암호화하는데 사용된 암호화 키는 제2 이미지 복원 정보를 암호화하는데 사용된 암호화 키와 다른 것일 수 있다.
다양한 실시 예들에 따르면, 도 9의 이미지 처리 방법은 이미지 처리 장치가 비디오 프레임들의 적어도 하나의 시퀀스 각각에 대해, 비디오 프레임들에 대한 각각의 수정된 제2 이미지 내의 각각의 부분 이미지 영역이 적어도 하나의 수정된 픽셀을 포함하는지 여부를 결정하는 과정과, 부분 이미지 영역들 중 하나의 부분 이미지 영역이 적어도 하나의 수정된 픽셀을 포함한다고 결정한 경우, 비디오 프레임에 대한 각각의 제1 이미지 복원 정보를 생성하는 과정과, 부분 이미지 영역들 중 하나의 부분 이미지 영역에 대응하는 부분 레지듀얼 비디오의 프레임에 대한 각각의 제1 이미지 복원 정보를 저장하는 과정을 더 포함할 수 있다. 여기서, 부분 레지듀얼 비디오의 각 프레임은 부분 레지듀얼 비디오의 프레임과 관련된 비디오 프레임들의 시퀀스 중 하나를 식별하기 위한 타임 스탬프(time stamp)와 연관될 수 있다.
다양한 실시 예들에 따르면, 이미지를 처리하기 위한 장치에 있어서, 적어도 하나의 프로세서; 및 상기 적어도 하나의 프로세서에 의해 실행 가능한 컴퓨터 프로그램 명령들을 저장한 메모리를 포함하고, 상기 적어도 하나의 프로세서는, 제1 이미지를 수정된 제2 이미지와 비교하고, 상기 수정된 제2 이미지는 적어도 하나의 픽셀이 대체된 상기 제1 이미지의 사본을 포함하며, 상기 비교의 결과에 기초하여, 상기 수정된 제2 이미지와 결합되어 상기 제1 이미지를 복원할 수 있는 이미지 복원 정보를 생성하도록 구성된 장치가 제공될 수 있다.
다양한 실시 예들에 따르면, 비일시적 컴퓨터 판독 가능 저장 매체에 있어서, 실행될 때에, 상기 방법을 수행하는 컴퓨터 프로그램 명령들을 저장하도록 구성된 비일시적 컴퓨터 판독가능 저장 매체가 제공될 수 있다.
도 10은 본 개시의 일 실시 예에 따른 이미지 복원 방법을 나타내는 흐름도를 도시한다.
도 10을 참고하면, 1001 단계에서 수정된 제2 이미지와 연관된 제1 이미지 복원 정보를 획득한다.
1003 단계에서, 이미지 복원 장치는 제1 이미지를 복원하기 위해 제1 이미지 복원 정보를 수정된 제2 이미지와 결합한다. 수정된 제2 이미지는 적어도 하나의 픽셀이 대체된 제1 이미지의 사본을 포함한다. 다양한 실시 예들에 따르면, 제1 이미지 복원 정보는 적어도 하나의 대체된 픽셀 중 하나와 각각 연관된 적어도 하나의 레지듀얼 값을 포함하며, 제1 이미지 복원 정보를 수정된 제2 이미지와 결합하는 과정은, 제1 이미지 내의 적어도 하나의 대응하는 픽셀의 값을 결정하기 위해, 적어도 하나의 레지듀얼 값을 수정된 제2 이미지 내의 적어도 하나의 대응하는 픽셀과 합산하는 과정을 포함할 수 있다. 다양한 실시 예들에 따르면, 제1 이미지 복원 정보는 제1 이미지 또는 제2 이미지 중 하나를 제1 이미지 또는 제2 이미지 중 다른 하나에서 감산하여 생성되는 레지듀얼 이미지를 포함하며, 제1 이미지 복원 정보를 수정된 제2 이미지와 결합하는 과정은, 레지듀얼 이미지와 수정된 제2 이미지를 합산하는 과정을 포함할 수 있다. 다양한 실시 예들에 따르면, 제1 이미지 복원 정보는 적어도 하나의 대체된 픽셀 중 하나와 각각 연관된 적어도 하나의 원본 픽셀 값을 포함하고, 각각의 원본 픽셀 값은 제1 이미지 내의 대체된 픽셀의 값이며, 제1 이미지 복원 정보를 수정된 제2 이미지와 결합하는 과정은, 수정된 제2 이미지 내의 적어도 하나의 픽셀의 픽셀 값을 제1 이미지 복원 정보의 대응하는 원본 픽셀 값으로 대체하는 과정을 포함할 수 있다.
다양한 실시 예들에 따르면, 도 10의 이미지 복원 방법은 이미지 복원 장치가 제1 이미지 복원 정보를 복호화하는 과정을 더 포함할 수 있다. 다양한 실시 예들에 따르면, 도 10의 이미지 복원 방법은 이미지 복원 장치가 제1 이미지를 복원하기 이전에, 수정된 제3 이미지와 연관된 제2 이미지 복원 정보를 획득하는 과정과, 수정된 제3 이미지는 적어도 하나의 픽셀이 대체된 제2 이미지의 사본을 포함하고, 제2 이미지 복원 정보를 수정된 제3 이미지와 결합하여 제2 이미지를 복원하는 과정을 더 포함할 수 있다. 다양한 실시 예들에 따르면, 도 10의 이미지 복원 방법은 이미지 복원 장치가 제2 이미지 복원 정보를 복호화하는 과정을 더 포함하며, 제1 이미지 복원 정보를 복호화하기 위해 사용된 암호화 키는 제2 이미지 복원 정보를 복호화하기 위해 사용된 암호화 키와 다른 것일 수 있다.
다양한 실시 예들에 따르면, 이미지를 복원하기 위한 장치로서, 적어도 하나의 프로세서; 및 상기 적어도 하나의 프로세서에 의해 실행 가능한 컴퓨터 프로그램 명령들을 저장한 메모리를 포함하고, 상기 적어도 하나의 프로세서는, 수정된 제2 이미지와 연관된 이미지 복원 정보를 획득하고, 제1 이미지를 복원하기 위해 상기 이미지 복원 정보를 상기 수정된 제2 이미지와 결합하도록 구성되며, 상기 수정된 제2 이미지는 적어도 하나의 픽셀이 대체된 상기 제1 이미지의 사본을 포함하는 장치가 제공될 수 있다.
다양한 실시 예들에 따르면, 비일시적 컴퓨터 판독 가능 저장 매체에 있어서, 실행될 때에, 상기 방법을 수행하는 컴퓨터 프로그램 명령들을 저장하도록 구성된 비일시적 컴퓨터 판독가능 저장 매체가 제공될 수 있다.
본 개시의 실시 예들은 하나 이상의 픽셀들이 수정된(예를 들어 픽셀들을 추가 컨텐츠로 대체함으로써) 이미지의 사본으로부터, 원본 이미지를 복원하는데 사용될 수 있는 정보가 생성되는 것으로 설명되었다. 일부 실시 예들에서는, 이미지 복원 정보가 암호화될 수 있다. 이러한 접근 방식을 통해 사용자는 기존 컨텐츠 편집 기술에서와 같은 방식으로 원본 컨텐츠를 수정할 수 있으며, 필요에 따라 원본 컨텐츠를 다시 복구할 수 있는 것이 보장된다. 이미지 복원 정보의 파일 크기는 원본 컨텐츠의 파일 크기보다 상당히 작을 수 있다. 따라서 수정된 이미지와 원본 이미지 모두를 저장하는데 필요한 저장 공간의 양과 비교할 때, 수정된 이미지와 이미지 복원 정보를 저장하는데 필요한 저장 공간이 줄어들 수 있다. 또한, 수정된 이미지 자체의 포맷이 변경되지 않기 때문에, 최종 생성되는 이미지 파일은 기존의 장치, 예를 들어 멀티미디어 플레이어에 의해 판독될 수 있으며, 따라서 이전 버전과의 호환성(backwards compatibility)을 제공할 수 있다.
본 발명의 특정 실시 예들이 도면을 참고하여 본 명세서에 설명되었지만, 첨부된 청구 범위에서 정의된 본 발명의 범위를 일탈하지 않는 범위 내에서 다수의 변형 및 수정이 가능하다는 것을 이해할 것이다.

Claims (21)

  1. 이미지를 처리하기 위한 방법에 있어서,
    제1 이미지를 수정된 제2 이미지와 비교하는 과정과,
    상기 수정된 제2 이미지는 적어도 하나의 대체된 픽셀의 적어도 하나의 픽셀 값이 수정된 상기 제1 이미지의 사본을 포함하고,
    상기 비교의 결과에 기초하여, 추가 컨텐츠 각각의 레이어에 대한 별도의 제1 이미지 복원 정보를 생성하는 과정을 포함하고,
    상기 제1 이미지 복원 정보는 상기 수정된 제2 이미지와 결합되어 상기 제1 이미지를 복원할 수 있는 정보인 방법.
  2. 청구항 1에 있어서,
    상기 제1 이미지 복원 정보를 암호화하는 과정을 더 포함하는 방법.
  3. 청구항 1에 있어서,
    상기 제1 이미지 복원 정보는 상기 적어도 하나의 대체된 픽셀 중 하나와 각각 연관된 적어도 하나의 레지듀얼 값(residual value)을 포함하며, 또한
    각각의 상기 적어도 하나의 레지듀얼 값은 상기 제1 이미지 또는 상기 제2 이미지 중 하나의 상기 적어도 하나의 대체된 픽셀의 픽셀 값을 상기 제1 이미지 또는 상기 제2 이미지 중 다른 하나의 상기 적어도 하나의 대체된 픽셀의 픽셀 값으로부터 감산함으로써 생성되는 방법.
  4. 청구항 3에 있어서,
    상기 제1 이미지 복원 정보는 상기 제1 이미지 또는 상기 제2 이미지 중 하나를 상기 제1 이미지 또는 제2 이미지 중 다른 하나로부터 감산함으로써 생성되는 레지듀얼 이미지를 포함하는 방법.
  5. 청구항 4에 있어서,
    상기 레지듀얼 이미지는, 상기 제1 이미지 및 상기 제2 이미지 각각보다 작은 사이즈를 가진 부분 이미지를 포함하며, 상기 부분 이미지는, 상기 제1 이미지의 부분을 상기 제2 이미지의 대응 부분으로부터 감산함으로써 생성되는 방법.
  6. 청구항 5에 있어서,
    상기 제1 이미지 복원 정보는 상기 제1 이미지 및 상기 제2 이미지 내의 상기 부분 이미지의 위치를 식별시키는 정보를 포함하는 방법.
  7. 청구항 5에 있어서,
    상기 레지듀얼 이미지는 상기 제1 이미지 및 제2 이미지의 전체 영역에 걸쳐 분포된 복수의 부분 이미지 영역들로 분할되며,
    상기 레지듀얼 이미지는, 적어도 하나의 픽셀이 상기 제2 이미지에서 수정된 상기 부분 이미지 영역들 중 대응하는 부분 이미지 영역과 각각 연관된 적어도 하나의 부분 이미지를 포함하는 방법.
  8. 청구항 7에 있어서,
    상기 제1 이미지 및 상기 수정된 제2 이미지는 비디오 프레임들의 적어도 하나의 시퀀스에 대응하고,
    상기 비디오 프레임들의 적어도 하나의 시퀀스 각각에 대해, 상기 비디오 프레임들에 대한 각각의 수정된 제2 이미지 내의 각각의 부분 이미지 영역이 적어도 하나의 수정된 픽셀을 포함하는지 여부를 결정하는 과정과,
    상기 부분 이미지 영역들 중 하나의 부분 이미지 영역이 적어도 하나의 수정된 픽셀을 포함한다고 결정한 경우, 상기 비디오 프레임에 대한 각각의 제1 이미지 복원 정보를 생성하는 과정과,
    상기 부분 이미지 영역들 중 상기 하나의 부분 이미지 영역에 대응하는 부분 레지듀얼 비디오의 프레임에 대한 상기 각각의 제1 이미지 복원 정보를 저장하는 과정을 더 포함하며,
    상기 부분 레지듀얼 비디오의 각 프레임은 상기 부분 레지듀얼 비디오의 프레임과 관련된 비디오 프레임들의 시퀀스 중 하나를 식별하기 위한 타임 스탬프(time stamp)와 연관되는 방법.
  9. 청구항 1에 있어서,
    상기 제1 이미지 복원 정보는 상기 적어도 하나의 대체된 픽셀 중 하나와 각각 연관된 적어도 하나의 원본 픽셀 값을 포함하며, 이 각각의 원본 픽셀 값은 상기 제1 이미지 내의 상기 대체된 픽셀의 값인 방법.
  10. 청구항 2에 있어서,
    상기 제2 이미지를 수정된 제3 이미지와 비교하는 과정과,
    상기 수정된 제3 이미지는 적어도 하나의 픽셀이 대체된 상기 제2 이미지의 사본을 포함하고,
    상기 비교의 결과에 기초하여, 상기 제2 이미지를 복원하도록 상기 수정된 제3 이미지와 결합될 수 있는 제2 이미지 복원 정보를 생성하는 과정을 더 포함하는 방법.
  11. 청구항 10에 있어서,
    상기 제2 이미지 복원 정보를 암호화하는 과정을 더 포함하며,
    상기 제1 이미지 복원 정보를 암호화하는데 사용된 암호화 키는 상기 제2 이미지 복원 정보를 암호화하는데 사용된 암호화 키와 다른 것인 방법.
  12. 이미지를 복원하기 위한 방법에 있어서,
    수정된 제2 이미지와 연관되고, 추가 컨텐츠 각각의 레이어에 대한 별도의 제1 이미지 복원 정보를 획득하는 과정과,
    제1 이미지를 복원하기 위해 상기 추가 컨텐츠 각각의 레이어에 대한 상기 별도의 제1 이미지 복원 정보를 상기 수정된 제2 이미지와 결합하는 과정을 포함하고,
    상기 수정된 제2 이미지는 적어도 하나의 픽셀이 대체된 상기 제1 이미지의 사본을 포함하는 방법.
  13. 청구항 12에 있어서,
    상기 제1 이미지 복원 정보를 복호화하는 과정을 더 포함하는 방법.
  14. 청구항 12에 있어서,
    상기 제1 이미지 복원 정보는 상기 적어도 하나의 대체된 픽셀 중 하나와 각각 연관된 적어도 하나의 레지듀얼 값을 포함하며,
    상기 제1 이미지 복원 정보를 상기 수정된 제2 이미지와 결합하는 과정은, 상기 제1 이미지 내의 적어도 하나의 대응하는 픽셀의 값을 결정하기 위해, 상기 적어도 하나의 레지듀얼 값을 상기 수정된 제2 이미지 내의 상기 적어도 하나의 대응하는 픽셀과 합산하는 과정을 포함하는 방법.
  15. 청구항 14에 있어서,
    상기 제1 이미지 복원 정보는 상기 제1 이미지 또는 상기 제2 이미지 중 하나를 상기 제1 이미지 또는 상기 제2 이미지 중 다른 하나에서 감산하여 생성되는 레지듀얼 이미지를 포함하며,
    상기 제1 이미지 복원 정보를 상기 수정된 제2 이미지와 결합하는 과정은, 상기 레지듀얼 이미지와 상기 수정된 제2 이미지를 합산하는 과정을 포함하는 방법.
  16. 청구항 12에 있어서,
    상기 제1 이미지 복원 정보는 상기 적어도 하나의 대체된 픽셀 중 하나와 각각 연관된 적어도 하나의 원본 픽셀 값을 포함하고,
    각각의 원본 픽셀 값은 상기 제1 이미지 내의 상기 대체된 픽셀의 값이며,
    상기 제1 이미지 복원 정보를 상기 수정된 제2 이미지와 결합하는 과정은, 상기 수정된 제2 이미지 내의 적어도 하나의 픽셀의 픽셀 값 각각을 상기 제1 이미지 복원 정보의 상기 적어도 하나의 원본 픽셀 값 중에서 대응하는 각각의 값으로 대체하는 과정을 포함하는 방법.
  17. 청구항 13에 있어서,
    상기 제1 이미지를 복원하기 이전에, 상기 방법은,
    수정된 제3 이미지와 연관된 제2 이미지 복원 정보를 획득하는 과정과,
    상기 수정된 제3 이미지는 적어도 하나의 픽셀이 대체된 제2 이미지의 사본을 포함하고,
    상기 제2 이미지 복원 정보를 상기 수정된 제3 이미지와 결합하여 제2 이미지를 복원하는 과정을 더 포함하는 방법.
  18. ◈청구항 18은(는) 설정등록료 납부시 포기되었습니다.◈
    청구항 17에 있어서,
    상기 제2 이미지 복원 정보를 복호화하는 과정을 더 포함하며,
    상기 제1 이미지 복원 정보를 복호화하기 위해 사용된 암호화 키는 상기 제2 이미지 복원 정보를 복호화하기 위해 사용된 암호화 키와 다른 것인 방법.
  19. 비일시적 컴퓨터 판독 가능 저장 매체에 있어서,
    실행될 때에, 청구항 1 내지 청구항 18 중 어느 한 항에 따른 방법을 수행하는 컴퓨터 프로그램 명령들을 저장하도록 구성된 비일시적 컴퓨터 판독가능 저장 매체.
  20. 이미지를 처리하기 위한 장치에 있어서,
    적어도 하나의 프로세서; 및
    상기 적어도 하나의 프로세서에 의해 실행 가능한 컴퓨터 프로그램 명령들을 저장한 메모리를 포함하고,
    상기 적어도 하나의 프로세서는,
    제1 이미지를 수정된 제2 이미지와 비교하고,
    상기 수정된 제2 이미지는 적어도 하나의 픽셀이 대체된 상기 제1 이미지의 사본을 포함하며,
    상기 비교의 결과에 기초하여,추가 컨텐츠 각각의 레이어에 대한 별도의 이미지 복원 정보를 생성하도록 구성되고,
    상기 이미지 복원 정보는 상기 수정된 제2 이미지와 결합되어 상기 제1 이미지를 복원할 수 있는 정보인 장치.
  21. 이미지를 복원하기 위한 장치에 있어서,
    적어도 하나의 프로세서; 및
    상기 적어도 하나의 프로세서에 의해 실행 가능한 컴퓨터 프로그램 명령들을 저장한 메모리를 포함하고,
    상기 적어도 하나의 프로세서는,
    수정된 제2 이미지와 연관되고, 추가 컨텐츠 각각의 레이어에 대한 별도의 이미지 복원 정보를 획득하고,
    제1 이미지를 복원하기 위해 상기 추가 컨텐츠 각각의 레이어에 대한 상기 별도의 이미지 복원 정보를 상기 수정된 제2 이미지와 결합하도록 구성되며,
    상기 수정된 제2 이미지는 적어도 하나의 픽셀이 대체된 상기 제1 이미지의 사본을 포함하는 장치.
KR1020180084977A 2017-12-19 2018-07-20 수정된 이미지들에서 원본 이미지들 복원하기 위한 방법 및 장치 KR102525127B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
EP18890347.0A EP3714425B1 (en) 2017-12-19 2018-10-22 Method and apparatus for reconstruction of original images from modified images
PCT/KR2018/012502 WO2019124708A1 (en) 2017-12-19 2018-10-22 Method and apparatus for reconstruction of original images from modified images
US16/771,433 US11455757B2 (en) 2017-12-19 2018-10-22 Method and apparatus for reconstruction of original images from modified images
CN201880077256.9A CN111406276B (zh) 2017-12-19 2018-10-22 从经修改的图像重建原始图像的方法和装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GB1721297.8 2017-12-19
GB1721297.8A GB2569547B (en) 2017-12-19 2017-12-19 Reconstruction of original images from modified images

Publications (2)

Publication Number Publication Date
KR20190074189A KR20190074189A (ko) 2019-06-27
KR102525127B1 true KR102525127B1 (ko) 2023-04-25

Family

ID=61008776

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180084977A KR102525127B1 (ko) 2017-12-19 2018-07-20 수정된 이미지들에서 원본 이미지들 복원하기 위한 방법 및 장치

Country Status (5)

Country Link
US (1) US11455757B2 (ko)
EP (1) EP3714425B1 (ko)
KR (1) KR102525127B1 (ko)
CN (1) CN111406276B (ko)
GB (1) GB2569547B (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3567500B1 (en) * 2018-05-09 2021-07-14 Siemens Aktiengesellschaft Preparation of a three-dimensional model for data transmission
US11295514B2 (en) * 2018-11-16 2022-04-05 Nvidia Corporation Inverse rendering of a scene from a single image
JP7200008B2 (ja) * 2019-02-28 2023-01-06 キヤノン株式会社 電子機器およびその制御方法およびプログラム
KR20220090178A (ko) * 2020-12-22 2022-06-29 삼성전자주식회사 이미지를 제공하는 방법 및 이를 지원하는 전자 장치

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5071188B2 (ja) * 2008-03-24 2012-11-14 富士通株式会社 画像暗号化／復号化装置及びプログラム
KR101574733B1 (ko) * 2008-11-19 2015-12-04 삼성전자 주식회사 고화질 컬러 영상을 획득하기 위한 영상 처리 장치 및 방법

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB8829697D0 (en) * 1988-12-20 1989-02-15 Ciba Geigy Ag Copying holograms
US5568570A (en) * 1994-09-30 1996-10-22 Eastman Kodak Company Method and apparatus for reducing quantization artifacts in a hierarchical image storage and retrieval system
JP2002057882A (ja) * 2000-04-21 2002-02-22 Sony Corp 情報埋め込み装置及び情報埋め込み方法、情報処理装置及び情報処理方法、コンテンツ処理装置及びコンテンツ処理方法、監視装置及び監視方法、並びに、記憶媒体
US7515730B2 (en) 2001-12-13 2009-04-07 Digimarc Corporation Progressive image quality control using watermarking
FR2849567B1 (fr) * 2002-12-31 2005-04-01 Medialive Dispositif securise pour la diffusion, l'acces, la copie, l'enregistrement, la visualisation a la demande et la gestion des droits des images photographiques de type jpeg
GB2425906B (en) * 2005-05-05 2011-04-06 Sony Uk Ltd Data processing apparatus and method
EP2071822A1 (en) * 2007-12-13 2009-06-17 Thomson Licensing Method and apparatus for inserting a removable visible watermark in an image and method and apparatus for removing such watermarks
KR20090095317A (ko) 2008-03-05 2009-09-09 삼성전자주식회사 영상 부호화 및 복호화 방법 및 장치
US8385592B2 (en) * 2009-02-04 2013-02-26 Quicksilver Software, Inc. Digital watermarking system and method
CN101494756B (zh) * 2009-02-11 2011-01-05 北京航空航天大学 一种可逆视频水印无损漂移补偿方法
WO2011034507A1 (en) * 2009-09-18 2011-03-24 Nanyang Technological University A method of providing security for transmitting a digital medical image
JP5711241B2 (ja) * 2009-10-06 2015-04-30 コーニンクレッカ フィリップス エヌ ヴェ コーンビームｃｔ画像におけるアーチファクト低減のための方法
US8751795B2 (en) * 2010-09-14 2014-06-10 Mo-Dv, Inc. Secure transfer and tracking of data using removable non-volatile memory devices
CN103765899B (zh) 2011-06-15 2018-03-06 韩国电子通信研究院 用于编码和解码可伸缩视频的方法以及使用其的设备
CN103297677B (zh) * 2012-02-24 2016-07-06 卡西欧计算机株式会社 生成重构图像的图像生成装置以及图像生成方法
CN102930499A (zh) 2012-11-16 2013-02-13 崔得龙 一种用于向数字图像信号加入和去除数字水印的方法
US9693076B2 (en) 2014-01-07 2017-06-27 Samsung Electronics Co., Ltd. Video encoding and decoding methods based on scale and angle variation information, and video encoding and decoding apparatuses for performing the methods
US9483869B2 (en) * 2014-01-17 2016-11-01 Intel Corporation Layered reconstruction for defocus and motion blur
KR102350235B1 (ko) * 2014-11-25 2022-01-13 삼성전자주식회사 영상 처리 방법 및 장치
CN106412720B (zh) 2015-07-27 2020-06-16 腾讯科技（深圳）有限公司 视频水印去除的方法和装置
KR102400529B1 (ko) 2015-10-26 2022-05-20 삼성전자주식회사 금속 케이스를 구비한 전자기기 및 이에 사용되는 금속 케이스
DE102015226400A1 (de) * 2015-12-22 2017-06-22 Siemens Healthcare Gmbh Automatisierte Ermittlung von Konturen auf Basis einer iterativen Rekonstruktion
CN105721951B (zh) 2016-01-28 2018-12-25 华为技术有限公司 一种视频水印处理的方法及装置
ES2629484B1 (es) * 2016-02-09 2018-03-08 Eloi MOLINAS LOMBART Método y sistema de sincronización de vídeo y datos
EP3236418B1 (en) * 2016-04-13 2020-10-28 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium
KR102527317B1 (ko) 2016-08-30 2023-05-03 삼성전자주식회사 금속 패드가 부착된 금속 케이스를 구비한 전자기기
CN106530247B (zh) * 2016-11-04 2019-07-09 天津大学 一种基于结构信息的多尺度图像修复方法
US10296999B2 (en) * 2017-02-13 2019-05-21 Macau University Of Science And Technology Methods and apparatus for color image watermarking

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5071188B2 (ja) * 2008-03-24 2012-11-14 富士通株式会社 画像暗号化／復号化装置及びプログラム
KR101574733B1 (ko) * 2008-11-19 2015-12-04 삼성전자 주식회사 고화질 컬러 영상을 획득하기 위한 영상 처리 장치 및 방법

Also Published As

Publication number Publication date
GB201721297D0 (en) 2018-01-31
EP3714425B1 (en) 2023-05-03
CN111406276A (zh) 2020-07-10
EP3714425A4 (en) 2021-01-13
GB2569547A (en) 2019-06-26
EP3714425A1 (en) 2020-09-30
US11455757B2 (en) 2022-09-27
US20200380739A1 (en) 2020-12-03
CN111406276B (zh) 2023-10-10
GB2569547B (en) 2021-05-12
KR20190074189A (ko) 2019-06-27

Similar Documents

Publication Publication Date Title
KR102525127B1 (ko) 수정된 이미지들에서 원본 이미지들 복원하기 위한 방법 및 장치
US9996891B2 (en) System and method for digital watermarking
US11140138B2 (en) Method for encrypting an image, method for transmitting an image, electronic device and computer readable storage medium
US8635161B2 (en) Method and apparatus for inserting a removable visible watermark in an image and method and apparatus for removing such watermarks
US9094733B2 (en) Methods and systems for cryptographic access control of video
JP6442060B2 (ja) 場所的な著作権で保護されているウォータマーキングビデオをパブリッシュする方法及び装置
US20190335233A1 (en) Method and apparatus for protecting data via application of corrupting function and complimentary restitution at video processing endpoints
JP7030200B2 (ja) レンダリング後及びラスタライズ前のレイトレーシングサンプルの修正方法
Senthilnathan et al. An enhancing reversible data hiding for secured data using shuffle block key encryption and histogram bit shifting in cloud environment
US8971532B1 (en) System and methods for protecting video content
Yi et al. An improved reversible data hiding in encrypted images
US20110258440A1 (en) System and method of encrypting a derivative work using a cipher created from its source
US20070189738A1 (en) Contents recorder, contents processing method, and computer readable medium storing contents processing program
Xu et al. Completely separable reversible data hiding in encrypted images
WO2019124708A1 (en) Method and apparatus for reconstruction of original images from modified images
US11790694B1 (en) Video player for secured video stream
Zhang et al. PVO-based reversible data hiding using bit plane segmentation and pixel expansion
US11928187B1 (en) Media hosting system employing a secured video stream
KR102036077B1 (ko) 비저블 워터마크가 삽입되는 영상을 처리하는 방법 및 그 영상 처리 장치
Ashwind et al. Secure Data Transmission Using Reversible Data Hiding
Zhou et al. Reversible Data Hiding Algorithm based on Paillier Encryption
CN117592081A (zh) 一种数据解密方法、系统、终端设备和存储介质
KR101518664B1 (ko) 비트플레인 기반 워터마킹 삽입 방법 및 장치
JP2015046738A (ja) 電子透かし検出方法
JP2006039931A (ja) コンテンツ配信システム、コンテンツ配信方法、コンテンツ配信サーバ、ユーザ端末装置およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant