KR101448493B1 - 국부적인 색역 규정들을 사용하는 이미지 처리 방법들 및 장치 - Google Patents

국부적인 색역 규정들을 사용하는 이미지 처리 방법들 및 장치 Download PDF

Info

Publication number
KR101448493B1
KR101448493B1 KR1020137012755A KR20137012755A KR101448493B1 KR 101448493 B1 KR101448493 B1 KR 101448493B1 KR 1020137012755 A KR1020137012755 A KR 1020137012755A KR 20137012755 A KR20137012755 A KR 20137012755A KR 101448493 B1 KR101448493 B1 KR 101448493B1
Authority
KR
South Korea
Prior art keywords
gamut
image data
local
color
inverse
Prior art date
Application number
KR1020137012755A
Other languages
English (en)
Other versions
KR20130107314A (ko
Inventor
춘 치 완
닐 더블유. 메스머
Original Assignee
돌비 레버러토리즈 라이쎈싱 코오포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 돌비 레버러토리즈 라이쎈싱 코오포레이션 filed Critical 돌비 레버러토리즈 라이쎈싱 코오포레이션
Publication of KR20130107314A publication Critical patent/KR20130107314A/ko
Application granted granted Critical
Publication of KR101448493B1 publication Critical patent/KR101448493B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/40—Filling a planar surface by adding surface attributes, e.g. colour or texture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G06T9/007—Transform coding, e.g. discrete cosine transform
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/64—Systems for the transmission or the storage of the colour picture signal; Details therefor, e.g. coding or decoding means therefor
    • H04N1/644—Systems for the transmission or the storage of the colour picture signal; Details therefor, e.g. coding or decoding means therefor using a reduced set of representative colours, e.g. each representing a particular range in a colour space
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/67—Circuits for processing colour signals for matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/6058—Reduction of colour to a range of reproducible colours, e.g. to ink- reproducible colour gamut
    • H04N1/6063—Reduction of colour to a range of reproducible colours, e.g. to ink- reproducible colour gamut dependent on the contents of the image to be reproduced
    • H04N1/6066—Reduction of colour to a range of reproducible colours, e.g. to ink- reproducible colour gamut dependent on the contents of the image to be reproduced dependent on the gamut of the image to be reproduced

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Discrete Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

국부적인 색역 규정들을 사용하여 이미지 데이터를 인코딩하고 디코딩하기 위한 방법들 및 장치들이 제공된다. 상기 국부적인 색역 규정들은 상기 이미지 데이터의 색역 특징들에 기초하여 규정될 수 있다. 색역 변환은 상기 이미지 데이터에 적용되고, 상기 이미지 데이터에 의해 지정된 컬러 좌표들은 국부적인 색역 규정에서 대응하는 컬러 좌표들로 맵핑된다. 국부적인 색역 규정들의 사용은 이미지 데이터 압축 또는 이미지 데이터의 증가된 컬러 심도 명세를 용이하게 할 수 있다.

Description

국부적인 색역 규정들을 사용하는 이미지 처리 방법들 및 장치{IMAGE PROCESSING METHODS AND APPARATUS USING LOCALIZED GAMUT DEFINITIONS}
본 출원은 그의 전체가 참조로서 여기에 통합된 2010년 10월 18일에 출원된 미국 특허 가출원 제 61/394,294 호에 대한 우선권을 주장한다.
본 발명은 이미지 처리, 이미지 데이터 압축, 이미지 디스플레이 및 이미지 재생에 관한 것이다. 본 발명의 실시예들은 다운스트림 디바이스에 송신하고 그 위에 디스플레이하기 위한 이미지 데이터를 처리하는 방법들 및 장치를 제공한다.
이미지 데이터(비디오 데이터 및 정지 이미지 데이터를 포함)는 다양한 상이한 포맷들 중 어느 하나를 가질 수 있다. 몇몇 예의 이미지 데이터 포맷들은: RGB, YLU, GIF, TIFF, JPEG/JIF, PNG, BMP, PDF, RAW, FITS, MPEG, MP4, 고 명암비(HDR; high dynamic range) 포맷들로서 BEF, HDRi, JPEG XR, JPEG HDR, RGBE, ScRGB과 같은 것 및 많은 다른 것들이다. 이미지 데이터 포맷들은, 예를 들면, 지정될 수 있는 상이한 컬러들의 범위(즉, 색역(gamut)), 지정될 수 있는 휘도 레벨들의 범위(즉, 동적 범위(dynamic range)), 지정될 수 있는 색역 내 개별 컬러들의 수, 지정될 수 있는 개별 휘도 레벨들의 수 등과 같은 영역들에서 상당히 다른 성능들을 가질 수 있다. 몇몇 이미지 데이터 포맷들은 상이한 성능들을 갖는 다수의 버전들을 갖는다.
컬러들은 많은 상이한 컬러 공간들에서 지정될 수 있다. 몇몇 예들은 RGB, HSV, CIE LUV, YCbCr, YIQ, xvYCC, HSL, XYZ, CMYK, CIE LAB, IPT, 및 다른 것들을 포함한다. 상이한 이미지 데이터 포맷들은 상이한 컬러 공간들에서 컬러들을 지정할 수 있다.
디스플레이들은 임의의 다양한 기초적인 디스플레이 기술들을 통합할 수 있다. 디스플레이 기술들은: 액정 디스플레이(LCD) 패널이 다양한 타입들의 백라이트 시스템들에 의해 백라이팅되는 LCD 패널 디스플레이들; 발광 다이오드(LED) 디스플레이들; 유기 LED 디스플레이들(OLED 디스플레이들); 플라즈마 디스플레이들; 음극선관(CRT) 디스플레이들; 레이저 프로젝터들, 디지털 미러 디바이스(DMD) 디스플레이들, 전계 발광 디스플레이들 등을 포함할 수 있는 디지털 시네마 디스플레이들로부터 텔레비전 세트들까지의 범위에 이른다. 임의의 이들 일반적인 기술들 내에서, 발광 및/또는 필터링 소자들에 대한 다양한 상이한 구조들 및 구성들이 가능하다. 그 결과로서, 상이한 디스플레이들은 예를 들면, 디스플레이될 수 있는 상이한 컬러들의 범위(즉, 색역), 디스플레이될 수 있는 휘도 값들의 범위(즉, 디스플레이의 동적 범위) 등과 같은 영역들에서 상당히 다른 능력들을 가질 수 있다.
넓은 색역 디스플레이(wide gamut display)는 종래의 디스플레이들상에 디스플레이될 수 있는 색역 외에 있는 컬러들을 재생할 수 있다. 그러나, 디스플레이에 제공된 이미지 데이터에 의해 지정될 수 있는 개별 컬러들의 범위 및 수는 예를 들면, 이미지 데이터 포맷, 이미지 데이터 대역폭, 이미지 데이터 압축 등의 성능들과 같은 몇몇 팩터들에 의해 제한될 수 있다.
이미지 데이터를 상이한 색역들로 처리하고 디스플레이하기 위한 방법들 및 장치에 대한 필요가 있다. 고정밀도로 상이한 컬러들을 디스플레이상에 재생하기 위해 이미지 데이터를 처리하고 디스플레이하기 위한 방법들 및 장치에 대한 필요가 있다. 디스플레이 또는 다른 다운스트림 장치에 효율적인 방식으로 이미지 데이터를 전달할 수 있고, 상이한 이미지 데이터 포맷들, 이용가능한 이미지 데이터 대역폭, 및 이미지 데이터 압축의 제한들내에 동작할 수 있는 방법들 및 장치에 대한 특정한 수요가 존재한다.
컬러들은 3차원 또는 세 개의 성분 컬러 공간들로 표현될 수 있다. 콘텐트 색역은 이미지 데이터에서 픽셀들의 국부적인 그룹에 의해 점유된 컬러 공간의 범위로서 규정될 수 있다. 이미지 데이터 포맷의 색역은 이미지 데이터 포맷에 의해 지정될 수 있는 컬러 공간의 범위로서 규정될 수 있다. 성분당 4 비트를 사용하는 3 개의 성분 컬러 공간에서 컬러들을 지정하는 이미지 데이터 포맷은, 예를 들면, 상기 이미지 데이터 포맷의 색역내 (24)3 또는 4096 컬러들까지의 명세 또는 성분 결합들에 대해 허용한다. 큰 샘플의 이미지 데이터가 고려되지 않으면(예를 들면, 긴 시퀀스의 프레임들), 이미지 데이터의 국부적인 픽셀들의 그룹은 상기 이미지 데이터 포맷에 의해 지정될 수 있는 모든 가능한 컬러들을 요구하지 않을 것이다. 더욱이, 특정한 컬러 성분 조합들이 상기 이미지 데이터에서 다른 컬러 성분 조합들보다 더 자주 일어나는 경향이 있다는 것이 인식될 수 있다.
여기에 설명된 방법들 및 장치의 특정한 실시예들은 이미지 데이터의 하나 이상의 프레임들 또는 프레임의 영역들이 상기 이미지 데이터 포맷에 의해 지정될 수 있는 완전한 색역을 사용하지 않는 경우 적용될 수 있다. 이러한 경우들에서, 상기 이미지 데이터는 국부적인 색역 규정들을 사용하여 인코딩될 수 있다. 이하에 설명된 바와 같이, 국부적인 색역 규정들의 사용은 이미지 데이터 압축, 이미지 데이터의 증가된 컬러 심도 명세, 및 비디오 전달 파이프라인의 다운스트림 디바이스들에 의해 이미지 데이터의 처리를 용이하게 할 수 있다.
본 발명은 국부적인 색역 규정들을 사용하여 이미지 데이터를 인코딩하고 디코딩하기 위한 방법들 및 장치들을 제공한다.
도 1a 및 도 1b는 CIE u'v' 컬러 공간에서 색역도들.
도 2a 및 도 2c는 예시 실시예들에 따른 이미지 데이터를 인코딩하는 방법들의 플로차트들.
도 2b 및 도 2d는 예시 실시예들에 따른 이미지 데이터를 디코딩하는 방법들의 플로차트들.
도 3a 내지 도 3c는 도 2a의 방법에 사용될 수 있는 예시 실시예들에 따른 국부적인 색역 규정들을 선택하는 방법들의 플로차트들.
도 4는 서브프레임 블록들로 분할된 이미지 데이터의 프레임의 영역을 도시하는 도면.
도 5는 이미지 데이터의 프레임의 영역들을 사용하기 위한 미리 규정된 색역 선명도들을 도시하는 도면.
도 6a 및 도 6b는 예시 실시예들에 따른 인코딩 및 디코딩 장치를 각각 도시하는 블록도들.
본 발명의 양태들 및 본 발명의 예시 실시예들의 범위는 이하에 설명되고 첨부하는 도면들에 도시된다.
첨부하는 도면들은 본 발명의 비제한적인 실시예들을 도시한다.
다음의 설명을 통해, 구체적인 상세한 설명은 당업자에게 더 완전한 이해를 제공하기 위해 설명된다. 그러나, 잘 알려진 요소들은 명세서를 불필요하게 불명확하게 하는 것을 피하기 위해 상세하게 도시되지 않거나 설명되지 않을 수 있다. 따라서, 상기 설명 및 도면들은 제한적인 의미라기보다는 설명적인 것으로 간주되는 것이다.
도 1a 및 도 1b는 예를 들면, 콘텐트 색역 경계(22)에 의해 한정되는, 콘텐트 색역의 영역(이미지 데이터에서 국부적인 픽셀들의 그룹에 의해 점유된 컬러들의 범위)이 이미지 데이터의 각각의 이미지 데이터 포맷들의 완전한 색역의 영역의 일부를 점유하는 경우들을 도시한다. 도 1a에서, 상기 이미지 데이터는 색역 경계(20)에 의해 한정된 색역을 갖는 Rec. 709 포맷에 존재하는 것으로 가정될 수 있다. 도 1b에서, 상기 이미지 데이터는 색역 경계(26)에 의해 한정된 색역을 갖는 넓은 색역 포맷(즉, Rec. 709 포맷보다 더 넓은 색역을 갖는다)에 존재하는 것으로 가정될 수 있다. 이들 경우들의 각각에 대해, 상기 이미지 데이터는 콘텐트 색역 경계(22)에 적어도 부분적으로 기초하여 결정될 수 있는 국부적인 색역 규정을 사용하여 인코딩될 수 있다. 또한 참조 목적들을 위해 도 1a 및 도 1b상에 플로팅된 것은 스펙트럼 궤적(30)(순수한 스펙트럼 또는 단색 컬러들을 나타내는 점들의 궤적) 및 CIE 표준 광원 D65(평균 일광을 나타내는 흰색 점)이다. 도 1a 및 도 1b은 도시의 용이함을 위해 2차원 공간에서 색역 경계들을 도시하는 것이 이해될 것이다. 상기에 주의된 바와 같이, 컬러들은 3차원 또는 3개-성분 컬러 공간으로 표현될 수 있다. 3차원 컬러 공간에 지정된 컬러 정보는 색채 정보가 (도 1a 및 도 1b에 도시된 바와 같이)두 개의 축들을 따라 지정되고 휘도 정보가 제 3 축을 따라 지정되는(도 1a 및 도 1b에 도시되지 않음) 컬러 공간으로 변환될 수 있다.
도 1a에 의해 도시된 경우에서, 국부적인 색역은 콘텐트 색역 경계(22)와 일치하는 국부적인 색역 경계(24)를 갖도록 규정될 수 있다. 다른 실시예들에서, 국부적인 색역 경계(24)는 콘텐트 색역 경계(22)를 둘러싸거나 포함할 수 있고/있거나 콘텐트 색역 경계(22)에 가까울 수 있다. 국부적인 색역에 의해 점유된 원래의 상기 컬러 공간의 원점은 국부적인 색역내 어느 한 점에서 규정될 수 있다. 상기 이미지 데이터의 인코딩 동안, 상기 이미지 데이터에서 지정된 컬러 좌표들은 국부적인 색역에서 대응하는 컬러 좌표들로 맵핑될 수 있다. 국부적인 색역이 상기 이미지 데이터 포맷의 색역의 영역의 일부를 포함하기 때문에, 상기 국부적인 색역내 컬러 좌표들을 표현하기 위해 감소된 비트 수가 사용될 수 있다. 그러므로, 국부적인 색역 규정들은 이미지를 나타내기 위해 사용된 데이터량을 감소시키기 위한 이러한 경우들에서 채용될 수 있다.
데이터의 무선 또는 유선 송신에 대한 대역폭 제한들은 디스플레이에 송신될 수 있는 이미지 데이터량을 제한할 수 있다. 따라서, 이미지의 원래의 컬러 심도를 보존하면서 이미지에서 컬러를 나타내기 위해 필요되는 데이터량을 감소시키기 위해 도 1a를 참조하여 상기에 설명된 바와 같은 국부적인 색역 규정들을 적용하는 것이 바람직할 수 있다.
다른 실시예들에서, 국부적인 색역 규정들은 이미지 데이터 포맷의 색역의 영역들내 지정될 수 있는 컬러들간의 단차들의 크기들을 감소(컬러들 사이의 양자화 레벨들을 감소)시키기 위해 채용될 수 있어서, 컬러들이 지정될 수 있는 정밀도를 증가시킨다. 상기 컬러 심도, 또는 동시에 이미지에 표현될 수 있는 특정 색역 내 컬러들의 수는 각각의 픽셀의 컬러를 나타내기 위해 사용된 비트들의 수(즉,"비트 심도")로 제한된다. 예를 들면, 인코딩될 이미지 데이터의 콘텐트 색역이 도 1a의 콘텐트 색역 경계(22)에 의해 한정되고, (총 32×64×32 또는 65,536 개의 상이한 컬러에 대해, 적색의 32 레벨들을 나타내기 위해 5 비트, 녹색의 64 레벨들을 나타내기 위해 6비트, 및 청색의 32 레벨들을 나타내기 위해 5 비트를 사용하여) 16-비트 심도 컬러 방식은 색역 경계(20)에 의해 한정되어 도시된 Rec. 709 포맷내 모든 이용가능한 컬러들을 나타내기 위해 사용되고 있다는 것을 가정하자. 몇몇 이미지 프레임들 또는 프레임 영역들에서, 이러한 컬러 방식에 의해 지정될 수 있는 모든 컬러들의 65,536 개의 레벨들이 사용되지 않을 수 있다; 따라서, 컬러들 사이의 양자화 레벨들을 감소시키기 위해서, 컬러들의 65,536 개의 모든 레벨들이 국부적인 색역내 컬러들로 재규정되는 새로운 국부적인 색역 규정이 적용될 수 있다. 국부적인 색역 규정들의 사용은 상기 국부적인 색역의 외부에 컬러 심도를 희생하여 상기 국부적인 색역내 컬러 심도를 증가시킬 수 있다(그에 의해 컬러들 사이의 양자화 레벨들을 감소시킴). 예를 들면, 국부적인 색역이 콘텐트 색역 경계(22)와 일치하는 국부적인 색역 경계(24)를 갖는 Rec.709 포맷내에 규정되는 경우, 새로운 16-비트 심도 컬러 방식은 상기 국부적인 색역내 모든 이용가능한 컬러들을 나타내도록 규정될 수 있고, 따라서 상기 국부적인 색역내에서 지정될 수 있는 컬러들의 수를 65,536(즉, 32×64×32) 개로 증가시킨다.
디스플레이가 이미지 데이터 포맷에 의해 지정될 수 있는 것보다 큰 컬러 심도에서 컬러들을 생성할 수 있고/있거나 컬러들 사이에 양자화된 레벨들의 더 정교한 제어가 바람직한 몇몇 경우들에서 국부적인 색역 규정들을 사용하여 컬러 심도를 증가시키는 것이 바람직할 수 있다. 예를 들면, 도 1b에 의해 도시된 바와 같이, 비트 심도가 상이한 이미지 데이터 포맷들 사이에 일정한 경우, (색역 경계(26)에 의해 제한된 색역을 갖는) 넓은 색역 포맷에서 이미지 데이터의 컬러 명세에서 정밀도는 (색역 경계(20)에 의해 제한된 색역을 갖는) Rec. 709 포맷과 같은 덜 넓은 색역 포맷에서 이미지 데이터에 대해서보다 적을 것이다. 더 넓은 색역에서 컬러들에 대한 양자화 레벨들 사이의 차이들은 컬러들이 증가된 색역 영역을 통해 지정되도록 허용하기 위해 필수적으로 더 크다. 컬러들이 지정될 수 있는 정밀도를 증가시키기 위해, 더 높은 비트 심도에서 이미지 데이터를 제공할 수 있지만 많은 경우들에서 이는 실용적이지 않을 수 있다.
도 1b 예에서, 상기 이미지 데이터는 넓은 색역 포맷내에 있고 상기 콘텐트 색역(색역 경계(22)에 의해 규정됨)의 몇몇 컬러들은 Rec.709 색역의 외부에 있다. 상기 이미지 데이터의 콘텐트 색역은 색역 경계(26)에 의해 제한된 것으로 보이는 넓은 색역 포맷의 색역의 영역의 일부를 점유한다. 상기 이미지 데이터에서 컬러들이 표현될 수 있는 정밀도를 증가시키기 위해, 국부적인 색역은 콘텐트 색역 경계(22)와 일치하거나 이를 포함하는 국부적인 색역 경계(24)를 갖는 이미지 데이터에 대해 규정될 수 있다. 새로운 컬러 방식은 이러한 국부적인 색역 내 컬러들을 나타내도록 규정될 수 있다. 상기 이미지 데이터에서 지정된 컬러 좌표들은 상기 국부적인 색역에서 대응하는 컬러 좌표들로 맵핑될 수 있다.
컬러 심도가 국부적인 색역 규정들을 사용함으로써 증가될 수 있는 방법을 설명하기 위한 예는 다음과 같다: 상기 이미지 데이터 포맷의 완전한 색역이 컬러 성분 코드워드들의 N 개의 조합들에 의해 설명되고, 상기 국부적인 콘텐트 색역은 상기 이미지 데이터 포맷의 완전한 색역에 비하여 작다고 가정하자(예를 들면, 상기 국부적인 콘텐트 색역은 N 개의 가능한 조합들의 서브세트를 요구한다). 상기 국부적인 콘텐트 색역 경계가 결정될 수 있고 N 개의 코드워드들이 상기 국부적인 콘텐트 색역 경계까지 컬러 공간을 점유하도록 재할당될 수 있다. 그러므로, N 개의 코드워드들은 이전보다 더 높은 컬러 해상도(컬러 심도)에서 상기 이미지 데이터 포맷의 완전한 색역의 더 적은 영역에서 컬러들을 지정하기 위해 사용될 수 있다.
국부적인 색역 규정과 함께 사용된 새로운 컬러 방식은 상기 이미지 데이터 포맷과 동일한 비트 심도를 가질 수 있다. 다른 경우들에서, 국부적인 색역 규정과 함께 사용된 새로운 컬러 방식은 바람직한 컬러 심도에서 국부적인 색역 내 컬러들의 명세를 여전히 허용하면서 이미지 데이터 포맷으로서 감소된 비트 심도를 가질 수 있다.
몇몇 실시예들에서, 국부적인 색역 규정을 위한 새로운 컬러 방식이 선택되고 이미지 데이터 포맷의 현존하는 컬러 방식에 의해 허용되는 것보다 더 큰 정밀도로 컬러들을 지정하기 위해 이미지 데이터의 제작후 처리 동안 전문 컬러 그레이더(color grader)에 의해 사용될 수 있다. 다른 실시예들에서, 국부적인 색역 규정을 위한 새로운 컬러 방식은 다운스트림 디바이스에 의해 결정되거나 검색될 수 있고 색역 압축이 적용되게 하였던 처리된 이미지 데이터의 컬러 명세를 강화하기 위해 사용될 수 있다(예를 들면, 넓은 색역 이미지 데이터를 더 양식화된 색역, 예를 들면, Rec.709 색역의 제한들로 압축하는 처리).
이미지 데이터가 국부적인 색역 규정을 사용하여 인코딩되는 경우, 상기 국부적인 색역 규정에 관한 정보는 다운스트림 디바이스가 상기 이미지 데이터를 디코딩하게 하기 위한 다운스트림 디바이스에 통신될 수 있다. 이러한 정보는 상기 이미지 데이터에서 메타데이터로서 인코딩될 수 있거나, 영화, 방송, 장면 등의 개시에서와 같은 이미지 데이터의 프레임들의 앞에 메타데이터로서 통신될 수 있다. 다운스트림 디바이스(예를 들면, 셋탑 박스 또는 디스플레이 프로세서)는 상기 이미지 데이터로부터 국부적인 색역 정보를 추출하고 이러한 정보를 상기 국부적인 색역 규정을 사용하여 규정된 컬러 좌표값들을 디스플레이상에 재생을 위한 컬러 좌표값들로 변환하기 위해서 적용함으로써 디스플레이를 위해 상기 이미지 데이터를 디코딩할 수 있다. 상기 재맵핑된 컬러 좌표 값들은 원래의 컬러 좌표 값들과 동일한 포맷 및 규정을 가질 수 있어서, 상기 이미지 데이터의 송신, 디스플레이 등은 영향받지 않는다.
디스플레이 전에, 상기 디코딩된 이미지 데이터는 디코딩 후 상기 이미지 데이터에서 나타날 수 있는 시각적인 아티팩트들을 감소시키기 위해 다운스트림 디바이스에 의해 선택적으로 필터링된다. 상기 시각적인 아티팩트들은 상기 이미지 데이터를 인코딩하기 위한 프레임들 또는 프레임 영역들 사이의 상이한 국부적인 색역 규정들의 적용으로부터 기인할 수 있다.
특정한 실시예들에서, 국부적인 색역 정보는 국부적인 컬러 특징들에 의존하는 동작들 및 컬러 정보의 명세를 용이하게 하기 위해 비디오 전달 파이프라인내의 스테이지들에 사용될 수 있다. 일반적인 비디오 전달 파이프라인은 예를 들면, 콘텐트 캡쳐, 제작후 에디팅, 인코딩, 송신, 디코딩 및 디스플레이와 같은 다양한 스테이지들을 포함한다. 업스트림 디바이스에 의해 파이프라인에서 먼저 생성되는 국부적인 색역 정보는 비디오 데이터 처리에서 하나 이상의 다운스트림 디바이스들을 가이드하기 위하여 (예를 들면 메타데이터에 의해) 파이프라인에 전달될 수 있다. 다운스트림 디바이스들을 예를 들면, 이미지에서 상세들을 강화하고, 잡음 또는 아티팩트들을 마스크하거나 억제하고, 국부적인 톤 맵핑을 수행하고, 및/또는 이중 변조 디스플레이들에서 유색의 백라이트에 의해 요구된 국부적인 색역을 결정하기 위해 국부적인 컬러 특징들을 사용할 수 있다. 이러한 동작들의 전체 계산 비용은 업 스트림 디바이스에 의해 미리 계산되고 상기 다운스트림 디바이스에 제공되는 국부적인 색역 정보를 사용함으로써 감소될 수 있다.
도 2a는 일 실시예에 따른 이미지 데이터를 인코딩하기 위해 국부적인 색역 규정들을 사용하는 방법(100)을 도시한다. 방법(100)은 이미지 데이터의 하나 이상의 프레임들 또는 프레임의 영역들을 포함할 수 있는 콘텐트 이미지 데이터(102)를 수신함으로써 시작한다. 이미지 데이터(102)는 예를 들면 비디오 데이터를 포함할 수 있다. 이미지 데이터(102)의 콘텐트 색역은 블록(104)에서 특징화된다. 블록(104) 색역 특징화는 예를 들면, 다음 중 하나 이상을 결정하는 것을 포함할 수 있다:
ㆍ 콘텐트 색역의 모든 지점들 또는 상기 콘텐트 색역의 일부를 포함하는 경계
ㆍ 상기 콘텐트 색역의 모든 지점들 또는 상기 콘텐트 색역의 일부를 포함하는 경계 내 영역
ㆍ 평균값들, 표준 편차, 분산, 최대 및 최소값들 등과 같은 픽셀들의 국부적인 그룹에 대해 지정된 컬러 좌표들 또는 컬러 정보에 관한 통계적인 정보
색역 특징화 방법들은 또한 도 3a 내지 도 3c를 참조하여 이하에 설명된다.
블록(107)에서, 블록(104)에서 결정된 상기 색역 특징화가, 조건들이 국부적인 색역 변환을 상기 이미지 데이터에 적용하기에 적절한지의 여부를 결정하기 위해 평가된다. 조건들이 적절하다는 것이 블록(107)에서 결정되는 경우, 이미지 데이터(102)에 대한 국부적인 색역은 블록(108)에서 결정되거나 검색된다. 상기 국부적인 색역은 미리 결정된 국부적인 색역 규정들의 세트로부터 선택될 수 있거나 또는 블록(104) 색역 특징화에 기초하여 이미지 데이터(102)에 대해 생성될 수 있다. 국부적인 색역 규정들을 결정하는 방법들은 도 3 내지 도 3c를 참조하여 이하에 논의된다. 상기 국부적인 색역 규정은 이미지의 블록들 또는 다른 영역들에 대해 지정될 수 있다. 몇몇 실시예들에서, 상기 프레임은 다수의 서브프레임 블록들로 분할될 수 있고, 다수의 서브프레임 블록들 중 하나 이상은 국부적인 색역 규정(들)에 연관될 수 있다. 다른 실시예들에서, 국부적인 색역이 연관된 영역은 이미지의 색역 특징들에 관하여 규정될 수 있다(예를 들면, 상기 국부적인 색역은 유사한 톤들을 갖는 프레임 내 객체(들) 또는 영역(들)에 대해 지정될 수 있다).
블록(108) 국부적인 색역은 상기 콘텐트 색역과 일치하거나 둘러싸는 색역 경계에 의해 규정될 수 있다. 상기 색역 경계는 예를 들면, 다음과 같은 몇몇 방식들 중 임의로 표현될 수 있다:
현재의 색역(예를 들면, Rec.709 색역)에서 지점들의 서브-세트인 지점들의 세트; 및 다항식 표현.
콘텐트 색역 경계(22)에 의해 규정된 콘텐트 색역에 대응하는 국부적인 색역 경계(24)의 예들은 도 1a 및 도 1b에 도시된다. 상기 국부적인 색역은 상기 이미지 데이터 포맷의 색역과 동일하거나 상이한 컬러 공간에 있을 수 있다. 상기 국부적인 색역이 규정되는 컬러 공간의 원점은 상기 국부적인 색역내 어느 한 지점에 위치될 수 있지만, 이는 필수적이지 않고 상기 원점은 몇몇 다른 위치에 규정될 수 있다. 몇몇 실시예들에서, 상기 원점은 이미지 데이터의 컬러 좌표값들의 평균값에 위치될 수 있다.
블록(110)에서, 국부적인 색역 변환은 상기 이미지 데이터에 적용되어 상기 국부적인 색역에서 대응하는 컬러 좌표들에 이미지 데이터(102)에 의해 지정된 컬러 좌표들을 맵핑한다. 몇몇 실시예들에서, 새로운 컬러 방식은 상기 국부적인 색역에서 컬러 좌표들을 나타내도록 규정될 수 있다. 상기 새로운 컬러 방식은 상기 이미지 데이터 포맷과 동일하거나 상이한 비트-심도를 가질 수 있다; 상기 비트-심도는 컬러들을 상기 국부적인 색역에서 지정될 수 있는 정밀도로 결정한다. 예를 들면, 상기 콘텐트 색역이 종래의 또는 넓지 않은 색역 포맷의 색역의 영역의 일부를 점유하는 경우들에서(예를 들면, 도 1a에 의해 도시된 경우), 상기 이미지 데이터에 대한 완전한 비트-심도를 사용하는 것이 필수적이지 않을 수 있고, 감소된 비트-심도가 상기 국부적인 색역 내 컬러 좌표들을 나타내기 위해 사용될 수 있다. 반면에, 상기 콘텐트 색역이 넓은-색역 포맷의 색역의 영역의 일부를 점유하고, 상기 콘텐트 색역의 적어도 일부가 종래의 또는 넓지 않은 색역 포맷의 색역의 밖에 있는 경우들에서(예컨대, 도 1b에 의해 도시된 경우), 상기 이미지 데이터 포맷의 완전한 비트-심도가 상기 국부적인 색역 내 이용가능한 컬러들의 모두를 원하는 정밀도 레벨로 나타내기 위해 사용될 수 있다.
블록(110)에서 상기 국부적인 색역 변환은 예를 들면:
ㆍ룩-업 테이블들(LUTs);
ㆍ입력값들을 수용하고 상기 입력값들을 국부적인 색역에서 대응하는 출력 값들로 변환시키는 기능;
ㆍ 등에 의해 수행될 수 있다.
몇몇 실시예들에서, 색역 특징화의 목적들을 위해, 색역 특징들을 평가, 국부적인 색역 변환을 결정; 및/또는 국부적인 색역 변환을 적용(즉, 방법(100A)의 블록들(104, 107, 108, 및/또는 110))은 그의 원래의 컬러 공간으로부터 다른 컬러 공간으로 변환될 수 있다. 새로운 컬러 공간은 시각적이고 지각적인 분석에 더 편리할 수 있다. 새로운 컬러 공간에 대한 변환은 이미지 데이터 처리 및 이미지 데이터의 더 효율적인 표현을 용이하게 할 수 있다. 상기 새로운 컬러 공간으로의 변환은 비선형적일 수 있다.
원래의 컬러 공간에서 평가된 상기 이미지 데이터 컬러 신호들에 관한 통계적인 정보는 새로운 컬러 공간에서 상이한 통계적인 값들로 변환될 수 있다. 색역 특징화에서, 평균값, 최대값, 최소값, 표준 편차, 분산들 등과 같은 통계 측정치들은 원래 및/또는 새로운 컬러 공간에서 픽셀들의 국부적인 그룹에 대해 고려될 수 있다. 평균 값들로부터의 거리와 같은 몇몇 경계 설명이 또한 고려될 수 있다.
몇몇 실시예들에 따라, 하나 이상의 변환들이 상당한 컬러 특징들을 보존하면서 변환된 컬러 신호 정보의 범위를 감소시키기 위해 블록(110)에서 적용될 수 있다. 몇몇 실시예들에서, 다양한 통계 측정치들상에 비선형 변환들을 테스트함으로써, 최적의 변환이 현저한 컬러 특징들의 왜곡을 최소화하거나 감소시키면서 컬러 신호 정보를 압축하기 위해 선택되고 적용될 수 있다. 특정 실시예들에 따라, 비선형 변환이 적용되고, 후속하여 일반적인 최적의 선형 변환(예를 들면, 단일 값 분해 또는 주성분 분석)이 상기 컬러 신호 정보를 또한 압축하도록 적용된다.
블록(112)에서, 이미지 데이터(102)가 압축된다. 압축은 예를 들면:
ㆍ 예를 들면, JPEG 이미지 데이터 및 MPEG 비디오 데이터에 사용될 수 있는, 이산 코사인 변환들(DCTs)에 의해서와 같은 변환 인코딩;
ㆍ 예를 들면, MPEG 비디오 데이터에 사용될 수 있는 예측 인코딩;
ㆍ 예를 들면, GIF 및 TIFF 이미지 데이터에 사용될 수 있는 무손실 압축(예를 들면, Lempel-Ziv-Welch 압축);
ㆍ 웨이브릿-기반 압축;
ㆍ 상기 중 하나 이상의 조합
ㆍ 등
과 같은 상기 이미지 데이터 포맷에 대해 적합한 하나 이상의 기술들을 사용하여 수행될 수 있다.
몇몇 실시예들에서, 나머지 이미지 데이터(즉, 입력 또는 이전 프레임 이미지 데이터와 예측 기술들이 적용된 후에 예측된 출력 또는 다음의 프레임 이미지 데이터 사이의 차이)는 표준 이미지 인코딩 기술들(예를 들면, DCT, 주파수-종속 또는 주파수-독립 양자화, 주파수 스캔 순서화, 고정된 또는 가변 런-길이 인코등 등)을 사용하여 인코딩된다. 예측들이 프레임간 또는 프레임내 예측 기술들을 사용하여 수행된다. 프레임들은 국부적인 서브프레임 블록들로 분할될 수 있다. 각각의 연속하는 블록은 이전에 인코딩된 이미지 데이터를 사용하여 예측된다. 상기 나머지 이미지 데이터는 입력 이미지의 몇몇 통계적인 정보 및 블록-기반 예측 기술들에 의한 몇몇 새로운 국부적인 통계적 정보를 전달한다. 여기에 설명되는 국부적인 색역 표현 기술들은 나머지 이미지 데이터에 적용될 수 있다.
다운스트림 디바이스들이 상기 이미지 데이터를 처리하고 디코딩하는 것을 돕기 위해, 블록(114)에서 메타데이터(116)는 상기 이미지 데이터에 임베딩될 수 있거나 상기 이미지 데이터와 함께 송신될 수 있다. 메타데이터(116)는 특정 프레임들 또는 프레임의 영역들에 대한 국부적인 색역 규정에 관한 정보를 제공할 수 있다. 메타데이터(116)는 예를 들면: 상기 다운스트림 디바이스에 이용가능한 국부적인 색역 규정들(40)의 라이브러리에 대한 인덱스(도 5); 국부적인 색역 규정(예를 들면, 인덱스에 의해 지정됨)이 적용되는 프레임의 영역(들)을 식별하는 좌표들(42)(도 5); 맵핑 함수에 관련하거나 또는 룩-업 테이블이 도출될 수 있게 하는 정보(즉, 디스플레이상에 재생을 위해 상기 국부적인 색역 규정을 사용하여 규정된 컬러 좌표들을 상기 이미지 데이터의 컬러 좌표들로 다시 맵핑하기 위해), 등을 포함할 수 있다. 메타데이터(116)를 포함하는 상기 처리된 및 압축된 이미지 데이터(118)는 이후 다운스트림 디바이스로 송신을 위해 출력된다.
국부적인 색역 규정들은 모든 경우들에 적용되지 않을 수 있다. 예를 들면, 방법(100)에서, 이미지 데이터의 프레임의 영역들 또는 몇몇 프레임들에 대해서, 조건들이 국부적인 색역 변환을 상기 이미지 데이터에 적용하기에 적절하지 않다는 색역 특징들의 평가가 블록(107)에 의해 결정되는 경우, 국부적인 색역 규정들이 적용되지 않을 수 있다. 이러한 경우들에서, 방법(100)은 국부적인 색역 결정 및 변환을 바이패스하고 블록(112)에서 이미지 데이터를 압축하는 것을 진행할 수 있다. 몇몇 실시예들에서, 메타데이터(116)는 국부적인 색역 규정들이 이러한 이미지 데이터에 적용되지 않는 것을 나타내는 상기 다운스트림 디바이스에 통신될 수 있다.
도 2a의 방법(100)에 따라 인코딩된 이미지 데이터(118)는, 예를 들면, 도 2b의 방법(120)에 도시된 바와 같이, 이를 디스플레이에 출력하는 것을 준비하기 위한 디스플레이 또는 다른 다운스트림 디바이스에 의해 후속하여 디코딩될 수 있다. 방법(120)은 처리된 이미지 데이터(118)을 수신함으로써 시작한다. 방법(120)은 상기 이미지 데이터(118)로부터 메타데이터(116)를 추출함으로써 블록(122)으로 진행한다. 블록(124)에서, 상기 이미지 데이터는 압축해제된다. 블록(126)에서, 압축해제된 이미지 데이터의 컬러 정보는 역 국부적인 색역 변환을 상기 이미지 데이터에 적용함으로써 디코딩된다. 상기 블록(126)의 역변환은 적용가능한 국부적인 색역 규정의 컬러 좌표값들로부터 디스플레이상에 재생을 위한 상기 이미지 데이터 포맷의 컬러 좌표값들로 맵핑하는 것을 안내하는 메타데이터(116)에 적어도 부분적으로 기초할 수 있다. 예를 들면, 방법(120)을 실행하는 상기 다운스트림 디바이스는 국부적인 색역 규정들의 라이브러리(40)를 이 방법에 이용가능하게 할 수 있다(도 5를 참조). 메타데이터(116)는 국부적인 색역 규정들의 라이브러리(40)를 인덱싱하기 위해 사용되는 국부적인 색역 플래그들, 및 특정한 국부적인 색역 규정이 적용되는 프레임의 영역(들)을 식별하는 좌표들을 포함할 수 있다(도 5 참조). 몇몇 실시예들에서, 상기 국부적인 색역 규정들의 라이브러리(40)는 메타데이터(116)를 사용하여 구성될 수 있다.
다른 실시예들에서, 상기 블록(126) 변환은 적용가능한 국부적인 색역 규정의 컬러 좌표값들로부터 디스플레이상에 재생을 위해 상이한 컬러 공간(예를 들면, RGB 컬러 공간)내 컬러 좌표값들로 맵핑할 수 있다.
방법(120)의 블록(128)에서, 상기 디코딩된 이미지 데이터는 디코딩 후 이미지 데이터에 나타날 수 있는 시각적인 아티팩트들을 감소시키기 위해 선택적으로 필터링된다. 필터링되고, 디코딩된 최종 이미지 데이터는 디스플레이에 출력 이미지 데이터(130)로서 출력된다.
몇몇 오버헤드가, 다운스트림 디바이스들이 상기 이미지 데이터를 디코딩하게 하는 메타데이터(116)를 통신하기 위해 요구된다. 증가된 오버헤드에도 불구하고, 상기 콘텐트 색역의 영역은 상기 이미지 데이터 포맷의 색역의 영역의 일부이고, 이미지 데이터의 더 큰 압축은 국부적인 색역 규정들(도 1a로 도시된 경우와 같이)을 사용하여 상기 이미지 데이터를 인코딩함으로써 적합한 환경들에서 달성될 수 있다.
도 3a, 도 3b, 및 도 3c는 예시 실시예들에 따라 방법(100)의 블록들(104, 107, 108)(도 2a)의 특정의 예시 구현들로서 적용될 수 있는 방법들(200, 240, 280) 각각을 도시한다. 방법들(200, 240, 280)의 각각에서, 콘텐트 이미지 데이터(102)의 프레임은 블록(202)에서 수신되고 서브프레임 블록들로 분할되고, 각각의 서브프레임 블록은 컬러 정보를 나타내는 값들과 연관된 N×N 픽셀들을 포함한다. 도 4는, 예를 들면, 4 개의 서브프레임 블록들(32)로 분할된 프레임(31)의 영역을 도시한다. 프레임은 도시된 바와 같이 실질적으로 4 개 이상의 서브프레임들 블록들을 가질 수 있다. 도 4의 도시된 예에서, 각각의 서브프레임 블록(32)은 8×8 픽셀들을 갖는다. 상기 이미지 데이터가 CIE LUV 컬러 공간에 나타내지는 경우, 서브프레임 블록의 64 픽셀들의 각각은 L', u', v' 값들과 연관될 수 있다. 다른 컬러 공간들에서 나타내진 이미지 데이터에 대하여, 픽셀들의 각각은 다른 컬러 값들과 연관될 수 있다.
방법들(200, 240, 280)의 각각에서, 각각의 서브프레임 블록(32)에 대한 색역 특징들은 블록(들)(204)에서 결정된다. 이러한 색역 특징들에 기초하여, 하나 이상의 조건들이 블록(들)(206)에서 평가될 수 있다. 몇몇 조건들이 만족되는 경우, 국부적인 색역 규정들이 블록(들)(208)에서 검색된다.
방법들(200, 240, 280)의 각각에 대해서, 이미지 데이터로부터 결정된 상기 색역 특징들은 각각의 서브프레임 블록의 평균 컬러(블록(204A)에서 결정됨)를 표시하는 값을 포함할 수 있다. 몇몇 실시예들에서, 이러한 값은 예를 들면, DCT 계수 매트릭스의 DC 계수(즉, DC 값)일 수 있다(도 4 참조). DC 계수(33)의 결정은 서브프레임 블록(32)에서 픽셀 값들에 이산 코사인 변환(DCT)을 적용하는 것을 포함할 수 있다. 상기 이미지 데이터의 색역 특징들은 또한 각각의 서브프레임 블록의 최소 및 최대 컬러 값들(블록(204B)에서 결정됨)을 포함할 수 있다. 상기 이미지 데이터가 CIE LUV 컬러 공간에서 표현되는 경우, 평균값들(예를 들면, DC 계수들(33)) 및 각각의 서브프레임 블록(32)의 최소 및 최대는 L', u', v' 성분들의 각각에 대해 개별적으로 계산될 수 있다. 특정한 다른 실시예들에서, 블록들(204)에서 색역 특징들은 상기 이미지 데이터에서 메타데이터 또는 예를 들면, 컬러 그레이딩 툴과 같은 업스트림 디바이스로부터 통신에 의해 인코더로 제공될 수 있다.
방법들(200, 240, 280)은 블록(들)(206)에서 평가된 조건들 및 블록(들)(208)에서 선택 또는 생성되는 국부적인 색역 규정들이 다르다. 도 3a의 방법(200)은 조건들이 데이터 압축을 용이하게 하기 위해 국부적인 색역 규정을 사용하기에 적합한지의 여부를 평가한다. 도 3b의 방법(240)은 조건들이 컬러 심도를 증가시키기 위해 국부적인 색역 규정을 사용하기에 적합한지의 여부를 평가한다. 도 3c의 방법(280)은 방법들(200, 240)의 양태들을 통합하고 조건들이 데이터 압축을 용이하게 하거나 컬러 심도를 증가시키기 위해 국부적인 색역 규정을 사용하기에 적합한지의 여부를 평가한다.
도 3a의 방법(200)은 상기에 설명된 바와 같이, 블록(202)에서 프레임을 서브프레임 블록들(32)로 분할하고 블록들(204)에서 색역 특징들을 결정함으로써 시작한다. 블록들(204)에서 색역 특징들을 결정한 후, 방법(200)은, 각각의 서브프레임 블록(32)에 대하여, (1) 평균값과 최소값, 및 (2) 평균값과 최대값 사이의 차들의 절대값이, 각각 미리 결정된 임계치(즉, "THRESHOLD1")보다 작은지의 여부를 평가함으로써 블록(206B)으로 진행한다. 이러한 차이들이 임계값보다 적지 않은 경우, 방법(200)은, 상기 조건들이 국부적인 색역 규정을 사용하기에 적합하지 않다는 표시를 리턴하는 블록(209)으로 진행할 수 있다. 예를 들면, 상기 콘텐트 색역은 국부적인 색역 규정들의 사용이 다운스트림 디바이스들에 대해 국부적인 색역 규정들을 사용하는 것에 관하여 정보를 통신할 때 오버헤드를 고려한 후 적은 양을 넘는 이미지 데이터를 감소시키지 않을 수 있을 만큼 큰 영역을 포함할 수 있다.
대안적인 실시예들에서, 하나 이상의 다른 조건들이 데이터 압축 목적들을 위해 국부적인 색역 규정들을 사용하기에 적합한지를 결정하기 위해 방법(200)의 블록(206B)에서 평가될 수 있다. 이러한 다른 조건들은 예를 들면:
ㆍ 콘텐트 색역의 영역을 이미지 데이터 포맷의 색역의 영역의 백분율로서 평가하고;
ㆍ 상기 콘텐트 색역의 체적을 이미지 데이터 포맷의 색역의 체적의 백분율로서 평가하고(즉, 3차원 컬러 공간에서 색역에 관하여);
ㆍ 평균값들과 상기 이미지 데이터 포맷의 색역의 경계 사이의 거리를 평가하고;
ㆍ 이웃하는 서브프레임 블록들의 컬러 특징들을 평가하고;
ㆍ 국부적인 색역 변환을 적용하는 비용들 및 이익들을 평가하고(예를 들면, 비용들은 시각적인 아티팩트들을 포함할 수 있다);
ㆍ 전역적인 색역 변환을 적용하는 비용들 및 이익들을 평가하고;
ㆍ 등
을 포함할 수 있다.
방법(200)의 블록(206B)에서 평가된 최소/최대값들과 평균값들 사이의 차이들이 임계값들보다 적을 경우, 방법(200)은 블록(208D)에서 상기 이미지 데이터에 대한 국부적인 색역 규정을 검색하는 것에 의해 진행한다. 상기 국부적인 색역 규정은: 미리 결정된 국부적인 색역 규정들의 세트로부터 선택되고, 메모리로부터 검색되고, 비디오 신호로부터 추출되고, 및/또는 평균값들 및/또는 블록들(204)에서 결정된 최소 및 최대값들(또는 다른 색역 특징들)에 기초하여 생성될 수 있다. 상기 국부적인 색역 규정은 상기 콘텐트 색역과 일치하거나 둘러싸는 경계를 가질 수 있다.
도 3b의 방법(240)은 그의 컬러 심도를 증가시키기 위해 이미지 데이터를 인코딩하기 위해 사용될 수 있는 국부적인 색역 규정을 결정한다. 방법(240)은 예를 들면, 컬러들이 상기 이미지 데이터에서 지정될 수 있게 하는 정밀도를 증가시키는 것이 이러한 경우들에서 바람직할 수 있기 때문에, 상기 이미지 데이터 포맷이 넓은 색역(Rec. 709 포맷과 같은 종래의 색역보다 넓은 색역)을 가지는 경우, 적용될 수 있다. 도 1b를 참조하여 상기에 설명된 바와 같이, 국부적인 색역 규정들을 사용하여 이미지 데이터를 인코딩하는 것은 상기 이미지 데이터의 비트 심도를 반드시 증가시키지 않고 더 많은 수의 컬러들이 상기 이미지 데이터 포맷의 색역의 영역 내에 지정되는 것을 허용할 수 있다.
도 3b에 도시된 바와 같이, 블록(204)에서 색역 특징들을 결정한 후, 방법(240)은 콘텐트 색역의 경계상의 지점들이 상기 이미지 데이터 포맷의 색역의 경계에 충분히 근접한지의 여부를 결정함으로써 블록(206A)으로 진행한다. 상기 경계가 충분히 근접하지 않은 경우, 방법(240)은 조건들이 국부적인 색역 규정을 사용하기에 적합하지 않다는 표시를 리턴하는 블록(209)으로 진행할 수 있다(예를 들면, 상기 콘텐트 색역이 넓은 색역 포맷의 색역의 경계들에 가까워지지 않아서, 특정한 국부적인 색역을 규정하는 것이 필수적이지 않다;그러나, 몇몇 실시예들에서, 다른 색역 규정이 종래 또는 넓지 않은 색역 포맷의 색역 규정과 같은 상기 이미지 데이터를 인코딩하기 위해 사용될 수 있다).
상기 콘텐트 색역의 경계가 상기 이미지 데이터 포맷의 색역의 경계에 충분히 가까운 경우, 방법(240)은 (1) 평균값 및 최소값, 및 (2) 평균값 및 최대값 사이의 차이들의 절대값이 각각 미리 결정된 임계값(즉, "THRESHOLD2")보다 작은지의 여부를 평가함으로써 블록(206C)으로 진행한다. 이러한 차이들이 상기 임계값보다 작지 않은 경우, 방법(240)은 조건들이 국부적인 색역 규정을 사용하기에 적합하지 않다는 표시를 리턴하는 블록(209)으로 진행할 수 있다. 예를 들면, 상기 콘텐트 색역은, 국부적인 색역 규정들의 사용이 컬러 심도를 상당한 정도를 넘어서 증가시킬 수 없는 그러한 큰 영역을 포함할 수 있다.
방법(240)의 블록(206C)에서 평가된 최소/최대 값들과 평균값들 사이의 차이들이 임계값들보다 적은 경우, 방법(240)은 상기 이미지 데이터에 대한 국부적인 색역 규정을 검색하는 블록(208A)으로 진행한다. 상기 국부적인 색역 규정은 미리 결정된 국부적인 색역 규정들의 세트로부터 선택될 수 있거나 블록들(204)에서 결정된 평균값들 및/또는 최소 및 최대값들(또는 다른 색역 특징들)에 기초하여 생성될 수 있다. 상기 국부적인 선명도는 상기 콘텐트 색역과 일치하거나 둘러싸인 경계를 가질 수 있다. 새로운 컬러 방식은 컬러 심도를 증가시키기 위해 상기 국부적인 색역에 대해 규정될 수 있다.
다른 실시예들에서, 국부적인 색역 규정들은 상기 콘텐트 색역 경계가 상기 이미지 데이터 포맷의 색역 경계에 얼마나 가까운지에 관계없이 규정될 수 있다. 그러나, 국부적인 색역 정보에 기초한 변환들과 같은 몇몇 동작들은, 상기 이미지 데이터 포맷의 색역 경계에 대한 국부적인 콘텐트 색역 경계, 및/또는 이웃하는 서브프레임 블록들의 국부적인 콘텐트 색역 경계의 상대적인 관계에 기초할 수 있다.
도 3c의 방법(280)은 데이터 압축을 용이하게 하거나 컬러 심도를 증가시키기 위해 국부적인 색역 규정을 검색하기 위해 방법들(200, 240)의 양태들을 통합한다. 방법(280)에서, 방법들(200, 240)의 단계들과 유사한 단계들은 동일한 참조 번호들로 라벨링된다. 도 3c에 도시된 바와 같이, 블록들(204)에서 색역 특징들을 결정한 후, 방법(280)은 도 3a의 블록(206B) 및 도 3B의 블록들(206A, 206C)을 참조하여 상기에 논의된 바와 같은 조건들을 각각의 서브프레임 블록(32)에 대해 평가하는 블록들(206)(블록들(206A, 206B, 206C)을 포함함)로 진행한다. 이러한 평가들의 결과에 기초하여, 방법(280)은 도 3c에 도시된 바와 같은 다음 단계들 중 하나로 진행한다:
ㆍ 조건들이 국부적인 색역 규정을 사용하기에 적합하지 않다는 표시를 블록(209)에서 리턴하는 단계;
ㆍ 컬러 심도를 증가시키기 위해 국부적인 색역 규정을 블록(280A)에서 검색하는 단계; 및
ㆍ 데이터 압축을 용이하게 하기 위해 국부적인 색역 규정을 블록(208D)에서 검색하는 단계.
방법들(200, 240, 280)의 몇몇 실시예들에서, 조건들이 국부적인 색역 규정을 사용하기에 적합하지 않은 경우, 블록(209)에서 표시를 리턴하기보다는 방법(240)은 블록(209)에서 단순히 아무것도 하지 않을 수 있다(이미지 프로세싱이 국부적인 색역 규정들의 선택 및 적용 없이 다음 단계로 진행하게 한다).
(방법들(200, 240, 280)에 대해 상기에 설명된 바와 같은) 색역 특징들을 결정 및 평가하고 국부적인 색역 규정들을 선택하는 단계들이 이미지 데이터의 각각의 서브프레임 블록(또는 다른 부분들)상에 수행될 수 있다는 것이 이해될 것이다. 상기 방법들은 이미지 데이터의 연속적인 프레임들에 대해 반복될 수 있다.
도 2c는 다른 실시예에 따라 이미지 데이터를 인코딩하기 위해 국부적인 색역 규정들을 사용하는 예시 방법(100A)을 도시한다. 방법(100A)의 단계들에 대한 참조 번호들은 "A"자를 붙이는 것을 제외하고, 도 2c의 방법(100A)은 도 2a의 방법(100)에 대해 어떤 점에서 유사하고, 유사한 참조 번호들이 유사한 단계들을 나타내기 위해 사용된다. 방법(100A)은 이미지 데이터(102)의 각각의 프레임(또는 프레임의 영역)상에 수행될 수 있다.
방법(100A)은 이미지 데이터(102)의 프레임 또는 프레임의 영역을 수신함으로써 시작한다. 이미지 데이터(102)의 콘텐트 색역은 블록(104A)에서 특징화된다. 블록(107A)에서, 블록(104A)에서 결정된 색역 특징화는 조건들이 국부적인 색역 변환을 상기 이미지 데이터에 적용하기에 적합한지의 여부를 결정하기 위해 평가된다. 블록들(104A, 107A)에서 수행된 단계들은 방법(100)의 블록들(104, 107)에서 수행되는 단계들과 유사할 수 있다.
조건들이 적합한 것이 블록(107A)에서 결정되는 경우, 방법(100A)은: 이미지 데이터의 평균 컬러 좌표값을 결정하고, 이러한 평균 컬러 좌표값에 기초하여, 국부적인 색역 변환을 상기 이미지 데이터의 나머지 컬러 좌표값들에 적용하는 것에 의해 진행할 수 있다. 예를 들면, 방법(100A)의 예시적인 실시예에서, 블록(106A)에서 이산 코사인 변환(DCT)은 상기 이미지 데이터의 DCT 계수 매트릭스의 DC 계수(33)(즉, DC 값)를 결정하기 위해 상기 이미지 데이터의 픽셀 값들에 적용될 수 있다(도 4 참조). 상기 DC 계수(33)에 기초하여, 국부적인 색역 변환은 블록(108A)에서 결정될 수 있다. 상기 국부적인 색역 변환은 블록(110A)에서 상기 이미지 데이터에 적용될 수 있어서, DCT 계수 매트릭스(즉, AC 계수들(34)-도 4를 참조)에서 나머지 값들은, 상기 국부적인 색역 변환이 컬러 좌표값들을 상기 DC 계수(33)에 가까운 새로운 값들에 맵핑하기 때문에, 평균적으로 작게 되는 경향이 있다. 따라서, 블록(111A)에서 변환된 이미지 데이터의 양자화시, 많은 AC 계수들(34)은 0으로 양자화될 수 있어서, 블록(112A)에서 상기 이미지 데이터의 압축을 용이하게 한다. 블록(110A)에서 상기 국부적인 색역 변환은 상기 DC 계수(33)에 영향을 미치지 않는다. 몇몇 실시예들에서, 블록(110A)에서 상기 국부적인 색역 변환은 프레임내 블록(또는 다른 영역)의 DC 계수에 기초하여, 또는 프레임내 복수의 이웃하는 블록들의 DC 계수들(예를 들면, 이웃하는 블록들의 DC 계수들의 평균과 같은)에 기초하여 결정될 수 있다.
블록(106A)에서 DC 또는 평균값을 결정하고 블록(110A)에서 국부적인 색역 변환을 적용하기 위해 방법(100A)에서 사용된 변환은 이산 코사인 변환에 한정되지 않는다. 다른 실시예들에서, 몇몇 다른 변환이 적용될 수 있고, 이는 상기 이미지 데이터에 대한 DC 또는 평균 성분을 결정함으로써 시작하고, 이후 각각의 값에 대해, 평균 성분으로부터의 차이들(또는 "나머지")을 결정한다.
다운스트림 디바이스가 상기 이미지 데이터를 처리하고 디코딩하는 것을 돕기 위해, 블록(114A)에서 메타데이터(116)는 상기 이미지 데이터에 임베딩될 수 있거나, 상기 이미지 데이터와 함께 송신될 수 있다. 메타데이터(116)는 국부적인 색역 변환이 상기 이미지 데이터에 적용된다는 표시를 포함할 수 있다. 특정한 실시예들에서,메타데이터(116)는 상기 국부적인 색역 변환을 결정하고 적용하기 위해 사용된 알고리즘에 관한 정보를 제공할 수 있다(예를 들면, 상기 국부적인 색역 변환이 프레임내 단일 블록의 DC 계수에 기초하여 선택되는지 또는 프레임내 복수의 이웃하는 블록들의 DC 계수들에 기초하여 선택되는지). 변환되고 압축되고 처리된 최종 데이터(118A)는 다운스트림 디바이스에 출력된다.
다른 실시예들에서, 방법(100A)에서 블록들(104A, 107A)은 수행될 필요가 없다. 이러한 실시예들에서, 국부적인 색역 변환은 서브프레임 블록에 대한 DC 계수 및/또는 주변의 또는 가까운 서브프레임 블록들에 대한 DC 계수들에 기초하여 이미지 데이터의 각각의 서브프레임 블록(또는 다른 영역)상에 수행될 수 있다. 이미지 데이터의 서브프레임 블록(또는 다른 영역)을 수신하면, 상기 방법은 예를 들면, 방법(100A)의 블록(106A)에서 설명된, 이미지 데이터의 서브프레임 블록에 대한 DC 계수를 결정하는 것으로 진행될 수 있다. 다른 실시예들에서, 국부적인 색역 변환은 예를 들면, 컬러 그레이딩 툴에 의해 생성되고, 상기 이미지 데이터에서 송신된 메타데이터에 의해 통신되는 색역 정보에 기초한 이미지 데이터의 각각의 서브프레임 블록상에 수행될 수 있다.
국부적인 색역 변환이 이미지 데이터의 각각의 서브프레임 블록(또는 다른 영역)상에 수행되는 몇몇 실시예들에서, 메타데이터(116)는 방법(100A)의 블록(114A)에서 상기 이미지 데이터에 인코딩될 필요가 없을 수 있다. 예를 들면, 다운스트림 디바이스는 국부적인 색역 변환이 미리 결정된 알고리즘에 기초하여 이미지 데이터의 각각의 서브프레임 블록에 적용된다는 가정 아래에 상기 이미지 데이터를 디코딩하는 것으로 진행되도록 구성될 수 있다(예를 들면, 블록에 대한 DC 계수 및/또는 주변 또는 근처의 서브프레임 블록들에 대한 DC 계수들에 기초한 알고리즘).
도 2d는 예를 들면, 도 2c의 방법(100A)에 따라 인코딩된 이미지 데이터를 디코딩하기 위해 디스플레이 또는 다른 다운스트림 디바이스에 의해 수행될 수 있는 방법(120A)의 예시 구현을 도시한다. 방법(120A)은 상기 디스플레이에 출력하기 위한 상기 이미지 데이터를 준비하기 위해 처리된 이미지 데이터(118)의 각각의 프레임 또는 프레임의 영역상에 수행될 수 있다. 방법(120A)의 단계들에 대한 참조 번호들은 "A"자를 붙이는 것을 제외하고, 도 2d의 방법(120A)은 도 2b의 방법(120)과 어떤 점들에서 유사하고, 유사한 참조 번호들이 유사한 단계들을 나타내기 위해 사용된다.
방법(120A)은 처리된 이미지 데이터(118)의 프레임의 영역 또는 프레임을 수신함으로써 시작한다. 방법(120A)은 이미지 데이터(118)로부터 메타데이터(116)를 추출함으로써 블록(122A)으로 진행한다. 블록(124A)에서, 상기 이미지 데이터(118)가 압축해제된다. 메타데이터(116)가 국부적인 색역 변환이 상기 이미지 데이터에 적용되는 것을 블록(124B)에 나타낼 경우, 블록(125A)에서 DC 계수(33)는 상기 이미지 데이터로부터 추출된다(방법(100A)의 블록(110A)에 적용된 국부적인 변환에 의해 영향을 받지 않음). 이러한 DC 계수(33)에 기초하여, 역 국부적인 색역 변환은 블록(125B)에서 결정될 수 있다- 즉, 상기 DC 계수(33)에 기초하여(선택적으로 특정한 실시예들에 대해 메타데이터(116)와 함께), 상기 다운스트림 디바이스는 국부적인 색역 변환이 방법(100A)의 블록(108A)에서 결정되는 알고리즘을 확인할 수 있다. 블록(126A)에서, 상기 역 국부적인 색역 변환은 상기 이미지 데이터에 적용되어 적용가능한 국부적인 색역 규정의 컬러 좌표값들을 디스플레이상에 재생을 위한 이미지 데이터 포맷의 컬러 좌표값들로 맵핑한다. 다른 실시예들에서, 블록(126A)에서 변환은 적용가능한 국부적인 색역 규정의 컬러 좌표값들로부터 디스플레이 상에 재생을 위해 상이한 컬러 공간(예를 들면, RGB 컬러 공간)내 컬러 좌표값들로 맵핑할 수 있다.
방법(120A)의 블록(128A)에서, 디코딩된 이미지 데이터는 디코딩 후 상기 이미지 데이터에 나타날 수 있는 시각적인 아티팩트들을 감소시키기 위해 필터링될 수 있다. 필터링되고, 디코딩된 최종 이미지 데이터는 출력 이미지 데이터(130)로서 디스플레이에 출력된다.
도 6a 및 도 6b는 여기에 설명된 하나 이상의 방법들을 실행하기 위해 사용될 수 있는 인코딩 및 디코딩 장치(140, 160)를 각각 도시한다. 인코딩 장치(140)에 의해 인코딩된 이미지 데이터는 디코딩 장치(160)을 사용하여 디코딩될 수 있다. 인코딩 장치(140)는 예를 들면, 하나 이상의 방법들(100(도 2a), 100A(도 2c), 200(도 3a), 240(도 3b), 280(도 3c))을 실행할 수 있다. 디코딩 장치(160)는 예를 들면, 방법들(120(도 2b), 120A(도 2d))을 실행할 수 있다.
도 6a의 도시된 실시예에서, 인코딩 장치(140)는 색역 특징화 및 선택 유닛(142)을 통합한다. 색역 특징화 및 선택 유닛(142)은 예를 들면, 하나 이상의 방법들(200(도 3a), 240(도 3b), 280(도 3c))을 수행하도록 구성될 수 있다. 색역 특징화 및 선택 유닛(142)은 이미지 데이터(102)를 수신하고 이미지 데이터(102)의 색역 특징들을 결정하거나 획득하도록 구성될 수 있다. 색역 특징화 및 선택 유닛(142)은 국부적인 색역 규정들(144)의 저장소(repository)에 액세스할 수 있다. 색역 특징화 및 선택 유닛(142)은 이미지 데이터(102)의 색역 특징들을 평가하기 위해 소프트웨어 및/또는 하드웨어 기능들을 실행할 수 있다. 이러한 평가는 이미지 데이터 프레임의 몇몇 서브프레임 블록들의 각각에 수행될 수 있다. 이러한 평가에 기초하여, 색역 특징화 및 선택 유닛(142)은 이미지 데이터를 인코딩하기 위한 저장소(144)로부터 적절한 국부적인 색역 규정(146)을 선택할 수 있다. 국부적인 색역 규정들(146)의 사용은 상기 설명된 바와 같이 컬러들의 데이터 압축 또는 더 정밀한 재생을 용이하게 할 수 있다.
국부적인 색역 규정(146)은 이미지 데이터와 함께 색역 변환 유닛(148)에 제공될 수 있다. 색역 변환 유닛(148)은 이미지 데이터(102)에 의해 지정된 컬러 좌표들을 상기 국부적인 색역 규정의 대응하는 컬러 좌표들로 맵핑하여, 인코딩 장치(140)의 압축 유닛(152)에 제공되는 변환된 데이터(150)를 초래하도록 구성된다.
몇몇 이미지 데이터 프레임들 또는 서브프레임 블록들에 대하여, 조건들이 국부적인 색역 규정을 사용하기에 적합하지 않다는 것이 색역 특징들의 평가로부터 결정될 수 있다. 이러한 경우들에서, 색역 특징화 및 선택 유닛(142)은, 상기 이미지 데이터(102)가 색역 변환 유닛(148)을 바이패싱하여 압축 유닛(152)으로 전달되게 한다.
압축 유닛(152)은 상기에 설명된 압축 알고리즘 중 하나와 같이 적절한 압축 기술을 사용하여 수신하는 이미지 데이터를 압축하도록 동작가능하다. 최종 압축된 이미지 데이터(154)는 메타데이터 기록기(156)로 전달되고, 상기 메타데이터 기록기(156)는 색역 변환 유닛(148)과 통신하고 메타데이터 저장소내의 메타데이터(116)에 액세스한다. 색역 변환 유닛(148)으로부터 수신된 신호들에 기초하여, 메타데이터 기록기(156)는 다운스트림 디바이스들이 메타데이터를 디코딩하는 것을 도울 메타데이터(예를 들면, 국부적인 색역 규정을 지정하는 메타데이터)를 인코딩할 수 있다. 메타데이터(116)를 포함하는 최종 처리된 이미지 데이터(118)는 이후 다운스트림 디바이스로 송신을 위해 출력된다.
도 6b는 디스플레이상에 재생을 위한 처리된 이미지 데이터(118)를 수신하거나 디코딩할 수 있는 다운스트림 디바이스(즉, 디코딩 장치(160))를 도시한다. 도시된 실시예에서, 디코딩 장치(160)는 처리된 이미지 데이터(118)로부터 메타데이터(116)를 추출하도록 구성된 메타데이터 판독기 또는 추출기(162)를 포함한다. 상기 이미지 데이터는 후속하여 압축 해제를 위해 압축 해제 유닛(164)에 제공된다. 역 변환 유닛(168)은 비압축된 데이터(116) 및 메타데이터(116)를 수신한다. 메타데이터(116)에 의해 안내되어, 역 변환 유닛(168)은 상기 이미지 데이터에 적용가능한 국부적인 색역 변환의 역을 적용함으로써 상기 이미지 데이터를 디코딩한다. 상기 역 변환은 국부적인 색역 규정의 컬러 좌표값들을, 디스플레이상에 재생을 위해 상기 이미지 데이터 포맷의 컬러 좌표값들로 맵핑할 수 있다. 필터(172)는 디코딩후 시각적인 아티팩트들을 감소시키기 위해 최종 디코딩된 이미지 데이터(170)를 필터링하고, 이미지 데이터(130)을 디스플레이상에 출력한다.
본 발명에 따른 방법들 및 장치가 이용가능하게 될 수 있는 몇몇 특정한 방식들은:
ㆍ 본 발명의 실시예에 따른 장치를 포함하는 이미지 프로세싱 칩들;
ㆍ 셋-탑 박스, 텔레비전, 컴퓨터 모니터, 프로젝터, 및/또는 여기에 설명된 디코딩 장치를 포함하는 다른 디스플레이;
ㆍ 여기에 설명된 인코딩 장치를 포함하는 DVD 플레이어(예를 들면, 블루-레이 플레이어), 비디오 플레이어, 카메라, 휴대 전화 등과 같은 이미지 데이터 소스;
ㆍ 실행시에 프로그램가능한 프로세서 및/또는 본 발명에 따른 방법을 수행하도록 구성가능한 로직 장치를 구성하는 펌웨어 또는 다른 컴퓨터-판독가능 명령들을 포함하는 물리적 또는 비일시적인 컴퓨터 판독가능 매체;
ㆍ 하나 이상의 중앙 처리 장치(CPUs), 하나 이상의 마이크로프로세서들, 하나 이상의 FPGAs(field programmable gate arrays), 하나 이상의 ASICs(application-specific integrated circuits), 하나 이상의 GPUs(graphic processing units), 또는 그의 임의의 조합들, 또는 본 발명에 따른 방법을 수행할 수 있는 하드웨어 및/또는 소프트웨어를 포함하는 임의의 다른 적합한 프로세싱 유닛(들); 및
ㆍ 여기에 설명된 인코딩 장치를 포함하는 컬러 그레이딩 툴들을 포함한다.
다수의 예시적인 양태들 및 실시예들이 상기에 논의되지만, 당업자들은 그의 몇몇 변형들, 치환들, 추가들 및 서브 조합들을 인식할 것이다. 그러므로, 후속하여 첨부된 청구항들 및 이후 도입된 청구항들은 본 발명의 참된 정신 및 범위내에 있는 모든 이러한 변경들, 치환들, 추가들 및 서브-조합들을 포함하는 것으로 해석되는 것이 의도된다.
142 : 색역 특징화/선택 유닛 148 : 색역 변환 유닛
152 : 압축 유닛 156 : 메타데이터 기록기
162 : 메타데이터 판독기/추출기 164 : 압축 해제 유닛
168 : 역 변환 유닛 172 : 필터

Claims (29)

  1. 다운스트림 디바이스로 송신을 위해 이미지 데이터를 인코딩하는 방법에 있어서,
    콘텐트 색역을 갖는 이미지 데이터를 수신하는 단계;
    상기 이미지 데이터의 하나 이상의 색역 특징들을 결정하는 단계;
    상기 색역 특징들에 적어도 부분적으로 기초하여, 상기 이미지 데이터에 대한 국부적인 색역 규정을 결정하는 단계; 및
    상기 이미지 데이터에 색역 변환을 적용하는 단계로서, 상기 이미지 데이터에 의해 지정된 컬러 좌표들이 상기 국부적인 색역 규정의 대응하는 컬러 좌표들로 맵핑되는, 상기 색역 변환 적용 단계를 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  2. 제 1 항에 있어서,
    상기 색역 변환을 적용한 후 상기 이미지 데이터를 압축하는 단계를 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 국부적인 색역 규정에 대응하는 메타데이터를 상기 이미지 데이터에 인코딩하는 단계를 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  4. 제 1 항 또는 제 2 항에 있어서,
    상기 이미지 데이터는 이미지 데이터의 서브프레임 블록을 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  5. 제 4 항에 있어서,
    상기 색역 특징들은 상기 서브프레임 블록의 평균 컬러를 나타내는 값을 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  6. 제 5 항에 있어서,
    이산 코사인 변환(DCT)은 DCT 계수 매트릭스를 제공하기 위해 상기 서브프레임 블록에 적용되고, 상기 색역 특징들은 상기 DCT 계수 매트릭스의 DC 값을 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  7. 제 4 항에 있어서,
    상기 색역 특징들은 상기 서브프레임 블록의 최소 및 최대 컬러값들을 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  8. 제 4 항에 있어서,
    상기 색역 특징들은 상기 콘텐트 색역의 영역을 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  9. 제 4 항에 있어서,
    상기 색역 특징들은 상기 콘텐트 색역의 체적을 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  10. 제 4 항에 있어서,
    상기 색역 특징들은 이미지 데이터의 이웃하는 서브프레임 블록들의 컬러 특징들을 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  11. 제 1 항 또는 제 2 항에 있어서,
    상기 이미지 데이터는 Rec.709 색역보다 넓은 색역을 갖는 이미지 데이터 포맷을 갖는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  12. 제 1 항 또는 제 2 항에 있어서,
    상기 콘텐트 색역은 상기 이미지 데이터 포맷의 색역의 서브세트인, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  13. 제 12 항에 있어서,
    상기 국부적인 색역 규정은 상기 콘텐트 색역 내 컬러들의 범위를 규정하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  14. 제 13 항에 있어서,
    상기 국부적인 색역 규정은 상기 이미지 데이터 포맷과 동일한 비트 심도를 갖는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  15. 제 1 항 또는 제 2 항에 있어서,
    색역 특징들을 평가하는 단계는 상기 이미지 데이터에 의해 지정된 컬러 좌표들을 새로운 컬러 공간으로 변환하는 단계를 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  16. 제 1 항 또는 제 2 항에 있어서,
    상기 색역 변환을 적용하는 단계는 상기 이미지 데이터에 의해 지정된 상기 컬러 좌표들을 새로운 컬러 공간으로 변환하는 단계를 포함하는, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  17. 제 16 항에 있어서,
    상기 색역 변환은 비선형인, 다운스트림 디바이스로 전송을 위해 이미지 데이터를 인코딩하는 방법.
  18. 디스플레이상에 재생을 위해 이미지 데이터를 디코딩하는 방법에 있어서,
    상기 이미지 데이터로부터 국부적인 색역 규정을 나타내는 메타데이터를 추출하는 단계;
    상기 이미지 데이터를 압축 해제하는 단계; 및
    역 색역 변환을 상기 이미지 데이터에 적용하는 단계로서, 상기 역 색역 변환은 국부적인 색역 규정의 컬러 좌표값들을 이미지 데이터 포맷의 컬러 좌표값들로 맵핑하는, 상기 역 색역 변환 적용 단계를 포함하는, 디스플레이상에 재생을 위해 이미지 데이터를 디코딩하는 방법.
  19. 제 18 항에 있어서,
    시각적인 아티팩트들의 출현을 감소시키기 위해 상기 역 색역 변환을 적용한 후 상기 이미지 데이터를 필터링하는 단계를 포함하는, 디스플레이상에 재생을 위해 이미지 데이터를 디코딩하는 방법.
  20. 디스플레이상에 재생을 위해 이미지 데이터를 디코딩하는 방법에 있어서,
    상기 이미지 데이터의 하나 이상의 색역 특징들을 결정하는 단계;
    상기 색역 특징들에 기초하여, 상기 이미지 데이터가 인코딩되는 국부적인 색역 규정을 결정하는 단계; 및
    상기 이미지 데이터에 역 색역 변환을 적용하는 단계로서, 상기 색역 역변환은 상기 국부적인 색역 규정의 컬러 좌표값들을 상기 이미지 데이터 포맷의 컬러 좌표값들로 맵핑하는, 상기 역 색역 변환을 적용하는 단계를 포함하는, 디스플레이상에 재생을 위해 이미지 데이터를 디코딩하는 방법.
  21. 제 20 항에 있어서,
    상기 색역 특징들은 상기 이미지 데이터에 대한 DC 값을 포함하는, 디스플레이상에 재생을 위해 이미지 데이터를 디코딩하는 방법.
  22. 이미지 데이터를 인코딩하기 위한 장치에 있어서,
    색역 특징화 및 선택 유닛으로서:
    이미지 데이터를 수신하고,
    상기 이미지 데이터의 색역 특징들을 결정하고,
    상기 색역 특징들의 평가에 기초하여, 저장소(repository)로부터 국부적인 색역 규정을 선택하도록 구성된, 상기 색역 특징화 및 선택 유닛; 및
    색역 변환 유닛으로서:
    상기 이미지 데이터 및 상기 국부적인 색역 규정을 수신하고,
    상기 이미지 데이터에 의해 지정된 컬러 좌표들을 상기 국부적인 색역 규정의 대응하는 컬러 좌표들로 맵핑함으로써 국부적인 색역 변환을 적용하도록 구성된, 상기 색역 변환 유닛을 포함하는, 이미지 데이터를 인코딩하기 위한 장치.
  23. 제 22 항에 있어서,
    상기 색역 변환 유닛에 의해 변환된 이미지 데이터를 수신하고 압축하도록 구성된 압축 유닛을 포함하는, 이미지 데이터를 인코딩하기 위한 장치.
  24. 제 22 항 또는 제 23 항에 있어서,
    상기 국부적인 색역 규정에 대응하는 이미지 데이터에 메타데이터를 인코딩하도록 구성된 메타데이터 기록기를 포함하는, 이미지 데이터를 인코딩하기 위한 장치.
  25. 이미지 데이터를 디코딩하기 위한 장치에 있어서,
    상기 이미지 데이터로부터 국부적인 색역 규정을 표시하는 메타데이터를 추출하도록 구성된 메타데이터 추출기;
    상기 이미지 데이터를 압축 해제하도록 구성된 압축 해제 유닛; 및
    역 색역 변환을 상기 이미지 데이터에 적용하도록 구성된 역변환 유닛을 포함하고,
    상기 역 색역 변환은 상기 국부적인 색역 규정의 컬러 좌표값들을 상기 이미지 데이터 포맷의 컬러 좌표값들로 맵핑하는, 이미지 데이터를 디코딩하기 위한 장치.
  26. 제 25 항에 있어서,
    시각적인 아티팩트들의 출현을 감소시키기 위해 상기 역변환된 이미지 데이터를 필터링하도록 구성된 필터링 유닛을 포함하는, 이미지 데이터를 디코딩하기 위한 장치.
  27. 이미지 데이터를 디코딩하기 위한 장치에 있어서,
    상기 이미지 데이터의 색역 특징들을 평가하고 상기 색역 특징들에 기초하여, 상기 이미지 데이터가 인코딩되는 국부적인 색역 규정을 결정하도록 구성된 국부적인 색역 규정 유닛;
    상기 이미지 데이터를 압축 해제하도록 구성된 압축 해제 유닛; 및
    역 색역 변환을 상기 이미지 데이터에 적용하도록 구성된 역변환 유닛을 포함하고,
    상기 역 색역 변환은 상기 국부적인 색역 규정의 컬러 좌표값들을 상기 이미지 데이터 포맷의 컬러 좌표값들로 맵핑하는, 이미지 데이터를 디코딩하기 위한 장치.
  28. 프로세서에 로딩될 때, 상기 프로세서가 제 1 항 또는 제 2 항의 방법의 단계들을 수행하게 하는, 저장된 컴퓨터 실행가능 명령들을 갖는, 비일시적인 컴퓨터 판독가능 매체.
  29. 프로세서에 로딩될 때, 상기 프로세서가 제 18 항 내지 제 21 항 중 어느 한 항의 방법의 단계들을 수행하게 하는, 저장된 컴퓨터 실행가능 명령들을 갖는, 비일시적인 컴퓨터 판독가능 매체.
KR1020137012755A 2010-10-18 2011-09-06 국부적인 색역 규정들을 사용하는 이미지 처리 방법들 및 장치 KR101448493B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US39429410P 2010-10-18 2010-10-18
US61/394,294 2010-10-18
PCT/US2011/050484 WO2012054143A1 (en) 2010-10-18 2011-09-06 Image processing methods and apparatus using localized gamut definitions

Publications (2)

Publication Number Publication Date
KR20130107314A KR20130107314A (ko) 2013-10-01
KR101448493B1 true KR101448493B1 (ko) 2014-10-08

Family

ID=45975553

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020137012755A KR101448493B1 (ko) 2010-10-18 2011-09-06 국부적인 색역 규정들을 사용하는 이미지 처리 방법들 및 장치

Country Status (10)

Country Link
US (1) US9299167B2 (ko)
EP (3) EP4290848A3 (ko)
KR (1) KR101448493B1 (ko)
CN (5) CN105915874B (ko)
ES (1) ES2956211T3 (ko)
HR (1) HRP20231130T1 (ko)
HU (1) HUE063195T2 (ko)
PL (2) PL3697073T3 (ko)
RS (1) RS64625B1 (ko)
WO (1) WO2012054143A1 (ko)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5892313B2 (ja) * 2011-12-02 2016-03-23 富士ゼロックス株式会社 色処理装置および色処理プログラム
KR20160031466A (ko) 2013-07-14 2016-03-22 엘지전자 주식회사 디지털 방송 시스템에서 고품질의 색감 표현을 위한 초고화질 방송 신호 송수신 방법 및 장치
US9693048B2 (en) * 2013-12-17 2017-06-27 Disney Enterprises, Inc. Color display and projection system
EP2890129A1 (en) * 2013-12-27 2015-07-01 Thomson Licensing Method and device for encoding a high-dynamic range image and/or decoding a bitstream
KR101804925B1 (ko) 2014-01-06 2017-12-05 엘지전자 주식회사 컬러 개멋 리샘플링을 기반으로 하는 방송 신호 송수신 방법 및 장치
KR101429136B1 (ko) * 2014-03-03 2014-08-11 주식회사 위시링크 평균색상을 이용한 이미지 처리 방법
US9357236B2 (en) * 2014-03-13 2016-05-31 Intel Corporation Color compression using a selective color transform
GB201410635D0 (en) 2014-06-13 2014-07-30 Univ Bangor Improvements in and relating to the display of images
KR102190233B1 (ko) 2014-10-06 2020-12-11 삼성전자주식회사 영상 처리 장치 및 이의 영상 처리 방법
US20160117993A1 (en) * 2014-10-22 2016-04-28 Pixtronix, Inc. Image formation in a segmented display
KR101954851B1 (ko) * 2015-02-16 2019-03-06 삼성전자주식회사 메타데이터 기반 영상 처리 방법 및 장치
US10607525B2 (en) 2015-05-19 2020-03-31 Irystec Software Inc. System and method for color retargeting
EP3119086A1 (en) * 2015-07-17 2017-01-18 Thomson Licensing Methods and devices for encoding/decoding videos
US10043484B2 (en) * 2015-10-06 2018-08-07 Apple Inc. Dual-target image color rendering
US11202050B2 (en) * 2016-10-14 2021-12-14 Lg Electronics Inc. Data processing method and device for adaptive image playing
EP3399497A1 (en) * 2017-05-05 2018-11-07 Koninklijke Philips N.V. Optimizing decoded high dynamic range image saturation
US10419645B2 (en) * 2018-02-20 2019-09-17 Ricoh Company, Ltd. Dynamic color matching between printers and print jobs
EP3716619A1 (en) * 2019-03-28 2020-09-30 InterDigital CE Patent Holdings Gamut estimation
KR20230055361A (ko) * 2021-10-18 2023-04-25 캐논 가부시끼가이샤 화상 처리 장치, 화상 처리 방법, 및 프로그램을 저장하는 저장 매체
CN114489398A (zh) * 2021-12-31 2022-05-13 科大讯飞股份有限公司 页面内容分享方法及分享终端、订阅终端

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6633668B1 (en) 1999-07-12 2003-10-14 Canon Kabushiki Kaisha Device independent image compression and color management
US6640005B1 (en) 1999-10-21 2003-10-28 Sharp Laboratories Of America, Inc. Method for inconspicuously adding tracking data in coded images
US20030234943A1 (en) 2002-06-20 2003-12-25 Van Bael Kristiaan K. A. Color matching for a printing process using more than four colorants using a four-colorant color management system
US20100054581A1 (en) 2008-08-29 2010-03-04 Xerox Corporation System and method for color space conversion with reduced artifacts

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5828413A (en) 1995-09-21 1998-10-27 Lucent Technologies Inc. Method and apparatus for image processing using model-based localized quantization
US7728845B2 (en) * 1996-02-26 2010-06-01 Rah Color Technologies Llc Color calibration of color image rendering devices
US6865291B1 (en) 1996-06-24 2005-03-08 Andrew Michael Zador Method apparatus and system for compressing data that wavelet decomposes by color plane and then divides by magnitude range non-dc terms between a scalar quantizer and a vector quantizer
US6414690B1 (en) * 1999-12-08 2002-07-02 Xerox Corporation Gamut mapping using local area information
US6301393B1 (en) * 2000-01-21 2001-10-09 Eastman Kodak Company Using a residual image formed from a clipped limited color gamut digital image to represent an extended color gamut digital image
US6909745B1 (en) 2001-06-05 2005-06-21 At&T Corp. Content adaptive video encoder
US7643675B2 (en) * 2003-08-01 2010-01-05 Microsoft Corporation Strategies for processing image information using a color information data structure
US7343037B1 (en) * 2004-02-04 2008-03-11 Microsoft Corporation Dynamic, locally-adaptive, lossless palettization of color and grayscale images
WO2005079054A1 (ja) 2004-02-17 2005-08-25 Toa Corporation 画像圧縮装置
US7408558B2 (en) * 2005-08-25 2008-08-05 Eastman Kodak Company Laser-based display having expanded image color
US20070076971A1 (en) * 2005-09-30 2007-04-05 Nokia Corporation Compression of images for computer graphics
KR20070091853A (ko) * 2006-03-07 2007-09-12 삼성전자주식회사 영상 적응적인 색 재현 장치 및 방법
EP2066134A4 (en) 2006-10-10 2011-01-12 Nippon Telegraph & Telephone VIDEO ENCODING AND DECODING METHODS, THEIR DEVICE, PROGRAM, AND STORAGE MEDIUM CONTAINING THE PROGRAM
DE602007010514D1 (de) * 2006-12-18 2010-12-23 Koninkl Philips Electronics Nv Bildkomprimierung und dekomprimierung
US8086025B2 (en) * 2007-05-10 2011-12-27 Monte Jerome Ramstad Universal stereoscopic file format
EP2009899A1 (en) 2007-06-27 2008-12-31 Thomson Licensing Method of creating a gamut boundary descriptor preserving the discontinuities of an actual gamut surface
US8538197B2 (en) * 2007-08-02 2013-09-17 Sony Corporation Image processing apparatus
EP2120448A1 (en) * 2008-05-14 2009-11-18 Thomson Licensing Method of processing of a compressed image into a gamut mapped image using spatial frequency analysis
GB2461894B (en) * 2008-07-16 2010-06-23 Light Blue Optics Ltd Holographic image display systems
JP5049921B2 (ja) 2008-08-26 2012-10-17 キヤノン株式会社 画像処理装置及び画像処理方法
US8654141B2 (en) * 2009-12-29 2014-02-18 Intel Corporation Techniques for adapting a color gamut
US8786625B2 (en) * 2010-09-30 2014-07-22 Apple Inc. System and method for processing image data using an image signal processor having back-end processing logic

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6633668B1 (en) 1999-07-12 2003-10-14 Canon Kabushiki Kaisha Device independent image compression and color management
US6640005B1 (en) 1999-10-21 2003-10-28 Sharp Laboratories Of America, Inc. Method for inconspicuously adding tracking data in coded images
US20030234943A1 (en) 2002-06-20 2003-12-25 Van Bael Kristiaan K. A. Color matching for a printing process using more than four colorants using a four-colorant color management system
US20100054581A1 (en) 2008-08-29 2010-03-04 Xerox Corporation System and method for color space conversion with reduced artifacts

Also Published As

Publication number Publication date
CN105915754B (zh) 2019-03-05
PL2630783T3 (pl) 2020-10-19
CN105915754A (zh) 2016-08-31
KR20130107314A (ko) 2013-10-01
RS64625B1 (sr) 2023-10-31
WO2012054143A1 (en) 2012-04-26
EP2630783B1 (en) 2020-06-10
US9299167B2 (en) 2016-03-29
PL3697073T3 (pl) 2023-12-11
EP4290848A2 (en) 2023-12-13
EP2630783A1 (en) 2013-08-28
CN105915874A (zh) 2016-08-31
EP3697073A1 (en) 2020-08-19
HRP20231130T1 (hr) 2024-01-19
CN103155535A (zh) 2013-06-12
EP2630783A4 (en) 2015-09-02
EP3697073B1 (en) 2023-08-23
US20130194321A1 (en) 2013-08-01
EP4290848A3 (en) 2024-03-06
HUE063195T2 (hu) 2024-01-28
CN105915753A (zh) 2016-08-31
ES2956211T3 (es) 2023-12-15
CN105915755B (zh) 2018-09-07
CN105915874B (zh) 2018-02-09
EP3697073C0 (en) 2023-08-23
CN105915753B (zh) 2019-01-04
CN103155535B (zh) 2016-06-08
CN105915755A (zh) 2016-08-31

Similar Documents

Publication Publication Date Title
KR101448493B1 (ko) 국부적인 색역 규정들을 사용하는 이미지 처리 방법들 및 장치
RU2762384C1 (ru) Переформирование сигналов для сигналов широкого динамического диапазона
US9936199B2 (en) Encoding and decoding perceptually-quantized video content
US10672148B2 (en) Compressing and uncompressing method for high bit-depth medical gray scale images
RU2710291C2 (ru) Способы и устройства для кодирования и декодирования цветного изображения hdr
JP6937695B2 (ja) カラー・ピクチャを符号化および復号する方法および装置
RU2710873C2 (ru) Способ и устройство для декодирования цветного изображения
JP6719391B2 (ja) ビットストリーム内で、ｌｄｒピクチャのピクチャ／ビデオ・フォーマットと、このｌｄｒピクチャおよびイルミネーション・ピクチャから取得された復号済みのｈｄｒピクチャのピクチャ／ビデオ・フォーマットとをシグナリングする方法および装置
JP2013517723A (ja) イメージエンコーダおよびイメージデコーダ
KR20170115503A (ko) 화상을 역-톤 매핑하기 위한 장치 및 방법
KR20180044291A (ko) 코딩 및 디코딩 방법과 대응하는 디바이스
EP2869575B1 (en) Adaptive inter-channel transform for wavelet color image compression
TW201601518A (zh) 在位元流中將低動態範圍圖像之圖像／視訊格式及從該低動態範圍圖像及照明圖像中得到之解碼高動態範圍圖像之圖像／視訊格式以信號表示之方法及裝置
US11985346B2 (en) Encoding high dynamic range video data
TW201601524A (zh) 在位元流中將低動態範圍圖像之圖像／視訊格式及從該低動態範圍圖像及照明圖像中得到之解碼高動態範圍圖像之圖像／視訊格式以信號表示之方法及裝置
Myszkowski et al. HDR Image, Video, and Texture Compression

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170926

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180919

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20191001

Year of fee payment: 6