KR102045202B1 - 영상 처리장치, 영상 처리방법, 프로그램, 및 매체 - Google Patents

영상 처리장치, 영상 처리방법, 프로그램, 및 매체 Download PDF

Info

Publication number
KR102045202B1
KR102045202B1 KR1020160137292A KR20160137292A KR102045202B1 KR 102045202 B1 KR102045202 B1 KR 102045202B1 KR 1020160137292 A KR1020160137292 A KR 1020160137292A KR 20160137292 A KR20160137292 A KR 20160137292A KR 102045202 B1 KR102045202 B1 KR 102045202B1
Authority
KR
South Korea
Prior art keywords
gamma
gamma characteristic
luminance
dynamic range
value
Prior art date
Application number
KR1020160137292A
Other languages
English (en)
Other versions
KR20170051274A (ko
Inventor
신야 우리사카
Original Assignee
캐논 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 캐논 가부시끼가이샤 filed Critical 캐논 가부시끼가이샤
Publication of KR20170051274A publication Critical patent/KR20170051274A/ko
Application granted granted Critical
Publication of KR102045202B1 publication Critical patent/KR102045202B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
    • H04N9/69—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits for modifying the colour signals by gamma correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/007—Dynamic range modification
    • G06T5/90—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/20—Circuitry for controlling amplitude response
    • H04N5/202—Gamma control
    • H04N5/2355—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/643—Hue control means, e.g. flesh tone control

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Picture Signal Circuits (AREA)
  • Studio Devices (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

카메라 마이크로컴퓨터는, 영상신호의 저휘도로부터 고휘도까지의 전체 휘도 영역에 있어서의 휘도의 입력값/출력값의 관계를, 입력 다이나믹 레인지에 상관없이, 기준의 감마 특성에 있어서의 휘도의 입력값/출력값 관계에 맞도록 하는 감마 특성을 설정한다. 감마 보정 처리부는, 그 설정된 감마 특성에 근거하여, 촬상된 영상신호에 대해 입력값을 상기 출력값으로 변환하는 감마 보정 처리를 행한다.

Description

영상 처리장치, 영상 처리방법, 프로그램, 및 매체{VIDEO PROCESSING APPARATUS, VIDEO PROCESSING METHOD, PROGRAM, AND MEDIUM}
본 발명은, 영상 처리장치, 영상 처리방법, 프로그램, 및 매체에 관한 것이다.
피사체를 순차적으로 촬상할 수 있는 촬상장치와 영상을 표시할 수 있는 표시장치를 구비한 영상 처리 시스템에서는, 촬상장치와 표시장치 모두가 감마 보정에 근거한 계조 보정처리를 행한다. 촬상장치에 의해 행해진 계조 보정처리(즉, 감마 보정처리)는, 촬상한 영상신호의 휘도의 입력 코드값을 촬상장치의 감마 특성(즉, 카메라 감마)에 대응하는 출력 코드값으로 변환하는 것을 포함한다. 표시장치에 의해 행해지는 계조 보정처리(즉, 감마 보정처리)는, 공급된 영상신호의 휘도의 입력 코드값을 표시장치의 감마 특성(즉, 디스플레이 감마)에 근거하여 휘도값으로 변환하는 것을 포함한다. 이에 따라, 실세계에서 매우 넓은 다이나믹 레인지를 갖는 피사체의 밝기 중 한정된 부분만이 잘라내어질 수 있다. 표시장치의 모니터 유닛의 한정적인 좁은 다이나믹 레인지에서 만족스러운 표시를 구현할 수 있다.
또한, 촬상장치에 대해 실용적인 입력 다이나믹 레인지를 확보할 수 있는 계조 보정처리의 기술로서, 일본국 특개 2002-223373호 공보에 기재된 종래기술은, 니 보정처리(knee correction)를 포함하는 감마 보정처리를 행함으로써 입력 다이나믹 레인지를 넓힌다.
니 보정처리를 포함하는 전술한 감마 보정처리는, 실용적인 입력 다이나믹 레인지를 확보하면서, 중휘도 영역 및 고휘도 영역 모두에 있어서 콘트라스트를 압축함으로써 결정된다. 그렇지만, 중휘도 및 고휘도 영역에서의 콘트라스트를 압축하는 것은, 저휘도 영역에 비해 고휘도 영역의 콘트라스트가 상대적으로 압축되기 때문에, 촬상장치와 표시장치로 이루어진 전체 시스템의 계조 특성에 있어서, 부자연스러움 등의 악영향을 일으킨다. 구체적으로는, 표시장치에 의해 표시되는 영상의 계조 특성은, 실제 피사체의 계조 특성과 비교해서, 고휘도 영역에서의 휘도 변화가 감소한 결함을 갖는다. 이 때문에, 표시장치에 의해 표시되는 영상은, 실제 피사체의 자연스러운 계조나 색 및 선예감(sharpness)을 재현할 수 없다는 점에서 부자연스럽다.
한편, 고휘도 영역의 밝기를 증가시킴으로써, 고휘도 영역에서 압축된 콘트라스트를 보상할 수 있는, 표시장치에 적용가능한 종래의 계조 보정처리의 기술도 존재한다. 그렇지만, 촬상장치로부터 출력되는 영상신호는 중휘도 및 고휘도 영역의 계조 정보를 포함하지 않는다. 따라서, 표시장치에 의해 행해진 처리만으로는 충분히 계조를 복원할 수 없다. 또한, 표시장치가 촬상장치의 감마 특성에 대한 정보를 얻을 수 없기 때문에, 표시장치가 실제 피사체의 자연스러운 계조, 색 및 선예감을 재현하는 것은 곤란하다.
본 발명의 발명내용은 독립항들에 의해 주어진다.
본 발명의 또 다른 특징 및 국면은 첨부된 도면을 참조하여 주어지는 이하의 실시형태의 상세한 설명으로부터 명백해질 것이다.
도 1은 본 실시형태에 따른 촬상장치의 개략 구성을 도시한 블록도이다.
도 2는 촬상장치의 개관을 나타낸 사시도다.
도 3a, 도 3b, 도 3c 및 도 3d는 통상 촬영 모드에서의 감마 보정처리를 나타낸 것이다.
도 4a, 도 4b, 도 4c 및 도 4d는 고휘도 우선 모드에서의 감마 보정처리를 나타낸 것이다.
도 5는 촬상장치에 의해 행해지는 계조 보정처리 제어의 흐름도다.
도 6은 촬상장치에 의해 행해지는 노출 표시 제어 예를 도시한 개략도다.
도 7은 본 실시형태에 따른 영상 처리 시스템의 개략 구성을 도시한 블록도이다.
도 8은 표시장치에 의해 행해지는 피크 휘도값 설정 처리 제어의 흐름도다.
도 9는 표시장치에 의해 행해지는 감마 보정처리 제어의 흐름도다.
도 10은 표시장치에 의해 행해지는 신호 처리 제어의 흐름도다.
이하에서, 본 발명의 바람직한 실시형태를 첨부도면을 참조하여 상세히 설명한다.
<촬상장치의 구성>
도 1은, 본 실시형태에 따른 영상 처리장치의 일례인 촬상장치(100)의 개략 구성을 도시한 블록도이다.
렌즈(101)는 피사체 상을 이미지 센서(105)의 촬상면에 결상시킨다. 조리개(102)는, 렌즈(101)를 거쳐 입사한 빛의 광량을 조절한다. 이미지 센서(105)는, 렌즈(101)와 조리개(102)를 거쳐 촬상면 위로 결상된 피사체 상을 영상신호로 변환한다. 비록 도시하지는 않았지만, 이미지 센서(105)로부터 출력된 영상신호를 처리하기 위해 아날로그/디지털(A/D) 변환기가 설치되어 있다. 그후, A/D 변환기는, 아날로그 영상신호를 A/D 변환을 거쳐 코드화하여 디지털 영상신호를 얻고, 이 디지털 영상신호를 신호 처리부(112)로 보낸다. 렌즈(101)는, 손 떨림 보정용의 광학계를 광축으로 시프트시키도록 할 수 있는 렌즈 시프트 방식의 손 떨림 보정기능을 갖고 있어도 된다. 또한, 손 떨림 보정 기능은, 렌즈(101)의 광축에 대해 이미지 센서(105)의 위치를 변화시키는 센서 시프트 방식의 보정이거나, 이미지 센서(105)로부터의 판독을 제어함으로써 손 떨림 보정을 행하는 판독 제어 방식의 보정이어도 된다.
신호 처리부(112)는, 화이트 밸런스(WB) 보정 처리부(107), 엣지 강조 처리부(108), 감마(γ) 보정 처리부(109) 및 휘도/색 정보 검출부(110)를 갖는다. WB 보정 처리부(107)는, 이미지 센서(105)로부터 송신된 영상신호에 대해 화이트 밸런스 보정 처리를 실시한다. 엣지 강조 처리부(108)는, WB 보정 처리된 영상신호에 대해 엣지 강조 처리를 실시한다. 감마 보정 처리부(109)는, 촬상장치의 감마 특성(즉, 카메라 감마)에 근거하여 감마 보정 처리를 실시한다. 감마 보정 처리의 상세에 대해서는 후술한다. 신호 처리부(112) 내에 포함된 휘도/색 정보 검출부(110)는, 영상신호의 1 프레임의 화상을 수평 방향 성분과 수직 방향 성분으로 분할해서 복수의 휘도/색 정보 검출 프레임(이하, "검출 프레임"으로 간단히 표기한다)을 설정한다. 휘도/색 정보 검출부(110)는, 각각의 검출 프레임 내의 화소값을 적분하는 처리를 행하고, 피사체 상의 각 검출 프레임의 휘도 정보 및 색 정보를 검출한다. 휘도/색 정보 검출부(110)는 휘도/색 정보 검출부(110)에 의해 검출된 각 검출 프레임의 휘도 정보 및 색 정보를 카메라 마이크로컴퓨터(111)로 보낸다. 신호 처리부(112)는, WB 보정 처리, 엣지 강조 처리, 감마 보정 처리 및 휘도/색 정보 검출 처리 이외에도 다양한 처리를 행하지만, 그것들의 설명은 생략한다. 신호 처리부(112)는 각종 신호 처리가 행해진 영상신호를 디스플레이 장치(116)에 출력한다. 디스플레이 장치(116)는 수신된 신호에 근거하여 영상을 표시한다. 더구나, 신호 처리부(112)는 처리된 영상신호를, 자기 테이프(115), 디지털 다기능 디스크(DVD) 디스크(117) 또는 메모리 카드(118) 등의 컴퓨터 판독가능한 기억매체에 기록할 수 있다.
촬상장치(100)에 설치된 제어부의 일례인 카메라 마이크로컴퓨터(111)는, 휘도/색 정보 검출부(110)에 의해 검출된 휘도 정보 및 색 정보 등의 피사체 정보를 기초로, WB 보정 처리, 엣지 강조 처리, 및 감마 보정 처리에서 사용할 각 보정값을 산출한다. 그리고, 카메라 마이크로컴퓨터(111)는, WB 보정 처리에 사용할 보정값을 WB 보정 처리부(107)로 보낸다. 카메라 마이크로컴퓨터(111)는, 엣지 강조 처리에 사용할 보정값을 엣지 강조 처리부(108)로 보낸다. 카메라 마이크로컴퓨터(111)는, 감마 보정 처리에 사용할 보정값(예를 들어, 후술하는 감마 특성의 감마 보정 커브)을 감마 보정 처리부(109)로 보낸다. 이에 따라, WB 보정 처리부(107), 엣지 강조 처리부(108) 및 감마 보정 처리부(109)는, 각각 공급된 보정값에 근거한 각각의 처리를 행한다. 카메라 마이크로컴퓨터(111)는, 이미지 센서 구동부(106)에게 이미지 센서(105)에 있어서의 전하의 축적과 축적된 전하의 판독의 제어를 행하게 한다. 카메라 마이크로컴퓨터(111)는, 렌즈 구동부(103)에게 렌즈(101)의 포커스 및 줌 동작을 구현하도록 제어를 행하게 한다. 카메라 마이크로컴퓨터(111)는, 휘도 정보 및 색 정보를 기초로, 조리개 구동부(104)에게 조리개(102) 제어를 행하게 하는 동시에, 이미지 센서 구동부(106)에게 이미지 센서(105)의 셔터 스피드의 제어를 행하게 함으로써, 노출 제어를 행할 수 있다. 카메라 마이크로컴퓨터(111)는, 촬상장치(100)가 적절한(에를 들어, 렌즈 시프트 방식, 센서 시프트 방식 또는 판독 제어방식의) 손 떨림 보정 기능을 갖는 경우에는, 손 떨림 보정 제어를 행할 수 있다.
<비디오 카메라의 구성>
도 2는, 본 실시형태에 따른 디스플레이 장치(116)와 일체로 이루어진 촬상장치(100)를 구비한, 영상 처리 시스템의 일례로서의 비디오 카메라(120)의 개관을 나타낸 사시도다.
비디오 카메라(120)의 내부에는, DVD 디스크(117), 자기 테이프(115) 및 메모리 카드(118)가 수납되어, 영상신호와 정지 화상을 기록 및 재생할 수 있다. 렌즈부(121)는, 도 1에 도시된 렌즈(101)와 조리개(102)를 갖는다. 마이크(122)는, 촬영 동작중에 음성을 집음하기 위해 구비되어 있다. 전자식 뷰 파인더(electronic view finder: EVF)(123)는, 유저가 촬영된 피사체를 확인하거나 재생 화상을 표시할 수 있도록 하기 위해 구비되어 있다. 동화상용 트리거 스위치(124)는, 예를 들면, 푸시 버튼이며, 유저가 동화상 촬영 개시 지시 또는 동화상 촬영 종료 지시를 기기에게 전달할 때 조작가능하다. 정지 화상용 트리거 스위치(125)는, 예를 들면 푸시 버튼이며, 유저가 정지 화상 촬영 개시 지시 또는 정지 화상 촬영 종료 지시를 기기에게 전달할 때 조작가능하다. 하기 위해 유저가 조작하는 스위치다. 모드 다이얼(126)은, "재생"(즉, 유저가 재생 모드를 설정할 때 선택가능한 모드), "카메라"(즉, 유저가 카메라 모드를 설정할 때 선택가능한 모드), "통상 촬영"(즉, 유저가 통상 촬영 모드를 설정할 때 선택가능한 모드), "고휘도 우선"(즉, 유저가 고휘도 우선 모드를 설정할 때 선택가능한 모드), 및 유저가 전술한 모드를 설정하지 않을 때 선택가능한 "OFF"를 포함하는 복수의 모드를 갖는 회전식의 스위치이다. 조작 스위치 군(127)은, 유저가 비디오 카메라(120)를 조작할 때 조작가능한 적절한 수의 조작 스위치들, 화질 필터 모드를 입력하기 위해 조작가능한 모드 키, 메뉴 조작을 행하기 위해 조작가능한 메뉴 키, 및 재생 조작을 행하기 위해 조작가능한 재생 키를 포함한다. 액정 패널(128)은, 비디오 카메라(120)에 유연하게 연결되어, 액정 패널(128)이 본체 측면 대해 개폐될 수 있다. 액정 패널(128)은 수평 방향으로 회전 가능하다. EVF(123)과 마찬가지로, 액정 패널(128)은 촬영된 피사체를 확인하거나 재생 화상을 표시하는데 사용될 수 있다. 도 2에 도시된 예시적인 상태에서는, 액정 패널(128)이, 비디오 카메라(120)의 본체에 대해 열려 있다. 도 1에 도시된 디스플레이 장치(116)는, EVF(123) 또는 액정 패널(128)로 사용될 수 있다. 스피커(129)는, 영상의 재생시에, 영상과 함께 기록된 음향 및 음성을 출력할 수 있다. 배터리(130)는, 비디오 카메라(120)에 대해 전력을 공급할 수 있는 2차 전지이다. 배터리(130)는 카메라 본체에 대해 착탈가능하다. 이와 관련하여, 도 2에 도시된 비디오 카메라(120)는, 피사체의 상을 촬상해서 기록하기 위해 필요한 구성을 포함하며, 이 구성은 본 실시형태의 촬상장치(100)에 해당한다. 더구나, 비디오 카메라(120)는, 촬상된 영상신호와 기록된 영상신호를 재생해서 액정 패널(128)에 표시하기 위해 필요한 구성을 포함하고, 이 구성은 본 실시형태의 표시장치에 해당한다.
<고휘도 우선 모드와 통상 촬영 모드>
본 실시형태에 따른 촬상장치(100)는, 영상 촬영 동작시 선택가능한 촬영 모드로서, 적어도 고휘도 우선 모드와 통상 촬영 모드를 갖고 있다. 촬영 모드가 고휘도 우선 모드인 경우에는, 촬상장치(100)는 감마 보정 처리에서의 감마 특성(즉, 카메라 감마)으로서 고휘도 우선용의 감마 보정 커브를 사용한다. 한편, 촬영 모드가 통상 촬영 모드인 경우에는, 촬상장치(100)는 통상 촬영용의 감마 보정 커브를 사용한다. 이하, 본 실시형태에 따른 촬상장치(100)가 통상 촬영 모드와 고휘도 우선 모드에서 행해진 감마 보정 처리에 사용하는 감마 특성(즉, 감마 보정 커브)에 대해 설명한다.
통상 촬영 모드에서는, 촬상장치(100)가, 실용적인 입력 다이나믹 레인지를 확보하면서, 중휘도 및 고휘도의 영역에 있어서의 콘트라스트를 압축할 수 있는 니 보정 처리를 포함하는 감마 보정 처리를 거쳐 계조 보정을 행한다. 본 실시형태에 있어서, 콘트라스트의 압축이란, 다이나믹 레인지의 변화에 대한 휘도의 변화로 표시될 수 있는, 특성곡선의 기울기를 작게 하는 것에 해당한다.
이하, 통상 촬영 모드에서의 계조 보정 특성에 대해 도 3a 내지 도 3d를 참조하여 설명한다. 도 3a와 도 3b는, 촬상장치의 감마 특성(즉, 카메라 감마)을 나타내고 있다. 도 3c는, 표시장치의 감마 특성(즉, 디스플레이 감마)을 나타내고 있다. 도 3d는, 촬상장치와 표시장치로 구성된 전체 영상 처리 시스템의 계조 특성을 표시하고 있다.
도 3a와 도 3b에 있어서, 감마 특성 907은 입력 다이나믹 레인지 "x1"에 대응한 감마 특성이며, 이것은 ITU-R BT.709에 따라 규격화되어 있다. 더구나, 도 3a와 도 3b에 있어서, 감마 특성 909는 더 큰(넓혀진) 입력 다이나믹 레인지 "x2"(이것은 실용적인 범위이다)에 대응하는 감마 특성이다. 감마 특성 907과 비교한 경우, 감마 특성 909는 중휘도 및 고휘도 영역에서 콘트라스트가 압축된다. 감마 특성 909는, 입력 다이나믹 레인지를 넓히면서, 저휘도 및 중휘도 영역(즉, 인간의 시각 감도가 더 높은 영역)에서 만족스러운 출력(밝기)을 확보할 수 있다. 이 통상 촬영 모드에서는, 고휘도의 영역(즉, 인간의 시각 감도가 더 낮은 영역)에서는, 비트수에 대한 휘도 출력값의 코드에 감소된 할당이 적용되기 때문에, 데이터량이 더 적다.
촬영 모드가 통상 촬영 모드인 경우, 촬상장치(100)의 감마 보정 처리부(109)는, 영상신호의 휘도의 입력값의 코드를 감마 특성 909의 감마 보정 커브에 대응하는 출력값의 코드로 변환하도록 감마 보정 처리를 행한다. 이하, 입력값의 코드를 "입력 코드값"으로 표기하고, 출력값의 코드를 "출력 코드값"으로 표기한다. 통상 촬영 모드에서 계조 보정 처리가 행해진 영상신호는, 예를 들면, 기록된 후에 재생되어, 표시장치의 모니터부(예를 들어, 액정 패널(128))에 표시될 수 있다.
한편, 표시장치의 감마 특성은, 예를 들면, 도 3c에 나타낸 것과 같은 감마 특성 910이다. 표시장치는, 예를 들면, 기록된 후에 재생된 영상신호의 휘도의 입력 코드값을 도 3c에 나타낸 감마 특성 910의 감마 보정 커브에 대응하는 휘도값으로 변환하는 감마 보정 처리를 행한다. 이 도 3c에 나타낸 감마 특성 910은, ITU-RBT.709에 따라 규격화되어 있는, 감마 특성 907의 역특성에 대응하는 감마 특성이다.
도 3d에 나타낸 것과 같은 계조 특성 911은, 이 경우 얻어질 수 있는, 촬상장치와 표시장치로 이루어진 전체 영상 처리 시스템의 계조 특성을 나타낸다. 더욱 구체적으로 설명하면, 촬상장치가 감마 특성 909를 사용하고 표시장치가 감마 특성 910을 사용하여 감마 보정 처리를 행할 때 얻어질 수 있는, 전체 영상 처리 시스템의 계조 특성 911은, 저휘도 영역의 콘트라스트에 비해 고휘도 영역의 콘트라스트가 과도하게 압축되기 때문에, 부자연스러운 계조 특성이 된다. 이 경우, 표시된 영상이 실제 피사체의 계조, 색 및 선예감이 손상되기 때문에, 표시장치의 모니터부에 의해 표시되는 영상은 부자연스럽게 된다.
이하, 고휘도 우선 모드에서의 계조 보정 특성에 대해 도 4a 내지 도 4d를 참조하여 설명한다. 도 4a와 도 4b는, 촬상장치의 감마 특성(즉, 카메라 감마)을 나타내고 있다. 도 4c는, 표시장치의 감마 특성(즉, 디스플레이 감마)을 나타내고 있다. 도 4d는, 촬상장치와 표시장치로 구성된 전체 영상 처리 시스템의 계조 특성을 표시하고 있다.
도 4a의 감마 특성 137은, 도 3a의 감마 특성 907과 마찬가지로, ITU-R BT.709에 따라 규격화되어 있는, 입력 다이나믹 레인지 x1에 대응하는 감마 특성이다. 한편, 도 4a와 도 4b에서, 감마 특성 139는, 더 큰(넓혀진) 입력 다이나믹 레인지 x2(즉, 실용적인 범위)에 대응하는 감마 특성이다. 이 감마 특성 139는, 감마 특성 137과 동일한 조건에서 유지될 수 있는 입력 코드와 출력 코드의 관계로부터 결정되고, 저휘도로부터 고휘도까지의 영역에서 코드값에 적용된 비트 할당 비율이 고정된다(변경하지 않는다).
본 실시형태는, 입력 다이나믹 레인지 x1에 대응하는 기준 감마 특성 137을 표시할 수 있는 함수 y=f(x)를 사용한다. 입력 다이나믹 레인지가 "t"배로 넓혀진다. 이 경우, 함수 y=f(x/t)를 사용하여 고휘도 우선 모드의 감마 특성 139를 표시할 수 있다. 그 결과, 고휘도 우선 모드의 감마 특성 139의 다이나믹 레인지 x1이 기준 감마 특성 137의 다이나믹 레인지 x2보다 t배 만큼 커진다.
본 실시형태에서, 입력 다이나믹 레인지는 제품(촬상장치)마다 적정한 값으로서 설정되거나, 이 제품의 촬영 모드마다 적정한 값으로 설정될 수 있다. 또한, 입력 다이나믹 레인지는, 동일 촬영 모드 내에서는 예를 들면 촬영 씬마다 적응적으로 설정될 수 있다.
촬영 모드가 고휘도 우선 모드인 경우, 촬상장치(100)의 감마 보정 처리부(109)는, 영상신호의 휘도의 입력 코드값을 감마 특성 139의 감마 보정 커브에 대응하는 코드값으로 변환하는 감마 보정 처리를 행한다. 고휘도 우선 모드에서 계조 보정 처리가 행해진 영상신호는, 예를 들면, 기록된 후에 재생되어, 본 실시형태의 표시장치의 모니터부(예를 들어, 액정 패널(128))에 표시될 수 있다.
전술한 것과 같이, 고휘도 우선 모드에서는, 촬상장치(100)가, 저휘도로부터 고휘도까지의 전체 휘도 영역에서 입력 다이나믹 레인지를 넓히면서, 입력 코드값/출력 코드값의 관계가 기준의 감마 특성 137의 입력 코드값/출력 코드값의 관계와 부합하는 감마 특성 139를 사용한 감마 보정 처리를 행한다. 또한, 고휘도 우선 모드에서는, 촬상장치(100)가 저휘도로부터 고휘도까지의 전체 휘도 영역에 있어서 출력 코드값의 비트 할당 비율을 고정한다(변경하지 않는다). 고휘도 우선 모드에서는, 촬상장치(100)가, 감마 특성 137과 동일한 조건에서 입력 코드값/출력 코드값의 관계가 유지될 수 있도록 결정된 감마 특성 139를 사용하여 감마 보정 처리를 행한다. 따라서, 고휘도 영역에서는 (통상 촬영 모드에서 행해지는) 콘트라스트 압축이 행해지지 않는다.
한편, 표시장치의 감마 특성은, 전술한 도 3c의 감마 특성 910과 유사한, 도 4c에 나타낸 감마 특성 140이다. 따라서, 표시장치는, 예를 들면, 기록된 후에 재생된 영상신호의 휘도의 입력 코드값을 도 4c의 감마 특성 140의 감마 보정 커브에 근거하여 휘도값으로 변환하는 감마 보정 처리를 행한다.
도 4d에 나타낸 것과 같은 계조 특성 141은, 이 경우 얻어질 수 있는, 촬상장치와 표시장치로 이루어진 전체 영상 처리 시스템의 계조 특성을 나타낸다. 더욱 구체적으로 설명하면, 촬상장치가 감마 특성 139에 근거한 감마 보정 처리를 행한 경우 얻어질 수 있는, 전체 영상 처리 시스템에서의 계조 특성 141은, 저휘도 영역에서 고휘도 영역까지의 전체 휘도 영역에서 리니어한 특성이 된다. 따라서, 촬상장치가 고휘도 우선 모드에서 동작하고 있는 경우, 영상 처리 시스템은, 도 4d의 계조 특성 141과 같은 리니어한 계조 특성을 실현할 수 있다. 표시장치의 모니터부에 표시된 재생된 영상은, 실제 피사체의 계조, 색 및 선예감이 자연스러운 것으로 된다.
<촬상장치에 의한 계조 보정 처리>
도 5는, 본 실시형태에 따른 촬상장치(100)가 촬영 동작을 행한 후 계조 보정 처리를 행할 때, 카메라 마이크로컴퓨터(111)에 의해 행해지는, 입력 다이나믹 레인지의 결정, 감마 보정 커브의 결정, 메타데이터의 기록 및 감마 보정 처리의 제어를 포함하는 처리의 흐름을 나타낸 흐름도다.
도 5의 흐름도의 각 처리는, 본 실시형태에 따른 촬상장치용의 영상 처리 프로그램을 카메라 마이크로컴퓨터(111)가 실행함으로써 실현된다. 본 실시형태에 따른 영상 처리 프로그램은, 촬상장치(100)의 판독 전용 메모리(ROM)(미도시)에 미리 준비되거나, 외부 기억매체(미도시)로부터 판독되어 촬상장치의 랜덤 액세스 메모리(RAM)(미도시)에 로드될 수 있다. 다른 실시형태로서, 영상 처리 프로그램은, 적절한 네트워크(예를 들어, 인터넷)를 거쳐 촬상장치(100)에 다운로드될 수 있다.
도 5의 흐름도에 나타낸 계조 보정 처리는, 예를 들면, 유저가 동화상용 트리거 스위치(124)나 정지 화상용 트리거 스위치(125)를 조작하여 화상 또는 영상 촬영 동작을 개시할 때 스타트한다. 촬상장치(100)가 계조 보정 처리를 스타트하면, 스텝 S101에서, 카메라 마이크로컴퓨터(111)는 입력 다이나믹 레인지를 결정한다. 이 경우 결정되는 입력 다이나믹 레인지는, 촬영 모드에 따라 미리 설정된 소정값이거나, 또는, 휘도/색 정보 검출부(110)에 의해 검출된 휘도 정보 및 색 정보에 근거하여 산출한 값이다. 스텝 S101에서의 처리의 완료 후, 카메라 마이크로컴퓨터(111)의 동작이 스텝 S102로 진행한다.
스텝 S102에서는, 카메라 마이크로컴퓨터(111)는, 휘도/색 정보 검출부(110)에 의해 검출된 휘도 정보 및 색 정보에 근거하여, 전술한 조리개(102)의 제어와 이미지 센서(105)의 셔터 스피드의 제어를 포함하는 노출 제어를 행한다. 스텝 S102에서의 처리의 완료 후, 카메라 마이크로컴퓨터(111)의 동작이 스텝 S103으로 진행한다.
스텝 S103에서는, 카메라 마이크로컴퓨터(111)는, 현재의 촬영 모드가 고휘도 우선 모드인지 아닌지를 판단한다. 본 실시형태에서는, 유저가 모드 다이얼(126)을 조작하여, 고휘도 우선 모드와 통상 촬영 모드 사이에서 촬영 모드를 선택하거나 전환할 수 있다. 카메라 마이크로컴퓨터(111)가, 현재의 촬영 모드가 고휘도 우선 모드라고 판단한 경우에는(스텝 S103에서 YES), 스텝 S104로 동작을 진행한다. 카메라 마이크로컴퓨터(111)가, 현재의 촬영 모드가 고휘도 우선 모드가 아니라고 판단한 경우(즉, 카메라 마이크로컴퓨터(111)가, 현재의 촬영 모드가 통상 촬영 모드라고 판단한 경우)에는(스텝 S103에서 NO), 스텝 S106으로 동작을 진행한다.
스텝 S104에서는, 카메라 마이크로컴퓨터(111)는, 감마 보정 처리부(109)에 의해 감마 보정 처리에 사용할 감마 특성으로서, 전술한 고휘도 우선 모드용의 감마 특성 139의 감마 보정 커브를 결정한다. 스텝 S104에서의 처리의 완료 후, 카메라 마이크로컴퓨터(111)의 동작이 스텝 S105로 진행한다.
스텝 S105에서는, 카메라 마이크로컴퓨터(111)는, 고휘도 우선 모드에 대응한 후술하는 메타데이터를 생성하고, 생성된 메타데이터를 영상신호에 부가한다. 영상신호에 메타데이터를 부가하는 예시적인 구성은 도시하지 않았지만, 감마 보정 처리부(109)의 후단이 메타데이터를 부가하기 위한 전술한 처리를 행한다. 그후, 영상신호와 관련된 메타데이터는 자기 테이프(115), DVD 디스크(117), 또는 메모리 카드(118)에 기록되게 된다. 스텝 S105에서의 처리의 완료 후, 카메라 마이크로컴퓨터(111)의 동작은 스텝 S108로 진행한다.
메타데이터는, 고휘도 우선 모드를 표시하는 플래그, 입력 다이나믹 레인지, 표시장치에 대해 미리 설정된 표시 휘도의 기준값에 대한 배율과 피크 휘도값, 촬상장치의 감마 형상 정보와 베이스 감마이다. 입력 다이나믹 레인지를 표시하는 정보는, 표시장치가 적정한 밝기(피크 휘도값)를 산출할 때에 사용될 수 있다. 표시 휘도의 기준값에 대한 배율은, 고휘도 우선 모드에 있어서, 전술한 함수 y=f(x/t)에 의해 규정된 감마 특성 139를 결정할 때 "t"(기준이 되는 입력 다이나믹 레인지 x1이 t배 넓힌 경우)에 해당하는 정보이다. 고휘도 우선 모드에 있어서, 기준이 되는 입력 다이나믹 레인지 x1가 "t"배로 넓혀진 경우, 표시장치의 표시 휘도가 "t"배로 증가하는 것이 적정하다. 따라서, 메타데이터의 한 개로서 이 배율의 정보가 준비된다. 또한, 피크 휘도값은, ITU-R BT.709에 따라, 표시장치에 대한 규격으로서 정해져 있는 피크 휘도값을 기준으로 하여 촬상장치(100)에 의해 산출된다. 촬상장치(100)는, 입력 다이나믹 레인지에 따라 표시장치에 대한 적정한 피크 휘도값을 산출하고, 그 산출된 피크 휘도값을 메타데이터의 한개로서 부가한다. 감마 형상 정보는, 감마 보정 커브의 형상을 표시하는 감마값을 나타내는 정보이다. 고휘도 우선 모드에서 감마 형상 정보는, 전술한 감마 특성 139의 형상을 나타내는 정보이다. 통상 촬영 모드에서 감마 형상 정보는, 전술한 감마 특성 909의 형상을 나타내는 정보이다. 베이스 감마는, ITU-R BT.709에 따라 규격화되어 있는 전술한 감마 특성 137을 나타내는 정보이다.
한편, 스텝 S106으로 동작이 진행한 경우, 카메라 마이크로컴퓨터(111)는, 감마 보정 처리부(109)에서 감마 보정 처리부(109)에 의해 사용할 감마 특성으로서, 전술한 통상 촬영 모드용의 감마 특성 909의 감마 보정 커브를 결정한다. 스텝 S106에서의 처리의 완료 후, 카메라 마이크로컴퓨터(111)의 동작이 스텝 S107로 진행한다.
스텝 S107에서는, 카메라 마이크로컴퓨터(111)는, 통상 촬영 모드에 대응한 메타데이터를 영상신호에 부가한다. 이 경우의 메타데이터는, 통상 촬영 모드를 표시하는 플래그, 입력 다이나믹 레인지, 표시장치에 대해 미리 설정된 표시 휘도의 기준값에 대한 배율과 피크 휘도값, 촬상장치의 감마 형상 정보와, 촬상장치의 베이스 감마이다. 전술한 것과 마찬가지로, 감마 보정 처리부(109)의 후단이 메타데이터의 부가하는 전술한 처리를 행한다(도시는 생략한다). 이에 따라, 영상신호와 관련된 메타데이터가 자기 테이프(115), DVD 디스크(117) 또는 메모리 카드(118)에 기록된다. 스텝 S107에서의 처리의 완료 후, 카메라 마이크로컴퓨터(111)의 동작이 스텝 S108로 진행한다.
스텝 S108에서는, 카메라 마이크로컴퓨터(111)는, 감마 보정 처리부(109)가, 스텝 S104 또는 스텝 S106에서 결정된 감마 보정 커브에 근거하여 감마 보정 처리를 행하게 한다. 스텝 S108의 감마 보정 처리의 완료 후, 카메라 마이크로컴퓨터(111)는, 촬상장치(100)의 전원이 절단될 때까지, 도 5의 흐름도의 전술한 처리를 반복한다.
<촬상장치에 의한 적정 노출 제어의 표시 예>
이하, 고휘도 우선 모드에 있어서 촬상장치(100)에 의해 촬상된 영상을 디스플레이 장치(116)(예를 들어, EVF(123) 또는 액정 패널(128))이 라이브 뷰 표시(스루 영상의 표시)를 행하고 있을 때 행해질 수 있는 적정 노출 표시의 예에 대해 도 6을 참조하면서 설명한다. 도 6은, 촬영 모드가 고휘도 우선 모드인 경우에, 디스플레이 장치(116)(예를 들어, EVF(123) 또는 액정 패널(128))에 의해 표시된 라이브 뷰 영상의 일례를 나타내고 있다.
촬영 동작이 행해지는 경우, 카메라 마이크로컴퓨터(111)는, 도 6에 나타낸 것과 같이, 디스플레이 장치(116)의 화면 상의 노출 정보 표시 에어리어(301)에, 조리개, 셔터 속도 및 게인에 대한 현재 값에 대응하는 현재의 노출과 적정 노출의 관계를 표시하기 위한 노출 표시 신호를 생성한다. 이에 따라, 디스플레이 장치(116)의 화면 상의 노출 정보 표시 에어리어(301)에는, 조리개, 셔터 속도 및 게인을 나타내는 수치값이 표시된다. 또한, 카메라 마이크로컴퓨터(111)는, 유저 조작에 의해, 조리개 값, 셔터 속도 및 게인값이 변한 경우에는, 노출 정보 표시 에어리어(301)에 표시된 내용을 갱신한다. 예를 들어, 노출 표시 에어리어(303)에는, 적정 노출(±0)에 대한 "언더(-)"나 "오버(+)" 상태를 표시하는 노출 바(305)와, 현재의 노출량을 나타내는 노출 마크(304)가 표시된다. 노출 바(305) 상의 노출 마크(304)의 위치를 확인함으로써, 유저는, 적정 노출(±0)에 대한 현재의 노출의 "언더" 또는 "오버" 정보를 확인할 수 있다.
본 실시형태에 따른 고휘도 우선 모드에서의 감마 특성 139는, 통상 촬영 모드의 감마 특성 909에 비해, 상대적으로 어두운 감마 특성이다. 이 때문에, 촬영 모드가 고휘도 우선 모드인 경우, 카메라 마이크로컴퓨터(111)는, 노출 표시 에어리어(303)의 적정 노출(±0)의 표시 위치를, 감마 특성 139에 대응하는 위치로 시프트하도록 표시한다. 이에 따라, 고휘도 우선 모드에서 표시된 영상이 통상 촬영 모드와 비교해서 상대적으로 어두운 경우에도, 유저는, 노출 표시 에어리어(303)의 표시를 확인함으로써, 현재의 노출이 적정한지(±0) 판단할 수 있다.
이상에서 설명한 것과 같이, 본 실시형태에 따르면, 촬상장치(100)가 고휘도 우선 모드에서 동작하고 있는 경우에는, 영상 처리 시스템이 도 4d의 계조 특성 141과 같이 리니어한 계조 특성을 실현할 수 있다. 따라서, 표시장치의 모니터부에 표시되는 재현된 영상은, 암부(즉, 저휘도 영역)로부터 하이라이트부(즉, 고휘도 영역)까지의 전체 휘도 영역에 있어서, 실제 피사체의 계조, 색 및 선예감에서 자연스러운 것이 된다. 특히, 촬상장치(100)가 고휘도 우선 모드에서 동작하고 있는 경우, 표시장치는, 예를 들면, 금속의 빛남, 물의 투명감, 푸른 하늘과 구름의 입체감, 스킨 톤의 계조성, 색채 재현 및 선예감에서 우수한 영상을 표시할 수 있다.
<영상 처리 시스템의 구성>
도 7은, 전술한 본 실시형태에 따른 촬상장치(100)(도 1 참조)와, 본 실시형태의 영상 처리장치의 일례인 표시장치(220)로 이루어진 영상 처리 시스템의 개략 구성을 도시한 블록도이다.
도 7에 나타낸 촬상장치(100)는, 도 1의 디스플레이 장치(116)를 제외하고, 도 1에 도시된 렌즈(101) 내지 DVD 디스크(117)와 유사한 구성요소를 포함한다. 따라서, 그것들의 반복 설명은 생략한다. 또한, 도 7의 촬상장치(100)에 있어서의 통상 촬영 모드 및 고휘도 우선 모드에서의 감마 특성, 및 감마 보정 처리(즉, 계조 보정 처리)는, 전술한 도 1의 촬상장치(100)와 유사하므로, 그것들의 반복 설명은 생략한다. 신호 처리부(112)는, 자기 테이프(115), DVD 디스크(117) 또는 메모리 카드(118) 등의 컴퓨터 판독가능한 기억매체에 처리된 영상신호를 기록할 수 있다.
도 7의 영상 처리 시스템에 있어서, 표시장치(220)는, 촬상장치(100)의 신호 처리부(112)에서 신호 처리가 실시된 영상신호, 또는 자기 테이프(115), DVD 디스크(117) 또는 메모리 카드(118)에 기록된 후 재생된 영상신호를 입력한다. 표시장치(220)는 입력된 영상신호를 메타데이터 해석부(228)와 신호 처리부(222)로 보낸다.
메타데이터 해석부(228)는, 입력된 영상신호에 부가되어 있는 전술한 메타데이터를 해석하고, 메타데이터의 해석 결과를 디스플레이 마이크로컴퓨터(221)로 보낸다. 구체적으로는, 메타데이터 해석부(228)는, 고휘도 우선 모드를 표시하는 플래그, 입력 다이나믹 레인지, 표시 휘도의 기준값에 대한 배율과 피크 휘도값을 나타내는 정보와, 촬상장치의 감마 형상 정보와 베이스 감마 정보를, 디스플레이 마이크로컴퓨터(221)로 보낸다. 메타데이터가 이들 모든 정보를 포함하지 않을 수도 있지만, 메타데이터 해석부(228)는, 메타데이터로부터 해석된 모든 정보를 디스플레이 마이크로컴퓨터(221)로 보낸다. 디스플레이 마이크로컴퓨터(221)는 표시장치(220)에 설치된 제어부의 일례이다. 디스플레이 마이크로컴퓨터(221)는, 메타데이터 해석 결과에 근거하여, 신호 처리부(222)에서 행해진 각 신호 처리를 제어한다.
본 실시형태에 따른 신호 처리부(222)는, 적어도 감마 보정 처리부(226)를 갖는다. 도 7의 예에 따르면, 신호 처리부(222)는, 감마 보정 처리부(226) 이외에, 화질 모드 설정부(223), 피크 휘도 설정부(224), 색 보정 처리부(225) 및 고휘도 적응 처리부(227)도 갖고 있다. 신호 처리부(222)는, 화질 모드 설정부(223), 피크 휘도 설정부(224), 색 보정 처리부(225) 및 고휘도 적응 처리부(227)의 전체를 갖고 있어도 되고, 그들 중 어느 한개만을 갖고 있어도 된다. 신호 처리부(222)에 의해 신호 처리가 행해진 후의 영상신호는, 도 7에서는 도시를 생략하고 있는 디스플레이 장치(즉, 도 1에 도시된 디스플레이 장치(116))로 보내져 표시될 수 있다.
화질 모드 설정부(223)는 표시장치(220)의 화질 모드를 설정한다. 표시장치(220)는, 예를 들면, "위탁", "표준", "선명함", "다이내믹", "시네마" 및 "게임" 모드 등의 각종 화질 모드에 대해 적합한 표시를 행할 수 있다. 화질 모드 설정부(223)는 각각의 화질 모드에 대한 설정을 행한다. 예를 들면, 화질 모드 설정부(223)는, 화질 모드 설정 메뉴 상에서의 유저의 선택에 따른 화질 모드를 설정하거나, 촬상장치(100)에 의해 사용된 고휘도 우선 모드 또는 통상 촬영 모드에 따라 화질 모드를 설정한다. 화질 모드의 일 설정예로서, 화질 모드 설정부(223)는 사용된 모드가 고휘도 우선 모드인 경우에는 화질 모드 "선명함" 또는 "다이내믹"을 설정하고, 사용된 모드가 통상 촬영 모드인 경우에는 화질 모드 "표준"을 설정한다.
피크 휘도 설정부(224)는, 표시장치(220)가 디스플레이 장치(116)에 영상을 표시할 때의 피크 휘도를 설정한다. 촬상장치(100)가 고휘도 우선 모드에서 감마 보정 처리를 행하는 경우, 피크 휘도 설정부(224)는, 영상신호의 피크 휘도값을, 영상의 중저 휘도 영역의 밝기가 통상 촬영 모드에서의 대응하는 밝기와 같아지도록 하는 적절한 피크 휘도값으로 설정하는 처리를 행한다. 피크 휘도 설정부(224)에 의해 설정되는 피크 휘도값은 사전에 결정된 통상 피크 휘도값이어도 된다. 그러나, 실제 피사체의 자연스러운 계조를 재현하기 위해서는, 중저 휘도 영역에서 고휘도 우선 모드에서의 밝기가 통상 촬영 모드에서의 대응하는 밝기와 같아지도록 피크 휘도값을 설정하는 것이 바람직하다. 또한, 촬상장치(100)가 통상 촬영 모드에서 계조 보정 처리를 행하는 경우, 피크 휘도 설정부(224)는, 영상신호의 피크 휘도값을 미리 결정된 통상 영상용의 소정의 피크 휘도값으로 설정한다. 피크 휘도값 설정 처리에 대해서는 도 8의 흐름도를 참조하여 상세히 후술한다.
색 보정 처리부(225)는, 영상신호에 대해, 매트릭스 연산이나 룩업 테이블에 근거하여 색 변환처리와 특정 색의 보정 처리를 행하지만, 색 변환처리와 특정 색의 보정 처리의 상세한 설명은 생략한다.
감마 보정 처리부(226)는, 영상신호에 대해 감마 보정 처리를 행한다. 촬상장치(100)가 고휘도 우선 모드에서 계조 보정 처리를 행하는 경우, 감마 보정 처리부(226)는, 영상신호에 대해, 촬상장치(100)에 의해 고휘도 우선 모드에서 사용된 감마 특성 139의 역특성과 유사한 감마 보정 커브를 사용하여 감마 보정 처리를 행한다. 감마 보정 처리부(226)가 사용하는 감마 특성은, ITU-R BT.709에 따라 규격화된 정규의 감마 특성이어도 된다. 그러나, 실제 피사체의 자연스러운 계조를 재현하기 위해서는, 고휘도 우선 모드에서의 감마 특성 139의 역특성에 대응하는 감마 특성을 사용하는 것이 바람직하다. 또한, 촬상장치(100)가 통상 촬영 모드에서 계조 보정 처리를 행하는 경우, 감마 보정 처리부(226)는, 영상신호에 대해, 촬상장치(100)에 의해 통상 촬영 모드에서 사용된 감마 특성 909의 역특성과 유사한 감마 보정 커브를 사용하여 감마 보정 처리를 행한다. 감마 보정 처리는 도 9의 흐름도를 참조하여 상세히 후술한다.
고휘도 적응 처리부(227)는, 계조 보정 처리에서 설정된 촬상장치(100)의 촬영 모드(즉, 고휘도 우선 모드 또는 통상 촬영 모드)에 따라, 영상신호에 대한 적응 처리를 행한다. 본 실시형태에서는, 적응 처리의 일례로서, 통상 촬영 모드의 감마 보정 처리를 통해 고휘도 영역에서 콘트라스트가 압축된 영상신호에 대해 표시장치(220)가 고휘도의 영역에 맞는 색 정보를 복원하는 다이나믹 레인지 리마스터 처리를 들 수 있다. 다이내믹 레인지 리마스터 처리는, 고휘도 영역에서 다이나믹 레인지를 확장하면, 고휘도 영역이 모두 화이트로 변하는 경우에, 복원할 휘도의 확장률에 맞도록 색 정보를 확장함으로써 결정된다. 이 적응 처리의 일례로서, 촬상장치(100)가 통상 촬영 모드에서 계조 보정 처리가 행하는 경우, 고휘도 적응 처리부(227)는, 영상신호에 대해, 고휘도의 영역에 맞는 색 정보를 복원하도록 다이나믹 레인지 리마스터 처리를 행한다. 한편, 촬상장치(100)가 고휘도 우선 모드에서 계조 보정 처리를 행하는 경우, 고휘도 적응 처리부(227)는 영상신호에 대해 다이나믹 레인지 리마스터 처리를 행하지 않도록 한다.
<표시장치에 의한 피크 휘도값 설정 처리>
도 8은, 촬상장치(100)에서 영상신호에 대해 계조 보정 처리가 행해질 때 촬영 모드(즉, 고휘도 우선 모드 또는 통상 촬영 모드)의 차이를 반영하는 피크 휘도값을 사용하여 표시 영상의 밝기를 설정하기 위해 표시장치(220)에 의해 행해지는 예시적인 처리를 나타낸 흐름도다. 본 실시형태에서, 표시장치(220)는, 이 도 8에 도시된 처리와 도 9에 도시된 처리의 어느 한쪽만을 행하거나 양쪽을 행하도록 구성되어도 된다. 또한, 표시장치(220)는, 후술하는 도 10의 흐름도의 처리를 행해도 된다. 이 때문에, 본 실시형태에서는, 도 8 내지 도 10의 각 흐름도를 개별적으로 설명하고 있다.
도 8의 흐름도의 각 처리는, 본 실시형태에 따른 표시장치용의 영상 처리 프로그램을 디스플레이 마이크로컴퓨터(221)가 실행함으로써 실현된다. 본 실시형태에 따른 영상 처리 프로그램은, 표시장치(220)의 ROM(미도시)에 미리 준비되거나, 외부 기억매체(미도시)로부터 판독되어 표시장치(220)의 RAM(미도시)에 로드될 수 있다. 다른 실시형태로서, 영상 처리 프로그램은, 적절한 네트워크(예를 들어, 인터넷)를 거쳐 표시장치(220)에 다운로드될 수 있다.
도 8의 흐름도의 처리는, 예를 들면, 유저가 도 2에 나타낸 비디오 카메라(120)의 모드 다이얼(126)을 조작하여, 재생 모드를 선택하고, 조작 스위치 군(127)을 조작하여 재생을 개시할 때 스타트한다. 도 8의 흐름도의 처리가 스타트하면, 스텝 S201에 있어서, 디스플레이 마이크로컴퓨터(221)는, 고휘도 우선 모드를 표시하는 플래그(즉, 메타데이터의 해석 결과), 또는 유저 조작에 근거하여 영상신호가 고휘도 우선 모드에서 계조 보정 처리된 신호인지 아닌지를 판단한다. 디스플레이 마이크로컴퓨터(221)가, 고휘도 우선 모드의 플래그가 존재하는 것으로 판단한 경우(스텝 S201에서 YES), 스텝 S202로 동작을 진행한다. 한편, 디스플레이 마이크로컴퓨터(221)가, 고휘도 우선 모드의 플래그가 존재하지 않는 것으로 판단한 경우, 즉 영상신호가 통상 촬영 모드에서 계조 보정 처리된 신호인 경우(스텝 S201에서 NO), 스텝 S203으로 동작을 진행한다.
스텝 S202로 동작이 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 영상의 중저 휘도 영역에서의 밝기가 통상 촬영 모드에서의 대응하는 밝기와 같아지게 하는 피크 휘도값을 산출한다. 디스플레이 마이크로컴퓨터(221)는, 중저 휘도 영역에서의 영상의 밝기를 통상 촬영 모드에서의 대응하는 밝기와 같아지게 하는 피크 휘도값을 산출할 때, 전술한 입력 다이나믹 레인지, 표시 휘도의 기준값에 대한 배율, 또는 피크 휘도값(즉, 메타데이터의 일부)을 참조한다.
입력 다이나믹 레인지는, 전술한 것과 같이, 촬상장치(100)의 카메라 마이크로컴퓨터(111)가 피크 휘도값을 산출할 때에 사용되는 메타데이터이다. 이 때문에, 표시장치(220)의 디스플레이 마이크로컴퓨터(221)도, 카메라 마이크로컴퓨터(111)에 의해 행해진 처리와 마찬가지로, 입력 다이나믹 레인지로부터 피크 휘도값을 구할 수 있다. 또한, 표시 휘도의 기준값에 대한 배율은, 전술한 것과 같이, 촬상장치(100)의 카메라 마이크로컴퓨터(111)에 의해, 촬영 모드가 고휘도 우선 모드인 경우에 표시장치에 대해 적정한 표시 휘도의 배율로서 산출한 값을 표시하는 메타데이터이다. 이 때문에, 표시장치(220)의 디스플레이 마이크로컴퓨터(221)는, 카메라 마이크로컴퓨터(111)의 경우와는 반대로, 표시 휘도의 기준값에 대한 배율로부터, 고휘도 우선 모드에서 계조 보정 처리된 영상신호에 대해 적정한 표시 휘도(즉, 피크 휘도값)를 구할 수 있다. 또한, 피크 휘도값은, 전술한 것과 같이, 촬상장치(100)의 카메라 마이크로컴퓨터(111)에 의해, ITU-R BT.709에 따라 규격화된, 표시장치에 대해 정해져 있는 피크 휘도값을 기준으로 하여 산출한 값을 나타내는 메타데이터이다. 이 때문에, 표시장치(220)의 디스플레이 마이크로컴퓨터(221)는, 메타데이터에 포함된 피크 휘도값을 참조하여, 고휘도 우선 모드에서 계조 보정 처리된 영상신호에 대한 적정한 피크 휘도값을 구할 수 있다. 다른 실시형태로서, 디스플레이 마이크로컴퓨터(221)는, 메타데이터를 참조하지 않고, 스텝 S202에서, 미리 결정된 고휘도 우선 영상용의 소정의 피크 휘도값을 사용해도 된다. 스텝 S202에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S204로 진행한다.
한편, 스텝 S203으로 동작을 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 미리 결정된 통상 영상용의 피크 휘도값을 산출하지만, 미리 결정된 통상 영상용의 피크 휘도값의 산출 처리의 설명은 생략한다. 스텝 S202에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S204로 진행한다.
스텝 S204로 동작을 진행하면, 디스플레이 마이크로컴퓨터(221)는, 스텝 S202 또는 스텝 S203에서 결정한 피크 휘도값에 근거하여, 피크 휘도 설정부(224)에게, 디스플레이 장치(116)에 대한 피크 휘도값 설정 처리를 행하게 한다. 이에 따라, 촬상장치(100)가 고휘도 우선 모드에서 계조 보정 처리를 행하는 경우, 피크 휘도 설정부(224)는, 영상신호에 대해, 중저 휘도 영역에서의 영상의 밝기가 통상 촬영 모드에서의 대응하는 밝기와 같아지도록 피크 휘도값의 설정 처리를 행한다. 한편, 촬상장치(100)가 통상 촬영 모드에서 계조 보정 처리를 행하는 경우, 피크 휘도 설정부(224)는, 영상신호에 대해 통상 촬영 모드의 영상용의 피크 휘도값의 설정 처리를 행한다. 스텝 S204에서의 처리의 완료 후에는, 디스플레이 마이크로컴퓨터(221)는, 표시장치(220)의 전원이 절단될 때까지, 도 8의 흐름도의 처리를 반복한다.
본 실시형태에 따른 표시장치(220)는, 촬상장치(100)에 의해 행해진 고휘도 우선 모드 또는 통상 촬영 모드에서의 계조 보정 처리에 연동하여, 디스플레이 장치(116)에 대한 피크 휘도값 설정처리를 행한다. 촬상장치(100)가 고휘도 우선 모드에서 계조 보정 처리를 행한 경우, 표시장치(220)는, 계조 보정 처리된 영상신호의 저중 휘도 영역에서의 밝기를 통상 촬영 모드에서의 대응하는 밝기와 동등하게 한다. 이에 따라, 표시장치(220)는, 촬상장치(100)가 고휘도 우선 모드에서 계조 보정 처리를 행한 경우에, 저중 휘도의 영역에서의 표시 영상이 어둡게 되는 것을 방지할 수 있다. 또한, 본 실시형태에서는, 촬상장치(100)가 고휘도 우선 모드에서 계조 보정 처리를 행하는 경우에, 저중 휘도 영역에서의 휘도를 보상하도록 피크 휘도값으로 설정함으로써, 고휘도 우선 모드를 선택하여 향상된 고휘도 영역에서의 화질과 저중 휘도의 화질 사이의 밸런스를 유지할 수 있다.
<표시장치에 의한 감마 보정 처리>
도 9는, 표시장치(220)에 의해, 촬상장치(100)에서 영상신호가 계조 보정 처리될 때, 촬영 모드(즉, 고휘도 우선 모드 또는 통상 촬영 모드)의 차이를 반영하는 감마 보정 커브를 사용하여, 표시 영상의 신호에 대해 감마 보정 처리를 행하기 위해 행해진 처리예를 나타낸 흐름도다.
도 9의 흐름도의 각 처리는, 본 실시형태에 따른 표시장치용의 영상 처리 프로그램을 디스플레이 마이크로컴퓨터(221)가 실행함으로써 실현된다. 본 실시형태에 따른 영상 처리 프로그램은, 표시장치(220)의 ROM(미도시)에 미리 준비되거나, 외부 기억매체(미도시)로부터 판독되어 표시장치(220)의 RAM(미도시)에 로드될 수 있다. 다른 실시형태로서, 영상 처리 프로그램은, 적절한 네트워크(예를 들어, 인터넷)를 거쳐 표시장치(220)에 다운로드될 수 있다.
도 9의 흐름도에서 나타낸 처리는, 예를 들면, 유저가 도 2에 나타낸 비디오 카메라(120)의 모드 다이얼(126)을 조작하여 재생 모드를 선택하고, 조작 스위치 군(127)을 조작하여 재생을 개시할 때 스타트한다. 도 9의 흐름도의 처리가 스타트하면, 스텝 S301에 있어서, 디스플레이 마이크로컴퓨터(221)는, 고휘도 우선 모드를 표시하는 플래그(즉, 메타데이터의 해석 결과) 또는 유저 조작에 근거하여 영상신호가 고휘도 우선 모드에서 계조 보정 처리된 신호인지 아닌지를 판단한다. 디스플레이 마이크로컴퓨터(221)가, 고휘도 우선 모드의 플래그가 존재하는 것으로 판단한 경우(스텝 S301에서 YES), 스텝 S302로 동작을 진행한다. 한편, 디스플레이 마이크로컴퓨터(221)가, 고휘도 우선 모드의 플래그가 존재하지 않는 것으로 판단한 경우, 즉 영상신호가 통상 촬영 모드에서 계조 보정 처리된 신호인 경우(스텝 S301에서 NO), 스텝 S303으로 동작을 진행한다.
스텝 S302로 동작을 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 메타데이터의 감마 형상 정보와 베이스 감마의 정보에 근거하여, 표시장치(220)의 감마 특성이 촬상장치(100)의 감마 특성의 역특성에 가장 가깝게 하는 감마 보정 커브를 결정한다. 다른 실시형태로서, 디스플레이 마이크로컴퓨터(221)는, 스텝 S302에서, 메타데이터의 감마 형상 정보와 베이스 감마의 정보를 사용하지 않고, 미리 결정된 고휘도 우선 영상용의 감마 보정 커브를 사용하도록 구성되어도 된다. 스텝 S302에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S304로 진행한다.
한편, 스텝 S303으로 동작을 진행하면, 디스플레이 마이크로컴퓨터(221)는 미리 결정된 통상 영상용의 감마 보정 커브를 결정한다. 스텝 S302에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S304로 진행한다.
스텝 S304에서는, 디스플레이 마이크로컴퓨터(221)는, 감마 보정 처리부(226)에게, 스텝 S302 또는 스텝 S303에서 결정한 감마 보정 커브에 근거한 감마 보정 처리를 행하게 한다. 이에 따라, 촬상장치(100)가 고휘도 우선 모드에서 계조 보정 처리가 행하는 경우, 감마 보정 처리부(226)는, 영상신호에 대해, 고휘도 우선 모드에 있어서의 감마 특성의 역특성에 가까운 감마 보정 커브를 사용하여 감마 보정 처리를 행한다. 한편, 촬상장치(100)가 통상 촬영 모드에서 계조 보정 처리를 행하는 경우, 감마 보정 처리부(226)는, 영상신호에 대해, 통상 촬영 모드에 있어서의 감마 특성의 역특성에 가까운 감마 보정 커브를 사용하여 감마 보정 처리를 행한다. 스텝 S304에서의 처리의 완료 후에는, 디스플레이 마이크로컴퓨터(221)는, 표시장치(220)의 전원이 절단될 때까지, 도 9의 흐름도의 처리를 반복한다.
본 실시형태에 따른 표시장치(220)는, 촬상장치(100)에 의해, 고휘도 우선 모드 또는 통상 촬영 모드에서 감마 보정 처리를 행하기 위해 사용된 감마 특성의 역특성에 가까운 감마 보정 커브를 사용하여 감마 보정 처리를 행한다. 표시장치(220)는, 감마 보정 처리에서 사용할 감마 특성을, 촬상장치(100)에 의해 설정된 촬영 모드(즉, 고휘도 우선 모드 또는 통상 촬영 모드)에 따라 전환함으로써, 전체 영상 처리 시스템에서의 계조 특성의 리니어리티 정밀도(linearity accuracy)를 향상시킬 수 있다. 예를 들면, 촬상장치(100)가 고휘도 우선 모드에서 계조 보정 처리를 행한 경우, 입력 다이나믹 레인지가 넓혀져도, (통상 촬영 모드에서 행해지는) 콘트라스트 압축은 행해지지 않아, 전체 영상 처리 시스템의 계조 특성의 적절한 휘도 리니어를 얻을 수 있다. 이에 따라, 암부로부터 하이라이트부까지의 전체 영역에서 자연스러운 계조성을 실현하는 것이 가능해진다.
<표시장치에 의한 신호 처리>
도 10은, 표시장치(220)에 있어서, 디스플레이 마이크로컴퓨터(221)와 신호 처리부(222)에 의해 행해지는 처리예의 흐름도이다.
도 10의 흐름도의 각 처리는, 본 실시형태에 따른 표시장치용의 영상 처리 프로그램을 디스플레이 마이크로컴퓨터(221)가 실행함으로써 실현된다. 본 실시형태에 따른 영상 처리 프로그램은, 표시장치(220)의 ROM(미도시)에 미리 준비되거나, 외부 기억매체(미도시)로부터 판독되어 RAM(미도시)에 로드되거나, 적절한 네트워크를 거쳐 다운로드될 수 있다.
도 10의 흐름도에서 나타낸 처리는, 예를 들면, 유저가 비디오 카메라(120)의 모드 다이얼(1260을 조작하여 재생 모드를 선택하고, 조작 스위치 군(1270을 조작하여 재생을 개시할 때 스타트한다. 도 10의 흐름도의 처리가 스타트하면, 스텝 S401에 있어서, 디스플레이 마이크로컴퓨터(221)는, 고휘도 우선 모드를 표시하는 플래그(즉, 메타데이터의 해석 결과) 또는 유저 조작에 근거하여 영상신호가 고휘도 우선 모드에서 계조 보정 처리된 신호인지 아닌지를 판단한다. 디스플레이 마이크로컴퓨터(221)가, 고휘도 우선 모드의 플래그가 존재하는 것으로 판단한 경우에는(스텝 S401에서 YES), 스텝 S402로 동작을 진행한다. 한편, 디스플레이 마이크로컴퓨터(221)가, 고휘도 우선 모드의 플래그가 존재하지 않는 것으로 판단한 경우에는*스텝 S401에서 NO), 스텝 S406으로 동작을 진행한다.
스텝 S402로 동작을 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 화질 모드 설정 메뉴 상의 유저 선택에 따른 화질 모드, 또는 고휘도 우선 모드에 적합한 화질 모드를 결정한다. 스텝 S402에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S403으로 진행한다. 한편, 스텝 S406으로 동작이 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 화질 모드 설정 메뉴 상의 유저 선택에 따른 화질 모드, 또는 통상 촬영 모드에 적절한 화질 모드를 결정한다. 그리고, 디스플레이 마이크로컴퓨터(221)는, 화질 모드 설정부(223)에게, 그 결정한 화질 모드에 따라 화질 모드의 설정 처리를 행하게 한다. 스텝 S406에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S407로 진행한다.
스텝 S403으로 처리를 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 도 8의 스텝 S202에서의 전술한 처리와 마찬가지로, 영상의 중저 휘도 영역에서의 밝기가 통상 촬영 모드에서의 대응하는 밝기와 같게 하는 피크 휘도값을 산출한다. 스텝 S403에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S404로 진행한다. 한편, 스텝 S407로 동작을 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 도 8의 스텝 S203의 전술한 처리와 마찬가지로, 미리 결정된 통상 영상용의 피크 휘도값을 산출한다. 스텝 S407에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S408로 진행한다.
스텝 S404로 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 도 9의 스텝 S302의 전술한 처리와 마찬가지로, 촬상장치(100)에 의해 사용된 감마 특성 139의 역특성에 가장 가까운 감마 보정 커브를 결정한다. 스텝 S404에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S405로 진행한다. 한편, 스텝 S408로 동작이 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 도 9의 스텝 S303의 전술한 처리와 마찬가지로, 미리 결정된 통상 영상용의 감마 보정 커브를 결정한다. 스텝 S408에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S409로 진행한다.
스텝 S405로 동작이 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 촬상장치(100)에 의해 고휘도 우선 모드에서 행해진 계조 보정 처리가 행해진 영상신호에 대해 적용할 적응 처리를 결정한다. 즉, 디스플레이 마이크로컴퓨터(221)는 적응 처리를 행할 것인지 아닌지를 결정한다. 스텝 S405에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S410으로 진행한다. 한편, 스텝 S409로 동작을 진행한 경우, 디스플레이 마이크로컴퓨터(221)는, 촬상장치(100)에 의해 통상 촬영 모드에서 행해진 계조 보정 처리가 행해진 영상신호에 대해 적용할 적응 처리를 결정한다. 스텝 S409에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S410으로 진행한다.
스텝 S410에서는, 디스플레이 마이크로컴퓨터(221)는, 스텝 S405 또는 스텝 S406에서 결정한 화질 모드를 설정하도록, 화질 모드 설정부(223)에게 전술한 것과 같은 화질 모드 설정 처리를 행하게 한다. 스텝 S410에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S411로 진행한다.
스텝 S411에서는, 디스플레이 마이크로컴퓨터(221)는, 스텝 S403 또는 스텝 S407에서 결정한 피크 휘도값에 근거하여, 전술한 도 8의 스텝 S204에서의 처리와 마찬가지로, 피크 휘도 설정부(224)에게 피크 휘도값 설정 처리를 행하게 한다. 스텝 S411에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S412로 진행한다.
스텝 S412에서는, 디스플레이 마이크로컴퓨터(221)는, 스텝 S404 또는 스텝 S408에서 결정한 감마 보정 커브에 근거하여, 전술한 도 9의 스텝 S304의 처리와 마찬가지로, 감마 보정 처리부(226)에게 감마 보정 처리를 행하게 한다. 스텝 S412에서의 처리의 완료 후, 디스플레이 마이크로컴퓨터(221)의 동작은 스텝 S413으로 진행한다.
스텝 S413에서는, 디스플레이 마이크로컴퓨터(221)는, 스텝 S405 또는 스텝 S409에서 결정한 적응 처리에 근거하여, 고휘도 적응 처리부(227)에게 전술한 것과 같은 적응 처리를 행하게 한다. 스텝 S413의 후에는, 디스플레이 마이크로컴퓨터(221)는, 표시장치(220)의 전원이 절단될 때까지, 도 10의 흐름도의 처리를 반복한다.
이상에서 설명한 것과 같이, 본 실시형태에 따른 촬상장치(100)와 표시장치(220)를 갖는 영상 처리 시스템에 따르면, 실용적인 입력 다이나믹 레인지를 확보하면서, 저휘도로부터 고휘도까지의 전체 휘도 영역에서 실제 피사체의 계조 특성에 가까운, 자연스러운 계조, 색 및 선예감을 재현하는 것이 가능해진다.
<기타 실시형태>
본 발명은, 상기한 실시형태의 1개 이상의 기능을 실현하는 프로그램을, 네트워크 또는 기억매체를 개입하여 시스템 혹은 장치에 공급하고, 그 시스템 혹은 장치의 컴퓨터에 있어서 1개 이상의 프로세서가 프로그램을 읽어 실행하는 처리에서도 실행가능하다. 또한, 1개 이상의 기능을 실현하는 회로(예를 들어, ASIC)에 의해서도 실행가능하다.
전술한 실시형태는 본 발명을 구체화할 수 있는 예에 지나지 않고, 이것들에 의해 본 발명의 기술적 범위가 한정적으로 해석되어는 안되는 것이다. 본 발명은, 본 발명의 기술사상 또는 그 주요한 특징으로부터 일탈하지 않고 다양하게 변경 또는 변형될 수 있다.
예시적인 실시형태들을 참조하여 본 발명을 설명하였지만, 본 발명이 이러한 실시형태에 한정되지 않는다는 것은 자명하다. 이하의 청구범위의 보호범위는 가장 넓게 해석되어 모든 변형, 동등물 구조 및 기능을 포괄하여야 한다.

Claims (23)

  1. 제1 다이나믹 레인지의 모든 휘도 범위에 있어서 휘도의 입력값과 휘도의 출력값의 관계가 미리 정해진 기준의 감마 특성에 근거하여, 상기 제1 다이나믹 레인지보다도 넓은 제2 다이나믹 레인지에 대해 생성된 감마 특성을 설정하도록 구성된 제어부와, 상기 설정된 감마 특성을 사용하여 상기 제2 다이나믹 레인지를 갖는 영상신호에 대해 감마 보정처리를 행하도록 구성된 보정부를 구비하고,
    상기 설정된 감마 특성에 근거하여, 상기 보정부에 의해 상기 감마 보정처리가 행해질 때, 촬상된 영상신호의 각 휘도값을 코드화하여 얻어지는 상기 입력값의 코드는 저휘도로부터 고휘도까지 확장되는 전체 휘도 영역에서의 상기 출력값의 코드의 비트 할당 비율을 변경하지 않고, 상기 출력값의 코드로 변환되는 영상 처리장치.
  2. 삭제
  3. 제 1항에 있어서,
    상기 제어부에 의해 설정되는 상기 감마 특성은, 상기 기준의 감마 특성의 상기 제1 다이나믹 레인지에 비해 소정의 배율만큼 더 넓은 상기 제2 다이나믹 레인지의 감마 특성인 영상 처리장치.
  4. 제 1항에 있어서,
    상기 제어부는,
    상기 기준의 감마 특성의 입력 휘도값과 출력 휘도값의 관계에 따라 설정되는 제1 감마 특성과,
    상기 기준의 감마 특성의 상기 입력 휘도값과 상기 출력 휘도값의 관계에 비해, 고휘도 영역의 입력 휘도값에 대한 출력 휘도값을 압축함으로써 설정되는 제2 감마 특성 중에서 한 개를, 상기 영상 처리장치의 모드에 따라 선택하도록 구성되고,
    상기 보정부는, 상기 영상 처리장치의 모드에 따라 선택된 상기 제1 감마 특성 또는 상기 제2 감마 특성을 사용하여 상기 감마 보정 처리를 행하는 영상 처리장치.
  5. 제 4항에 있어서,
    상기 제어부는,
    상기 감마 보정 처리시에 상기 제1 감마 특성과 상기 제2 감마 특성의 어느 것이 사용되었지를 표시하는 정보와,
    상기 선택된 제1 또는 제2 감마 특성이 상기 기준의 감마 특성의 제1 다이나믹 레인지에 비해 소정의 배율만큼 더 넓은 상기 제2 다이나믹 레인지의 감마 특성인 경우의 상기 소정의 배율에 대응하는 정보와,
    상기 영상신호의 피크 휘도값을 표시하는 정보와,
    상기 선택된 제1 또는 제2 감마 특성의 감마 형상 정보와,
    상기 기준의 감마 특성을 표시하는 정보
    중에서 적어도 한개를, 메타데이터로서, 상기 감마 보정 처리가 행해진 상기 영상신호에 부가하도록 구성된 영상 처리장치.
  6. 제 4항에 있어서,
    상기 제어부는,
    촬상된 영상신호에 대해 상기 감마 보정 처리를 행함으로써 라이브 뷰 표시가 행해질 때, 현재의 노출과 적정 노출의 관계를 위치의 관계로서 표시하기 위한 노출 표시 신호를 생성하도록 구성되고,
    상기 제1 감마 특성을 사용하여 상기 감마 보정 처리가 행해지는 경우에, 상기 제어부는, 상기 적정 노출을 표시하는 위치를, 상기 제1 감마 특성을 사용하여 상기 감마 보정 처리가 행해질 때의 밝기를 표시하는 위치로 설정하도록 상기 노출 표시 신호를 생성하는 영상 처리장치.
  7. 영상 처리장치로서,
    제1 다이나믹 레인지의 모든 휘도 범위에 있어서 휘도의 입력값과 휘도의 출력값의 관계가 미리 정해진 기준의 감마 특성에 근거하여, 상기 제1 다이나믹 레인지보다도 넓은 제2 다이나믹 레인지에 대해 생성된 감마 특성을 설정하도록 구성된 제어부와,
    상기 설정된 감마 특성을 사용하여 상기 제2 다이나믹 레인지를 갖는 영상신호에 대해 감마 보정처리를 행하도록 구성된 보정부를 구비하고,
    상기 제어부는,
    상기 기준의 감마 특성의 입력 휘도값과 출력 휘도값의 관계에 따라 설정되는 제1 감마 특성과,
    상기 기준의 감마 특성의 상기 입력 휘도값과 상기 출력 휘도값의 관계에 비해, 고휘도 영역의 입력 휘도값에 대한 출력 휘도값을 압축함으로써 설정되는 제2 감마 특성 중에서 한 개를, 상기 영상 처리장치의 모드에 따라 선택하도록 구성되고,
    상기 보정부는, 상기 영상 처리장치의 모드에 따라 선택된 상기 제1 감마 특성 또는 상기 제2 감마 특성을 사용하여 상기 감마 보정 처리를 행하고,
    상기 제어부는,
    촬상된 영상신호에 대해 상기 감마 보정 처리를 행함으로써 라이브 뷰 표시가 행해질 때, 현재의 노출과 적정 노출의 관계를 위치의 관계로서 표시하기 위한 노출 표시 신호를 생성하도록 구성되고,
    상기 제1 감마 특성을 사용하여 상기 감마 보정 처리가 행해지는 경우에, 상기 제어부는, 상기 적정 노출을 표시하는 위치를, 상기 제1 감마 특성을 사용하여 상기 감마 보정 처리가 행해질 때의 밝기를 표시하는 위치로 설정하도록 상기 노출 표시 신호를 생성하는 영상 처리장치.
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 삭제
  13. 삭제
  14. 삭제
  15. 삭제
  16. 제1 다이나믹 레인지의 모든 휘도 범위에 있어서 휘도의 입력값과 휘도의 출력값의 관계가 미리 정해진 기준의 감마 특성에 근거하여, 상기 관계를 변경하지 않고, 상기 제1 다이나믹 레인지보다도 넓은 제2 다이나믹 레인지에 대해 생성된 감마 특성을 설정하는 설정 단계와,
    상기 설정된 감마 특성을 사용하여 상기 제2 다이나믹 레인지를 갖는 영상신호에 대해 감마 보정처리를 행하는 보정 단계를 포함하고,
    상기 설정된 감마 특성에 근거하여, 상기 보정 단계에서 상기 감마 보정처리가 행해질 때, 촬상된 영상신호의 각 휘도값을 코드화하여 얻어지는 상기 입력값의 코드는, 저휘도로부터 고휘도까지 확장되는 전체 휘도 영역에서의 상기 출력값의 코드의 비트 할당 비율을 변경하지 않고, 상기 출력값의 코드로 변환되는 영상 처리방법.
  17. 영상 처리장치의 영상 처리방법으로서,
    제1 다이나믹 레인지의 모든 휘도 범위에 있어서 휘도의 입력값과 휘도의 출력값의 관계가 미리 정해진 기준의 감마 특성에 근거하여, 상기 관계를 변경하지 않고, 상기 제1 다이나믹 레인지보다도 넓은 제2 다이나믹 레인지에 대해 생성된 감마 특성을 설정하는 설정 단계와,
    상기 설정된 감마 특성을 사용하여 상기 제2 다이나믹 레인지를 갖는 영상신호에 대해 감마 보정처리를 행하는 보정 단계를 포함하고,
    상기 설정 단계에서는,
    상기 기준의 감마 특성의 입력 휘도값과 출력 휘도값의 관계에 따라 설정되는 제1 감마 특성과,
    상기 기준의 감마 특성의 상기 입력 휘도값과 상기 출력 휘도값의 관계에 비해, 고휘도 영역의 입력 휘도값에 대한 출력 휘도값을 압축함으로써 설정되는 제2 감마 특성 중에서 한 개를, 상기 영상 처리장치의 모드에 따라 선택하고,
    상기 보정 단계에서는, 상기 영상 처리장치의 모드에 따라 선택된 상기 제1 감마 특성 또는 상기 제2 감마 특성을 사용하여 상기 감마 보정 처리를 행하고,
    상기 설정 단계에서는,
    촬상된 영상신호에 대해 상기 감마 보정 처리를 행함으로써 라이브 뷰 표시가 행해질 때, 현재의 노출과 적정 노출의 관계를 위치의 관계로서 표시하기 위한 노출 표시 신호를 생성하고,
    상기 제1 감마 특성을 사용하여 상기 감마 보정 처리가 행해지는 경우에, 상기 적정 노출을 표시하는 위치를, 상기 제1 감마 특성을 사용하여 상기 감마 보정 처리가 행해질 때의 밝기를 표시하는 위치로 설정하도록 상기 노출 표시 신호를 생성하는 영상 처리방법.
  18. 영상 처리장치에 의해 구현될 때, 상기 영상 처리장치가 청구항 16에 기재된 방법을 행하게 하기 위해 기억매체에 기억된 컴퓨터 프로그램.
  19. 영상 처리장치에 의해 구현될 때, 상기 영상 처리장치가 청구항 17에 기재된 방법을 행하게 하기 위해 기억매체에 기억된 컴퓨터 프로그램.
  20. 청구항 18에 기재된 컴퓨터 프로그램을 기억한 컴퓨터 판독가능한 기억매체.
  21. 청구항 19에 기재된 컴퓨터 프로그램을 기억한 컴퓨터 판독가능한 기억매체.
  22. 제 7항에 있어서,
    상기 제어부에 의해 설정되는 상기 감마 특성은, 상기 기준의 감마 특성의 상기 제1 다이나믹 레인지에 비해 소정의 배율만큼 더 넓은 상기 제2 다이나믹 레인지의 감마 특성인 영상 처리장치.
  23. 제 7항에 있어서,
    상기 제어부는,
    상기 감마 보정 처리시에 상기 제1 감마 특성과 상기 제2 감마 특성의 어느 것이 사용되었지를 표시하는 정보와,
    상기 선택된 제1 또는 제2 감마 특성이 상기 기준의 감마 특성의 제1 다이나믹 레인지에 비해 소정의 배율만큼 더 넓은 상기 제2 다이나믹 레인지의 감마 특성인 경우의 상기 소정의 배율에 대응하는 정보와,
    상기 영상신호의 피크 휘도값을 표시하는 정보와,
    상기 선택된 제1 또는 제2 감마 특성의 감마 형상 정보와,
    상기 기준의 감마 특성을 표시하는 정보
    중에서 적어도 한개를, 메타데이터로서, 상기 감마 보정 처리가 행해진 상기 영상신호에 부가하도록 구성된 영상 처리장치.

KR1020160137292A 2015-10-30 2016-10-21 영상 처리장치, 영상 처리방법, 프로그램, 및 매체 KR102045202B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2015-214554 2015-10-30
JP2015214554A JP6624889B2 (ja) 2015-10-30 2015-10-30 映像処理装置、映像処理方法、及び映像処理プログラム

Publications (2)

Publication Number Publication Date
KR20170051274A KR20170051274A (ko) 2017-05-11
KR102045202B1 true KR102045202B1 (ko) 2019-11-15

Family

ID=57738137

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160137292A KR102045202B1 (ko) 2015-10-30 2016-10-21 영상 처리장치, 영상 처리방법, 프로그램, 및 매체

Country Status (6)

Country Link
US (1) US10582174B2 (ko)
JP (1) JP6624889B2 (ko)
KR (1) KR102045202B1 (ko)
CN (1) CN106941587B (ko)
DE (1) DE102016120450A1 (ko)
GB (1) GB2545067B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102216391B1 (ko) * 2020-12-23 2021-02-17 박준영 디지털 리마스터링 기술을 이용한 실시간 화상송출 시스템 및 방법

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111312132B (zh) * 2015-11-10 2023-08-22 佳能株式会社 显示控制装置及其控制方法
US20190052803A1 (en) * 2017-08-09 2019-02-14 Canon Kabushiki Kaisha Image processing system, imaging apparatus, image processing apparatus, control method, and storage medium
JP6723969B2 (ja) * 2017-11-06 2020-07-15 株式会社ソニー・インタラクティブエンタテインメント 画像処理装置、表示装置、および画像処理方法
KR102499187B1 (ko) 2018-02-12 2023-02-13 삼성전자주식회사 카메라를 이용하여 획득한 이미지를 압축 처리하는 전자 장치 및 그 동작 방법
JP7157714B2 (ja) * 2018-09-03 2022-10-20 キヤノン株式会社 画像処理装置およびその制御方法
KR20210058488A (ko) * 2019-11-14 2021-05-24 광주과학기술원 머신 러닝에 기반하여 데이터의 압축에 이용되는 표현 매트릭스 및 관측 매트릭스를 선택하기 위한 전자 장치 및 방법
JP2023074897A (ja) * 2021-11-18 2023-05-30 キヤノン株式会社 画像処理装置、画像処理方法、および撮像装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010193098A (ja) * 2009-02-17 2010-09-02 Canon Inc 撮像装置及び画像処理方法
JP2015162712A (ja) * 2014-02-26 2015-09-07 キヤノン株式会社 画像処理装置、画像処理方法、制御プログラム、および記録媒体

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01231571A (ja) * 1988-03-11 1989-09-14 Nec Corp 写真電送装置
JP4402268B2 (ja) * 2000-07-14 2010-01-20 オリンパス株式会社 撮像装置
JP3586238B2 (ja) 2001-12-03 2004-11-10 キヤノン株式会社 撮像装置
JP3652352B2 (ja) * 2001-12-27 2005-05-25 エルジー電子株式会社 フラットパネル表示装置の駆動方法及び装置
JP3974799B2 (ja) * 2002-03-07 2007-09-12 オリンパス株式会社 デジタルカメラ
US7463295B2 (en) * 2002-06-26 2008-12-09 Panasonic Corporation Characteristic correction apparatus for gamma correcting an image based on the image type
EP1385143A3 (en) * 2002-07-16 2005-09-21 ATI Technologies Inc. Method and apparatus for improved transform functions for non gamma corrected graphics systems
JP4385841B2 (ja) * 2004-04-22 2009-12-16 ソニー株式会社 画像処理装置
JP4321496B2 (ja) * 2005-06-16 2009-08-26 ソニー株式会社 画像データ処理装置、画像データ処理方法およびプログラム
CN101322416B (zh) 2006-03-20 2010-10-13 索尼株式会社 图像信号处理装置及图像信号处理方法
JP2008301095A (ja) * 2007-05-30 2008-12-11 Sony Corp 撮像装置及び撮像方法
EP2165522A1 (en) * 2007-06-20 2010-03-24 Thomson Licensing Automatic gamma correction of input source content
BRPI0813525A2 (pt) * 2007-07-11 2014-12-23 Sony Corp Dispositivo de exibição, e, método de acionamento de um dispositivo de exibição.
JP5992997B2 (ja) * 2011-04-28 2016-09-14 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 映像符号化信号を発生する方法及び装置
TWI586150B (zh) * 2012-06-29 2017-06-01 新力股份有限公司 影像處理裝置及非暫態電腦可讀儲存媒體
JP2014219724A (ja) * 2013-05-01 2014-11-20 キヤノン株式会社 画像処理装置、画像処理装置の制御方法、及び、プログラム
JP6368365B2 (ja) * 2013-07-18 2018-08-01 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． Ｈｄｒイメージの符号化のためのコードマッピング関数を作成するための方法及び装置、並びに、かかる符号化イメージの使用のための方法及び装置
RU2654049C2 (ru) * 2013-07-19 2018-05-16 Конинклейке Филипс Н.В. Транспортировка hdr метаданных
JP6415063B2 (ja) 2014-02-21 2018-10-31 キヤノン株式会社 画像処理装置、画像処理方法、制御プログラム、および記録媒体
JP6282156B2 (ja) * 2014-03-31 2018-02-21 キヤノン株式会社 画像装置、画像処理方法、制御プログラム及び記憶媒体
CN107533832B (zh) * 2015-05-12 2020-11-27 索尼公司 图像处理装置、图像处理方法与程序
JP6519329B2 (ja) * 2015-06-09 2019-05-29 ソニー株式会社 受信装置、受信方法、送信装置および送信方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010193098A (ja) * 2009-02-17 2010-09-02 Canon Inc 撮像装置及び画像処理方法
JP2015162712A (ja) * 2014-02-26 2015-09-07 キヤノン株式会社 画像処理装置、画像処理方法、制御プログラム、および記録媒体

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102216391B1 (ko) * 2020-12-23 2021-02-17 박준영 디지털 리마스터링 기술을 이용한 실시간 화상송출 시스템 및 방법

Also Published As

Publication number Publication date
JP6624889B2 (ja) 2019-12-25
GB2545067B (en) 2020-01-08
CN106941587A (zh) 2017-07-11
US10582174B2 (en) 2020-03-03
KR20170051274A (ko) 2017-05-11
CN106941587B (zh) 2020-02-28
GB201617760D0 (en) 2016-12-07
US20170127034A1 (en) 2017-05-04
JP2017085481A (ja) 2017-05-18
GB2545067A (en) 2017-06-07
DE102016120450A1 (de) 2017-05-04

Similar Documents

Publication Publication Date Title
KR102045202B1 (ko) 영상 처리장치, 영상 처리방법, 프로그램, 및 매체
JP5347707B2 (ja) 撮像装置および撮像方法
US7667763B2 (en) Image pickup equipment and method
JP5123137B2 (ja) 撮像装置および撮像方法
KR100942634B1 (ko) 화상보정장치 및 화상보정방법과 컴퓨터 판독 가능한 매체
JP2007019973A (ja) 撮像装置及び撮像方法
JP5873380B2 (ja) 画像処理装置およびその制御方法
KR20080101277A (ko) 히스토그램을 디스플레이 하는 디지털 영상 처리 장치 및그의 동작 방법
JP5494744B2 (ja) 撮像装置、制御方法及びプログラム
JP2010161557A (ja) 撮像装置および撮像方法
JP5277863B2 (ja) 撮像装置および撮像方法
US9282257B2 (en) Image apparatus and imaging method
JP5091781B2 (ja) 撮像装置および撮像方法
JP4760496B2 (ja) 画像データ生成装置、画像データ生成方法
JP2010068331A (ja) 撮像装置および撮像方法
JP2000307921A (ja) 画像処理装置
JP2009055415A (ja) カメラ
JP2017163339A (ja) 映像処理装置、映像処理方法、及びプログラム
KR101298638B1 (ko) 디지털 영상 처리 방법
JP2021090109A (ja) 画像処理装置および画像処理方法
JP4803982B2 (ja) 画像処理装置、画像記録装置、及び画像処理方法
JP5169540B2 (ja) 撮像装置および撮像方法
JP2007221237A (ja) カメラ
JP6604822B2 (ja) 動画処理装置
JP4635899B2 (ja) カメラ

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant