KR20110135720A

KR20110135720A - 촬영 환경에 따른 렌즈 쉐이딩 보상 테이블을 생성하기 위한 장치 및 방법

Info

Publication number: KR20110135720A
Application number: KR1020100055603A
Authority: KR
Inventors: 이종협; 서자원; 이해선; 임성준
Original assignee: 삼성전자주식회사
Priority date: 2010-06-11
Filing date: 2010-06-11
Publication date: 2011-12-19
Also published as: US20110304752A1; EP2395739A2; CN102281389A; EP2395739A3

Abstract

본 발명은 촬영 환경에 따른 렌즈 쉐이딩 보상 테이블을 생성하기 장치 및 방법에 관한 것이다.
이를 위해 본 발명은 입력된 영상이 촬영된 촬영 환경 조건을 판단하고, 렌즈 쉐이딩 보상을 보상 파라미터들로부터 검출된 촬영 환경 조건에 대응하는 보상 파라미터를 검출한 후 미리 설정된 기준 렌즈 쉐이딩 보상 데이터에 검출된 보상 파라미터를 적용함에 따라 검출된 촬영 환경 조건에 따른 렌즈 쉐이딩 보상 데이터를 생성함으로써 다양한 촬영 환경에 최적화된 렌즈 쉐이딩 보상 테이블을 생성하여 렌즈 쉐이딩 보상 처리를 할 수 있게 된다.

Description

촬영 환경에 따른 렌즈 쉐이딩 보상 테이블을 생성하기 위한 장치 및 방법{APPARATUS AND METHOD FOR GENERATING LENS SHADING COMPENSATION TABLE ACCORDING TO PHOTOGRAPHING ENVIRONMENT}

본 발명은 렌즈 쉐이딩 보상 테이블 생성 장치 및 방법에 관한 것으로, 특히 다양한 촬영 환경에 적합한 렌즈 쉐이딩 보상 테이블을 생성하기 위한 장치 및 방법을 제공한다.

일반적인 카메라 모듈은 이미지 센서(image sensor), 대역통과 필터(band pass filter), 렌즈계로 이루어져 있다.

이러한 카메라 모듈은 소형화 추세에 의해 렌즈의 직경이 감소하고, 렌즈의 주광선 입사각(Chief Ray Angle: CRA)이 증가하기 때문에 이미지의 가장자리 부분의 밝기가 중앙부 밝기보다 감소되는 렌즈 쉐이딩 현상이 발생한다. 이와 같은 렌즈 쉐이딩 현상은 고해상도 센서일수록 심화되며, 심도를 크게 하기 위해 입사되는 부분을 작게 하는 경우에도 심화된다.

이러한 렌즈 쉐이딩 현상은 일반적으로 센서의 위치에 따라 증폭도를 달리함으로써 보상하는데, 렌즈 쉐이딩 현상을 감소시키기 위해 보상할 증폭도를 2차원 그리드 룩업 테이블(2D grid look-up table)로 나타낸 테이블을 렌즈 쉐이딩 보상 테이블이라고 한다.

예를 들어, 2592 픽셀 x 1944 픽셀의 해상도를 가지는 5M 픽셀 이미지 센서의 렌즈 쉐이딩 보상을 위한 테이블이 42 x 32 그리드의 2차원 룩업 테이블로 구성된다고 가정하면, 렌즈 쉐이딩 보상 테이블의 그리드 셀(grid cell)은 64 픽셀 x 64 픽셀 크기의 정사각형이 된다. 이러한 렌즈 쉐이딩 보상 테이블을 이용하여 다양한 보간법을 통해 렌즈 쉐이딩 보상을 수행하는데, 상기와 같이 렌즈 쉐이딩 보상 테이블의 그리드 셀이 사이즈가 작은 경우 좀 더 부드럽게 보간하기 위한 보간법을 이용한다.

이와 같이 렌즈 쉐이딩 보상은 이미지의 해상도에 비해 상대적으로 작은 개수의 렌즈 쉐이딩 보상 테이블을 사용하기 때문에 그리드 사이의 위치에 해당하는 픽셀들은 양선형 보간(Bilinear Interpolation), B-Spline 보간법등 다양한 보간법을 수행함으로써 블록이 생기는 현상을 방지한다.

또한, 카메라 모듈의 대역통과 필터는 가시광선 파장 대역을 통과시키며, 나머지 불필요한 파장 대역은 차단하는 역할을 한다. 그런데 대역 통과 필터의 파장별 투과도(transmittance)는 입사각이 증가함에 따라서 장파장 영역의 차단 파장이 20~30nm 이동하게 되는데 이는 입사광원의 스펙트럼에 따라 렌즈 쉐이딩 형태가 변하게 한다.

이와 같이 렌즈 쉐이딩 형태가 변함에 따라 RGB 채널별 렌즈 쉐이딩 보상 테이블도 변해야 하므로 복수개의 렌즈 쉐이딩 보상 테이블을 생성하여 렌즈 쉐이딩 보상을 수행한다.

상기와 같이 종래에는 렌즈 쉐이딩 형태가 변함에 따라 복수개의 렌즈 쉐이딩 보상 테이블을 이용하여 렌즈 쉐이딩 보상을 수행하였다.

그러나, 종래에는 다양한 형태의 렌즈 쉐이딩을 보상하기 위해서 각 형태에 따라 여러 개의 테이블을 생성해야 하는 번거로움이 있다.

또한, 종래에는 생성된 여러 개의 테이블을 저장하기 위한 메모리가 필요하기 때문에 장치를 구성하는데 필요한 가격이 상승하고, 다양한 광원에서 렌즈 쉐이딩 보상 테이블을 얻어야 하기 때문에 양산 효율이 감소하는 단점이 있다.

따라서, 본 발명은 다양한 촬영 조건에 적합한 렌즈 쉐이딩 보상 테이블을 생성하기 위한 장치 및 방법을 제공한다.

상술한 바를 달성하기 위한 본 발명은 촬영 환경에 따른 렌즈 쉐이딩 보상 테이블을 생성하기 위한 장치에 있어서, 입력된 영상이 촬영된 촬영 환경 조건을 판단하는 촬영 환경 조건 판단부와, 렌즈 쉐이딩 보상을 위한 보상 파라미터들로부터 상기 검출된 촬영 환경 조건에 대응하는 보상 파라미터를 검출하는 보상 파라미터 검출부와, 미리 설정된 기준 렌즈 쉐이딩 보상 데이터에 상기 검출된 보상 파라미터를 적용함에 따라 상기 검출된 촬영 환경 조건에 따른 렌즈 쉐이딩 보상 데이터를 생성하는 보상 데이터 생성부를 포함하는 것을 특징으로 한다.

또한, 본 발명은 촬영 환경에 따른 렌즈 쉐이딩 보상 테이블을 생성하기 위한 방법에 있어서, 입력된 영상이 촬영된 촬영 환경 조건을 판단하는 과정과, 렌즈 쉐이딩 보상을 보상 파라미터들로부터 상기 검출된 촬영 환경 조건에 대응하는 보상 파라미터를 검출하는 과정과, 미리 설정된 기준 렌즈 쉐이딩 보상 데이터에 상기 검출된 보상 파라미터를 적용함에 따라 상기 검출된 촬영 환경 조건에 따른 렌즈 쉐이딩 보상 데이터를 생성하는 과정을 포함함을 특징으로 한다.

본 발명은 다양한 촬영 조건을 고려한 렌즈 쉐이딩 보상이 가능함으로써 다양한 환경에서 최적의 이미지를 얻을 수 있다는 이점이 있다.

또한, 본 발명은 촬영 조건에 맞는 하나의 렌즈 쉐이딩 보상 테이블을 이용함으로써 적은 양의 메모리를 사용하여 비용을 줄이고 양산 효율을 향상시키는 이점이 있다.

도 1은 본 발명의 실시 예에 따른 렌즈 쉐이딩 보상 테이블을 생성하기 위한 촬영 장치의 구성도,
도 2는 본 발명의 실시 예에 따른 촬영 장치에서 촬영 환경 조건에 맞는 렌즈 쉐이딩 보상 테이블을 생성하기 위한 과정을 나타내는 흐름도,
도 3은 본 발명의 실시 예에 따른 촬영 환경 조건 판단부에서 촬영 환경 조건을 검출하기 위한 과정을 설명하기 위한 흐름도,
도 4는 본 발명의 실시 예에 따른 보상 파라미터 검출부가 미리 설정한 보상 파라미터 테이블의 예시도,
도 5는 본 발명의 실시 예에 따라 검출된 촬영 환경 조건에 해당하는 색온도값 판별을 위한 자동 백색 조정 정보 커브(Automatic White Balance curve)를 나타내는 도면,
도 6은 본 발명의 실시 예에 따라 보상 테이블 생성부에서 기준 렌즈 쉐이딩 보상 테이블과 산출된 보상 파라미터를 연산하여 촬영 환경 조건에 맞는 렌즈 쉐이딩 보상 테이블을 생성하는 과정을 설명하기 위한 예시도들.

이하 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명 및 첨부 도면에서 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.

도 1은 본 발명의 실시 예에 따라 렌즈 쉐이딩 보상 테이블을 생성하기 위한 촬영 장치의 구성도를 나타내는 도면이다.

본 발명의 실시 예에 따른 촬영 장치는 카메라 모듈(100), 이미지 신호 처리부(110), 메모리부(120), 보상 처리부(130), 디스플레이부(140)로 구성되며, 특히 이미지 신호 처리부(110)는 촬영 환경 조건 판단부(111), 보상 파라미터 판단부(112), 보상 테이블 생성부(113)를 포함한다.

카메라 모듈(100)은 렌즈를 통해서 입력된 광신호를 처리하여 베이어 이미지를 출력한다. 여기서, 베이어 이미지는 카메라 모듈(100) 내에 구성되는 베이어 컬러 필터 어레이를 통과하여 출력되는 영상 데이터를 의미한다.

이미지 신호 처리부(110)는 입력된 베이어 이미지에 대한 촬영 환경 조건을 검출한 후 검출된 촬영 환경 조건에 맞는 렌즈 쉐이딩 보상 테이블을 생성한다. 이때, 촬영 조건은 데이터 또는 정보가 될 수 있다.

구체적으로, 촬영 환경 조건 판단부(111)는 입력된 베이어 이미지에 대한 촬영 환경 조건을 검출하는데, 촬영 환경 조건은 이미지 촬영 시 광원에 대한 상세 정보인 시간 정보, 자동 노출 정보, 자동 백색 조정 정보를 이용하여 검출될 수 있다. 이때, 광원 상세 정보는 시간 정보, 자동 노출 정보, 자동 백색 조정 정보 중 적어도 하나를 이용할 수 있다.

보상 파라미터 판단부(112)는 촬영 환경 조건 판단부(111)를 통해서 검출된 촬영 환경 조건을 이용하여 렌즈 쉐이딩 보상을 위한 보상 파라미터를 검출한다. 특히, 보상 파라미터 판단부(112)는 복수의 촬영 환경 조건에 따라 렌즈 쉐이딩 보상을 위한 RGB(Red, Green, Blue) 채널별 보상 파라미터 값을 포함하는 보상 파라미터 테이블을 미리 설정한다. 그리하여 보상 파라미터 검출부(112)는 검출된 촬영 환경 조건에 대응하는 RGB 채널별 보상 파라미터를 미리 설정된 보상 파라미터 테이블로부터 검출하게 된다.

보상 테이블 생성부(113)는 렌즈 쉐이딩 보상을 위해 미리 설정되어 있는 기준 렌즈 쉐이딩 보상 테이블에 검출된 보상 파라미터들을 적용시켜 촬영 환경에 적합한 렌즈 쉐이딩 보상 테이블을 생성한다.

메모리부(120)는 렌즈 쉐이딩 보상을 위해서 기본적으로 미리 설정되어 있는 기준 렌즈 쉐이딩 보상 테이블을 저장한다.

보상 처리부(130)는 보상 테이블 생성부(113)를 통해서 생성된 렌즈 쉐이딩 보상 테이블을 이용하여 입력된 영상에 대한 보상을 수행한다.

디스플레이부(140)는 보상 처리부(130)에 의해서 보상 처리된 영상을 디스플레이한다.

이와 같이 본 발명은 다양한 촬영 환경을 고려한 렌즈 쉐이딩 보상 테이블을 생성함으로써 복수개의 렌즈 쉐이딩 보상 테이블을 미리 저장할 필요 없이 다양한 촬영 환경에 맞는 렌즈 쉐이딩 보상 테이블을 생성할 수 있게 된다.

도 2는 본 발명의 실시 예에서 촬영 장치가 촬영 환경에 따른 렌즈 쉐이딩 보상 테이블을 생성하기 위한 과정을 나타내는 흐름도이다.

200단계에서 카메라 모듈(100)은 렌즈를 통해서 입력된 광신호를 처리하여 베이어 이미지를 출력한다.

210단계에서 촬영 환경 조건 판단부(111)는 입력된 베이어 이미지의 광원 세부 정보를 이용하여 베이어 이미지에 대한 촬영 환경 조건을 판단한다. 이러한 촬영 환경 조건은 실내 및 실외의 광원 차이, 태양 광원의 지구 입사 각도, 계절적인 피사체의 차이, 계절 및 시간에 따른 스펙트럼 차이, 날씨에 따른 스펙트럼 차이, 형광등, 백열등과 같은 실내 조명에 의해서 다양해진다.

이와 같이 다양한 촬영 환경 조건을 판단하기 위한 과정에 대해서 도 3을 참조하여 살펴보면 다음과 같다.

도 3a와 도 3b는 본 발명의 실시 예에 따라 촬영 환경 조건 판단부에서 베이어 이미지에 대한 촬영 환경 조건을 판단하기 위한 과정을 나타내는 흐름도이다.

300단계에서 촬영 환경 조건 판단부(111)는 베이어 이미지의 자동 노출값을 검출하고, 검출된 자동 노출값이 미리 설정된 자동 노출 임계값보다 작은지 여부를 판단하여 검출된 자동 노출값이 자동 노출 임계값보다 크면 320단계를 진행하고, 그렇지 않으면 A 단계로 진행한다. 이때, 자동 노출이란 필름에 빛이 닿음을 자동으로 조절하는 것을 의미한다.

자동 노출 값을 산출하는 방법에는 여러가지 방법이 있는데, 예를 들어, 카메라는 노출시간, 아날로그 이득, 디지털 이득을 통해서 촬영 환경의 밝기 값을 산출할 수 있다. 이러한 자동 노출 값은 “자동 노출 값 = 노출 시간 x 아날로그 이득 x 디지털 이득”과 같이 산출할 수 있으며, 이러한 경우 촬영 환경이 밝으면 자동 노출 값이 작고, 어두우면 자동 노출 값이 크다.

반대로 자동 노출 값을 “자동 노출 값 = 1/(노출 시간 x 아날로그 이득 x 디지털 이득)”과 같이 산출하는 경우도 있는데, 이러한 경우 촬영 환경이 밝으면 자동 노출 값이 크고, 어두우면 자동 노출 값이 작다.

본 발명의 실시 예에서는 밝은 촬영 환경일수록 자동 노출 값은 임계값보다 큰 값을 가진다고 가정한다. 이때, 촬영 환경 조건 판단부(111)는 자동 노출 값이 임계값보다 작으면 실내로 판단하고, 자동 노출 값이 임계값보다 크면 실외로 판단한다.

320단계에서 촬영 환경 조건 판단부(111)는 촬영 날짜가 4월에서 10월 사이인지 여부를 판단하고, 촬영 날짜가 4월에서 10월 사이이면 350단계로 진행하고, 그렇지 않으면 B 단계로 진행한다. 여기서, 날짜를 구분하여 판단하는 과정은 계절을 구분하여 판단하기 위한 것인데, 계절에 따라 태양의 고도가 달라지기 때문에 태양 광원으로부터 지표상에 도달하는 빛의 분광분포가 달라지는 것을 구분하여 판단하기 위한 것이다. 상기의 320단계에서 4월과 10월 사이를 구분하여 판단하는 것은 늦봄과 초가을, 늦가을과 초봄을 구분하여 판단하기 위함이다.

350단계에서 촬영 환경 조건 판단부(111)는 촬영 시간이 오전 10시에서 오후 4시 사이인지를 판단하여 오전 10시에서 오후 4시 사이이면 360단계를 진행하고, 그렇지 않으면 제3 촬영 환경 조건으로 판단한다. 이때, 시간을 구분하여 판단하는 과정도 시간에 따라 태양의 고도가 달라져서 빛의 분광분포가 달라지는 것을 구분하여 판단하기 위함이다.

360단계에서 촬영 환경 조건 판단부(111)는 자동 백색 조정 정보를 이용하여 광원의 색온도를 판별하는데, 광원의 색온도가 미리 설정된 색온도 임계값보다 큰 값을 가지면 높은 색온도로 판단하여 제1 촬영 환경 조건으로 판단하고, 색온도 임계값보다 작은 값을 가지면 낮은 색온도로 판단하여 제2 촬영 환경 조건으로 판단한다. 이때, 촬영 환경 조건 판단부(111)는 낮은 색온도로 판단될 경우 촬영 날씨가 맑은 것으로 판단하고, 높은 색온도로 판단될 경우 촬영 날씨가 흐린 것으로 판단한다. 예를 들어, 2800K ~ 9000K의 색온도가 존재하는 경우 색온도 임계값이 5000K이면 흐린날의 색온도는 6000K 정도에 해당하여 높은 색온도 값으로 판단되고, 저녁 일몰의 색온도는 4000K 정보에 해당하여 낮은 색온도 값으로 판단될 수 있다.

A 과정에서 310단계로 진행한 촬영 환경 조건 판단부(111)는 광원의 색온도를 판단하여 색온도가 미리 설정된 색온도 임계값보다 큰 값을 가지면 제7 촬영 환경 조건으로 판단하고, 색온도 임계값보다 작은 값을 가지면 제8 촬영 환경 조건으로 판단한다.

B 과정에서 330단계로 진행한 촬영 환경 조건 판단부(111)는 촬영 시간이 오전 11시에서 오후 3시 사이인지를 판단한다.

만약 촬영 시간이 오전 11시에서 오후 3시 사이이면 촬영 환경 조건 판단부(111)는 340단계에서 광원의 색온도를 판단하고, 촬영 시간이 오전 11시에서 오후 3시 사이가 아니면 제6 촬영 환경 조건으로 판단한다.

340단계에서 판단 결과 판단된 색온도가 미리 설정된 색온도 임계값보다 큰 값을 가지면 제4 촬영 환경 조건으로 판단하고, 색온도 임계값보다 작은 값을 가지면 제5 촬영 환경 조건으로 판단한다.

이와 같이 본 발명은 실내 및 실외의 광원 차이에 따라 달라지는 다양한 촬영 환경 조건을 검출하여 검출된 촬영 환경 조건에 맞는 렌즈 쉐이딩 보상 테이블을 생성할 수 있게 된다.

여기서, 자동 백색 조정 정보를 이용하여 색온도를 판단하는 310, 340, 360 단계는 하기에서 설명하는 보상 파라미터 판단부(112)에서 수행될 수도 있다.

다시 도 2로 돌아와서, 220단계에서 보상 파라미터 검출부(112)는 검출된 촬영 환경 조건에 대응하는 보상 파라미터를 미리 설정된 보상 파라미터 테이블로부터 검출한다.

구체적으로 보상 파라미터 검출부(112)는 각 촬영 환경 조건에 따른 자동 백색 조정 정보인 정규화된 R 채널 이득(nrm_r)과 정규화된 B 채널 이득(nrm_b)을 이용하여 RGB 채널의 보상 파라미터가 포함된 보상 파라미터 테이블을 미리 설정한다. 여기서, 정규화된 R 채널 이득과 정규화된 B 채널 이득을 이용하여 광원의 색온도를 판별할 수 있다. 예를 들어, 광원의 색온도 커브에서 장파장 영역이 많은 낮은 색온도에서는 정규화된 R 채널 이득은 큰 값을 가지고, 정규화된 B 채널 이득은 작은 값을 가진다. 반면에, 광원의 색온도 커브에서 단파장 영역이 많은 높은 색온도에서는 정규화된 R 채널 이득은 작은 값을 가지고, 정규화된 B 채널 이득은 큰 값을 가진다.

이때, 미리 설정된 보상 파라미터 테이블은 도 4와 같이 도시될 수 있으며, 도 4의 (a), (b)는 nrm_r 값과 nrm_b 값에 대응하는 각 RGB 채널에 대한 보상 파라미터들을 예시적으로 표로써 나타낸 도면이다.

보상 파라미터 검출부(112)는 미리 설정된 보상 파라미터 테이블로부터 촬영 환경 조건 검출부(111)에서 검출된 촬영 환경 조건에 해당하는 nrm_r 및 nrm_b를 검색한다.

이후 보상 파라미터 검출부(112)는 검색된 nrm_r 및 nrm_b에 대응하는 RGB 채널별로 보상 파라미터를 검출한다.

예를 들어, 베이어 영상 촬영 시 자동 백색 조정 정보의 nrm_r이 0.275라고 가정하면 보상 파라미터 검출부(112)는 각 채널별 nrm_r이 0.275인 값에 대응하는 각 채널별 보상 파라미터를 미리 설정된 보상 파라미터 테이블로부터 검색한다. 이때, 보상 파라미터 테이블에서 nrm_r 값이 존재하지 않을 경우 보상 파라미터 판단부(112)는 선형 보간법을 이용하여 보상 파라미터를 검출한다.

그리하여 보상 파라미터 검출부(112)는 nrm_r이 0.275에 대한 각 채널별로 보상 파라미터를 산출하는데, R 채널 보상 파라미터를 0.975로, G(Green) 채널 보상 파라미터를 0.99로, B 채널 보상 파라미터를 1.025로 산출한다.

또한, 보상 파라미터 검출부(112)는 도 5와 같이 임의의 촬영 환경에서 검출한 정규화된 R 채널 이득과 정규화된 B 채널 이득에 대한 자동 백색 조정 곡선을 산출하고, 산출된 자동 백색 조정 곡선에서 복수의 촬영 환경 조건에 각각 대응하는 검출된 복수의 정규화된 R 채널 이득과 정규화된 B 채널 이득을 확인한다. 이후 보상 파라미터 검출부(112)는 확인된 복수의 정규화된 R 채널 이득과 정규화된 B 채널 이득에 대응하는 RGB별 보상 파라미터들을 검출하여 보상 파라미터 테이블을 미리 생성한다.

예를 들어, 검출된 복수의 정규화된 R 채널 이득과 정규화된 B 채널 이득에 대한 범위가 참조부호 500에 해당한다면 보상 파라미터 검출부(112)는 참조부호 500에 해당하는 정규화된 R 채널 이득과 정규화된 B 채널 이득에 대한 RGB별 보상 파라미터들을 검출하여 보상 파라미터 테이블을 미리 생성한다.

이후 보상 파라미터 검출부(112)는 미리 생성된 보상 파라미터 테이블에서 상기의 검출된 촬영 환경 조건에 해당하는 RGB 별 보상 파라미터를 검출한다.

230단계에서 보상 테이블 생성부(113)는 상기의 보상 파라미터 검출부(112)로부터 검출된 RGB 채널별 보상 파라미터를 미리 저장된 기준 렌즈 쉐이딩 보상 테이블에 적용시켜 촬영 환경에 적합한 렌즈 쉐이딩 보상 테이블을 생성하고, 보상 처리부(130)가 생성된 렌즈 쉐이딩 보상 테이블을 이용하여 보상 처리를 수행한다.

이에 대해서 구체적으로 도 6을 참조하여 살펴보면 다음과 같다.

도 6은 본 발명의 실시 예에 따라 보상 테이블 생성부(113)에서 기준 렌즈 쉐이딩 보상 테이블과 산출된 보상 파라미터를 연산하여 촬영 환경 조건에 맞는 렌즈 쉐이딩 보상 테이블을 생성하는 과정을 설명하기 위한 예시도이다.

도 6의 (a)는 기준 렌즈 쉐이딩 보상 테이블로 이미지의 수평 방향으로 RGB 채널 각각에 대한 쉐이딩 이득이 분포된 그래프를 나타내고, 도 6의 (b)는 베이어 이미지에 대한 RGB 채널별 보상 파라미터가 이미지의 수평 방향으로 분포된 그래프를 나타낸다.

보상 처리부(113)는 영상의 수평방향으로 고른 밝기를 가지도록 기준 렌즈 쉐이딩 보상 테이블의 RGB 채널별 테이블 값과 검출된 각 RGB별 보상 파라미터 값을 곱하여 촬영 환경 조건에 최적화된 렌즈 쉐이딩 보상 테이블을 생성한다. 이때, 보상 처리부(113)는 좀더 자연스러운 렌즈 쉐이딩 보상을 위해서 도 6의 (c)와 같이 RGB 채널 각각에 대한 보상 강도 값을 더 곱해줄 수 있다.

이후 보상 처리부(130)는 보상 테이블 생성부(113)에서 생성된 렌즈 쉐이딩 보상 테이블을 이용하여 입력된 영상에 대한 보상을 수행한다.

240단계에서 디스플레이부(140)는 보상 처리된 결과 영상을 출력한 후 렌즈 쉐이딩 보상 테이블 생성 과정을 완료한다.

이러한 과정을 통해서 렌즈 쉐이딩 보상 테이블은 매 프레임마다 렌즈 쉐이딩 보상을 위해서 생성된다.

이와 같이 본 발명은 사용자가 영상을 촬영한 당시의 촬영 환경 조건을 검출하고, 검출된 촬영 환경 조건에 대응하는 보상 파라미터를 검출하여 기준 렌즈 쉐이딩 보상 테이블 값에 검출된 보상 파라미터를 적용시킴으로써 촬영 환경 조건에 최적 렌즈 쉐이딩 보상 테이블을 생성하여 다양한 환경에서 최적의 이미지를 얻을 수 있게 된다.

Claims

촬영 환경에 따른 렌즈 쉐이딩 보상 테이블을 생성하기 위한 장치에 있어서,
입력된 영상이 촬영된 촬영 환경 조건을 판단하는 촬영 환경 조건 판단부와,
렌즈 쉐이딩 보상을 위한 보상 파라미터들로부터 상기 판단된 촬영 환경 조건에 대응하는 보상 파라미터를 검출하는 보상 파라미터 검출부와,
미리 설정된 기준 렌즈 쉐이딩 보상 데이터에 상기 검출된 보상 파라미터를 적용함에 따라 상기 검출된 촬영 환경 조건에 따른 렌즈 쉐이딩 보상 데이터를 생성하는 보상 데이터 생성부를 포함하는 것을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 장치.
제1항에 있어서, 상기 촬영 환경 조건 판단부는,
상기 영상을 촬영할 시 광원에 대한 시간 정보, 자동 노출 정보, 자동 백색 조정 정보 중 적어도 하나를 이용하여 촬영 환경 조건을 판단하는 것을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 장치.
제1항에 있어서, 상기 촬영 환경 조건 판단부는,
실내 및 실외의 광원의 차이, 태양 광원의 지구 입사 각도, 계절적인 피사체의 차이, 계절 및 시간에 따른 스펙트럼의 차이, 날씨에 따른 스펙트럼의 차이, 실내 조명의 차이를 고려하여 촬영 환경 조건을 판단하는 것을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 장치.
제1항에 있어서, 상기 보상 파라미터 검출부는,
RGB 채널별 보상 파라미터가 포함된 보상 파라미터 테이블을 미리 설정하는 것을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 장치.
제4항에 있어서, 상기 보상 파라미터 검출부는,
상기 미리 설정된 보상 파라미터 테이블에서 상기 검출된 촬영 환경 조건에 대한 적어도 하나의 색 채널 이득을 정규화한 값에 대응하는 RGB 채널별 보상 파라미터를 검출하는 것을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 장치.
제1에 있어서, 상기 보상 파라미터 검출부는,
자동 백색 조정 정보를 이용하여 복수의 촬영 환경 조건에 해당하는 적어도 하나의 정규화된 색 채널 이득을 확인하고, 상기 확인된 정규화된 색 채널 이득에 대응하는 보상 파라미터가 포함된 보상 파라미터 테이블을 생성한 후 상기 생성된 보상 파라미터 테이블에서 상기 검출된 촬영 환경 조건에 대한 적어도 하나의 색 채널 이득에 대응하는 RGB 채널별 보상 파라미터를 검출하는 것을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 장치.
제1항에 있어서, 상기 보상 테이블 생성부는,
렌즈 쉐이딩 보상을 위해 미리 설정되어 있는 기준 렌즈 쉐이딩 보상 테이블의 RGB 채널별 테이블 값에 상기 검출된 RGB 채널별 보상 파라미터를 적용시키는 것을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 장치.
제1항에 있어서,
상기 렌즈 쉐이딩 보상 데이터를 이용하여 상기 입력된 영상을 보상 처리하는 보상 처리부를 더 구비하는 것을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 장치.
촬영 환경에 따른 렌즈 쉐이딩 보상 테이블을 생성하기 위한 방법에 있어서,
입력된 영상이 촬영된 촬영 환경 조건을 판단하는 과정과,
렌즈 쉐이딩 보상을 보상 파라미터들로부터 상기 판단된 촬영 환경 조건에 대응하는 보상 파라미터를 검출하는 과정과,
미리 설정된 기준 렌즈 쉐이딩 보상 데이터에 상기 검출된 보상 파라미터를 적용함에 따라 상기 검출된 촬영 환경 조건에 따른 렌즈 쉐이딩 보상 데이터를 생성하는 과정을 포함함을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 방법.
제9항에 있어서, 상기 촬영 환경 조건을 판단하는 과정은,
상기 영상을 촬영할 시 광원에 대한 시간 정보, 자동 노출 정보, 자동 백색 조정 정보 중 적어도 하나를 이용하여 촬영 조건을 판단하는 과정임을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 방법.
제9항에 있어서, 상기 촬영 환경 조건을 판단하는 과정은,
실내 및 실외의 광원의 차이, 태양 광원의 지구 입사 각도, 계절적인 피사체의 차이, 계절 및 시간에 따른 스펙트럼의 차이, 날씨에 따른 스펙트럼의 차이, 실내 조명의 차이를 고려하여 촬영 환경 조건을 판단하는 과정임을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 방법.
제9항에 있어서, 상기 보상 파라미터를 검출하는 과정은,
RGB 채널별 보상 파라미터가 포함된 보상 파라미터 테이블을 미리 설정하는 과정과,
상기 미리 설정된 보상 파라미터 테이블에서 상기 검출된 촬영 환경 조건에 대한 적어도 하나의 색 채널 이득을 정규화한 값에 대응하는 RGB 채널별 보상 파라미터를 검출하는 과정을 포함함을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 방법.
제9항에 있어서, 상기 보상 파라미터를 검출하는 과정은,
자동 백색 조정 정보를 이용하여 복수의 촬영 환경 조건에 해당하는 적어도 하나의 정규화된 색 채널 이득을 확인하는 과정과,
상기 확인된 정규화된 색 채널 이득에 대응하는 보상 파라미터가 포함된 보상 파라미터 테이블을 생성하는 과정과,
상기 생성된 보상 파라미터 테이블에서 상기 검출된 촬영 환경 조건에 대한 적어도 하나의 색 채널 이득에 대응하는 RGB 채널별 보상 파라미터를 검출하는 것을 포함함을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 방법.
제9항에 있어서, 상기 렌즈 쉐이딩 보상 데이터를 생성하는 과정은,
렌즈 쉐이딩 보상을 위해 미리 설정되어 있는 기준 렌즈 쉐이딩 보상 테이블의 RGB 채널별 테이블 값에 상기 검출된 RGB 채널별 보상 파라미터를 적용시키는 과정임을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 방법.
제9항에 있어서,
상기 렌즈 쉐이딩 보상 데이터를 이용하여 상기 입력된 영상을 보상 처리하는 과정을 더 포함함을 특징으로 하는 렌즈 쉐이딩 보상 테이블 생성 방법.