KR20070116236A - 화상 처리 방법, 표시 화상 처리 방법, 화상 처리 장치,화상 처리 프로그램 및 그 화상 처리 장치를 포함하는집적회로 - Google Patents

Abstract

본 발명에서는, 보다 자연스럽게 화상의 색정보 보정을 행함과 동시에, 간이한 구성을 이용한 화상 처리 방법을 실현하는 것을 목적으로 한다. 본 발명의 화상 처리 방법은, 입력된 화상 데이터의 색정보 보정을 행하는 화상 처리 방법으로서, 정보 산출 단계(S11)와, 특성 산출 단계(S12)와, 색정보 보정 단계(S13)와, 출력 단계(S14)를 구비하는 것이다. 색 정보 출력 단계(S11)는 화상 데이터의 색정보를 산출한다. 특성 산출 단계(S12)는 색정보에 따라서 시각 특성 정보를 산출한다. 색정보 보정 단계(S13)는 특성 산출 단계(S12)에서 산출된 시각 특성 정보를 기초로, 색정보를 보정한다. 출력 단계(S14)는, 색정보 보정 단계(S13)에서 보정된 색정보를 기초로, 색정보 보정 후의 화상 데이터를 출력한다.

Description

화상 처리 방법, 표시 화상 처리 방법, 화상 처리 장치, 화상 처리 프로그램 및 그 화상 처리 장치를 포함하는 집적회로{IMAGE PROCESSING METHOD, DISPLAY IMAGE PROCESSING METHOD, IMAGE PROCESSING DEVICE, IMAGE PROCESSING PROGRAM, AND INTEGRATED CIRCUIT CONTAINING THE IMAGE PROCESSING DEVICE}

본 발명은, 화상 처리 방법, 특히, 입력된 칼라 화상 데이터를 보정하는 화상 처리 방법에 관한 것이다. 또 다른 본 발명은, 표시 화상 처리 방법, 화상 처리 장치, 화상 처리 프로그램, 집적회로에 관한 것이다.

종래부터, 화상 신호의 시인성의 개선 등을 위해서, 화상 신호에 대해서 적절히 색보정(색정보 보정)을 행하는 것이 요구되고 있다.

예를 들면, 낮 동안 옥외나 전차 내에서 휴대 전화 등의 표시 화면을 확인하는 경우, 직사 광선 등에 의해 표시 화면이 하얗게 포화하여, 표시 화면의 표시 내용을 확인하기 어렵다는 과제가 있다.

일반적으로, 이것을 개선하는 것에 대한 요구는 매우 크다. 이 요구에 대응하기 위해, 표시 화면의 액정 디바이스 특성을 개선하는 방안이 많이 검토되고 있다. 이 방안의 경우, 표시 화면의 액정 투과율을 주위의 환경 광 레벨에 따라 변화시키는 방법이 일반적으로 알려져 있다. 이 방법을 이용한 디바이스로서, 가장 휘도가 높은 백색 화소와 가장 휘도가 낮은 흑색 화소의 비(콘트라스트비)를 20：1∼15：1 정도까지 개선하는 것이 알려져 있다. 그러나, 이 디바이스에서는, 휘도에 관한 시인성을 개선하는 것을 목적으로 하고 있고, 낮 동안의 태양광과 같이 강한 환경 광에 의해 생기는, 색차, 색상 또는 채도 등의 색정보의 소실에 대한 개선은 조금도 되어 있지 않다. 또한, 낮 동안에는, 흰색과 검정색의 콘트라스트비는 3：1에서 2：1 정도까지 떨어지는 것이 지적되고 있고, 상기와 같이 20：1∼15：1의 콘트라스트비까지 대응할 수 있는 디바이스를 이용해도, 휘도에 관한 시인성 개선이 불충분한 경우가 많다.

이와 같이, 강한 환경 광 아래에서의 표시 화면의 시인성을 개선하기 위해서는, 휘도의 보정에 더하여, 색정보의 보정이 필요해진다.

또, 표시 기기 성능 향상(해상도 향상, 표현색 수의 증대, 기억색을 중심으로 한 색보정 성능의 향상 등)에 의해 유저의 색정보에 대한 관심이 높아지고 있고, 색정보의 보정을 행하는 경우에는 보다 자연스럽고 또한 인간의 시각 특성에 대응한 색보정이 요구되고 있다.

예를 들면, 인간의 시각 특성 가운데, 색대비 특성을 고려한 화상 처리 방법이 알려져 있다. 이 화상 처리 방법에서는, 화상 내의 색상 히스토그램과 화소 면적에 의해 화상의 전경과 배경을 추출하고, 전경에 대한 배경의 색상을 일률적으로 보정한다(예를 들면, 특허 문헌 1 참조). 이 경우, 인간의 색대비 특성을 고려하여, 전경에 대한 배경의 색의 정도를 억제하는 것을 목적으로 하고 있다.

이 화상 처리 방법을 실현하는 화상 처리 장치에 대해서, 도 30을 이용하여 설명을 더한다. 도 30은, 이 화상 처리 장치에 있어서 색보정 판정을 행하는 색보정 판정부(2005)의 블록도이다. 도 30이 나타내는 바와 같이, 색보정 판정부(2005)는, 화상 메모리(2000)와, 베타 화상 판정부(2001)와, 히스토그램 작성부(2002)와, 전경/배경 판별부(2003)와, 색수 판별부(2004)를 구비하고 있다. 화상 메모리(2000)에는 화상이 유지되고 있다. 베타 화상 판정부(2001)는, 소정의 색상 히스토그램에 있어서 어느 임계값 이상의 색상 영역이 소정 화소수 이상으로 연속하고 있는지의 여부에 의해 베타 화상을 판정한다. 히스토그램 작성부(2002)는, 베타 화상의 색상, 채도, 명도의 히스토그램을 생성한다. 전경/배경 판별부(2003)는 생성된 히스토그램에 기초하여 전경, 배경, 그 외의 판정을 행한다. 색수 판별부(2004)는 풀 컬러 화상인지의 여부의 판정을 행한다.

도 31에, 상기 화상 처리 장치에 의한 화상 처리 방법의 플로우차트를 나타내고, 도 32에, 색상 보정 처리의 플로우차트를 나타낸다.

도 31에 나타내는 화상 처리 방법에 대해 설명한다. 화상 처리 방법에서는, 우선 색수를 판별하고(S100), 색수가 「풀 컬러」를 나타내는 임계값(Th1)을 넘고 있는지를 판정한다(S101). 풀 컬러이면 S102로 진행하고, 풀 컬러가 아니면 본 처리를 종료한다.

S102에서는 베타 화상부 판별을 행하고, S103에서는 베타 화상부의 색상(h), 명도(ｖ), 채도(s)의 각 히스토그램H(h), H(ｖ), H(s)를 작성한다. 또한, 히스토그램의 각 값이 임계값(Th2)을 넘고 있는지를 판정한다(S104). 판정 결과가 긍정 적인 경우, 모든 값에 대한 판정이 종료할 때까지 판정이 행해진다(S105). 또한, 도 31에서는, 색상(h), 히스토그램H(h)만에 대해서 도시하고 있지만, H(ｖ), H(s)에 대해서도 판정이 행해진다. 모든 값에 대해 판정이 행해진 경우(S105), 임계값을 넘고 있는 H(h) 등이 다수 있는지가 판정된다(S106).

이 판정 결과가 긍정적인 경우, 그것들이 전경 또는 배경을 이루고 있는지, 또는, 전경, 배경 중 어느 것도 아닌 다른 영역에 속하는지를 판정한다(S107). 이 판정 결과가 긍정적인 경우, 도 32에 나타내는 색보정 처리(S108)를 실시한다. S101, S104, S106, S107 중 어느 하나의 판정 결과가 부정적이면, 본 처리는 실시되지 않는다. 이러한 처리에 의해, 전경색과 배경색이 차지하는 면적이 어느 소정 크기 이상의 경우에 해당하는 색보정 처리를 행하고, 그 이하의 경우에는 보정을 실시하지 않게 된다.

도 32에 나타내는 색보정 처리에 대해 설명한다.

우선, 배경색의 색상(ha)을 추출하고(S200), ha의 색차축 방향의 보정 레벨(Δha)을 추출한다(S201). 다음에, S202와 같이 전경색의 색상(hf)을 추출하고, hf＋Δha를 전경색의 새로운 색상(hf)으로 한다(S203).

이러한 처리를 행함으로써, 상기 종래의 기술에서는, 색상 대비 현상에 의해 전경부가 배경부의 보정 방향으로 색상을 띄는 영향을 상쇄하고, 충실한 색상의 재현을 행하는 것을 목적으로 하고 있다.

이 종래의 기술에서는, 소정의 화소 사이즈를 가지며, 또한 어느 색상 영역에 포함되는 베타 화상 영역을 정확하게 추출하는 것, 및 그것이 전경인지 배경인지의 판정을 정확하게 행하는 것이 필요로 된다.

(특허 문헌 1):일본국 특허공개 2001-292333호 공보

상기 종래의 화상 처리 방법에서는, 색상, 채도, 명도 히스토그램에 의한 전경과 배경의 추출 처리가 필요하다. 그 추출 처리시에는, 화소 면적에 의한 판정이 포함되어 있다. 이 때문에, 전경과 배경을 추출하기 위해서는, 전경과 배경은 어느 정도의 화소 면적을 가질 필요가 있다. 이 때문에, 종래의 기술은, 자연 화상에서의 추출에는 적합하지 않은 경우가 많다. 또, 추출 처리에 있어서도, 추출 오차를 피하지 못하고, 경계 등에서 보정 불량을 발생하는 일이 있다. 또한, 추출된 배경 내에서 색을 보정할 때의 보정량은, 배경 내에서 일률적으로 설정되어 있다. 이 때문에, 변화하고 있는 배경의 경우, 장소에 따라서는 과잉 보정하는 일이 있고, 그것을 위한 억제 처리를 필요로 한다.

따라서, 종래의 화상 처리 방법에 대해서는, 화상 신호에 대해서 보다 간이하게, 자연스러운 색보정을 행하는 것이 요구되고 있다.

그래서, 본 발명은, 보다 자연스럽게 화상의 색보정을 행함과 함께, 간이한 구성을 이용한 화상 처리 방법을 실현하는 것을 목적으로 한다.

(과제를 해결하기 위한 수단)

발명 1은 입력된 화상 신호의 색정보 보정을 행하는 화상 처리 방법으로서, 정보 산출 단계와, 특성 산출 단계와, 색정보 보정 단계와, 출력 단계를 구비하는 것이다. 정보 산출 단계는, 화상 신호의 색정보를 산출한다. 특성 산출 단계는, 화상 신호에 의해 구성되는 2차원 화상 영역에 포함되는 제1 영역의 색정보과, 제1 영역의 주위에 존재하는 제2 영역의 색정보를 대비하여, 대비량을 산출한다. 색정보 보정 단계는, 특성 산출 단계에서 산출한 대비량을 이용하여, 제1 영역의 색정보를 제2 영역의 색정보와의 대비가 강조되는 방향으로 보정한다. 출력 단계는 보정된 제1 영역을 포함하는 화상 신호를 출력한다.

특성 산출 단계는, 예를 들면, 대상으로 하는 화소 또는 영역의 색정보를, 그 주위의 영역 내의 색정보를 대표하는 주위 색정보와 비교하는 색대비 처리를 포함한다. 제1 영역은 1개 화소이어도, 복수의 화소로 이루어지는 영역이어도 된다. 제1 영역이 1개의 화소인 경우, 제2 영역은 그 화소의 주변에 존재하는 화소로, 예를 들면, 그 화소에 상하 좌우에 인접하는 화소이다. 제1 화소가 복수의 화소 로 이루어지는 영역인 경우, 제2 영역은, 그 영역의 주변에 존재하는 영역으로, 예를 들면, 그 영역의 상하 좌우에 인접하는 복수 화소로 이루어지는 영역이다.

이 발명에서는, 대상 화소 또는 대상 영역의 색정보(색차, 채도, 색상 등)와, 대상 화소 또는 대상 영역의 주위 영역 내(예를 들면 시야 영역 내)의 색정보를 대표하는 대표색을 비교한 색대비 처리를 기초로 대상 화소 또는 대상 영역의 색정보를 보정하는 것 등이 가능해진다. 이 발명에서는, 색대비를 강조하는 방향으로 보정을 행하므로, 인간의 시각 특성에 적절한 색정보 보정을 행할 수 있다. 또한, 물체의 추출 처리를 행할 필요가 없고 추출 오차의 영향을 받지 않는다. 이 때문에, 간이한 구성으로 인간이 시각 특성에 적절한 색정보 보정 처리를 실현할 수 있다.

발명 2는 발명 1로서, 각각 적어도 1개의 화소를 포함하고, 제1 색정보 보정의 대상이 되는 복수의 대상 영역을 선택하는 영역 선택 단계를 더 구비하는 것이다. 정보 산출 단계는, 입력된 화상 신호의 색정보와 밝기 정보를 산출한다. 특성 산출 단계는, 영역 선택 단계에서 선택된 복수의 대상 영역의 색정보와 밝기 정보를, 선택된 대상 영역의 주위에 존재하는 복수의 주위 영역의 색정보와 밝기 정보와의 각각에 대비하고, 대비량을 산출한다. 색정보 보정 단계는, 제1 색정보 보정 단계와, 제2 색정보 보정 단계를 갖고 있다. 제1 색정보 보정 단계는, 특성 산출 단계에서 산출한 대비량을 이용하여, 선택된 대상 영역의 주위에 존재하는 복수의 주위 영역과의 대비가 강조되는 방향으로 보정한다. 제2 색정보 보정 단계는, 선택된 대상 영역 이외의 영역에 대해서, 제1 색정보 보정에 관한 정보를 이용하여, 제2 색정보 보정을 행한다. 출력 단계는, 제1 색정보 보정 단계와 제2 색정보 보정 단계로 보정된 영역을 포함하는 화상 신호를 출력한다.

특성 산출 단계는, 예를 들면, 대상으로 하는 화소의 밝기 정보와 색정보를, 그 주위의 영역 내의 밝기 정보와 색정보를 대표하는 주위 밝기 정보와 주위 색정보의 각각과 비교하는 밝기 대비 처리와 색대비 처리를 포함한다.

이 발명의 일례에서는, 소정의 기준에 의해 복수의 화소를 선택한다. 그리고, 선택된 화소의 색정보(색차, 채도, 색상 등)와 그 주위에 설정된 주위 영역 내(예를 들면, 시야 영역 내)의 색정보를 대표하는 대표색을 비교하여 얻어진 색대비 정보를 기초로, 선택된 화소의 색정보를 보정한다. 다음에, 선택된 화소의 주위 화소에 대해서, 예를 들면, 기준 화소와의 색공간 내에서의 거리에 따라 기준 화소의 색정보를 그 주위의 화소에 전파시키는 처리(컬러리제이션(colorization) 처리) 등을 행하고, 화상 전체의 색정보의 보정을 행한다.

또 이 발명의 다른 일례에서는, 대상 화소의 밝기 정보와 대상 화소의 주위에 설정된 주위 영역 내(예를 들면, 시야 영역 내)의 밝기 정보를 대표하는 대표 밝기와의 비교에 의해 얻어진 밝기 대비 정보를 구한다. 또, 대상 화소의 색정보(색차, 채도, 색상 등)와 대상 화소의 주위에 설정된 주위 영역 내(예를 들면, 시야 영역 내)의 색정보를 대표하는 대표색의 비교에 의해 얻어진 색대비 정보를 구한다. 또한, 이 2개의 대비 정보를 기초로, 색정보 보정을 실시하는 화소를 결정한다. 또한, 결정된 화소에 대해서, 색대비 정보를 기초로 색정보 보정을 행하고, 보정된 복수의 화소를 기준 화소로서 그 주위의 화소에 색정보의 전파를 실시하는 처리 등을 행하고, 화상 전체의 색정보의 보정을 행한다.

또, 발명 2는 화소를 단위로 한 처리여도 되고, 화상을 복수로 세분화한 블록을 단위로 한 처리여도 된다. 블록을 단위로 하는 경우, 발명 2는, 화상을 세분화하는 화상 세분화 단계를 더 구비하고 있어도 된다. 이 경우, 화소 마다의 처리에 비교해서, 처리량을 삭감하는 것이 가능해진다.

이상의 발명 2에서는, 색대비에 의해 인간의 관심이 높다고 생각되는 영역의 색정보 보정을 할 수 있다. 또한, 예를 들면, 컬러리제이션 처리에 의해 화상 전체의 밸런스를 유지한 채로, 화상 전체의 색정보 보정을 행할 수 있다. 이 때문에, 경계에 있어서의 색정보 보정 오차를 발생하는 일 없이, 고정밀의 색정보 보정을 실현할 수 있다.

발명 3은 발명 2로서, 영역 선택 단계는, 제1 색정보 보정의 대상으로 하는 영역의 영역 위치으로부터 소정의 간격폭에 위치하는 영역을 선택하는 단계를 포함하는 것을 특징으로 한다.

발명 4는 발명 2로서, 영역 선택 단계는, 각 영역의 밝기 정보와 색정보에 관한 시각 특성 정보를 사용하여, 또는 밝기 정보만에 관한 시각 특성 정보를 사용하여, 제1 색정보 보정의 대상이 되는 복수의 대상 영역을 선택하는 단계를 포함하는 것을 특징으로 한다.

발명 5는 발명 2로서, 제2 색정보 보정 단계는, 제1 색정보 보정 단계에서 보정된 복수의 대상 영역의 색정보를 기초로, 복수의 대상 영역의 주변 영역에 색정보를 차례차례 전파시켜 감으로써 주변 영역의 색정보의 보정을 행하는 것을 특징으로 한다.

발명 6은 처리 모드 접수 단계와, 화상 처리 실행 단계와, 표시 단계를 구비하는 것이다. 처리 모드 접수 단계는, 입력 수단에 의한 처리 모드의 선택을 접수한다. 화상 처리 실행 단계는, 처리 모드 접수 단계에서 얻어진 처리 모드에 따라서, 발명 1 또는 발명 2의 화상 처리 방법을 실행한다. 표시 단계는, 화상 처리 실행 단계에 의해 출력되는 색정보 보정 후의 화상 신호를 표시 수단에 표시한다.

이 발명에 의해, 예를 들면, 색정보 보정의 효과를 유저가 표시 디바이스 등에서 확인하면서, 색정보 보정의 강도 등의 처리 모드를 선택하는 것이 가능해진다. 이 때문에, 개개의 유저에 대응하여 시인성을 향상시키는 색정보 보정을 행하는 것이 가능해진다.

발명 7은 환경 광 검출 단계와, 처리 모드 결정 단계와, 화상 처리 실행 단계와, 표시 단계를 구비하는 것이다. 환경 광 검출 단계는, 색정보 보정 후의 화상 신호를 표시하는 표시 수단에 조사되는 환경 광을 검출한다. 처리 모드 결정 단계는, 환경 광 검출 단계가 검출하는 환경 광에 따라서, 처리 모드를 결정한다. 화상 처리 실행 단계는, 처리 모드 결정 단계에서 결정된 처리 모드에 따라서, 발명 1 또는 발명 2의 화상 처리 방법을 실행한다. 표시 단계는, 화상 처리 실행 단계에 의해 출력되는 색정보 보정 후의 화상 신호를 표시 수단에 표시한다.

이 발명에 의해, 예를 들면, 센서 등의 환경 광 검출 수단으로 검출된 환경 광 레벨(사용 환경에서의 콘트라스트비이어도 된다)을 기초로, 색정보 보정의 강도를 제어하는 것이 가능해진다. 즉, 기기가 사용되고 있는 환경하에서의 환경 광의 영향을 고려하여 자동적으로 색정보 보정의 강도를 바꾸는 것이 가능해진다. 또한, 발명 6의 처리 모드 접수 단계를 구비하면, 사용 환경에 따라 자동적으로 색정보 보정의 강도를 바꾸는 것과 동시에, 표시 디바이스 등에서 색정보 보정의 효과를 확인하고, 유저가 다시 보정 강도를 선택하는 것 등이 가능해진다.

발명 8은 발명 6으로서, 처리 모드 접수 단계는, 색정보를 보정할 때의 강도를, 미리 설정된 복수의 강도로부터 선택하는 것을 특징으로 한다.

발명 9는 발명 7로서, 처리 모드 결정 단계는, 환경 광 검출 단계에서 얻어진 환경 광의 강도가 소정의 임계값를 넘는 경우에, 색정보를 보정하는 처리를 유효하게 하도록 동작하는 것을 특징으로 한다.

발명 10은 발명 7로서, 처리 모드 결정 단계는, 환경 광 검출 단계에서 얻어진 환경 광의 강도에 따라서, 소정의 함수에 의해 색정보를 보정하는 강도를 변화시키도록 동작하는 것을 특징으로 한다.

발명 11은 발명 7로서, 처리 모드 결정 단계는, 환경 광 검출 단계에서 얻어진 환경 광의 시간적 변동에 따라서, 소정의 함수에 의해 색정보를 보정하는 강도를 시간적으로 변화시키도록 동작하는 것을 특징으로 한다.

발명 12는 발명 7로서, 처리 모드 결정 단계는, 표시 수단의 표시 영역에 포함되는 복수의 영역에 있어서, 환경 광 검출 단계에서 얻어진 환경 광의 강도의 변동에 따라서, 색정보를 보정하는 강도를 표시 영역에 포함되는 복수의 영역마다 제어하는 것을 특징으로 한다.

발명 13은 발명 1로서, 색정보 보정은, 색대비 현상을 발생하는 소정의 패턴의 크기의 변동에 따라서, 색정보 보정의 강도가 증감하도록 동작하는 것을 특징으로 한다.

이 발명에 의해, 예를 들면, 배경과 색채가 다른 도너츠 형상 패턴(A)(동심원 2개로 구성되는 패턴)과, 배경과 도너츠 형상 패턴의 색채는 각각 같고, 패턴(A)보다 크기가 크고, 또한, 패턴(A)의 형상과 서로 비슷한 형상인 패턴(B)으로, 색정보 보정의 강도를 변화시킬 수 있다. 이로 인해, 작은 영역에서 색채 등의 변화가 큰 영역에 대해서는, 시각 특성에 적절한 강도가 강한 색정보 보정을 행할 수 있고, 큰 영역에서 색채 등의 변화가 적은 영역에 대해서는 강도가 약한 색정보 보정을 행할 수 있다.

발명 14, 15는 화상 처리 장치로서, 발명 1, 2에 기재의 화상 처리 방법과 같은 효과를 나타낸다.

발명 16, 17은 화상 처리 프로그램으로서, 발명 1, 2에 기재의 화상 처리 방법과 같은 효과를 나타낸다.

발명 18, 19는 집적회로로서, 발명 1, 2에 기재의 화상 처리 방법과 같은 효과를 나타낸다.

(발명의 효과)

본 발명의 화상 처리 방법, 표시 화상 처리 방법, 화상 처리 장치, 화상 처리 프로그램 및 그 화상 처리 장치를 포함하는 집적회로에 의해, 보다 자연스럽게 화상의 색정보 보정을 행함과 함께, 간이한 구성을 이용한 화상 처리를 실현하는 것이 가능해진다.

도 1은 본 발명에 있어서의 제1 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 2는 본 발명에 있어서의 색특성 산출 수단의 구성을 나타내는 블록도이다.

도 3은 본 발명에 있어서의 제1 발명인 화상 처리 방법의 처리 플로우차트도이다.

도 4는 본 발명에 있어서의 색대비 현상의 개요를 나타내는 설명도이다.

도 5는 색정보 보정 수단에 있어서의 채도 보정의 개요를 나타내는 설명도이다.

도 6은 색정보 보정 수단에 있어서의 색상 보정의 개요를 나타내는 설명도이 다.

도 7은 본 발명의 제2 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 8은 본 발명에 있어서의 색정보 전파 보정 수단의 구성을 나타내는 블록도이다.

도 9는 본 발명에 있어서의 제2 발명인 화상 처리 방법의 처리 플로우차트도이다.

도 10은 본 발명에 있어서의 색정보 전파 보정 수단에 있어서의 처리 개요의 설명도이다.

도 11은 본 발명에 있어서의 색정보 전파 보정 수단에 있어서의 제2 처리 개요의 설명도이다.

도 12는 본 발명에 있어서의 제3 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 13은 본 발명에 있어서의 제3 발명인 화상 처리 방법의 처리 플로우차트도이다.

도 14는 본 발명에 있어서의 제4 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 15는 본 발명에 있어서의 제4 발명인 화상 처리 장치에서 대상으로 하는 단위를 나타내는 도면이다.

도 16은 본 발명에 있어서의 제5 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 17은 본 발명에 있어서의 제6 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 18은 본 발명에 있어서의 제6 발명인 화상 처리 방법의 처리 플로우차트도이다.

도 19는 본 발명에 있어서의 제6 발명인 화상 처리 장치의 컬러 밸런스 추정을 나타내는 설명도이다.

도 20은 본 발명에 있어서의 제7 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 21은 본 발명에 있어서의 제8 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 22는 본 발명에 있어서의 제9 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 23은 본 발명에 있어서의 제9 발명인 화상 처리 장치에서의 유저 선택의 개요를 나타내는 설명도이다.

도 24는 본 발명에 있어서의 제10 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 25는 본 발명에 있어서의 제11 발명인 화상 처리 장치의 구성을 나타내는 블록도이다.

도 26은 본 발명에 있어서의 제10, 11의 발명인 화상 처리 장치에서의 처리 제어의 개념을 나타내는 설명도이다.

도 27은 본 발명에 있어서의 제10, 11의 발명인 화상 처리 장치에서의 처리 제어의 개념을 나타내는 설명도이다.

도 28은 본 발명에 있어서의 제1에서 제11 발명인 화상 처리 장치의 효과에 대해서 설명하는 설명도이다.

도 29는 본 발명에 있어서의 제1에서 제11 발명인 화상 처리 장치의 특징인 색대비 효과의 변동에 관한 설명도이다.

도 30은 종래의 화상 처리 장치에 있어서의 색보정 판별부의 구성을 나타내는 블록도이다.

도 31은 종래의 화상 처리 방법의 처리 플로우차트도이다.

도 32는 종래의 화상 처리 방법에 있어서의 색보정 처리의 플로우차트도이다.

〈도면의 주요 부분에 대한 부호의 설명〉

1 : 색정보 산출 수단 2 : 색특성 산출 수단

3 : 색정보 보정 수단 4 : 출력 수단

5 : 보정 제어 변수 100 : 화상 처리 장치

6 : 주변 대표색 추출 수단 7 : 색대비 정보 산출 수단

10 : 정보 산출 수단 11 : 화소 선택 수단

12 : 특성 산출 수단 13 : 선택 화소 색정보 보정 수단

14 : 색정보 전파 보정 수단 15 : 제어 변수

200 : 화상 처리 장치 16 : 기준 설정 수단

17 : 주위 색정보 산출 수단 18 : 전파 판정 수단

40 : 제2 화소 선택 수단 400 : 화상 처리 장치

50 : 화상 분할 수단 51 : 블록 정보 산출 수단

52 : 처리 블록 선택 수단 53 : 블록 특성 산출 수단

54 : 선택 블록 색정보 보정 수단

55 : 색정보 블록 전파 보정 수단

56 : 화소 변환 수단 500 : 화상 처리 장치

60 : 블록 선택 수단 600 : 화상 처리 장치

70 : 추정 화소 선택 수단 71 : 밸런스량 산출 수단

72 : 밸런스 보정 수단 73 : 추정 제어 변수

700 : 화상 처리 장치 80 : 수정색 특성 산출 수단

800 : 화상 처리 장치 90 : 제2 밸런스량 산출 수단

91 : 제2 밸런스 보정 수단 900 : 화상 처리 장치

1000 : 화상 처리 수단 1001 : 유저 모드 선택 수단

1002 : 표시 디바이스 1100 : 처리 제어 수단

1101 : 환경 광 검출 수단 2000 : 화상 메모리

2001 : 베타 화상 판별부 2002 : 히스토그램 작성부

2003 : 전경/배경 판별부 2004 : 색수 판별부

이하, 본 발명의 최선의 형태로서의 제1∼제11 실시 형태에 대해 설명한다.

제1 실시 형태에서는, 화소에 있어서의 색대비 정보를 이용하여 색보정을 실시한다.

제2 실시 형태에서는, 소정의 방법으로 선택된 화소에 있어서의 색대비 정보를 이용하여 색보정을 행한다. 또한, 그 보정 후의 색정보를 갖는 선택된 화소를 기준 화소로 하여 주위 화소에 대한 전파 처리를 행하고, 주위 화소의 색정보 보정을 행한다. 이로 인해, 화상 전체의 색보정을 실시한다.

제3 실시 형태에서는, 각 화소에 있어서의 색대비 정보를 이용하여 우선 보정하는 화소를 선택하고, 그 선택된 화소의 색보정을 행한다. 또한, 그 보정 후의 색정보를 갖는 선택된 화소를 기준 화소로 하여 주위 화소에 대한 전파 처리를 행하고, 주위 화소의 색정보 보정을 행한다. 이로 인해, 화상 전체의 색보정을 실시한다.

제4 실시 형태는, 제2 실시 형태의 변형예이며, 화소를 처리 단위로 하여 색대비 처리와 전파 보정 처리를 실시하는 것이 아니라, 세분화된 블록을 처리 단위로 하여 색보정을 행한다.

제5 실시 형태는, 제3 실시 형태의 변형예이며, 화소를 처리 단위로 하여 색대비 처리와 전파 보정 처리를 실시하는 것이 아니라, 세분화된 블록을 처리 단위로 하여 색보정을 행한다.

제6 실시 형태에서는, 대상 화상의 밝기 대비 정보와 색대비 정보에 의해 인간이 밝게 느끼는 영역을 추정한다. 또한, 그 영역에 있어서의 색정보의 그레이 축(무채도축)으로부터의 편차량을 화상 전체의 컬러 밸런스 보정에 이용한다.

제7 실시 형태에서는, 제6 실시 형태의 컬러 밸런스 보정 후에, 제1 실시 형태의 색보정 처리를 행한다.

제8 실시 형태에서는, 제6 실시 형태의 컬러 밸런스 보정 후에, 제1 실시 형태의 색보정 처리를 행한다. 특히, 제8 실시 형태는, 컬러 밸런스 보정이 색보정의 효과를 고려하여 추정되는 점에 특징을 갖고 있다.

제9 실시 형태에서는, 제1 실시 형태로부터 제8 실시 형태의 화상 처리를 채용하고, 그 보정 레벨 등의 처리 모드를 유저가 선택한다.

제10 실시 형태에서는, 제1 실시 형태로부터 제8 실시 형태의 화상 처리를 채용하고, 그 보정 레벨 등의 처리 모드를 환경 광 검출에 의해 자동적으로 제어한다.

제11 실시 형태에서는, 제1 실시 형태로부터 제8 실시 형태의 화상 처리를 채용하고, 그 보정 레벨 등의 처리 모드를 환경 광 검출에 의해 자동적으로 제어 함과 동시에, 그 결과를 기초로 유저가 또한 처리 모드를 선택한다.

(제1 실시 형태)

도 1에서 도 6을 이용하여, 본 발명의 제1 실시 형태로서, 화소에 있어서의 색대비 정보를 기초로, 색정보의 보정을 행하는 화상 처리 방법 및 화상 처리 장치(100)에 대해 설명한다.

도 1에, 본 발명의 제1 실시 형태인 화상 처리 장치(100)의 구성을 나타낸다. 또, 도 3에, 본 발명의 제1 실시 형태인 화상 처리 방법의 처리 플로우차트를 나타낸다.

이 발명은, 화상 데이터를 처리함으로써, 화상 내의 색정보를 보정하는 장치이며, 예를 들면, 디지털 스틸 카메라나 디지털 비디오 카메라와 같은 촬영기기, 디지털 화상을 편집하는 화상 편집 장치, 모바일 환경하에서 사용하는 휴대 전화, 카 모바일 기기, PDA 등, 또는 여러 가지 환경 하에서 사용되는 대형 영상 표시 기기 등에 탑재된다.

화상 처리 장치(100)에 화상 데이터(ｖIi)가 입력되면, 색정보 산출 수단(1)은, 화상 데이터(ｖIi)를 구성하는 각 화소의 데이터를 소정의 색정보(ｖCi)로 변환한다(S11). 여기에서는, 화상 데이터(ｖIi)를, 색정보로서 취급하기 쉬운 색상(H), 채도(S), 명도(V)로 구성되는 HSV 공간 데이터나, 휘도(Y), 색차(Cb, Cr)로 구성되는 YCbCr 공간 데이터, 명도(L), 색(a*, b*)으로 구성되는 La*b* 공간 데이터 등의 소정의 색정보(ｖCi)로 변환하는 것으로 하지만, 화상 데이터(ｖIi)를 그대로 취급하는 것도 가능하다.

색특성 산출 수단(2)에서는, 색정보 산출 수단(1)에서 얻어진 색정보(ｖCi) 중에서, 보정 대상인 색정보에 관한 색특성 정보 데이터가 산출된다(S12). 예를 들면, 색정보(ｖCi)가 HSV계로 변환되어 있는 경우에, 채도(S)의 보정을 행하는 경우는, 채도(S)에 관한 색특성 정보 데이터가 산출된다. 또한 여기에서는, 화소(Pi)에 있어서의 색정보(ｖCi) 중에서 보정 대상인 색정보를 Ci로 한다. 색특성 산출 수단(2)은, 도 2에 나타내는 바와 같이, 각 화소에 대해서, 주변 대표색 추출 수단(6)과 색대비 정보 산출 수단(7)을 거쳐 색특성 정보 데이터(Rn_i)를 생성한 다. 우선, 주변 대표색 추출 수단(6)은, 대상 화소(Pi)의 주변 영역 내에 있어서의 대표 색정보(ACi)를 산출하고(S15), 색대비 정보 산출 수단(7)은, 대상 화소(Pi)의 색정보(Ci)와 대표 색정보(ACi)로부터 색특성 정보 데이터(Rn_i)를 생성한다(S16).

또한, 색정보 보정 수단(3)은, 대상 화소(Pi)의 색정보(Ci)를 보정한다(S13). 출력 수단(4)은 보정 후의 색정보와, 보정 대상이 아닌 색정보를 소정의 방법으로 출력한다(S14). 이상의 처리는, 화상 데이터(ｖIi)의 모든 화소에 대해서 행해진다.

이하, 색특성 산출 수단(2), 색정보 보정 수단(3), 출력 수단(4)의 처리에 대해 자세하게 설명한다.

이 색특성 정보 데이터(Rn_i)로서는, 많은 것이 생각되지만, 여기에서는 보다 인간의 겉보기에 가까운(시각 특성에 적절한) 보정을 실현하기 위해서, 인간의 시각 특성에 대응한 정보를 색특성 정보 데이터(Rn_i)로서 이용한다. 인간의 시각 특성에는 많은 것이 있지만, 여기에서는, 색특성에 관한 색대비 특성을 이용한다. 또한, 이외에도 밝기 대비나, 크기·화소 특성 등도 이용할 수 있다.

도 4는 색대비 특성의 개념을 모식적으로 나타낸 것이다. 도 4에서는, 회색 배경 안에 중심부분이 뚫린 적색과 청색의 2개의 원이 나타나 있다. 또한, 2개의 원의 중심 영역은, 회색 배경과 같은 것이다. 이들 원을 별표시로 나타내는 시선 위치에 주목하여 관찰하면, 적색 원의 중심은 약간 푸르게 느껴지는 경향이 있고, 청색 원의 중심은 약간 붉게 느껴지는 경향이 있는 것이 시각 심리로부터 밝혀지고 있다. 이 현상은, 인간의 색대비 특성에 의해 생기는 현상이다. 색대비 특성이란, 대상 물체의 주위가 다른 채도나 색상의 영역으로 둘러싸이는 경우에, 대상 물체의 채도나 색상의 겉보기(시각)이 영향을 받는 것이다. 구체적으로는, 이하의 (a)와 (b)의 영향이 알려져 있다.

(a) 다른 색상의 영역이 둘러싸는 경우, 대상 물체에 주위의 색상의 보색이 더해져 느껴진다.

(b) 대상 물체보다 주위를 둘러싸는 영역의 채도가 높은 경우, 대상 물체의 채도는 낮게 느껴진다. 반대로, 대상 물체보다 주위를 둘러싸는 영역의 채도가 낮은 경우, 대상 물체의 채도는 높게 느껴진다.

본 발명에서는, 이 색대비 특성을 이용하여, 화소의 색정보의 보정을 행함으로써, 보다 인간의 시각에 가까운 인상을 주는 색보정을 행한다.

예를 들면, 색정보(ｖCi) 중 화소(Pi)의 채도(Si)를 보정 대상인 색정보(Ci)로 한 경우, 도 5에 모식적으로 나타내는 바와 같이 채도 보정을 행함으로써 인간의 시각에 가까운 인상을 주는 색보정을 행할 수 있다. 도 5에 나타내는 채도 보정이란, 대상 화소(Pi)의 채도(Si)가 그 주위의 대표 채도(SiR)보다 낮은 경우(예를 들면, 대상 화소(Pi)가 왼쪽 원의 중심부분에 있는 경우)에는, 대상 화소(Pi)의 채도(Si)를 감소시키고, 대상 화소(Pi)의 채도(Si)가 그 주위의 대표 채도(SiR)보다 높은 경우(예를 들면, 대상 화소(Pi)가 오른쪽 원의 중심부분에 있는 경우)에는, 대상 화소(Pi)의 채도(Si)를 증가시키는 보정이다. 또한, 대상 화소(Pi)의 채도(Si)는, 대상 화소의 채도(Si)와 주위의 대표 채도(SiR)와의 비에 따라 감소 또 는 증가된다.

대상 화소(Pi)의 주위의 대표 채도(SiR)로서는, 시야 영역에 상당하는 소정의 넓이를 갖는 화소 영역(Ωi) 내의 화소의 채도의 가중 평균이 계산된다. 또한, 화소 영역(Ωi)은, 예를 들면, 대상 화소(Pi)를 중심으로 하는 원영역이며, 그 반경은, 예를 들면, 입력되는 화상 데이터(ｖIi)의 사이즈(수평 방향 사이즈 또는 수직 방향 사이즈)의 1/9∼1/4이다. 또한, 주위의 대표 채도(SiR)로서는, 이외에도, 시야 영역 내의 채도 히스토그램에서 가장 도수가 많은 채도치, 시야 영역 내의 통계적 분포를 기초로 한 클러스터링 처리로 얻어진 대표 채도, 시야 영역 내의 평균 채도치 등을 이용하는 것도 가능하다. 이 경우, 각 화소(Pi)에 있어서의 채도 이외의 색정보는 보존하고, 변경하지 않는다. 이로 인해, 화상의 밸런스를 유지할 수 있다.

또 예를 들면, 색정보(ｖCi) 중 화소(Pi)의 색상(Hi)을 보정 대상인 색정보(Ci)로 한 경우, 도 6에 모식적으로 나타내는 바와 같이 색상 보정을 행함으로써 인간의 시각에 가까운 인상을 주는 색보정을 행할 수 있다. 도 6에 나타내는 색상 보정이란, 대상 화소(Pi)의 색상(Hi)보다 주위의 대표 색상(HiR)이 붉은 경우(예를 들면, 대상 화소(Pi)가 왼쪽 원의 중심부분에 있는 경우)에는, 대상 화소(Pi)의 색상(Hi)을 청색 방향으로 보정한다. 또한, 청색 방향으로의 보정에서는, 대상 화소(Pi)의 색상(Hi)과 대표 색상(HiR)과의 차분에 따라 보정량이 결정된다. 이 때, 색상 이외의 색정보는 보존한다. 또 색상에 관해서도, 급격한 변화를 일으키는 것의 폐해를 억제하기 위해서, 색상의 이동량(보정량)을 억제함으로써 화상 밸런스를 가능한 한 유지할 수 있다. 한편, 대상 화소(Pi)의 색상(Hi)보다 주위의 대표 색상(HiR)이 파란 경우(예를 들면, 대상 화소(Pi)가 오른쪽 원의 중심부분에 있는 경우)에는, 대상 화소(Pi)의 색상(Hi)을 적색 방향으로 보정한다.

대상 화소(Pi)의 주위의 대표 색상(HiR)으로서는, 시야 영역에 상당하는 소정의 넓이를 갖는 화소 영역(Ωi) 내의 화소의 색상의 가중 평균이 계산된다. 화소 영역(Ωi)은, 상기한 것과 같이 결정한다. 또한, 주위의 대표 색상(HiR)으로서는, 이외에도, 시야 영역 내의 색상 히스토그램에서 가장 도수가 많은 색상치, 시야 영역 내의 통계적 분포를 기초로 한 클러스터링 처리로 얻어진 대표 색상, 시야 영역 내의 평균 색상치 등을 이용하는 것도 가능하다. 또한, 여기에서는 색상(Hi)을 소정의 방향으로 이동시킨다고 설명했지만, YCbCr 색공간에 있어서의 색차(Cb와 Cr)를 이동시킴으로써도 색상을 이동시키는 것은 가능하다. 이 경우, 정성적으로는, 색차(Cb)를 크게 함으로써 청색 성분이 발생하고, Cr을 이동시킴으로써 적색 성분이 발생한다.

이 생각을 기초로, 색특성 산출 수단(2)은 각 화소의 색특성 정보 데이터(Rn_i)를 산출하고, 색정보 보정 수단(3)에서 각 화소의 대상 색정보(Ci)를 보정한다. 그 일례는, (수학식 1)과 (수학식 2)로 표현할 수 있다.

색정보 보정 수단(3)은, (수학식 1)에 따라서 대상 화소(Pi)의 대상 색정보(Ci)의 보정을 실행한다. (수학식 1)에 있어서, Ci_new는, 색대비에 의해 보정된 화소(Pi)의 대상 색정보, ACi는, 화소(Pi)의 주위의 대표 색정보(예를 들면, 대표 채도(SiR)나 대표 색상(HiR) 등)이며, 주변 대표색 추출 수단(6)에 의해 산출되는 정보,

는, 양정수라고 한다. 또 (수학식 2)에 있어서, TH0, Gmax는, 소정의 양정수이며, μ는, 0＜μ＜1을 만족하는 소정의 양정수이다.

이 (수학식 1)에서, Ci/ACi는, 색대비 정보 산출 수단(7)에서 산출되는 색특성 정보 데이터(Rn_i)이다.

또한, (수학식 1)과 (수학식 2)를 이용한 보정 이외에도, (수학식 3)과 (수학식 4)를 이용한 보정을 행해도 된다.

여기에서는 색특성 정보 데이터(Rn_i)를 (Ci-ACi)로 정의하여, 그 색대비를 소정의 함수로 변환하여 얻어진 값을 강조함으로써 대상 화소(Pi)의 색정보(Ci)의 보정을 실행한다.

또한, (수학식 4)에서, TH1, TH2, Fmax, Fmin,

는 각각, TH1＞TH2, TH1＞0, TH2＞0, Fmax＞0.0, Fmin＜0.0, 0＜

＜1.0을 만족하는 정수라고 한다. 이 식은, 보정량의 상하한을 설정함과 동시에, 색특성 정보 데이터(Rn_i)를 선형적으로 억제하는 것이다. 이 식에 관해서도, 이것에 한정하지 않고, 다른 선형 함수나 비선형 함수를 이용하는 것도 가능하다.

또한, (수학식 4)에 있어서의 F1(x)와 F2(x)는 x의 정의 영역이 연속으로 되도록 결정되는 비선형 함수를 나타내고, 예를 들면, F1(x)나 F2(x)가 2차 함수의 경우, 영역(TH2≤x≤TH1)의 함수(F1)가 F1(x)=((

·TH2-Fmax)/(TH2-TH1)²)·(x-TH1)²＋Fmax, (-TH2≤x≤-TH1)의 함수(F2)가 F2(x)=(-(

·TH2＋Fmin)/(-TH2＋TH1)²)·(x＋TH1)²＋Fmin이 된다.

보정 제어 변수(5)(도 1 참조)는, (수학식 1)로부터 (수학식 4)에서 사용하는 양정수 등을 유지하는 테이블 데이터이다. 또한, 이 테이블 데이터를 제어함으로써 보정 강도를 바꾸는 것도 가능하다.

마지막으로, 출력 수단(4)은, 색정보 보정 수단(3)에서 얻어진 각 화소(Pi)의 대상 색정보(Ci)의 보정치(Ci_new)와, 그 이외의 색정보(ｖCi)(보정 대상이 되지 않는 색정보)를 그대로 출력한다. 또한, 출력 수단(4)은, 색정보 보정 수단(3) 에서 얻어진 각 화소(Pi)의 대상 색정보(Ci)의 보정치(Ci_new)와 그 이외의 색정보(ｖCi)를, 사용 기기에 의해 취급할 수 있는 화상 포맷으로 변환하여 처리 화상 데이터를 출력해도 된다.

이와 같이 색대비를 이용하여 각 화소의 대상 색정보만을 보정함으로써, 영역 추출하는 일 없이 간이한 구성으로 색보정을 행하는 것이 가능해지고, 인간의 시각에 보다 가까운 인상을 줄 수 있는 색보정을 행하는 것이 가능해진다. 또한, 영역 추출하는 일도 없기 때문에, 영역 추출 오차에 의해 생기는 색보정 오차의 발생을 억제할 수도 있다.

상기 실시 형태에서는, 대상 색정보가 1개의 경우에 대해 설명했지만, 예를 들면, 채도·색상의 2개의 색정보의 보정을 조합하는 것도 가능하다. 이 경우, 각각의 색정보로부터 각각의 색특성 정보 데이터가 구해지고, 색정보 보정 수단(3)은, 대응하는 색정보에 적절한 보정 함수를 설정하고, 색보정을 행한다.

또한, (수학식 1)과 (수학식 2)는, (수학식 5)와 (수학식 6)과 같이 하는 것도 가능하다.

여기서, 0.0≤Hmax≤1.0, 0.0≤TH3, 0.0≤

≤1.0, 0.0≤

≤1.0,

×TH3=Hmax이다.

이 경우, 보정 대상 화소가 회색과 같이 무채색인 경우, 보정은 되지 않는다(본래, 무채색에 착색은 되지 않는다). 한편, 유채색에서 대비가 발생하는 색을 화소가 갖는 경우에는 보정이 실시된다.

(수학식 5)에 있어서의 H(Ci/ACi-1.0)의 부분은, 색특성 정보 데이터(색대비량)(Rn_i)의 변화량에 의해, 보정 전의 Ci에 대한 변화 비율에 상당한다. 그 때문에, 보정 전의 색데이터(Ci)의 크기에 연동하여 보정하는 것이 가능해지기 때문에, 예를 들면, 저농도의 색데이터가 색대비에서 급격하게 크게 변화하는 것을 억제할 수 있어, 보다 자연스러운 색대비에 의한 보정을 가능하게 한다.

(제2 실시 형태)

도 7에서 도 11을 이용하여, 본 발명의 제2 실시 형태로서, 화소에 있어서의 색대비 정보를 기초로, 색정보의 보정을 행하는 화상 처리 방법 및 화상 처리 장치(200)에 대해 설명한다. 또한, 상기 실시 형태에서 설명한 바과 같은 구성에는, 같은 부호를 부여하여 설명을 생략한다.

도 7에, 본 발명의 제2 실시 형태인 화상 처리 장치(200)의 구성을 나타낸다. 또, 도 8에, 색정보 전파 보정 수단(14)의 구성을 나타낸다. 또, 도 9에, 본 발명의 제3 실시 형태인 화상 처리 방법의 처리 플로우차트를 나타낸다.

이 발명은, 화상 데이터를 처리함으로써, 화상 내의 색정보를 보정하는 장치이며, 예를 들면, 디지털 스틸 카메라나 디지털 비디오 카메라와 같은 촬영기기, 디지털 화상을 편집하는 화상 편집 장치, 모바일 환경하에서 사용하는 휴대 전화, 카 모바일 기기, PDA 등, 또는 여러 가지 환경하에서 사용되는 대형 영상 표시 기기 등에 탑재된다.

화상 처리 장치(200)에 화상 데이터(ｖIi)가 입력되면, 정보 산출 수단(10)은, 화상 데이터(ｖIi)를 구성하는 각 화소의 데이터를 소정의 색정보(ｖCi)로 변환한다(S21). 또한, 이 색정보에는 휘도 등의 밝기에 관한 정보(Ki)도 포함되는 것으로 한다. 여기에서는, 화상 데이터(ｖIi)를, 색정보로서 취급하기 쉬운 색상(H), 채도(S), 명도(V)로 구성되는 HSV 공간 데이터나, 휘도(Y), 색차(Cb, Cr)로 구성되는 YCbCr 공간 데이터, 명도(L), 색(a*, b*)으로 구성되는 La*b*공간 데이터 등의 소정의 색정보(ｖCi)로 변환하는 것으로 하지만, 화상 데이터(ｖIi)를 그대로 취급하는 것도 가능하다.

화소 선택 수단(11)에서는, 특성 산출 수단(12)에서 처리하는 화소를 소정의 순서로 선택한다(S22). 화상 처리 장치(200)에서는, 화상 전체의 화소를 색대비로 보정하는 것이 아니라, 주목해야 할 선택 화소만을 색대비로 보정한 후, 나머지의 화소를 보정된 선택 화소의 색정보에 기초하여 보정한다. 이로 인해, 화상 전체의 밸런스를 가능한 한 유지하면서, 보다 고정밀도의 색보정을 행하는 것이 가능해진다. 또한, 화소의 선택 기준은, 취급해야 할 화상 내용에 따라 미리 설정하는 것이지만, 화상을 수평 방향으로 XSTEP 분할, 수직 방향으로 YSTEP 분할한 경우의 각 블록의 중심 화소를 선택하는 간단한 기준이어도 된다. 이 경우, 처리 시간과 처리 정밀도에 따라 XSTEP나 YSTEP를 결정할 필요가 있다. 이상의 화소 선택 수 단(11)에서 선택된 화소군을 선택 화소군(Φ)으로 한다.

특성 산출 수단(12)에서는, 정보 산출 수단(10)에서 얻어진 색정보(ｖCi) 중에서, 선택 화소군(Φ) 내의 화소(Pi)의 색정보를 이용하여, 색특성 정보 데이터(Rn_i(Pi∈Φ))를 산출한다(S23). 또한, 화소(Pi)에 있어서의 색정보(ｖCi) 중에서 보정 대상인 색정보를 Ci로 한다.

특성 산출 수단(12)은, 색특성 산출 수단(2)(도 1 참조)과 같게 하여, 색정보와 밝기 정보에 관해서 색특성 정보 데이터 데이터(Rn_i)를 생성한다. 이 데이터는, 본 발명의 제1 실시 형태와 같은 처리로 생성된다. 예를 들면, 화소(Pi)에 있어서의 색정보(Ci)와, 그 시야 영역에 상당하는 소정의 넓이를 갖는 화소 영역(Ωi) 내의 화소의 색정보의 가중 평균(ACi)과의 비를 이용하여, 색특성 정보 데이터(Rn_i)를 생성한다.

선택 화소 색정보 보정 수단(13)에서는, 선택 화소군(Φ) 내의 화소(Pi)에 대해서, 특성 산출 수단(12)에서 생성한 색특성 정보 데이터(Rn_i)를 이용하여, 보정 대상의 색정보(Ci)의 색보정을 실시한다(S24). 이 방법에 대해서는, 본 발명의 제1 실시 형태와 같다.

다음에, 색정보 전반보정 수단(14)은, 선택 화소 색정보 보정 수단(13)에서 얻어진 선택 화소군(Φ) 내의 화소(Pi)를 사용하여, 나머지의 화소(Pj)의 색정보(Cj)(Pj는 선택 화소군(Φ)에 속하지 않는다)에 대한 색보정을 실시한다(S25). 이 처리로서, 많은 방법이 생각되지만, 여기에서는, 컬러리제이션 처리를 적용한다. 컬러리제이션 처리란, 미리 설정된 몇 점의 색정보를 기초로 흑백 화상 데이 터에, 화상 전체의 밸런스를 깨뜨리지 않도록 착색하는 처리이다.

색정보 전반보정 수단(14)은, 이 처리를 이용하여, 선택 화소 색정보 보정 수단(13)에서 보정된 색정보(Ci)를 초기설정점(이하, 기준 화소라고 한다)으로서, 화상 전체의 밸런스를 무너뜨리는 색보정을 실시한다. 색정보 전반보정 수단(14)은, 도 8에 나타내는 바와 같이, 기준 설정 수단(16), 주위 색정보 산출 수단(17), 전파 판정 수단(18)으로 구성된다.

도 10을 이용하여 전반처리에 대해 설명한다.

또한, 도 10에서는, 화소(Pi)에 대해서 휘도(Yi), 색차(Cbi, Cri)가 산출되어 있고(S28), 색보정의 대상은, 색차(Cbi, Cri)인 것으로 한다. 또한, 선택 화소군(Φ) 내의 화소(Pi)에 있어서의 보정 후의 색차(이하, 보정색차라고 한다)를 색차(Cbai, Crai)로 한다.

기준 설정 수단(16)은, 선택 화소군(Φ) 내의 화소(P0)를 기준 화소로서 설정한다(S29 및 도 10(a) 참조).

주위 색정보 산출 수단(17)은, 기준 화소(P0)의 주위 4화소(Pj)에 대해서, 기준 화소(P0)의 보정색차(Cba0, Cra0)를 전파한다(S29∼S31 및 도 10(b) 참조).

이 처리에서는, 주위의 각 화소(Pj)의 휘도(Kj)는 보존된다. 따라서, 이 휘도(Kj)를 만족하는 화소(Pj)의 색차 후보(Cbj_1, Crj_1) 가운데, 기준 화소(P0)의 보정색차(Cba0, Cra0)와의 차이가 가장 작아지는 색차의 세트(Cbaj, Craj)를 구한다(S30).

이 색차 후보의 결정 방법은 여러 가지 방법이 있다. 통상, 휘도(Kj), 색 차(Cbj_1, Crj_1)는 8비트의 정수로 정의되므로, 간단한 경우에는 휘도(Kj)에의 선형 변환식을 만족하는 색차(Cbj_1, Crj_1)의 정수의 조합을 색차 후보로 한다. 이 경우, 처리 시간이 방대할 가능성이 있으므로, 소정의 오차 함수(E)를 설치하고, 휘도(Kj)에의 선형 변환식이 성립하는 조건하에서, 그 오차 함수(E)를 작게 하는 색차의 조합을 후보로 하는 방법도 생각할 수 있다.

이 4화소에의 전파 처리가 끝나면, 또한, 그 주위의 화소(Pj2)에의 전파를 실시한다(도 10(c) 참조). 이러한 전파 처리를 기준 화소(P0)의 모든 것을 기준으로 하여 실시한다. 또한, 복수의 기준 화소로부터의 색정보가 전파한 경우, 그 보정 대상이 되는 화소에서는, 전파된 복수의 색정보와의 차이가 가장 작아지는 색정보가 선택된다.

전반판정 수단(18)은, 도 10(d)에 나타내는 바와 같이, 전파 대상이 되는 화소에 있어서의 보정 색정보(Cbaj, Craj)와, 각각의 화소의 전반 전의 색정보(Cbj, Crj)와의 차이를 소정의 임계값과 비교한다. 구체적으로는, 각각의 색정보의 차이가 소정의 임계값(ThresCb, ThresCr)보다 큰 경우는, 이 화소(예를 들면, Px)에 기초하는 전파를 종료함과 동시에, 보정 색정보(Cbaj, Craj)를 Cbaj=Cbj, Craj=Crj로 한다. 즉, 전반판정 수단(18)은, 전파 정지 판정을 실시한다.

이상의 처리를 모든 화소의 색정보가 결정될 때까지 행한다(S31).

또한, 전반판정 수단(18)은, 색보정 및 전반처리된 YCbCr 공간 데이터를 S28의 처리를 행하기 전의 색공간으로 변환한다.

또, 출력 수단(4)은, 이와 같이 하여 색보정된 각 화소의 색정보를, 제1 실 시 형태에서 설명한 바와 같이 처리하여 출력한다(S26∼S27).

이렇게 함으로써, 각 화소의 휘도(밝기)가 유지됨과 동시에, 기준 화소와 그 근방의 화소와의 휘도가 가까운 경우에, 근방의 화소의 색정보는, 기준 화소의 색정보에 가까운 값으로 보정된다. 또한, 전파 정지 판정을 실시함으로써, 전반의 전후에서 색정보가 크게 변화하지 않는 것이 보장되고 있다. 이렇게 함으로써, 화상 전체의 밸런스를 무너뜨리지 않고, 색대비에 의해 보정된 색정보를 전파시켜, 색보정 처리를 행하는 것이 가능해진다.

또한, 전파 처리는, 도 11에 나타내는 방법이어도 된다.

우선, 선택 화소군(Φ) 내의 기준 화소(P0)가 설정된다(도 11(a) 참조).

다음에, 기준 화소(P0)의 주변 영역(33)에 있어서, 기준 화소(P0)의 색정보(Cb0, Cr0)는, 휘도(Y0)를 변수로 한 선형 변환식으로 근사할 수 있다고 가정하고, 주변 영역(33)에 있어서 같은 변환식을 적용한다. 여기서, 선형 변환식은, 복수의 기준 화소(P0)의 색정보(Cb0, Cr0)를 색보정한 보정 색정보(Cba0, Cra0)와, 선형 변환식으로 근사된 각 기준 화소의 색정보와의 차이가 작아지도록 결정된다.

선형 변환식에 있어서의 미정 계수는, 기준 화소(P0)의 주변 영역(33)만으로 정의되기 때문에, 기준 화소(P0)가 많아질수록, 조정해야 하는 선형 변환식의 계수는 많아진다. 그래서, 구체적으로는, 선형 변환식은, 최소 이승법이나 유전적 알고리즘 등에 의한 다변량 계수의 비선형 추정 방법 등을 이용하여 결정된다.

또한, 복수의 기준 화소(P0, P1)의 주변 영역에 포함되는 화소(34)에서는(도 11(c) 참조), 색정보는, 복수의 기준 화소(P0, P1)에 대한 선형 변환식을 평균한 값으로 결정된다.

이상과 같이, 색대비로 보정되어 있지 않은 화소의 색정보는, 각 화소가 속하는 기준 화소의 주위 영역에 대응하는 선형 변환식에, 각 화소의 휘도를 적용하여 산출된다.

이 방법에서는, 각 화소의 휘도는 보존됨과 동시에, 기준 화소의 근방의 화소로 휘도가 가까운 화소일수록 가까운 색정보가 설정된다. 또, 기준 화소에서의 색정보가 작아지도록 주변 영역 내의 선형 변환식의 계수 등이 결정됨과 동시에, 주변 영역 내에서는 완만한 변동을 하는 1차 선형식을 이용한 경우, 휘도 변동의 적은 영역에서의 색정보의 변동을 억제하는 것이 가능해진다. 이상에 의해, 화상 전체의 밸런스를 무너뜨리지 않고, 색대비에 의해 보정된 색정보를 전파시켜, 색보정 처리를 행하는 것이 가능해진다.

또한, 제어 변수(15)는, 화소 선택시의 파라미터, 선택 화소의 보정을 위한 파라미터, 색정보 전반을 위한 파라미터 등을 격납한다.

(제3 실시 형태)

도 12에서 도 13을 이용하여, 본 발명의 제3 실시 형태로서 화소에 있어서의 색대비 정보를 기초로, 색정보의 보정을 행하는 화상 처리 방법 및 화상 처리 장치(400)에 대해 설명한다. 또한, 상기 실시 형태에서 설명한 바와 같은 구성에는, 같은 부호를 부여하여 설명을 생략한다.

도 12에, 본 발명의 제3 실시 형태인 화상 처리 장치(400)의 구성을 나타낸다. 또, 도 13에, 본 발명의 제3 실시 형태인 화상 처리 방법의 처리 플로우차트 를 나타낸다.

이 발명은, 화상 데이터를 처리함으로써, 화상 내의 색정보를 보정하는 장치이며, 예를 들면, 디지털 스틸 카메라나 디지털 비디오 카메라와 같은 촬영기기, 디지털 화상을 편집하는 화상 편집 장치, 모바일 환경하에서 사용하는 휴대 전화, 카 모바일 기기, PDA 등, 또는 여러 가지 환경하에서 사용되는 대형 영상 표시 기기 등에 탑재된다.

화상 처리 장치(400)에 화상 데이터(ｖIi)가 입력되면, 정보 산출 수단(10)은, 화상 데이터(ｖIi)를 구성하는 각 화소의 데이터를 소정의 색정보(ｖCi)로 변환한다(S41). 또한, 이 색정보에는 휘도 등의 밝기에 관한 정보(Ki)도 포함되는 것으로 한다. 여기에서는, 화상 데이터(ｖIi)를, 색정보로서 취급하기 쉬운 색상(H), 채도(S), 명도(V)로 구성되는 HSV 공간 데이터나, 휘도(Y), 색차(Cb, Cr)로 구성되는 YCbCr 공간 데이터, 명도(L), 색(a*, b*)으로 구성되는 La*b* 공간 데이터 등의 소정의 색정보(ｖCi)로 변환하는 것으로 하지만, 화상 데이터(ｖIi)를 그대로 취급하는 것도 가능하다.

특성 산출 수단(12)에서는, 정보 산출 수단(10)에서 얻어진 색정보(ｖCi) 중에서, 보정 대상인 색정보에 대한 특성 정보(색대비 정보(RnC_i))와, 밝기에 대한 특성 정보(밝기 대비 정보(RnK_i))가 산출된다. 여기에서는, 화소(Pi)에 있어서의 색정보(ｖCi) 중에서 보정 대상인 색정보를 Ci로 하고, 밝기 정보를 Ki로 한다.

특성 산출 수단(12)은, 색특성 산출 수단(2)(도 1 참조)과 같이, 화소(Pi)의색정보와 밝기 정보에 관해서, 색특성 정보 데이터(Rn_i)(색대비 정보(RnC_i), 밝 기 대비 정보(RnK_i))를 생성한다(S42). 이 데이터에 대해서는, 본 발명의 제1 실시 형태와 같은 처리로 생성한다. 즉, 화소(Pi)에 있어서의 색정보(Ci)와, 그 시야 영역에 상당하는 소정의 넓이를 갖는 화소 영역(Ωi) 내의 화소의 색정보의 가중 평균(ACi)과의 비를 이용하여, 색대비 정보(RnC_i)를 산출하고, 화소(Pi)에 있어서의 휘도 정보(Ki)와, 그 시야 영역에 상당하는 소정의 넓이를 갖는 화소 영역(Ωi) 내의 화소의 휘도의 가중 평균(AKi)과의 비를 이용하여, 밝기 대비 정보(RnK_i)를 산출한다. 또한, 밝기 대비 정보(RnK_i)는, 예를 들면, 제1 실시 형태에서 색대비 정보(RnC_i)를 정의하는 식에 있어서, Ci를 Ki로 하고, ACi를 AKi로 함으로써 정의된다.

제2 화소 선택 수단(40)은, 이 RnK_i와 RnC_i를 이용하여, 화소(Pi)에 대해서 색대비 현상을 이용한 색보정을 행하는지의 여부의 판정을 행하고, 색보정의 대상이 되는 화소 영역을 선택한다(S43). 이 판정에는 여러 가지 방법이 있지만, 여기에서는, 다음의 (수학식 7)을 만족하는 화소를 선택한다. 또한, (수학식 7)에서, ThC, ThK는, 양정수이며, 제어 변수(15)에 격납된다.

밝기 대비의 절대치가 큰 영역에 대해서, 인간의 시각 특성은 강한 콘트라스트를 느끼는 경향이 있다. 그리고, 색대비의 값이 1에 가까운 화소는, 어느 정도 색정보의 변동이 적은 화소 영역에 속한다. 이 2개의 사실을 고려하여, 본 발명에 서는, 인간의 시각 특성상 관심이 모아지는 영역으로서, 색정보의 변화가 비교적 작은 영역을 (수학식 7)을 이용하여 선택하고, 색대비 현상을 이용한 색보정을 행하는 것으로 하고 있다.

또한, 색대비 정보(RnC_i)를, 화소(Pi)에 있어서의 색정보(Ci)와, 그 시야 영역에 상당하는 소정의 넓이를 갖는 화소 영역(Ωi) 내의 화소의 색정보의 가중 평균(ACi)과의 차분으로 정의한 경우, (수학식 8)을 이용하여 화소의 선택을 행하는 것이 좋다. (수학식 8)에서는, 색대비가 0에 가까운 것은, 색정보의 변동이 적은 것을 나타낸다.

제3 실시 형태의 특징을 이하에 기재한다. 본 발명의 제2 실시 형태에서는, 도 7의 화소 선택 수단(11)이 색대비 현상을 이용하여 색보정하는 화소를 선정하고 있다. 한편, 제3 실시 형태에서는, 보다 인간의 관심이 높은 화소 영역을 우선 선택하고, 그 후 색대비 현상에 의해 색보정을 행한다(S44). 그리고, 선택된 화소를 기준 화소로 하여, 이 기준 화소의 보정 색정보를 컬러리제이션 처리에 의해 전파 처리하고, 주위의 화소에 색정보를 전파시킴으로써 색보정을 실시한다(S45). 이렇게 함으로써, 인간의 관심이 모인다고 생각되는 화소에서의 보정 결과를 이용하여, 화상 전체의 밸런스를 가능한 한 보존하면서 색보정을 행할 수 있다. 이 때문에, 전화소에 대해서 색대비로 보정한 경우와 비교하여, 화상 중의 물체의 경계 부근 등에서의 과잉인 색보정을 억제할 수 있다.

또한, 출력 수단(4)은, 이와 같이 하여 색보정된 각 화소의 색정보를, 제1 실시 형태에서 설명한 바와 같이 처리하여 출력한다(S46∼S47).

(제4 실시 형태)

도 14에서 도 15를 이용하여, 본 발명의 제4 실시 형태로서, 화소에 있어서의 색대비 정보를 기초로, 색정보의 보정을 행하는 화상 처리 방법 및 화상 처리 장치(500)에 대해 설명한다. 또한, 상기 실시 형태에서 설명한 바와 같은 구성에는, 같은 부호를 부여하여 설명을 생략한다.

도 14에, 본 발명의 제4 실시 형태인 화상 처리 장치(500)의 구성을 나타낸다.

화상 처리 장치(500)는, 화상 분할 수단(50), 블록 정보 산출 수단(51), 처리 블록 선택 수단(52), 블록 특성 산출 수단(53), 선택 블록 색정보 보정 수단(54), 색정보 블록 전파 보정 수단(55), 화소 변환 수단(56), 출력 수단(4)으로 구성된다.

이 발명의 특징은, 본 발명의 제2 실시 형태의 화상 처리 장치(200)가 화소 단위로 처리하고 있던 것에 대해서, 도 15에 개념적으로 나타내는 블록 단위로 처리를 행하는 점에 있다.

보다 구체적으로는, 화상 처리 장치(500)에서는, 화상 분할 수단(50)이, 입력되는 화상 데이터를 블록으로 분할하고, 그 블록을 처리 단위로 한다.

블록 정보 산출 수단(51)은, 각 블록의 색정보로서 도(15)에 나타내는 바와 같이, 각 블록 내를 대표하는 대표 색정보를 산출한다. 구체적으로는, 블록 내의 색정보의 평균치, 히스토그램에서 가장 도수가 많은 값, 클러스터링 등의 통계적 방법에 의한 값 등을 대표 색정보로서 산출한다.

화상 처리 장치(500)는, 블록(k) 내의 대표 색정보(BCk)를, 본 발명의 제2 실시 형태에 있어서의 화소의 색정보(Ci)로 보고, 제2 실시 형태와 같은 처리를 행한다.

또한, 이 경우, 출력 수단(4)에서 소정의 화상 포맷으로 변환하기 전에, 화소 변환 수단(56)에서는, 블록(k) 내의 각 화소의 보정 후의 색정보를, 블록(k) 뒤의 블록(k＋1)과 1개 아래의 블록(k＋Bwidth)(종방향으로 인접하는 블록)의 보정된 대표 색정보치를 이용한 보간 처리에 의해 산출한다. 여기서 Bwidth는, 횡방향의 블록수를 나타내고, 블록 번호가 화상 좌측 상방에서 우측 방향으로 순서대로 일렬로 연결되어 정의되고 있는 것으로 한다.

또한, 보간 처리는 이 방식으로 한정되는 것이 아니고, 블록(k) 전의 블록(k-1)과 블록(k) 위의 블록(k-Bwidth)의 보정된 대표 색정보치를 이용한 보간 처리도 가능하다. 또, 전후, 상하 4개의 블록과 대상 블록과의 합계 5개의 블록의 보정된 대표 색정보치를 이용한 보간 처리도 가능하다.

또한, 도 15에서는 균일 사이즈의 직사각형 블록을 이용했지만, 화상 내용에 따라 블록 사이즈나 형상을 바꾸어도 된다.

이러한 구성이나 방법에 의해, 화상 사이즈가 큰 경우에 필요하게 되는 처리량을 삭감할 수 있다. 특히, 분할되는 블록수를 화상 사이즈에 관계없이 고정으로 함으로써, 각 블록의 대표 색정보에 대한 색보정 처리의 처리량의 증감을 억제할 수 있어 입력되는 화상 사이즈에 대한 처리 시간의 대폭적인 변동을 억제할 수 있다.

(제5 실시 형태)

도 16을 이용하여, 본 발명의 제5 실시 형태로서, 화소에 있어서의 색대비 정보를 기초로, 색정보의 보정을 행하는 화상 처리 방법 및 화상 처리 장치(600)에 대해 설명한다. 또한, 상기 실시 형태에서 설명한 바와 같은 구성에는, 같은 부호를 부여하여 설명을 생략한다.

도 16에, 본 발명의 제5 실시 형태인 화상 처리 장치(600)의 구성을 나타낸다.

화상 처리 장치(600)는, 화상 분할 수단(50), 블록 정보 산출 수단(51), 블록 특성 산출 수단(53), 블록 선택 수단(60), 선택 블록 색정보 보정 수단(54), 색정보 블록 전파 보정 수단(55), 화소 변환 수단(56), 출력 수단(4)으로 구성된다.

이 발명의 특징은, 본 발명의 제3 실시 형태인 화상 처리 장치(400)가 화소 단위로 처리하고 있던 것에 대해서, 도 15에 개념적으로 나타내는 블록 단위로 처리를 행하는 점에 있다.

보다 구체적으로는, 화상 처리 장치(600)에서는, 화상 분할 수단(50)이 입력되는 화상 데이터를 블록으로 분할하고, 그 블록을 처리 단위로 한다.

블록 정보 산출 수단(51)은, 각 블록의 색정보로서, 도 15에 나타내는 바와 같이, 각 블록 내를 대표하는 대표 색정보를 산출한다. 구체적으로는, 블록 내의 색정보의 평균치, 히스토그램에서 가장 도수가 많은 값, 클러스터링 등의 통계적 방법에 의한 값 등을 대표 색정보로서 산출한다.

화상 처리 장치(500)는, 블록(k) 내의 대표 색정보(BCk)를, 본 발명의 제3 실시 형태에 있어서의 화소의 색정보(Ci)라고 본다. 또한, 제3 실시 형태에서는, 화소 단위의 처리를 행하고, 색대비에 의한 색보정을 실시하는 화소를, 화소의 특성 정보인 밝기 대비 정보, 색대비 정보, 휘도를 사용하여 선택한다. 한편, 본 발명에서는, 블록 특성 산출 수단(53)은, 블록(k)을 대표하는 대표 색정보(BCk)와 대표 휘도(BYk)를 사용하여, 밝기 대비 정보와 색대비 정보를 산출한다. 또한, 블록 선택 수단(60)은, 이러한 정보를 이용하여 색대비로 보정하는 대표 색정보를 갖는 블록을 선택한다.

또, 출력 수단(4)으로 소정의 화상 포맷으로 변환하기 전에, 화소 변환 수단(56)에서는, 블록(k) 내의 각 화소의 보정 후의 색정보를, 블록(k) 뒤의 블록(k＋1)과 1개 아래의 블록(k＋Bwidth)의 보정된 대표 색정보치를 이용한 보간 처리에 의해 산출한다. 여기서 Bwidth는 횡방향의 블록수를 나타내고, 블록 번호가 화상 좌측 상방으로부터 우측 방향으로 순서대로 일렬로 연결되어 정의되어 있는 것으로 한다.

또한, 보간 처리는 이 방식으로 한정되는 것이 아니며, 블록(k) 전의 블록(k-1)과 블록(k) 위의 블록(k-Bwidth)의 보정된 대표 색정보치를 이용한 보간 처리도 가능하다. 또, 전후, 상하 4개의 블록과 대상 블록과의 합계 5개의 블록의 보정된 대표 색정보치를 이용한 보간 처리도 가능하다.

또한, 도 15에서는 균일 사이즈의 직사각형 블록을 이용했지만, 화상 내용에 따라 블록 사이즈나 형상을 바꾸어도 된다.

이러한 구성이나 방법에 의해, 화상 사이즈가 큰 경우에 필요로 되는 처리량을 삭감할 수 있다. 특히, 분할되는 블록수를 화상 사이즈에 관계없이 고정으로 함으로써, 각 블록의 대표 색정보에 대한 색보정 처리의 처리량의 증감을 억제할 수 있고, 입력되는 화상 사이즈에 대한 처리 시간의 대폭적인 변동을 억제할 수 있다.

(제6 실시 형태)

도 17에서 도 19를 이용하여, 본 발명의 제6 실시 형태로서, 화소에 있어서의 색대비 정보를 기초로 한 컬러 밸런스 보정을 행하는 화상 처리 방법 및 화상 처리 장치(700)에 대해 설명한다. 또한, 상기 실시 형태에서 설명한 바와 같은 구성에는, 같은 부호를 부여하여 설명을 생략한다.

도 17에, 본 발명의 제6 실시 형태인 화상 처리 장치(700)의 구성을 나타낸다. 또, 도 18에, 본 발명의 제6 실시 형태인 화상 처리 방법의 처리 플로우차트를 나타낸다.

이 발명은, 화상 데이터를 처리함으로써, 화상 내의 색정보를 보정하는 장치이며, 예를 들면, 디지털 스틸 카메라나 디지털 비디오 카메라와 같은 촬영기기, 디지털 화상을 편집하는 화상 편집 장치, 모바일 환경하에서 사용하는 휴대 전화, 카 모바일 기기, PDA 등, 또는 여러 가지 환경하에서 사용되는 대형 영상 표시 기기 등에 탑재된다.

화상 처리 장치(700)는, 정보 산출 수단(10), 특성 산출 수단(12), 추정 화 소 선택 수단(70), 밸런스량 산출 수단(71), 밸런스 보정 수단(72), 출력 수단(4), 추정 제어 변수(73)로 구성되어 있다. 정보 산출 수단(10)은, 화상 데이터(ｖIi)를 소정의 색정보로 변환한다. 특성 산출 수단(12)은, 변환된 소정의 색정보로부터, 대상으로 하는 색정보에 관한 특성 정보 및 밝기에 관한 특성 정보를 산출한다. 추정 화소 선택 수단(70)은, 특성 산출 수단(12)이 산출한 특성 정보로부터, 화이트점 추정에 사용할 수 있는 추정 화소를 선택한다. 화소의 선택시에 있어서는, 추정 제어 변수(73)가 격납하는 테이블 데이터가 이용된다. 밸런스량 산출 수단(71)은, 추정 화소 선택 수단(70)에서 얻어진 추정 화소의 그레이축으로부터의 편차량을 산출한다. 밸런스 보정 수단(72)은 밸런스량 산출 수단(71)에서 얻어진 밸런스 편차량을 각 화소의 색정보의 밸런스 보정에 적용한다. 출력 수단(4)은, 밸런스 보정된 화상을 소정의 포맷으로 출력한다.

이 장치에 화상 데이터(ｖIi)가 입력되면, 정보 산출 수단(10)은, 화상 데이터(ｖIi)를 구성하는 각 화소의 데이터를 소정의 색정보(ｖCi)로 변환한다(S50). 또한, 이 색정보에는 휘도 등의 밝기에 관한 정보(Ki)도 포함되는 것으로 한다. 여기에서는, 화상 데이터(ｖIi)를, 색정보를 취급하기 쉬운 색상(H), 채도(S), 명도(V)로 구성되는 HSV 공간 데이터나, 휘도(Y), 색차(Cb, Cr)로 구성되는 YCbCr 공간 데이터, 명도(L), 색(a*, b*)으로 구성되는 La*b* 공간 데이터 등의 소정의 색정보(ｖCi)로 변환하는 것으로 하지만, 화상 데이터(ｖIi)를 그대로 취급하는 것도 가능하다.

특성 산출 수단(12)에서는, 정보 산출 수단(10)에서 얻어진 색정보(ｖCi) 중 에서, 보정 대상인 색정보에 대한 특성 정보(색대비 정보(RnC_i))와, 밝기에 대한 특성 정보(밝기 대비 정보(RnK_i))가 산출된다. 또한, 화소(Pi)에 있어서의 색정보(ｖCi) 중에서 보정 대상인 색정보를 Ci로 하고, 밝기 정보를 Ki로 한다.

특성 산출 수단(12)은, 색특성 산출 수단(2)(도 1 참조)과 같이, 화소(Pi)의 색정보와 밝기 정보에 관해서, 색특성 정보 데이터(Rn_i)(색대비 정보(RnC_i), 밝기 대비 정보(RnK_i))를 생성한다(S51). 이 데이터에 대해서는, 본 발명의 제1 실시 형태와 같은 처리로 생성한다. 즉, 화소(Pi)에 있어서의 색정보(Ci)와, 그 시야 영역에 상당하는 소정의 넓이를 갖는 화소 영역(Ωi) 내의 화소의 색정보의 가중 평균(ACi)(대표 색정보)과의 비를 이용하여, 색대비 정보(RnC_i)를 산출하고(S57, S59), 화소(Pi)에 있어서의 휘도 정보(Ki)와, 그 시야 영역에 상당하는 소정의 넓이를 갖는 화소 영역(Ωi) 내의 화소의 휘도의 가중 평균(AKi)(대표 휘도 정보)과의 비를 이용하여, 밝기 대비 정보(RnK_i)를 산출한다(S57, S58). 또한, 밝기 대비 정보(RnK_i)는, 예를 들면, 제1 실시 형태에서 색대비 정보(RnC_i)를 정의하는 식에 있어서, Ci를 Ki로 하고, ACi를 AKi로 함으로써 정의된다.

추정 화소 선택 수단(70)에서는, 색대비 정보(RnC_i), 밝기 대비 정보(RnK_i), 휘도(Ki)를 이용하여, 인간이 조명과 같이 밝게 느끼는 영역(화이트 영역)에 화소(Pi)가 속하는지의 여부의 판정을 행하고, 만족하는 경우에는 그 화소(Pi)를 선택한다(S52). 이러한 처리를 모든 화소(Pi)에 대해서 행하고, 선택된 화소의 집합을 화이트 영역(Ψ)으로 한다. 이 판정에는 여러 가지 방법이 있지만, 여기에서는, 다음의 (수학식 9)를 만족하는 화소를 선택한다. 또한, (수학식 9)에 서, Th0, Th1, Th2는 양정수이며, 추정 제어 변수(73)에 격납되어 있다.

밝기 대비의 절대치가 큰 영역에 대해서, 인간의 시각 특성은 강한 콘트라스트를 느끼는 경향이 있다. 이것에 더하여 밝기 대비가 크고, 휘도가 소정의 값보다 높은 경우에는, 인간이 보다 밝은 영역으로서 느낀다고 생각된다. 또한, 색대비치가 1에 가까운 화소는, 어느 정도 색정보의 변동이 적은 화소에 속한다고 생각된다. 이러한 추측으로부터, 본 발명에서는 (수학식 9)를 이용하여, 인간이 밝게 느끼는 것과 동시에 색정보 변화가 비교적 작은 영역을, 조명 등이 있는 화이트 영역으로 보고 있다. 이것은, 광학적으로 경면 반사 영역을 화이트 영역으로서 추출하는 것에 상당한다.

도 19를 이용하여, (수학식 9)에 의해 선택되는 화이트 영역에 대해서 설명을 덧붙인다. 도 19에서 대상 화소가 영역(Ar1)에 있는 경우에는, 대상 화소는, 화이트 영역에 속한다고 판정된다. 이것은, 대상 화소의 휘도가 높고, 주변과의 밝기 대비도 크기 때문이다.

한편, 대상 화소가 영역(Ar2∼Ar4)에 있는 경우에는, 대상 화소는, 화이트 영역에 속한다고 판정되지 않는다. 구체적으로는, 대상 화소가 영역(Ar2)에 있는 경우, 대상 화소의 휘도는 높지만, 주변과의 밝기 대비는 작다. 또, 대상 화소가 영역(Ar3)에 있는 경우, 주변과의 밝기 대비는 크지만, 대상 화소의 휘도는 낮다. 또, 대상 화소가 영역(Ar4)에 있는 경우, 대상 화소의 휘도가 낮고, 주변과의 밝기 대비도 작다. 따라서, 대상 화소가 이러한 영역에 있는 경우에는, 대상 화소는, 화이트 영역에 속한다고 판정되지 않는다.

또한, 색대비 정보(RnC_i)를, 화소(Pi)에 있어서의 색정보(Ci)와, 그 시야 영역에 상당하는 소정의 넓이를 갖는 화소 영역(Ωi) 내의 색정보의 가중 평균(ACi)과의 차분으로 정의한 경우, (수학식 10)을 이용하여 화소의 선택을 행하는 것이 좋다. (수학식 10)에서는, 색대비가 0에 가까운 것은, 색정보의 변동이 적은 것을 나타낸다.

밸런스량 산출 수단(71)에서는, (수학식 9) 또는 (수학식 10)에서 얻어진 화이트 영역(Ψ) 내의 색정보의 그레이축으로부터의 편차량을 구한다(S53). 여기에서는, 편차량을 산출하기 위해서, 화이트 영역(Ψ) 내의 화소의 색차(Cb, Cr)의 평균치(Cbc, Crc)를 계산하고, 이 평균치를 그레이축으로부터의 편차량으로 한다.

여기서 휘도(Ki)에 의해 정규화를 행하는 이유는, 추정된 밸런스 편차량의 정밀도를 올리기 위해서다. 이 화이트 영역(Ψ) 내 화소의 Cr, Cb를 휘도(Ki)로 정규화한 값의 평균치 이외에, 그 정규화한 Cr, Cb에서 빈도가 가장 많은 값이나 최대의 Cb, Cr를 이용하는 것도 가능하다.

또한, 편차량으로서는, 화이트 영역(Ψ) 내의 화소의 색차의 평균치 이외에, 화이트 영역(Ψ)의 화소에서 가장 출현 빈도가 높은 Cb, Cr의 값 등을 이용하는 것도 가능하다.

다음에, 밸런스량 산출 수단(71)에서는, 밸런스 보정량(ΔCb, ΔCr)을 (수학식 11)을 이용하여 산출한다(S54).

(수학식 11)에서, Kb, Kr은 양정수이며, 추정 제어 변수(73)에 격납되어 있다.

밸런스 보정 수단(72)은 산출된 밸런스 보정량(ΔCb, ΔCr)을 각 화소의 색차에 더하여 보정을 행한다(S55). Kt는 보정을 행하는 화소의 휘도를 나타낸다. 또한, 이 보정량이 소정의 값을 넘는 경우는, 보정을 실시하지 않는 것으로 해도 되고, (수학식 11)의 Kb와 Kr과의 양정수를 변경(예를 들면, 억제)하는 것으로 해도 된다. 이로 인해, 급격한 컬러 밸런스 보정을 억제하는 것이 가능해진다.

또한, Kb, Kr은 양정수로 했지만, 밸런스 편차량(Cbc, Crc)의 값에 따라 소정의 함수에 의해 변환된 값을 이용해도 된다. 또, (수학식 11)로서 급격한 컬러 밸런스 보정을 억제하는 비선형 함수를 이용해도 된다. (수학식 11)에서는 대상 화소의 휘도(Kt)에 의해 급격한 밸런스 보정에 의한 화질 저하를 억제하기 위해서 휘도항(Kt)을 설치하고 있다.

본 실시 형태의 특징은, 인간이 밝게 느끼는 경향이 높은 영역을 추출하고, 그 영역에서의 밸런스 편차량을 구하고, 이것을 보정하는 방향으로 화상의 컬러 밸런스 보정을 실시하는 점이다. 이렇게 함으로써, 복잡한 판정을 할 필요가 없고 간이한 구성으로 실현될 수 있다. 또한, 인간이 밝게 느끼는 영역에서의 밸런스를 중심으로 보정함으로써, 처리필 화상에 주는 폐해도 저감할 수 있다.

또한, 여기에서는 밸런스 편차량의 대상으로서 색차(Cb와 Cr)를 대상으로 했지만, 이외에도 HSV계의 색상(H)이나 채도(S) 또는 La*b*계의 색정보(a*, b*)를 대상으로 해도 된다.

또, (수학식 10) 또는 (수학식 11)에 의한 추정 화소의 선택에 있어서, 색대비 정보에 관한 판정｜RnC_i-1｜＜Th2, 또는 ｜RnC_i｜＜Th2＇는 행해지지 않아도 된다. 이 경우, 밝기의 점에서 관심이 높은 영역에만 주목한 조건으로 추정 화소의 선택을 행하는 것이 가능해지고, 상기에서 설명한 조건보다, 넓은 화소 영역을 추정 대상으로 선택할 수 있다.

(제7 실시 형태)

도 20을 이용하여, 본 발명의 제7 실시 형태로서, 화소에 있어서의 색대비 정보를 기초로 한 컬러 밸런스 보정 및 색보정을 행하는 화상 처리 방법 및 화상 처리 장치(800)에 대해 설명한다. 또한, 상기 실시 형태에서 설명한 바와 같은 구성에는, 같은 부호를 부여하여 설명을 생략한다.

도 20에, 본 발명의 제7 실시 형태인 화상 처리 장치(800)의 구성을 나타낸다.

이 발명은, 화상 데이터를 처리함으로써 화상 처리를 행하는 장치에 있어서, 본 발명의 제6 실시 형태인 밝기 대비 정보와 색대비 정보에 의해 화상의 컬러 밸런스 보정을 행하는 장치의 특징과, 본 발명의 제1 실시 형태인 색대비에 의해 화소마다 색보정을 행하는 장치의 특징을 겸비하는 것이다.

도 20에 나타내는 바와 같이, 화상 처리 장치(800)는, 수정색 특성 산출 수단(80), 색정보 보정 수단(3), 보정 제어 변수(5)를 구비하는 점에 특징을 갖고 있다.

수정색 특성 산출 수단(80)은, 밸런스 보정 수단(72)에 의해 컬러 밸런스 보정을 종료한 후에, 재차 색특성 정보 데이터를 산출한다. 이로 인해, 컬러 밸런스 보정에 의해 갱신된 색정보로부터, 대상 색정보의 색특성 정보 데이터를 추출한다.

또한, 화상 처리 장치(800)에서는, 특성 산출 수단(12)에서 얻어진 화소(Pi)에 대한 색특성 정보 데이터(Rn_i)와 수정색 특성 산출 수단(80)에서 얻어진 색특성 정보 데이터(dRn_i)는, 같은 색정보에 관한 대비 정보이든, 다른 색정보에 관한 대비 정보이든 상관없다.

도 20에 나타내는 바와 같이, 추정 화소 선택 수단(70)은, 밝기 대비 정보(RnK_i), 휘도 정보(Ki), 색대비 정보(RnC_i)로부터 인간이 밝게 느껴지는 영역(화이트점 영역)을 추출한다. 밸런스량 산출 수단(71)은, 컬러 밸런스의 편차량을 산출한다. 밸런스 보정 수단(72)은, 이 편차량을 보정하도록 밸런스 보정을 행한다. 수정색 특성 산출 수단(80)은, 재차 각 화소에 있어서의 대상 색정보의 색특성 정보 데이터(dRn_i)를 산출한다. 여기에서는, 특성 산출 수단(12)에서 설명한 바와 같은 처리가 행해진다. 색정보 보정 수단(3)은, 각 화소의 색보정을 실시한다. 이상에 의해, 화상 처리 장치(800)에서는, 처리필 화상을 얻는 구성으로 되어 있다.

이러한 구성으로 함으로써, 화상 처리 장치(800)는, 본 발명의 제6 실시 형 태의 특징인 컬러 밸런스 보정과, 본 발명의 제1 실시 형태의 특징인 인간의 시각 특성에 근접한 색보정의 기능을 겸비할 수 있다.

또한, 여기에서는 본 발명의 제6 실시 형태와 제1 실시 형태를 융합시켰지만, 본 발명의 제6 실시 형태에 본 발명의 제2 실시 형태에서 제5 실시 형태 중 어느 하나를 융합시키는 것도 가능하다. 본 발명의 제6 실시 형태에 본 발명의 제2 실시 형태 또는 제3 실시 형태를 융합시킨 경우, 선택된 화소에 의한 색보정 결과를 기초로, 다른 화소의 색보정을 전파 처리에 의해 추정하게 되고, 화상 전체의 밸런스를 유지한 것보다 고정밀도의 색보정이 가능해진다. 또, 본 발명의 제6 실시 형태에 본 발명의 제4 실시 형태 또는 제5 실시 형태를 융합시킨 경우, 색보정을 행하는 대상을 화소 단위로부터 블록 화소 단위로 변경함으로써, 처리량의 삭감을 행할 수 있다.

(제8 실시 형태)

도 21을 이용하여, 본 발명의 제8 실시 형태로서, 화소에 있어서의 색대비 정보를 기초로 한 컬러 밸런스 보정 및 색보정을 행하는 화상 처리 방법 및 화상 처리 장치(900)에 대해 설명한다.

도 21에, 본 발명의 제8 실시 형태인 화상 처리 장치(900)의 구성을 나타낸다.

이 발명은, 화상 데이터를 처리함으로써 화상 처리를 행하는 장치에 있어서, 본 발명의 제6 실시 형태인 밝기 대비 정보와 색대비 정보에 의해 화상의 컬러 밸런스 보정을 행하는 장치의 특징과, 본 발명의 제1 실시 형태인 색대비에 의해 화 소마다 색보정을 행하는 장치의 특징을 겸비하는 것이다.

도 21에 나타내는 바와 같이, 화상 처리 장치(900)는, 제2 밸런스량 산출 수단(90)과, 제2 밸런스 보정 수단(91)을 구비하는 점에 특징을 갖고 있다.

제2 밸런스량 산출 수단(90)은, 색정보 보정 수단(3)에서 얻어진 대상 화소의 색정보의 보정량을 이용하여, 추정 화소 선택 수단(70)에서 얻어진 추정 화소의 색정보의 그레이축으로부터의 편차량을 산출한다. 제2 밸런스 보정 수단(91)은, 제2 밸런스량 산출 수단(90)에서 얻어진 밸런스 보정량을, 색정보 보정 수단(3)에서 얻어진 각 화소의 색정보의 보정량에 가산한다.

제7 실시 형태에서는, 밸런스 보정 수단(72)에 의해 컬러 밸런스 보정을 종료한 후에, 재차 색특성 정보 데이터를 산출하고, 그 값에 의해 색보정을 실시하고 있다. 그에 대해서, 제8 실시 형태에서는 재차 색특성 정보 데이터는 추출하지 않고, 특성 산출 수단(12)에서 얻어진 색특성 정보 데이터(Rn_i)를 이용하여 보정된 색정보(dCi)에 대해서, 컬러 밸런스 보정을 행하는 구성을 취한 것이다.

여기서, 색정보 보정 수단(3)과 제2 밸런스량 산출 수단(90)에서 대상으로 하는 색정보로서 화소(Pi)에 있어서의 색차(Cbi, Cri)를 이용하는 예에 대해 설명한다.

우선, 정보 산출 수단(10)은, 각 화소(Pi)의 색차(Cbi, Cri)를 산출한다. 다음에, 특성 산출 수단(12)은, 색차(Cbi, Cri)에 대한 색특성 정보 데이터(Rncb_i, Rncr_i)를 계산한다. 이 경우, 색특성 정보 데이터(Rncb_i, Rncr_i)는 색차에 대해서, 제1 실시 형태에서 설명한 바와 같은 순서를 행함에 따라 산출된 다.

색정보 보정 수단(3)은, 이 색특성 정보 데이터(Rncb_i, Rncr_i)를 이용하여, 색차에 대한 보정을 실시한다. 보정된 색차(dCi)를 Cbi_new, Cri_new로 한 경우, 색차 보정량(ΔCbi, ΔCri)은, 각각, ΔCbi=Cbi_new-Cbi, ΔCri=Cri_new-Cri에 의해 구해진다.

제2 밸런스량 산출 수단(90)은, 이 색차 보정량(ΔCbi, ΔCri)을 산출한다. 또한, 추정 화소 선택 수단(70)에서 선택된 추정 화소의 색차의 평균치(Cbc, Crc)에 산출한 색차 보정량(ΔCbi, ΔCri)을 더하여, 색정보 보정 수단(3)에서의 색차 보정을 고려한 밸런스 편차량을 추정한다.

또한, 화상 처리 장치(900)에서는, 도 18의 단계 S54와 같이 밸런스 보정량을 산출할 때에, 소정의 계수(Kr)를 이용한다. 여기서, 이 Kr이 원래의 색차를 고려한 함수에 의해 결정되는 경우에는, 색정보 보정 수단(3)에서 행해진 색차 보정분을 고려하는 것이 바람직하다.

또, 화상 처리 장치(900)에서는, 색보정량(ΔCb, ΔCr)이 소정 이상인지의 여부를 판정하여 밸런스 보정을 실시하는 도 18의 단계 S55에서는, 그 밸런스 보정의 실시 판정을 행할 때에, 색정보 보정 수단(3)에서 실시된 색보정분을 입력 화상의 색차 성분에 부가하여 고려할 필요가 있다.

색보정 컬러 밸런스 편차량 산출 시에, 도 18의 S52와 같이 인간이 밝게 느끼는 화소 영역을 선택하는 경우에는, 각 화소의 밝기 대비 정보나 밝기도 이용되지만, 색정보 보정 수단(3)에서는, 밝기 대비 정보에 대한 보정은 실시되지 않게 설정되어 있다. 한편, 색대비 정보에 대해서는, 보정에 의해 값이 변화하고 있을 가능성이 있지만, 색대비를 전제로 한 색보정을 행하고 있음으로써, 제2 밸런스량 산출 수단(90)에서의 밸런스량 검출에 큰 영향은 없다. 또한, 도 18의 S52와 같이 인간이 밝게 느끼는 화소 영역을 선택하는 경우에는, 색대비 정보(Rncb_i, Rncr_i)에 대한 조건은, 밝기 대비 정보보다 우선도가 낮다. 또, 특성 산출 수단(12)에서의 색대비 정보가 추정 화소 선택 수단(70)에서의 추정 화소 선택에 사용되어도 된다.

또한, 여기에서는, 색정보 보정 수단(3)에 있어서의 보정 대상인 색정보(Ci)와 제2 밸런스량 산출 수단(90)에서 행해진 밸런스 보정량의 대상인 색정보는, 같은 색정보(Ci)를 전제로 하여 설명했다. 한편, 색정보 보정 수단(3)의 대상인 색정보를 채도(Si)로 하고, 제2 밸런스량 산출 수단(90)의 대상인 색정보를 색차(Cri, Cbi)로 하는 바와 같이, 다른 색정보를 대상으로 해도 된다. 이 경우, 정보 산출 수단(10)에서는, 색정보 보정 수단(3)과 제2 밸런스량 산출 수단의 양쪽에서 사용되는 색정보를 각 화소에 대해서 산출할 필요가 있음과 동시에, 색정보 보정 수단(3)에서는, 대상 색정보의 보정이 실시된 후에, 제2 밸런스량 산출 수단(90)에서 사용하는 색정보로 변환하는 기능을 갖는 것이 필요로 된다.

이러한 구성으로 함으로써, 화상 처리 장치(900)는, 본 발명의 제6 실시 형태의 특징인 컬러 밸런스 보정과, 본 발명의 제1 실시 형태의 특징인 인간의 시각 특성에 근접한 색보정의 기능을 겸비할 수 있다. 또한, 재차 색보정을 위한 색특성 정보 데이터를 산출할 필요가 없기 때문에, 처리량의 삭감으로 연결된다.

또한, 여기에서는 본 발명의 제6 실시 형태와 제1 실시 형태를 융합시켰지만, 본 발명의 제6 실시 형태에 본 발명의 제2 실시 형태에서 제5 실시 형태 중 어느 하나를 융합시키는 것도 가능하다. 본 발명의 제6 실시 형태에 본 발명의 제2 실시 형태 또는 제3 실시 형태를 융합시킨 경우, 선택된 화소에 의한 색보정 결과를 기초로, 다른 화소의 색보정을 전파 처리에 의해 추정하게 되고, 화상 전체의 밸런스를 유지한 것보다 고정밀도의 색보정이 가능해진다. 또, 본 발명의 제6 실시 형태에 본 발명의 제4 실시 형태 또는 제5 실시 형태를 융합시킨 경우, 색보정을 행하는 대상을 화소 단위로부터 블록 화소 단위로 변경함으로써, 처리량의 삭감을 행할 수 있다.

(제9 실시 형태)

도 22에서 도 23을 이용하여, 본 발명의 제9 실시 형태로서, 화소에 있어서의 색대비 정보를 기초로, 색정보의 보정을 행하는 화상 처리 방법 및 화상 처리 장치(1005)에 대해 설명한다.

도 22에, 본 발명의 제9 실시 형태인 화상 처리 장치(1005)의 구성을 나타낸다. 또, 도 23에, 본 발명의 제9 실시 형태인 화상 처리 방법의 유저 모드 선택 수단의 적용예를 나타낸다.

이 발명은, 화상 데이터를 처리함으로써, 화상 내의 색정보를 보정하는 장치에 있어서, 유저가 처리 모드를 선택하는 수단을 갖는 것이다.

도 22에 나타내는 바와 같이, 화상 처리 장치(1005)는, 본 발명의 제1 실시 형태에서 제8 실시 형태 중 어느 하나에 기재한 화상 처리 장치로서의 화상 처리 수단(1000)과, 그 처리 결과를 표시하는 표시 디바이스(1002)와, 유저가 처리 모드를 선택하는 유저 모드 선택 수단(1001)으로 구성된다.

이 발명에서는, 화상 처리 수단(1000)에서 행해진 색보정 처리의 처리필 화상을 표시 디바이스(1002)에 표시한다. 유저는, 표시 디바이스(1002)에서의 처리필 화상을 시각적으로 확인하고, 처리 모드를 유저 모드 선택 수단(1001)에 의해 선택한다. 이로 인해, 개개인의 특성에 따른 색보정을 실현하는 것이 가능해진다.

여기서, 표시 디바이스(1002)로서는, 예를 들면, 디지털 스틸 카메라나 디지털 비디오 카메라와 같은 촬영기기의 표시 화면, 디지털 화상을 편집하는 화상 편집 장치의 표시 화면, 모바일 환경하에서 사용하는 휴대 전화, 카 모바일 기기, PDA 등의 표시 화면, 또는 여러 가지 환경하에서 사용되는 대형 영상 표시 기기 등이다. 또, 휴대 전화의 표시 화면으로서는, 메일이나 화상을 표시하는 휴대 전화의 주화면뿐만 아니라, 폴드형 휴대 전화의 시간표시를 행하는 서브 화면이어도 된다.

도 23에, 유저 모드 선택 수단(1001)의 일례를 나타낸다. 도 23에서는, 휴대 전화의 메뉴 표시에 있어서의 유저 모드 선택의 방법을 나타낸다.

이 경우, 유저는 표시 디바이스(1002)를 확인하여, 도 23에 나타나는 바와 같이 「환경 광 보정 레벨의 설정」 메뉴 내의 (1)강모드, (2)중모드, (3)약모드, (4)디폴트 모드 중 어느 한 쪽을 선택한다.

여기서 디폴트 모드란, 각 처리 장치 내의 보정 제어 변수(5), 제어 변수(15), 추정 제어 변수(73)로 나타나는 테이블 데이터 내의 보정 강도나 추정 강 도의 디폴트값을 그대로 사용하는 모드에 상당한다.

처리 모드를 선택함으로써, 유저 모드 선택 수단(1001)으로부터 화상 처리 수단(1000)에서 적용되는 색보정 처리의 강도 레벨을 제어한다. 즉, 각 처리 장치 내의 보정 제어 변수(5), 제어 변수(15), 추정 제어 변수(73)가 포함하는 테이블 데이터 내의 보정 강도나 추정 강도를 제어함으로써, 처리 레벨의 컨트롤을 행한다. 예를 들면, 강모드의 경우, 색보정의 강도를 강하게 하고(보정량을 많게 한다), 약모드의 경우, 색보정의 강도를 약하게 한다(보정량을 적게 한다). 이렇게 함으로써, 인간의 시각 특성에 가까운 인상을 주는 색보정 처리를 행함과 동시에, 또한 각 개인의 겉보기에 따라 레벨을 제어할 수 있다.

또한, 도 23에서는 메뉴 표시에 의한 메뉴 선택의 일례를 나타냈지만, 각 처리 모드에 따른 스위치나 버튼이어도 된다. 또, 도 23에서는 디폴트 모드를 준비했지만, 메뉴 내의 중모드가, 각 처리 장치 내의 보정 제어 변수(5), 제어 변수(15), 추정 제어 변수(73)가 포함하는 디폴트값을 그대로 사용하는 모드여도 된다.

(제10 실시 형태)

도 24와 도 26과 도 27을 이용하여, 본 발명의 제10 실시 형태로서, 화소에 있어서의 색대비 정보를 기초로, 색정보의 보정을 행하는 화상 처리 방법 및 화상 처리 장치(1105)에 대해서 설명한다.

도 24에, 본 발명의 제10 실시 형태인 화상 처리 장치(1105)의 구성을 나타낸다. 또, 도 26에, 본 발명의 제10 실시 형태인 화상 처리 방법에 있어서의 처리 제어 수단의 적용예를 나타낸다.

이 발명은, 화상 데이터를 처리함으로써, 화상 내의 색정보를 보정하는 장치에 있어서, 기기의 사용하는 환경하에서의 환경 광 레벨을 검출하는 환경 광 검출 수단(1101)과, 검출된 환경 광 레벨에 따라 자동적으로 색보정 강도를 제어하는 처리 제어 수단(1100)을 갖는 것이다.

도 24에서 나타내는 바와 같이, 화상 처리 장치(1105)는, 본 발명의 제1 실시 형태에서 제8 실시 형태 중 어느 하나에 기재한 화상 처리 장치로서의 화상 처리 수단(1000)과, 그 처리 결과를 표시하는 표시 디바이스(1002)와, 기기의 사용하는 환경하에서의 환경 광 레벨을 검출하는 환경 광 검출 수단(1101)과, 환경 광 검출 수단(1101)에서 검출된 환경 광 레벨에 따라 화상 처리 수단(1000)에서 실시하는 색보정의 강도를 결정하는 처리 제어 수단(1100)으로 구성된다.

환경 광 검출 수단(1101)에서는, 도 26에 나타나 있는 바와 같이, 소정의 장소에 있는 센서 수광부에서 태양광 등의 환경 광을 검출하는 방법이 생각되지만, 카메라 부착 휴대 전화 등에서는 CCD 카메라 수광부에서 대용해도 된다. 환경 광 검출 수단(1101)에서는, 최저 농도 패턴인 흑색 데이터를 제시했을 때의 휘도와, 최고 농도 패턴인 백색 데이터를 제시했을 때의 휘도로부터, 흑색 데이터의 백색 데이터에 대한 콘트라스트비(ERatio)를 구한다. 또한, 환경 광 레벨의 조도를 센싱하여, 그 값보다 미리 내부에 준비된 테이블 데이터(각 처리 장치 내의 보정 제어 변수(5), 제어 변수(15), 추정 제어 변수(73)로 나타나는 테이블 데이터라도 된다)로부터, 최저 농도 패턴인 흑색 데이터와 최고 농도 패턴인 백색 데이터와의 콘 트라스트비(ERatio)를 환산하는 방법도 가능하다.

처리 제어 수단(1100)은, 산출된 콘트라스트비(ERatio)를 이용하여, 자동적으로 각 처리 장치 내의 보정 제어 변수(5), 제어 변수(15), 추정 제어 변수(73) 등이 포함하는 테이블 데이터의 보정 강도나 추정 강도를 구한다.

이 방법으로서 도 27의 (a)패턴(1), (b)패턴(2), (c)패턴(3)을 설명한다.

(a)에 나타내는 패턴(1)에서는, 백색에 대한 흑색의 콘트라스트비(ERatio)가 소정의 값(도 27에서는 TH=0.2)을 넘은 시점에서 보정 강도나 추정 강도 등의 처리 강도를 디폴트의 강도로 하여 색처리를 행한다. 그 한편, ERatio이 소정의 값(TH)을 넘지 않는 경우는, 처리 강도를 0(처리를 실시하지 않는다)으로 한다.

(b)에 나타내는 패턴(2)은, 소정의 사용시간 간격마다의 ERatio의 평균치(도 26(b)에 있어서의 사선 영역 내)를 산출하고, 이 평균치를 기초로 다음의 처리 강도를 선형적에 변화시킨다. 이 경우, 선형 함수가 아니어도 비선형 함수를 적용해도 가능하다. 또, 소정의 시간 간격마다에서의 ERatio의 값으로 보정 강도를 변화시키는 것도 가능하다. 이렇게 함으로써, 패턴(1)과 비교하여 환경 광의 변동에 대해서 적절히 처리 강도를 제어할 수 있다.

(c)에 나타내는 패턴(3)은, 사용시간에 대한 흑색의 콘트라스트비(ERatio)의 변동에 대해서 리얼타임으로 보정 강도를 변화시키는 것이며, 보다 모바일 환경하에서의 시인성을 향상시키는 것이 가능해진다.

이외에도, 표시 화상 전체에 환경 광의 센싱 기능을 갖게 하고, 표시 디바이스의 영역마다 처리 강도를 바꿈으로써, 일부만 광이 닿고 있는 경우라도 화면 전 체의 시인성을 일정하게 유지한 표시가 가능해진다.

(제11 실시 형태)

도 25와 도 26과 도 27을 이용하여, 본 발명의 제11 실시 형태로서, 화소에 있어서의 색대비 정보를 기초로, 색정보의 보정을 행하는 화상 처리 방법 및 화상 처리 장치(1107)에 대해 설명한다.

도 25에, 본 발명의 제11 실시 형태인 화상 처리 장치(1107)의 구성을 나타낸다. 또, 도 26에, 본 발명의 제10 실시 형태인 화상 처리 방법에 있어서의 처리 제어 수단의 적용예를 나타낸다.

이 발명은, 화상 데이터를 처리함으로써, 화상 내의 색정보를 보정하는 장치에 있어서, 기기의 사용하는 환경하에서의 환경 광 레벨을 검출하는 환경 광 검출 수단(1101)과, 검출된 환경 광 레벨에 따라 자동적으로 색보정 강도를 제어하는 처리 제어 수단(1100)과, 본 발명의 제9 실시 형태의 특징인 유저 모드 선택 수단을 갖는 것이다.

도 25에 나타내는 바와 같이, 화상 처리 장치(1107)는, 본 발명의 제1 실시 형태에서 제8 실시 형태 중 어느 한쪽에 기재한 화상 처리 장치로서의 화상 처리 수단(1000)과, 그 처리 결과를 표시하는 표시 디바이스(1002)와, 기기의 사용하는 환경하에서의 환경 광 레벨을 검출하는 환경 광 검출 수단(1101)과, 환경 광 검출 수단(1101)에서 검출된 환경 광 레벨에 따라 화상 처리 수단(1000)에서 실시하는 색보정의 강도를 결정하는 처리 제어 수단(1100)과, 유저가 처리 모드를 선택하는 유저 모드 선택 수단(1001)으로 구성된다.

환경 광 검출 수단(1101)에서는, 도 26에 나타나 있는 바와 같이, 소정의 장소에 있는 센서 수광부에서 태양광 등의 환경 광을 검출하는 방법이 생각되지만, 카메라 부착 휴대 전화 등에서는 CCD 카메라 수광부로 대용해도 된다. 환경 광 검출 수단(1101)에서는, 최저 농도 패턴인 흑색 데이터를 제시했을 때의 휘도와, 최고 농도 패턴인 백색 데이터를 제시했을 때의 휘도로부터, 흑색 데이터의 백색 데이터에 대한 콘트라스트비(ERatio)를 구한다. 또한, 환경 광 레벨의 조도를 센싱하여, 그 값보다 미리 내부에 준비된 테이블 데이터(각 처리 장치 내의 보정 제어 변수(5), 제어 변수(15), 추정 제어 변수(73)로 나타나는 테이블 데이터라도 된다)로부터, 최저 농도 패턴인 흑색 데이터와 최고 농도 패턴인 백색 데이터와의 콘트라스트비(ERatio)를 환산하는 방법도 가능하다.

처리 제어 수단(1100)은, 산출된 콘트라스트비(ERatio)를 이용하여, 자동적으로 각 처리 장치 내의 보정 제어 변수(5), 제어 변수(15), 추정 제어 변수(73) 등이 포함하는 테이블 데이터의 보정 강도나 추정 강도를 구한한다.

이 방법으로서는, 도 27에 나타낸 바와 같은 처리가 행해진다.

유저는, 표시 디바이스(1002)를 이용하여, 이 자동적으로 제어된 처리필 화상을 시각한다. 또한, 유저는, 유저 모드 선택 수단(1001)을 이용하여 처리 모드를 변경하는, 즉 보정 제어 변수(5), 제어 변수(15), 추정 제어 변수(73) 등이 포함하는 테이블 데이터 내의 데이터를 변경한다. 이로 인해, 환경 광에 따라 자동적으로 처리 강도를 바꿈과 동시에, 유저 개개인의 시인성에의 대응을 도모할 수 있게 된다.

(실시 형태의 효과)

(1)

상기 실시 형태에 의해, 특히 하늘 등의 포화 화상이나 강한 환경 광에 의해 색정보가 소실한 화상 등의 색정보를 인간의 시각 특성에 기초하여 보정하는 것이 가능해지고, 표시 화면의 시인성 향상을 실현하는 것이 가능해진다.

(2)

상기 실시 형태에 있어서의 화상 처리에서는, 색보정 처리의 보정 대상을 선택할 때에, 종래 기술에서 행해지는 영역 추출을 행하지 않는다. 이 때문에, 영역 추출 오차에 의해 생기는 색보정 오차의 발생을 억제하는 것이 가능해진다.

구체적으로는, 도 28에 나타내는 바와 같이 유사한 색정보를 갖는 물체가 서로 겹치는 화상에 있어서, 종래 기술의 영역 추출에서는, 대상 물체(Oa)를 적절히 추출하는 것이 어렵고, 예를 들면, 대상 물체(Oa)와, 그 주위에 위치하는 물체(Oc)를 포함하는 영역(Rb)을 추출하는 결과가 된다. 또한, 종래 기술에서는, 추출한 영역(Rb)에 대해서 색보정이 행해지기 때문에, 대상 물체(Oa)의 경계에 있어서, 색보정 오차가 생기고, 대상 물체(Oa)의 색보정이 적절히 행해지지 않는 결과가 된다.

한편, 본 발명에서는, 영역 추출을 행하지 않기 때문에, 이러한 색보정 오차의 발생을 억제하는 것이 가능해진다.

(3)

상기 실시 형태에 있어서의 화상 처리에서는, 특히, 환경 광 아래에 있어서 밝기의 보정과 색보정이 요구되는 경우에 시인성을 향상시키는 것이 가능해진다.

예를 들면, 실내 환경에 있어서, 가장 휘도가 높은 백색 화소와 가장 휘도가 낮은 흑색 화소의 비(콘트라스트비)가 100：1∼40：1 정도로 시각되는 화상을, 양지 등의 강한 환경 광 아래에서 시각하면, 콘트라스트비가 3：1∼2：1 정도까지 저하하는 것이 알려져 있다.

종래, 환경 광 아래에서의 시인성 향상을 위한 감마 함수에 의한 밝기 보정이 알려져 있다. 구체적으로는, 양지에서 본 화상에 대해서, 흑색 농도 억제를 행하는 감마 함수(아래로 볼록)를 이용하여 밝기 보정이 행해진다.

또한, 색보정을 행하는 경우, 종래에서는, 이하의 〈a〉∼〈c〉의 색보정이 채용된다.

〈a〉화상 전체에 채도 보정(채도 업 보정)을 실시하는 색보정

이 경우, 화상 전체의 채도의 향상은 가능하지만, 부분에 따라서는, 채도의 과잉 보정이 발생한다.

〈b〉보정 대상의 추출(중심 물체인 인물의 절취 등)을 행하고, 추출된 보정 대상에 채도 보정(채도 업 보정)을 실시하는 색보정

이 경우, 추출 오차에 의한 보정 후의 채도의 왜곡(보정된 채도의 불연속성 등)이 발생한다.

〈c〉보정 전후의 밝기의 비율에 기초하여, 채도 보정량을 선형 제어하여 채도 보정을 실시하는 색보정

이 경우, 흑색 농도 억제에 연동하여, 채도 저하가 발생한다. 또, 밝기의 비율의 역수에 연동하여 채도 보정량을 선형 제어하는 경우, 채도 저하를 억제하는 것이 가능해진다. 그러나, 강한 환경 광에 의한 채도 성분의 상실에 대해서는, 선형 제어를 행해도 개선 효과가 작다.

이상과 같이,〈a〉∼〈c〉의 종래의 색보정을 밝기 보정과 함께 실시해도, 충분한 보정을 행하는 것은 어렵다.

그래서, 색보정으로서 본 실시 형태의 색대비 보정에 의해 채도 보정을 실시하면, 보다 색대비가 증가하는 방향으로 채도 보정이 실시되어, 시인성을 향상시키는 것이 가능해진다.

(그 외)

상기 실시 형태에 있어서 설명한 본 발명의 화상 처리 방법 및 화상 처리 장치는, 도 4를 이용하여 설명한 색대비 특성을 이용한 화상 처리 방법 및 화상 처리 장치이다. 따라서, 본 발명의 처리는, 이 색대비 특성에 영향을 받는다.

도 29는, 색대비 특성에 대해 나타내는 것이며, 회색의 배경에 있는 적색 원 중심부에 있는 회색 원의 사이즈에 의존하여 효과가 변동한다. 예를 들면, 중심의 회색 원의 반경이 적색 원과 비교하여 작은 경우, 적색 원 중심의 회색 원을 파랗게 느끼는 색대비 현상은 강해진다(도 29(a) 참조). 그에 대해서, 중심의 회색 원의 반경이 커져 적색 원에 가까워짐에 따라, 적색 원 중심의 회색 원을 파랗게 느끼는 색대비 현상은 약해진다(도 29(b) 참조).

이 때문에, 본 발명의 화상 처리 방법 또는 화상 처리 장치에서는, 도 29에 나타내는 크기가 다른 단순 패턴을 처리한 경우, 색보정의 효과가 변동하는 특징을 갖고 있다.

또, 대상으로 하는 색정보의 색특성 정보 데이터(Rn_i)는, 본 발명의 제1 실시 형태에서 나타낸 (1)주변의 대표 색정보에 대한 대상 화소의 색정보의 비와 (2)대상 화소의 색정보와 주변의 대표 색정보의 차분량 이외에도, 이들 (1)과 (2)를 소정의 함수에 의해 변환하여 얻어지는 값이어도 된다.

또, 각 처리 장치 내의 테이블 데이터를 포함하는 보정 제어 변수(5), 제어 변수(15), 추정 제어 변수(73) 등은, 처리 장치 내에 구성되어 있어도 되고, RAM과 같은 외부 메모리로서 테이블 데이터를 격납하는 것, 또는 외부로부터의 입력 수단으로부터 테이블 데이터를 제공하는 것이어도 된다.

상기 실시 형태에 있어서 설명한 본 발명의 화상 처리 방법 및 화상 처리 장치는, 예를 들면, 컴퓨터, 텔레비젼, 디지털 카메라, 휴대 전화, PDA, 카 TV 등, 화상을 취급하는 기기에 내장, 또는 접속하여 이용되는 장치이며, LSI 등의 집적회로로서 실현된다.

보다 자세히는, 상기 각 실시 형태의 화상 처리 장치(100, 200, 400, 500, 600, 700, 800, 900), 유저 선택 모드 수단(1001), 처리 제어 수단(1100), 환경 광 검출 수단(1101)의 각 기능 블록(도 1, 도 7, 도 12, 도 14, 도 16, 도 17, 도 20, 도 21, 도 22, 도 24, 도 25 참조)은, 개별적으로 1칩화시켜도 되고, 일부 또는 모두를 포함하도록 1칩화되어도 된다. 또한, 여기에서는, LSI로 했지만, 집적도의 차이에 의해, IC, 시스템 LSI, 슈퍼 LSI, 울트라 LSI라고 호칭되기도 한다.

또, 집적회로의 방법에는 LSI에 한정하는 것이 아니고, 전용 회로 또는 범용 프로세서로 실현되는 것도 가능하다. LSI 제조 후에, 프로그램하는 것이 가능한 FPGA(Field Programmable Gate Array)나, LSI 내부의 회로 셀의 접속이나 설정을 재구성 가능한 리컨피규러불·프로세서를 이용하는 것도 가능하다.

또한, 반도체 기술의 진보 또는 파생하는 별도의 기술에 의해 LSI로 옮겨지는 집적회로화의 기술이 등장하면, 당연히, 그 기술을 이용하여 기능 블록의 집적화를 행해도 된다. 바이오 기술의 적응 등이 가능성으로서 있을 수 있다.

또, 상기 각 실시 형태의 각 기능 블록의 처리는, 프로그램에 의해 실현되는 것이어도 된다. 예를 들면, 도 1, 도 7, 도 12, 도 14, 도 16, 도 17, 도 20, 도 21, 도 22, 도 24, 도 25의 각 기능 블록의 처리는, 컴퓨터에 있어서, 중앙 연산 장치(CPU)에 의해 행해져도 된다. 또, 각각의 처리를 행하기 위한 프로그램은, 하드 디스크, ROM 등의 기억장치에 격납되고 있고, ROM에 있어서, 또는 RAM에 판독되어 실행되어도 된다.

[제1 부기]

본 발명은, 다음과 같이 표현하는 것도 가능하다.

＜제1 부기의 내용＞

(부기 1)

입력된 화상 신호의 색보정을 행하는 화상 처리 방법으로서,

상기 화상 신호의 색정보와 밝기 정보를 산출하는 정보 산출 단계와,

상기 밝기 정보와 색정보에 따라 시각 특성 정보를 산출하는 특성 산출 단계와,

상기 화상 신호로부터, 제3 색정보의 보정의 대상이 되는 복수 화소를 선택하는 화소 선택 단계와,

상기 화소 선택 단계에서 선택된 상기 복수 화소의 색정보의 소정의 기준치로부터의 편차량을 검출하는 편차량 산출 단계와,

상기 편차량 산출 단계에서 얻어진 상기 편차량을 기초로, 상기 화상 신호의 상기 제3 색정보 보정을 행하는 제3 색정보 보정 단계와,

상기 제3 색정보 보정 단계에서 얻어진 색보정 후의 화상 신호에 대해서, 또한 제2 시각 특성 정보를 산출하는 제2 특성 산출 단계와,

상기 제2 특성 산출 단계에서 얻어진 상기 제2 시각 특성 정보를 기초로, 상기 색보정 후의 화상 신호에 대해서, 제4 색정보 보정을 행하는 제4 색정보 보정 단계와,

상기 제4 색정보 보정 단계에서 보정된 색정보를 기초로, 색보정 후의 화상 신호를 출력하는 출력 단계를 구비하는 것을 특징으로 하는 화상 처리 방법.

(부기 2)

입력된 화상 신호의 색보정을 행하는 화상 처리 방법으로서,

상기 화상 신호의 색정보와 밝기 정보를 산출하는 정보 산출 단계와,

상기 밝기 정보와 색정보와에 따라 시각 특성 정보를 산출하는 특성 산출 단계와,

상기 시각 특성 정보를 기초로, 상기 화상 신호의 제5 색정보 보정을 행하는 제5 색정보 보정 단계와,

상기 시각 특성 정보를 기초로, 상기 화상 신호로부터, 복수 화소를 선택하는 화소 선택 단계와,

상기 제5 색정보 보정 후의 상기 화상 신호에 있어서의, 상기 화소 선택 단계에서 선택된 상기 복수 화소의 색정보의 소정의 기준치로부터의 편차량을 검출하는 편차량 산출 단계와,

상기 편차량 산출 단계에서 얻어진 상기 편차량을 기초로, 상기 제5 색정보 보정 후의 상기 화상 신호에 대해서 제6 색정보 보정을 행하는 제6 색정보 보정 단계와,

상기 제6 색정보 보정 단계에서 보정된 색정보를 기초로, 색보정 후의 화상 신호를 출력하는 출력 단계를 구비하는 것을 특징으로 하는 화상 처리 방법.

(부기 3)

상기 특성 산출 단계는, 대상으로 하는 화소의 밝기 정보와 색정보를, 그 주위의 영역 내의 밝기 정보와 색정보를 대표하는 주위 밝기 정보와 주위 색정보와의 각각과 비교하는 밝기 대비 처리와 색대비 처리를 포함하는 것을 특징으로 하는, 부기 1 또는 2에 기재의 화상 처리 방법.

(부기 4)

입력된 화상 신호의 색보정을 행하는 화상 처리 장치로서,

상기 화상 신호의 색정보와 밝기 정보를 산출하는 정보 산출 수단과,

상기 밝기 정보와 색정보에 따라 시각 특성 정보를 산출하는 특성 산출 수단과,

상기 화상 신호로부터, 제3 색정보의 보정의 대상이 되는 복수 화소를 선택하는 화소 선택 수단과,

상기 화소 선택 수단에서 선택된 상기 복수 화소의 색정보의 소정의 기준치로부터의 편차량을 검출하는 편차량 산출 수단과,

상기 편차량 산출 수단에서 얻어진 상기 편차량을 기초로, 상기 화상 신호의 상기 제3 색정보 보정을 행하는 제3 색정보 보정 수단과,

상기 제3 색정보 보정 수단에서 얻어진 색보정 후의 화상 신호에 대해서, 제2 시각 특성 정보를 더 산출하는 제2 특성 산출 수단과,

상기 제2 특성 산출 수단에서 얻어진 상기 제2 시각 특성 정보를 기초로, 상기 색보정 후의 화상 신호에 대해서, 제4 색정보 보정을 행하는 제4 색정보 보정 수단과,

상기 제4 색정보 보정 수단에서 보정된 색정보를 기초로, 색보정 후의 화상 신호를 출력하는 출력 수단을 구비하는 것을 특징으로 하는 화상 처리 장치.

(부기 5)

입력된 화상 신호의 색보정을 행하는 화상 처리 장치로서,

상기 화상 신호의 색정보와 밝기 정보를 산출하는 정보 산출 수단과

상기 밝기 정보와 색정보에 따라 시각 특성 정보를 산출하는 특성 산출 수단과,

상기 시각 특성 정보를 기초로, 상기 화상 신호의 제5 색정보 보정을 행하는 제5 색정보 보정 수단과,

상기 시각 특성 정보를 기초로, 상기 화상 신호로부터, 복수 화소를 선택하는 화소 선택 수단과,

상기 제5 색정보 보정 후의 상기 화상 신호에 있어서의, 상기 화소 선택 수단에서 선택된 상기 복수 화소의 색정보의 소정의 기준치로부터의 편차량을 검출하는 편차량 산출 수단과,

상기 편차량 산출 수단에서 얻어진 상기 편차량을 기초로, 상기 제5 색정보 보정 후의 상기 화상 신호에 대해서 제6 색정보 보정을 행하는 제6 색정보 보정 수단과,

상기 제6 색정보 보정 수단에서 보정된 색정보를 기초로, 색보정 후의 화상 신호를 출력하는 출력 수단을 구비하는 것을 특징으로 하는 화상 처리 장치.

(부기 6)

입력된 화상 신호의 색보정을 행하는 화상 처리 방법을 컴퓨터에 의해 행하기 위한 화상 처리 프로그램으로서,

상기 화상 처리 방법은,

상기 화상 신호의 색정보와 밝기 정보를 산출하는 정보 산출 단계와,

상기 밝기 정보와 색정보에 따라 시각 특성 정보를 산출하는 특성 산출 단계와,

상기 화상 신호로부터, 제3 색정보의 보정의 대상이 되는 복수 화소를 선택하는 화소 선택 단계와,

상기 화소 선택 단계에서 선택된 상기 복수 화소의 색정보의 소정의 기준치 로부터의 편차량을 검출하는 편차량 산출 단계와,

상기 편차량 산출 단계에서 얻어진 상기 편차량을 기초로, 상기 화상 신호의 상기 제3 색정보 보정을 행하는 제3 색정보 보정 단계와,

상기 제3 색정보 보정 단계에서 얻어진 색보정 후의 화상 신호에 대해서, 또한 제2 시각 특성 정보를 산출하는 제2 특성 산출 단계와,

상기 제2 특성 산출 단계에서 얻어진 상기 제2 시각 특성 정보를 기초로, 상기 색보정 후의 화상 신호에 대해서, 제4 색정보 보정을 행하는 제4 색정보 보정 단계와,

상기 제4 색정보 보정 단계에서 보정된 색정보를 기초로, 색보정 후의 화상 신호를 출력하는 출력 단계를 구비하는 것을 특징으로 하는 화상 처리 프로그램.

(부기 7)

입력된 화상 신호의 색보정을 행하는 화상 처리 방법을 컴퓨터에 의해 행하기 위한 화상 처리 프로그램으로서,

상기 화상 처리 방법은,

상기 화상 신호의 색정보와 밝기 정보를 산출하는 정보 산출 단계와,

상기 밝기 정보와 색정보에 따라 시각 특성 정보를 산출하는 특성 산출 단계와,

상기 시각 특성 정보를 기초로, 상기 화상 신호의 제5 색정보 보정을 행하는 제5 색정보 보정 단계와,

상기 시각 특성 정보를 기초로, 상기 화상 신호로부터, 복수 화소를 선택하 는 화소 선택 단계와,

상기 제5 색정보 보정 후의 상기 화상 신호에 있어서의, 상기 화소 선택 단계에서 선택된 상기 복수 화소의 색정보의 소정의 기준치로부터의 편차량을 검출하는 편차량 산출 단계와,

상기 편차량 산출 단계에서 얻어진 상기 편차량을 기초로, 상기 제5 색정보 보정 후의 상기 화상 신호에 대해서 제6 색정보 보정을 행하는 제6 색정보 보정 단계와,

상기 제6 색정보 보정 단계에서 보정된 색정보를 기초로, 색보정 후의 화상 신호를 출력하는 출력 단계를 구비하는 것을 특징으로 하는 화상 처리 프로그램.

(부기 8)

입력된 화상 신호의 색보정을 행하는 집적회로로서,

상기 화상 신호의 색정보와 밝기 정보를 산출하는 정보 산출부와,

상기 밝기 정보와 색정보에 따라 시각 특성 정보를 산출하는 특성 산출부와,

상기 화상 신호로부터, 제3 색정보의 보정의 대상이 되는 복수 화소를 선택하는 화소 선택부와,

상기 화소 선택부에서 선택된 상기 복수 화소의 색정보의 소정의 기준치로부터의 편차량을 검출하는 편차량 산출부와,

상기 편차량 산출부에서 얻어진 상기 편차량을 기초로, 상기 화상 신호의 상기 제3 색정보 보정을 행하는 제3 색정보 보정부와,

상기 제3 색정보 보정부에서 얻어진 색보정 후의 화상 신호에 대해서, 또한 제2 시각 특성 정보를 산출하는 제2 특성 산출부와,

상기 제2 특성 산출부에서 얻어진 상기 제2 시각 특성 정보를 기초로, 상기 색보정 후의 화상 신호에 대해서, 제4 색정보 보정을 행하는 제4 색정보 보정부와,

상기 제4 색정보 보정부에서 보정된 색정보를 기초로, 색보정 후의 화상 신호를 출력하는 출력부를 구비하는 것을 특징으로 하는 집적회로.

(부기 9)

입력된 화상 신호의 색보정을 행하는 집적회로로서,

상기 화상 신호의 색정보와 밝기 정보를 산출하는 정보 산출부와,

상기 밝기 정보와 색정보와에 따라 시각 특성 정보를 산출하는 특성 산출부와,

상기 시각 특성 정보를 기초로, 상기 화상 신호의 제5 색정보 보정을 행하는 제5 색정보 보정부와,

상기 시각 특성 정보를 기초로, 상기 화상 신호로부터, 복수 화소를 선택하는 화소 선택부와,

상기 제5 색정보 보정 후의 상기 화상 신호에 있어서의, 상기 화소 선택부에서 선택된 상기 복수 화소의 색정보의 소정의 기준치로부터의 편차량을 검출하는 편차량 산출부와,

상기 편차량 산출부에서 얻어진 상기 편차량을 기초로, 상기 제5 색정보 보정 후의 상기 화상 신호에 대해서 제6 색정보 보정을 행하는 제6 색정보 보정부와,

상기 제6 색정보 보정부에서 보정된 색정보를 기초로, 색보정 후의 화상 신 호를 출력하는 출력부를 구비하는 것을 특징으로 하는 집적회로.

＜제1 부기의 설명＞

부기 1에 기재의 화상 처리 방법은, 입력된 화상 신호의 색보정을 행하는 화상 처리 방법으로서, 정보 산출 단계와, 특성 산출 단계와, 화소 선택 단계와, 편차량 산출 단계와, 제3 색정보 보정 단계와, 제2 특성 산출 단계와, 제4 색정보 보정 단계와, 출력 단계를 구비하는 것이다. 정보 산출 단계는, 화상 신호의 색정보와 밝기 정보를 산출한다. 특성 산출 단계는, 밝기 정보와 색정보와에 따라 시각 특성 정보를 산출한다. 화소 선택 단계는, 화상 신호로부터, 제3 색정보의 보정의 대상이 되는 복수 화소를 선택한다. 편차량 산출 단계는, 화소 선택 단계에서 선택된 복수 화소의 색정보의 소정의 기준치로부터의 편차량을 검출한다. 제3 색정보 보정 단계는, 편차량 산출 단계에서 얻어진 편차량을 기초로, 화상 신호의 제3 색정보 보정을 행한다. 제2 특성 산출 단계는, 제3 색정보 보정 단계에서 얻어진 색보정 후의 화상 신호에 대해서, 또한 제2 시각 특성 정보를 산출한다. 제4 색정보 보정 단계는, 제2 특성 산출 단계에서 얻어진 제2 시각 특성 정보를 기초로, 색보정 후의 화상 신호에 대해서, 제4 색정보 보정을 행한다. 출력 단계는, 제4 색정보 보정 단계에서 보정된 색정보를 기초로, 색보정 후의 화상 신호를 출력한다.

여기서, 소정의 기준치로부터의 편차량이란, 예를 들면, 색정보의 무채도축, 그레이축으로부터의 편차량이어도 된다(이하, 이 란에 있어서 동일). 또, 제3 색정보 보정이란, 이른바 컬러 밸런스 보정으로 불리는 것이어도 된다.

부기 1의 화상 처리 방법의 일례에서는, 대상 화소의 주위에 설정된 주위 영 역 내(예를 들면, 시야 영역 내)의 휘도를 대표하는 대표 휘도와 대상 화소의 휘도 정보를 비교하는 명도 대비 정보를 기초로, 인간의 관심이 높다고 생각되는 영역 또는 화소가 선택된다. 또한, 얻어진 영역 내의 화소에 대한 색대비를 산출하고, 그 색대비로부터 영역 내의 색정보의 그레이축으로부터의 편차량을 검출한다. 또한, 검출된 편차량에 기초하여, 화상 전체의 색보정을 행한다.

이상의 부기 1의 화상 처리 방법에서는, 색대비에 의해 인간이 밝게 느끼는 영역을 꺼내고, 그 영역에서의 밸런스를 유지하여 화상 전체의 색보정을 행한다. 이 때문에, 화상 추출을 행할 필요가 없고, 또 추출 오차에 의해 생기는 보정 오차 등의 폐해도 억제할 수 있다.

또한, 이 발명에서는, 예를 들면, 발명 1의 효과를 나타내고, 보다 적절한 색처리를 행하는 것이 가능해진다.

부기 2에 기재의 화상 처리 방법은, 입력된 화상 신호의 색보정을 행하는 화상 처리 방법으로서, 정보 산출 단계와, 특성 산출 단계와, 제5 색정보 보정 단계와, 화소 선택 단계와, 편차량 산출 단계와, 제6 색정보 보정 단계와, 출력 단계를 구비하고 있다. 정보 산출 단계는, 화상 신호의 색정보와 밝기 정보를 산출한다. 특성 산출 단계는, 밝기 정보와 색정보에 따라 시각 특성 정보를 산출한다. 제5 색정보 보정 단계는, 시각 특성 정보를 기초로, 화상 신호의 제5 색정보 보정을 행한다. 화소 선택 단계는, 시각 특성 정보를 기초로, 화상 신호로부터, 복수 화소를 선택한다. 편차량 산출 단계는, 제5 색정보 보정 후의 화상 신호에 있어서의, 화소 선택 단계에서 선택된 복수 화소의 색정보의 소정의 기준치로부터의 편차량을 검출한다. 제6 색정보 보정 단계는, 편차량 산출 단계에서 얻어진 편차량을 기초로, 제5 색정보 보정 후의 화상 신호에 대해서 제6 색정보 보정을 행한다. 출력 단계는, 제6 색정보 보정 단계에서 보정된 색정보를 기초로, 색보정 후의 화상 신호를 출력한다.

이 발명의 일례에서는, 대상 화소의 주위에 설정된 주위 영역 내(예를 들면, 시야 영역 내)의 휘도를 대표하는 대표 휘도와 대상 화소의 휘도 정보를 비교하는 명도 대비 정보를 기초로, 인간의 관심이 높다고 생각되는 영역 또는 화소가 선택된다. 또한, 얻어진 영역 내의 화소에 대한 색대비를 산출하고, 그 색대비로부터 영역 내의 색정보의 그레이축으로부터의 편차량을 검출한다. 또한, 검출된 편차량에 기초하여, 화상 전체의 색보정을 행한다.

부기 2의 화상 처리 방법에서는, 색대비에 의해 인간이 밝게 느끼는 영역을 꺼내고, 그 영역에서의 밸런스를 유지하여 화상 전체의 색보정을 행한다. 이 때문에, 화상 추출을 행할 필요가 없고, 또 추출 오차에 의해 생기는 보정 오차 등의 폐해도 억제할 수 있다.

또한, 부기 2의 화상 처리 방법에서는, 예를 들면, 부기 1의 화상 처리 방법의 효과를 나타내고, 보다 적절한 색처리를 행하는 것이 가능해진다. 또, 부기 1의 화상 처리 방법과 달리, 편차량을 이용한 색보정(밸런스 보정) 후에 시각 특성 정보의 산출을 행할 필요가 없다.

부기 3에 기재의 화상 처리 방법은, 부기 1 또는 2의 화상 처리 방법 중 어느 하나로서, 특성 산출 단계는, 대상으로 하는 화소의 밝기 정보와 색정보를, 그 주위의 영역 내의 밝기 정보와 색정보를 대표하는 주위 밝기 정보와 주위 색정보의 각각과 비교하는 밝기 대비 처리와 색대비 처리를 포함하는 것을 특징으로 한다.

부기 4 또는 5에 기재의 화상 처리 장치는, 부기 1 또는 2에 기재의 화상 처리 방법과 같은 효과를 나타낸다.

부기 6 또는 7에 기재의 화상 처리 프로그램은, 부기 1 또는 2에 기재의 화상 처리 방법과 같은 효과를 나타낸다.

부기 8 또는 9에 기재의 집적회로는, 부기 1 또는 2에 기재의 화상 처리 방법과 같은 효과를 나타낸다.

본 발명은, 보다 자연스럽게 화상의 색보정을 행함과 동시에, 간이한 구성을 이용한 화상 처리를 실현하는 것이 요구되는 분야에 있어서 화상 처리 방법, 표시 화상 처리 방법, 화상 처리 장치, 화상 처리 프로그램 및 그 화상 처리 장치를 포함하는 집적회로로서 유용하다.

Claims (19)

1. 입력된 화상 신호의 색정보 보정을 행하는 화상 처리 방법으로서,

   상기 화상 신호의 색정보를 산출하는 정보 산출 단계와,

   상기 화상 신호에 의해 구성되는 2차원 화상 영역에 포함되는 제1 영역의 색정보와, 상기 제1 영역의 주위에 존재하는 제2 영역의 색정보를 대비하여, 대비량을 산출하는 특성 산출 단계와,

   상기 대비량을 이용하여, 상기 제1 영역의 색정보를 상기 제2 영역의 색정보와의 대비가 강조되는 방향으로 보정하는 색정보 보정 단계와,

   보정된 상기 제1 영역을 포함하는 화상 신호를 출력하는 출력 단계를 구비하는, 화상 처리 방법.
2. 청구항 1에 있어서, 상기 화상 신호로부터, 각각 적어도 1개의 화소를 포함하고, 제1 색정보 보정의 대상이 되는 복수의 대상 영역을 선택하는 영역 선택 단계를 더 구비하고,

   상기 정보 산출 단계는, 입력된 상기 화상 신호의 상기 색정보와 밝기 정보를 산출하는 것이며,

   상기 특성 산출 단계는, 상기 영역 선택 단계에서 선택된 상기 복수의 대상 영역의 색정보와 밝기 정보를, 상기 복수의 대상 영역의 주위에 존재하는 복수의 주위 영역의 색정보와 밝기 정보의 각각과 대비하여, 대비량을 산출하는 것이며,

   상기 색정보 보정 단계는, 제1 색정보 보정 단계와 제2 색정보 보정 단계를 갖는 것이며,

   상기 제1 색정보 보정 단계는, 상기 대비량을 이용하여, 상기 복수의 대상 영역의 색정보를 상기 복수의 주위 영역의 색정보와의 대비가 강조되는 방향으로 보정하는 상기 제1 색정보 보정을 행하는 것이며,

   상기 제2 색정보 보정 단계는, 상기 복수의 대상 영역 이외의 영역에 대해서, 상기 제1 색정보 보정에 관한 정보를 이용하여, 제2 색정보 보정을 행하는 것이며,

   상기 출력 단계는, 상기 제1 색정보 보정 단계와 상기 제2 색정보 보정 단계에서 보정된 영역을 포함하는 화상 신호를 출력하는 것인, 화상 처리 방법.
3. 청구항 2에 있어서, 상기 영역 선택 단계는, 상기 제1 색정보 보정의 대상으로 하는 영역의 영역 위치로부터 소정의 간격폭에 위치하는 영역을 선택하는 단계를 포함하는 것을 특징으로 하는 화상 처리 방법.
4. 청구항 2에 있어서, 상기 영역 선택 단계는, 각 영역의 밝기 정보와 색정보에 관한 시각 특성 정보를 사용하여, 또는 밝기 정보만에 관한 시각 특성 정보를 사용하여, 상기 제1 색정보 보정의 대상이 되는 복수의 대상 영역을 선택하는 단계를 포함하는 것을 특징으로 하는 화상 처리 방법.
5. 청구항 2에 있어서, 상기 제2 색정보 보정 단계는, 상기 제1 색정보 보정 단계에서 보정된 상기 복수의 대상 영역의 색정보를 기초로, 상기 복수의 대상 영역의 주변 영역에 색정보를 차례차례 전파시켜 감으로써 상기 주변 영역의 색정보의 보정을 행하는 것을 특징으로 하는 화상 처리 방법.
6. 입력 수단에 의한 처리 모드의 선택을 접수하는 처리 모드 접수 단계와,

   상기 처리 모드 접수 단계에서 얻어진 상기 처리 모드에 따라서, 청구항 1 또는 청구항 2에 기재된 화상 처리 방법을 실행하는 화상 처리 실행 단계와,

   상기 화상 처리 실행 단계에 의해 출력되는 색정보 보정 후의 화상 신호를 표시 수단에 표시하는 표시 단계를 구비하는 것을 특징으로 하는 표시 화상 처리 방법.
7. 화상 신호를 표시하는 표시 수단에 조사되는 환경 광을 검출하는 환경 광 검출 단계와,

   상기 환경 광 검출 단계가 검출하는 상기 환경 광에 따라서, 처리 모드를 결정하는 처리 모드 결정 단계와,

   상기 처리 모드 결정 단계에서 결정된 처리 모드에 따라서, 청구항 1 또는 청구항 2에 기재된 화상 처리 방법을 실행하는 화상 처리 실행 단계와,

   상기 화상 처리 실행 단계에 의해 출력되는 색정보 보정 후의 화상 신호를 표시 수단에 표시하는 표시 단계를 구비하는 것을 특징으로 하는 표시 화상 처리 방법.
8. 청구항 6에 있어서, 상기 처리 모드 접수 단계는, 상기 색정보를 보정할 때의 강도를, 미리 설정된 복수의 강도로부터 선택하는 것을 특징으로 하는 표시 화상 처리 방법.
9. 청구항 7에 있어서, 상기 처리 모드 결정 단계는, 상기 환경 광 검출 단계에서 얻어진 환경 광의 강도가 소정의 임계값을 넘는 경우에, 상기 색정보를 보정하는 처리를 유효하게 하도록 동작하는 것을 특징으로 하는 표시 화상 처리 방법.
10. 청구항 7에 있어서, 상기 처리 모드 결정 단계는, 상기 환경 광 검출 단계에서 얻어진 환경 광의 강도에 따라서, 소정의 함수에 의해 상기 색정보를 보정하는 강도를 변화시키도록 동작하는 것을 특징으로 하는 표시 화상 처리 방법.
11. 청구항 7에 있어서, 상기 처리 모드 결정 단계는, 상기 환경 광 검출 단계에서 얻어진 환경 광의 시간적 변동에 따라서, 소정의 함수에 의해 상기 색정보를 보정하는 강도를 시간적으로 변화시키도록 동작하는 것을 특징으로 하는 표시 화상 처리 방법.
12. 청구항 7에 있어서, 상기 처리 모드 결정 단계는, 상기 표시 수단의 표시 영 역에 포함되는 복수의 영역에 있어서, 상기 환경 광 검출 단계에서 얻어진 환경 광의 강도에 따라서, 상기 색정보를 보정하는 강도를 상기 표시 영역에 포함되는 복수의 영역마다 제어하는 것을 특징으로 하는 표시 화상 처리 방법.
13. 청구항 1에 있어서, 상기 색정보의 보정은, 색대비 현상을 발생하는 소정의 패턴의 크기의 변동에 따라서, 색정보 보정의 강도가 증감하도록 동작하는 것을 특징으로 하는 화상 처리 방법.
14. 입력된 화상 신호의 색정보 보정을 행하는 화상 처리 장치로서,

    상기 화상 신호의 색정보를 산출하는 정보 산출 수단과,

    상기 화상 신호에 의해 구성되는 2차원 화상 영역에 포함되는 제1 영역의 색정보와, 상기 제1 영역의 주위에 존재하는 제2 영역의 색정보를 대비하여, 대비량을 산출하는 특성 산출 수단과,

    상기 대비량을 이용하여, 상기 제1 영역의 색정보를 상기 제2 영역의 색정보와의 대비가 강조되는 방향으로 보정하는 색정보 보정 수단과,

    보정된 상기 제1 영역을 포함하는 화상 신호를 출력하는 출력 수단을 구비하는 것을 특징으로 하는 화상 처리 장치.
15. 청구항 14에 있어서, 상기 화상 신호로부터, 각각 적어도 1개의 화소를 포함하고, 제1 색정보 보정의 대상이 되는 복수의 대상 영역을 선택하는 영역 선택 수 단을 더 구비하고,

    상기 정보 산출 수단은, 입력된 상기 화상 신호의 상기 색정보와 밝기 정보를 산출하는 것이며,

    상기 특성 산출 수단은, 상기 영역 선택 수단에서 선택된 상기 복수의 대상 영역의 색정보와 밝기 정보를, 상기 복수의 대상 영역의 주위에 존재하는 복수의 주위 영역의 색정보와 밝기 정보와의 각각과 대비하여, 대비량을 산출하는 것이며,

    상기 색정보 보정 수단은, 제1 색정보 보정 수단과 제2 색정보 보정 수단을 갖는 것이며,

    상기 제1 색정보 보정 수단은, 상기 대비량을 이용하여, 상기 복수의 대상 영역의 색정보를 상기 복수의 주위 영역의 색정보와의 대비가 강조되는 방향으로 보정하는 상기 제1 색정보 보정을 행하는 것이며,

    상기 제2 색정보 보정 수단은, 상기 복수의 대상 영역 이외의 영역에 대해서, 상기 제1 색정보 보정에 관한 정보를 이용하여, 제2 색정보 보정을 행하는 것이며,

    상기 출력 수단은, 상기 제1 색정보 보정 수단과 상기 제2 색정보 보정 수단으로 보정된 영역을 포함하는 화상 신호를 출력하는 것인, 화상 처리 장치.
16. 입력된 화상 신호의 색정보 보정을 행하는 화상 처리 방법을 컴퓨터에 의해 행하기 위한 화상 처리 프로그램으로서,

    상기 화상 처리 방법은,

    상기 화상 신호의 색정보를 산출하는 정보 산출 단계와,

    상기 화상 신호에 의해 구성되는 2차원 화상 영역에 포함되는 제1 영역의 색정보와, 상기 제1 영역의 주위에 존재하는 제2 영역의 색정보를 대비하여, 대비량을 산출하는 특성 산출 단계와,

    상기 대비량을 이용하여, 상기 제1 영역의 색정보를 상기 제2 영역의 색정보와의 대비가 강조되는 방향으로 보정하는 색정보 보정 단계와,

    보정된 상기 제1 영역을 포함하는 화상 신호를 출력하는 출력 단계를 구비하는, 화상 처리 프로그램.
17. 청구항 16에 있어서, 상기 화상 신호로부터, 각각 적어도 1개의 화소를 포함하고, 제1 색정보 보정의 대상으로 하는 복수의 대상 영역을 선택하는 영역 선택 단계를 더 구비하고,

    상기 정보 산출 단계는, 입력된 상기 화상 신호의 상기 색정보와 밝기 정보를 산출하는 것이며,

    상기 특성 산출 단계는, 상기 영역 선택 단계에서 선택된 상기 복수의 대상 영역의 색정보와 밝기 정보를, 상기 복수의 대상 영역의 주위에 존재하는 복수의 주위 영역의 색정보와 밝기 정보와의 각각과 대비하여, 대비량을 산출하는 것이며,

    상기 색정보 보정 단계는, 제1 색정보 보정 단계와 제2 색정보 보정 단계를 갖는 것이며,

    상기 제1 색정보 보정 단계는, 상기 대비량을 이용하여, 상기 복수의 대상 영역의 색정보를 상기 복수의 주위 영역의 색정보와의 대비가 강조되는 방향으로 보정하는 상기 제1 색정보 보정을 행하는 것이며,

    상기 제2 색정보 보정 단계는, 상기 복수의 대상 영역 이외의 영역에 대해서, 상기 제1 색정보 보정에 관한 정보를 이용하여, 제2 색정보 보정을 행하는 것이며,

    상기 출력 단계는, 상기 제1 색정보 보정 단계와 상기 제2 색정보 보정 단계에서 보정된 영역을 포함하는 화상 신호를 출력하는 것인, 화상 처리 프로그램.
18. 입력된 화상 신호의 색정보 보정을 행하는 집적회로로서,

    상기 화상 신호의 색정보를 산출하는 정보 산출부와,

    상기 화상 신호에 의해 구성되는 2차원 화상 영역에 포함되는 제1 영역의 색정보와, 상기 제1 영역의 주위에 존재하는 제2 영역의 색정보를 대비하여, 대비량을 산출하는 특성 산출부와,

    상기 대비량을 이용하여, 상기 제1 영역의 색정보를 상기 제2 영역의 색정보와의 대비가 강조되는 방향으로 보정하는 색정보 보정부와,

    보정된 상기 제1 영역을 포함하는 화상 신호를 출력하는 출력부를 구비하는, 집적회로.
19. 청구항 18에 있어서, 상기 화상 신호로부터, 각각 적어도 1개의 화소를 포함하고, 제1 색정보 보정의 대상이 되는 복수의 대상 영역을 선택하는 영역 선택부를 더 구비하고,

    상기 정보 산출부는, 입력된 상기 화상 신호의 상기 색정보와 밝기 정보를 산출하는 것이며,

    상기 특성 산출부는, 상기 영역 선택부에서 선택된 상기 복수의 대상 영역의 색정보와 밝기 정보를, 상기 복수의 대상 영역의 주위에 존재하는 복수의 주위 영역의 색정보와 밝기 정보와의 각각과 대비하여, 대비량을 산출하는 것이며,

    상기 색정보 보정부는, 제1 색정보 보정부와 제2 색정보 보정부를 갖는 것이며,

    상기 제1 색정보 보정부는, 상기 대비량을 이용하여, 상기 복수의 대상 영역의 색정보를 상기 복수의 주위 영역의 색정보와의 대비가 강조되는 방향으로 보정하는 상기 제1 색정보 보정을 행하는 것이며,

    상기 제2 색정보 보정부는, 상기 복수의 대상 영역 이외의 영역에 대해서, 상기 제1 색정보 보정에 관한 정보를 이용하여, 제2 색정보 보정을 행하는 것이며,

    상기 출력부는, 상기 제1 색정보 보정부와 상기 제2 색정보 보정부로 보정된 영역을 포함하는 화상 신호를 출력하는 것인, 집적회로.

Images