KR101204727B1 - 화상 처리 장치, 화상 처리 방법, 및 기억 매체 - Google Patents

Abstract

본 발명은 화상 처리 장치, 화상 처리 방법 및 기억 매체에 관한 것으로서, 확대 화상의 고정밀화를 적정하게 도모하는 것을 과제로 한다.
상기 과제를 해결하기 위하여, 본 발명의 촬상 장치(100)는, 원화상으로부터 분리된 골격 성분 및 텍스쳐 성분 각각을 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성하는 중간 화상 생성부(5g)와, 중간 확대 화상으로부터 분리된 골격 성분을 최종 확대 배율로 되도록 확대하여 생성된 최종 확대 골격 성분과, 원화상의 텍스쳐 성분을 최종 확대 배율로 확대하여 생성된 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상을 생성하는 최종 화상 생성부(5h)를 구비하는 것을 특징으로 한다.

Description

화상 처리 장치, 화상 처리 방법, 및 기억 매체{IMAGE PROCESSING APPARATUS, IMAGE PROCESSING METHOD, AND STORAGE MEDIUM}

본 발명은, 화상 처리 장치, 이 화상 처리 장치를 이용한 화상 처리 방법, 및 기억 매체에 관한 것이다.

종래, 화상을 확대하는 처리로서, 최근접이웃방법{nearest neighbor method}나 바이큐빅법{bicubic method} 등의 보간 방법 대신, Total Variation(TV)법을 이용함으로써 확대 화상을 고정밀화하는 화상 처리 장치가 알려져 있다(예를 들면, 일본 특허 출원 공개 번호 2007-317109호 공보).

일본 특허 출원 공개 번호 2007-317109호 공보

상기 TV법을 이용한 확대 방법은, 최근접이웃방법이나 바이큐빅법 등의 보간 방법보다 확대 화상의 고정밀화를 도모할 수 있다. 그러나, 전술한 확대 방법은, 확대율이 커지면 화상의 에지가 희미해지거나 노이즈량이 증대한다. 그 결과, 확대 화상의 선명도가 떨어지는 문제가 있다.

따라서, 본 발명의 과제는, 확대 화상의 고정밀화를 적정하게 도모할 수 있는 화상 처리 장치, 화상 처리 방법 및 기억 매체를 제공하는 것이다.

상기 과제를 해결하기 위하여, 본 발명의 일태양에 따른 화상 처리 장치는, 원화상(original image)을 취득하는 취득 수단과. 이 취득 수단에 의해 취득된 원화상의 최종 확대 배율을 지정하는 지정 수단과, 상기 취득 수단에 의해 취득된 원화상으로부터 골격 성분 및 텍스쳐(texture) 성분을 분리하는 제1 분리 수단과, 이 제1 분리 수단에 의해 분리된 상기 원화상의 골격 성분 및 텍스쳐 성분 각각을 상기 최종 확대 배율보다 작은 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성하는 중간 화상 생성 수단과, 이 중간 화상 생성 수단에 의해 생성된 상기 중간 확대 화상으로부터 골격 성분을 분리하는 제2 분리 수단과, 이 제2 분리 수단에 의해 분리된 상기 중간 확대 화상의 골격 성분을 상기 최종 확대 배율로 되도록 확대하여 최종 확대 골격 성분을 생성하는 골격 확대 수단과, 상기 제1 분리 수단에 의해 분리된 상기 원화상의 텍스쳐 성분을 상기 최종 확대 배율로 확대하여 최종 확대 텍스쳐 성분을 생성하는 텍스쳐 확대 수단과, 상기 골격 확대 수단에 의해 생성된 상기 최종 확대 골격 성분과 상기 텍스쳐 확대 수단에 의해 생성된 상기 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상을 생성하는 최종 화상 생성 수단을 구비한 것을 특징으로 한다.

또한, 다른 태양의 화상 처리 방법은,

화상 처리 장치를 사용한 화상 처리 방법으로서, 원화상을 취득하는 단계와, 취득된 원화상의 최종 확대 배율을 지정하는 단계와, 취득된 원화상으로부터 골격 성분 및 텍스쳐 성분을 분리하는 단계와, 분리된 상기 원화상의 골격 성분 및 텍스쳐 성분 각각을 상기 최종 확대 배율보다 작은 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성하는 단계와, 생성된 상기 중간 확대 화상으로부터 골격 성분을 분리하는 단계와, 분리된 상기 중간 확대 화상의 골격 성분을 상기 최종 확대 배율로 되도록 확대하여 최종 확대 골격 성분을 생성하는 단계와, 분리된 상기 원화상의 텍스쳐 성분을 상기 최종 확대 배율로 확대하여 최종 확대 텍스쳐 성분을 생성하는 단계와, 생성된 상기 최종 확대 골격 성분과 상기 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상을 생성하는 단계를 실행하는 것을 특징으로 하고 있다.

또한, 다른 태양인 기억 매체는,

화상 처리 장치의 컴퓨터를, 원화상을 취득하는 취득 수단, 이 취득 수단에 의해 취득된 원화상의 최종 확대 배율을 지정하는 지정 수단, 상기 취득 수단에 의해 취득된 원화상으로부터 골격 성분 및 텍스쳐 성분을 분리하는 제1 분리 수단, 이 제1 분리 수단에 의해 분리된 상기 원화상의 골격 성분 및 텍스쳐 성분 각각을 상기 최종 확대 배율보다 작은 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성하는 중간 화상 생성 수단, 이 중간 화상 생성 수단에 의해 생성된 상기 중간 확대 화상으로부터 골격 성분을 분리하는 제2 분리 수단, 이 제2 분리 수단에 의해 분리된 상기 중간 확대 화상의 골격 성분을 상기 최종 확대 배율로 되도록 확대하여 최종 확대 골격 성분을 생성하는 골격 확대 수단, 상기 제1 분리 수단에 의해 분리된 상기 원화상의 텍스쳐 성분을 상기 최종 확대 배율로 확대하여 최종 확대 텍스쳐 성분을 생성하는 텍스쳐 확대 수단, 상기 골격 확대 수단에 의해 생성된 상기 최종 확대 골격 성분과 상기 텍스쳐 확대 수단에 의해 생성된 상기 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상을 생성하는 최종 화상 생성 수단으로서 기능하게 하는 프로그램을 기억하고 있는 것을 특징으로 하고 있다.

본 발명에 의하여, 화상의 에지를 강조하여 확대 화상의 고정밀화를 적정하게 도모할 수 있다.

도 1은 본 발명을 적용한 일실시예의 촬상 장치의 개략적인 구성을 나타낸 블록도이다.
도 2는 도 1의 촬상 장치에 의한 화상 확대 처리에 관한 동작의 일례를 나타낸 흐름도이다.
도 3은 도 2의 화상 확대 처리의 계속을 나타낸 흐름도이다.
도 4는 도 2의 화상 확대 처리를 설명하기 위한 화상의 일례를 모식적으로 나타낸 도면이다.
도 5는 도 2의 화상 확대 처리를 설명하기 위한 화상의 일례를 모식적으로 나타낸 도면이다.

이하, 발명에 대하여, 도면을 참조하여 구체적인 실시예에 대하여 설명한다. 다만, 발명의 범위는, 도시한 예로 한정되지 않는다.

도 1은, 본 발명을 적용한 일실시예의 촬상 장치(100)의 개략적인 구성을 나타낸 블록도이다.

본 실시예의 촬상 장치(100)는, 원화상[예를 들면, 원화상 Go; 도 4의 (A) 참조]으로부터 분리된 골격 성분[예를 들면, 골격 성분 Gs; 도 4의 (B) 참조] 및 텍스쳐 성분[예를 들면, 텍스쳐 성분 Gt; 도 4의 (C) 참조] 각각을 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성한다. 그리고, 촬상 장치(100)는, 중간 확대 화상으로부터 분리된 골격 성분을 최종 확대 배율로 되도록 확대하여 최종 확대 골격 성분을 생성하고, 원화상의 텍스쳐 성분을 최종 확대 배율로 확대하여 최종 확대 텍스쳐 성분을 생성하고, 생성된 최종 확대 골격 성분과 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상[예를 들면, 최종 확대 화상 Gf; 도 5의 (A) 참조]을 생성한다.

구체적으로는, 도 1에 나타낸 바와 같이, 촬상 장치(100)는, 촬상부(1)와, 촬상 제어부(2)와, 화상 데이터 생성부(3)와, 메모리(4)와, 화상 처리부(5)와, 표시 제어부(6)와, 표시부(7)와, 기록 매체(8)와, 조작 입력부(9)와, 중앙 제어부(10)를 구비하고 있다.

촬상부(1)는, 피사체를 촬상하여 화상 프레임을 생성한다. 구체적으로는, 촬상부(1)는, 도면에 나타내지는 않았지만, 줌 렌즈나 포커스 렌즈 등의 복수개의 렌즈로 구성된 렌즈부와, 렌즈부를 통과하는 광의 양을 조정하는 조리개와, CCD(Charge Coupled Device)나 CMOS(Complementary Metal-oxide Semiconductor) 등의 이미지 센서로 구성되며, 렌즈부의 각종 렌즈를 통과한 광학상을 2차원 화상 신호로 변환하는 전자 촬상부를 구비하고 있다.

촬상 제어부(2)는, 도면에 나타내지는 않았지만, 타이밍 발생기, 드라이버 등을 구비하고 있다. 그리고, 촬상 제어부(2)는, 타이밍 발생기, 드라이버에 의해 전자 촬상부를 주사 구동하여, 소정 주기별로 광학상을 전자 촬상부에 의해 2차원 화상 신호로 변환시켜, 상기 전자 촬상부의 촬상 영역으로부터 1화면분씩 화상 프레임을 판독하여 화상 데이터 생성부(3)로 출력시킨다.

또한, 촬상 제어부(2)는, 촬상 조건의 조정 제어로서 AE(자동 노출 처리), AF(자동 초점 처리), AWB(자동 화이트 밸런스) 등을 행한다.

화상 데이터 생성부(3)는, 전자 촬상부로부터 전송된 화상 데이터의 아날로그 값의 신호에 대하여 RGB의 각 색 성분마다 적절하게 게인 조정한 후에, 샘플 홀드 회로(도시하지 않음)에서 샘플 홀드하고 A/D 변환기(도시하지 않음)에서 디지털 데이터로 변환하여, 컬러 프로세스 회로(도시하지 않음)에서 화소 보간 처리 및 γ보정 처리를 포함하는 컬러 프로세스 처리를 행한 후, 디지털 값의 휘도 신호 Y 및 색차 신호 Cb, Cr(YUV 색 공간의 화상 데이터)을 생성한다.

컬러 프로세스 회로로부터 출력되는 휘도 신호 Y 및 색차 신호 Cb, Cr은, 도시하지 않은 DMA 컨트롤러를 통하여, 버퍼 메모리로서 사용되는 메모리(4)에 DMA 전송된다.

메모리(4)는, 예를 들면, DRAM 등에 의해 구성되며, 화상 처리부(5)나 중앙 제어부(10) 등에 의해 처리되는 데이터 등을 일시적으로 기억한다.

화상 처리부(5)는, 화상 취득부(5a)와, 화상 분리부(5b)와, 중간 배율 산출부(5c)와, 골격 확대부(5d)와, 필터 처리부(5e)와, 텍스쳐 확대부(5f)와, 중간 화상 생성부(5g)와, 최종 화상 생성부(5h)를 구비하고 있다.

화상 취득부(5a)는, 취득 수단으로서, 촬상부(1)에 의해 촬상된 원화상(예를 들면, 원화상 Go 등)을 처리 대상 화상으로서 취득한다.

구체적으로, 화상 취득부(5a)는, 예를 들면, 기록 매체(8)에 기록되어 있는 적어도 하나의 화상 데이터 중에서 사용자에 의한 조작 입력부(9)의 소정 조작에 의해 지정된 어느 하나의 화상 데이터를 취득한다.

화상 분리부(5b)는, 처리 대상 화상(예를 들면, 원화상 Go 등)으로부터 골격 성분(예를 들면, 골격 성분 Gs 등) 및 텍스쳐 성분(예를 들면, 텍스쳐 성분 Gt 등) 중 적어도 한쪽을 분리한다. 즉, 화상 분리부(5b)는, 처리 대상 화상으로부터 Total Variation법에 의해 상기 처리 대상 화상 내의 오브젝트의 형상이나 크기를 나타내는 에지부와 평탄부를 포함하는 골격 성분, 및 상기 처리 대상 화상 내의 오브젝트의 휘도의 변화에 따른, 선명한 부분을 나타내는 섬세한 패턴(텍스쳐: 표면의 질감을 표현하는 반복되는 휘도 패턴)을 포함하는 텍스쳐 성분 중 적어도 한쪽을 분리한다.

구체적으로, 화상 분리부(5b)는, 제1 분리 수단으로서, 화상 취득부(5a)에 의해 취득된 처리 대상 화상으로서의 원화상으로부터 Total Variation법에 의해 골격 성분 및 텍스쳐 성분을 분리한다. 또한, 화상 분리부(5b)는, 제2 분리 수단으로서, 중간 화상 생성부(5g)에 의해 생성된 처리 대상 화상으로서의 중간 확대 화상으로부터 Total Variation법에 의해 골격 성분을 분리한다.

그리고, 화상 분리부(5b)에 의한 처리 대상 화상으로부터의 골격 성분이나 텍스쳐 성분의 분리 방법으로서 예시한 것은, 일례이며 이에 한정되는 것은 아니다.

중간 배율 산출부(5c)는, 원화상(예를 들면, 원화상 Go 등)의 최종 확대 배율보다 작은 중간 확대 배율을 산출한다. 즉, 중간 배율 산출부(5c)는, 화상 재생 모드에 의해, 사용자에 의한 조작 입력부(9)의 선택 결정 버튼의 소정 조작에 기초하여 설정된 원화상(처리 대상 화상)의 확대 배율(최종 확대 배율)을 소정수로 나눗셈함으로써 중간 확대 배율을 적어도 하나 산출한다. 구체적으로, 중간 배율 산출부(5c)는, 최종 확대 배율을 약분함으로써 적어도 하나의 약수를 중간 확대 배율로서 산출한다. 이 때, 「1」(등배) 이외의 약수가 복수개 산출된 경우에는, 중간 배율 산출부(5c)는, 「1」이외의 최소의 약수를 제1 중간 확대 배율로 하고, 상기 최소의 약수 이외의 약수를 제2 중간 확대 배율로 한다.

예를 들면, 최종 확대 배율이 「8배」로 설정된 경우에는, 중간 배율 산출부(5c)는, 「8」의 약수인 1, 2, 4 중에서, 제1 중간 확대 배율로서 「2배」를 설정하고, 제2 중간 확대 배율로서 「4배」를 설정한다. 또한, 예를 들면, 최종 확대 배율이 「50배」로 설정된 경우에는, 중간 배율 산출부(5c)는, 「50」의 약수인 1, 2, 5, 10, 25 중에서, 제1 중간 확대 배율로서 「2배」를 설정하고, 제2 중간 확대 배율로서 「5배」, 「10배」 및 「25배」를 설정한다. 여기에서, 반드시 최소의 약수 이외의 약수(예를 들면, 「5배」, 「10배」 및 「25배」) 모두를 제2 중간 확대 배율로 설정할 필요는 없다. 또한, 복수개의 제2 중간 확대 배율 중에서 처리에 사용되는 순서는, 예를 들면, 작은 순서가 되지만, 이에 한정되지 않고, 큰 순서 등 적절하게 임의로 변경할 수 있다.

그리고, 중간 확대 배율은, 양(+)의 정수에 한정되지 않고, 최종 확대 배율을 소정수로 나눗셈함으로써 산출된 수이면 되며, 양의 소수나 분수를 사용하는 것도 가능하다. 또한, 최종 확대 배율의 제수(除數)도 정수로 한정되지 않고, 양의 소수(小數)나 분수를 사용하는 것도 가능하다.

여기서, 중간 배율 산출부(5c)는, 사용자에 의한 조작 입력부(9)의 소정 조작에 의해 지정된 최종 확대 배율을 소정수로 제산함으로써 중간 확대 배율을 적어도 하나 산출하는 산출 수단을 구성하고 있다.

골격 확대부(5d)는, 화상 분리부(5b)에 의해 원화상(예를 들면, 원화상 Go 등)으로부터 분리된 골격 성분(예를 들면, 골격 성분 Gs 등)을 중간 확대 배율로 되도록 소정의 확대 방법에 의해 확대한다. 여기서, 원화상의 제2 중간 확대 배율이 설정되어 있는 경우에는, 골격 확대부(5d)는, 중간 화상 생성부(5g)의 재분리부(5i)(후술)에 의해 제1 중간 확대 화상으로부터 분리된 골격 성분을 원화상비로 제2 중간 확대 배율로 되도록 소정의 확대 방법에 의해 확대한다.

또한, 골격 확대부(5d)는, 화상 분리부(5b)에 의해 중간 확대 화상(예를 들면, 제1 중간 확대 화상이나 제2 중간 확대 화상(후술함) 등)으로부터 분리된 골격 성분을 원화상비로 최종 확대 배율로 되도록 소정의 확대 방법에 의해 확대한다.

그리고, 골격 확대부(5d)에 의한 확대 방법으로서는, 예를 들면, 보다 자연스러운 고정밀화를 도모할 수 있는 바이큐빅법에 의한 보간 처리를 사용한 방법이 있다.

필터 처리부(5e)는, 골격 확대부(5d)에 의해 확대된 골격 성분에 대하여 소정의 필터링 처리를 행한다.

구체적으로는, 필터 처리부(5e)는, 먼저, 소정의 선명화 필터(sharpening filter)[예를 들면, 라플라시안 필터(Laplacian Filter) 등]를 사용하여, 골격 확대부(5d)에 의해 확대된 골격 성분의 화상의 에지(윤곽)를 강조하는 선명화 처리를 행한다. 다음으로, 필터 처리부(5e)는, 소정의 비등방 확산 필터(예를 들면, Total Variation 필터 등)를 사용하여, 선명화 처리 후의 골격 성분의 화상의 에지의 접선 방향과 에지의 수직 방향에서 가중치를 상이하게 하여 평활화하는 비등방 확산 처리를 행한다.

여기서, 필터 처리부(5e)가, 골격 확대부(5d)에 의해 최종 확대 배율로 되도록 확대된 골격 성분을 처리 대상으로 한 경우에는, 비등법 확산 처리 후의 골격 성분을 최종 확대 골격 성분으로 한다.

즉, 골격 확대부(5d) 및 필터 처리부(5e)는, 화상 분리부(5b)에 의해 분리된 중간 확대 화상의 골격 성분을 최종 확대 배율로 되도록 확대하여 최종 확대 골격 성분을 생성하는 골격 확대 수단을 구성하고 있다.

텍스쳐 확대부(5f)는, 화상 분리부(5b)에 의해 원화상(예를 들면, 원화상 Go 등)으로부터 분리된 텍스쳐 성분(예를 들면, 텍스쳐 성분 Gt 등)을 중간 확대 배율로 되도록 소정의 확대 방법에 의해 확대한다. 여기에서, 원화상의 제2 중간 확대 배율이 설정되어 있는 경우에는, 텍스쳐 확대부(5f)는, 중간 화상 생성부(5g)의 재분리부(5i)(후술)에 의해 제1 중간 확대 화상으로부터 분리된 텍스쳐 성분을 원화상비로 제2 중간 확대 배율로 되도록 소정의 확대 방법에 의해 확대한다.

또한, 텍스쳐 확대부(5f)는, 텍스쳐 확대 수단으로서, 화상 분리부(5b)에 의해 원화상(예를 들면, 원화상 Go 등)으로부터 분리된 텍스쳐 성분(예를 들면, 텍스쳐 성분 Gt 등)을 최종 확대 배율로 되도록 소정의 확대 방법으로 확대하여 최종 확대 텍스쳐 성분을 생성한다.

그리고, 텍스쳐 확대부(5f)에 의한 확대 방법으로서는, 예를 들면, 더욱 자연스러운 고정밀화를 도모할 수 있는 바이큐빅법에 의한 보간 처리를 사용한 방법이 있다.

중간 화상 생성부(5g)는, 골격 확대부(5d)에 의해 확대된 골격 성분과 텍스쳐 확대부(5f)에 의해 확대된 텍스쳐 성분을 합성하여 중간 확대 화상을 생성한다.

즉, 중간 화상 생성부(5g)는, 필터 처리부(5e)에 의해 소정의 필터링 처리가 행해진 원화상의 골격 성분과, 텍스쳐 확대부(5f)에 의해 중간 확대 배율로 되도록 확대된 원화상의 텍스쳐 성분을 합성하여 중간 확대 화상을 생성한다.

여기서, 골격 확대부(5d), 텍스쳐 확대부(5f) 및 중간 화상 생성부(5g)는, 화상 분리부(5b)에 의해 분리된 원화상의 골격 성분 및 텍스쳐 성분의 각각을 최종 확대 배율보다 작은 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성하는 중간 화상 생성 수단을 구성하고 있다.

또한, 원화상(예를 들면, 원화상 Go 등)의 제2 중간 확대 배율이 설정되어 있는 경우에는, 중간 화상 생성부(5g)는, 골격 확대부(5d) 및 텍스쳐 확대부(5f)에 의해 제1 중간 확대 배율이 되도록 확대된 원화상의 골격 성분 및 텍스쳐 성분을 합성하여 제1 중간 확대 화상을 생성한다. 그리고, 중간 화상 생성부(5g)는, 재분리부(5i)에 의해, 제1 중간 확대 화상으로부터 골격 성분 및 텍스쳐 성분을 분리한다. 여기서, 재분리부(5i)에 의한 골격 성분 및 텍스쳐 성분의 분리는, 예를 들면, Total Variation법에 의해 행해지지만, 화상 분리부(5b)와는 처리 대상이 상이할 뿐이며, 실질적인 처리 내용은 거의 동일하게 되어 있다. 그리고, 재분리부(5i)에 의한 처리 대상 화상으로부터의 골격 성분이나 텍스쳐 성분의 분리 방법으로서 예시한 것은, 일례로서 이에 한정되는 것은 아니다.

그리고, 재분리부(5i)에 의한 골격 성분 및 텍스쳐 성분의 분리는, 중간 배율 산출부(5c)에 의해 산출된 적어도 하나의 제2 중간 확대 배율이 모두 사용될 때까지 행해진다.

여기서, 재분리부(5i)는, 중간 배율 산출부(5c)에 의해 산출된 제1 중간 확대 배율보다 큰 제2 중간 확대 배율이 적어도 하나 있는 경우에, 중간 화상 생성부(5g)에 의해 생성된 중간 확대 화상(예를 들면, 제1 중간 확대 화상)으로부터 골격 성분 및 텍스쳐 성분을 분리하는 재분리 수단을 구성하고 있다.

또한, 재분리부(5i)에 의해 분리된 중간 확대 화상(예를 들면, 제1 중간 확대 화상)의 골격 성분 및 텍스쳐 성분 각각에 대하여, 중간 화상 생성부(5g)는, 중간 배율 산출부(5c)에 의해 산출된 어느 하나의 제2 중간 확대 배율(예를 들면, 제1 중간 확대 배율의 다음으로 큰 확대 배율 등)로 되도록 골격 확대부(5d) 및 텍스쳐 확대부(5f)에 의해 확대된 골격 성분 및 텍스쳐 성분을 합성함으로써, 제2 중간 확대 화상을 새롭게 생성한다.

여기서, 중간 화상 생성부(5g)에 의한 제2 중간 확대 화상의 새로운 생성은, 중간 배율 산출부(5c)에 의해 산출된 적어도 하나의 제2 중간 확대 배율이 모두 사용될 때까지 행해진다.

최종 화상 생성부(5h)는, 최종 확대 골격 성분과 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상[예를 들면, 최종 확대 화상 Gf; 도 5의 (A) 참조]을 생성한다.

즉, 최종 화상 생성부(5h)는, 필터 처리부(5e)에 의해 소정의 필터링 처리가 행해져서 생성된 최종 확대 골격 성분과, 텍스쳐 확대부(5f)에 의해 최종 확대 배율로 되도록 확대된 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상을 생성한다.

여기서, 최종 화상 생성부(5h)는, 골격 확대부(5d) 및 필터 처리부(5e)에 의해 생성된 최종 확대 골격 성분과, 텍스쳐 확대부(5f)에 의해 생성된 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상을 생성하는 최종 화상 생성 수단을 구성하고 있다.

표시 제어부(6)는, 메모리(4)에 일시적으로 기억되어 있는 표시용 화상 데이터를 판독하여 표시부(7)에 표시하게 하는 제어를 행한다.

구체적으로는, 표시 제어부(6)는, VRAM, VRAM 컨트롤러, 디지털 비디오 인코더 등을 구비하고 있다. 그리고, 디지털 비디오 인코더는, 중앙 제어부(10)의 제어하에 메모리(4)로부터 판독되어 VRAM(도시하지 않음)에 기억되어 있는 휘도 신호 Y 및 색차 신호 Cb, Cr을, VRAM 컨트롤러를 통하여 VRAM로부터 정기적으로 판독하여, 이들 데이터를 기초로 비디오 신호를 발생하여 표시부(7)로 출력한다.

표시부(7)는, 예를 들면, 액정 표시 장치이며, 표시 제어부(6)로부터의 비디오 신호에 기초하여 전자 촬상부에 의해 촬상된 화상 등을 표시 화면에 표시한다. 구체적으로는, 표시부(7)는, 정지 화상 촬상 모드나 동영상 촬상 모드에 의해, 촬상부(1)에 의한 피사체의 촬상에 의해 생성된 복수개의 화상 프레임을 소정의 프레임레이트로 순서대로 갱신하면서 라이브 뷰 화상을 표시한다. 또한, 표시부(7)는, 기록 매체(8)에 기록되어 있는 복수개의 화상 데이터 중, 사용자에 의한 조작 입력부(9)의 소정 조작에 기초하여 표시 지시된 화상 데이터를 표시한다.

기록 매체(8)는, 예를 들면, 불휘발성 메모리(플래시 메모리) 등에 의해 구성되며, 화상 처리부(5)의 부호화부(도시하지 않음)에 의해 소정의 압축 형식으로 부호화된 기록용 정지 화상 데이터나 복수개의 화상 프레임으로 이루어지는 동화상 데이터를 기억한다.

조작 입력부(9)는, 촬상 장치(100)의 소정 조작을 행하기 위한 것이다. 구체적으로는, 조작 입력부(9)는, 피사체의 촬영 지시에 관계된 셔터 버튼, 촬상 모드나 기능 등의 선택 지시에 관한 선택 결정 버튼, 줌 량의 조정 지시에 관계된 줌 버튼 등을 구비하고(전체를 도시하지 않음), 이들 버튼의 조작에 따라 소정의 조작 신호를 중앙 제어부(10)로 출력한다.

또한, 조작 입력부(9)의 선택 결정 버튼은, 화상 재생 모드에 의해, 사용자에 의한 소정 조작에 기초하여 표시부(7)에 표시된 원화상(처리 대상 화상)의 확대 배율(최종 확대 배율)의 설정 지시를 입력한다. 그리고, 조작 입력부(9)는, 상기 선택 결정 버튼의 조작에 따라 소정의 설정 신호를 중앙 제어부(10)로 출력한다.

중앙 제어부(10)는, 입력된 설정 신호에 따라, 사용자가 원하는 화상의 확대 배율을 설정한다.

여기서, 조작 입력부(9) 및 중앙 제어부(10)는, 처리 대상 화상(원화상)의 최종 확대 배율을 지정하는 지정 수단을 구성하고 있다.

그리고, 최종 확대 배율은, 양의 정수(예를 들면, 「8배」나 「25배」등)로 한정되지 않고, 양의 소수나 분수를 사용하는 것도 가능하다.

중앙 제어부(10)는, 촬상 장치(100)의 각 부를 제어하는 것이다. 구체적으로는, 중앙 제어부(10)는, CPU(도시하지 않음)를 구비하고, 촬상 장치(100)용의 각종 처리 프로그램(도시하지 않음)에 따라 각종 제어 동작을 행한다.

다음으로, 촬상 장치(100)에 의한 화상 확대 처리에 대하여, 도 2 및 도 3을 참조하여 설명한다.

도 2 및 도 3은, 화상 확대 처리에 관한 동작의 일례를 나타낸 흐름도이다.

화상 확대 처리는, 사용자에 의한 조작 입력부(9)의 선택 결정 버튼의 소정 조작에 기초하여, 메뉴 화면에 표시된 복수개의 촬상 모드 중에서 화상 재생 모드가 선택 지시된 경우에 실행되는 처리이다.

도 2에 나타낸 바와 같이, 먼저, 사용자에 의한 조작 입력부(9)의 선택 결정 버튼의 소정 조작에 기초하여, 기록 매체(8)에 기록되어 있는 적어도 하나의 화상 데이터 중에서 어느 하나의 화상 데이터가 지정되면, 화상 처리부(5)의 화상 취득부(5a)는, 사용자에 의해 지정된 화상 데이터를 처리 대상 화상으로서 취득한다(단계 S1). 이로써, 표시부(7)에 처리 대상 화상(예를 들면, 원화상 Go 등)이 표시된 상태로 된다.

그 후, 사용자에 의한 조작 입력부(9)의 소정 조작에 기초하여, 표시부(7)에 표시된 처리 대상 화상(예를 들면, 원화상 Go 등)의 최종 확대 배율(예를 들면, 8배 등)이 지정되면, 조작 입력부(9)는, 소정의 설정 신호를 중앙 제어부(10)에 출력하고, 중앙 제어부(10)는, 입력된 설정 신호에 따라 사용자가 원하는 화상의 최종 확대 배율을 설정한다(단계 S2).

다음으로, 화상 처리부(5)의 중간 배율 산출부(5c)는, 설정된 처리 대상 화상의 최종 확대 배율을 소정수로 나눗셈함으로써 중간 확대 배율을 적어도 하나 산출한다(단계 S3). 구체적으로, 예를 들면, 최종 확대 배율이 「8배」로 설정된 경우, 중간 배율 산출부(5c)는, 「8」의 약수인 1, 2, 4 중에서, 제1 중간 확대 배율로서 「2배」를 설정하고, 제2 중간 확대 배율로서 「4배」를 설정한다.

계속하여, 화상 처리부(5)의 화상 분리부(5b)는, 처리 대상 화상으로서의 원화상(예를 들면, 원화상 Go 등)으로부터 Total Variation법에 의해 골격 성분(예를 들면, 골격 성분 Gs 등) 및 텍스쳐 성분(예를 들면, 텍스쳐 성분 Gt 등)을 분리한다(단계 S4).

그리고, 분리된 골격 성분 및 각각의 텍스쳐 성분은, 화상 처리부(5)에 의해 병행하거나, 또는 분리된 차례로 순서대로 처리되지만, 이하의 설명에서는, 먼저, 골격 성분의 처리 내용에 대하여 설명하고, 그 후, 텍스쳐 성분의 처리 내용에 대하여 설명한다.

<골격 성분의 처리>

먼저, 화상 처리부(5)의 골격 확대부(5d)는, 원화상(예를 들면, 원화상 Go 등)으로부터 분리된 골격 성분(예를 들면, 골격 성분 Gs 등)을 제1 중간 확대 배율(예를 들면, 「2배」)로 되도록 소정의 확대 방법에 의해 확대한다(단계 S51A).

다음으로, 화상 처리부(5)의 필터 처리부(5e)는, 골격 확대부(5d)에 의해 확대된 골격 성분의 화상 에지(윤곽)를 강조하는 선명화 처리를 행한 후(단계 S51B), 선명화 처리 후의 골격 성분의 화상 에지의 접선 방향과 에지의 수직 방향에서 가중치를 상이하게 하여 평활화하는 비등방 확산 처리를 행한다(단계 S51C).

<텍스쳐 성분의 처리>

화상 처리부(5)는, 원화상(예를 들면, 원화상 Go 등)으로부터 분리된 텍스쳐 성분(예를 들면, 텍스쳐 성분 Gt 등)을 복제하여 메모리(4)에 일시적으로 기억시킨 후(단계 S52A), 텍스쳐 확대부(5f)는, 원화상으로부터 분리된 텍스쳐 성분을 제1 중간 확대 배율(예를 들면, 「2배」)로 되도록 소정의 확대 방법에 의해 확대한다(단계 S52B).

그리고, 골격 성분의 처리 및 텍스쳐 성분의 처리의 종료 후, 화상 처리부(5)의 중간 화상 생성부(5g)는, 필터 처리부(5e)에 의한 비등방 확산 처리 후의 골격 성분과, 텍스쳐 확대부(5f)에 의해 확대된 텍스쳐 성분을 합성하여, 제1 중간 확대 배율로 확대된 제1 중간 확대 화상을 생성한다(단계 S6).

다음으로, 화상 처리부(5)는, 중간 배율 산출부(5c)에 의해 산출된 제2 중간 확대 배율이 적어도 하나가 있는지의 여부를 판정한다(단계 S7).

예를 들면, 최종 확대 배율이 「8배」로 설정되고, 중간 배율 산출부(5c)에 의해 「4배」가 제2 중간 확대 배율로서 설정되어 있는 경우, 제2 중간 확대 배율이 하나 있으므로, 단계 S7에 의해, 제2 중간 확대 배율이 적어도 하나가 있다고 판정되고(단계 S7; YES), 중간 화상 생성부(5g)의 재분리부(5i)는, 제1 중간 확대 화상으로부터 Total Variation법에 의해 골격 성분 및 텍스쳐 성분을 분리한다(단계 S8).

그리고, 분리된 골격 성분 및 각각의 텍스쳐 성분은, 화상 처리부(5)에 의해 병행하거나, 또는 분리된 차례로 순서대로 처리되지만, 이하의 설명에서는, 먼저, 골격 성분의 처리 내용에 대하여 설명하고, 그 후, 텍스쳐 성분의 처리 내용에 대하여 설명한다.

<골격 성분의 처리>

이하에서 설명하는 제1 중간 확대 화상으로부터 분리된 골격 성분의 처리는, 확대 배율이 상이한 점 이외는, 원화상으로부터 분리된 골격 성분의 처리(단계 S51A～S51C)와 거의 동일하다.

즉, 먼저, 화상 처리부(5)의 골격 확대부(5d)는, 제1 중간 확대 화상으로부터 분리된 골격 성분을 원화상비로 제2 중간 확대 배율(예를 들면, 「4배」)로 되도록 소정의 확대 방법에 의해 확대한다(단계 S91A). 구체적으로, 예를 들면, 화상 처리부(5)의 골격 확대부(5d)는, 제1 중간 확대 화상으로부터 분리된 골격 성분을 「2배」로 확대함으로써, 원화상비로 「4배」가 되는 제2 중간 확대 배율의 골격 성분을 생성한다.

다음으로, 화상 처리부(5)의 필터 처리부(5e)는, 골격 확대부(5d)에 의해 확대된 골격 성분의 화상 에지(윤곽)를 강조하는 선명화 처리를 행한 후(단계 S91B), 선명화 처리 후의 골격 성분의 화상 에지의 접선 방향과 에지의 수직 방향에서 가중치를 상이하게 하여 평활화하는 비등방 확산 처리를 행한다(단계 S91C).

<텍스쳐 성분의 처리>

화상 처리부(5)의 텍스쳐 확대부(5f)는, 원화상으로부터 분리된 텍스쳐 성분의 처리(단계 S52B)와 거의 동일하게, 제1 중간 확대 화상으로부터 분리된 텍스쳐 성분을 원화상비로 제2 중간 확대 배율(예를 들면, 「4배」)로 되도록 소정의 확대 방법에 의해 확대한다(단계 S92). 구체적으로는, 예를 들면, 화상 처리부(5)의 텍스쳐 확대부(5f)는, 제1 중간 확대 화상으로부터 분리된 텍스쳐 성분을 「2배」로 확대함으로써, 원화상비로 「4배」가 되는 제2 중간 확대 배율의 텍스쳐 성분을 생성한다.

그리고, 골격 성분의 처리 및 텍스쳐 성분의 처리의 종료 후, 화상 처리부(5)의 중간 화상 생성부(5g)는, 필터 처리부(5e)에 의한 비등방 확산 처리 후의 골격 성분과, 텍스쳐 확대부(5f)에 의해 확대된 텍스쳐 성분을 합성하여, 제2 중간 확대 배율로 확대된 제2 중간 확대 화상을 생성한다(단계 S10).

다음으로, 화상 처리부(5)는, 중간 배율 산출부(5c)에 의해 산출된 제2 중간 확대 배율이 그 외에 또 있는지의 여부를 판정한다(단계 S11).

단계 S11에 의해, 제2 중간 확대 배율이 그 외에 또 있다고 판정되면(단계 S7; YES), 화상 처리부(5)는, 처리를 단계 S8로 이행하여, 그 이후의 처리를 실행한다.

단계 S8이후의 처리는, 단계 S11에 의해, 제2 중간 확대 배율이 그 외에 없다고 판정될 때까지(단계 S11; NO), 반복하여 행해진다. 이로써, 화상 처리부(5)는, 중간 배율 산출부(5c)에 의해 산출된 모든 제2 중간 확대 배율을 처리에 사용함으로써, 최종적으로, 최종 확대 배율의 다음으로 작은 제2 중간 확대 배율로 확대된 제2 중간 확대 화상을 생성한다.

그리고, 단계 S11에 의해, 제2 중간 확대 배율이 그 외에 없다고 판정되면(단계 S11; NO), 화상 처리부(5)는, 골격 성분 및 텍스쳐 성분 각각에 대하여 처리를 개별적으로 행한다. 또한, 단계 S7에 의해, 제2 중간 확대 배율이 적어도 하나도 없는 것으로 판정된 경우에도(단계 S7; NO), 화상 처리부(5)는, 골격 성분 및 텍스쳐 성분 각각에 대하여 처리를 개별적으로 행한다.

그리고, 골격 성분 및 텍스쳐 성분의 각각은, 화상 처리부(5)에 의해 병행하거나, 또는 분리된 차례로 순서대로 처리되지만, 이하의 설명에서는, 먼저, 골격 성분의 처리 내용에 대하여 설명하고, 그 후, 텍스쳐 성분의 처리 내용에 대하여 설명한다.

<골격 성분의 처리>

우선, 화상 처리부(5)의 화상 분리부(5b)는, 제2 중간 확대 화상으로부터 Total Variation법에 의해 골격 성분을 분리한다(단계 S121A).

다음으로, 제1 중간 확대 화상으로부터 분리된 골격 성분의 처리(단계 S91A)와 거의 동일하게, 화상 처리부(5)의 골격 확대부(5d)는, 제2 중간 확대 화상으로부터 분리된 골격 성분을 원화상비로 최종 확대 배율(예를 들면, 「8배」)로 되도록 소정의 확대 방법에 의해 확대한다(단계 S121B). 구체적으로는, 예를 들면, 화상 처리부(5)의 골격 확대부(5d)는, 제2 중간 확대 화상으로부터 분리된 골격 성분을 「2배」로 확대함으로써, 원화상비로 「8배」가 되는 최종 확대 배율의 골격 성분을 생성한다.

다음으로, 제1 중간 확대 화상으로부터 분리된 골격 성분의 처리(단계 S91B～S91C)와 거의 동일하게, 화상 처리부(5)의 필터 처리부(5e)는, 골격 확대부(5d)에 의해 확대된 골격 성분의 화상 에지(윤곽)를 강조하는 선명화 처리를 행한 후(단계 S121C), 선명화 처리 후의 골격 성분의 화상 에지의 접선 방향과 에지의 수직 방향에서 가중치를 상이하게 하여 평활화하는 비등방 확산 처리를 행한다(단계 S121D).

그리고, 비등법 확산 처리 후의 골격 성분을 최종 확대 골격 성분으로 한다.

<텍스쳐 성분의 처리>

화상 처리부(5)는, 원화상(예를 들면, 원화상 Go 등)으로부터 분리된 텍스쳐 성분(예를 들면, 텍스쳐 성분 Gt 등)의 복제를 메모리(4)로부터 취득한 후(단계 S122A), 텍스쳐 확대부(5f)는, 원화상으로부터 분리된 텍스쳐 성분을 최종 확대 배율(예를 들면, 「8배」)로 되도록 소정의 확대 방법에 의해 확대하여, 최종 확대 텍스쳐 성분을 생성한다(단계 S122B).

그리고, 골격 성분의 처리 및 텍스쳐 성분의 처리의 종료 후, 화상 처리부(5)의 최종 화상 생성부(5h)는, 최종 확대 골격 성분과 최종 확대 텍스쳐 성분을 합성하여, 최종 확대 배율(예를 들면, 「8배」)로 확대된 최종 확대 화상(예를 들면, 최종 확대 화상 Gf; 도 5(a)참조)을 생성한다(단계 S13).

이로써, 화상 확대 처리를 종료한다.

이상과 같이, 본 실시예의 촬상 장치(100)는, Total Variation법을 이용하여, 원화상(예를 들면, 원화상 Go 등)으로부터 골격 성분(예를 들면, 골격 성분 Gs 등) 및 텍스쳐 성분(예를 들면, 텍스쳐 성분 Gt 등)을 분리한다. 각각의 성분을 중간 확대 배율로 되도록 확대하고, 확대된 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성한다. 중간 확대 화상으로부터 Total Variation법에 의해 분리된 골격 성분을 최종 확대 배율로 되도록 확대하여 생성된 최종 확대 골격 성분과, 원화상의 텍스쳐 성분을 최종 확대 배율로 확대하여 생성된 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상[예를 들면, 최종 확대 화상 Gf; 도 5의 (A) 참조]을 생성한다. 이와 같이, 실질적으로 텍스쳐 성분을 거듭하여 더함으로써 섬세한 패턴(텍스쳐)을 강조하면서, 노이즈가 눈에 잘 띄지 않는 최종 확대 화상을 생성할 수 있다.

즉, 각각의 중간 확대 화상의 생성 단계 및 최종 확대 화상의 생성 단계에 의해, 섬세한 패턴(텍스쳐)을 포함하는 텍스쳐 성분을 더하여 합성함으로써, 각 화상에 의해 섬세한 패턴을 강조시킬 수 있다. 또한, 골격 성분을 지정된 최종 확대 배율로 되도록 1회로 확대하는 것이 아니라 단계적으로 확대함으로써, 종래의 방법에 의해 확대된 화상[예를 들면, 화상 Ge 등; 도 5의 (B) 참조]에 비해 화질의 열화를 억제하여 고정밀화를 도모할 수 있다. 이 결과, 고정밀 최종 확대 골격 성분을 생성할 수 있고, 상기 최종 확대 골격 성분과 노이즈를 포함하는 최종 확대 텍스쳐 성분을 합성하여 생성되는 최종 확대 화상(예를 들면, 최종 확대 화상 Gf)에 생기는 노이즈를 상대적으로 눈에 잘 띄지 않게 할 수 있다.

따라서, 원화상의 확대 배율을 크게 하더라도, 종래의 방법에 의해 확대된 화상과 같이 화상 에지가 희미해지거나 노이즈의 증대에 의해 확대 화상의 화질을 열화시키지 않고, 최종 확대 화상의 화상 에지를 강조하여 상기 최종 확대 화상의 고정밀화를 적정하게 도모할 수 있다.

또한, 제1 중간 확대 배율보다 큰 제2 중간 확대 배율이 적어도 하나 있는 경우에, 본 실시예의 촬상 장치(100)는, 중간 확대 화상으로부터 Total Variation법에 의해 골격 성분 및 텍스쳐 성분을 재분리하여, 상기 중간 확대 화상의 골격 성분 및 텍스쳐 성분 각각을 어느 하나의 제2 중간 확대 배율로 되도록 확대한다. 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 새로운 중간 확대 화상을 생성하므로, 지정되는 최종 확대 배율이 커져도 중간 확대 배율을 복수개 설정하여 중간 확대 화상을 복수회 생성할 수 있다. 이로써, 최종 확대 배율로 되도록 1회로 확대하는 경우에 비해 확대 화상의 화질의 열화를 억제하여 고정밀화를 도모할 수 있고, 더욱 정밀도가 높은 최종 확대 골격 성분을 생성할 수 있다. 그 결과, 최종 확대 화상(예를 들면, 최종 확대 화상 Gf)에 생기는 노이즈를 상대적으로 눈에 잘 띄지 않게 할 수 있다.

그리고, 본 발명은, 상기 실시예로 한정되지 않고, 본 발명의 취지를 벗어나지 않는 범위에서, 개량 및 설계의 변경을 행할 수도 있다.

예를 들면, 원화상에 양방향 필터(bilateral filter)를 수회 적용함으로써 골격 화상을 얻고, 이 골격 화상을 원화상으로부터 뺌으로써 텍스쳐 화상을 얻을 수 있다. 또한, 텍스쳐 화상을 휘도뿐만 아니라 색차를 포함하는 것으로 해도 된다. 또한, 중간 확대 배율로서 제1 중간 확대 배율과 제2 중간 확대 배율을 설정하도록 하였지만, 이에 한정되지 않고, 중간 확대 배율을 적어도 하나 설정하면 된다. 예를 들면, 최종 확대 배율이 「4배」등으로 설정된 경우에는, 「4」의 약수인 1, 2 중에서, 「1」이외의 「2배」만을 중간 확대 배율로서 설정한다.

또한, 촬상 장치(100)의 구성은, 상기 실시예에 예시한 것은 일례이며, 이에 한정되는 것은 아니다. 예를 들면, 처리 대상 화상의 촬상은, 상기 촬상 장치(100)와는 상이한 촬상 장치에 의해 행하고, 이 촬상 장치로부터 전송된 처리 대상 화상의 화상 데이터를 취득하여, 화상 확대 처리를 행하는 화상 처리 장치일 수도 있다.

또한, 상기 실시예에 있어서는, 취득 수단, 지정 수단, 제1 분리 수단, 중간 화상 생성 수단, 제2 분리 수단, 골격 확대 수단, 텍스쳐 확대 수단, 최종 화상 생성 수단으로서의 기능을, 중앙 제어부(10), 조작 입력부(9), 화상 처리부(5)의 화상 취득부(5a), 화상 분리부(5b), 골격 확대부(5d), 텍스쳐 확대부(5f), 중간 화상 생성부(5g), 최종 화상 생성부(5h)가 구동함으로써 실현되는 구성으로 하였으나, 이에 한정되지 않고, 중앙 제어부(10)의 CPU에 의해 소정의 프로그램 등이 실행되는 것에 의해 실현되도록 구성할 수도 있다.

즉, 프로그램을 기억하는 프로그램 메모리(4)(도시하지 않음)에, 취득 처리 루틴, 지정 처리 루틴, 제1 분리 처리 루틴, 중간 화상 생성 처리 루틴, 제2 분리 처리 루틴, 골격 확대 처리 루틴, 텍스쳐 확대 처리 루틴, 최종 화상 생성 처리 루틴을 포함하는 프로그램을 기억시켜 둔다. 그리고, 취득 처리 루틴에 의해 중앙 제어부(10)의 CPU를, 화상을 취득하는 취득 수단으로서 기능하도록 할 수 있다. 또한, 지정 처리 루틴에 의해 중앙 제어부(10)의 CPU를, 취득 수단에 의해 취득된 원화상의 최종 확대 배율을 지정하는 지정 수단으로서 기능하도록 할 수 있다. 또한, 제1 분리 처리 루틴에 의해 중앙 제어부(10)의 CPU를, 취득 수단에 의해 취득된 원화상으로부터 골격 성분 및 텍스쳐 성분을 분리하는 제1 분리 수단으로서 기능하도록 할 수 있다. 또한, 중간 화상 생성 처리 루틴에 의해 중앙 제어부(10)의 CPU를, 제1 분리 수단에 의해 분리된 원화상의 골격 성분 및 텍스쳐 성분의 각각을 최종 확대 배율보다 작은 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성하는 중간 화상 생성 수단으로서 기능하도록 할 수 있다. 또한, 제2 분리 처리 루틴에 의해 중앙 제어부(10)의 CPU를, 중간 화상 생성 수단에 의해 생성된 중간 확대 화상으로부터 골격 성분을 분리하는 제2 분리 수단으로서 기능하도록 할 수 있다. 또한, 골격 확대 처리 루틴에 의해 중앙 제어부(10)의 CPU를, 제2 분리 수단에 의해 분리된 중간 확대 화상의 골격 성분을 최종 확대 배율로 되도록 확대하여 최종 확대 골격 성분을 생성하는 골격 확대 수단으로서 기능하도록 할 수 있다. 또한, 텍스쳐 확대 처리 루틴에 의해 중앙 제어부(10)의 CPU를, 제1 분리 수단에 의해 분리된 원화상의 텍스쳐 성분을 최종 확대 배율로 확대하여 최종 확대 텍스쳐 성분을 생성하는 텍스쳐 확대 수단으로서 기능하도록 할 수 있다. 또한, 골격 확대 처리 루틴에 의해 중앙 제어부(10)의 CPU를, 골격 확대 수단에 의해 생성된 최종 확대 골격 성분과 텍스쳐 확대 수단에 의해 생성된 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상을 생성하는 최종 화상 생성 수단으로서 기능하도록 할 수 있다.

100: 촬상 장치 5: 화상 처리부
5a: 화상 취득부 5b: 화상 분리부
5c: 중간 배율 산출부 5d: 골격 확대부
5f: 텍스쳐 확대부 5g: 중간 화상 생성부
5h: 최종 화상 생성부 5i: 재분리부
9: 조작 입력부 10: 중앙 제어부

Claims (5)

1. 원화상(original image)을 취득하는 취득 수단;
   상기 취득 수단에 의해 취득된 상기 원화상의 최종 확대 배율을 지정하는 지정 수단;
   상기 취득 수단에 의해 취득된 상기 원화상으로부터 골격 성분 및 텍스쳐 성분을 분리하는 제1 분리 수단;
   상기 제1 분리 수단에 의해 분리된 상기 원화상의 상기 골격 성분 및 상기 텍스쳐 성분 각각을 상기 최종 확대 배율보다 작은 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성하는 중간 화상 생성 수단;
   상기 중간 화상 생성 수단에 의해 생성된 상기 중간 확대 화상으로부터 골격 성분을 분리하는 제2 분리 수단;
   상기 제2 분리 수단에 의해 분리된 상기 중간 확대 화상의 골격 성분을 상기 최종 확대 배율로 되도록 확대하여 최종 확대 골격 성분을 생성하는 골격 확대 수단;
   상기 제1 분리 수단에 의해 분리된 상기 원화상의 텍스쳐 성분을 상기 최종 확대 배율로 확대하여 최종 확대 텍스쳐 성분을 생성하는 텍스쳐 확대 수단; 및
   상기 골격 확대 수단에 의해 생성된 상기 최종 확대 골격 성분과 상기 텍스쳐 확대 수단에 의해 생성된 상기 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상을 생성하는 최종 화상 생성 수단;
   을 포함하는 화상 처리 장치.
2. 제1항에 있어서,
   상기 지정 수단에 의해 지정된 상기 최종 확대 배율을 1 이상의 소정의 수로 나눗셈함으로써 상기 중간 확대 배율을 적어도 하나 산출하는 산출 수단을 더 포함하고,
   상기 중간 화상 생성 수단은,
   상기 원화상의 골격 성분 및 텍스쳐 성분 각각을 상기 산출 수단에 의해 산출된 상기 적어도 하나의 중간 확대 배율로 되도록 확대하는, 화상 처리 장치.
3. 제2항에 있어서,
   상기 중간 화상 생성 수단은,
   상기 원화상의 골격 성분 및 텍스쳐 성분 각각을, 상기 산출 수단에 의해 산출된 제1 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성하고,
   상기 산출 수단에 의해 산출된 상기 제1 중간 확대 배율보다 큰 제2 중간 확대 배율이 적어도 하나 있는 경우에, 상기 중간 화상 생성 수단에 의해 생성된 중간 확대 화상으로부터 골격 성분 및 텍스쳐 성분을 분리하는 재분리 수단을 더 포함하고,
   상기 중간 화상 생성 수단은, 또한
   상기 재분리 수단에 의해 분리된 상기 중간 확대 화상의 골격 성분 및 텍스쳐 성분 각각을, 상기 산출 수단에 의해 산출된 적어도 하나의 상기 제2 중간 확대 배율 중 어느 하나의 제2 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 새로운 중간 확대 화상을 생성하고,
   상기 재분리 수단에 의한 골격 성분 및 텍스쳐 성분의 분리, 및 상기 중간 화상 생성 수단에 의한 새로운 중간 확대 화상의 생성은, 상기 산출 수단에 의해 산출된 적어도 하나의 상기 제2 중간 확대 배율이 모두 사용될 때까지 행해지는, 화상 처리 장치.
4. 화상 처리 장치를 사용한 화상 처리 방법으로서,
   원화상을 취득하는 단계;
   취득된 상기 원화상의 최종 확대 배율을 지정하는 단계;
   취득된 상기 원화상으로부터 골격 성분 및 텍스쳐 성분을 분리하는 단계;
   분리된 상기 원화상의 상기 골격 성분 및 상기 텍스쳐 성분 각각을 상기 최종 확대 배율보다 작은 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여, 중간 확대 화상을 생성하는 단계;
   생성된 상기 중간 확대 화상으로부터 골격 성분을 분리하는 단계;
   분리된 상기 중간 확대 화상의 골격 성분을 상기 최종 확대 배율로 되도록 확대하여 최종 확대 골격 성분을 생성하는 단계;
   분리된 상기 원화상의 텍스쳐 성분을 상기 최종 확대 배율로 확대하여 최종 확대 텍스쳐 성분을 생성하는 단계;
   생성된 상기 최종 확대 골격 성분과 상기 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상을 생성하는 단계
   를 실행하는, 화상 처리 방법.
5. 화상 처리 장치의 컴퓨터를,
   원화상을 취득하는 취득 수단;
   상기 취득 수단에 의해 취득된 상기 원화상의 최종 확대 배율을 지정하는 지정 수단;
   상기 취득 수단에 의해 취득된 상기 원화상으로부터 골격 성분 및 텍스쳐 성분을 분리하는 제1 분리 수단;
   상기 제1 분리 수단에 의해 분리된 상기 원화상의 상기 골격 성분 및 상기 텍스쳐 성분 각각을 상기 최종 확대 배율보다 작은 중간 확대 배율로 되도록 확대하고, 확대 후의 골격 성분 및 텍스쳐 성분을 합성하여 중간 확대 화상을 생성하는 중간 화상 생성 수단;
   상기 중간 화상 생성 수단에 의해 생성된 상기 중간 확대 화상으로부터 골격 성분을 분리하는 제2 분리 수단;
   상기 제2 분리 수단에 의해 분리된 상기 중간 확대 화상의 골격 성분을 상기 최종 확대 배율로 되도록 확대하여 최종 확대 골격 성분을 생성하는 골격 확대 수단;
   상기 제1 분리 수단에 의해 분리된 상기 원화상의 텍스쳐 성분을 상기 최종 확대 배율로 확대하여 최종 확대 텍스쳐 성분을 생성하는 텍스쳐 확대 수단; 및
   상기 골격 확대 수단에 의해 생성된 상기 최종 확대 골격 성분과 상기 텍스쳐 확대 수단에 의해 생성된 상기 최종 확대 텍스쳐 성분을 합성하여 최종 확대 화상을 생성하는 최종 화상 생성 수단;
   으로서 기능하게 하는 프로그램이 기억된, 기억 매체.

Images