KR100247938B1 - 영상처리 시스템의 디지탈 초점 조절방법 및 장치 - Google Patents
영상처리 시스템의 디지탈 초점 조절방법 및 장치 Download PDFInfo
- Publication number
- KR100247938B1 KR100247938B1 KR1019970061296A KR19970061296A KR100247938B1 KR 100247938 B1 KR100247938 B1 KR 100247938B1 KR 1019970061296 A KR1019970061296 A KR 1019970061296A KR 19970061296 A KR19970061296 A KR 19970061296A KR 100247938 B1 KR100247938 B1 KR 100247938B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- transfer function
- function
- value
- edge
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000012545 processing Methods 0.000 title abstract description 24
- 238000012546 transfer Methods 0.000 claims abstract description 57
- 230000004044 response Effects 0.000 claims abstract description 46
- 238000006731 degradation reaction Methods 0.000 claims abstract description 33
- 230000015556 catabolic process Effects 0.000 claims abstract description 32
- 238000012935 Averaging Methods 0.000 claims description 3
- 238000003709 image segmentation Methods 0.000 claims 1
- 230000008569 process Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000009792 diffusion process Methods 0.000 description 6
- 239000011159 matrix material Substances 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000006866 deterioration Effects 0.000 description 3
- 230000007480 spreading Effects 0.000 description 3
- 239000013598 vector Substances 0.000 description 3
- 239000006185 dispersion Substances 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/10—Image enhancement or restoration using non-spatial domain filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20048—Transform domain processing
- G06T2207/20056—Discrete and fast Fourier transform, [DFT, FFT]
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
초점이 맞지 않는 영상의 초점을 디지탈적으로만 조절하는 영상 처리 시스템의 디지탈 초점 조절 방법 및 장치가 개시된다. 이 방법은 초점이 맞지 않는 영상을 소정 크기의 부 영상들로 분할하고, 분할된 부 영상들 각각의 엣지의 방향을 추정하고, 각 엣지의 방향에 대한 계단 함수 응답을 구하고, 소정수개의 계단 함수 응답들을 평균하여 평균 계단 함수 응답을 구하며, 평균 계단 함수 응답을 이용하여 점 확산 함수의 계수들을 구하고, 점 확산 함수의 계수들을 이용하여 영상 열화 전달함수를 구하며, 영상 열화 전달함수를 이용하여 영상 복원 전달함수를 구하며, 영상 복원 전달함수와 초점이 맞지 않는 영상을 주파수 영역상에서 승산하여 초점이 맞는 원래의 영상을 구한다. 그러므로, 실시간으로 영상을 복원하고, 영상 처리 시스템의 부피와 무게를 줄일 수 있는 효과가 있다.
Description
본 발명은 영상 처리 시스템에 관한 것으로서, 특히, 영상 처리 시스템에서 영상의 맞지 않는 초점을 디지탈적으로 조절하여 원래의 영상을 복원해내는 디지탈 초점 조절 방법 및 장치에 관한 것이다.
초점이 맞지 않는 순차 영상의 복원 문제는 영상 처리 시스템에서 매우 중요한 부분이다. 종래의 영상 처리 시스템에 적용되는 초점 조절 장치는 피사체로 적외선을 투사하고, 피사체로부터 반사되어 나오는 적외선을 수광한다. 이 때, 영상 처리 시스템은 적외선을 투사한 시점부터 피사체로부터 반사되어 되돌아오는 적외선을 수광한 시점까지의 시간 지연을 측정하여 시스템과 피사체까지의 거리를 계산하고, 계산된 거리로부터 초점 거리를 추정한 뒤, 렌즈를 기계적인 구동으로 움직였다.
한편, 최적의 초점 거리를 찾기 위해 디지탈 영상 처리 기술을 결합하는 가장 발달된 형태의 종래의 초점 조절 장치는 디지탈 신호 처리 기술을 사용하여 초점이 맞았는가를 판단하지만, 최적의 초점 상태에 도달하기 위해서는 불가피하게 렌즈를 기계적으로 구동시켜야 한다.
전술한 종래의 초점 조절 장치들은 움직임이 큰 피사체의 초점을 조절할 경우, 렌즈의 기계적인 구동에 의해 시간적인 손실이 발생하여 초점 조절을 실시간으로 처리할 수 없었을 뿐만 아니라, 적외선 장치나 렌즈 구동 모터등의 장착에 따라 부피와 무게등이 증가하는 문제점들이 있었다.
따라서, 초점 렌즈의 기계적인 움직임을 전체적으로든 부분적으로든 순수한 디지탈 영상 처리 기법으로 대체할 필요성이 제기되었다. 또한, 이러한 필요성은 현재 VLSI 기술이나 컴퓨터 과학 기술이 놀라운 정도로 고속화, 고집적화, 저 전력화 및 저 가격화됨에 따라 더욱 절실해지고 있다.
본 발명이 이루고자 하는 기술적 과제는, 초점이 맞지 않는 영상의 초점을 디지탈적으로만 조절하는 영상 처리 시스템의 디지탈 초점 조절 방법을 제공하는 데 있다.
본 발명이 이루고자 하는 다른 기술적 과제는, 상기 디지탈 초점 조절 방법을 수행하는 영상 처리 시스템의 디지탈 초점 조절 장치를 제공하는 데 있다.
도 1은 영상 열화 과정과 복원 과정들을 설명하기 위한 모델이다.
도 2는 본 발명에 의한 디지탈 초점 조절 방법을 설명하기 위한 플로우차트이다.
도 3은 도 2에 도시된 제32단계의 본 발명에 의한 바람직한 일실시예의 플로우차트이다.
도 4a∼4e들은 분류된 엣지 방향의 형태를 나타내는 도면들이다.
도 5a 및 5b들은 반지름 2를 갖는 PSF 및 계단 함수 응답을 설명하기 위한 도면이다.
도 6은 본 발명에 의한 디지탈 초점 조절 장치의 바람직한 일실시예의 블럭도이다.
상기 과제를 이루기 위한 본 발명에 의한 영상 처리 시스템의 디지탈 초점 조절 방법은 초점이 맞지 않는 영상을 소정 크기의 부 영상들로 분할하는 단계와, 분할된 상기 부 영상들 각각의 엣지의 방향을 추정하는 단계와, 상기 각 엣지의 방향에 대한 계단 함수 응답을 구하는 단계와, 소정수개의 상기 계단 함수 응답들을 평균하여 평균 계단 함수 응답[S(X)](1≤X≤R)을 구하는 단계와, 상기 평균 계단 함수 응답을 이용하여 점 확산 함수의 계수들(a0, a1, ... aR-2및 aR-1)(여기서, R은 상기 점 확산 함수의 반지름이다.)을 아래와 같이 구하는 단계와,
(여기서, Z는 상기 평균 계단 함수 응답의 최대값에서 최소값을 감산한 값을나타낸다.)
상기 점 확산 함수의 계수들을 이용하여 영상 열화 전달함수를 구하는 단계와, 상기 영상 열화 전달함수를 이용하여 영상 복원 전달함수를 구하는 단계 및 상기 영상 복원 전달함수와 상기 초점이 맞지 않는 상기 영상을 주파수 영역상에서 승산하여 초점이 맞는 원래의 영상을 구하는 단계로 구성되는 것이 바람직하다.
상기 다른 과제를 이루기 위한 본 발명에 의한 영상 처리 시스템의 디지탈 초점 조절 장치는 점 확산 함수의 계수들(a0, a1, ... aR-2및 aR-1)(여기서, R은 상기 점 확산 함수의 반지름)을 아래와 같이 계산하고, 계산된 상기 계수들을 이용하여 주파수 영역에서 표현되는 영상 열화 전달함수를 계산하는 전달함수 계산 수단과,
(여기서, S(X)[1≤X≤R]는 평균 계단 함수 응답을 나타내고, Z는 상기 평균 계단 함수 응답의 최대값에서 최소값을 감산한 값을 나타낸다.)
입력한 상기 영상 열화 전달함수의 절대값을 산출하는 제1 절대값 산출수단과, 상기 절대값을 입력하여 제곱하는 제1 제곱수단과, 입력한 상기 영상 열화 전달함수의 복소 공액을 계산하는 복소 공액 계산 수단과, 입력한 소정 연산자의 절대값을 산출하는 제2 절대값 산출 수단과, 상기 소정 연산자의 절대값을 제곱하는 제2 제곱수단과, 상기 제2 제곱 수단의 출력에 라그랑제(Lagrange) 곱셈자를 승산하는 제1 승산 수단과, 상기 제1 승산 수단의 출력과 상기 제1 제곱 수단의 출력을 가산하는 가산 수단과, 상기 가산수단의 출력을 상기 복소 공액으로 제산하고, 제산된 결과를 영상 복원 전달함수로서 출력하는 제산 수단 및 상기 영상 복원 전달함수와 주파수 영역에서 표현되는 상기 초점이 맞지 않은 영상을 승산하고, 승산된 결과를 초점이 맞는 영상으로서 출력하는 제2 승산수단으로 이루어지는 것이 바람직하다.
이하, 영상 복원의 기본적인 이론에 대해 첨부한 도 1을 참조하여 다음과 같이 살펴본다.
도 1은 영상 열화(blur) 과정과 복원 과정들을 설명하기 위한 모델로서, 영상의 초점을 열화시키는 영상 열화 시스템(10)과 열화된 초점을 복원하는 복원 시스템(또는, 영상 처리 시스템)(20)으로 모델링되어 있다.
도 1에 도시된 영상 열화 시스템(10)의 영상 열화(blur)부(12)는 원래 영상(X)의 초점을 열화시키고, 다음 수학식 1과 같이 주파수 영역(frequency domain)에서 표현되는 초점이 열화된 영상(Y')을 가산기(14)로 출력한다.
여기서, H는 영상 열화부(12)의 전달함수인 영상 열화 전달함수를 나타낸다. 또한, 수학식 1은 공간 영역(spacial domain)상에서 영상 열화 전달함수와 원래의 영상(x)(여기서, x는 X를 공간 영역상에서 표현한 것)의 콘볼루션(convolution)으로도 표현될 수 있다.
가산기(14)는 부가적인 백색 가우시안 잡음(N)과 영상 열화부(12)에서 열화된 신호(Y')를 가산하고, 가산된 결과(Y)를 영상 처리 시스템(20)에서 관측되는 초점이 맞지 않는 영상으로서 출력한다.
여기서, H*는 H의 복소 공액을 나타내고, C'는 선형 고역 통과 필터의 연산자로서 'Kenneth R. Castleman'에 의해 "Digital Image Processing"의 제목으로 저술되고 'Prentice-Hall'출판사로부터 1996년에 출간된 책의 397페이지에 상세히 기술되어 있다. 이 책에서는 C'가 P(n,v)로 나타나 있다. 또한, 후술되는 λ는 라그랑제 곱셈자(Lagrange multiplier)이다.
전술한 영상 복원 전달함수에 대해 간략하게 살펴보면 다음과 같다.
영상 복원의 문제는 도 1에 도시된 영상 열화 과정의 모델로부터, 원래의 영상(X)과 가장 근접하도록, 열화된 관측 영상(Y)에 역의 과정을 적용하는 것이다. 이러한 역의 과정을 적용하는 것을 'ill-posed problem'이라고 하며, 이 'ill-posed problem'은 원래 영상의 작은 변동이 복원된 영상이 존재하는 해(solution)의 영역에서 무한한 변동으로 나타날 수 있음을 의미한다. 그러므로, 복원된 영상은 해의 영역에서 영상의 부드러움과 거친 정도를 적절하게 유지해주는 방향으로 추정되어야 한다. 이를 위해, 'ill-posed problem'을 'well-posed problem'으로 바꾸는 정칙화(rehularization) 이론에서, 다음 수학식 4의 2차 평활화 함수(smoothing function)[F(λ,x)]는 해의 영역에서 평탄한 영역과 잡음 영역의 기준(norm)을 제한하는 데 사용된다.
여기서, 라그랑제 곱셈자 λ는 ∥y-Hx∥2항과 ∥C'x∥2항들중 어느 항에 가중을 둘 것인지를 결정하고, y는 Y를 공간 영역상에서 표현한 것이다. 즉, λ값이 감소되면 복원된 영상에서 잡음 성분은 증가하고, λ값이 증가하면 복원된 영상은 극도로 평활화(ultra smoothed)된다. 그러므로, 함수 F(λ, x)를 최소화시키는 최적의 λ값을 결정해야 한다. 여기서, F(λ, x)를 최소화시키기 위해 소정 λ를 수학식 4에 대입하면, 다음 수학식 5와 같다.
여기서, xT는 x의 전치행렬을 의미하고, x는 열 벡터로서 xi는 x의 i번째 원소를 나타내며, 벡터 b와 행렬 T'는 각각 다음 수학식 6과 같다.
함수 F(x)의 행렬 T'는 포지티브 세미 디피니티(positive semidefinite)의 성질을 가지며 함수 F(x)를 최소화시키기 위한 조건은 x가 다음 수학식 7과 같은 선형 방정식의 해를 만족시키면 된다. 여기서, 'positive semidefinite 성질'은 'Linear algebra and its applications'라는 제목으로 'GILBERT STRANG'에 의해 저술되고 'SAUNDERS'출판사로부터 1988년에 3차(third edtion)로 출간된 책의 54페이지에 기술되어 있다.
그러므로, x는 다음 수학식 8이 된다.
전술한 수학식 8의 블럭 순환 행렬 방정식을 2차원 이산 푸리에 변환하면, 수학식 3과 같은 영상 복원 전달함수 즉, 제한적 최소 평방(CLS:Constrained Least Square) 필터의 주파수 응답이 구해진다.
이하, 본 발명에 의한 영상 처리 시스템의 디지탈 초점 조절 방법을 첨부한 도면들을 참조하여 다음과 같이 설명한다.
도 2는 본 발명에 의한 디지탈 초점 조절 방법을 설명하기 위한 플로우차트로서, 평균 계단 함수 응답을 이용하여 점 확산 함수의 계수들을 구하는 단계(제30 ∼ 제38단계), 계수들을 이용하여 초점이 맞는 영상을 디지탈적으로 구하는 단계(제40 ∼ 제44단계)로 이루어진다.
본 발명에 의한 디지탈 초점 조절 방법을 설명하기에 앞서 두가지의 가정이 필요하다. 그중 하나는 어떤 입력 영상이라도 배경화면과 피사체의 사이가 임의의 방향에 대해서 적당한 크기의 엣지를 가지고 있어야 한다는 것이고, 다른 하나는 초점이 흐린 정도가 확산원(COC:Circle Of Confusion)의 모양을 따라 균일하게 분포하고 이것이 입력 영상의 모든 영역에 대하여 불변해야 한다는 것이다.
여기서, COC에 대해 잠시 살펴보면, 초점이 맞지 않는 영상의 흐림 현상은 피사체와 촬상면의 거리가 적절하지 않을 때 발생하며 이것은 피사체 표면의 한 점이 촬상면상의 한 점 즉, 초점의 위치에 대응되지 않고 확산되기 때문이다. 이 확산은 점 광원이 원의 형태로 투영되는 현상으로 근사될 수 있으며, 이 원을 확산원이라고 한다. 그리고, 이 확산원은 영상 처리 시스템을 통과한 영상이 정확한 초점거리에 위치하고 있지 않을 때 발생하며, 점광원이 초점 거리의 앞 또는 뒤에 있을 때 확산원의 형태로 투영된다. 초점이 맞지 않아서 영상이 흐려지면, 영상의 저역 성분이 두드러진다. 그러므로, 초점이 맞지 않는 영상의 흐림 정도는 고주파 성분의 크기로서 알 수 있다. 이 고주파 성분의 크기는 고역 통과 필터를 통과한 열화된 영상의 분산값으로 볼 수 있다. 즉, 필터링된 고주파 성분의 분산이 클수록 영상의 흐림 정도가 적다. 실제로 종래의 많은 디지탈 초점 조절 장치에서는 초점이 맞지 않아서 생기는 영상의 흐림은 적당한 분산값을 가지는 2차원의 가우시안 함수로 모델링된다.
전술한 두가지의 가정하에, 본 발명에 의한 디지탈 초점 방법은 먼저, 초점이 맞지 않은 B×B(여기서, B는 픽셀의 수) 크기의 영상을 P×P(여기서, P는 픽셀의 수) 크기의 영상으로 분할하여 정방형의 부 영상들(sub-images)을 구한다(제30단계). 여기서, B는 P의 배수일 수 있다.
제30단계후에, 부 영상들 각각에 대하여 엣지의 방향을 추정한다(제32단계). 영상의 해석에 있어서, 가장 기본적이고 중요한 문제중의 하나가 엣지 검출과 분류이다. 일반적으로 엣지는 상대적으로 밝기의 변화가 급격하게 변화하는 두 영역의 경계를 의미한다. 제32단계에서는, 블럭 이산 코사인 변환(BDCT:Block Discrete Cosine Transform)을 사용하여 엣지를 분류할 수 있다. 이를 위해, 영상이 열화되는 과정이 선형 공간 불변적이거나 또는 영상 열화 전달함수(H)가 블럭 토플리츠(block Toeplitz) 행렬이면서 블럭 순환 구조라는 가정과, 수학식 3에 나타난 연산자(C')가 블럭 기반으로 분류된 엣지의 방향 정보에 따라 결정되는 블럭-적응적인 고역 통과 필터의 연산자라는 가정들이 필요하다. 이 블럭 기반의 블럭이란, 제30단계에서 설명된 각 부 영상을 의미한다.
도 3은 도 2에 도시된 제32단계의 본 발명에 의한 바람직한 일실시예의 플로우차트로서, DCT 계수들을 구하는 단계(제60단계) 및 DCT 계수들과 소정 임계값을 비교하여 엣지의 방향을 추정하는 단계(제62 ∼ 제78단계)로 이루어진다.
도 4a∼4e은 분류된 엣지 방향의 형태를 나타내는 도면들로서, 도 4a는 엣지의 방향이 단조로운(monotone)로운 것을 나타내고, 도 4b는 수평 방향의 엣지를 나타내고, 도 4c는 수직 방향의 엣지를 나타내고, 도 4d는 45°기울어진 방향의 엣지를 나타내고, 도 4e는 135°기울어진 방향의 엣지를 나타낸다.
먼저, 분할된 부 영상들 각각에 대한 DCT블럭에서 수직 방향의 엣지 및 수평 방향의 엣지를 나타내는 두개의 DCT 계수들(Cv 및 Ch)을 구한다(제60단계). 여기서, DCT 계수들을 구하는 일반식은 다음 수학식 9와 같다.
여기서, DCT계수{C(k1, k2)}는 해당 DCT 블럭{x(n1, n2)}(0≤n1≤P-1 및 0≤n2≤P-1)에 대해 존재하는 P×P개의 서로 다른 기저 함수들중에서 (k1, k2)번째의 기저 함수가 포함되어 있는 정도를 나타내는 값이다. 만일, P=8인 경우 64개의 DCT 계수들이 생성되며, 64개의 기저 함수들중에서 (0,1)과 (1,0)번째의 기저 함수 성분을 나타내는 Cv와 Ch는 다음 수학식 10과 같이 표현된다.
제60단계후에, Cv 및 Ch의 절대값들(|Cv|, |Ch|)이 각각 소정 임계값(Th)보다 적은가를 판단한다(제62단계). 만일, |Cv| 및 |Ch|가 각각 Th보다 적으면, 엣지의 방향은 도 4a에 도시된 바와 같이 단조로운 것으로 추정한다(제64단계). 그러나, |Cv| 및 |Ch|들이 각각 Th보다 적지 않으면, |Ch|에서 |Cv|를 감산한 값이 Th보다 큰가를 판단한다(제66단계). 만일, |Ch|에서 |Cv|를 감산한 값이 Th보다 크면, 엣지의 방향을 도 4b에 도시된 수평 방향으로 추정한다(제68단계). 그러나, |Ch|에서 |Cv|를 감산한 값이 Th보다 크지 않으면, |Cv|에서 |Ch|를 감산한 값이 Th보다 큰가를 판단한다(제70단계). |Cv|에서 |Ch|를 감산한 값이 Th보다 크면, 엣지의 방향을 도 4c에 도시된 수직 방향으로 추정한다(제72단계). 그러나, |Cv|에서 |Ch| 감산한 값이 Th보다 크지 않으면, Ch와 Cv를 승산한 값이 양수인가를 판단한다(제74단계). 만일, Ch와 Cv를 승산한 값이 양수이면, 엣지의 방향을 도 4d에 도시된 바와 같이 45°기울어진 것으로 추정한다(제76단계). 그러나, Cv와 Ch를 승산한 값이 양수가 아니면, 엣지의 방향을 도 4e에 도시된 바와 같이 135°기울어진 것으로 추정한다(제78단계). 전술한 제60∼제78단계는 부 영상들 각각에 대해 수행되어, 즉, 블럭 기반으로 수행되어 모든 부 영상들 각각에 대한 엣지의 방향이 추정된다.
도 5a 및 5b들은 반지름(R) 3을 갖는 점 확산 함수 및 계단 함수 응답을 설명하기 위한 도면으로서, 도 5a는 2차원 원형의 점 확산 함수를 나타내고, 도 5b는 해당하는 1차원 계단 함수 응답을 나타낸다. 도 5b의 종축은 휘도의 레벨을 나타내고, 횡축은 변위를 나타낸다.
한편, 제32단계후에 부 영상들 각각에 대해서, 추정된 엣지의 방향과 직각 방향으로 존재하는 계단함수 응답[SA(n)][여기서, A=1, 2, ... 또는]을 구한다(제34단계). 제34단계후에, 소정수개의 계단 함수 응답들을 다음 수학식 11과 같이 평균하여, 평균 계단 함수 응답[S(n)]을 구한다(제36단계).
여기서, E는 추출된 엣지 방향들의 집합을 나타내고, M은 엣지 방향이 측정된 부 영상들의 갯수인이하의 값을 나타낸다. 이는, 어느 부영상의 엣지 방향이 추출되지 않을 수도 있으므로, 엣지의 방향이 추출된 M개의 부 영상들에 대한 계단 함수 응답들만을 평균하기 위해서이다.
여기서, 평균 계단 함수 응답은 도 5b에 도시된 횡축으로 2R+1 만큼의 동안 나타나게 된다.
제36단계후에, 1차원의 평균 계단 함수 응답을 이용하여 도 5a에 도시된 바와 같이 2차원 원형의 대칭적인 점 확산 함수의 계수들(a0, a1, ... 및 aR-1)을 다음 수학식 12과 같이 구한다. 여기서, 원형의 대칭적인 점 확산 함수의 계수들은 원의 가운데로부터 바깥쪽으로 a0, a1, ... 및 aR-1가 된다.
여기서, Z는 평균 계단 함수 응답의 최대값에서 최소값을 감산한 값이다.
제38단계후에, 공간 영역에서 영상 열화 전달함수(h) 즉, 점 확산 함수는 점 확산 함수의 계수들을 이용하여 다음 수학식 13과 같이 구해진다(제40 단계).
여기서, 도 5a에 도시된 바와 같이 a23은 a3보다는 a2에 가까운 값을 나타내고, a233은 a2보다는 a3에 가까운 값을 나타내고, h의 크기는 B×B이고, a12= α1·a1+ (1 - α1) ·a2이고, a23= α2·a2+ (1 - α2) ·a3이다. 즉, amn= αm·am+ (1 - αm) ·an(1≤m≤R-1, n=m+1)이다. 이 때, α1, α2, ..., αm-1및 α1m들 각각은 가중치로서, 0보다 크고 1보다 적다. 예를 들면, α1은 도 5a에 도시된 r1에 반비례한다. 한편, Σ는 점 확산 함수 계수들의 총합을 나타낸다.
제40단계후에, 추정된 점 확산 함수인 전달함수(h)를 2차원 이산 푸리에 변환(DFT:Discrete Fourier Transform)하여 영상 열화 전달함수(H)를 구하고, 영상 열화 전달함수(H)를 수학식 3에 대입하여 영상 복원 전달함수(G)를 구한다(제42단계). 제42단계후에, 주파수 영역상의 영상 복원 전달함수(G)를 초점이 맞지 않는 주파수 영역상의 영상 신호(Y)에 승산하여, 복원된 초점을 갖는 주파수 영역상의 영상 신호()를 구한다(제44단계). 이 때,를 역 이산 푸리에 변환(IDFT:Inverse Discrete Fourier Transform)하여 복원된 영상 신호()를 구한다. 또한, 전달함수(G)를 역 이산 푸리에 변환한 공간 영역상의 영상 복원 필터(22)의 임펄스 응답(g)을 초점이 맞지 않은 공간 영역상의 영상 신호(y)와 콘볼루션하여 복원된 영상 신호()를 구할 수도 있다.
이하, 전술한 디지탈 초점 조절 방법을 수행하는 본 발명에 의한 영상 처리 시스템의 디지탈 초점 조절 장치의 구성 및 동작을 첨부한 도면을 참조하여 다음과 같이 설명한다.
도 6은 본 발명에 의한 디지탈 초점 조절 장치의 바람직한 일실시예의 블럭도로서, 영상 분할부(102), 엣지 추정부(104), 계단함수 응답 계산부(106), 평균값 계산부(108), 계수 연산부(110) 및 제1 이산 푸리에 변환부(112)로 구성되는 전달함수 계산부(100), 제1 및 제2 절대값 산출부들(120 및 124), 제1 및 제2 제곱부들(122 및 126), 복소 공액 계산부(128), 제산부(130), 제1 및 제2 승산기들(132 및 136), 가산기(134), 제2 이산 푸리에 변환부(114) 및 역 이산 푸리에 변환부(132)로 구성된다.
도 6에 도시된 디지탈 초점 조절 장치는 도 1에 도시된 디지탈 초점 조절 장치(22)에 해당한다. 전달함수 계산부(100)는 수학식 12의 점 확산 함수의 계수들(a0, a1, ... aR-2및 aR-1)을 이용하여 주파수 영역에서 표현되는 영상 열화 전달함수(H)를 계산한다. 이를 위해, 영상 분할부(102)는 입력단자 IN1을 통해 입력되는 초점이 맞지 않는 영상 신호(y)를 P×P 크기의 부 영상들로 분할하고, 분할된 영상을 엣지 추정부(104)로 출력한다. 엣지 추정부(104)는 제32단계에서 전술한 방법으로 각 부 영상의 엣지의 방향을 추정하고, 추정된 엣지의 방향들을 계단 함수 응답 계산부(106)로 출력한다. 계단 함수 응답 계산부(106)는 엣지 추정부(104)로부터 입력한 추정된 M개의 엣지의 방향들 각각에 대한 계단 함수 응답을 계산하고, 계산된 계단 함수 응답들을 평균값 계산부(108)로 출력한다.
평균값 계산부(108)는 수학식 11에서와 같이 계단 함수 응답들의 평균을 계산하고, 계산된 평균 계단 함수 응답을 계수 연산부(110)로 출력한다. 계수 연산부(110)는 평균 계단 함수 응답을 입력하여 수학식 12의 점 확산 함수 계수들을 계산하고, 계산된 계수들로부터 구한 수학식 13에 표현된 공간 영역상의 영상 열화 전달함수(h)를 제1 이산 푸리에 변환부(112)로 출력한다. 제1 이산 푸리에 변환부(112)는 공간 영역상의 영상 열화 전달함수(h)를 2차원 이산 푸리에 변환하여 주파수 영역의 영상 열화 전달함수(H)를 구하고, 영상 열화 전달함수(H)를 제1 절대값 산출부(120) 및 복소 공액 계산부(128)로 출력한다.
제1 절대값 산출부(120)는 입력한 영상 열화 전달함수(H)의 절대값을 산출하고, 산출된 영상 열화 전달함수의 절대값(|H|)을 제1 제곱부(122)로 출력한다. 제1 제곱부(122)는 |H|을 입력하여 제곱하고, 제곱한 결과를 가산기(134)로 출력한다. 복소 공액 계산부(128)는 전달함수 계산부(100)로부터 입력한 영상 열화 전달함수(H)의 복소 공액(H*)을 계산하고, 계산된 복소 공액(H*)을 제산부(130)로 출력한다.
한편, 제2 절대값 산출부(124)는 입력단자 IN2를 통해 입력한 수학식 3의 설명에서 언급한 소정 선형 고역 통과 필터 연산자(C')의 절대값(|C'|)을 산출하여 제2 제곱부(126)로 출력한다. 제2 제곱부(126)는 |C'|를 제곱하고, 제곱한 결과를 제1 승산기(132)로 출력한다. 제1 승산기(132)는 제2 제곱부(126)에서 제곱된 결과와 라그랑제 곱셈자(λ)를 승산하고, 승산된 결과를 가산기(134)로 출력한다. 가산기(134)는 제1 제곱부(122)에서 제곱한 결과와 제1 승산기(132)에서 승산된 결과를 가산하고, 가산된 결과를 제산부(130)로 출력한다. 제산부(130)는 복소 공액 계산부(128)로부터 입력한 H의 공액(H*)을 가산기(134)에서 가산된 결과로 제산하고, 제산된 결과를 제2 승산기(136)로 출력한다.
이 때, 제2 이산 푸리에 변환부(114)는 입력단자 IN1을 통해 입력한 초점이 맞지 않는 공간 영역상의 영상 신호(y)를 2차원 이산 푸리에 변환하여, 주파수 영역상의 영상 신호(Y)를 구한다. 제2 승산기(136)는 제산부(130)에서 제산된 결과인 수학식 3의 영상 복원 전달함수(G)와 제2 이산 푸리에 변환부(114)로부터 출력되는 주파수 영역상의 초점이 맞지 않는 영상 신호(Y)를 승산하고, 승산된 결과를 역 이산 푸리에 변환부(132)로 출력한다. 역 이산 푸리에 변환부(132)는 승산기(136)에서 승산된 결과를 2차원 역 이산 푸리에 변환하고, 변환된 신호를 초점이 복원된 영상 신호()로서 출력단자 OUT를 통해 출력한다.
결국, 전술한 본 발명에 의한 디지탈 초점 조절 방법 및 장치에서는 열화된 입력 영상의 엣지 성분을 찾은 다음, 계단함수 응답을 분석하여 영상 열화 시스템(10)을 추정하는 새로운 방법을 제시하였다. 이를 위해, 영상의 엣지 부분을 먼저 검출해서 계단 함수 응답이 얼마만큼의 경사를 가지고 분포하였는가를 관찰하여 점 확산 함수(h)의 크기와 모양을 추정하고, 추정된 점 확산 함수를 영상 복원 전달함수에 적용하여 영상을 복원하고, 이 복원된 영상을 초점이 맞은 영상으로 간주하였다.
전술한 본 발명에 의한 디지탈 초점 조정 방법 및 장치는 컴퓨터 비젼(computer vision), 현미경, 비디오 카메라 또는 캠코더(camcoder)등과 같은 영상 처리 시스템에 적용될 수 있다.
이상에서 설명한 바와 같이, 본 발명에 의한 영상 처리 시스템의 디지탈 초점 조절 방법 및 장치는 적외선 장치나 렌즈 구동 모터를 사용하여 기계적으로 영상의 초점을 조절하는 종래의 방법과 달리, 디지탈적으로만 영상의 초점을 조절한다. 그러므로, 실시간으로 초점을 맞출 수 있고, 영상 처리 시스템의 부피와 무게를 줄일 수 있는 효과가 있다.
Claims (4)
- (a) 초점이 맞지 않는 영상을 소정 크기의 부 영상들로 분할하는 단계;(b) 분할된 상기 부 영상들 각각의 엣지의 방향을 추정하는 단계;(c) 상기 각 엣지의 방향에 대한 계단 함수 응답을 구하는 단계;(d) 소정수개의 상기 계단 함수 응답들을 평균하여 평균 계단 함수 응답[S(X)](1≤X≤R)을 구하는 단계;(e) 상기 평균 계단 함수 응답을 이용하여 점 확산 함수의 계수들(a0, a1, ... aR-2및 aR-1)(여기서, R은 상기 점 확산 함수의 반지름이다.)을 아래와 같이 구하는 단계;(여기서, Z는 상기 평균 계단 함수 응답의 최대값에서 최소값을 감산한 값을 나타낸다.)(f) 상기 점 확산 함수의 계수들을 이용하여 영상 열화 전달함수를 구하는 단계;(g) 상기 영상 열화 전달함수를 이용하여 영상 복원 전달함수를 구하는 단계; 및(h) 상기 영상 복원 전달함수와 상기 초점이 맞지 않는 상기 영상을 주파수 영역상에서 승산하여 초점이 맞는 원래의 영상을 구하는 단계를 구비하는 것을 특징으로 하는 영상 처리 시스템의 디지탈 초점 조절 방법.
- 제1 항에 있어서, 상기 (b) 단계는 상기 부 영상들 각각에 대해,(b1) 수직 및 수평 방향의 엣지들을 각각 나타내는 두개의 이산 코사인 변환 계수들(Cv, Ch)을 구하는 단계;(b2) 상기 Cv 및 상기 Ch의 절대값들이 각각 소정 임계값(Th)보다 적은가를 판단하는 단계;(b3) 상기 Cv 및 상기 Ch의 절대값들이 각각 상기 Th보다 적으면, 상기 엣지의 방향이 단조로운 것으로 추정하는 단계;(b4) 상기 Cv 및 상기 Ch의 절대값들이 각각 상기 Th보다 적지 않으면, 상기 Ch의 절대값에서 상기 Cv의 절대값을 감산한 값이 상기 Th보다 큰가를 판단하는 단계;(b5) 상기 감산한 값이 상기 Th보다 크면, 상기 엣지의 방향을 수평 방향으로 추정하는 단계;(b6) 상기 감산한 값이 상기 Th보다 크지 않으면, 상기 Cv의 절대값에서 상기 Ch의 절대값을 감산한 값이 상기 Th보다 큰가를 판단하는 단계;(b7) 상기 b6단계에서 감산한 값이 상기 Th보다 크면, 상기 엣지의 방향을 수직 방향으로 추정하는 단계;(b8) 상기 b6단계에서 감산한 값이 상기 Th보다 크지 않으면, 상기 Ch와 상기 Cv를 승산한 값이 양수인가를 판단하는 단계;(b9) 상기 승산한 값이 양수이면, 상기 엣지의 방향을 45°기울어진 것으로추정하는 단계; 및(b10) 상기 승산한 값이 양수가 아니면, 상기 엣지의 방향을 135°기울어진 것으로 추정하는 단계를 구비하는 것을 특징으로 하는 영상 처리 시스템의 디지탈 초점 조절 방법.
- 점 확산 함수의 계수들(a0, a1, ... aR-2및 aR-1)(여기서, R은 상기 점 확산 함수의 반지름)을 아래와 같이 계산하고, 계산된 상기 계수들을 이용하여 주파수 영역에서 표현되는 영상 열화 전달함수를 계산하는 전달함수 계산 수단;(여기서, S(X)[1≤X≤R]는 평균 계단 함수 응답을 나타내고, Z는 상기 평균 계단 함수 응답의 최대값에서 최소값을 감산한 값을 나타낸다.)입력한 상기 영상 열화 전달함수의 절대값을 산출하는 제1 절대값 산출수단;상기 절대값을 입력하여 제곱하는 제1 제곱수단;입력한 상기 영상 열화 전달함수의 복소 공액을 계산하는 복소 공액 계산 수단;입력한 소정 연산자의 절대값을 산출하는 제2 절대값 산출 수단;상기 소정 연산자의 절대값을 제곱하는 제2 제곱수단;상기 제2 제곱 수단의 출력에 라그랑제(Lagrange) 곱셈자를 승산하는 제1 승산 수단;상기 제1 승산 수단의 출력과 상기 제1 제곱 수단의 출력을 가산하는 가산 수단;상기 가산수단의 출력을 상기 복소 공액으로 제산하고, 제산된 결과를 영상 복원 전달함수로서 출력하는 제산 수단; 및상기 영상 복원 전달함수와 주파수 영역에서 표현되는 상기 초점이 맞지 않은 영상을 승산하고, 승산된 결과를 초점이 맞는 영상으로서 출력하는 제2 승산수단을 구비하는 것을 특징으로 하는 영상 처리 시스템의 디지탈 초점 조절 장치.
- 제3 항에 있어서, 상기 전달함수 계산 수단은상기 초점이 맞지 않는 영상을 입력하여 소정 크기의 부 영상들로 분할하는 영상 분할 수단;분할된 상기 부 영상들 각각의 엣지의 방향을 추정하는 엣지 추정 수단;추정된 상기 방향들 각각에 대한 계단 함수 응답을 계산하는 계단 함수 응답 계산 수단;계산된 소정수의 상기 계단 함수 응답들을 평균하여 상기 평균 계단 함수 응답을 계산하는 평균값 계산 수단;상기 평균 계단 함수 응답을 이용하여 상기 계수들을 연산하고, 연산된 상기 계수들로부터 공간 영역에서 표현되는 상기 영상 열화 전달함수를 생성하는 계수 연산 수단; 및상기 공간 영역에서 표현되는 상기 영상 열화 전달함수를 상기 주파수 영역에서 표현되는 영상 열화 전달함수로 변환하여 출력하는 이산 푸리에 변환 수단을 구비하는 것을 특징으로 하는 영상 처리 시스템의 디지탈 초점 조절 장치.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1019970061296A KR100247938B1 (ko) | 1997-11-19 | 1997-11-19 | 영상처리 시스템의 디지탈 초점 조절방법 및 장치 |
US09/143,306 US6154574A (en) | 1997-11-19 | 1998-08-28 | Digital focusing method and apparatus in image processing system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1019970061296A KR100247938B1 (ko) | 1997-11-19 | 1997-11-19 | 영상처리 시스템의 디지탈 초점 조절방법 및 장치 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR100247938B1 true KR100247938B1 (ko) | 2000-03-15 |
Family
ID=19525116
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1019970061296A KR100247938B1 (ko) | 1997-11-19 | 1997-11-19 | 영상처리 시스템의 디지탈 초점 조절방법 및 장치 |
Country Status (2)
Country | Link |
---|---|
US (1) | US6154574A (ko) |
KR (1) | KR100247938B1 (ko) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100823400B1 (ko) * | 2000-08-17 | 2008-04-17 | 소니 가부시끼 가이샤 | 화상 처리 장치 및 그 방법과 기록 매체 |
KR20110103205A (ko) * | 2010-03-12 | 2011-09-20 | 삼성전자주식회사 | 영상 복원 장치, 영상 복원 방법 및 영상 복원 시스템 |
KR20110108727A (ko) * | 2010-03-29 | 2011-10-06 | 삼성전자주식회사 | 영상 처리 장치 및 이의 영상 처리 방법 |
KR101399012B1 (ko) | 2007-09-12 | 2014-05-26 | 삼성전기주식회사 | 영상 복원 장치 및 방법 |
KR20190014224A (ko) * | 2017-07-28 | 2019-02-12 | 삼성전자주식회사 | 기판 검사 장치, 기판 검사 방법 및 이를 이용한 반도체 소자의 제조 방법 |
Families Citing this family (71)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6753919B1 (en) * | 1998-11-25 | 2004-06-22 | Iridian Technologies, Inc. | Fast focus assessment system and method for imaging |
US6836288B1 (en) * | 1999-02-09 | 2004-12-28 | Linvatec Corporation | Automatic exposure control system and method |
JP3980799B2 (ja) * | 1999-08-19 | 2007-09-26 | 株式会社リコー | 自動合焦装置およびその合焦方法 |
KR100311482B1 (ko) * | 1999-10-21 | 2001-10-18 | 구자홍 | 보간 영상의 화질 개선을 위한 필터링 제어방법 |
US20010008418A1 (en) * | 2000-01-13 | 2001-07-19 | Minolta Co., Ltd. | Image processing apparatus and method |
JP4389371B2 (ja) * | 2000-09-28 | 2009-12-24 | 株式会社ニコン | 画像修復装置および画像修復方法 |
JP2002288653A (ja) * | 2001-03-23 | 2002-10-04 | Minolta Co Ltd | 画像処理装置,方法,プログラム及び記録媒体 |
JP2002300461A (ja) * | 2001-03-30 | 2002-10-11 | Minolta Co Ltd | 画像復元装置、画像復元方法、プログラム及び記録媒体 |
JP2002300459A (ja) * | 2001-03-30 | 2002-10-11 | Minolta Co Ltd | 反復法による画像復元装置、画像復元方法、プログラム及び記録媒体 |
JP2002300384A (ja) * | 2001-03-30 | 2002-10-11 | Minolta Co Ltd | 画像復元装置、画像復元方法、プログラム及び記録媒体 |
US6925210B2 (en) * | 2001-07-09 | 2005-08-02 | Michael Herf | Method for blurring images in real-time |
US6928193B2 (en) * | 2001-12-05 | 2005-08-09 | Martin Gersten | Fundus imaging |
KR100411348B1 (ko) * | 2001-12-29 | 2003-12-18 | 엘지전자 주식회사 | 에지 검출 방법과 장치 |
WO2004001667A2 (en) * | 2002-06-21 | 2003-12-31 | The Trustees Of Columbia University In The City Of New York | Systems and methods for de-blurring motion blurred images |
US7181082B2 (en) * | 2002-12-18 | 2007-02-20 | Sharp Laboratories Of America, Inc. | Blur detection system |
EP1672912B1 (en) | 2003-01-16 | 2012-03-14 | DigitalOptics Corporation International | Method for producing an optical system including an electronic image enhancement processor |
US8294999B2 (en) | 2003-01-16 | 2012-10-23 | DigitalOptics Corporation International | Optics for an extended depth of field |
US7773316B2 (en) * | 2003-01-16 | 2010-08-10 | Tessera International, Inc. | Optics for an extended depth of field |
ATE549855T1 (de) * | 2003-01-16 | 2012-03-15 | Digitaloptics Corp Internat | Verfahren zur herstellung eines optischen systems,welches einen prozessor zur elektronischen bildverbesserung beinhaltet |
US20070236573A1 (en) * | 2006-03-31 | 2007-10-11 | D-Blur Technologies Ltd. | Combined design of optical and image processing elements |
US6993187B2 (en) * | 2003-02-14 | 2006-01-31 | Ikonisys, Inc. | Method and system for object recognition using fractal maps |
US6876776B2 (en) * | 2003-02-14 | 2005-04-05 | Ikonicys, Inc. | System and method for auto-focusing an image |
US7062079B2 (en) | 2003-02-14 | 2006-06-13 | Ikonisys, Inc. | Method and system for image segmentation |
JP4196274B2 (ja) * | 2003-08-11 | 2008-12-17 | ソニー株式会社 | 画像信号処理装置および方法、プログラム、並びに記録媒体 |
JP2005141722A (ja) | 2003-10-15 | 2005-06-02 | Ntt Docomo Inc | 画像信号処理方法、画像信号処理装置、及び画像信号プログラム |
JP2005332383A (ja) * | 2004-04-23 | 2005-12-02 | Fuji Photo Film Co Ltd | 画像処理方法および装置並びにプログラム |
US7825972B2 (en) * | 2004-10-08 | 2010-11-02 | Cooper Allan J | Processing method device and system to produce a focused image signal from an unfocused image |
US8019803B2 (en) * | 2004-10-14 | 2011-09-13 | Lightron Co., Ltd. | Method and device for restoring degraded information |
WO2006041126A1 (ja) * | 2004-10-14 | 2006-04-20 | Lightron Co., Ltd. | 劣化情報復元方法と復元装置 |
JP4539318B2 (ja) * | 2004-12-13 | 2010-09-08 | セイコーエプソン株式会社 | 画像情報の評価方法、画像情報の評価プログラム及び画像情報評価装置 |
US7673309B2 (en) * | 2005-01-20 | 2010-03-02 | Hie Electronics, Inc. | Scalable integrated high density optical data/media storage delivery system |
KR100650955B1 (ko) | 2005-09-01 | 2006-11-29 | 엠텍비젼 주식회사 | 자동 초점 조절 방법 및 장치 |
WO2007054931A2 (en) * | 2005-11-10 | 2007-05-18 | D-Blur Technologies Ltd. | Image enhancement in the mosaic domain |
US8154636B2 (en) * | 2005-12-21 | 2012-04-10 | DigitalOptics Corporation International | Image enhancement using hardware-based deconvolution |
JP4585456B2 (ja) * | 2006-01-23 | 2010-11-24 | 株式会社東芝 | ボケ変換装置 |
US20070236574A1 (en) * | 2006-03-31 | 2007-10-11 | D-Blur Technologies Ltd. | Digital filtering with noise gain limit |
US20070239417A1 (en) * | 2006-03-31 | 2007-10-11 | D-Blur Technologies Ltd. | Camera performance simulation |
JP4985062B2 (ja) * | 2006-04-14 | 2012-07-25 | 株式会社ニコン | カメラ |
TWI315152B (en) * | 2006-05-19 | 2009-09-21 | Primax Electronics Ltd | Image object location detection method |
KR100808610B1 (ko) * | 2006-06-13 | 2008-02-28 | 중앙대학교 산학협력단 | 영상융합 기술을 이용한 다중초점 디지털 영상복원 방법 및장치 |
US8213734B2 (en) * | 2006-07-07 | 2012-07-03 | Sony Ericsson Mobile Communications Ab | Active autofocus window |
US9596401B2 (en) | 2006-10-02 | 2017-03-14 | Sony Corporation | Focusing an image based on a direction of a face of a user |
US7860382B2 (en) * | 2006-10-02 | 2010-12-28 | Sony Ericsson Mobile Communications Ab | Selecting autofocus area in an image |
US8249357B2 (en) * | 2006-10-23 | 2012-08-21 | Ben Gurion University Of The Negev, Research And Development Authority | Blind restoration of images degraded by isotropic blur |
US7907791B2 (en) | 2006-11-27 | 2011-03-15 | Tessera International, Inc. | Processing of mosaic images |
US20080137982A1 (en) * | 2006-12-06 | 2008-06-12 | Ayahiro Nakajima | Blurring determination device, blurring determination method and printing apparatus |
TWI403976B (zh) * | 2006-12-17 | 2013-08-01 | Digitaloptics Corp Internat | 利用以硬體為基礎之反摺積的影像加強 |
US7860333B2 (en) * | 2007-01-09 | 2010-12-28 | University Of Utah Research Foundation | Systems and methods for deblurring data corrupted by shift variant blurring |
JP4799428B2 (ja) * | 2007-01-22 | 2011-10-26 | 株式会社東芝 | 画像処理装置及び方法 |
US7912307B2 (en) * | 2007-02-08 | 2011-03-22 | Yu Wang | Deconvolution method using neighboring-pixel-optical-transfer-function in fourier domain |
US7983509B1 (en) * | 2007-05-31 | 2011-07-19 | Hewlett-Packard Development Company, L.P. | Estimating a point spread function of an image capture device |
KR101362011B1 (ko) * | 2007-08-02 | 2014-02-12 | 삼성전자주식회사 | 링잉 아티펙트없는 블러 제거 방법 |
US8458179B2 (en) * | 2007-11-29 | 2013-06-04 | Palo Alto Research Center Incorporated | Augmenting privacy policies with inference detection |
JP4945532B2 (ja) * | 2008-09-05 | 2012-06-06 | 株式会社東芝 | 劣化画像復元方法、劣化画像復元装置、及び、プログラム |
JP2010087614A (ja) * | 2008-09-29 | 2010-04-15 | Toshiba Corp | 画像処理装置、画像処理方法、及び、プログラム |
US20100271536A1 (en) * | 2009-04-27 | 2010-10-28 | Digital Imaging Systems Gmbh | Blended autofocus using mechanical and softlens technologies |
KR101608970B1 (ko) * | 2009-11-27 | 2016-04-05 | 삼성전자주식회사 | 광 필드 데이터를 이용한 영상 처리 장치 및 방법 |
US8606032B2 (en) * | 2009-12-23 | 2013-12-10 | Sony Corporation | Image processing method, device and program to process a moving image |
CN102388402B (zh) * | 2010-02-10 | 2015-08-19 | 杜比国际公司 | 图像处理装置及图像处理方法 |
JP5528173B2 (ja) * | 2010-03-31 | 2014-06-25 | キヤノン株式会社 | 画像処理装置、撮像装置および画像処理プログラム |
CN101937561A (zh) * | 2010-09-19 | 2011-01-05 | 华中科技大学 | 一种天基大视场成像点源/斑状目标的图像恢复增强方法 |
US8989447B2 (en) * | 2012-08-13 | 2015-03-24 | Texas Instruments Incorporated | Dynamic focus for computational imaging |
WO2014181881A1 (ja) * | 2013-05-10 | 2014-11-13 | 株式会社ニコン | レンズ鏡筒、カメラシステム、および撮像装置 |
JP6236908B2 (ja) * | 2013-06-21 | 2017-11-29 | 株式会社リコー | 撮像装置、撮像システムおよび撮像方法 |
CN103679652B (zh) * | 2013-11-29 | 2017-04-19 | 北京空间机电研究所 | 一种大幅提高成像质量的图像复原系统 |
JP2017028583A (ja) * | 2015-07-24 | 2017-02-02 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 |
KR102523643B1 (ko) | 2015-10-26 | 2023-04-20 | 삼성전자주식회사 | 이미지 신호 프로세서의 작동 방법과 상기 이미지 신호 프로세서를 포함하는 이미지 처리 시스템의 작동 방법 |
TW201716933A (zh) * | 2015-11-06 | 2017-05-16 | 原相科技股份有限公司 | 具有補償失焦影像的光學導航裝置及其補償電路 |
US11100622B2 (en) * | 2016-04-21 | 2021-08-24 | Kripton Co., Ltd. | Image processing device, image processing program and image processing method, and image transmission/reception system and image transmission/reception method |
US11800056B2 (en) | 2021-02-11 | 2023-10-24 | Logitech Europe S.A. | Smart webcam system |
US11800048B2 (en) | 2021-02-24 | 2023-10-24 | Logitech Europe S.A. | Image generating system with background replacement or modification capabilities |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0380676A (ja) * | 1989-08-23 | 1991-04-05 | Ricoh Co Ltd | 電子パンフォーカス装置 |
JP2792376B2 (ja) * | 1993-02-02 | 1998-09-03 | 松下電器産業株式会社 | 画像ぼかし処理装置 |
US5710829A (en) * | 1995-04-27 | 1998-01-20 | Lucent Technologies Inc. | System and method for focused-based image segmentation for video signals |
JP3733392B2 (ja) * | 1996-03-05 | 2006-01-11 | イーストマン コダック カンパニー | 画像の構図変化検出方法 |
-
1997
- 1997-11-19 KR KR1019970061296A patent/KR100247938B1/ko not_active IP Right Cessation
-
1998
- 1998-08-28 US US09/143,306 patent/US6154574A/en not_active Expired - Lifetime
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100823400B1 (ko) * | 2000-08-17 | 2008-04-17 | 소니 가부시끼 가이샤 | 화상 처리 장치 및 그 방법과 기록 매체 |
KR101399012B1 (ko) | 2007-09-12 | 2014-05-26 | 삼성전기주식회사 | 영상 복원 장치 및 방법 |
KR20110103205A (ko) * | 2010-03-12 | 2011-09-20 | 삼성전자주식회사 | 영상 복원 장치, 영상 복원 방법 및 영상 복원 시스템 |
KR101633397B1 (ko) | 2010-03-12 | 2016-06-27 | 삼성전자주식회사 | 영상 복원 장치, 영상 복원 방법 및 영상 복원 시스템 |
KR20110108727A (ko) * | 2010-03-29 | 2011-10-06 | 삼성전자주식회사 | 영상 처리 장치 및 이의 영상 처리 방법 |
KR101667798B1 (ko) | 2010-03-29 | 2016-10-20 | 삼성전자 주식회사 | 영상 처리 장치 및 이의 영상 처리 방법 |
KR20190014224A (ko) * | 2017-07-28 | 2019-02-12 | 삼성전자주식회사 | 기판 검사 장치, 기판 검사 방법 및 이를 이용한 반도체 소자의 제조 방법 |
KR102368435B1 (ko) | 2017-07-28 | 2022-03-02 | 삼성전자주식회사 | 기판 검사 장치, 기판 검사 방법 및 이를 이용한 반도체 소자의 제조 방법 |
Also Published As
Publication number | Publication date |
---|---|
US6154574A (en) | 2000-11-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100247938B1 (ko) | 영상처리 시스템의 디지탈 초점 조절방법 및 장치 | |
Aly et al. | Image up-sampling using total-variation regularization with a new observation model | |
EP0512422B1 (en) | Method for temporally adaptive filtering of noisy image sequences | |
US7602989B2 (en) | Realtime 2D deconvolution system and method | |
US7990462B2 (en) | Simple method for calculating camera defocus from an image scene | |
US8432434B2 (en) | Camera and method for focus based depth reconstruction of dynamic scenes | |
EP2589215B1 (en) | Method and system for producing a virtual output image from data obtained by an array of image capturing devices | |
US7092016B2 (en) | Method and system for motion image digital processing | |
US20080170124A1 (en) | Apparatus and method for blur detection, and apparatus and method for blur correction | |
JP3251127B2 (ja) | 映像データ処理方式 | |
US6803954B1 (en) | Filtering control method for improving image quality of bi-linear interpolated image | |
Bando et al. | Towards digital refocusing from a single photograph | |
Vivirito et al. | Restoration of out-of-focus images based on circle of confusion estimate | |
KR100594777B1 (ko) | 디지털 초점 조절 방법 및 그 시스템 | |
US7742660B2 (en) | Scale-space self-similarity image processing | |
Pohlig et al. | New technique for blind deconvolution | |
Yitzhaky et al. | Restoration of interlaced images degraded by variable velocity motion | |
Alibouch et al. | Catadioptric Omnidirectional Images Motion Deblurring | |
Šorel | Multichannel blind restoration of images with space-variant degradations | |
Fraser et al. | Position-varying tip-tilt estimation and region-of-interest PSF derivation by Wiener filter | |
Yitzhaky et al. | Identification of motion blur for blind image restoration | |
Yin et al. | and deblurring | |
Huang et al. | Directional moving averaging interpolation for texture mapping | |
Yoon et al. | Out-of-focus blur estimation using isotropic step responses and its application to image restoration | |
Yang et al. | Edge-preserving regularization of disparity and motion fields |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20121130 Year of fee payment: 14 |
|
FPAY | Annual fee payment |
Payment date: 20131129 Year of fee payment: 15 |
|
LAPS | Lapse due to unpaid annual fee |