KR101014572B1 - 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리장치 - Google Patents

영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리장치 Download PDF

Info

Publication number
KR101014572B1
KR101014572B1 KR1020070086274A KR20070086274A KR101014572B1 KR 101014572 B1 KR101014572 B1 KR 101014572B1 KR 1020070086274 A KR1020070086274 A KR 1020070086274A KR 20070086274 A KR20070086274 A KR 20070086274A KR 101014572 B1 KR101014572 B1 KR 101014572B1
Authority
KR
South Korea
Prior art keywords
distortion
image
coefficient
curve
lens
Prior art date
Application number
KR1020070086274A
Other languages
English (en)
Other versions
KR20090021627A (ko
Inventor
권성진
Original Assignee
주식회사 코아로직
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 코아로직 filed Critical 주식회사 코아로직
Priority to KR1020070086274A priority Critical patent/KR101014572B1/ko
Priority to JP2008209938A priority patent/JP4885179B2/ja
Priority to EP08014791A priority patent/EP2031861A3/en
Priority to US12/199,191 priority patent/US8000559B2/en
Priority to CN2008101887708A priority patent/CN101448065B/zh
Publication of KR20090021627A publication Critical patent/KR20090021627A/ko
Application granted granted Critical
Publication of KR101014572B1 publication Critical patent/KR101014572B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/16—Picture reproducers using cathode ray tubes
    • H04N9/28—Arrangements for convergence or focusing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N3/00—Scanning details of television systems; Combination thereof with generation of supply voltages
    • H04N3/10—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical
    • H04N3/16—Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical by deflecting electron beam in cathode-ray tube, e.g. scanning corrections
    • H04N3/22—Circuits for controlling dimensions, shape or centering of picture on screen
    • H04N3/23—Distortion correction, e.g. for pincushion distortion correction, S-correction

Abstract

본 발명은 종래의 렌즈 왜곡 보정 방식들의 단점을 극복하고 또한 외각 부분에서의 화질 저하 현상을 최소화시킬 수 있는 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리 장치를 제공한다. 그 영상 왜곡 보정 방법은 광각 렌즈로 영상을 받아들이는 단계; 상기 광각 렌즈에 의해 발생한 영상의 왜곡에 대한 왜곡 계수(distortion coefficient)를 추출하는 단계; 상기 추출된 왜곡 계수를 이용하여 상기 영상의 왜곡을 보정하는 단계; 및 상기 보정된 영상을 디스플레이하는 단계;를 포함한다. 또한, 그 영상처리 장치는 영상(image) 받아들이는 광각 렌즈(wide-angle lens); 상기 광각 렌즈에 의해 발생한 영상의 왜곡에 대한 왜곡 계수(distortion coefficient)를 추출하는 왜곡 계수 추출부(distortion coefficient extraction part) 및 상기 추출된 왜곡 계수를 이용하여 상기 영상의 왜곡을 보정하는 왜곡 보정부(distortion correction part)를 구비한 영상 처리부(image processor part); 및 상기 보정된 영상을 디스플레이하는 디스플레이부;를 포함한다.

Description

영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리 장치{Method of correcting image distortion and Image processing device of adapting the same method}
본 발명은 영상처리 장치 및 영상처리 방법에 관한 것으로, 특히 광각 렌즈를 통해 발생하는 영상 왜곡을 보정할 수 있는 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리 장치에 관한 것이다.
카메라를 이용한 응용분야는 산업 전반에 걸쳐 다양하며 그 응용분야는 점점 방대해지고 있다. 예컨대, 조립라인의 로봇 제어, 상품의 품질 검사, 의료분야의 진단, 보안 시스템, 영상 시스템의 인식 등 카메라는 사람의 눈을 대신하여 산업계의 자동화에 활용되고 있는 추세이다.
일반적으로 대상체에 대한 정밀도 높은 영상을 얻으려 할 경우에는 협각의 렌즈를 카메라의 앞 부분에 장치하여 사용하고, 대상체의 크기가 커서 넓은 영역을 관찰하여야 할 경우에는 광각 렌즈(wide-angle lens)를 장치하여 사용한다. 광각 렌즈를 사용하는 경우, 넓은 시야를 확보할 수 있다는 장점을 가지는 반면, 렌즈의 중심부분은 해상도가 높고 렌즈의 외각부분으로 갈수록 점차 해상도가 떨어지는 단 점이 있다.
또한, 광각 렌즈는 외각부분의 해상도 저하와 함께 외각부분으로 갈수록 영상이 휘어지는 왜곡, 즉 방사 왜곡(radial distortion)이 두드러진다. 이러한 방사 왜곡은 해상도 저하의 주요 요인이기도 하다.
도 1a 및 1b는 광각 렌즈에 의한 방사 왜곡을 패턴 영상 및 일반 영상을 통해 보여주는 사진들로서, 전술한 바와 같이 중심에서 멀어질수록 영상이 흐려지고 굴곡이 발생함을 확인할 수 있다.
렌즈 왜곡에 대한 보정 기술은 일반적으로 "메트릭(Metric)" 방식과 "비메트릭(Non-Metric)"방식으로 나뉜다. 메트릭 방식은 영상의 일치점(correspondence)에 기반하여 영상왜곡에 영향을 미칠 수 있는 카메라 모델의 내부(intrinsic) 및 외부(extrinsic) 변수 모두를 측정하여 영상의 왜곡을 보정하는 방식을 말하며, 비메트릭 방식은 일치점에 기반하지 않고, 외부 물체의 직선 성분들은 영상에 직선형태로 투사되어야 한다 라는 가정하에 영상이 획득되는 과정에서 렌즈 왜곡에 의한 곡선 성분들을 직선 형태로 보정하는 방식을 의미한다.
메트릭 방식은 영상의 일치점(correspondence)에 기반하므로 일치점들이 많아질수록 더욱 정확한 왜곡 계수를 추출할 수 있으며 일치점들을 추출하기 위한 여러 장의 패턴영상(pattern images)을 필요로 한다. 또한 내부(intrinsic) 변수와 외부(extrinsic) 변수를 구하는 과정에서 측정오류(measurement error)에 의한 심각한 문제가 발생할 수 있다. 비메트릭 방식은 왜곡이 있는 단일 영상에서도 왜곡계수(distortion coefficient)를 구할 수 있으며 일치점들을 필요로 하지 않는다. 그러나 영상에 직선 성분을 포함하는 물체가 존재해야 왜곡의 정도를 측정할 수 있다는 단점이 있으며, 또한 비메트릭 방식 중 자동 왜곡 보정 알고리즘들은 잡음(noise)에 매우 민감한 특성을 가진다.
따라서, 본 발명이 해결하고자 하는 과제는 종래의 렌즈 왜곡 보정 방식들의 단점을 극복하고 또한 외각 부분에서의 화질 저하 현상을 최소화시킬 수 있는 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리 장치를 제공하는 데에 있다.
상기 과제를 달성하기 위하여, 본 발명은 광각 렌즈로 영상을 받아들이는 단계; 상기 광각 렌즈에 의해 발생한 영상의 왜곡에 대한 왜곡 계수(distortion coefficient)를 추출하는 단계; 상기 추출된 왜곡 계수를 이용하여 상기 영상의 왜곡을 보정하는 단계; 및 상기 보정된 영상을 디스플레이하는 단계;를 포함하는 영상 왜곡 보정 방법을 제공한다.
본 발명에 있어서, 상기 왜곡 계수 추출 단계에서, 상기 왜곡 계수 추출은 렌즈 왜곡 모델식을 이용하여 정의된 왜곡계수 범위 내에서 수동 조절을 통해 최적의 왜곡계수를 구함으로써, 이루어질 수 있다. 한편, 상기 왜곡 보정 단계에서, 영상 왜곡에 대한 보정은 상기 추출된 왜곡 계수를 이용하여 영상을 역방향 맵핑 방법(backward mapping method)을 통해 보정할 수 있다. 여기서, 상기 렌즈 왜곡 모델식은 보정 영상의 중심으로부터의 좌표거리(RC)가 왜곡 영상의 중심으로부터 좌표거리(RD)에 왜곡 영상의 좌표거리(RD)의 3승을 더한 값과 동일한 것으로 나타나고, 상기 왜곡 영상의 좌표 거리(RD)의 3승에 대한 계수는 왜곡 계수(k)이고, 상기 왜곡 계수(kl)는 0보다 크고 왜곡 영상의 중심으로부터 최외각까지의 최대 좌표거리(RDM)의 제곱 분의 a-1보다 작거나 같고, a는 2이상의 상수일 수 있다.
예컨대, 상기 렌즈 왜곡 모델식은 RC = RD(1+kR2 D), 0 < k ≤ (a-1)/R2 DM 와 같이 나타날 수 있다.
한편, 상기 영상 왜곡 보정 단계는, 상기 교정을 통해 발생하는 계단현상을 양선형 보간법(bilinear interpolation method)을 이용하여 제거할 수 있고, 또한, 상기 영상 왜곡 보정 단계는, 상기 교정된 영상의 외곽부분의 블러링(bluring) 효과를 최소화하기 위하여 외곽부분의 곡선을 조절하는 것을 포함할 수 있다.
상기 외곽 부분의 곡선 조절은 상기 식에 의한 RC 대 RD의 그래프 상에서 선택된 변곡점을 기준으로 복수 개의 좌표점들을 선택하고 삼차방정식을 이용함으로써, 곡선 조절(curve fitting)을 할 수 있다.
본 발명은 또한 상기 과제를 달성하기 위하여, 영상(image) 받아들이는 광각 렌즈(wide-angle lens); 상기 광각 렌즈에 의해 발생한 영상의 왜곡에 대한 왜곡 계수(distortion coefficient)를 추출하는 왜곡 계수 추출부(distortion coefficient extraction part) 및 상기 추출된 왜곡 계수를 이용하여 상기 영상의 왜곡을 보정하는 왜곡 보정부(distortion correction part)를 구비한 영상 처리부(image processor part); 및 상기 보정된 영상을 디스플레이하는 디스플레이부;를 포함하는 영상처리 장치를 제공한다.
본 발명에 있어서, 상기 광각 렌즈는 화각 120 °이하의 어안 렌즈(fish-eye lens)를 포함할 수 있다. 상기 왜곡 계수 추출부는 렌즈 왜곡 모델식을 이용하여 정의된 왜곡계수 범위 내에서 수동 조절을 통해 최적의 왜곡계수를 구할 수 있다.
한편, 왜곡 보정부는 추출된 상기 왜곡 계수를 이용하여 역방향 맵핑 방법(backward mapping method)을 통해 상기 광각 렌즈의 방사 왜곡(radial distortion)을 교정하며, 상기 교정을 통해 발생하는 계단현상은 양선형 보간법(bilinear interpolation method)를 이용하여 제거하게 된다.
본 발명에 있어서, 상기 영상 처리부는 상기 왜곡 보정부에서 교정된 영상의 외곽부분의 블러링(bluring) 효과를 최소화하기 위한 외곽부분의 곡선을 조절하는 곡선 조절부(curve fitting part)를 포함할 수 있다. 이러한 상기 곡선 조절부는 상기 RC 대 RD의 그래프 상에서 선택된 변곡점을 기준으로 복수 개의 좌표점들을 선택하고 삼차방정식을 이용하여 곡선 조절(curve fitting)을 함으로써, 상기 외곽 부분의 곡선을 조절할 수 있다.
본 발명에 따른 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리 장치는 광각 렌즈로부터 발생하는 영상 왜곡을 보정하기 위해 단일 또는 복수의 패턴 영상이 불필요하다. 즉, 수동조절을 통해 직접 왜곡 계수를 추출하게 되므로 종래와 같은 일치점 추출을 위한 패턴 영상이 불필요하다.
또한, 본 발명의 영상 왜곡 보정 방법은 양선형 보간법에 통해 계단 현상을 제거하고 곡선 조절(curve fitting)을 통해 외곽부분의 블러링 현상을 제거함으로써, 인간의 인식관점에 가장 적합한 영상으로 보정할 수 있다.
그에 따라, 그러한 영상 왜곡 보정 방법을 채용한 영상처리 장치는 광각 렌 즈, 예컨대 화각 120°이하의 어안렌즈 또는 그 이하의 화각을 갖는 렌즈에 의한 영상 왜곡 또는 단일 영상 왜곡을 적절히 보정함으로써, 인간의 인식관점에 가장 적합한 영상을 제공할 수 있다.
이하에서는 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다. 이하의 설명에서 어떤 구성 요소가 다른 구성 요소에 연결된다고 기술될 때, 이는 다른 구성 요소와 바로 연결될 수도 있지만, 그 사이에 제3의 구성 요소가 개재될 수도 있다. 또한, 도면에서 각 구성 요소의 구조나 크기는 설명의 편의 및 명확성을 위하여 과장되었고, 설명과 관계없는 부분은 생략되었다. 도면상에서 동일 부호는 동일한 요소를 지칭한다. 한편, 사용되는 용어들은 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미 한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다.
도 2a 및 2b는 광각 렌즈에 의한 방사 왜곡을 설명하기 위한 좌표 평면도들로서, 도 2a는 보정된 좌표에 대한 평면도이고, 도 2b는 광각 렌즈에 의한 방사 왜곡이 나타난 좌표에 대한 평면도이다.
도 2a 및 2b를 참조하면, 광각 렌즈에 의한 방사 왜곡은 중심점에서 멀어질수록 커짐을 알 수 있다. 그에 따라, 중심에서 멀어질수록 대상물의 사이즈가 확대되고 또한 굴곡을 가지게 된다. 여기서, RC는 보정된 좌표에서의 중심에서의 좌표거리이고, RD는 왜곡된 좌표에서의 중심에서의 좌표거리이다.
도 3은 본 발명의 일 실시예에 따른 영상 왜곡 보정 방법을 채용한 영상처리 장치에 대한 블럭 구성도이다.
도 3을 참조하면, 본 발명에 따른 영상처리 장치는 광각 렌즈(100), 영상 처리부(200) 및 디스플레이부(300)를 포함한다. 여기서, 광각 렌즈(100)는 화각 120°이하의 어안 렌즈(eye-fish lens)이고, 좀더 정확히는 화각 60° ~ 120°를 갖는 렌즈일 수 있다. 디스플레이부(300)는 영상 처리부(200)를 통해 처리된 영상을 디스플레이하는 장치로 LCD, CRT 모니터 등이 될 있다.
영상 처리부(200)는 광각 렌즈(100)를 통해 입사된 영상을 처리하는 프로세서로, 광각 렌즈(100)에 의해 발생하는 방사 왜곡을 보정하기 위하여 왜곡 계수 추출부(220), 왜곡 보정부(240) 및 곡선 조절부(260)를 포함한다. 광각 렌즈(100)를 통해 입사된 영상은 이미지 센서를 통해 전기신호 이미지로서 감지되며, 영상 처리부(200)는 이러한 전기신호 이미지에 대한 보정을 하게 된다. 한편, 도시하지는 않았지만 영상 처리부(200)는 보정된 영상을 디스플레이용 이미지 파일로 변환시키는 일반적인 멀티미디어 프로세서 및 그러한 이미지 파일을 저장하기 위한 메모리를 포함함은 물론이다.
왜곡 계수 추출부(220)는 광각 렌즈(100)에 의해 발생하는 영상 왜곡에 대한 왜곡 계수를 추출하고, 왜곡 보정부(240)는 추출된 왜곡 계수를 이용하여 역방향 맵핑 방법(backward mapping method)을 통해 영상을 보정한다.
좀더 상세히 설명하면, 영상 왜곡, 즉 방사 왜곡을 보정하기 위하여, 워핑(warping) 방정식, 또는 렌즈 왜곡 모델식을 통해 왜곡 계수를 추출하고 구해진 왜곡 계수를 통해 영상 왜곡의 보정, 즉 영상 워핑(image warping)을 수행하게 된다. 이러한 영상 워핑 구현 방법은 크게 전방향 맵핑(forward mapping) 방법과 역방향 맵핑 방법으로 구분된다. 전방향 맵핑 방법은 왜곡 영상으로부터 보정 영상의 대응되는 픽셀(pixel) 좌표를 직접 구할 수 있는 장점이 있으나, 좌표 계산 방식은 정수형 계산이 이루어지므로 보정 영상에서 홀(hole)이 발생할 수 있는 단점을 가진다.
한편, 역방향 맵핑 방법은 보정 영상의 좌표값을 이용하여 해당되는 왜곡 영상의 좌표값을 계산하므로, 앞서 전방향 맵핑 방법에서의 홀 발생과 같은 단점을 제거할 수 있다.
본 실시예에의 왜곡 계수 추출부(220)는 왜곡 계수를 구하기 위한 렌즈 왜곡 모델식으로 다음 식(1)을 이용한다.
RC = RD(1+kR2 D), 0 < k ≤ (a-1)/R2 DM ......................식(1)
여기서, RC 및 RD는 보정 영상 및 왜곡 영상의 중심으로부터의 좌표거리이고, RDM는 왜곡 영상의 중심으로부터의 최외각까지의 최대 좌표거리이며, k는 왜곡계수이고 a는 2 이상의 상수이다.
이러한 렌즈 왜곡 모델식은 기존 방법의 잡음(noise)에 따른 오류를 제거하기 위해, 자동 왜곡 추정방법(auto-estimation method)을 배제하고 선험적으로 측정된 일정한 범위 내에서 최적의 왜곡 계수를 수동으로 측정함으로써, 구해질 수 있다. 즉, 이러한 왜곡 계수의 추출은 미리 정의된 왜곡계수의 측정 범위 내에서 수동 조절을 통해, 광각 렌즈를 통해 보여지는 사물이 인간이 인식하는 관점과 일치하는 최적의 왜곡계수를 구하는 식으로 수행된다.
렌즈 왜곡 모델식은 정교한 왜곡 보정을 위해 다수의 왜곡계수가 포함된 고차항으로 정의할 수 있지만, 측정될 왜곡계수의 증가로 인한 수치연산의 오류가 발생할 수 있다. 따라서, 본 방법에서는 하나의 왜곡 계수만을 이용하여 렌즈왜곡을 측정하게 되며, 방사 왜곡의 경우 하나의 왜곡계수만으로도 충분히 모델링될 수 있다는 것을 보인다. 식(1)을 통해 알 수 있듯이, 본 실시예의 렌즈 왜곡 모델식은 하나의 왜곡 계수만을 포함한다.
한편, 본 발명에서는 왜곡 모델을 방사형 왜곡으로 가정하므로 최적의 왜곡계수는 양수가 되며 최대값은 RD와 a에 의해 결정된다. 따라서, 최적의 왜곡계수는 정의된 범위 내에서 식(1)에 따라 수동 조절을 통해 추출될 수 있다.
전술한 방법을 통해 최적의 왜곡 계수가 추출된 경우, 왜곡 보정부(240)는 추출된 왜곡 계수를 이용하여 영상을 역방향 매핑 방법을 이용하여 보정한다. 그러나 전방향 맵핑 방법의 단점을 제거하기 위해 역방향 맵핑 방법을 사용하더라도 직선성분들에 대한 계단현상(jagged-edge artifacts)을 제거할 수 없다. 따라서 본 실시예의 왜곡 보정부(240)는 계단현상을 제거하기 위해 4개의 최근접(nearest neighbors) 픽셀의 가중치 합(weighted sum) 이용한 양선형 보간법(bilinear interpolation)을 적용하여 왜곡 보정을 수행한다.
한편, 곡선 조절부(260)는 앞서 왜곡 보정부(240)를 통한 보정 영상의 외곽 부분의 화질저하 현상을 최소화시키는 기능을 한다. 왜곡 보정과정에서의 결과 영상, 즉 보정 영상의 크기는 원 영상인 왜곡 영상보다 크며, 렌즈의 화각의 증가에 따라 보정 영상의 영상 크기는 증가한다. 또한, 방사형 왜곡은 영상의 이상적인 좌표에서 바깥쪽으로 변위를 발생시키므로 보정에 따른 보정 영상의 바깥쪽 외곽부분에서 화질저하, 즉 블러링(bluring) 현상이 뚜렷해진다. 따라서 곡선 조절부(260)는 식(1)에서 RC 와 RD의 상관관계에 대한 방사 왜곡 곡선을 이용하여 화질저하 현상을 개선 시킨다, 그에 대한 설명은, 도 4 이하에 대한 설명부분에서 좀더 상세히 설명한다.
도 4는 왜곡 영상 좌표에 대한 보정 영상 좌표를 보여주는 방사 왜곡 곡선(Radial distortion curve) 그래프이다.
도 4를 참조하면, 짙은 곡선이 식(1)에 따른 방사 왜곡 곡선으로서, 보정 영상의 좌표 RC가 중심에서 멀어질수록 확대되고 있음을 알 수 있다. 한편, 점선은 가장 이상적인 보정 영상에 대한 그래프 또는 실제 좌표에 대한 그래프로서, 도시된 바와 같이 중심에서의 거리에 상관없이 RC 와 RD가 동일하게 나타남을 알 수 있다. 따라서, 이러한 방사 왜곡 곡선(Radial distortion curve)을 그대로 이용하여, 왜곡 영상을 보정하게 되면 화면의 외곽 부분에서의 화질 저하 현상은 필수적으로 수반되게 된다.
도 5는 도 4의 방사 왜곡 곡선에 대한 곡선 조절을 하는 원리를 보여주는 그래프이다.
도 5를 참조하면, 앞서 언급한 외곽 부분에서의 화질 저하 현상을 개선하기 위하여, 방사 왜곡 곡선의 외곽부분을 조절하게 된다. 그래프 상, 짙은 직선이 앞서 원래의 방사 왜곡 곡선이며, 점선이 조절된 방사 왜곡 곡선이다. 이러한, 곡선 조절(curve fitting)은 방사 왜곡 곡선의 한 점, 즉 변곡점을 기준으로 복수 개의 좌표점들을 선택하고 적절한 삼차방정식을 이용하여 조절함으로써, 수행될 수 있다.
도 6a 및 6b는 본 발명의 왜곡 보정 방법을 통해 개선된 패턴 영상 및 일반 영상에 대한 사진들이다.
도 6a 및 도 6b를 통해 알 수 있듯이, 본 발명에 따른 영상처리 장치는 왜곡 보정 방법을 통해, 도 1a 및 1b의 광각 렌즈에 의해 발생한 방사 왜곡에 따른 왜곡 영상이 거의 실제와 같은 영상으로 보정되고 있음을 확인할 수 있다.
도 7은 도 4의 방사 왜곡 곡선에 대한 곡선 조절을 좀더 상세하게 설명하기 위한 그래프이다.
도 7을 참조하면, 앞서, 도 5에서 보여주었던 곡선 조절을 좀더 정밀하게 수행하기 위하여 삼차 방정식을 변형시키면서 곡선 조절을 하는 원리를 보여주고 있다. 여기서, 점으로 표시된 부분이 선택된 변곡점이다. 한편, 1이 원래의 방사 왜곡 곡선이며, 2, 3, 및 4 각각은 아래의 식(2), 식(3), 및 식(4)의 삼차 방정식을 이용한 곡선 조절을 통해 보정된 방사 왜곡 곡선들이다.
RD=(1.0 x 10-9) x R3 C - 0.000248 x R2 C + 0.555 x RC + 79 .........식(2)
RD=(-1.0 x 10-20) x R3 C - (7.8 x 10-5) x R2 C + 0.43 x RC + 105 ....식(3)
RD=(-1.37 x 10-6) x R3 C + 0.00367 x R2 C - 2.16 x RC + 634 ........식(4)
도 8a ~ 8e는 왜곡 영상 및 도 7의 방사 왜곡 곡선에 따른 보정 영상을 보여주는 사진들이다. 여기서, 8a는 광각 렌즈에 의해 발생한 왜곡된 일반 영상에 대한 사진이고, 8b는 원래의 방사 왜곡 곡선에 따라 보정된 일반 영상에 대한 사진이다. 한편, 8c는 도 7의 곡선 2에 의한 곡선 조절을 통해 보정된 일반 영상에 대한 사진이고, 8d는 곡선 3에 의한 곡선 조절을 통해 보정된 일반 영상에 대한 사진이며, 8e는 곡선 4에 의한 곡선 조절을 통해 보정된 일반 영상에 대한 사진이다.
이와 같이 여러 가지 곡선 조절을 통해, 영상의 외곽부분의 화질을 개선할 수 있는데, 도 8b에 비해, 도 8c의 영상이 외곽부분에서 화질이 확연히 개선되고 있음을 확인할 수 있다. 한편, 도 8d나 8d의 경우, 외곽 부분에서 화질은 도 8c에 비해 더욱 개선되고 있지만, 다시 영상이 왜곡되고 있음을 확인할 수 있다.
따라서, 본 실시예의 영상처리 장치는 곡선 조절을 위한 적절한 삼차 방정식을 찾아내고, 그에 따라 가장 적절한 곡선조절을 수행함으로써, 인간의 인식관점에 적합하면서도 외곽부분의 블러링이 제거된 최적의 영상으로 보정할 수 있다.
도 9는 본 발명의 다른 실시예에 따른 영상 왜곡 보정 방법을 보여주는 흐름도이다.
도 9를 참조하면, 먼저, 광각 렌즈로부터 영상을 받아들이게 된다(S100). 전 술한 바와 같이 광각 렌즈로 영상을 받아들이게 되면, 영상 왜곡, 예컨대 방사 왜곡이 필연적으로 뒤따르게 된다. 이러한 방사 왜곡에 발생한 영상을 보정하기 위하여, 왜곡 계수를 추출한다(S200). 왜곡 계수는 적절한 왜곡 계수 모델식을 이용하여 미리 정의된 왜곡계수의 측정 범위 내에서 수동 조절을 통해, 광각 렌즈를 통해 보여지는 사물이 인간이 인식하는 관점과 일치하도록 최적의 왜곡계수를 구하는 식으로 수행될 수 있다. 예컨대, 왜곡 계수 모델식은 상기 식(1)을 이용할 수 있다.
최적의 왜곡 계수가 추출된 경우, 역방향 맵핑 방법을 통해 영상의 왜곡을 보정한다(S300). 이때, 역방향 맵핑 방법을 통해 나타나는 계단 현상은 양선형 보간법을 이용하여 제거한다.
이와 같이 왜곡 영상을 보정한 뒤, 보정된 영상에서 나타나는 외곽 부분의 블러링을 제거한다(S400). 블러링 제거는 전술한 바와 같이 곡선 조절을 통해 수행되는데, 예컨대, 변곡점을 기준으로 복수 개의 좌표점들을 선택하고 적절한 삼차방정식을 이용하여 조절할 수 있다.
왜곡 영상에 대한 블러링 제거까지 끝난 후에는 보정된 영상을 멀티미디어 프로세서를 거쳐 디스플레이부에 디스플레이 한다(S500).
본 실시예의 왜곡 보정 방법은 먼저 수동적으로 일정 범위 내의 최적의 왜곡 계수를 추출하고, 추출된 왜곡 계수를 이용한 역방향 맵핑, 양선형 보간법을 이용한 계단 현상제거 및 곡선 조절을 위한 외곽부분의 블러링 현상 제거 과정을 수행함으로써, 광각 렌즈로부터 발생한 왜곡 영상을 인간의 인식 관점에 적합한 최적의 영상으로 보정하게 할 수 있다.
지금까지, 본 발명을 도면에 표시된 실시예를 참고로 설명하였으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
도 1a 및 1b는 광각 렌즈에 의한 방사 왜곡을 패턴 영상 및 일반 영상을 통해 보여주는 사진들이다.
도 2a 및 2b는 광각 렌즈에 의한 방사 왜곡을 설명하기 위한 좌표 평면도들이다.
도 3은 본 발명의 일 실시예에 따른 영상 왜곡 보정 방법을 채용한 영상처리 장치에 대한 블럭 구성도이다.
도 4는 왜곡 영상 좌표에 대한 보정 영상 좌표를 보여주는 방사 왜곡 곡선(Radial distortion curve) 그래프이다.
도 5는 도 4의 방사 왜곡 곡선에 대한 곡선 조절을 하는 원리를 보여주는 그래프이다.
도 6a 및 6b는 본 발명의 왜곡 보정 방법을 통해 개선된 패턴 영상 및 일반 영상에 대한 사진이다.
도 7은 도 4의 방사 왜곡 곡선에 대한 곡선 조절을 좀더 상세하게 설명하기 위한 그래프이다.
도 8a ~ 8e는 왜곡 영상 및 도 7의 방사 왜곡 곡선에 따른 보정 영상을 보여주는 사진들이다.
도 9는 본 발명의 다른 실시예에 따른 영상 왜곡 보정 방법을 보여주는 흐름도이다.

Claims (18)

  1. 광각 렌즈로 영상을 받아들이는 단계;
    상기 광각 렌즈에 의해 발생한 영상의 왜곡에 대한 왜곡 계수(distortion coefficient)를 추출하는 단계;
    상기 추출된 왜곡 계수를 이용하여 상기 영상의 왜곡을 보정하는 단계; 및
    상기 보정된 영상을 디스플레이하는 단계;를 포함하고,
    상기 왜곡 계수 추출 단계에서, 상기 왜곡 계수 추출은 렌즈 왜곡 모델식을 이용하여 정의된 왜곡계수 범위 내에서 수동 조절을 통해 최적의 왜곡계수를 구함으로써, 이루어지며,
    상기 렌즈 왜곡 모델식은,
    보정 영상의 중심으로부터의 좌표거리(RC)가 왜곡 영상의 중심으로부터 좌표거리(RD)에 왜곡 영상의 좌표거리(RD)의 3승을 더한 값과 동일한 것으로 나타나고, 상기 왜곡 영상의 좌표 거리(RD)의 3승에 대한 계수는 왜곡 계수(k)이고, 상기 왜곡 계수(k)는 0보다 크고 왜곡 영상의 중심으로부터 최외각까지의 최대 좌표거리(RDM)의 제곱 분의 a-1보다 작거나 같고, a는 2 이상의 상수인 것을 특징으로 하는 영상 왜곡 보정 방법.
  2. 제1 항에 있어서,
    상기 영상 왜곡 보정 방법은 화각 120 °이하의 어안 렌즈(fish-eye lens)에 의해 발생하는 영상의 왜곡을 보정하는 것을 특징으로 하는 영상 왜곡 보정 방법.
  3. 삭제
  4. 제1 항에 있어서,
    상기 왜곡을 보정하는 단계에서, 영상 왜곡에 대한 보정은 상기 추출된 왜곡 계수를 이용하여 영상을 역방향 맵핑 방법(backward mapping method)을 통해 보정하는 것을 특징으로 하는 영상 왜곡 보정 방법.
  5. 삭제
  6. 제1 항에 있어서,
    상기 영상 왜곡 보정 단계에서, 상기 왜곡 보정은 상기 왜곡 계수를 이용한 방사 왜곡(radial distortion)에 대한 교정인 것을 특징으로 하는 영상 왜곡 보정 방법.
  7. 제6 항에 있어서,
    상기 영상 왜곡 보정 단계는,
    상기 교정을 통해 발생하는 계단현상을 양선형 보간법(bilinear interpolation method)을 이용하여 제거하는 것을 포함하는 것을 특징으로 하는 영상 왜곡 보정 방법.
  8. 제6 항에 있어서,
    상기 영상 왜곡 보정 단계는,
    상기 교정된 영상의 외곽부분의 블러링(bluring) 효과를 최소화하기 위하여 외곽부분의 곡선을 조절하는 것을 포함하는 것을 특징으로 하는 영상 왜곡 보정 방법.
  9. 제8 항에 있어서,
    상기 외곽 부분의 곡선 조절은 상기 식에 의한 RC 대 RD의 그래프 상에서 선택된 변곡점을 기준으로 복수 개의 좌표점들을 이용하여 곡선 조절(curve fitting)을 함으로써, 이루어지는 것을 특징으로 하는 영상 왜곡 보정 방법.
  10. 제9 항에 있어서,
    상기 곡선 조절은 삼차방정식을 이용하여 수행하는 것을 특징으로 하는 영상 왜곡 보정 방법.
  11. 영상(image) 받아들이는 광각 렌즈(wide-angle lens);
    상기 광각 렌즈에 의해 발생한 영상의 왜곡에 대한 왜곡 계수(distortion coefficient)를 추출하는 왜곡 계수 추출부(distortion coefficient extraction part) 및 상기 추출된 왜곡 계수를 이용하여 상기 영상의 왜곡을 보정하는 왜곡 보정부(distortion correction part)를 구비한 영상 처리부(image processor part); 및
    상기 보정된 영상을 디스플레이하는 디스플레이부;를 포함하고,
    상기 왜곡 계수 추출부는 렌즈 왜곡 모델식을 이용하여 정의된 왜곡계수 범위 내에서 수동 조절을 통해 최적의 왜곡계수를 구하며,
    상기 렌즈 왜곡 모델식은
    보정 영상의 중심으로부터의 좌표거리(RC)가 왜곡 영상의 중심으로부터 좌표거리(RD)에 왜곡 영상의 좌표거리(RD)의 3승을 더한 값과 동일한 것으로 나타나고, 상기 왜곡 영상의 좌표 거리(RD)의 3승에 대한 계수는 왜곡 계수(k)이고, 상기 왜곡 계수(k)는 0보다 크고 왜곡 영상의 중심으로부터 최외각까지의 최대 좌표거리(RDM)의 제곱 분의 a-1보다 작거나 같고, a는 2 이상의 상수인 것을 특징으로 하는 영상처리 장치.
  12. 제11 항에 있어서,
    상기 광각 렌즈는 화각 120 °이하의 어안 렌즈(fish-eye lens)를 포함하는 것을 특징으로 하는 영상처리 장치.
  13. 삭제
  14. 삭제
  15. 제11 항에 있어서,
    상기 왜곡 보정부는 상기 왜곡 계수를 이용하여 역방향 맵핑 방법(backward mapping method)을 통해 상기 광각 렌즈의 방사 왜곡(radial distortion)을 교정하는 것을 특징으로 하는 영상처리 장치.
  16. 제15 항에 있어서,
    상기 왜곡 보정부는 상기 교정을 통해 발생하는 계단현상을 양선형 보간법(bilinear interpolation method)를 이용하여 제거하는 것을 특징으로 하는 영상처리 장치.
  17. 제15 항에 있어서,
    상기 영상 처리부는
    상기 왜곡 보정부에서 교정된 영상의 외곽부분의 블러링(bluring) 효과를 최소화하기 위한 외곽부분의 곡선을 조절하는 곡선 조절부(curve fitting part)를 포함하는 것을 특징으로 하는 영상처리 장치.
  18. 제17 항에 있어서,
    상기 곡선 조절부는
    상기 식에 의한 RC 대 RD의 그래프 상에서 선택된 변곡점을 기준으로 복수 개의 좌표점들을 선택하고 삼차방정식을 이용하여 곡선 조절(curve fitting)을 함으로써, 상기 외곽 부분의 곡선을 조절하는 것을 특징으로 하는 영상처리 장치.
KR1020070086274A 2007-08-27 2007-08-27 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리장치 KR101014572B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020070086274A KR101014572B1 (ko) 2007-08-27 2007-08-27 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리장치
JP2008209938A JP4885179B2 (ja) 2007-08-27 2008-08-18 映像歪曲補正方法及びその補正方法を採用した映像処理装置
EP08014791A EP2031861A3 (en) 2007-08-27 2008-08-20 Method of correcting image distortion and apparatus for processing image using the method
US12/199,191 US8000559B2 (en) 2007-08-27 2008-08-27 Method of correcting image distortion and apparatus for processing image using the method
CN2008101887708A CN101448065B (zh) 2007-08-27 2008-08-27 校正图像失真的方法以及使用该方法处理图像的装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070086274A KR101014572B1 (ko) 2007-08-27 2007-08-27 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리장치

Publications (2)

Publication Number Publication Date
KR20090021627A KR20090021627A (ko) 2009-03-04
KR101014572B1 true KR101014572B1 (ko) 2011-02-16

Family

ID=40202921

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070086274A KR101014572B1 (ko) 2007-08-27 2007-08-27 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리장치

Country Status (5)

Country Link
US (1) US8000559B2 (ko)
EP (1) EP2031861A3 (ko)
JP (1) JP4885179B2 (ko)
KR (1) KR101014572B1 (ko)
CN (1) CN101448065B (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200049207A (ko) 2018-10-31 2020-05-08 중앙대학교 산학협력단 왜곡계수 추정을 통한 영상 보정 시스템 및 방법
KR102412275B1 (ko) 2021-05-27 2022-06-24 한국과학기술원 스테레오 방법을 이용한 3차원 형상정보 계측에 있어서의 이미지 왜곡 보정 방법 및 장치
KR102584209B1 (ko) * 2022-10-27 2023-10-04 상명대학교산학협력단 오목 렌즈 배열을 이용한 집적 영상의 3차원 재구성 방법

Families Citing this family (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7961973B2 (en) * 2004-09-02 2011-06-14 Qualcomm Incorporated Lens roll-off correction method and apparatus
CN101496387B (zh) 2006-03-06 2012-09-05 思科技术公司 用于移动无线网络中的接入认证的系统和方法
US8797377B2 (en) 2008-02-14 2014-08-05 Cisco Technology, Inc. Method and system for videoconference configuration
US8355041B2 (en) * 2008-02-14 2013-01-15 Cisco Technology, Inc. Telepresence system for 360 degree video conferencing
US8319819B2 (en) 2008-03-26 2012-11-27 Cisco Technology, Inc. Virtual round-table videoconference
US8390667B2 (en) 2008-04-15 2013-03-05 Cisco Technology, Inc. Pop-up PIP for people not in picture
JP2009290863A (ja) * 2008-04-28 2009-12-10 Panasonic Corp 撮像装置およびカメラボディ
US8694658B2 (en) 2008-09-19 2014-04-08 Cisco Technology, Inc. System and method for enabling communication sessions in a network environment
KR101591471B1 (ko) * 2008-11-03 2016-02-04 삼성전자주식회사 물체의 특징 정보를 추출하기 위한 장치와 방법, 및 이를 이용한 특징 지도 생성 장치와 방법
US8659637B2 (en) 2009-03-09 2014-02-25 Cisco Technology, Inc. System and method for providing three dimensional video conferencing in a network environment
US8477175B2 (en) 2009-03-09 2013-07-02 Cisco Technology, Inc. System and method for providing three dimensional imaging in a network environment
US8659639B2 (en) 2009-05-29 2014-02-25 Cisco Technology, Inc. System and method for extending communications between participants in a conferencing environment
US8270754B2 (en) * 2009-06-22 2012-09-18 Qualcomm Incorporated Lens roll-off correction operation using values corrected based on brightness information
US9082297B2 (en) 2009-08-11 2015-07-14 Cisco Technology, Inc. System and method for verifying parameters in an audiovisual environment
US8547423B2 (en) 2009-09-24 2013-10-01 Alex Ning Imaging system and device
KR101679290B1 (ko) * 2009-11-17 2016-11-24 삼성전자 주식회사 영상 처리 방법 및 장치
US8730309B2 (en) 2010-02-23 2014-05-20 Microsoft Corporation Projectors and depth cameras for deviceless augmented reality and interaction
US9225916B2 (en) 2010-03-18 2015-12-29 Cisco Technology, Inc. System and method for enhancing video images in a conferencing environment
US9313452B2 (en) 2010-05-17 2016-04-12 Cisco Technology, Inc. System and method for providing retracting optics in a video conferencing environment
KR101053464B1 (ko) * 2010-05-27 2011-08-03 (주) 에투시스템 광각 카메라의 광학정보 획득 장치, 광각영상 보정 장치 및 그 방법
US8896655B2 (en) 2010-08-31 2014-11-25 Cisco Technology, Inc. System and method for providing depth adaptive video conferencing
US8599934B2 (en) 2010-09-08 2013-12-03 Cisco Technology, Inc. System and method for skip coding during video conferencing in a network environment
US8599865B2 (en) 2010-10-26 2013-12-03 Cisco Technology, Inc. System and method for provisioning flows in a mobile network environment
US8699457B2 (en) 2010-11-03 2014-04-15 Cisco Technology, Inc. System and method for managing flows in a mobile network environment
US9143725B2 (en) 2010-11-15 2015-09-22 Cisco Technology, Inc. System and method for providing enhanced graphics in a video environment
US9338394B2 (en) 2010-11-15 2016-05-10 Cisco Technology, Inc. System and method for providing enhanced audio in a video environment
US8730297B2 (en) 2010-11-15 2014-05-20 Cisco Technology, Inc. System and method for providing camera functions in a video environment
US8902244B2 (en) 2010-11-15 2014-12-02 Cisco Technology, Inc. System and method for providing enhanced graphics in a video environment
US8542264B2 (en) 2010-11-18 2013-09-24 Cisco Technology, Inc. System and method for managing optics in a video environment
US8723914B2 (en) 2010-11-19 2014-05-13 Cisco Technology, Inc. System and method for providing enhanced video processing in a network environment
US9111138B2 (en) 2010-11-30 2015-08-18 Cisco Technology, Inc. System and method for gesture interface control
USD682293S1 (en) 2010-12-16 2013-05-14 Cisco Technology, Inc. Display screen with graphical user interface
USD678307S1 (en) 2010-12-16 2013-03-19 Cisco Technology, Inc. Display screen with graphical user interface
USD678320S1 (en) 2010-12-16 2013-03-19 Cisco Technology, Inc. Display screen with graphical user interface
USD682854S1 (en) 2010-12-16 2013-05-21 Cisco Technology, Inc. Display screen for graphical user interface
USD678308S1 (en) 2010-12-16 2013-03-19 Cisco Technology, Inc. Display screen with graphical user interface
USD682864S1 (en) 2010-12-16 2013-05-21 Cisco Technology, Inc. Display screen with graphical user interface
USD678894S1 (en) 2010-12-16 2013-03-26 Cisco Technology, Inc. Display screen with graphical user interface
USD682294S1 (en) 2010-12-16 2013-05-14 Cisco Technology, Inc. Display screen with graphical user interface
KR101144375B1 (ko) 2010-12-30 2012-05-10 포항공과대학교 산학협력단 영상의 왜곡을 보정하는 방법 및 이러한 방법을 사용하는 장치
US8692862B2 (en) 2011-02-28 2014-04-08 Cisco Technology, Inc. System and method for selection of video data in a video conference environment
US8737685B2 (en) * 2011-04-25 2014-05-27 Honeywell International Inc. Systems and methods for detecting the movement of an object
JP5739722B2 (ja) * 2011-04-26 2015-06-24 株式会社日立情報通信エンジニアリング 物体認識方法及び認識装置
US8670019B2 (en) 2011-04-28 2014-03-11 Cisco Technology, Inc. System and method for providing enhanced eye gaze in a video conferencing environment
US8786631B1 (en) 2011-04-30 2014-07-22 Cisco Technology, Inc. System and method for transferring transparency information in a video environment
US8934026B2 (en) 2011-05-12 2015-01-13 Cisco Technology, Inc. System and method for video coding in a dynamic environment
US9597587B2 (en) 2011-06-08 2017-03-21 Microsoft Technology Licensing, Llc Locational node device
US9105090B2 (en) 2011-07-13 2015-08-11 Analog Devices, Inc. Wide-angle lens image correction
US8947493B2 (en) 2011-11-16 2015-02-03 Cisco Technology, Inc. System and method for alerting a participant in a video conference
US8682087B2 (en) 2011-12-19 2014-03-25 Cisco Technology, Inc. System and method for depth-guided image filtering in a video conference environment
CN103377474B (zh) * 2012-04-27 2016-08-03 比亚迪股份有限公司 镜头阴影校正系数确定方法、镜头阴影校正方法及装置
KR101428169B1 (ko) * 2012-07-09 2014-08-07 현대자동차주식회사 후방 카메라의 영상 왜곡 보정 장치 및 방법
US9696427B2 (en) * 2012-08-14 2017-07-04 Microsoft Technology Licensing, Llc Wide angle depth detection
CN102982516B (zh) * 2012-10-25 2015-07-29 西安理工大学 一种基于半球环形全景镜头实现全景图像的方法
US9681154B2 (en) 2012-12-06 2017-06-13 Patent Capital Group System and method for depth-guided filtering in a video conference environment
KR101477900B1 (ko) 2013-03-27 2014-12-30 (주) 넥스트칩 왜곡 영상 보정 장치 및 방법
US9843621B2 (en) 2013-05-17 2017-12-12 Cisco Technology, Inc. Calendaring activities based on communication processing
JP6322798B2 (ja) * 2013-11-18 2018-05-16 リーダー電子株式会社 カメラの検査装置及び該検査装置を用いたカメラの検査方法
CN103617615B (zh) * 2013-11-27 2016-08-17 华为技术有限公司 径向畸变参数获取方法及获取装置
US9196022B2 (en) * 2014-03-10 2015-11-24 Omnivision Technologies, Inc. Image transformation and multi-view output systems and methods
GB2524250A (en) * 2014-03-17 2015-09-23 Sony Comp Entertainment Europe Image processing
KR101493946B1 (ko) * 2014-04-16 2015-02-17 하이네트(주) 광각 렌즈 이미지 보정 방법 및 그 장치
CN104010119A (zh) * 2014-05-13 2014-08-27 深圳奇沃智联科技有限公司 360度环场实时显像装置
KR102179262B1 (ko) 2014-06-11 2020-11-16 삼성전자주식회사 렌즈 왜곡 보정 장치 및 이를 포함하는 애플리케이션 프로세서
CN104363986B (zh) 2014-10-31 2017-06-13 华为技术有限公司 一种图像处理方法和设备
CN105007411B (zh) * 2015-06-30 2018-01-23 广东欧珀移动通信有限公司 一种畸变校正的方法及移动终端
KR101714213B1 (ko) * 2015-09-09 2017-03-09 현대오트론 주식회사 렌즈 영상 왜곡 보정 장치
CN105430333B (zh) * 2015-11-18 2018-03-23 苏州科达科技股份有限公司 一种实时回算枪机畸变系数的方法及装置
CN106454098A (zh) * 2016-10-31 2017-02-22 深圳晨芯时代科技有限公司 一种虚拟现实拍摄及显示的方法、系统
GB2555643A (en) * 2016-11-08 2018-05-09 Nokia Technologies Oy Determining an intersection location of an optical axis of a lens with a camera sensor
KR101877548B1 (ko) * 2016-11-15 2018-07-11 멀티펠스 주식회사 곡면 투사용 영상 생성 시스템 및 그 생성 방법
WO2018211782A1 (ja) * 2017-05-18 2018-11-22 ソニー株式会社 情報処理装置、情報処理方法、プログラム
JP6975003B2 (ja) * 2017-09-29 2021-12-01 株式会社デンソー 周辺監視装置およびその校正方法
US10572982B2 (en) * 2017-10-04 2020-02-25 Intel Corporation Method and system of image distortion correction for images captured by using a wide-angle lens
US10721419B2 (en) 2017-11-30 2020-07-21 International Business Machines Corporation Ortho-selfie distortion correction using multiple image sensors to synthesize a virtual image
CN108305224A (zh) * 2018-01-15 2018-07-20 上海顺久电子科技有限公司 一种图像的畸变校正方法、装置及电视机
WO2020205502A1 (en) * 2019-03-29 2020-10-08 Popsockets Llc Obscured media communication
KR102478458B1 (ko) * 2020-12-02 2022-12-19 주식회사 텔레칩스 후방 카메라 영상 처리 장치 및 방법
DE112021006264T5 (de) * 2020-12-02 2023-11-02 Telechips Inc. Vorrichtung und Verfahren zur Bildverarbeitung einer Rückfahrkamera
US11756171B1 (en) * 2021-07-07 2023-09-12 Gopro, Inc. Systems and methods for increasing image fidelity

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000092309A (ja) 1998-09-16 2000-03-31 Fuji Photo Film Co Ltd 画像処理方法および画像処理装置
KR20010101601A (ko) * 1999-01-21 2001-11-14 피터 엔. 데트킨 디지털 카메라에서 이미지 왜곡을 소프트웨어적으로보정하는 장치 및 그 방법
JP2005094048A (ja) 2003-08-13 2005-04-07 Topcon Corp 画像補正機能付撮影装置及び方法、並びに撮影装置及び方法
KR100744937B1 (ko) * 2006-06-29 2007-08-01 삼성전기주식회사 렌즈 왜곡 보정 방법

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4790028A (en) * 1986-09-12 1988-12-06 Westinghouse Electric Corp. Method and apparatus for generating variably scaled displays
JP3104327B2 (ja) * 1991-10-18 2000-10-30 松下電器産業株式会社 歪曲収差補正装置および画像合成装置
US6005984A (en) * 1991-12-11 1999-12-21 Fujitsu Limited Process and apparatus for extracting and recognizing figure elements using division into receptive fields, polar transformation, application of one-dimensional filter, and correlation between plurality of images
JP3035416B2 (ja) * 1992-11-18 2000-04-24 キヤノン株式会社 撮像装置及び画像再生装置及び映像システム
JP3297511B2 (ja) * 1993-10-15 2002-07-02 オリンパス光学工業株式会社 映像処理装置
JPH07250268A (ja) * 1994-03-14 1995-09-26 Yazaki Corp 車両周辺監視装置
JPH08256295A (ja) * 1994-12-21 1996-10-01 Olympus Optical Co Ltd 画像処理装置
US5999660A (en) * 1995-07-26 1999-12-07 California Institute Of Technology Imaging system for correction of perceptual distortion in wide angle images
US5691765A (en) * 1995-07-27 1997-11-25 Sensormatic Electronics Corporation Image forming and processing device and method for use with no moving parts camera
JPH0998340A (ja) * 1995-09-29 1997-04-08 Sanyo Electric Co Ltd 撮像装置
JP3974964B2 (ja) * 1996-11-08 2007-09-12 オリンパス株式会社 画像処理装置
JPH11184595A (ja) * 1997-12-18 1999-07-09 Toshiba Corp 画面拡大表示方法ならびに装置及び同方法がプログラムされ記録される記録媒体
JPH11275391A (ja) * 1998-03-20 1999-10-08 Kyocera Corp ディストーション補正を選択できるディジタル撮像装置
JP2000324339A (ja) * 1999-03-09 2000-11-24 Fuji Photo Film Co Ltd 画像処理方法および画像処理装置
JP3668654B2 (ja) * 1999-11-01 2005-07-06 株式会社大林組 歪曲収差の補正方法
JP2001274973A (ja) * 2000-03-24 2001-10-05 Sanyo Electric Co Ltd 顕微鏡画像合成装置、顕微鏡画像合成方法、顕微鏡画像合成処理プログラムを記録したコンピュータ読み取り可能な記録媒体
JP3650578B2 (ja) * 2000-09-28 2005-05-18 株式会社立山アールアンドディ 画像の歪みを補正するためのニューラル・ネットワークを用いたパノラマ画像ナビゲーションシステム
JP3975736B2 (ja) * 2001-12-07 2007-09-12 ソニー株式会社 画像処理装置及び画像処理方法、記憶媒体、並びにコンピュータ・プログラム
US7058237B2 (en) * 2002-06-28 2006-06-06 Microsoft Corporation Real-time wide-angle image correction system and method for computer image viewing
JP3650378B2 (ja) * 2002-07-09 2005-05-18 オリンパス株式会社 画像処理装置
US7084904B2 (en) * 2002-09-30 2006-08-01 Microsoft Corporation Foveated wide-angle imaging system and method for capturing and viewing wide-angle images in real time
JP2004199350A (ja) 2002-12-18 2004-07-15 Clarion Co Ltd 画像歪み補正装置及び画像歪み補正方法
JP2004234379A (ja) * 2003-01-30 2004-08-19 Sony Corp 画像処理方法、画像処理装置及び画像処理方法を適用した撮像装置、表示装置
JP4346938B2 (ja) * 2003-04-09 2009-10-21 キヤノン株式会社 画像処理装置、方法、プログラム及び記憶媒体
US20050058360A1 (en) * 2003-09-12 2005-03-17 Thomas Berkey Imaging system and method for displaying and/or recording undistorted wide-angle image data
JP2005151317A (ja) * 2003-11-18 2005-06-09 Tamron Co Ltd 歪曲収差変更撮影装置
JP2005267457A (ja) * 2004-03-19 2005-09-29 Casio Comput Co Ltd 画像処理装置、撮影装置、画像処理方法及びプログラム
DE102004017730B4 (de) * 2004-04-10 2006-05-24 Christian-Albrechts-Universität Zu Kiel Verfahren zur Rotationskompensation sphärischer Bilder
JP2005311473A (ja) * 2004-04-16 2005-11-04 Sharp Corp 撮像装置および信号処理方法ならびにそのプログラムと記録媒体
JP4516475B2 (ja) * 2005-04-27 2010-08-04 オリンパスメディカルシステムズ株式会社 略球形状の観察窓を有する内視鏡用撮像光学系
US20070030452A1 (en) * 2005-08-08 2007-02-08 N-Lighten Technologies Image adaptation system and method
WO2007066459A1 (ja) * 2005-12-05 2007-06-14 Nikon Corporation 歪曲補正方法、歪曲補正プログラム、画像処理装置、交換レンズ、カメラ、及びカメラシステム
JP4752524B2 (ja) * 2006-01-31 2011-08-17 コニカミノルタホールディングス株式会社 歪曲収差補正方法及び歪曲収差補正装置
TW200734965A (en) * 2006-03-10 2007-09-16 Sony Taiwan Ltd A perspective correction panning method for wide-angle image
JP2007293457A (ja) * 2006-04-21 2007-11-08 Yamaha Corp 画像処理装置
US8224122B2 (en) * 2006-12-15 2012-07-17 Microsoft Corporation Dynamic viewing of wide angle images
US7961980B2 (en) * 2007-08-06 2011-06-14 Imay Software Co., Ltd. Method for providing output image in either cylindrical mode or perspective mode

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000092309A (ja) 1998-09-16 2000-03-31 Fuji Photo Film Co Ltd 画像処理方法および画像処理装置
KR20010101601A (ko) * 1999-01-21 2001-11-14 피터 엔. 데트킨 디지털 카메라에서 이미지 왜곡을 소프트웨어적으로보정하는 장치 및 그 방법
JP2005094048A (ja) 2003-08-13 2005-04-07 Topcon Corp 画像補正機能付撮影装置及び方法、並びに撮影装置及び方法
KR100744937B1 (ko) * 2006-06-29 2007-08-01 삼성전기주식회사 렌즈 왜곡 보정 방법

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200049207A (ko) 2018-10-31 2020-05-08 중앙대학교 산학협력단 왜곡계수 추정을 통한 영상 보정 시스템 및 방법
US11164292B2 (en) 2018-10-31 2021-11-02 Chung Ang University Industry Academic Cooperation Foundation System and method for correcting image through estimation of distortion parameter
KR102412275B1 (ko) 2021-05-27 2022-06-24 한국과학기술원 스테레오 방법을 이용한 3차원 형상정보 계측에 있어서의 이미지 왜곡 보정 방법 및 장치
KR102584209B1 (ko) * 2022-10-27 2023-10-04 상명대학교산학협력단 오목 렌즈 배열을 이용한 집적 영상의 3차원 재구성 방법

Also Published As

Publication number Publication date
US20090059041A1 (en) 2009-03-05
CN101448065B (zh) 2012-01-04
KR20090021627A (ko) 2009-03-04
EP2031861A3 (en) 2012-06-20
US8000559B2 (en) 2011-08-16
CN101448065A (zh) 2009-06-03
JP4885179B2 (ja) 2012-02-29
JP2009064427A (ja) 2009-03-26
EP2031861A2 (en) 2009-03-04

Similar Documents

Publication Publication Date Title
KR101014572B1 (ko) 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리장치
CN106875339B (zh) 一种基于长条形标定板的鱼眼图像拼接方法
CN107633536B (zh) 一种基于二维平面模板的相机标定方法及系统
US7529424B2 (en) Correction of optical distortion by image processing
CN110023810B (zh) 光学系统像差的数字校正
CN110099267B (zh) 梯形校正系统、方法以及投影仪
JP4942216B2 (ja) 画像処理方法、画像処理装置、撮像装置及びプログラム
US20110157396A1 (en) Image processing apparatus, image processing method, and storage medium
JP5489897B2 (ja) ステレオ測距装置及びステレオ測距方法
CN110717942B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
Bailey A new approach to lens distortion correction
JP2005509961A (ja) 較正を導き出す方法および画像処理の方法
WO2011010438A1 (ja) 視差検出装置、測距装置及び視差検出方法
WO2009000906A1 (en) A method for high precision lens distortion calibration and removal
KR102118173B1 (ko) 왜곡계수 추정을 통한 영상 보정 시스템 및 방법
TWI761684B (zh) 影像裝置的校正方法及其相關影像裝置和運算裝置
CN111199528A (zh) 一种鱼眼图像畸变矫正方法
CN107871329B (zh) 一种相机光学中心的快速标定方法及装置
WO2019171984A1 (ja) 信号処理装置、信号処理方法、及び、プログラム
CN112470192A (zh) 双摄像头标定方法、电子设备、计算机可读存储介质
CN111340737A (zh) 图像矫正方法、装置和电子系统
KR101595884B1 (ko) 감시 카메라, 그 제어방법
CN111179180B (zh) 影像的修正方法及其装置
KR101578029B1 (ko) 영상 왜곡 보정 장치 및 방법
JP2003169255A (ja) シェーディング補正方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140102

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee