KR20110026754A - 광역 역광 보정 장치 - Google Patents

광역 역광 보정 장치 Download PDF

Info

Publication number
KR20110026754A
KR20110026754A KR1020090084533A KR20090084533A KR20110026754A KR 20110026754 A KR20110026754 A KR 20110026754A KR 1020090084533 A KR1020090084533 A KR 1020090084533A KR 20090084533 A KR20090084533 A KR 20090084533A KR 20110026754 A KR20110026754 A KR 20110026754A
Authority
KR
South Korea
Prior art keywords
exposure time
image
fusion
luminance
unit
Prior art date
Application number
KR1020090084533A
Other languages
English (en)
Other versions
KR101408343B1 (ko
Inventor
강봉협
정영제
Original Assignee
삼성테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성테크윈 주식회사 filed Critical 삼성테크윈 주식회사
Priority to KR1020090084533A priority Critical patent/KR101408343B1/ko
Publication of KR20110026754A publication Critical patent/KR20110026754A/ko
Application granted granted Critical
Publication of KR101408343B1 publication Critical patent/KR101408343B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/13—Edge detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 광역 역광 보정 시에, 노출시간이 상대적으로 짧은 영상으로부터 엣지 정보를 추출하여 영상의 선명도를 향상시키고, 노출시간이 긴 영상 및 융합된 영상의 차이를 이용하여 명부를 밝기를 조절함으로써 콘트라스트가 향상된 영상을 획득할 수 있는 광역 역광 보정 장치에 관한 것이다. 광역 역광 보정 장치는 제1 노출시간을 갖는 영상으로부터 추출된 엣지 정보와, 제1 및 제2 노출시간을 갖는 영상의 휘도 융합 결과와, 제2 노출시간을 갖는 영상 및 상기 휘도 융합된 제1 및 제2 영상으로부터 추출된 밝기 차이 정보를 합성한 영상을 출력하는 것이 바람직하다.
Figure P1020090084533
엣지 추출, 밝기 차이, 휘도 융합, 선명도 향상, 콘트라스트 향상

Description

광역 역광 보정 장치{Apparatus for processing wide dynamic rage}
본 발명은 디지털 영상 처리 장치에 관한 것으로, 보다 상세하게는 명부의 콘트라스트를 향상시키는 광역 역광 보정 장치에 관한 것이다.
광역 역광 보정(WDR: wide dynamic range)은 기존 역광보정(BLC) 기능이 어두운 부분을 단순히 밝게 함으로써 밝은 부분의 영상이 포화되는 문제를 해결한 것으로, WDR 기능은 밝은 곳은 최대한 유지하면서 어두운 곳은 밝게 보이도록 처리함에 따라 더욱 선명한 영상을 구현할 수 있도록 한 것이다.
WDR 기능을 사용하는 이유는 조도 차이가 커서 명부(보통 실외)와 암부(보통 실내)가 혼재된 영상을 촬영하는 경우 한 장만 촬영해 가지고서는 아무리 노출시간과 조리개를 최적으로 조절한다고 하더라도 명부와 암부가 전부 잘 보이는 영상을 획득할 수 없기 때문이다. 따라서 WDR은 명부가 잘 보이도록 노출을 조절한 영상과 암부가 잘 보이도록 노출을 조절한 서로 다른 영상들을 융합하여 명부와 암부가 모두 선명하게 잘 보이는 영상을 생성할 수 있다.
이러한 WDR 기능이 적용된 제품으로는 보안 및 감시를 위한 보안 카메라, 일반 디지털 카메라, 방송 촬영 장비, 자동차용 카메라 및 휴대용 카메라 등 모든 영 상 촬영 장비 등에 폭 넓게 사용되고 있다. 예를 들면, 실내의 창가와 같은 역광이 존재하는 장소에서 영상을 촬영할 경우, 또는 야경과 같이 명부와 암부가 혼재해 있는 경우, 스포츠 경기 등 햇볕에 의한 명부와 그늘에 의한 암부가 혼합된 장면을 촬영하는 경우에 WDR 기능은 보다 선명한 영상을 촬영할 수 있게 한다.
한편, WDR 구현 기술은 일반적으로 블록 단위 융합 방법과 픽셀 단위 융합 방법을 사용하고 있다.
블록 단위 융합 방법은 영상 융합 단위를 블록으로 설정하여, 각 블록에 따라 융합 비율을 달리하는 방법으로, 픽셀 단위 처리에 비해 속도가 빠르지만 블록마다 서로 다른 융합 과정을 거치게 되므로 블록간 밝기 차이가 발생하고, 이를 해결하기 위한 안티 블로킹(anti-blocking) 처리가 필수적으로 요구되며, 또한 영상을 상하로 구분 시에 밝기가 다른 영상이 출력될 수 있다.
픽셀 단위 융합 방법은 영상 융합 단위를 하나의 픽셀로 설정하고, 각 픽셀에 따라 융합하는 것으로, 가중 합(weight-sum)을 통한 픽셀 단위 융합과 그래디언트 도메인을 이용한 픽셀 단위 융합 기술이 있다. 전자는 픽셀마다 가중치를 다르게 주는 것으로, 더 자세한 것은 H. John Tatko 등의 "Dynamic range enhancement for imaging sensors"라는 명칭의 미국 특허 제 6, 501,504호와 Kzauhito Horiuchi의 "Imaging processing apparatus for generating a wide dynamic range image"라는 명칭의 미국 특허 제 6,825,884호에 개시되어 있다. 후자는 노출시간이 긴 입력 영상과 노출시간이 짧은 입력 영상 각각에 대해 그래디언트 도메인으로 변환하여 각각의 그래디언트 크기를 조절하고, 각각의 픽셀단위로 융합 비율을 결정하는 것이지만, 성능은 우수하나 많은 연산량으로 인하여 DSP 칩 내에 탑재하기가 어려운 점이 있다. 더 자세한 사항은 R. Fattal 등의 "Gradient domain high dynamic range compression", Proceedings of the 29th annual conference on computer graphics and interactive techniques, pp. 249-256, 2002.에 개시되어 있다.
기존 방식의 WDR의 경우 암부의 밝기는 최대한 유지하도록 노출이 긴 영상의 밝기를 거의 그대로 사용한다. 반면 명부의 밝기는 노출이 긴 영상과 짧은 영상을 융합하여 사용하게 되는데, 기본적으로 암부보다 밝기가 커야 실제 조도와 비교해도 밝기에서의 역전이 생기지 않는 자연스러운 영상을 만들 수 있으므로 노출시간이 짧은 영상에 비하여 밝기를 표현할 수 있는 범위가 한정될 수 밖에 없다. 따라서 명부에서의 콘트라스트 감소가 발생할 수 밖에 없으며, 이를 보완하는 것이 WDR 성능의 핵심 쟁점이다.
도 9a는 WDR 오프 시에 명부쪽에 노출을 맞추고 촬영한 영상을, 도 9b는 WDR 온 시에 촬영을 영상을 나타낸다. 도 9a와 도 9b 비교 시에, 도 9b 즉, WDR 융합 시에는 노출시간이 짧은 영상에 비해 암부의 디테일이 살아나는 대신 명부에서의 건물 형태나 나뭇가지 등의 디테일이 많이 손실됨을 알 수 있다.
본 발명이 해결하고자 하는 기술적인 과제는 광역 역광 보정 시에, 노출시간이 상대적으로 짧은 영상으로부터 엣지 정보를 추출하여 영상의 선명도를 향상시키고, 노출시간이 긴 영상 및 융합된 영상의 차이를 이용하여 명부를 밝기를 조절함으로써 콘트라스트가 향상된 영상을 획득할 수 있는 광역 역광 보정 장치를 제공하는데 있다.
본 발명이 이루고자 하는 기술적인 과제를 해결하기 위한 광역 역광 보정 장치는 제1 노출시간을 갖는 영상으로부터 추출된 엣지 정보와, 제1 및 제2 노출시간을 갖는 영상의 휘도 융합 결과와, 제2 노출시간을 갖는 영상 및 상기 휘도 융합된 제1 및 제2 영상으로부터 추출된 밝기 차이 정보를 합성한 영상을 출력하는 것이 바람직하다.
본 발명에 있어서, 상기 장치에서 상기 제1 노출시간이 상기 제2 노출시간 보다 더 짧을 수 있다.
본 발명에 있어서, 상기 장치는 상기 제1 및 제2 노출시간으로 획득한 영상신호들을 휘도/색차 신호로 각각 변환하는 제1 변환수단; 상기 제1 노출시간을 갖는 휘도신호를 상기 제2 노출시간을 갖는 휘도신호에 상응하도록 정규화 하는 전처리수단; 상기 제1 노출시간을 갖는 휘도신호로부터 추출된 엣지 정보와, 상기 정규화된 제1 노출시간을 갖는 휘도신호 및 상기 제2 노출시간을 갖는 휘도신호의 융합 결과와, 상기 제2 노출시간을 갖는 영상과 상기 융합결과로부터 추출된 밝기 차이를 합성하는 휘도 융합수단; 상기 제1 및 제2 노출시간을 갖는 색차신호를 상기 휘도 융합수단의 출력을 반영한 가중치를 이용하여 합산하는 색차 융합수단; 및 상기 휘도 융합수단 및 색차 융합수단의 출력을 RGB 신호로 변환하는 제2 변환수단을 포함할 수 있다.
본 발명에 있어서, 상기 휘도 융합수단은 상기 제1 노출시간을 갖는 휘도신호로부터 엣지를 추출하는 엣지 추출부; 상기 정규화된 제1 노출시간을 갖는 휘도신호 및 상기 제2 노출시간을 갖는 휘도신호에 가중치를 적용하여 합산하는 휘도 융합부; 상기 제2 노출시간을 갖는 휘도신호 및 상기 휘도 융합부의 출력을 감산하는 감산부; 및 상기 엣지 추출부, 상기 휘도 융합부 및 상기 감산부의 출력을 합성하는 후처리부를 포함할 수 있다.
본 발명에 있어서, 상기 엣지 추출부의 출력에 소정의 이득값을 적산하는 제1 연산부를 더 포함할 수 있다.
본 발명에 있어서, 상기 감산부의 출력에 소정의 이득값을 적산하는 제2 연산부를 더 포함할 수 있다.
본 발명에 있어서, 상기 제2 연산부의 출력을 블러링하는 블러링 처리부를 더 포함할 수 있다.
본 발명에 있어서, 상기 제2 연산부의 출력을 소정의 기준값으로 제한하는 제한부를 더 포함할 수 있다.
상술한 바와 같이 본 발명에 따르면, 광역 역광 보정 시에 노출시간이 상대적으로 짧은 영상으로부터 엣지 정보를 추출하여 영상의 선명도를 향상시키고, 노출시간이 긴 영상 및 융합된 영상의 차이를 이용하여 명부를 밝기를 조절함으로써 콘트라스트가 향상된 영상을 획득할 수 있다.
이하, 본 발명의 실시 예에 대한 구성 및 그 작용을 첨부한 도면을 참조하여 상세히 설명하기로 한다. 도면이나 도면에 대한 설명은 본 발명의 예를 든 것으로 이로써 본 발명의 범위를 한정하는 것은 아니다.
도 1은 본 발명에 따른 광역 역광 보정 장치(100)의 구성을 보이는 블록도 이다.
도 1을 참조하면, 광역 역광 보정 장치(100)는 Y/C 변환수단(110), 전 처리수단(120), 휘도 융합수단(130), 색차 융합수단(140) 및 RGB 변환수단(150)을 포함한다.
Y/C 변환수단(110)은 서로 다른 노출시간 하에서 획득한 영상 신호들을 휘도/색차신호로 각각 변환한다. 여기서, 서로 다른 노출시간(exposure time)은 WDR 영상 처리를 위해서 소정의 시간, 예를 들면 1/60초 동안에 동일한 장면에 대해 2 장의 영상을 다른 노출시간으로 촬영하는 것을 의미한다. 하나는 노출시간이 상대적으로 긴(long exposure time) 영상으로서, 동일한 장면에서 암부영역, 주로 실내의 장면 정보를 포함한다. 다른 하나는 노출시간이 상대적으로 짧은(short exposure time) 영상으로서, 동일한 장면에서 명부영역, 주로 실외의 장면 정보를 포함한다. Y/C 변환수단(110)은 영상 획득부(미도시), 예를 들면 CCD/CMOS 이미지 센서에서 획득한 2개의 서로 다른 노출시간을 갖는 영상신호들을 각각 컬러 영상의 휘도성분(luminance)과 컬러 영상의 색차성부(chroma)으로 변환한다.
전 처리수단(120)은 Y/C 변환수단(110)에서 출력되는 서로 다른 노출시간 중 제1 노출시간을 갖는 휘도신호를 상기 제1 노출시간 보다 긴 제2 노출시간을 갖는 휘도신호에 상응하도록 정규화한다. 여기서 제1 노출시간은 노출시간이 상대적으로 짧은 영상(여기서, SE 영상으로 정의함)을 의미하고, 제2 노출시간은 노출시간이 상대적으로 긴 영상(여기서, LE 영상으로 정의함)을 의미한다. 예를 들면 제2 노출시간은 제1 노출시간의 8배 정도일 수 있으며, 이러한 비율은 명부와 암부를 표현하기에 적절한 비율로 조절할 수 있다. 또한 인간의 눈은 색상의 변화 보다 밝기의 변화에 더 민감하기 때문에, SE 영상과 LE 영상 각각의 휘도신호(여기서 YS, YL 신호로 정의함)를 이용하여 전처리 과정을 수행한다. 즉, 두 영상을 융합하기 전에 YS를 YL의 기준점에 맞도록 정규화 과정을 적용함으로써, 영상 밝기의 불균형을 최소화 하고 노출시간 조절에 제약이 있는 경우에도 최적의 WDR 결과 영상을 획득할 수 있다.
휘도 융합수단(130)은 제1 노출시간을 갖는 휘도신호로부터 추출된 엣지 정보와, 정규화된 제1 노출시간을 갖는 휘도신호 및 제2 노출시간을 갖는 휘도신호의 융합결과와, 상기 제2 노출시간을 갖는 영상과 상기 융합결과로부터 추출된 밝기 차이를 합성한다. 휘도 융합처리 시에, 정규화된 제1 노출시간을 갖는 휘도신호 및 제2 노출시간을 갖는 휘도신호를 제1 가중치를 이용하여 합산한다. WDR 처리를 위해 영상의 휘도성분과 색차성분을 나누어 융합한다. 이는 일반적인 RGB 색 공간을 사용할 때보다 하드웨어의 복잡도를 줄이고, R,G,B 각각 조절 시에 생기는 색상 불균형 문제를 줄일 수 있다. 휘도 융합 시에 YS 신호와 YL 신호에 적절한 가중치를 적용하여 합산함으로써 명부와 암부가 모두 잘 보이는 휘도 영상을 생성한다. 또한 제1 노출시간을 갖는 휘도신호로부터 엣지 정보를 추출하여 영상의 선명도를 향상시키고, 상기 제2 노출시간을 갖는 영상과 상기 융합결과로부터 추출된 밝기 차이를 이용하여 명부의 밝기를 조절한다. 또한 엣지 추출 영상과 휘도 융합 영상과, 밝기 차이 영상을 합성한 영상에 선명도 등의 대조비를 강조하는 후처리를 수행하여 융합 시 발생하는 아티팩트(artifact)를 최소화 할 수 있다. 휘도 융합수단(130)의 구체적인 구성 및 기능은 하기에 설명하도록 한다.
색차 융합수단은(140)은 제1 노출시간을 갖는 색차신호와 제2 노출시간을 갖는 색차신호를 휘도 융합수단(130)의 융합 결과를 반영한 제2 가중치를 이용하여 합산한다. 또한 선택적으로 채도 향상 및 색상 밸런스 조절 등의 후 처리를 수행할 수도 있다.
RGB 변환수단(150)은 휘도 융합수단(130)으로부터 출력되는 신호와 색차 융합수단(140)에서 출력되는 신호 즉, Y/C 신호를 RGB 신호로 변환하여 WDR 결과 영상신호를 출력한다.
도 2는 도 1 중 Y/C 변환수단(110), 전 처리수단(120)이 포함된 휘도 융합수단(130)의 상세 블록도 이다.
도 2를 참조하면, 휘도 융합수단(130)은 엣지 추출부(131), 제1 연산 부(132), 휘도 융합부(133), 감산부(134), 제2 연산부(135) 및 후처리부(136)를 포함한다.
휘도 융합수단(130)의 출력신호 Yout는 다음 수학식1과 같이 구할 수 있다.
Figure 112009055245475-PAT00001
먼저, Post1을 설명한다. 엣지 추출부(131)는 Y/C 변환수단(110)에서 출력되는 SE 영상의 휘도성분으로부터 엣지 정보를 추출한다. 엣지 추출부(131)는 고 대역 통과 필터(HPF) 또는 저 대역 통과 필터(LPF)를 적용하여 원본 휘도성분에서 엣지 정보를 추출한다. 도 3a에는 SE 영상이, 도 3b에는 도 3a SE 영상에서 추출된 엣지 영상이 도시되어 있다. 제1 연산부(132)는 추출된 엣지 영상에 이득(파라미터 1)을 적산하여 산출함으로써 명부영역에만 선명도(sharpness)를 조절할 수 있다. 상황에 따라 명부의 엣지 성분이 포함되지 않도록 SE 영상에서 특정 밝기 이상에서만 엣지를 찾을 수 있는 Threshold를 추가할 수 있으며, 이를 통하여 암부의 노이즈 등의 고주파 성분이 엣지와 함께 추출되는 것을 방지한다.
본 발명에서는 명부의 선명도 향상을 위하여 상대적으로 노출시간이 짧은 SE 영상에서의 엣지를 이용하였으나, 상대적으로 노출시간이 긴 LE 영상에도 고 대역 통과 필터를 적용하면 명부의 선명도 조절이 가능하다. 또한 기존 방식에서와 같이 융합된 결과에 고 대역 통과 필터를 적용하면 전체 영상의 선명도 조절이 가능 하다. 따라서 총 3가지의 엣지 정보를 가지고 영상의 명부, 암부, 전체의 선명도를 마음대로 조절하는 것이 가능하다.
도 4a는 휘도 융합결과 영상을, 도 4b는 엣지 추출 결과에 이득(파라미터 1)을 적산한 결과 영상을 보이고 있다. 도 4c는 도 4a에서 명부만 확대한 영상을, 도 4d는 도 4b 영상에서 명부만 확대한 영상을 보이고 있다. 이와 같이 엣지 추출을 통하여 명부의 선명도가 향상되었음을 알 수 있다.
휘도 융합부(133)는 정규화된 제1 노출시간을 갖는 휘도신호 및 제2 노출시간을 갖는 휘도신호를 가중치를 적용하여 합산한다.
다음에 Post 2를 설명한다. 감산부(134)는 Y/C 변환수단(110)에서 출력되는 LE 영상의 휘도성분과, 휘도 융합부(133)에서 출력되는 융합 결과를 감산하여 명부의 밝기 변화량을 추출한 후 이를 이득(파라미터 2)에 의해 제2 연산부(135)에서 가공하여 명부 영역만 밝기 조정을 할 수 있다. 명부 영역의 전체적인 밝기가 낮아지지만 융합에 의해 변화량이 큰 부분일수록 밝기 변화가 커지므로 콘트라스트가 향상된 효과가 있다. 도 5에 도시된 바와 같이 암부의 경우는 노출시간이 긴 LE 영상에서의 밝기를 그대로 사용하므로 명부 변화량이 거의 0이 되므로 하얀색으로 나타남을 알 수 있으며, 명부의 경우 노출시간이 서로 다른 두 장의 영상을 융합하여 나타내기 때문에 노출시간이 긴 LE 영상에서 빼주면 음수의 명부 변화량을 구할 수 있다. 도 5에서 도 5a는 노출시간이 긴 LE 영상을, 도 5b는 휘도 융합부(133)에서 출력되는 영상을 도 5c는 도 5a 및 도 5b의 감산 결과 영상을 보이고 있다.
감산 시에, 명부의 변화량을 많이 반영하는 경우 명부의 밝기가 낮아져서 최 대 표현 범위를 전부 다 사용하지 못하는 경우가 발생하게 되므로, 명부 변화량을 반영한 후 영상의 최대값을 구한 후 최대 표현 범위까지 사용이 가능하도록 부가적으로 이득 보정 과정을 거칠 수 있다. 이때 이득값(파라미터 2)은 제2 연산부(135)에서 감산 결과와 적산되어 출력될 수 있다.
하기 수학식 2에는 이득 보정 과정을 포함하는 Post2'를 보이고 있다.
Figure 112009055245475-PAT00002
또한 이득값이 너무 클 경우 명부와 암부의 경계 영역에서의 밝기 차이가 급격하게 되어 융합 부작용이 발생하거나 미세하게 존재하던 부작용이 증폭되어 보이게 될 수 있으므로 저 대역 통과 필터(블러링 처리부)를 사용하여 밝기 변화량을 블러링하거나, Threshold(제한부)를 이용하여 후 처리로 인한 밝기 변화의 최대값을 제한 할 수도 있으며, 하기 수학식3에 이를 Post2"로 나타낸다.
Figure 112009055245475-PAT00003
도 6a는 휘도 융합결과 영상을, 도 6b는 감산 결과에 따른 밝기 변화량 영상을 보이고 있다. 도 6c는 도 6a에서 명부만 확대한 영상을, 도 6d는 도 6b 영상에서 명부만 확대한 영상을 보이고 있다. 이와 같이 LE 영상의 휘도성분과 휘도 융합 결과를 감산함으로써, 명부의 콘트라스트가 향상되었음을 알 수 있다.
후 처리부(136)는 제1 연산부(132)의 출력과, 휘도 융합부(133)의 출력과, 제2 연산부(135)의 출력을 합성하여 Yout 신호로 출력한다. 후 처리부(136)는 제1 연산부(132)의 출력과, 휘도 융합부(133)의 출력과, 제2 연산부(135)의 출력에 특정 영역의 대조비를 향상시킬 수 있다.
도 7은 도 2의 각 블록 별 영상의 휘도성분을 보이는 도면으로, 도 7a는 LE 영상의 휘도성분을, 도 7b는 SE 영상의 휘도성분을, 도 7c는 휘도 융합 결과(종래 기술)의 휘도성분을, 도 7d는 본 발명에 따른 후처리 결과 영상의 휘도성분을 나타낸다. 도 7c과 비교 시에 도 7d가 선명도가 향상되었음을 알 수 있다.
도 8은 도 2의 각 블록 별 컬러 영상을 보이는 도면으로, 도 7a는 LE 컬러 영상을, 도 7b는 SE 컬러 영상을, 도 7c는 휘도 융합 결과(종래 기술)의 컬러 영상을, 도 7d는 본 발명에 따른 후처리 결과 컬러 영상을 나타낸다. 도 7c과 비교 시에 도 7d가 콘트라스트가 향상되었음을 알 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
도 1은 본 발명에 따른 광역 역광 보정 장치의 구성을 보이는 블록도 이다.
도 2는 도 1 중 Y/C 변환수단, 전 처리수단이 포함된 휘도 융합수단의 상세 블록도 이다.
도 3은 도 2 중 엣지 추출부를 설명하기 위한 영상을 보이는 도면이다.
도 4는 도 2 중 엣지 추출 효과를 보이는 도면이다.
도 5는 도 2 중 감산부를 설명하기 위한 영상을 보이는 도면이다.
도 6은 도 2 중 감산부에 따른 콘트라스트 향상 효과를 보이는 도면이다.
도 7은 도 2의 각 블록 별 영상의 휘도성분을 보이는 도면이다.
도 8은 도 2의 각 블록 별 컬러 영상을 보이는 도면이다.
도 9는 종래 기술에 따른 WDR 온/오프 영상을 보이는 도면이다.

Claims (8)

  1. 제1 노출시간을 갖는 영상으로부터 추출된 엣지 정보와, 제1 및 제2 노출시간을 갖는 영상의 휘도 융합 결과와, 제2 노출시간을 갖는 영상 및 상기 휘도 융합된 제1 및 제2 영상으로부터 추출된 밝기 차이 정보를 합성한 영상을 출력하는 광역 역광 보정 장치.
  2. 제 1항에 있어서, 상기 장치에서
    상기 제1 노출시간이 상기 제2 노출시간 보다 더 짧은 것을 특징으로 하는 광역 역광 보정 장치.
  3. 제 2항에 있어서, 상기 장치는
    상기 제1 및 제2 노출시간으로 획득한 영상신호들을 휘도/색차 신호로 각각 변환하는 제1 변환수단;
    상기 제1 노출시간을 갖는 휘도신호를 상기 제2 노출시간을 갖는 휘도신호에 상응하도록 정규화 하는 전처리수단;
    상기 제1 노출시간을 갖는 휘도신호로부터 추출된 엣지 정보와, 상기 정규화된 제1 노출시간을 갖는 휘도신호 및 상기 제2 노출시간을 갖는 휘도신호의 융합결과와, 상기 제2 노출시간을 갖는 영상과 상기 융합결과로부터 추출된 밝기 차이를 합성하는 휘도 융합수단;
    상기 제1 및 제2 노출시간을 갖는 색차신호를 상기 휘도 융합수단의 출력을 반영한 가중치를 이용하여 합산하는 색차 융합수단; 및
    상기 휘도 융합수단 및 색차 융합수단의 출력을 RGB 신호로 변환하는 제2 변환수단을 포함하는 것을 특징으로 하는 광역 역광 보정 장치.
  4. 제 3항에 있어서, 상기 휘도 융합수단은
    상기 제1 노출시간을 갖는 휘도신호로부터 엣지를 추출하는 엣지 추출부;
    상기 정규화된 제1 노출시간을 갖는 휘도신호 및 상기 제2 노출시간을 갖는 휘도신호에 가중치를 적용하여 합산하는 휘도 융합부;
    상기 제2 노출시간을 갖는 휘도신호 및 상기 휘도 융합부의 출력을 감산하는 감산부;
    상기 엣지 추출부, 상기 휘도 융합부 및 상기 감산부의 출력을 합성하는 후처리부를 포함하는 것을 특징으로 하는 광역 역광 보정 장치.
  5. 제 4항에 있어서,
    상기 엣지 추출부의 출력에 소정의 이득값을 적산하는 제1 연산부를 더 포함하는 것을 특징으로 하는 광역 역광 보정 장치.
  6. 제 4항에 있어서,
    상기 감산부의 출력에 소정의 이득값을 적산하는 제2 연산부를 더 포함하는 것을 특징으로 하는 광역 역광 보정 장치.
  7. 제 6항에 있어서,
    상기 제2 연산부의 출력을 블러링하는 블러링 처리부를 더 포함하는 것을 특징으로 하는 광역 역광 보정 장치.
  8. 제 6항에 있어서,
    상기 제2 연산부의 출력을 소정의 기준값으로 제한하는 제한부를 더 포함하는 것을 특징으로 하는 광역 역광 보정 장치.
KR1020090084533A 2009-09-08 2009-09-08 광역 역광 보정 장치 KR101408343B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090084533A KR101408343B1 (ko) 2009-09-08 2009-09-08 광역 역광 보정 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090084533A KR101408343B1 (ko) 2009-09-08 2009-09-08 광역 역광 보정 장치

Publications (2)

Publication Number Publication Date
KR20110026754A true KR20110026754A (ko) 2011-03-16
KR101408343B1 KR101408343B1 (ko) 2014-07-02

Family

ID=43933680

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090084533A KR101408343B1 (ko) 2009-09-08 2009-09-08 광역 역광 보정 장치

Country Status (1)

Country Link
KR (1) KR101408343B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104599643A (zh) * 2015-02-13 2015-05-06 合肥京东方光电科技有限公司 可调背光源设备、显示设备及其使用方法
KR101535006B1 (ko) * 2014-01-27 2015-07-08 (주) 넥스트칩 역광을 보정하기 위한 영상 처리 장치 및 방법
CN115953422A (zh) * 2022-12-27 2023-04-11 北京小米移动软件有限公司 边缘检测方法、装置及介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10262182A (ja) * 1997-03-17 1998-09-29 Ricoh Co Ltd 画像合成装置
JP2000050151A (ja) 1998-07-28 2000-02-18 Olympus Optical Co Ltd 撮像装置
JP4511066B2 (ja) 2001-03-12 2010-07-28 オリンパス株式会社 撮像装置
JP2003158669A (ja) 2001-11-21 2003-05-30 Olympus Optical Co Ltd 撮像装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101535006B1 (ko) * 2014-01-27 2015-07-08 (주) 넥스트칩 역광을 보정하기 위한 영상 처리 장치 및 방법
CN104599643A (zh) * 2015-02-13 2015-05-06 合肥京东方光电科技有限公司 可调背光源设备、显示设备及其使用方法
US10210819B2 (en) 2015-02-13 2019-02-19 Boe Technology Group Co., Ltd. Tunable backlight device, a display device and a method of driving the same
CN115953422A (zh) * 2022-12-27 2023-04-11 北京小米移动软件有限公司 边缘检测方法、装置及介质
CN115953422B (zh) * 2022-12-27 2023-12-19 北京小米移动软件有限公司 边缘检测方法、装置及介质

Also Published As

Publication number Publication date
KR101408343B1 (ko) 2014-07-02

Similar Documents

Publication Publication Date Title
CN110033418B (zh) 图像处理方法、装置、存储介质及电子设备
CN107045715B (zh) 一种单幅低动态范围图像生成高动态范围图像的方法
US9681026B2 (en) System and method for lens shading compensation
JP6169186B2 (ja) 画像処理方法及び装置並びに撮影端末
KR101257942B1 (ko) 광역 역광보정 영상처리에서의 전처리 방법 및 장치
US8488029B2 (en) Imaging apparatus, imaging method, integrated circuit, and storage medium
CN110619593B (zh) 一种基于动态场景的双曝光视频成像系统
EP2302903B1 (en) Image processing method, image processing apparatus, computer readable medium, and imaging apparatus
JP4208909B2 (ja) 画像処理装置と撮影装置
US8687883B2 (en) Method and a device for merging a plurality of digital pictures
EP3672221B1 (en) Imaging device and imaging method
KR20090078583A (ko) 저조도 영상 처리 방법 및 시스템
KR101023944B1 (ko) 영상 처리 장치 및 그 방법
US11017511B2 (en) Method and system of haze reduction for image processing
JP2012109900A (ja) 撮影装置、撮影方法、およびプログラム
JP2012209951A (ja) 撮像装置、撮像方法、集積回路およびプログラム
CN110047060B (zh) 图像处理方法、装置、存储介质及电子设备
JP2011018141A (ja) 画像処理装置、及び画像処理プログラム
KR20120114899A (ko) 영상 처리 방법 및 영상 처리 장치
Kao High dynamic range imaging by fusing multiple raw images and tone reproduction
KR20090048191A (ko) 다이내믹 레인지를 확장하는 칼라 영상 처리장치 및 방법
CN110740266B (zh) 图像选帧方法、装置、存储介质及电子设备
KR101408343B1 (ko) 광역 역광 보정 장치
JP2014179920A (ja) 撮像装置及びその制御方法、プログラム、並びに記憶媒体
JP2015139082A (ja) 画像処理装置、画像処理方法、プログラム、および電子機器

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170529

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180521

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190527

Year of fee payment: 6