KR100243301B1 - 다이나믹 레인지 확대장치 및 방법 - Google Patents

다이나믹 레인지 확대장치 및 방법 Download PDF

Info

Publication number
KR100243301B1
KR100243301B1 KR1019970062438A KR19970062438A KR100243301B1 KR 100243301 B1 KR100243301 B1 KR 100243301B1 KR 1019970062438 A KR1019970062438 A KR 1019970062438A KR 19970062438 A KR19970062438 A KR 19970062438A KR 100243301 B1 KR100243301 B1 KR 100243301B1
Authority
KR
South Korea
Prior art keywords
histogram
function
image
video signal
dynamic range
Prior art date
Application number
KR1019970062438A
Other languages
English (en)
Other versions
KR19990041784A (ko
Inventor
황정현
Original Assignee
윤종용
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 윤종용, 삼성전자주식회사 filed Critical 윤종용
Priority to KR1019970062438A priority Critical patent/KR100243301B1/ko
Priority to US09/197,706 priority patent/US6130724A/en
Publication of KR19990041784A publication Critical patent/KR19990041784A/ko
Application granted granted Critical
Publication of KR100243301B1 publication Critical patent/KR100243301B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/20Circuitry for controlling amplitude response

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Picture Signal Circuits (AREA)
  • Studio Devices (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Image Processing (AREA)

Abstract

본 발명의 목적은 영상의 다이나믹 레인지를 확대함과 동시에 영상의 콘트라스트를 향상시키는 다이나믹 레인지 확대 장치 및 방법을 제공하는 것이다.
본 발명에 따른 다이나믹 레인지 확대 장치에 있어서, 히스토그램 계산부는 디지털 영상신호를 입력하여, 영상의 밝기 분포에 따른 히스토그램을 계산한다. 히스토그램 누적부는 상기 히스토그램 계산부로부터 출력되는 히스토그램을 입력하여, 각 휘도 레벨까지 마다 적분함으로써 누적밀도함수를 구하고 정규화를 행하여, 초기 변환함수를 생성하고 출력한다. 바이어스 계산부는 상기 히스토그램 계산부로부터 출력되는 히스토그램을 토대로 저조도 레벨과 고조도 레벨을 구분하는 문턱치를 결정하고, 상기 문턱치 주위 레벨에서 히스토그램에 음의 바이어스를 가하기 위한 히스토그램 보상함수를 구한다. 변환부는 상기 초기 변환함수에 상기 히스토그램 보상함수가 감안된 영상 변환함수에 따라 소정시간 지연되어 입력되는 디지털 영상 신호를 변환하며, 이처럼 변환된 영상 신호는 디지털/아날로그(D/A) 변환기에 의해 디지털/아날로그 변환하여 출력된다.
이에 따라, 영상의 전체적인 콘트라스트가 개선됨과 동시에 다이나믹 레인지가 확장되는 효과가 있다.

Description

다이나믹 레인지 확대 장치 및 방법
본 발명은 영상 신호 처리 장치 및 방법에 관한 것으로서, 보다 상세하게는 히스토그램 등화 기법을 기초로 한 다이나믹 레인지 확대 장치 및 방법에 관한 것이다.
캠코더와 같은 비디오 영상 입력 장치에 의하여 촬영된 영상에는 촬영 대상물에 대한 여러 가지 정보가 포함되어 있다, 그런데, 대상물 혹은 촬영기기의 성능, 촬영 조건 등에 따라, 촬영된 영상 내에서 휘도 및 색상 정보가 편중되거나 왜곡되는 경우가 빈번하게 발생한다. 이러한 경우 별도의 전처리를 통하여 영상의 휘도대비 즉 콘트라스트(Contrast) 및 다이나믹 레인지를 선택적으로 확대할 필요가 있다.
영상을 개선하기 위한 종래의 방법 중 하나로서 호모몰릭 필터링(Homomorphic Filtering) 기법을 들 수 있는데, 이것은 변환 연산(Transform Operation)에 의한 영상 개선 방법의 일종이다. 도 1은 호모몰픽 필터링 기법을 사용하는 다이나믹 레인지 확대 장치를 개략적으로 보여주고 있다. 도 1을 참조하면, 입력 영상 신호는 로그 변환(Logarithmic Transform: 10)에 의해 밝기(Illumination) 성분과 반사(Reflectance) 성분으로 분리된 후, 고역통과필터(20)에 의해 반사(Reflectance) 성분만이 선택적으로 증폭된다. 증폭된 신호는 지수 변환(30)된 후 출력된다. 그런데, 이러한 방법은 개선되는 효과에 비해 계산량이 많다는 단점이 있다.
영상을 개선하기 위한 다른 방법인 히스토그램 등화 기법은 화소단위 조작(Point Operation)에 의한 영상 개선 방법으로서, 영상의 휘도 분포가 일정하게 되도록 정규화 함으로써 다이나믹 레인지를 확대하는 기법이다. 도 2는 히스토그램 등화 기법을 사용하는 전형적인 다이나믹 레인지 확대 장치를 보여준다. 도 2를 참조하면, 아날로그/디지털(A/D) 변환기(20)는 입력 영상 신호를 디지털 영상으로 변환한다. 히스토그램 계산부(22)는 디지털 영상의 히스토그램 예컨대 확률밀도함수를 계산하고, 히스토그램 누적부(24)는 상기 히스토그램을 계산하여 누적밀도함수를 계산한다. 계산된 누적밀도함수는 룩업테이블(LUT: 26)에 저장된 후, 디지털 영상을 변환하는데 사용된다. 변환된 영상신호는 디지털/아날로그(D/A) 변환기(28)에서 아날로그 신호로 재변환된 후 출력된다.
그런데 이와 같이 빈도를 평준화하는 경우, 다수 분포를 가지는 휘도 대역의 콘트라스트가 크게 변화함에 따라 양자화 잡음도 함께 증폭됨과 아울러, 적은 빈도를 가지는 휘도 신호의 영상부분에서는 콘트라스트가 상대적으로 저하된다는 문제점이 있다. 이를 개선하기 위하여, 히스토그램을 복수개의 대역으로 분할하고 대역별로 별개의 변환함수를 사용함으로써 히스토그램 등화의 영향을 전체적으로 줄이면서 콘트라스트를 적당히 개선하는 선형 히스토그램 개선 기법(Linear Histogram Modification)이 제안된 바 있으나, 회로가 복잡하고 콘트라스트와 잡음특성을 함께 개선하기 어렵다는 단점이 있다.
다이나믹 레인지를 확대하기 위한 다른 방법으로서, 영상의 양자화 단계를 세분화하여 영상의 분별력을 높이는 기법이 있다. 실제 캠코더에서는 영상이 보통 8비트 내지 10비트로 양자화되는데, 이 경우 약 45∼50dB 정도의 영상의 분별력을 가질 수 있다. 반면에 인간의 시각 특성은 약 120dB 정도의 분별력을 가지고 있는 것으로 알려져 있다. 또한 이러한 인간의 시각적 특성은 밝은 것에 대해 감응도가 탁월한 신경세포와 어두운 곳에 대해 감응도가 좋은 신경세포가 서로 혼재하고 있어 색온도에 따라 선택적으로 감도를 달리하는 신경계통을 통해 영상을 인식을 하게 된다. 이러한 시각특성에 착안하여 복수의 서로 다른 노출로써 입력 영상을 합성하여 보다 넓은 다이나믹 레인지를 가지며 인간 시각에 가까운 영상을 만들려는 방법이 미국특허 제5,144,442호에 기재되어 있다. 그러나 이 방법은 실제 카메라에 적용하고자 할 경우 다수의 입력 채널을 구비하여야 하기 때문에 시스템이 복잡해진다는 문제점과 아울러, 영상의 콘트라스트가 저하될 수 있다는 결점이 있다.
본 발명은 영상의 다이나믹 레인지를 확대함과 동시에 영상의 콘트라스트를 향상시킬 수 있는 다이나믹 레인지 확대 장치 및 방법을 제공하는 것을 기술적 과제로 한다.
이와 같이 다이나믹 레인지와 콘트라스트 양자를 모두 최적화하여 향상시키기 위한 본 발명은 특히 역광상태에서 촬영된 영상을 보정하는데 유용한 해법을 제공한다.
도 1은 호모몰픽 필터링 기법을 사용하는 종래의 다이나믹 레인지 확대 장치의 개략적 블록도.
도 2는 히스토그램 등화 기법을 사용하는 종래의 다이나믹 레인지 확대 장치의 블록도.
도 3은 본 발명에 의한 다이나믹 레인지 확대 장치의 블록도.
도 4(a) 및 도 5(a)는 역광 상태에서 촬영된 영상의 히스토그램을 예시하는 도면.
도 4(b)는 히스토그램을 보간한 경우와 보간하지 않은 경우의 초기 변환함수를 비교하여 도시한 도면.
도 4(c)는 히스토그램 보상함수의 일 예를 예시하는 도면.
도 4(d)는 히스토그램 보상함수로 보상되기 이전의 초기 변환함수를 영상 변환함수를 비교하여 도시한 도면.
도 5(b)는 도 5(a)의 로그 스케일 표시에 해당하는 히스토그램 대수함수를 도시한 도면.
도 5(c)는 제로 크로싱으로 검출되는 위치를 보여주는 도면.
도 6은 본 발명에 의한 다이나믹 레인지 확대 방법을 보여주는 흐름도.
도 7은 종래의 히스토그램 등화 기법 및 감마보정 기법에 사용되는 변환함수들과 본 발명에서의 변환함수를 비교하여 도시한 그래프.
도 8(a) 내지 도 8(d)는 테스트 영상에 대해 종래의 히스토그램 등화 기법 및 감마보정 기법과 본 발명을 적용한 경우의 결과들을 보여주는 도면.
먼저 본 발명의 이해를 돕기 위해 본 발명의 원리와 특징을 설명한다.
입력된 영상이 역광 상태에서 촬영된 것인 경우, 영상의 저조도 부분은 과도하게 억압되어 있고 밝은 부분은 쉽게 포화되기 때문에 적정한 노출을 정하는 것이 어렵다. 따라서 본 발명에서는 저조도 부분과 고조도 부분의 영상 영역을 서로 분리하여 각각을 적절한 변환함수로 변환한다. 즉 본 발명은 영상이 역광 상태에서 촬영된 것인 경우에는 특정 레벨의 문턱치로 영상을 구분하여 각각의 구간에 실질적으로 별개인 변환함수를 적용함으로써 콘트라스트를 개선함과 동시에 다이나믹 레인지를 영상에 적응적으로 제어한다.
영상을 두 개의 영역으로 분리하는 방법으로 종래에 히스토그램에 대한 판별분석법 등이 있지만, 실제의 영상에서는 이러한 히스토그램의 분포가 저조도에는 과밀하고 고조도 부분은 성기게 분포하므로 기존의 방법으로 문턱치를 결정하는데는 많은 어려움이 있다. 따라서 본 발명에서는 히스토그램 대수함수를 토대로 한 고유의 방법을 사용하여 상기 문턱치를 결정한다.
보다 구체적으로 설명하면, 실험에 의하면 영상이 역광 상태에서 촬영된 것인 경우 저조도 부분은 고조도 부분에 비하여 대역의 압축된 비율이 매우 높아져 있게 된다. 따라서 영상의 히스토그램을 log를 취한 수개의 구간으로 적분한 값을 취할 경우 새로운 형태의 히스토그램(이하 "히스토그램 대수함수"라 함)을 얻게 된다. 상기 히스토그램 대수함수는 인간의 시각 특성에 맞는 분포 형태를 가지게 되는데, 이는 인간의 시각 특성이 대수함수 형태의 인식 특성을 지니고 있기 때문이다. 상기 히스토그램 대수분포의 분포의 최소값 위치로부터 영상 분리를 위한 적절한 문턱치를 결정하게 된다. 이를 위하여, 히스토그램 대수함수 분포를 미분하고 이것이 제로 크로싱하는 점을 취한다. 일반적으로 역광상태의 히스토그램 대수함수는 저조도와 고조도에서 쌍봉을 이루고 있기 때문에 그 골짜기를 찾기 위하여 대수함수의 미분치가 0이 되는 위치를 검출하는 것이다. 결국 이점 부근에서 즉 가장 작은 히스토그램 대수함수 값을 가지는 점을 영상분할을 위한 최적의 문턱치로 결정하게 된다.
본 발명에 있어서는 영상의 히스토그램을 적분하여 만든 변환함수를 이용하여 영상 신호를 변환하는데, 히스토그램을 적분한 누적밀도함수 상에서 상기 문턱치 주위에 음의 바이어스를 가함으로써 저조도의 영상에 대한 변환함수와 고조도의 영상에 대한 변환함수가 실질적으로 달라지게 하게 된다. 이처럼 실질적으로 별개가 된 변환함수를 저조도의 영상 및 고조도의 영상에 각각 적용함으로써, 히스토그램 등화 기법의 단점인 콘트라스트 저하를 상당히 개선할 수 있게 된다.
상기와 같은 특징을 가지는 본 발명의 다이나믹 레인지 확대 장치에 있어서, 히스토그램 계산부는 디지털 영상신호를 입력하여, 영상의 밝기 분포에 따른 히스토그램을 계산한다. 히스토그램 누적부는 상기 히스토그램 계산부로부터 출력되는 히스토그램을 입력하여, 각 휘도 레벨까지 마다 적분함으로써 누적밀도함수를 구하고 정규화를 행하여, 초기 변환함수를 생성하고 출력한다.
바이어스 계산부는 상기 히스토그램 계산부로부터 출력되는 히스토그램을 토대로 저조도 레벨과 고조도 레벨을 구분하는 문턱치를 결정하고, 상기 문턱치 주위 레벨에서 히스토그램에 음의 바이어스를 가하기 위한 히스토그램 보상함수를 구한다. 변환부는, 상기 초기 변환함수에 상기 히스토그램 보상함수가 반영된 영상 변환함수에 따라, 소정시간 지연되어 입력되는 디지털 영상 신호를 변환한다. 디지털/아날로그 변환기는 이처럼 변환된 영상 신호를 디지털/아날로그 변환하여 출력한다.
한편, 본 발명의 다이나믹 레인지 확대 방법은 디지털 영상신호를 입력하여, 영상의 밝기 분포에 따른 히스토그램을 계산하는 단계; 상기 히스토그램을 각 휘도 레벨까지 마다 적분함으로써 누적밀도함수를 구하고 정규화를 행하여, 초기 변환함수를 생성하는 단계; 상기 히스토그램을 토대로 저조도 레벨과 고조도 레벨을 구분하는 문턱치를 결정하고, 상기 문턱치 주위 레벨에서 히스토그램에 음의 바이어스를 가하기 위한 히스토그램 보상함수를 구하는 단계; 상기 초기 변환함수에 상기 히스토그램 보상함수가 반영된 영상 변환함수에 따라 소정시간 지연되어 입력되는 디지털 영상 신호를 변환하는 단계; 및 상기 변환된 영상 신호를 디지털/아날로그 변환하는 단계;를 포함한다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예들을 상세하게 설명한다.
도 3은 본 발명에 의한 다이나믹 레인지 확대 장치의 바람직한 실시예를 보여준다. 또한 도 6은 본 발명에 의한 다이나믹 레인지 확대 방법을 보여주는 흐름도이다.
도 3에 있어서, 아날로그/디지털(A/D) 변환기(32)는 아날로그 영상 신호를 받아들여 디지털 영상 신호로 변환한다. 본 실시예에 있어서, 상기 입력 영상 신호는 캠코더의 CCD 촬상부로부터 입력이 된다. 그렇지만, 본 발명은 이에 한정되지 않고 기록매체에 저장되어 있는 영상의 처리와 같이 여타의 응용분야에서도 활용될 수 있다.
프레임 메모리(34)에 있어서, 제1 프레임 메모리(36)는 상기 A/D 변환기로부터의 디지털 영상 신호를 입력하여 한 프레임 단위로 저장하고 한 프레임 지연된 신호를 출력한다. 제2 프레임 메모리(38)는 상기 제1 프레임 메모리(36)로부터 한 프레임 지연된 신호를 입력하여 한 프레임 단위로 저장하고, 한 프레임 더 지연된 신호 즉 입력 영상 신호에 비해 두 프레임 지연된 신호를 출력한다.
히스토그램 계산부(40)는 상기 제1 프레임 메모리(36)로부터 한 프레임 지연된 신호를 입력받아 영상의 밝기 분포에 따른 히스토그램을 계산한다(제60단계). 만약 역광 상태라고 가정하고 한 프레임의 화면 전체에 대해 히스토그램을 취하면, 히스토그램의 분포가 저조도에는 과밀하고 고조도 부분은 성기게 분포되는 도 4(a)와 같은 형태를 가지게 된다.
히스토그램 누적부(42)는 상기 히스토그램 계산부(40)로부터 출력되는 히스토그램을 입력하여, 각 휘도 레벨까지 적분함으로써 누적 밀도함수를 구한다. 그리고 출력 영상 레벨의 최대값이 입력 영상 레벨의 최대값과 같아지도록 정규화를 하여 초기 변환함수를 출력한다(제62단계). 영상의 휘도 레벨을 i(0≤i〈 R, i는 정수, R은 변환된 휘도 레벨의 최대값을 나타냄), 히스토그램을 h(i)라 할 때, 상기 초기 변환함수는 휘도 변수를 x로 할 때 다음과 같이 표현된다.
Figure 1019970062438_B1_M0001
여기에서, m0은 정규화 상수이다.
한편, 본 발명의 다른 실시예에서는, 변환함수의 출력 감도를 조정하기 위해 히스토그램을 보간하는 히스토그램 조정부가 히스토그램 계산부(40)와 히스토그램 누적부(42)사이에 추가될 수 있다. 상기 히스토그램 조정부가 출력하는 보간된 히스토그램의 일 예로써 다음 수학식 2와 같이 표현되는 것을 들 수 있다.
hw(i)=h(i)×w + k0×(1.0-w)
여기에서, w는 사용자가 0과 1사이에 정할 수 있는 값이며, w값이 정해졌을 때 k0은 1/(m0·R)로써 정해진다. 상기 수학식 2와 같이 히스토그램을 보간한 경우, 히스토그램 누적부(42)에서 출력되는 초기 변환함수는 다음과 같이 표시된다.
Figure 1019970062438_B1_M0002
도 4a와 같은 분포의 영상의 히스토그램을 보간하지 않은 경우의 초기 변환함수와, w=0.5로 보간한 경우의 초기 변환함수가 도 4b에 도시되어 있다. 휘도 분포가 조밀한 저조도 영역에서의 콘트라스트가 감소한 대신, 고조도 영역에서의 콘트라스트가 증가하게 됨을 할 수 있다.
한편, 바이어스 계산부(44)는 상기 히스토그램 계산부(40)로부터 출력되는 히스토그램을 토대로 저조도 레벨과 고조도 레벨을 구분하는 문턱치를 결정하고, 상기 문턱치 주위 레벨에서 히스토그램에 음의 바이어스를 가하기 위한 히스토그램 보상함수를 구한다(제64단계 및 제66단계). 이를 보다 구체적으로 설명하면 다음과 같다.
로그 연산부(46)는 상기 히스토그램에 대해 소정의 대수적인 구간별로 적분하여 히스토그램 대수함수를 출력한다. 예를 들어, 밝기를 나타내는 변수를 i, 히스토그램을 h(i)라 할 때, 휘도 변수 k를 대수적으로 1레벨 단위로 변화하는 히스토그램 대수함수 hLOG는 다음과 같이 정의된다.
Figure 1019970062438_B1_M0003
여기서 k는 정수로서, 10비트 A/D 변환기를 사용하여 영상 신호를 디지털 신호로 변환한 경우 1∼10까지의 값을 가질 수가 있다. 그렇지만, 실질적으로 k가 4이하인 경우 즉 휘도 레벨이 16이하인 경우의 영상 신호는 정보력이 너무 저하되어 있기 때문에 무시하는 것이 바람직하다. 상기 수학식 4에 의해 표현되는 히스토그램 대수함수 hLOG가 도 5(b)에 도시되어 있다.
미분기(48)는 상기 히스토그램 대수함수를 1차 미분하여 다음 수학식 5로 표현되는 히스토그램 대수함수의 1차 미분함수 h'LOG를 출력한다.
Figure 1019970062438_B1_M0004
제로 크로싱 검출부(50)는 다음 수학식 6에 표시된 조건을 사용하여 상기 미분함수가 음에서 양으로 변화하는 부분을 검출한다.
Figure 1019970062438_B1_M0005
이처럼 제로 크로싱으로 검출되는 부분이 도 5(c)에 도시되어 있다.
히스토그램 대수함수의 1차 미분함수을 사용하여 처음 두가지 조건에 의해 제로 크로싱을 검출했다 하더라도, 만약 상기 제로 크로싱 주위에 많은 휘도 분포가 존재한다면 역광상태라 할 수 없으며 상기 제로 크로싱을 영상을 분할하는 문턱치로 사용할 수 없게 된다. 그러므로 상기 수학식 6의 세 번째 조건에 표시한 바와 같이, 제로 크로싱에서의 히스토그램 대수함수값 hLOG(k)가 소정의 임계치 hMAX보다 작거나 같은 경우에만, 히스토그램 대수함수의 1차 미분함수를 사용하여 문턱치를 검출한다.
문턱치 검출부(52)는 상기 로그 연산부와 상기 제로 크로싱 검출부로부터 각각 히스토그램 대수함수와 제로 크로싱 포인트를 입력받아, 상기 히스토그램 대수함수가 최소값을 가지는 휘도 레벨 값을 정하고, 이 값을 영상을 저조도 레벨과 고조도 레벨을 구분하는 문턱치로 결정한다.
바이어스 결정부(54)는 상기 문턱치를 입력받아 문턱치 주변에서 초기 변환함수를 바이어스하기 위한 히스토그램 보상함수를 수학식 7과 같이 결정한다.
Figure 1019970062438_B1_M0006
이와 같은 히스토그램 보상함수가 도 4(c)에 도시되어 있다. 수학식 7에서, bp는 콘트라스트 증가를 위해 설정되는 상수이고, R은 히스토그램 다이나믹 레인지의 최대값이다. 또한 (2ks-1≤ x 〈 2ks)은 도 4c의 히스토그램 보상함수가 음의 값을 가지는 구간을 나타낸다.
변환부(56)는 상기 초기 변환함수에 상기 히스토그램 보상함수를 반영하여 다음 수학식 8과 같은 영상 변환함수를 구한다(제68단계). 도 4(d)는 히스토그램 보상함수로 보상되기 이전의 초기 변환함수와 영상 변환함수를 대비하여 보여준다.
Figure 1019970062438_B1_M0007
변환부(56)는 상기 제2 프레임 메모리(38)로부터 출력되는 두 프레임 지연된 영상 신호를 입력받아, 상기 영상 변환함수에 따라 이 신호를 변환한다(제70단계). 본 바람직한 실시예에서, 변환부(56)는 각 입력 영상 신호 레벨에 대한 출력 영상 신호 레벨 값을 저장하고 있는 룩업테이블(Look-up Table: LUT)을 포함하며, 제2 프레임 메모리(38)로부터 영상 신호가 입력될 때마다 이에 대응되는 영상 신호 레벨 값을 출력한다.
디지털/아날로그(D/A) 변환기(58)는 상기 변환부(56)로부터 출력되는 변환된 영상 신호를 디지털/아날로그 변환하여, 입력 영상 신호에 비해 다이나믹 레인지가 확대된 출력 영상 신호를 출력한다.
상기 설명에서는 각 구성요소간의 시간 지연을 고려하지 않았지만, 상기 실시예들 및 여타의 다양하게 변형된 실시예들에 있어서 이들 시간 지연은 당업자에 의해 용이하게 산출되어 시스템 설계에 감안될 수 있다.
한편, 상술한 바와 같은 본 발명의 바람직한 실시예는 다양한 방법으로 변형될 수 있다.
예를 들어, 본 발명의 다른 실시예에 있어서, 상기 프레임 메모리(34)는 두 개의 프레임 메모리로 구성되는 대신에 신호의 지연시간을 고려하여 둘 이상의 프레임 메모리로 구성될 수도 있다. 또한 본 발명의 또다른 실시예에 있어서, 상기 프레임 메모리(34)는 단 하나의 메모리만으로 구성될 수 있는데, 이러한 경우, 히스토그램 계산부는 상기 A/D 변환기로부터 직접 디지털 영상 신호를 입력받고, 상기 변환부는 상기 메모리로부터 출력되는 소정시간 지연된 영상 신호를 변환하게 된다.
도 7은 종래의 히스토그램 등화 기법 및 감마보정 기법에 사용되는 변환함수들과 본 발명에서의 변환함수를 비교하여 도시한 그래프이다. 본 발명에 의한 변환함수는 종래의 히스토그램 등화 기법에 비해 것들에 비해 다이나믹 레인지가 개선되고 고조도 영역에서 콘트라스트가 향상되었음을 알 수 있다. 또한 감마보정 기법에 비해서는 저조도 영역과 고조도 영역에서의 콘트라스트가 크게 향상되었음을 알 수 있다.
이와 같이, 본 발명은 하나의 수학식으로 표현되지만 실질적으로 별개로 작용하는 변환함수들을 저조도의 영상 및 고조도의 영상에 각각 적용함으로써, 영상의 전체적인 콘트라스트를 개선함과 동시에 다이나믹 레인지를 확장하여 양자를 최적화한다.
도 8(a) 내지 도 8(d)는, 본 발명의 유용성을 보여주기 위해, 테스트 영상에 대해 종래의 히스토그램 등화 기법 및 감마보정 기법과 본 발명을 적용한 경우의 결과들을 보여주는 도면이다.
도 8(a)는 원 입력 영상의 일 예를 보여주는데, 이 영상은 940×480 픽셀들을 포함하고 해상도가 10비트인 것이다. 이 영상은 역광 상태에서 촬영되었기 때문에, 고 휘도 영역 및 저조도 영역에서 매우 포화가 되어 있는 것을 볼 수 있다.
도 8(b)는 도 8(a)의 영상을 감마 값을 0.45로 하여 감마보정한 결과를 보여준다. 도 8(a)와 도 8(b)를 비교해보면, 밝기 값이 낮은 부분의 휘도는 증가되지만 영상의 전체적인 콘트라스트가 저하됨을 알 수 있다.
도 8(c)는 도 8(a)의 영상을 히스토그램 등화한 결과를 보여준다. 도 8(a)와 도 8(c)를 비교해보면, 영상의 콘트라스트는 증가되었지만 고조도 영역에서의 영상 분포가 감소되었다는 것을 알 수 있다. 이는 도 7에서 볼 수 있듯이, 변환함수가 중간 휘도 영역에서 완만하게 변화하다가 고조도 영역에서 급격히 변화하기 때문이다.
마지막으로, 도 8(d)는 본 발명의 방법에 의한 결과를 보여준다. 영상의 콘트라스트와 시각적인 다이나믹 레인지가 모두 향상되었음을 알 수 있다.
다만, 본 발명에 의하면 변환함수의 저조도 영역과 고조도 영역이 만나는 경계부분 즉 문턱치 부분에서 불연속이 생길 수 있다는 단점이 있다. 그러나 역광상태 하에서는 문턱치 주변에서의 영상 분포가 매우 낮기 때문에, 이러한 불연속의 효과가 표시된 영상에서 그리 크게 나타나지 않는다.
또한 변환함수의 경계부분에 약간의 저역통과필터링을 행한 것과 같이 경계부분만 완만하게 변화시켜 주면, 출력 영상에서 윤곽보정을 행하게 되는 부수적인 효과가 있다.

Claims (11)

  1. 디지털 영상신호를 입력하여, 영상의 밝기 분포에 따른 히스토그램을 계산하는 히스토그램 계산부;
    상기 히스토그램 계산부로부터 출력되는 히스토그램을 입력하여, 각 휘도 레벨까지 마다 적분함으로써 누적밀도함수를 구하고 정규화를 행하여, 초기 변환함수를 생성하고 출력하는 히스토그램 누적부;
    상기 히스토그램 계산부로부터 출력되는 히스토그램을 토대로 저조도 레벨과 고조도 레벨을 구분하는 문턱치를 결정하고, 상기 문턱치 주위 레벨에서 히스토그램에 음의 바이어스를 가하기 위한 히스토그램 보상함수를 구하는 바이어스 계산부;
    상기 초기 변환함수에 상기 히스토그램 보상함수가 반영된 영상 변환함수에 따라 소정시간 지연되어 입력되는 디지털 영상 신호를 변환하는 변환부; 및
    상기 변환부로부터 출력되는 변환된 영상 신호를 디지털/아날로그 변환하여 출력 영상 신호를 출력하는 디지털/아날로그(D/A) 변환기;
    를 포함하는 다이나믹 레인지 확대 장치.
  2. 제1항에 있어서, 상기 히스토그램 계산부과 상기 히스토그램 누적부사이에, 변환함수의 출력 감도를 조정하기 위해 히스토그램을 보간하는 히스토그램 조정부를 더 포함하고,
    상기 히스토그램 누적부는 보간된 히스토그램에 대하여 적분을 행하는 다이나믹 레인지 확대 장치.
  3. 제2항에 있어서, 상기 히스토그램 조정부는 다음 수학식:
    hw(i)=h(i)×w + k0×(1.0-w)
    (여기서, h(i)는 히스토그램, hw(i)는 보간된 히스토그램, w는 사용자가 0과 1사이에 정할 수 있는 값이며, k0은 1/(m0·R))
    에 따라 히스토그램을 보간하는 다이나믹 레인지 확대 장치.
  4. 제1항에 있어서, 상기 바이어스 계산부는
    상기 히스토그램에 대해 소정의 대수적인 구간별로 적분하여 히스토그램 대수함수를 출력하는 로그 연산부;
    상기 히스토그램 대수함수를 1차 미분하여 1차 미분함수를 출력하는 미분기;
    상기 미분함수가 음에서 양으로 변화하는 제로 크로싱 포인트를 검출하는 제로 크로싱 검출부;
    상기 로그 연산부와 상기 제로 크로싱 검출부로부터 각각 히스토그램 대수함수와 제로 크로싱 포인트를 입력받아, 영상을 저조도 레벨과 고조도 레벨을 구분하는 문턱치를 결정하는 문턱치 검출부; 및
    상기 문턱치를 입력받아 문턱치 주변에서 초기 변환함수를 바이어스하기 위한 히스토그램 보상함수를 결정하는 바이어스 결정부;
    를 포함하는 다이나믹 레인지 확대 장치.
  5. 제4항에 있어서, 상기 제로 크로싱 검출부는
    다음 조건들:
    h′LOG(k-1)≤0, h′LOG(k)〉0
    (여기서, h'LOG(k-1)은 히스토그램 대수함수의 1차 미분함수)
    를 만족하는 k 값을 제로 크로싱 포인트로 결정하는 다이나믹 레인지 확대 장치.
  6. 제1항에 있어서, 상기 변환부는
    각 입력 영상 신호 레벨에 대한 출력 영상 신호 레벨 값을 저장하는 룩업테이블을 포함하는 다이나믹 레인지 확대 장치.
  7. 제1항에 있어서,
    아날로그 영상 신호를 받아들이고 아날로그/디지털 변환을 행하여 상기 디지털 영상 신호로 변환하는 아날로그/디지털(A/D) 변환기; 및
    상기 디지털 영상 신호를 입력하여 적어도 한 프레임주기 이상 저장하는 메모리 수단;
    을 더 포함하는 다이나믹 레인지 확대 장치.
  8. 제7항에 있어서, 상기 히스토그램 계산부는 상기 A/D 변환기로부터의 디지털 영상 신호를 입력받고, 상기 변환부는 상기 메모리 수단으로부터 출력되는 소정시간 지연된 영상 신호를 변환하는 다이나믹 레인지 확대 장치.
  9. 제7항에 있어서, 상기 메모리 수단은
    상기 A/D 변환기로부터의 디지털 영상 신호를 입력하여 한 프레임 단위로 저장하고 한 프레임 지연된 신호를 출력하는 제1 프레임 메모리; 및
    상기 제1 프레임 메모리로부터의 한 프레임 지연된 신호를 입력하여 한 프레임 단위로 저장하고 한 프레임 더 지연된 신호를 출력하는 제2 프레임 메모리;를 포함하며,
    상기 히스토그램 계산부는 상기 제1 프레임 메모리로부터의 한 프레임 지연된 신호를 입력받고, 상기 변환부는 상기 제2 프레임 메모리로부터의 한 프레임 더 지연된 신호를 입력받는 다이나믹 레인지 확대 장치.
  10. (a) 디지털 영상신호를 입력하여, 영상의 밝기 분포에 따른 히스토그램을 계산하는 단계;
    (b) 상기 히스토그램을 각 휘도 레벨까지 마다 적분함으로써 누적밀도함수를 구하고 정규화를 행하여, 초기 변환함수를 생성하는 단계;
    (c) 상기 히스토그램을 토대로 저조도 레벨과 고조도 레벨을 구분하는 문턱치를 결정하고, 상기 문턱치 주위 레벨에서 히스토그램에 음의 바이어스를 가하기 위한 히스토그램 보상함수를 구하는 단계;
    (d) 상기 초기 변환함수에 상기 히스토그램 보상함수가 반영된 영상 변환함수에 따라 소정시간 지연되어 입력되는 디지털 영상 신호를 변환하는 단계; 및
    (e) 상기 변환된 영상 신호를 디지털/아날로그 변환하는 단계;
    를 포함하는 다이나믹 레인지 확대 방법.
  11. 제10항에 있어서, 상기 (c)단계는
    상기 히스토그램에 대해 소정의 대수적인 구간별로 적분하여 히스토그램 대수함수를 구하는 단계;
    상기 히스토그램 대수함수를 1차 미분한 1차 미분함수를 구하는 단계;
    상기 1차 미분함수가 음에서 양으로 변화하는 제로 크로싱 포인트를 검출하는 단계;
    상기 히스토그램 대수함수와 제로 크로싱 포인트를 토대로 하여, 저조도 레벨과 고조도 레벨을 구분하는 문턱치를 결정하는 단계; 및
    상기 문턱치 주변에서 초기 변환함수를 바이어스하기 위한 히스토그램 보상함수를 결정하는 단계;
    를 포함하는 다이나믹 레인지 확대 방법.
KR1019970062438A 1997-11-24 1997-11-24 다이나믹 레인지 확대장치 및 방법 KR100243301B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1019970062438A KR100243301B1 (ko) 1997-11-24 1997-11-24 다이나믹 레인지 확대장치 및 방법
US09/197,706 US6130724A (en) 1997-11-24 1998-11-23 Image processing apparatus and method for magnifying dynamic range

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1019970062438A KR100243301B1 (ko) 1997-11-24 1997-11-24 다이나믹 레인지 확대장치 및 방법

Publications (2)

Publication Number Publication Date
KR19990041784A KR19990041784A (ko) 1999-06-15
KR100243301B1 true KR100243301B1 (ko) 2000-02-01

Family

ID=19525477

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019970062438A KR100243301B1 (ko) 1997-11-24 1997-11-24 다이나믹 레인지 확대장치 및 방법

Country Status (2)

Country Link
US (1) US6130724A (ko)
KR (1) KR100243301B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7865033B2 (en) 2006-02-14 2011-01-04 Samsung Electronics Co., Ltd. Method and apparatus for controlling contrast
US7940997B2 (en) 2005-11-10 2011-05-10 Samsung Electronics Co., Ltd. Method and apparatus for enhancing contrast
KR20110048811A (ko) * 2009-11-03 2011-05-12 중앙대학교 산학협력단 입력 영상의 동적 범위를 변환하는 방법 및 장치
US8666151B2 (en) 2010-04-09 2014-03-04 Samsung Electro-Mechanics Co., Ltd. Apparatus and method for enhancing visibility of color image

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100297714B1 (ko) * 1998-09-01 2001-08-07 윤종용 넓은동적범위를갖는영상장치및이의영상신호처리방법
KR100298412B1 (ko) * 1999-05-08 2001-09-26 구자홍 동영상 송수신 시스템에서의 영상신호 밝기 제어장치 및 방법
KR100584535B1 (ko) * 1999-06-18 2006-05-30 삼성전자주식회사 비디오 신호의 블랙 레벨 확장장치 및 그 방법
EP1075140A1 (en) * 1999-08-02 2001-02-07 Koninklijke Philips Electronics N.V. Video signal enhancement
DE19960888A1 (de) * 1999-12-17 2001-06-21 Robot Foto Electr Kg Bilderfassungsystem zur Erzeugung eines Dunkel- und Hellbildes
IL135571A0 (en) 2000-04-10 2001-05-20 Doron Adler Minimal invasive surgery imaging system
EP1164784A1 (en) * 2000-06-13 2001-12-19 Koninklijke Philips Electronics N.V. Preventing doming phenomena
US6792141B2 (en) * 2001-04-19 2004-09-14 Raytheon Company Infrared detection system and method with histogram based manual level and gain control with local gain clipping
JP3874658B2 (ja) * 2001-12-12 2007-01-31 三星エスディアイ株式会社 コントラスト補正回路
GB0130652D0 (en) * 2001-12-21 2002-02-06 Bae Systems Plc Improvements in or relating to low light level imaging devices
KR100437807B1 (ko) * 2002-01-21 2004-06-30 엘지전자 주식회사 히스토그램 평탄화 방법 및 장치
US7362915B2 (en) * 2002-02-22 2008-04-22 Agfa Healthcare, Nv Method for enhancing the contrast of an image
JP4360777B2 (ja) * 2002-05-31 2009-11-11 Hoya株式会社 電子内視鏡装置の増幅度自動調整装置
KR20040040699A (ko) * 2002-11-07 2004-05-13 삼성전자주식회사 콘트라스트 보정 장치 및 방법
JP2004171301A (ja) * 2002-11-20 2004-06-17 Canon Inc 画像処理方法及び装置
KR100989159B1 (ko) * 2003-12-29 2010-10-20 엘지디스플레이 주식회사 액정표시장치와 그 제어방법
US7551776B2 (en) * 2004-07-22 2009-06-23 Seiko Epson Corporation Histogram generation apparatus and method for operating the same
US20060050084A1 (en) * 2004-09-03 2006-03-09 Eric Jeffrey Apparatus and method for histogram stretching
DE102004061507B4 (de) * 2004-12-21 2007-04-12 Siemens Ag Verfahren zur Korrektur von Inhomogenitäten in einem Bild sowie bildgebende Vorrichtung dazu
US7791656B2 (en) * 2005-08-16 2010-09-07 Konica Minolta Holdings, Inc. Image sensing apparatus and image processing method
US20070058862A1 (en) * 2005-09-09 2007-03-15 Meier Michael R Histogram equalization method for a vision-based occupant sensing system
US20070183684A1 (en) * 2006-02-08 2007-08-09 Bhattacharjya Anoop K Systems and methods for contrast adjustment
EP2315045B1 (de) * 2009-10-22 2012-08-01 Sick Ag Messung von Entfernungen oder Entfernungsänderungen
US8599318B2 (en) * 2010-05-21 2013-12-03 Vixs Systems, Inc. Contrast control device and method therefor
US8698961B2 (en) * 2010-05-21 2014-04-15 Vixs Systems, Inc. Enhanced histogram equalization
TWI458341B (zh) * 2011-08-10 2014-10-21 Univ Nat Taipei Technology 用於顯示裝置之影像品質提升方法
WO2013059116A1 (en) * 2011-10-20 2013-04-25 Dolby Laboratories Licensing Corporation Method and system for video equalization
US9510739B2 (en) 2013-07-12 2016-12-06 Gyrus Acmi, Inc. Endoscope small imaging system
US20150287174A1 (en) * 2014-04-04 2015-10-08 Digital Signal Corporation System and Method for Improving an Image Characteristic of Image Frames in a Video Stream
CN105447890A (zh) * 2015-12-08 2016-03-30 南京航空航天大学 一种抗光照影响的运动车辆检测方法
KR102360156B1 (ko) * 2016-06-03 2022-02-09 현대자동차주식회사 저조도 영상의 시인성 개선 방법

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL87306A0 (en) * 1988-08-02 1989-01-31 Technion Res & Dev Foundation Wide dynamic range camera
JP2936791B2 (ja) * 1991-05-28 1999-08-23 松下電器産業株式会社 階調補正装置
KR100200363B1 (ko) * 1996-10-10 1999-06-15 윤종용 영상의 다이나믹 레인지 확대 장치

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7940997B2 (en) 2005-11-10 2011-05-10 Samsung Electronics Co., Ltd. Method and apparatus for enhancing contrast
US7865033B2 (en) 2006-02-14 2011-01-04 Samsung Electronics Co., Ltd. Method and apparatus for controlling contrast
KR20110048811A (ko) * 2009-11-03 2011-05-12 중앙대학교 산학협력단 입력 영상의 동적 범위를 변환하는 방법 및 장치
KR101648762B1 (ko) 2009-11-03 2016-08-18 한양대학교 산학협력단 입력 영상의 동적 범위를 변환하는 방법 및 장치
US8666151B2 (en) 2010-04-09 2014-03-04 Samsung Electro-Mechanics Co., Ltd. Apparatus and method for enhancing visibility of color image

Also Published As

Publication number Publication date
US6130724A (en) 2000-10-10
KR19990041784A (ko) 1999-06-15

Similar Documents

Publication Publication Date Title
KR100243301B1 (ko) 다이나믹 레인지 확대장치 및 방법
US7570390B2 (en) Image processing device and method
US7791652B2 (en) Image processing apparatus, image capture apparatus, image output apparatus, and method and program for these apparatus
US7127122B2 (en) Image processing method and image processing apparatus
FI104521B (fi) Menetelmä kuvasekvenssien kontrastin parantamiseksi
US7990443B2 (en) Image sensing apparatus and image processing method
US6965416B2 (en) Image processing circuit and method for processing image
US8654221B2 (en) Image processing device and method, and program
US7065257B2 (en) Image processing method and apparatus
KR100782845B1 (ko) 비로그 도메인 조도 수정을 이용한 디지털 영상 개선방법과 시스템
US7920183B2 (en) Image processing device and digital camera
CN100366052C (zh) 图像处理设备和方法
US7206447B2 (en) Image sensing system with histogram modification
US7382941B2 (en) Apparatus and method of compressing dynamic range of image
US7292734B2 (en) Black and white stretching system and method for improving contrast of a picture
US8280162B2 (en) Image processing apparatus and recording medium recording image processing program
JP4111980B2 (ja) 画像処理装置及び画像処理方法
US6753910B1 (en) Image processing apparatus and image processing method
JP2007082181A (ja) 撮像装置及び画像処理方法
JPH09224174A (ja) 積分ルックアップテーブルを用いる適応型ガンマ補正装置
JP3201049B2 (ja) 階調補正回路及び撮像装置
JP5142833B2 (ja) 画像処理装置及び画像処理方法
JP3294089B2 (ja) 撮像装置
JP2866935B2 (ja) カラー画像の画質改善方法及びその装置
KR0176602B1 (ko) 밝기보상기능을 가진 평균-매칭 히스토그램 등화를 이용한 화질 개선 방법 및 그 회로

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20091113

Year of fee payment: 11

LAPS Lapse due to unpaid annual fee