KR100765257B1 - 카메라 모듈의 편차 보상 방법 및 장치 - Google Patents

카메라 모듈의 편차 보상 방법 및 장치 Download PDF

Info

Publication number
KR100765257B1
KR100765257B1 KR1020060010334A KR20060010334A KR100765257B1 KR 100765257 B1 KR100765257 B1 KR 100765257B1 KR 1020060010334 A KR1020060010334 A KR 1020060010334A KR 20060010334 A KR20060010334 A KR 20060010334A KR 100765257 B1 KR100765257 B1 KR 100765257B1
Authority
KR
South Korea
Prior art keywords
camera module
image signal
setting value
image
signal processor
Prior art date
Application number
KR1020060010334A
Other languages
English (en)
Other versions
KR20060113375A (ko
Inventor
최동업
Original Assignee
엠텍비젼 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엠텍비젼 주식회사 filed Critical 엠텍비젼 주식회사
Publication of KR20060113375A publication Critical patent/KR20060113375A/ko
Application granted granted Critical
Publication of KR100765257B1 publication Critical patent/KR100765257B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 카메라 모듈의 편차 보상 방법 및 장치에 관한 것이다. 상기 방법은 상기 카메라 모듈로부터 세팅값 생성을 위한 제1 이미지 신호를 수신하는 제1 단계; 제1 이미지 신호를 신호 처리하여 제1 이미지 데이터를 생성하는 제2 단계; 제1 이미지 데이터를 튜닝 단말기로 전송하는 제3 단계-여기서 튜닝 단말기는 제1 이미지 데이터를 화면에 출력하고, 상기 화면에 출력된 제1 이미지 데이터를 바탕으로 작업자로부터 적어도 하나의 키입력을 받아 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 중 적어도 하나를 보상하기 위한 세팅값을 생성하고, 상기 세팅값을 상기 메모리로 전송하여 저장함-; 카메라 모듈로부터 카메라 모듈 동작을 위한 제2 이미지 신호를 수신하는 제4 단계; 제2 이미지를 보상하기 위한 상기 세팅값을 상기 메모리로부터 추출하는 제5 단계; 및 상기 세팅값을 바탕으로 상기 제2 이미지를 보상하는 신호 처리를 수행하는 제6 단계를 포함한다.
ISP, 영상 신호 처리기, 데드 픽셀, 렌즈 쉐이딩, 카메라 모듈, 보상

Description

카메라 모듈의 편차 보상 방법 및 장치{Method and apparatus for compensating defect of camera module}
도 1은 종래 기술에 따른 카메라 모듈의 편차 보상 시스템의 구조를 나타내는 도면.
도 2는 종래 기술에 따른 카메라 모듈의 편차 보상 방법을 나타내는 순서도.
도 3은 본 발명의 바람직한 일 실시예에 따른 카메라 모듈의 편차 보상 시스템의 구조를 나타내는 도면.
도 4는 본 발명의 바람직한 일 실시예에 따른 디버깅 모드에서 세팅값 설정 과정을 나타낸 순서도
도 5는 본 발명의 바람직한 일 실시예에 따른 오퍼레이션 모드에서 이미지 편차 보상 과정을 나타낸 순서도.
도 6은 본 발명의 바람직한 일 실시예에 따른 세팅값을 설정을 위한 튜닝 프로그램의 예시도.
<도면의 주요 부분에 대한 설명>
101, 301 : 카메라 모듈
103, 303 : 영상 신호 처리기(ISP)
105, 305 : 튜닝 단말기
307 : 메모리
본 발명은 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 편차 보상 방법 및 장치에 관한 것이다.
데드 픽셀(dead pixel)이란 카메라 모듈 내 이미지 센서 자체에서 특정 픽셀의 색을 제대로 표현하지 못하는 것을 말한다. 렌즈 쉐이딩(lens shading)이란 렌즈의 조립 과정에서 그 중심축이 모듈마다 약간씩 틀어져서 중심에서 바깥으로 갈수록 색이 어두워지는 현상을 말한다. 이러한 데드 픽셀과 렌즈 쉐이딩 편차는 카메라 모듈 제조시 이미지 센서를 개선하거나 다초점 렌즈를 사용하는 등 하드웨어적인 방법에 의해 개선이 가능할 뿐 아니라 이미 조립된 카메라 모듈 내의 이미지 센서와 렌즈의 특성을 소프트웨어적으로 보상하는 방법에 의해 개선하는 것도 가능한데, 본 발명은 후자의 영역에 속하는 것이다.
도 1 및 도 2를 참조하여 종래 기술에 따른 카메라 모듈의 편차 보상 방법을 설명하면 다음과 같다.
도 1은 종래 기술에 따른 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 편차 보상 시스템의 구조를 나타내는 도면이다.
도 1을 참조하면, 종래 기술에 따른 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 편차 보상 장치는 카메라 모듈(101), 이미지 신호 처리기(ISP; Image Signal Processor)(103), 튜닝 단말기(105)를 포함한다.
카메라 모듈(101)은 빛을 받아들이는 렌즈(lens)와 빛을 전기 신호로 바꾸어 주는 이미지 센서(Image sensor)를 포함한다. 이때 양산되는 각 카메라 모듈(101)에 장착된 렌즈는 각 카메라 모듈(101)마다 그 중심축이 조금씩 어긋나 있어 렌즈 쉐이딩 현상이 발생하거나 각 이미지 센서마다 특정 픽셀의 색을 제대로 표현하지 못하는 데드 픽셀을 포함하고 있다.
영상 신호 처리기(103)는 이미지 센서에서 획득한 아날로그 영상 신호를 디지털 데이터로 변환한 후, 영상 처리 과정을 거쳐 화면상에 디스플레이하는 장치이다. 종래 기술에 따른 카메라 모듈(101)의 데드 픽셀 및 렌즈 쉐이딩 편차는 영상 신호 처리기(103)에 탑재되는 하나의 펌웨어(firmware) 프로그램의 파라미터 값을 변경하는 것에 의해 일률적으로 보상되고 있다.
튜닝 단말기(105)는 영상 신호 처리기(103)를 거쳐 화면상에 디스플레이된 프리뷰 영상을 보면서 데드 픽셀과 렌즈 쉐이딩 편차를 검출하고, 이것을 보상하기 위한 세팅값을 찾는 기능을 하는 장치이다. 일반적으로 튜닝 단말기(105)에는 이러한 데드 픽셀이 발생한 위치를 검출하여 이를 특정 주소에 저장할 수 있고 렌즈의 오차나 쉐이딩의 정도 등을 조금씩 바꿔 가면서 정확한 세팅값을 찾을 수 있는 프 로그램이 탑재될 수 있다.
데드 픽셀과 렌즈 쉐이딩 편차가 보상된 카메라 모듈(101)은 핸드폰이나 디지털 카메라 등의 이미지 촬영이 가능한 제품의 내부 회로 기판(110)에 탑재되어 촬영 모듈로서 기능한다.
도 2는 종래 기술에 따른 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 편차 보상 방법을 나타내는 순서도이다.
도 2를 참조하면, 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 편차의 보상은 튜닝 단말기에 출력된 프리뷰 화면을 보면서 보상 값을 찾아 영상 신호 처리기의 펌웨어 프로그램에 이를 반영해 주는 방법을 이용하여 수행된다.
먼저 카메라 모듈의 특성을 보상하기 위하여 이미지가 프리뷰된다(단계 201). 카메라 모듈을 통하여 획득된 이미지 신호는 영상 신호 처리기에 의하여 처리된 후 튜닝 단말기에 디스플레이된다. 작업자는 튜닝 단말기에 디스플레이된 영상을 보면서 데드 픽셀의 위치 및 렌즈 쉐이딩 편차를 검출한다(단계 203). 데드 픽셀 및 렌즈 쉐이딩 편차가 검출되면, 튜닝 단말기에 설치된 프로그램 등을 이용하여 데드 픽셀 및 렌즈 쉐이딩 편차를 보상하기 위한 세팅값이 획득된다(단계 205).
작업자는 상기 과정을 통하여 획득된 세팅값을 이용하여 영상 신호 처리기에 탑재되는 영상 신호 처리를 위한 펌웨어 프로그램의 소스를 변경한다(단계 207). 다음으로 변경된 프로그램이 컴파일되어(단계 209) 펌웨어 프로그램의 바이너리 파 일이 생성된다. 컴파일된 프로그램은 다시 영상 신호 처리기에 다운로드되며(단계 211), 이를 이용하여 이미지는 재프리뷰된다(단계 213).
마지막으로 재프리뷰된 이미지를 통하여 카메라 모듈에 대한 이미지 보상이 완료되었는지 여부를 판단한 후(단계 215) 보상이 완료되었다고 판단된 경우 보상 작업을 완료하고, 재프리뷰된 이미지에도 데드 픽셀이나 렌즈 쉐이딩 편차가 발견된 경우 데드 픽셀 검출 및 렌즈 쉐이딩 편차 검출(단계 203)에서 이미지 재프리뷰(단계 213)를 반복 수행한다.
이와 같이 종래 기술에 따른 데드 픽셀 및 렌즈 쉐이딩 편차 보상 방법은 영상 신호 처리기에 탑재되는 하나의 펌웨어 프로그램만으로 서로 다른 카메라 모듈의 특성을 보상하고 있어 각 모듈의 특성을 보상하는데 너무 오랜 시간이 걸린다는 문제점이 있다. 즉 종래 기술에 따른 데드 픽셀 및 렌즈 쉐이딩 편차 보상 방법은 이미지를 프리뷰 하면서 획득한 데이터를 바로 반영시켜 줄 수 없기 때문에, 획득된 데이터가 다시 프로그램 상의 파라미터 값으로 세팅될 수 있도록 프로그램 소스를 변경하여야 한다. 또한 종래 방법은 영상 신호 처리기에 탑재될 수 있도록 변경된 프로그램의 바이너리 파일을 생성하고, 생성된 바이너리 파일을 영상 신호 처리기에 다운로드하는 과정을 수행하여야 한다. 이러한 방법은 몇 개의 카메라 모듈만을 갖고 테스트하는 경우에는 문제가 없으나, 이를 대량 생산하는 경우 그 시간 및 노력이 너무 많이 소요되는 문제가 있다. 실질적으로 대부분의 카메라 모듈 관련 회사의 경우 이러한 데드 픽셀과 렌즈 쉐이딩 편차 보상에 대한 필요성은 인식하고 있으나, 대량 생산하는 경우 디버깅(Debuging) 시간이 너무 많이 걸린다는 문제점 때문에 정확한 세팅 작업을 포기하고 있다.
그러나 카메라폰 등에 들어가는 카메라 모듈의 성능이 메가급으로 가면서 데드 픽셀과 렌즈 쉐이딩이 화질에 더 큰 영향을 주기 때문에 이를 무시할 경우 좋은 화질을 얻기가 곤란하다. 물론 제품에 따라 데드 픽셀이 거의 나타나지 않거나 렌즈 쉐이딩 오차가 적은 경우도 있고 이러한 경우 모듈의 특성에 의해 어느 정도의 화질을 기대할 수 있지만, 대량 생산하는 경우 생산되는 제품마다 그 편차가 심한 경우 제품의 신뢰성에 영향을 줄 수 있음은 자명한 사실이다.
또한 종래의 영상 신호 처리기는 영상 신호를 보상하기 위하여 데드 픽셀과 렌즈 쉐이딩 보상을 위한 레지스터를 갖고 있으며, 이 레지스터에 특정 값을 세팅함으로써 평균적인 데드 픽셀과 렌즈 쉐이딩 특성을 보상하였다. 그러나 이러한 방법은 미세한 렌즈 차이로 인해 영상에 큰 영향을 주는 모듈 특성과 센서마다 다르게 나타내는 데드 픽셀을 완벽하게 충족하지 못하는 단점이 있다.
본 발명의 목적은 카메라 모듈마다 각 모듈이 갖고 있는 데드 픽셀과 렌즈 쉐이딩 편차를 보상하기 위한 세팅값을 메모리에 저장하고, 카메라 모드 진입시 메모리로부터 세팅값을 호출하여 카메라 모듈의 영상 신호를 보상할 수 있는 방법 및 장치를 제공하고자 하는 것이다.
본 발명의 다른 목적은 오차를 적게 하여 제품의 신뢰성을 향상시킨 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 편차 보상 방법 및 시스템을 제공하고자 하는 것 이다.
상술한 목적을 달성하기 위하여 본 발명의 또 다른 측면에 따르면, 카메라 모듈, 튜닝 단말기 및 메모리와 결합하는 영상 신호 처리기에서 수행하는 카메라 모듈의 편차 보상 방법에 있어서, 상기 카메라 모듈로부터 세팅값 생성을 위한 제1 이미지 신호를 수신하는 제1 단계; 상기 제1 이미지 신호를 신호 처리하여 제1 이미지 데이터를 생성하는 제2 단계; 상기 제1 이미지 데이터를 상기 튜닝 단말기로 전송하는 제3 단계-여기서 상기 튜닝 단말기는 상기 제1 이미지 데이터를 화면에 출력하고, 상기 화면에 출력된 제1 이미지 데이터를 바탕으로 작업자로부터 적어도 하나의 키입력을 받아 상기 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 중 적어도 하나를 보상하기 위한 세팅값을 생성하고, 상기 세팅값을 상기 메모리로 전송하여 저장함-; 상기 카메라 모듈로부터 카메라 모듈 동작을 위한 제2 이미지 신호를 수신하는 제4 단계; 상기 제2 이미지 신호를 보상하기 위한 상기 세팅값을 상기 메모리로부터 추출하는 제5 단계; 및 상기 세팅값을 바탕으로 상기 제2 이미지 신호를 보상하는 신호 처리를 수행하는 제6 단계를 포함하는 카메라 모듈의 편차 보상 방법을 제공할 수 있다.
바람직한 실시예에서, 상기 제1 단계 내지 상기 제3 단계는 디버깅 모드에서 수행되는 절차이며, 상기 제4 단계 내지 상기 제6 단계는 오퍼레이션 모드에서 수행되는 절차인 것을 특징으로 한다. 또한 상기 데드 픽셀을 위한 세팅값은 데드 픽 셀의 위치를 나타내는 파라미터 및 상기 데드 픽셀이 표현해야 하는 밝기 값을 위한 파라미터를 포함하는 것을 특징으로 한다. 또한 상기 렌즈 쉐이딩을 위한 세팅값은 보정 위치를 나타내는 파라미터, 보상할 채널을 구별하는 파라미터 및 보정을 위해 곱해줘야 할 보정 값을 포함하는 것을 특징으로 한다.
본 발명의 다른 측면에 따르면, 이미지 신호를 획득하여 영상 신호 처리기로 전송하는 카메라 모듈; 상기 이미지 신호를 신호 처리하여 이미지 데이터를 생성하며, 상기 생성한 이미지 데이터를 튜닝 단말기로 전송하는 영상 신호 처리기; 상기 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 중 적어도 하나를 보상하기 위한 세팅값을 생성하며, 상기 세팅값을 메모리로 전송하는 튜닝 단말기; 및 상기 튜닝 단말기로부터의 세팅값을 저장하며, 상기 카메라 모듈 및 상기 영상 신호 처리기가 카메라 동작시 상기 세팅값을 상기 영상 신호 처리기로 전송하는 메모리를 포함하는 카메라 모듈의 편차 보상 장치를 제공할 수 있다.
이하 본 발명의 바람직한 실시예에 따른 카메라 모듈의 편차를 보상하는 방법 및 시스템에 대하여 도면을 참조하여 상세히 설명하기로 한다.
도 3은 본 발명의 바람직한 실시예에 따른 카메라 모듈의 편차 보상 시스템의 구조를 나타내는 도면이다.
도 3을 참조하면, 본 발명의 바람직한 실시예에 따른 카메라 모듈의 편차 보상 시스템은 카메라 모듈(301), 영상 신호 처리기(303), 튜닝 단말기(305) 및 메모 리(307)를 포함한다.
카메라 모듈(301)은 빛을 받아들이는 렌즈(lens)와 빛을 전기 신호로 바꾸어 주는 이미지 센서(Image sensor)를 포함한다. 전술한 바와 같이 이때 양산되는 각 카메라 모듈(301)에 장착된 렌즈는 각 카메라 모듈(301)마다 그 중심축이 조금씩 어긋나 있어 렌즈 쉐이딩 현상이 발생하거나 각 이미지 센서마다 특정 픽셀의 색을 제대로 표현하지 못하는 데드 픽셀을 포함하고 있다.
영상 신호 처리기(ISP; Image Signal Processor, 303)는 상기 카메라 모듈(301)에서 획득한 아날로그 영상 신호를 디지털 데이터로 변환한 후, 영상 처리 과정을 거쳐 화면상에 디스플레이하는 장치이다. 영상 신호 처리기(303)에는 영상 신호 처리 프로그램이 탑재되어 있다. 상기 영상 신호 처리 프로그램에 의하여 영상 신호 처리기(301)는 후술할 디버깅 모드에서 초기 세팅값을 참조하여 영상 신호를 처리하여 튜닝 단말기(305)에 디스플레이하고 적당한 세팅값을 찾아 메모리(307)에 저장하는 기능을 수행한다. 또한 영상 신호 처리기(303)는 오퍼레이션 모드에서 즉, 사용자가 촬영을 위하여 카메라 모듈(301)을 동작시킬 때, 상기 메모리(307)에 저장된 세팅값을 호출하여 데드 픽셀 및 렌즈 쉐이딩 편차를 보상하는 기능을 수행한다.
튜닝 단말기(305)는 영상 신호 처리기(303)를 거쳐 화면상에 디스플레이된 프리뷰 영상을 보면서 데드 픽셀과 렌즈 쉐이딩 편차를 검출하고, 이것을 보상하기 위한 세팅값을 찾는 기능을 하는 장치이다. 튜닝 단말기(305)에는 이러한 데드 픽셀이 발생한 위치를 검출하여 이를 특정 주소에 저장할 수 있고 렌즈의 오차나 쉐 이딩의 정도 등을 조금씩 바꿔 가면서 정확한 세팅값을 찾을 수 있는 프로그램이 탑재되어 있을 수 있다. 또한 이러한 과정을 통하여 획득한 세팅값을 영상 신호 처리기(303)와 결합하는 메모리(307)에 저장할 수 있다.
메모리(307)는 상기 튜닝 단말기가 데드 픽셀 및 렌즈 쉐이딩 편차를 보상하기 위하여 찾은 세팅값을 저장한다. 메모리(307)는 카메라 모듈(301)에 장착될 수 있으며 후에 설명할 오퍼레이션 모드에서 영상 신호 처리기로 세팅값을 제공하는 기능을 수행한다.
도 4는 본 발명의 바람직한 일 실시예에 따른 디버깅 모드에서 세팅값 설정 과정을 나타낸 순서도이다.
도 4를 참조하면, 본 발명의 바람직한 실시예에 따른 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 편차 보상 방법은 디버깅 모드(Debugging mode)와 오퍼레이션 모드(Operation mode)로 나누어 수행되는데 본 도는 디버깅 모드에 관한 것이다. 디버깅 모드는 작업자에 의하여 해당 카메라 모듈의 보상을 위한 세팅값을 결정하고 이를 메모리에 저장하는 과정을 의미하며, 오퍼레이션 모드는 사용자가 카메라를 동작시키는 경우 영상 신호 처리기가 상기 디버깅 모드를 통해 메모리에 저장된 세팅값을 호출하여 카메라 모듈을 통해 입력되는 이미지 신호를 보상하는 과정을 의미한다.
먼저 디버깅 모드에서는 작업자는 카메라 모듈의 특성을 보상하기 위하여 이미지를 프리뷰한다(단계 401). 카메라 모듈을 통하여 획득된 이미지 신호는 영상 신호 처리기에 의하여 처리된 후 튜닝 단말기에 디스플레이된다. 상기 영상 신호 처리기는 상술한 바와 같이 이미지 신호 처리 프로그램을 포함한다. 상기 이미지 신호 처리 프로그램은 초기화된 세팅값을 참조하여 카메라 모듈을 통하여 획득한 이미지 신호를 처리하여 화면에 디스플레이될 수 있는 이미지 데이터를 생성한다.
작업자는 튜닝 단말기에 디스플레이된 영상을 보면서 데드 픽셀의 위치 및 렌즈 쉐이딩 편차를 검출한다(단계 403). 이때 데드 픽셀은 센서 집광 소자의 불량으로 인해 정상적인 영상 데이터를 표현하지 못하는 픽셀을 의미한다. 데드 픽셀은 주변 픽셀보다 지나치게 밝은 화이트 데드 픽셀과 지나치게 어두운 블랙 데드 픽셀로 구분된다. 이러한 데드 픽셀은 전체 영상의 픽셀 값들을 스캔하면서 주변 픽셀의 밝기 값 차이가 특정 임계값을 넘어서는 것을 찾는 방식에 의하여 검출될 수 있다. 한편 렌즈 쉐이딩 편차는 그레이(Grey) 성분 촬영 후 렌즈 가로축의 R, G, B 성분 분포를 분석함으로써 검출될 수 있다.
작업자는 튜닝 단말기에 탑재된 튜닝 프로그램을 통해 데드 픽셀 및 렌즈 쉐이딩 오차를 보상할 수 있는 세팅값을 획득한다(단계 405). 튜닝 단말기는 데드 픽셀이 발생한 위치를 검출하여 이를 특정 주소에 저장할 수 있고 렌즈의 오차나 쉐이딩의 정도 등을 조금씩 바꿔 가면서 정확한 세팅값을 찾을 수 있는 프로그램이 탑재되어 있을 수 있으며, 이를 통하여 작업자는 용이하게 데드 픽셀 및 렌즈 쉐이딩 오차를 보상할 수 있는 세팅값을 획득할 수 있다. 이때 세팅값은 데드 픽셀을 보상하기 위한 세팅값 및 렌즈 쉐이딩을 보상하기 위한 세팅값 중 적어도 어느 하나를 포함한다. 데드 픽셀을 보상하기 위한 세팅값은 데드 픽셀의 위치를 나타내는 파라미터와 그 데드 픽셀이 표현해야 하는 밝기 값을 위한 파라미터를 포함한다. 또한 렌즈 쉐이딩을 보상하기 위한 세팅값은 보정 위치를 나타내는 파라미터, 보상할 채널을 구별하는 파라미터 및 보정을 위해 곱해줘야 할 보정 값을 나타내는 파라미터를 포함한다. 이러한 세팅값의 결정은 주변 픽셀과의 밝기 차이로 인하여 현재 데드 픽셀로 인식되고 있는 픽셀의 위치에 기반을 두어 수행된다. 즉 데드 픽셀이 주변의 밝기 평균값을 가질 수 있도록 세팅값이 결정된다. 한편 렌즈 쉐이딩 오차는 렌즈의 가로축을 기반으로 R, G, B 분포가 서로 똑같은 형태를 갖도록 세팅값이 결정된다. 이때 특정 분포가 틀어져 있다면 다른 채널과 맞춰주기 위해 얼마만큼의 이득이 곱해져야 하는 가를 찾아내어 이를 세팅값으로 정한다.
이후, 상기 세팅값을 바탕으로 영상 신호 처리기에 의하여 각 카메라 모듈에 따른 특성을 보상한 이미지는 튜닝 단말기에 재프리뷰된다(단계 407).
작업자는 재프리뷰된 이미지를 통하여 카메라 모듈을 통한 이미지 보상이 최적으로 수행되었는지를 판단한다(단계 409). 이미지 보상을 위한 세팅값이 최적으로 판단되지 아니하면 단계 403내지 단계 407을 반복 수행하여 최적의 보상이 되도록 세팅값을 결정한다. 이때 상기 단계 407 및 단계 409는 필요시에 최적의 보상이 될 수 있도록 세팅값을 결정하기 위한 절차에 해당된다.
세팅값이 최적으로 판단되면 결정된 세팅값은 튜닝 단말기 및 영상 신호 처리기와 결합하는 메모리에 저장된다(단계 411). 보상을 위한 세팅값이 메모리에 저장되면 디버깅 모드는 종료된다.
도 5는 본 발명의 바람직한 일 실시예에 따른 오퍼레이션 모드에서 이미지 편차 보상 과정을 나타낸 순서도이다.
도 5를 참조하면, 본 발명의 바람직한 실시예에 따른 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 편차 보상 방법은 디버깅 모드(Debugging mode)와 오퍼레이션 모드(Operation mode)로 나누어 수행되는데 본 도는 오퍼레이션 모드에 관한 것이다. 디버깅 모드를 통해 세팅값이 메모리에 저장된 카메라 모듈 및 영상 신호 처리기는 핸드폰 또는 디지털 카메라 등의 이미지 촬영이 가능한 제품의 내부 회로 기판에 탑재되어 카메라 기능을 수행할 수 있다. 이때 카메라 기능을 수행하는 과정이 오퍼레이션 모드에 해당된다.
상기 카메라 모듈 및 영상 신호 처리기가 탑재된 핸드폰 또는 디지털 카메라 등의 영상 기기의 사용자가 촬영을 위하여 카메라 모듈을 동작시키는 경우, 본 발명에 따른 카메라 모듈의 편차 보상 장치는 오퍼레이션 모드로 진입한다(단계 501).
카메라 모듈을 통해 회득한 이미지의 신호 처리를 담당하는 영상 신호 처리기는 디버깅 모드에서 저장된 세팅값을 메모리로부터 호출한다(단계 503).
영상 신호 처리기는 호출한 상기 세팅값을 바탕으로 카메라 모듈에서 입력되는 이미지 신호를 보상한다(단계 505). 즉 영상 신호 처리기는 입력되는 이미지 신호에 데드 픽셀이나 렌즈 쉐이딩 편차가 존재하는 경우 해당 세팅값을 이용하여 이미지 신호를 보상할 수 있다.
도 6은 본 발명의 바람직한 일 실시예에 따른 세팅값을 설정을 위한 튜닝 프로그램의 예시도이다.
도 6을 참조하면, 튜닝 프로그램(600)은 튜닝 단말기 상에 윈도우 프로그램의 형태로 디스플레이될 수 있으며, 프로그램 상에서 각 파라미터 값을 변경시킴으로써 카메라 모듈을 통하여 획득한 이미지를 조정할 수 있다. 튜닝 프로그램(600)은 디버깅 모드에서 데드 픽셀 및 렌즈 쉐이딩 편차를 보상하기 위하여 보상 값을 튜닝하고 튜닝 결과 데이터를 메모리에 저장할 수 있도록 프로그램되어 있다.
작업자는 상기 튜닝 프로그램(600)을 통해 전체 영상을 스캔하면서 주변의 픽셀보다 임계치 이하나 임계치 이상의 값을 가지는 픽셀을 데드 픽셀로 검출할 수 있으며, 주변 픽셀의 평균 밝기 값을 통해 데드 픽셀의 세팅값을 결정할 수 있다. 또한 작업자는 상기 튜닝 프로그램(600) 통해 영상의 그레이 성분을 촬영한 후 렌즈 가로축의 R, G, B 성분 분포를 분석하여 렌즈 쉐이딩 편차를 찾아내어 세팅값을 결정할 수 있다. 이렇게 결정된 세팅값은 메모리에 저장된 후, 오퍼레이션 모드에서 영상 신호 처리기가 촬영시 입력되는 이미지 신호를 보상하는데 이용될 수 있다.
본 발명에 의하면 튜닝에 의한 세팅값을 기록한 후 이를 프로그램 상에 반영하고 프로그램을 컴파일하여 다운로드 하는 단계를 수행할 필요가 없어 데드 픽셀 및 렌즈 쉐이딩 편차를 보상하는데 걸리는 시간 및 노력을 줄일 수 있는 효과가 있 다.
또한 본 발명에 의하면 각 카메라 모듈에 따른 특성을 개별적으로 보상할 수 있는 환경을 마련함으로써 카메라 모듈의 생산 수율 및 제품의 신뢰성을 향상시킬 수 있다.

Claims (5)

  1. 카메라 모듈, 튜닝 단말기 및 메모리와 결합하는 영상 신호 처리기에서 수행하는 카메라 모듈의 편차 보상 방법에 있어서,
    상기 카메라 모듈로부터 세팅값 생성을 위한 제1 이미지 신호를 수신하는 제1 단계;
    상기 제1 이미지 신호를 신호 처리하여 제1 이미지 데이터를 생성하는 제2 단계;
    상기 제1 이미지 데이터를 상기 튜닝 단말기로 전송하는 제3 단계-여기서 상기 튜닝 단말기는 상기 제1 이미지 데이터를 화면에 출력하고, 상기 화면에 출력된 제1 이미지 데이터를 바탕으로 작업자로부터 적어도 하나의 키입력을 받아 상기 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 중 적어도 하나를 보상하기 위한 세팅값을 생성하고, 상기 세팅값을 상기 메모리로 전송하여 저장함-;
    상기 카메라 모듈로부터 카메라 모듈 동작을 위한 제2 이미지 신호를 수신하는 제4 단계;
    상기 제2 이미지 신호를 보상하기 위한 상기 세팅값을 상기 메모리로부터 추출하는 제5 단계; 및
    상기 세팅값을 바탕으로 상기 제2 이미지 신호를 보상하는 신호 처리를 수행하는 제6 단계
    를 포함하는 카메라 모듈의 편차 보상 방법.
  2. 제1항에 있어서,
    상기 제1 단계 내지 상기 제3 단계는 디버깅 모드에서 수행되는 절차이며, 상기 제4 단계 내지 상기 제6 단계는 오퍼레이션 모드에서 수행되는 절차인 것
    을 특징으로 하는 카메라 모듈의 편차 보상 방법.
  3. 제1항에 있어서,
    상기 데드 픽셀을 위한 세팅값은 데드 픽셀의 위치를 나타내는 파라미터 및 상기 데드 픽셀이 표현해야 하는 밝기 값을 위한 파라미터를 포함하는 것
    을 특징으로 하는 카메라 모듈의 편차 보상 방법.
  4. 제1항에 있어서,
    상기 렌즈 쉐이딩을 위한 세팅값은 보정 위치를 나타내는 파라미터, 보상할 채널을 구별하는 파라미터 및 보정을 위해 곱해줘야 할 보정 값을 나타내는 파라미터를 포함하는 것
    을 특징으로 하는 카메라 모듈의 편차 보상 방법.
  5. 이미지 신호를 획득하여 영상 신호 처리기로 전송하는 카메라 모듈;
    상기 이미지 신호를 신호 처리하여 이미지 데이터를 생성하며, 상기 생성한 이미지 데이터를 튜닝 단말기로 전송하는 영상 신호 처리기;
    상기 카메라 모듈의 데드 픽셀 및 렌즈 쉐이딩 중 적어도 하나를 보상하기 위한 세팅값을 생성하며, 상기 세팅값을 메모리로 전송하는 튜닝 단말기; 및
    상기 튜닝 단말기로부터의 세팅값을 저장하며, 상기 카메라 모듈 및 상기 영상 신호 처리기가 카메라 동작시 상기 세팅값을 상기 영상 신호 처리기로 전송하는 메모리
    를 포함하는 카메라 모듈의 편차 보상 장치.
KR1020060010334A 2005-04-27 2006-02-03 카메라 모듈의 편차 보상 방법 및 장치 KR100765257B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20050035131 2005-04-27
KR1020050035131 2005-04-27

Publications (2)

Publication Number Publication Date
KR20060113375A KR20060113375A (ko) 2006-11-02
KR100765257B1 true KR100765257B1 (ko) 2007-10-09

Family

ID=37651723

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060010334A KR100765257B1 (ko) 2005-04-27 2006-02-03 카메라 모듈의 편차 보상 방법 및 장치

Country Status (1)

Country Link
KR (1) KR100765257B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100711601B1 (ko) * 2005-09-22 2007-04-27 (주)씽크칩 디지털 카메라의 쉐이딩보상방법
KR101391024B1 (ko) * 2007-12-28 2014-04-30 삼성전자주식회사 카메라 설정 관리 방법 및 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001054127A (ja) 1999-08-05 2001-02-23 Fuji Photo Film Co Ltd 固体撮像装置および画素欠陥補償方法
KR20030005262A (ko) * 2001-02-07 2003-01-17 소니 가부시끼 가이샤 화면 보정 방법 및 촬상 장치
JP2003051990A (ja) 2001-05-31 2003-02-21 Olympus Optical Co Ltd 画素欠陥補正装置および画素欠陥補正方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001054127A (ja) 1999-08-05 2001-02-23 Fuji Photo Film Co Ltd 固体撮像装置および画素欠陥補償方法
KR20030005262A (ko) * 2001-02-07 2003-01-17 소니 가부시끼 가이샤 화면 보정 방법 및 촬상 장치
JP2003051990A (ja) 2001-05-31 2003-02-21 Olympus Optical Co Ltd 画素欠陥補正装置および画素欠陥補正方法

Also Published As

Publication number Publication date
KR20060113375A (ko) 2006-11-02

Similar Documents

Publication Publication Date Title
US7590305B2 (en) Digital camera with built-in lens calibration table
US8106976B2 (en) Peripheral light amount correction apparatus, peripheral light amount correction method, electronic information device, control program and readable recording medium
CN102823236B (zh) 成像装置以及图像处理方法
US7657116B2 (en) Correction method of defective pixel in image pickup device and image processing apparatus using the correction method
JP5335327B2 (ja) 欠陥検出補正装置及び欠陥検出補正方法
US20080117318A1 (en) Image processing apparatus, image processing method, and program
CN102870404B (zh) 摄像设备及其暗电流校正方法
EP1580988A2 (en) Apparatus for digital video processing and method thereof
US8648941B2 (en) Image processor, method of controlling the same, and storage medium
US9544516B2 (en) Method and apparatus for sensor characterization
WO2007023817A1 (ja) 画像処理システムおよび画像処理プログラム
CN101494797A (zh) 摄像装置及摄像方法
US8711254B2 (en) Image processing apparatus and method having defective pixel detection and correction ability
CN111901520B (zh) 一种基于图像处理的场景自适应系统、方法及终端
JP4591046B2 (ja) 欠陥検出補正回路及び欠陥検出補正方法
US8625007B2 (en) Image pickup apparatus, image combination method, and computer program
US10863123B2 (en) Defect pixel correction apparatus, defect pixel correction method, non-transitory computer-readable medium storing computer program
KR20070085795A (ko) 화상 보정 장치 및 화상 보정 방법
US20050030412A1 (en) Image correction processing method and image capture system using the same
US20100245590A1 (en) Camera sensor system self-calibration
KR100765257B1 (ko) 카메라 모듈의 편차 보상 방법 및 장치
KR20100099564A (ko) 디지털 영상 처리기에서 먼지 보정 장치 및 방법
CN111901521B (zh) 一种基于图像处理的场景自适应系统、方法及终端
JP4670654B2 (ja) 撮像装置および画像処理方法
JP2007174199A (ja) 撮像装置、画像処理方法、プログラム、記録媒体

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120928

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20130926

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140929

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20151001

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20181001

Year of fee payment: 12