KR20110062391A - 촬상장치 및 이를 이용한 스미어 제거 방법 - Google Patents

촬상장치 및 이를 이용한 스미어 제거 방법 Download PDF

Info

Publication number
KR20110062391A
KR20110062391A KR1020090119105A KR20090119105A KR20110062391A KR 20110062391 A KR20110062391 A KR 20110062391A KR 1020090119105 A KR1020090119105 A KR 1020090119105A KR 20090119105 A KR20090119105 A KR 20090119105A KR 20110062391 A KR20110062391 A KR 20110062391A
Authority
KR
South Korea
Prior art keywords
image
smear
exposure time
electronic shutter
imaging device
Prior art date
Application number
KR1020090119105A
Other languages
English (en)
Other versions
KR101595265B1 (ko
Inventor
박병찬
손상륜
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090119105A priority Critical patent/KR101595265B1/ko
Priority to US12/950,007 priority patent/US8456551B2/en
Publication of KR20110062391A publication Critical patent/KR20110062391A/ko
Application granted granted Critical
Publication of KR101595265B1 publication Critical patent/KR101595265B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/81Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/62Detection or reduction of noise due to excess charges produced by the exposure, e.g. smear, blooming, ghost image, crosstalk or leakage between pixels
    • H04N25/625Detection or reduction of noise due to excess charges produced by the exposure, e.g. smear, blooming, ghost image, crosstalk or leakage between pixels for the control of smear
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B7/00Control of exposure by setting shutters, diaphragms or filters, separately or conjointly
    • G03B7/08Control effected solely on the basis of the response, to the intensity of the light received by the camera, of a built-in light-sensitive device
    • G03B7/081Analogue circuits
    • G03B7/083Analogue circuits for control of exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/75Circuitry for compensating brightness variation in the scene by influencing optical camera components

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 촬상장치 및 이를 이용한 스미어 제거 방법을 개시한다.
본 발명의 촬상장치 및 이를 이용한 스미어 제거 방법은, 소정 주기로 촬상소자의 전자셔터 노광 시간을 조절하여 스미어가 포함된 원본 영상에서 스미어를 제거함으로써 고품질의 영상을 제공할 수 있다.

Description

촬상장치 및 이를 이용한 스미어 제거 방법{Photographing apparatus and Smear correction method thereof}
본 발명은 촬상장치 및 이를 이용한 스미어 제거 방법에 관한 것으로서, 더 상세하게는, 일정한 주기마다 노광 시간 제어에 의해 스미어를 제거할 수 있는 촬상장치 및 이를 이용한 스미어 제거 방법에 관한 것이다.
디지털 카메라나 폰카메라 등과 같이 촬상소자를 구비하는 촬영 장치들은 촬영의 대상이 되는 피사체의 모습을 사용자에게 실시간으로 보여주는 라이브뷰(live view) 또는 프리뷰(pre-view) 기능을 갖는다. 최근 디지털 카메라 등에 널리 구현되고 있는 라이브뷰 기능은 별도의 광학식 뷰파인더를 사용하지 않고 촬영 기능을 수행하도록 디지털 카메라에 장착된 촬상소자를 이용하여 촬영 전의 화면을 실시간으로 사용자에게 제공하는 방식이다. 이로 인해 사용자는 촬영될 영상에 근접한 실제 라이브뷰 화면을 미리 확인할 수 있다.
한편 도 1에 도시된 바와 같이 디지털 카메라에서 밝은 광원을 촬영할 때 세로방향 또는 가로방향으로 밝은 줄이 나타나는 스미어(smear)를 볼 수 있다. 스미어는 CCD 카메라에서 태양이나 라이트 등이 배경에 포함된 고휘도 영상의 상하에 띠모양으로 밝게 나타나는 현상으로, 노출시간이 짧아지는 고속셔터에서 많이 발생하며 고휘도의 피사체를 촬영할 때 흔히 발생한다. 스미어가 발생하면 영상이 스미어의 영향으로 정상적인 영상이 보여지지 않고 영상의 품질이 저하되는 문제점이 있다.
본 발명은 전술된 문제점을 해결하기 위한 것으로, 영상 내에서 스미어 현상을 제거하여, 고품질의 라이브뷰 영상 및 동영상을 제공하는 것을 목적으로 한다.
본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
본 발명의 스미어 제거 방법 및 이를 이용한 촬상장치는, 소정 주기로 촬상소자의 전자셔터 노광 시간을 조절하여 스미어 영상을 획득하고, 스미어가 포함된 원본 영상에서 스미어 영상을 차감함으로써 스미어가 제거된 깨끗한 영상을 제공한다.
본 발명의 촬상장치는 미리 정해진 주기마다 피사체에 대하여 긴 전자셔터 노광 시간을 설정하여 촬상한 제1영상과 짧은 전자셔터 노광 시간을 설정하여 촬상한 제2영상을 획득하는 촬상소자; 및 상기 제1영상 및 제2영상의 대응하는 픽셀 값을 차감하여 스미어가 제거된 제3영상을 획득하는 라이브뷰생성부;를 포함할 수 있다.
본 발명의 촬상장치의 스미어 제거 방법은, 피사체에 대하여 긴 전자셔터 노광 시간을 설정하여 촬상한 제1영상을 획득하는 단계; 상기 피사체에 대하여 짧은 전자셔터 노광 시간을 설정하여 촬상한 제2영상을 획득하는 단계; 및 미리 설정된 주기마다 획득된 상기 제1영상 및 제2영상의 대응하는 픽셀 값을 차감하여 스미어가 제거된 제3영상을 획득하는 단계;를 포함할 수 있다.
본 발명은 촬상소자의 전자셔터 노광 시간을 이용하여 스미어 정보를 획득하고, 스미어가 발생한 원본 영상에서 스미어 정보를 제거함으로써 고품질의 영상을 획득할 수 있다.
또한 본 발명은 기존의 DSP에 스미어 제거를 위한 복잡한 기능을 추가하지 않고 CCD를 촬상소자로 사용하는 제품에 활용이 가능하다. 따라서 소비자 만족도 및 비용절감 효과를 얻을 수 있다.
이하 본 발명의 바람직한 실시예가 첨부된 도면들을 참조하여 설명될 것이다. 도면들 중 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 참조번호들 및 부호들로 나타내고 있음에 유의해야 한다. 하기에서 본 발명을 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.
도 2는 본 발명의 일 실시예에 따른 촬상소자의 구동 방식을 개략적으로 도시하는 도면이다.
도 2를 참조하면, 본 발명의 촬상소자는 수직동기신호와 전자셔터신호로 노 출(노광) 및 전송을 제어한다. 수직동기신호가 입력되면 수직동기신호에 동기화된 전자셔터신호가 입력되고, 전자셔터신호가 입력되면 전자셔터가 동작한다. 전자셔터 동작이 종료된 후부터 다음 수직동기신호까지의 구간에서는 전자셔터 노광이 이루어진다. 전자셔터 노광이 종료되면 입사된 광신호가 변환된 영상신호가 전송된다. 이하에서는 제1수직동기신호와 제2수직동기신호 간을 수직동기 구간(VD)이라 하고, 각 수직동기 구간에서 전자셔터가 동작하는 구간을 전자셔터 구간(SUB)이라 한다. 각 수직동기 구간에서 전자셔터 구간 이후부터 수직동기 구간이 끝나는 시간까지 노광이 이루어진다. 노광이 종료되면 데이터가 전송된다.
본 발명의 촬상소자는 주기적으로 2회의 수직동기 구간마다 노광 제어가 반복되고 있다. 2회의 수직동기 구간 중 제1수직동기 구간에서는 소정의 노광 시간 동안 영상을 획득하고, 제2수직동기 구간에서는 노광이 없거나 노광 시간을 아주 짧게 하여 영상을 획득한다. 도 2에서는 제2수직동기 구간에서 노광이 없는 예를 도시하고 있다. 제1수직동기 구간에서의 노광 시간은 영상 정보를 획득할 수 있을 정도의 충분한 시간으로 촬상 장치에 미리 기본값으로 설정되거나 사용자에 의해 설정될 수 있다. 제2수직동기 구간에서의 노광 시간은 스미어 정보만을 획득할 수 있도록 0 또는 최소값으로 촬상 장치에 미리 기본값으로 자동 설정될 수 있다. 노광이 없거나 노광 시간을 짧게 하면 피사체의 영상 정보는 무시할 수 있을 정도로 작으나 스미어 정보는 매우 크기 때문에 스미어 정보만을 포함하는 스미어 영상으로 간주할 수 있다. 상기 실시예에서는 제1수직동기 구간의 노광 시간보다 제2수직동기 구간의 노광 시간을 더 짧게 설정하고 있으나, 역으로, 제1수직동기 구간에서 노광 시간을 0 또는 최소값으로 하여 스미어 정보를 획득하고, 제2수직동기 구간에서 충분히 긴 노광 시간을 주어 스미어 정보를 포함하는 영상 정보를 획득할 수도 있다.
도 3은 본 발명의 도 2의 촬상소자 구동방식에 따라 라이브뷰 영상을 생성하는 개념을 도시한 도면이다.
도 3을 참조하면, 영상(310)은 태양광원 근처에 수직으로 자주색의 밝은 띠 모양의 스미어(313)가 발생한 원본 영상이다. 영상(330)은 스미어(333) 외의 영역은 흑색(black)으로 나타나는 스미어 영상이다. 영상(350)은 원본 영상(310)에서 스미어가 제거된 라이브뷰 영상이다. 영상(310)은 제1수직동기 구간에서 소정 시간의 노광에 의해 획득되고, 스미어 정보 및 영상 정보를 포함한다. 영상(330)은 제2수직동기 구간에서 짧은 노광에 의해 획득되고, 스미어 정보를 포함한다. 따라서 영상(310)의 픽셀값에서 영상(330)의 픽셀값을 차감하면 스미어 없는 영상(350)을 획득할 수 있다.
도 4는 본 발명의 스미어 제거를 위한 촬상장치를 설명하기 위한 블록도로서, 본 실시 예에서는 디지털 카메라를 예시한다. 또한, 도 4와 함께 설명할 도 5는 디지털 신호 처리부(470)를 부가 설명하기 위한 블록도이다. 본 발명의 촬상장치는 디지털 카메라에 한정되지 않으며, 정지영상 및 동영상을 비롯하여 디지털 영상 처리를 수행하는 핸드폰, 캠코더, 감시 카메라, 로봇, PDA(personal digital assistants), PMP(personal multimedia player) 등 다양한 디지털 이미지 처리 장치를 포함한다.
도 4를 참조하면, 본 발명을 구현할 수 있는 디지털 촬영 장치(100)는 광학부(410), 광학 구동부(411), 촬상소자(415), 조작부(420), 프로그램 저장부(430), 버퍼부(440), 데이터 저장부(450), 표시부(460), 및 디지털 신호 처리부(DSP, 470)를 포함할 수 있다.
광학부(410)는 피사체로부터의 입력된 광학 신호를 촬상소자(415)로 제공한다. 광학부(410)는 초점 거리(focal length)에 따라 화각이 좁아지거나 또는 넓어지도록 제어하는 줌 렌즈 및 피사체의 초점을 맞추는 포커스 렌즈 등 적어도 하나의 렌즈를 포함할 수 있다. 또한, 상기 광학부(410)는 광량을 조절하는 조리개를 더 포함할 수 있다.
광학 구동부(411)는 렌즈의 위치, 조리개의 개폐 등을 조절한다. 렌즈의 위치를 이동시켜 초점을 맞출 수 있다. 또한, 조리개의 개폐를 조절하여 광량을 조절할 수 있다. 실시간으로 입력되는 영상 신호에 의해 자동으로 생성되는 제어 신호 또는 사용자의 조작에 의해 수동으로 입력되는 제어 신호에 따라 광학 구동부(411)가 광학부(410)를 제어할 수 있다.
상기 광학부(410)를 투과한 광학 신호는 촬상소자(415)의 수광면에 이르러 피사체의 상을 결상한다. 상기 촬상소자(415)는 광학 신호를 전기 신호로 변환하는 CCD(Charge Coupled Device)이다. 촬상소자(415)는 미리 정해진 주기마다 피사체에 대하여 긴 전자셔터 노광 시간을 설정하여 촬상한 영상과 짧은 전자셔터 노광 시간을 설정하여 촬상한 영상을 획득한다.
조작부(420)는 사용자 등의 외부로부터의 제어 신호를 입력할 수 있는 곳이 다. 상기 조작부(420)는 정해진 시간 동안 촬상 소자(415)를 빛에 노출하여 사진을 촬영하는 셔터-릴리즈 신호를 입력하는 셔터-릴리즈 버튼, 전원을 공급하기 위해 입력하는 전원 버튼, 입력에 따라 화각을 넓어지게 하거나 화각을 좁아지게 하는 광각-줌 버튼 및 망원-줌 버튼과, 문자 입력 또는 촬영 모드, 재생 모드 등의 모드 선택, 화이트 밸런스 설정 기능 선택, 노출 설정 기능 선택 등의 다양한 기능 버튼들이 있다. 조작부(420)는 상기와 같이 다양한 버튼의 형태를 가질 수도 있지만, 이에 한정되는 것은 아니며, 키보드, 터치 패드, 터치스크린, 원격 제어기 등과 같이 사용자가 입력할 수 있는 어떠한 형태로 구현되어도 무방하다.
또한, 상기 디지털 촬영 장치(400)는 상기 디지털 카메라를 구동하는 운영 시스템, 응용 시스템 등의 프로그램을 저장하는 프로그램 저장부(430), 연산 수행 중에 필요한 데이터 또는 결과 데이터들을 임시로 저장하는 버퍼 저장부(440), 영상 신호를 포함하는 이미지 파일을 비롯하여 상기 프로그램에 필요한 다양한 정보들을 저장하는 데이터 저장부(450)를 포함한다. 버퍼 저장부(440)는 촬상소자가 노광 시간을 달리하여 획득한 영상을 하나의 버퍼에서 저장 공간을 구분하여 저장할 수도 있고, 독립적으로 둘 이상의 버퍼를 이용하여 저장할 수 있다. 본 실시예에서는 버퍼 저장부(440)가 두 개의 제1버퍼(441) 및 제2버퍼(445)를 구비하는 것을 도시한다.
아울러, 상기 디지털 촬영 장치(400)는 이의 동작 상태 또는 상기 디지털 촬영 장치(400)에서 촬영한 이미지 정보를 표시하도록 표시부(460)를 포함한다. 표시부(460)는 시각적인 정보 및/또는 청각적인 정보를 사용자에게 제공할 수 있으며, 표시부(460)는 액정 디스플레이 패널(LCD), 유기 발광 디스플레이 패널(OLED), 전기 영동 디스플레이 패널(EPD) 등으로 이루어질 수 있다. 표시부(460)는 사용자의 터치를 통하여 입력을 받을 수 있도록 터치스크린 형태로 구비되어, 조작부(420)와 더불어 사용자 입력 인터페이스로서 동작할 수 있다. 표시부(460)는 사용자에게 촬영 전의 라이브뷰 또는 동영상을 실시간 제공한다. 상기 디지털 촬영 장치(400)가 라이브뷰 기능을 수행하는 동안에는 촬영 대상의 화상을 실시간으로 처리해서 표시부(460)에 표시하여야 하므로, 촬상부(415)는 미리 정해진 주기마다 촬영 대상을 촬상하여 영상 데이터를 생성하는 촬상 동작을 반복적으로 수행한다. 일 예로서 표시부(460)는 VD 주기로 영상 데이터를 생성하고 2VD마다 스미어가 제거된 라이브뷰 영상을 갱신하여 표시한다.
그리고 상기 디지털 촬영 장치(400)는 입력되는 영상 신호를 처리하고, 이에 따라 또는 외부 입력 신호에 따라 각 구성부들을 제어하는 디지털 신호 처리부(470)를 포함한다.
디지털 신호 처리부(470)는 촬상소자(415), 광학 구동부(411), 표시부(460) 등과 전기적으로 연결되며, 각각의 구성 요소의 작동을 제어하기 위해 이들 구성 요소와 제어 신호를 주고받거나, 데이터를 처리하는 등의 기능을 수행한다. 디지털 신호 처리부(470)는 마이크로 칩이나, 마이크로 칩을 구비하는 회로 보드로 구현될 수 있으며, 디지털 신호 처리부(470)에 포함되는 각 구성 요소들은 디지털 신호 처리부(470)에 내장되는 소프트웨어나 회로들에 의해 구현될 수 있다.
디지털 신호 처리부(470)는 영상 신호 처리를 수행하며, 처리 결과에 따라 각 구성부를 제어할 수 있다. 또한 조작부(420)를 통해 입력된 사용자의 제어 신호에 따라 각 구성부를 제어할 수 있다. 또한, 디지털 신호 처리부(470)는 라이브뷰 영상을 표시하도록 제어한다. 상기 디지털 신호 처리부(470)의 제어 동작에 관하여 도 5를 참조하여 상세히 설명한다.
도 5를 참조하면, DSP(470)는 영상신호 처리부(471), 촬상소자 제어부(473) 및 라이브뷰 생성부(477)를 포함하고, 라이브뷰 생성부(477)는 연산부(475)를 포함한다.
영상 신호 처리부(471)는 촬상소자(415)로부터 입력된 전기적 신호를 영상 처리를 행할 수 있는 영상 신호로 변환한다. 영상 신호 처리부(471)는 영상 신호를 사람의 시각에 맞게 변환하도록 감마 컬렉션(Gamma Correction), 색필터 배열보간(color filter array interpolation), 색 매트릭스(color matrix), 색보정(color correction), 색 향상(color enhancement) 등의 영상 신호 처리를 수행한다. 또한, 영상 신호 처리부(471)는 그 기능이 설정된 경우 오토화이트밸런스(Auto White Balance)나 오토익스포저(Auto Exposure) 알고리즘을 수행할 수 있다. 또한, 영상 데이터를 스케일러를 이용하여 그 크기를 조절하며, 압축하여 소정 형식의 이미지 파일을 형성한다. 반대로 이미지 파일의 압축을 해제하기도 한다. 영상의 압축 형식은 가역 형식 또는 비 가역 형식이어도 된다. 적절한 형식의 예로서, JPEG(Joint Photographic Experts Group)형식이나 JPEG 2000 형식 등으로 변환도 가능하다. 상기 영상 신호 처리부(471)는 사진 촬영 전 라이브-뷰 모드에서 실시간으로 입력되는 영상 신호와 셔터-릴리즈 신호에 의해 입력된 영상 신호에 대해 상기와 같은 영 상 신호 처리들을 행할 수 있다. 이때, 상기 영상 신호들 각각에 대해 다른 영상 신호 처리가 행해질 수 있다. 영상 신호 처리부(471)는 라이브뷰를 생성하기 전에 전자셔터 노광 시간을 제어하여 획득된 각 영상을 버퍼 저장부(441)에 임시 저장한다. 긴 전자셔터 노광 시간에 의해 획득된 영상은 제1버퍼(441)에 저장되고, 짧은 전자셔터 노광 시간에 의해 획득된 영상은 제2퍼버(445)에 저장될 수 있으며, 그 역도 가능하다.
촬상소자 제어부(473)는 실시간으로 입력되는 영상 신호에 의해 자동으로 생성되는 제어 신호 또는 사용자의 조작에 의해 수동으로 입력되는 제어 신호에 따라 촬상 소자(415)를 제어할 수 있다. 또한 촬상소자 제어부(473)는 촬상소자(415)의 전자셔터 노광 시간을 제어한다. 촬상소자 제어부(473)는 2VD 간격으로 첫 번째 VD에서는 긴 노광 시간을 설정하고, 두 번째 VD에서는 짧은 노광 시간을 설정한다. 또한 촬상소자 제어부(473)는 역으로 2VD 간격으로 첫 번째 VD에서는 짧은 노광 시간을 설정하고, 두 번째 VD에서는 긴 노광 시간을 설정할 수도 있다. 고휘도의 피사체의 경우, 전자셔터 노광 시간이 0 또는 0에 가깝게 되면 영상 정보가 수집되는 시간이 부족하여 영상 정보는 거의 없고 스미어 정보만이 얻어진다. 따라서 스미어 정보를 얻기 위한 짧은 노광 시간은 0(무노출) 또는 디지털 촬영 장치(400)의 최소값으로 설정하는 것이 바람직하다. 촬상소자 제어부(473)의 노광 시간 제어 신호에 따라 촬상소자(415)가 촬상 동작을 수행하여 획득된 영상 신호는 영상 신호 처리부(471)에 의해 영상 처리된 후 버퍼 저장부(440)로 입력된다. 촬상소자 제어부(473)는 디지털 신호 처리부(470)의
라이브뷰 생성부(477)는 미리 정해진 주기마다 연산부(475)를 거쳐 획득된 스미어가 제거된 영상을 표시부(460)에 제공한다. 연산부(475)는 긴 노광 시간을 설정하여 촬상한 스미어 정보와 영상 정보를 모두 포함하는 원본 영상(스미어 포함 영상)과 짧은 노광 시간을 설정하여 촬상한 스미어 정보만을 포함하는 영상(스미어 영상)의 각 RGB 픽셀 값을 차감한다. 스미어 포함 영상은 스미어 정보와 피사체 영상 정보를 모두 포함하고 있는 반면, 스미어 영상은 스미어 정보만을 포함하고 있으므로, 이들의 대응하는 RGB 픽셀 값을 감산함으로써 스미어가 제거된 영상을 획득할 수 있다. 연산부(72)는 스미어 포함 영상 또는 스미어 영상에서 스미어 위치를 xy 좌표값으로 검출하고, 검출된 스미어 위치에서만 스미어 포함 영상과 스미어 영상의 RGB 픽셀 값을 감산할 수도 있다. 연산부(475)는 1VD 동안 획득된 스미어 포함 영상과 다음 1VD 동안 획득된 스미어 영상에 대하여 연산을 수행하므로 라이브뷰 생성부(477)는 2VD 간격으로 스미어가 제거된 영상을 표시부(460)에 제공한다.
본 발명의 바람직한 실시 예에서, 연산부(475) 및 라이브뷰 생성부(477)를 영상 신호 처리부(471)와 분리하여 설명하였으나, 영상 신호 처리부(471)가 매 2VD마다 획득된 원본 영상과 스미어 영상의 각 픽셀 값을 계산하고 감산하여 스미어가 제거된 라이브뷰 영상을 획득하는 기능을 통합하여 수행할 수 있음은 물론이다. 따라서 본 발명은 DSP에 별도의 복잡한 기능 구성없이 실시 가능하다.
도 6은 본 발명의 일 실시예에 따른 촬상장치의 스미어 제거 방법을 개략적으로 도시하는 흐름도이다.
본 발명의 스미어 제거 방법은 미리 정해진 주기마다 피사체에 대하여 긴 전자셔터 노광 시간을 설정하여 촬상한 스미어 포함 영상과 짧은 전자셔터 노광 시간을 설정하여 촬상한 스미어 영상을 획득하고, 스미어 포함 영상 및 스미어 영상의 대응하는 픽셀 값을 차감하여 스미어가 제거된 라이브뷰 영상을 생성한다.
먼저 촬상소자는 긴 전자셔터 노광 시간을 갖는 제1수직동기 구간에서 스미어 포함 영상을 획득하고, 획득된 영상은 버퍼에 임시 저장된다(S610). 스미어 포함 영상은 피사체의 영상 정보 및 스미어 정보를 포함한다. 상기 긴 전자셔터 노광 시간은 사용자에 의해 설정되거나 또는 미리 정해진 기본값으로 자동 설정될 수 있다.
촬상소자 제어부는 전자셔터 노광 시간을 조절하여 0 또는 0에 가까운 촬상장치의 최소값으로 설정한다(S630).
촬상소자는 상기 제1수직동기 구간에 후속하는, 상기 긴 전자셔터 노광 시간보다 짧은 전자셔터 노광 시간을 갖는 제2수직동기 구간에서 스미어 영상을 획득하고, 획득된 영상은 버퍼에 임시 저장된다(S650). 상기 짧은 전자셔터 노광 시간은 상기 단계 630에서 촬상소자 제어부에 의해 설정된 0 또는 최소값이다.
라이브뷰 생성부는 스미어 포함 영상과 스미어 영상의 대응하는 각 픽셀값을 차감하여 스미어가 제거된 영상을 획득한다(S670).
표시부는 2번의 수직동기 구간(2VD)마다 스미어가 제거된 영상을 갱신하여 사용자에게 제공한다(S690). 따라서 디지털 촬영 장치(400)가 초당 60프레임 모드일 경우 초당 30프레임의 효과를 얻을 수 있다. 초당 60프레임 모드 또는 그 이상 의 모드로 촬상소자의 프레임율을 설정하면 초당 30프레임으로 설정했을 때보다 자연스러운 이미지를 얻을 수 있다. 보통 고속 AF나 정밀한 영상을 얻어야 할 때, 초당 많은 프레임을 설정하게 되는데, 초당 120프레임 모드시 본 발명의 실시예를 적용할 경우 초당 60프레임의 영상을 획득할 수 있다.
상기 실시예에서는 1VD 마다 데이터가 전송되어 2VD 간격으로 스미어가 제거된 영상을 제공하는 것으로 설명하였으나, 도 7에 도시된 바와 같이 본 발명의 다른 실시예에서 1VD에서 두 번의 데이터 전송이 수행되는 경우, 스미어 영상과 스미어 포함 영상을 1VD에서 처리하여 스미어 제거 영상을 획득할 수도 있다. 이 경우, 촬상장치가 초당 30프레임 모드일 경우 초당 30프페임 효과, 초당 60프레임 모드일 경우 초당 60프레임의 효과를 그대로 얻을 수 있다.
본 발명에 의한 영상의 스미어 제거 방법은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 프로그램이나 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 하드디스크, 플로피디스크, 플래쉬 메모리, 광데이터 저장장치 등이 있다. 여기서, 기록 매체에 저장되는 프로그램이라 함은 특정한 결과를 얻기 위하여 컴퓨터 등의 정보처리능력을 갖는 장치 내에서 직접 또는 간접적으로 사용되는 일련의 지시 명령으로 표현된 것을 말한다. 또한 컴퓨터라는 용어도 실제 사용되는 명칭의 여하에 불구하고 메모리, 입출력장치, 연산장치를 구비하여 프로그램에 의하여 특정의 기능을 수행하기 위한 정보처리능력을 가진 모든 장치를 총괄하는 의미로 사용될 수 있다.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.
도 1은 디지털 카메라에서 밝은 광원에서 촬영할 때 스미어가 발생한 영상을 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 촬상소자의 구동 방식을 개략적으로 도시하는 도면이다.
도 3은 본 발명의 일 실시예에 따른 도 2의 촬상소자 구동방식에 따라 라이브뷰 영상을 생성하는 개념을 도시한 도면이다.
도 4는 본 발명의 일 실시예에 따른 스미어 제거를 위한 촬상장치를 설명하기 위한 블록도이다.
도 5는 본 발명의 일 실시예에 따른 도 4의 디지털 신호 처리부를 부가 설명하기 위한 블록도이다.
도 6은 본 발명의 일 실시예에 따른 촬상장치의 스미어 제거 방법을 개략적으로 도시하는 흐름도이다.
도 7은 본 발명의 다른 실시예에 따른 촬상소자의 구동 방식을 개략적으로 도시하는 도면이다.

Claims (13)

  1. 미리 정해진 주기마다 피사체에 대하여 긴 전자셔터 노광 시간을 설정하여 촬상한 제1영상과 짧은 전자셔터 노광 시간을 설정하여 촬상한 제2영상을 획득하는 촬상소자; 및
    상기 제1영상 및 제2영상의 대응하는 픽셀 값을 차감하여 스미어가 제거된 제3영상을 획득하는 라이브뷰생성부;를 포함하는 것을 특징으로 하는 촬상장치.
  2. 제1항에 있어서, 상기 짧은 전자셔터 노광 시간을 0 또는 최소값으로 설정하는 촬상소자제어부;를 더 포함하는 것을 특징으로 하는 촬상장치.
  3. 제1항에 있어서, 상기 제1영상은 영상 정보 및 스미어 정보를 포함하는 것을 특징으로 하는 촬상장치.
  4. 제1항에 있어서, 상기 제2영상은 스미어 정보를 포함하는 것을 특징으로 하는 촬상장치의 스미어 제거 방법.
  5. 제1항에 있어서,
    상기 제1영상을 임시 저장하는 제1버퍼 및 상기 제2영상을 임시 저장하는 제2버퍼;를 더 포함하는 것을 특징으로 하는 촬상장치.
  6. 제1항에 있어서, 상기 미리 정해진 주기는 2번의 수직동기 구간이며, 상기 제1영상은 제1수직동기 구간에 획득되고 상기 제2영상은 후속하는 제2수직동기 구간에 획득되는 것을 특징으로 하는 촬상장치.
  7. 제1항에 있어서,
    상기 미리 정해진 주기마다 상기 제3영상을 갱신하여 표시하는 표시부;를 더 포함하는 것을 특징으로 하는 촬상장치.
  8. 제1항에 있어서,
    상기 촬상소자는 CCD인 것을 특징으로 하는 촬상장치.
  9. 피사체에 대하여 긴 전자셔터 노광 시간을 설정하여 촬상한 제1영상을 획득하는 단계;
    상기 피사체에 대하여 짧은 전자셔터 노광 시간을 설정하여 촬상한 제2영상을 획득하는 단계; 및
    미리 설정된 주기마다 획득된 상기 제1영상 및 제2영상의 대응하는 픽셀 값을 차감하여 스미어가 제거된 제3영상을 획득하는 단계;를 포함하는 것을 특징으로 하는 촬상장치의 스미어 제거 방법.
  10. 제9항에 있어서, 상기 짧은 전자셔터 노광 시간은 0 또는 최소값으로 설정되는 것을 특징으로 하는 촬상장치의 스미어 제거 방법.
  11. 제9항에 있어서, 상기 제1영상은 영상 정보 및 스미어 정보를 포함하는 것을 특징으로 하는 촬상장치의 스미어 제거 방법.
  12. 제9항에 있어서, 상기 제2영상은 스미어 정보를 포함하는 것을 특징으로 하는 촬상장치의 스미어 제거 방법.
  13. 제9항에 있어서, 상기 미리 정해진 주기는 2번의 수직동기 구간이며, 상기 제1영상은 제1수직동기 구간에 획득되고 상기 제2영상은 후속하는 제2수직동기 구간에 획득되는 것을 특징으로 하는 촬상장치의 스미어 제거 방법.
KR1020090119105A 2009-12-03 2009-12-03 촬상장치 및 이를 이용한 스미어 제거 방법 KR101595265B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020090119105A KR101595265B1 (ko) 2009-12-03 2009-12-03 촬상장치 및 이를 이용한 스미어 제거 방법
US12/950,007 US8456551B2 (en) 2009-12-03 2010-11-19 Photographing apparatus and smear correction method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090119105A KR101595265B1 (ko) 2009-12-03 2009-12-03 촬상장치 및 이를 이용한 스미어 제거 방법

Publications (2)

Publication Number Publication Date
KR20110062391A true KR20110062391A (ko) 2011-06-10
KR101595265B1 KR101595265B1 (ko) 2016-02-26

Family

ID=44081664

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090119105A KR101595265B1 (ko) 2009-12-03 2009-12-03 촬상장치 및 이를 이용한 스미어 제거 방법

Country Status (2)

Country Link
US (1) US8456551B2 (ko)
KR (1) KR101595265B1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5432799B2 (ja) * 2010-03-30 2014-03-05 オリンパスイメージング株式会社 撮像装置、撮像システム、撮像方法
FR2998752B1 (fr) * 2012-11-27 2016-01-01 E2V Semiconductors Procede de capture d'image avec un temps d'integration tres court
JP6478703B2 (ja) * 2015-02-26 2019-03-06 キヤノン株式会社 撮像装置及び撮像システム
US11039079B1 (en) 2019-05-07 2021-06-15 Lux Optics Incorporated Generating long exposure images
US11394900B1 (en) 2020-05-07 2022-07-19 Lux Optics Incorporated Synthesizing intermediary frames for long exposure images

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06339077A (ja) * 1993-05-31 1994-12-06 Sony Corp 固体撮像装置
JP2002305689A (ja) * 2001-04-03 2002-10-18 Olympus Optical Co Ltd 電子カメラ
JP2005039417A (ja) * 2003-07-17 2005-02-10 Fuji Photo Film Co Ltd デジタルカメラ
JP2009253315A (ja) * 2008-04-01 2009-10-29 Panasonic Corp 固体撮像装置、スミア補正方法、撮像機器

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001203988A (ja) * 2000-01-21 2001-07-27 Nec Corp 画像復号装置、半導体装置、及び画像復号方法
US20070076976A1 (en) * 2005-09-28 2007-04-05 Craig Uhrich Methods for eliminating artifacts in two-dimensional optical metrology

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06339077A (ja) * 1993-05-31 1994-12-06 Sony Corp 固体撮像装置
JP2002305689A (ja) * 2001-04-03 2002-10-18 Olympus Optical Co Ltd 電子カメラ
JP2005039417A (ja) * 2003-07-17 2005-02-10 Fuji Photo Film Co Ltd デジタルカメラ
JP2009253315A (ja) * 2008-04-01 2009-10-29 Panasonic Corp 固体撮像装置、スミア補正方法、撮像機器

Also Published As

Publication number Publication date
US20110134290A1 (en) 2011-06-09
US8456551B2 (en) 2013-06-04
KR101595265B1 (ko) 2016-02-26

Similar Documents

Publication Publication Date Title
US9578260B2 (en) Digital photographing apparatus and method of controlling the digital photographing apparatus
US20150049233A1 (en) Photographing apparatus and method of controlling the same
KR101814604B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
EP2704424A1 (en) Photographing apparatus, method of controlling the same, and computer-readable recording medium
JP2019054461A (ja) 撮像装置および撮像方法
KR20100039430A (ko) 화상 처리기, 화상 처리 방법, 디지털 카메라 및 촬영 장치
JP5950678B2 (ja) 撮像装置、制御方法、及びプログラム
KR20130069039A (ko) 디스플레이 장치, 방법, 및 컴퓨터 판독 가능 저장 매체
JP2013046259A (ja) 映像機器、制御方法およびプログラム
JP2005269373A (ja) 映像信号処理システムおよび電子映像機器
KR101595265B1 (ko) 촬상장치 및 이를 이용한 스미어 제거 방법
US20130120629A1 (en) Photographing apparatus and photographing method
JP6300076B2 (ja) 撮像装置、撮像方法及びプログラム
KR20100018335A (ko) 썸네일 표시 제어 방법 및 장치, 및 이를 이용한 디지털촬영 장치
JP6758950B2 (ja) 撮像装置、その制御方法とプログラム
US10110826B2 (en) Imaging with adjustment of angle of view
KR20100099008A (ko) 오토 포커싱 제어 방법 및 장치, 이를 이용한 디지털 촬영 장치
KR101812656B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
KR101571331B1 (ko) 휘도 표시 방법 및 장치, 및 이를 이용한 디지털 촬영 장치
JP6225463B2 (ja) 撮像装置、撮像方法および記録媒体
KR20110060299A (ko) 디지털 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 매체
US20150049236A1 (en) View finder device and camera including the same
US8902345B2 (en) Method and apparatus for synthesizing two or more images together with one another via divided display screen
KR20120004092A (ko) 카메라 모듈 및 그의 노출 제어 방법
KR101416236B1 (ko) 자동으로 오토포커싱을 실행하는 디지털 촬영 장치 및 이의제어 방법

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
LAPS Lapse due to unpaid annual fee