KR20150088645A - 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체 - Google Patents

촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체 Download PDF

Info

Publication number
KR20150088645A
KR20150088645A KR1020140009177A KR20140009177A KR20150088645A KR 20150088645 A KR20150088645 A KR 20150088645A KR 1020140009177 A KR1020140009177 A KR 1020140009177A KR 20140009177 A KR20140009177 A KR 20140009177A KR 20150088645 A KR20150088645 A KR 20150088645A
Authority
KR
South Korea
Prior art keywords
line
signal
shutter
exposure time
light source
Prior art date
Application number
KR1020140009177A
Other languages
English (en)
Inventor
타카후미 우수이
이상민
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140009177A priority Critical patent/KR20150088645A/ko
Publication of KR20150088645A publication Critical patent/KR20150088645A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

본 발명의 일 실시예의 일 측면에 따르면, 제1 노출 시간으로 촬상 신호를 생성하는 제1 라인과, 광원의 주파수에 따른 제2 노출 시간으로 광원 검출 신호를 생성하는 제2 라인을 포함하는 촬상 소자; 셔터 신호를 생성하여 상기 촬상 소자에 출력하고, 상기 촬상 소자의 노출 시간을 조절하는 셔터 제어부; 상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨을 검출하고, 상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨에 따라, 게인을 결정하고, 상기 제1 라인으로부터 출력된 촬상 신호에 상기 게인을 적용하여, 보정된 촬상 신호를 생성하는 영상 처리부를 포함하는, 촬영 장치가 제공된다.

Description

촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체 {Photographing apparatus, method for controlling the same, and computer-readable recording medium}
본 발명의 실시예들은 촬영 장치, 촬영 장치 제어 방법, 및 상기 촬영 장치 제어 방법을 수행하는 컴퓨터 프로그램 코드들을 저장하는 컴퓨터 판독가능 기록매체에 관한 것이다.
촬영 장치는 영상 캡쳐 시, 또는 라이브뷰 생성 시, 기계적 셔터 또는 전자 셔터를 이용하여 촬상 소자의 노출 시간을 조절한다. 셔터를 조작하여 촬상 소자를 노출시킬 때, 촬상 소자의 일부 영역씩 노출시키면서, 촬상 소자의 영역별로 순차적인 노출이 이루어진다. 예를 들면, 촬상 소자의 픽셀들의 라인들을 순차적으로 노출시킬 수 있다. 그런데 형광등과 같이 시간에 따른 밝기 변화가 있는 조명 하에서 촬영을 수행하는 경우, 촬상 소자를 순차적으로 노출시킬 때, 조명의 플리커로 인해 촬영 영상에서도 플리커가 발생하는 문제가 있다.
본 발명의 실시예들은 플리커가 있는 조명에서 촬영하는 경우, 촬영 영상의 노출 시간을 자유롭게 조절하면서 플리커를 억제하기 위한 것이다.
본 발명의 일 실시예의 일 측면에 따르면,
제1 노출 시간으로 촬상 신호를 생성하는 제1 라인과, 광원의 주파수에 따른 제2 노출 시간으로 광원 검출 신호를 생성하는 제2 라인을 포함하는 촬상 소자;
셔터 신호를 생성하여 상기 촬상 소자에 출력하고, 상기 촬상 소자의 노출 시간을 조절하는 셔터 제어부;
상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨을 검출하고, 상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨에 따라, 게인을 결정하고, 상기 제1 라인으로부터 출력된 촬상 신호에 상기 게인을 적용하여, 보정된 촬상 신호를 생성하는 영상 처리부를 포함하는, 촬영 장치가 제공된다.
상기 촬상 소자는, 상기 제1 라인과 상기 제2 라인을 포함하고, 반복적으로 배치된 복수의 라인 쌍들을 포함하고, 동일 라인 쌍에 속한 상기 제1 라인과 상기 제2 라인은 인접한 픽셀 라인들일 수 있다.
상기 제2 노출 시간은 광원의 밝기 변화 주기의 1/2일 수 있다.
상기 셔터 제어부는, 상기 제1 노출 시간을 갖는 제1 셔터 신호를 생성하여, 상기 제1 라인에 출력하는 제1 셔터 제어부; 및 상기 제2 노출 시간을 갖는 제2 셔터 신호를 생성하여, 상기 제2 라인에 출력하는 제2 셔터 제어부를 포함할 수 있다.
상기 제2 셔터 신호는, 제1 주파수의 광원에 대응하는 셔터 신호이고, 상기 촬영 장치는, 제2 주파수의 광원에 대응하는 제3 노출 시간을 갖는 제3 셔터 신호를 생성하여 상기 제2 라인에 출력하는 제3 셔터 제어부; 및 상기 촬상 신호 및 상기 광원 검출 신호 중 적어도 하나에 기초하여, 상기 제2 셔터 신호 및 상기 제3 셔터 신호 중 하나를 상기 제2 라인으로 출력하도록 제어하는 제어부를 더 포함할 수 있다.
상기 제1 라인 및 상기 제2 라인은 상기 촬상 소자 상에서 번갈아서 배치되고, 상기 제1 셔터 신호의 펄스와 상기 제2 셔터 신호의 펄스는, 노출 종료 시점이 리드아웃 주기에 대응하는 간격을 갖고 라인 순서에 따라 진행될 수 있다.
상기 영상 처리부는, 상기 제1 노출 시간과 상기 제2 노출 시간의 비율에 따라, 상기 게인, 상기 촬상 신호, 및 상기 광원 검출 신호 중 적어도 하나를 보정할 수 있다.
본 발명의 일 실시예의 다른 측면에 따르면,
제1 노출 시간으로 촬상 소자의 제1 라인의 픽셀들을 이용하여 촬상 신호를 생성하는 단계;
상기 촬상 소자의 제2 라인의 픽셀들을 이용하여 광원의 주파수에 따른 제2 노출 시간으로, 광원 검출 신호를 생성하는 단계;
상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨을 검출하는 단계;
상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨에 따라, 게인을 결정하는 단계;
상기 제1 라인으로부터 출력된 촬상 신호에 상기 게인을 적용하여, 보정된 촬상 신호를 생성하는 단계를 포함하는, 촬영 장치 제어 방법이 제공된다.
상기 촬상 소자는, 상기 제1 라인과 상기 제2 라인을 포함하고, 반복적으로 배치된 복수의 라인 쌍들을 포함하고, 동일 라인 쌍에 속한 상기 제1 라인과 상기 제2 라인은 인접한 픽셀 라인들일 수 있다.
상기 제2 노출 시간은 광원의 밝기 변화 주기의 1/2일 수 있다.
상기 제1 노출 시간을 갖는 제1 셔터 신호를 생성하여, 상기 제1 라인에 출력하는 단계; 및 상기 제2 노출 시간을 갖는 제2 셔터 신호를 생성하여, 상기 제2 라인에 출력하는 단계를 더 포함할 수 있다.
상기 제2 셔터 신호는 제1 주파수의 광원에 대응하는 셔터 신호이고, 상기 촬영 장치 제어 방법은, 제2 주파수의 광원에 대응하는 제3 노출 시간을 갖는 제3 셔터 신호를 생성하여 상기 제2 라인에 출력하는 단계; 및 상기 촬상 신호 및 상기 광원 검출 신호 중 적어도 하나에 기초하여, 상기 제2 셔터 신호 및 상기 제3 셔터 신호 중 하나를 상기 제2 라인으로 출력하는 단계를 더 포함할 수 있다.
상기 제1 라인 및 상기 제2 라인은 상기 촬상 소자 상에서 번갈아서 배치되고, 상기 제1 셔터 신호의 펄스와 상기 제2 셔터 신호의 펄스의 노출 종료 시점이 리드아웃 주기에 대응하는 간격을 갖고 라인 순서에 따라 진행할 수 있다.
상기 촬영 장치 제어 방법은, 상기 제1 노출 시간과 상기 제2 노출 시간의 비율에 따라, 상기 게인, 상기 촬상 신호, 및 상기 광원 검출 신호 중 적어도 하나를 보정하는 단계를 더 포함할 수 있다.
본 발명의 일 실시예의 또 다른 측면에 따르면, 프로세서에 의해 독출되어 수행되었을 때, 촬영 장치 제어 방법을 수행하는 컴퓨터 프로그램 코드들을 저장하는 컴퓨터 판독가능 기록매체에 있어서, 상기 촬영 장치 제어 방법은,
제1 노출 시간으로 촬상 소자의 제1 라인의 픽셀들을 이용하여 촬상 신호를 생성하는 단계;
상기 촬상 소자의 제2 라인의 픽셀들을 이용하여 광원의 주파수에 따른 제2 노출 시간으로, 광원 검출 신호를 생성하는 단계;
상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨을 검출하는 단계;
상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨에 따라, 게인을 결정하는 단계;
상기 제1 라인으로부터 출력된 촬상 신호에 상기 게인을 적용하여, 보정된 촬상 신호를 생성하는 단계를 포함하는, 컴퓨터 판독가능 기록매체가 제공된다.
본 발명의 실시예들에 따르면, 플리커가 있는 조명에서 촬영하는 경우, 촬영 영상의 노출 시간을 자유롭게 조절하면서 플리커를 억제할 수 있는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른 촬영 장치(100a)의 구조를 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 촬상 소자(110)의 구조를 나타낸 도면이다.
도 3은 본 발명의 일 실시예에 따른 픽셀(PX)과 서브 픽셀(SPX)의 구조를 나타낸 도면이다.
도 4는 플리커가 발생하는 모습을 나타낸 도면이다.
도 5는 광원의 시간적 발광량 편차와, 에너지 편차를 나타낸 도면이다.
도 6은 본 발명의 일 실시예에 따른 촬영 장치 제어 방법을 나타낸 흐름도이다.
도 7은 본 발명의 다른 실시예에 따른 촬영 장치(100b)의 구조를 나타낸 도면이다.
도 8은 본 발명의 다른 실시예에 따른 촬상 소자(110), 제1 셔터 제어부(710), 및 제2 셔터 제어부(720)를 나타낸 도면이다.
도 9는 본 발명의 일 실시예에 따른 제1 셔터 신호 및 제2 셔터 신호를 나타낸 타이밍도이다.
도 10은 본 발명의 다른 실시예에 따른 영상 처리부(120a)의 구조를 나타낸 도면이다.
도 11은 본 발명의 또 다른 실시예에 따른 촬영 장치(100c)의 구조를 나타낸 도면이다.
도 12는 본 발명의 또 다른 실시예에 따른 촬영 장치 제어 방법을 나타낸 흐름도이다.
도 13은 본 발명의 일 실시예에 따른 촬영 장치(100d)의 구조를 설명하기 위한 블록도이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에서 사용되는 "부"라는 용어는 소프트웨어, FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미하며, "부"는 어떤 역할들을 수행한다. 그렇지만 "부"는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. "부"는 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 "부"는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 "부"들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 "부"들로 결합되거나 추가적인 구성요소들과 "부"들로 더 분리될 수 있다.
아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략한다.
도 1은 본 발명의 일 실시예에 따른 촬영 장치(100a)의 구조를 나타낸 도면이다. 본 실시예에 따른 촬영 장치(100a)는 촬상 소자(110), 영상 처리부(120a), 및 셔터 제어부(130)를 포함한다.
촬상 소자(110)는 입사광을 광전 변환하여 전기적인 촬상 신호를 생성한다. 촬상 소자(110)는 예를 들면, CCD(Charge Coupled Device) 이미지센서 또는 CIS(Complementary Metal Oxide Semiconductor Image Sensor)일 수 있다.
본 발명의 일 실시예에 따른 촬상 소자(110)는 제1 라인과 제2 라인을 포함할 수 있다. 상기 제1 라인은 복수의 픽셀들의 라인이거나, 복수의 서브 픽셀들의 라인일 수 있다. 본 발명의 일 실시예에 따르면, 상기 제1 라인은 제1 노출 시간으로 노광되어 촬상 신호를 생성하고, 상기 제2 라인은 제2 노출 시간으로 노광되어 광원 검출 신호를 생성할 수 있다. 상기 제1 노출 시간은 사용자에 의해 설정되거나, 촬영 장치(100a)에 의해 자동으로 설정된 시간일 수 있다. 제2 노출 시간은 광원의 주파수에 대응되는 노출 시간이다.
도 2는 본 발명의 일 실시예에 따른 촬상 소자(110)의 구조를 나타낸 도면이다.
촬상 소자(110)는 복수의 픽셀들을 포함할 수 있다. 상기 복수의 픽셀들 각각은 복수의 서브 픽셀들을 포함할 수 있고, 상기 복수의 서브 픽셀들은 서로 다른 색 성분에 대응될 수 있다.
일 실시예에 따르면, 제1 라인(L1)과 제2 라인(L2)은 픽셀(PX)의 한 라인을 의미한다. 다른 실시예에 따르면, 제1 라인(L1)과 제2 라인(L2)은 서브 픽셀(SPX)의 한 라인을 의미한다.
일 실시예에 따르면, 촬상 소자(110)는 제1 라인(L1) 및 제2 라인(L2)을 포함할 수 있다. 제1 라인(L1)은 제1 노출 시간을 갖는 제1 셔터 신호에 의해 구동되는 라인이고, 촬상 신호를 생성한다. 제2 라인(L2)은 제2 노출 시간을 갖는 제2 셔터 신호에 의해 구동되는 라인이고, 광원 검출 신호를 생성한다.
본 발명의 일 실시예에 따르면, 제1 라인(L1)과 제2 라인(L2)은 라인 쌍을 이루어 배치되고, 동일한 라인 쌍에 속하는 제1 라인(L1)과 제2 라인(L2)은 서로 인접하게 배치된다. 또한 상기 라인 쌍이 상기 촬상 소자(110)에 반복해서 배치된다.
또한 촬상 소자(110)는 일부 라인들(즉 제1 라인(L1))만 이용하여 촬상 신호를 생성할 때, 사용되지 않는 제3 라인(L3)을 포함할 수 있다. 제3 라인(L3)은 라인 쌍들 사이에 배치될 수 있다. 또한 라인 쌍들 사이에 하나 또는 복수의 제3 라인(L3)이 배치될 수 있다.
촬영 장치(100a)는 출력 영상의 해상도에 따라 촬상 소자(110)의 모든 픽셀을 사용할 수 있고, 일부 픽셀만 사용할 수 있다. 예를 들면, 촬영 장치(100a)는 빠른 처리가 필요한 라이브뷰 영상을 생성하는 경우에는 촬상 소자(110)의 일부 픽셀만 사용할 수 있다. 이러한 경우, 촬영 장치(100a)는 촬상 소자(110)의 픽셀들의 라인을 스킵하여 이용하거나, 또는 같은 라인에서도 픽셀을 스킵하여 사용할 수 있다. 본 발명의 실시예들은, 이와 같이 촬상 소자(110)의 일부 픽셀들만 이용되는 경우, 이용되지 않는 픽셀들을 이용하여 광원 검출 신호를 생성함으로써, 광원의 플리커와 무관한 기준 레벨을 검출하고, 상기 기준 레벨을 이용하여 촬상 신호를 보정한다. 이러한 구성에 의해 본 발명의 실시예들에 따르면, 촬상 신호의 노출 시간을 자유롭게 조절하면서도, 광원으로 인한 플리커를 효과적으로 보정하여, 출력 영상에서 조명에 의한 플리커가 발생하는 것을 방지할 수 있다.
도 3은 본 발명의 일 실시예에 따른 픽셀(PX)과 서브 픽셀(SPX)의 구조를 나타낸 도면이다. 본 발명의 일 실시예에 따른 픽셀(PX)은 예를 들면 도 3에 도시된 바와 같이, 레드 서브 픽셀(R), 그린 서브 픽셀(Gr, Gb), 및 블루 서브 픽셀(B)을 포함할 수 있다.
픽셀(PX)의 구조는 도 3에 도시된 것으로 한정되지 않으며, 서브 픽셀의 모양 및 배치, 서브 픽셀의 색 성분의 종류는 실시예에 따라 달라질 수 있다.
다른 실시예에 따르면, 레드 서브 픽셀(R), 그린 서브 픽셀(Gr, Gb), 및 블루 서브 픽셀(B)의 위치 관계가 달라질 수 있다.
또 다른 실시예에 따르면, 픽셀(PX)에 포함된 서브 픽셀은 레드 서브 픽셀(R), 그린 서브 픽셀(Gr, Gb), 블루 서브 픽셀(B), 마젠타 서브 픽셀(Mg), 시안 서브 픽셀(Cy), 옐로우 서브 픽셀(Y) 등으로 이루어지는 그룹에서 다양한 조합의 서브 픽셀들을 포함하여 구성될 수 있다.
또 다른 실시예에 따르면, 서브 픽셀들이 오각형, 육각형 등 다각형의 형태를 가질 수 있다. 이러한 경우 오각형, 육각형 등이 서로 맞물리는 형태로 배치되어 픽셀(PX)을 구성할 수 있다.
다시 도 1을 참조하면, 셔터 제어부(130)는 셔터 신호를 생성하여 촬상 소자(110)에 출력한다. 본 발명의 일 실시예에 따른 셔터 제어부(130)는 촬상 소자(110)의 제1 라인(L1)은 제1 노출 시간을 갖도록 조절하고, 촬상 소자(110)의 제2 라인(L2)은 제2 노출 시간을 갖도록 조절할 수 있다.
본 발명의 실시예들에 따른 촬상 소자(110)는 전자식 셔터에 의해 노광이 조절될 수 있다. 구체적으로, 촬상 소자(110)의 노광 시간은 셔터 제어부(130)로부터 출력되는 셔터 신호에 의해 조절된다.
영상 처리부(120a)는 촬상 소자(110)로부터 출력된 촬상 신호를 입력 받아, 출력 영상을 생성한다. 상기 출력 영상은 예를 들면, 라이브뷰 영상, 퀵 뷰 영상, 캡쳐 영상, 동영상 등일 수 있다.
본 발명의 일 실시예에 따른 영상 처리부(120a)는 제1 라인(L1)의 신호 레벨과 상기 제2 라인(L2)의 신호 레벨을 검출하고, 제1 라인(L1)의 신호 레벨과 제2 라인(L2)의 신호 레벨에 따라 제1 라인(L1)으로부터 출력된 촬상 신호에 적용될 게인을 결정한다. 또한 영상 처리부(120a)는 제1 라인(L1)으로부터 출력된 촬상 신호에 상기 게인을 적용하여, 보정된 촬상 신호를 생성하고, 상기 촬상 신호로부터 출력 영상을 생성한다.
도 4는 플리커가 발생하는 모습을 나타낸 도면이다.
일정한 주파수를 갖는 전원에 의해 주기적인 발광량의 편차를 갖는 형광등 등의 광원 하에서 영상을 촬영하는 경우, 촬영 영상에서 광원의 시간적 발광량 편차에 의한 밴딩 노이즈(Banding Nose), 즉 플리커가 발생한다. 플리커는 도 4에 도시된 바와 같이, 촬영 영상에서 줄무늬의 형태로 나타날 수 있다. 이와 같이 플리커가 발생하는 경우, 촬영 영상의 화질을 저하시킨다.
도 5는 광원의 시간적 발광량 편차와, 에너지 편차를 나타낸 도면이다.
만약 60Hz의 주파수를 갖는 광원 아래서 촬영하는 경우, 광 신호(S1)의 레벨은 60Hz의 주파수로 변화한다. 이때 촬상 소자(110)에서 감지되는 에너지 레벨(S2)은 광 신호(S1)의 주파수의 2배인 120Hz의 주파수로 변화한다.
만약 플리커 발생을 방지하기 위해, 촬영 장치(110a)의 노출 시간을 광원의 주파수에 대응되도록 설정하는 경우, 플리커의 발생은 방지할 수 있지만, 촬영 영상의 노출 시간을 조절하는데 제약이 생긴다는 문제점이 있다.
본 발명의 일 실시예에 따르면, 일정 주파수의 발광량 편차를 갖는 광원 아래서 촬영하는 경우, 촬상 소자(110)의 제2 라인(L2)의 노출 시간을 촬상 소자(110)에서 감지되는 에너지 레벨의 주파수에 대응하도록 설정한다. 즉, 제2 라인(L2)의 노출 시간은 광원의 주파수의 2배의 주파수에 대응하고, 광원의 주기의 1/2의 시간을 갖는다. 결국 촬상 소자(110)의 제2 라인(L2)의 픽셀들 또는 서브 픽셀들은 제2 노출 시간 동안 광원의 플리커와 무관한 광원 검출 신호를 얻을 수 있다. 본 발명의 일 실시예에 따른 영상 처리부(120a)는 광원의 플리커와 무관한 광원 검출 신호를 기준으로 촬상 소자(110)의 제1 라인(L1)으로부터 출력된 촬상 신호를 보정하여, 촬상 신호로부터 광원으로 인한 플리커를 제거할 수 있다.
도 6은 본 발명의 일 실시예에 따른 촬영 장치 제어 방법을 나타낸 흐름도이다.
본 실시예에 따른 촬영 장치 제어 방법은 제1 라인과 제2 라인을 포함하는 촬상 소자를 포함하는 촬영 장치를 제어한다. 우선 상기 촬영 장치 제어 방법은, 촬상 소자의 제1 라인에서 제1 노출 시간으로 촬상 신호를 생성하고(S602), 촬상 소자의 제2 라인에서 제2 노출 시간으로 광원 검출 신호를 생성한다(S604). 상기 제1 노출 시간은 사용자에 의해 설정되거나, 촬영 장치(100a)에 의해 자동으로 설정된 시간일 수 있다. 제2 노출 시간은 광원의 주파수에 따라 결정된다.
다음으로, 상기 촬영 장치 제어 방법은, 제1 라인으로부터 출력된 촬상 신호의 신호 레벨과 제2 라인으로부터 출력된 광원 검출 신호의 신호 레벨을 검출한다(S606).
다음으로 상기 제1 라인으로부터 출력된 촬상 신호의 신호 레벨과 상기 제2 라인으로부터 출력된 광원 검출 신호의 신호 레벨에 따라, 상기 촬상 신호에 적용될 게인이 결정된다(S608). 상기 게인이 결정되면, 상기 촬영 장치 제어 방법은, 상기 촬상 신호에 상기 게인을 적용하여, 상기 촬상 신호를 보정한다(S610).
도 7은 본 발명의 다른 실시예에 따른 촬영 장치(100b)의 구조를 나타낸 도면이다. 본 실시예에 따른 촬영 장치(100b)는 광학부(730), 촬상 소자(110), 영상 처리부(120a), 셔터 제어부(130a)를 포함한다. 셔터 제어부(130a)는 제1 셔터 제어부(710) 및 제2 셔터 제어부(720)를 포함한다.
입사광은 광학부(730)를 통과하여 촬상 소자(110)의 수광면으로 입사한다. 광학부(730)는 렌즈 및 조리개를 포함할 수 있다. 렌즈는 복수 군, 복수 매의 렌즈들을 구비할 수 있다. 조리개는 그 개폐 정도가 조절되어, 촬상 소자(110)로 입사되는 광량을 조절한다. 렌즈 및 조리개는 촬영 장치(100b)의 제어부(미도시), 구동부(미도시) 등에 의해 구동될 수 있다.
촬상 소자(110)는 입사광을 광전 변환하여 전기적인 촬상 신호를 생성한다. 본 발명의 일 실시예에 따른 촬상 소자(110)는 제1 라인과 제2 라인을 포함할 수 있다. 또한, 본 발명의 일 실시예에 따르면, 상기 제1 라인은 제1 노출 시간으로 노광되어 촬상 신호를 생성하고, 상기 제2 라인은 제2 노출 시간으로 노광되어 광원 검출 신호를 생성할 수 있다.
상기 제1 노출 시간은 사용자에 의해 설정되거나, 촬영 장치(100b)에 의해 자동으로 설정된 시간일 수 있다. 제2 노출 시간은 광원의 주파수에 대응되는 노출 시간이다.
셔터 제어부(130)는 셔터 신호를 생성하여 촬상 소자(110)에 출력한다. 셔터 제어부(130)는 제1 셔터 제어부(710)와 제2 셔터 제어부(720)를 포함한다. 제1 셔터 제어부(710)는 제1 노출 시간을 갖는 제1 셔터 신호를 생성하여, 촬상 소자의 제1 라인에 출력한다. 제2 셔터 제어부(720)는 제2 노출 시간을 갖는 제2 셔터 신호를 생성하여, 촬상 소자의 제2 라인에 출력한다.
영상 처리부(120a)는 촬상 소자(110)로부터 출력된 촬상 신호를 입력 받아, 출력 영상을 생성한다. 본 실시예에 따른 영상 처리부(120a)는 제1 라인(L1)의 신호 레벨과 상기 제2 라인(L2)의 신호 레벨을 검출하고, 제1 라인(L1)의 신호 레벨과 제2 라인(L2)의 신호 레벨에 따라 제1 라인(L1)으로부터 출력된 촬상 신호에 적용될 게인을 결정한다. 또한 영상 처리부(120a)는 제1 라인(L1)으로부터 출력된 촬상 신호에 상기 게인을 적용하여, 보정된 촬상 신호를 생성하고, 상기 촬상 신호로부터 출력 영상을 생성한다.
도 8은 본 발명의 다른 실시예에 따른 촬상 소자(110), 제1 셔터 제어부(710), 및 제2 셔터 제어부(720)를 나타낸 도면이다.
본 실시예에 따르면, 제1 라인(L1)과 제2 라인(L2)은 각각 서브 픽셀의 한 라인일 수 있다. 인접한 제1 라인(L1)과 제2 라인(L2)은 라인 쌍(POL)을 이룬다. 복수의 라인 쌍들(POL1, POL2, POL3)은 연속적으로 배치된다. 복수의 라인 쌍들(POL1, POL2, POL3) 사이에 제3 라인(L3)이 배치된다. 도 8에 도시된 실시예와 같이 한 픽셀(PX)이 두 라인의 서브 픽셀(SPX)로 이루어지는 경우, 제3 라인(L3)은 홀수 개의 라인을 가질 수 있다.
또한 촬상 신호는 제1 라인(L1)의 서브 픽셀들(SPX) 모두로부터 출력되지 않고, 2개 서브 픽셀(SPX)씩 스킵하면서 출력될 수 있다. 촬상 신호의 해상도가 세로 방향으로 1/3로 감소하면 가로 방향으로도 1/3 감소해야 하기 때문에, 제1 라인(L1)의 서브 픽셀들(SPX)의 1/3만이 이용될 수 있다.
제1 셔터 제어부(710)는 도 8에 도시된 바와 같이, 제1 라인(L1)의 서브 픽셀들(SPX)에 연결되어, 제1 셔터 신호를 출력한다. 제2 셔터 제어부(720)는 도 8에 도시된 바와 같이, 제2 라인(L2)의 서브 픽셀들(SPX)에 연결되어, 제2 셔터 신호를 출력한다.
도 9는 본 발명의 일 실시예에 따른 제1 셔터 신호 및 제2 셔터 신호를 나타낸 타이밍도이다. 도 9에서 R1은 제1 열의 서브 픽셀들(SPX)에 출력되는 제1 셔터 신호, R2는 제2 열의 서브 픽셀들(SPX)에 출력되는 제2 셔터 신호, R3는 제3열의 서브 픽셀들(SPX)에 출력되는 셔터 신호, R4는 제4 열의 서브 픽셀들(SPX)에 출력되는 제1 셔터 신호, R5는 제5 열의 서브 픽셀들(SPX)에 출력되는 제2 셔터 신호, R6는 제6 열의 서브 픽셀들(SPX)에 출력되는 셔터 신호를 의미한다. 여기서 제1 열과 제4 열은 제1 라인(L1)에 대응되고, 제2 열과 제5 열은 제2 라인(L2)에 대응되고, 제3 열과 제6 열은 제3 라인(L3)에 대응된다.
본 발명의 실시예들에서와 같이 제3 라인(L3)이 촬상 신호 생성을 위해 이용되지 않는 경우에는 제3 라인(L3)에는 셔터 신호가 출력되지 않을 수 있다. 제3 라인(L3)이 촬상 신호 생성을 위해 이용되는 경우에는, 제3 라인(L3)은 제1 셔터 제어부(710)로부터 제1 셔터 신호를 출력 받을 수 있다.
제1 셔터 신호(R1, R4)와 제2 셔터 신호(R2, R5)는 도 9에 도시된 바와 같이, 펄스의 종료점이 제3 시간(T3)의 간격을 갖도록 라인 순서에 따라 진행할 수 있다. 제1 셔터 신호(R1, R4)와 제2 셔터 신호(R2, R5)의 펄스는 촬상 소자(110)가 노광되는 구간을 의미하고, 펄스의 종료점은 노출 종료 시점을 의미한다. 여기서 제3 시간(T3)은 리드아웃 주기에 대응한다. 이때 제1 셔터 신호(R1, R4)는 제1 노출 시간(T1)에 대응하는 펄스 폭을 갖고, 제2 셔터 신호(R2, R5)는 제2 노출 시간(T2)에 대응하는 펄스 폭을 가질 수 있다. 촬상 소자(110)에서 생성된 촬상 신호와 광원 검출 신호는 해당 라인의 노출이 종료된 후 제3 시간(T3) 동안 리드아웃 된다.
제1 라인(L1)과 제2 라인(L2)이 픽셀(PX)들의 라인으로 이루어지는 실시예에서는, 제1열과 제2열에 대해서는 제1 셔터 신호가 출력되고, 제3열과 제4열에 대해서는 제2 셔터 신호가 출력되고, 제5열과 제6열에 대해서는 셔터 신호가 출력되지 않는 방식으로 촬상 소자(110)가 구동될 수 있다. 이러한 경우, 제1열과 제2열에 출력되는 제1 셔터 신호들의 노출 종료 시점이 제3 시간(T3)의 간격을 갖고, 제2열에 출력되는 제1 셔터 신호와 제3열에 출력되는 제2 셔터 신호의 노출 종료 시점이 제3 시간(T3)의 간격을 갖도록 셔터 신호가 열 별로 진행될 수 있다.
도 10은 본 발명의 다른 실시예에 따른 영상 처리부(120a)의 구조를 나타낸 도면이다. 본 실시예에 따른 영상 처리부(120a)는 라인 분할부(1010), 제1 레벨 검출부(1020), 제2 레벨 검출부(1030), 게인 검출부(1040), 딜레이부(1050), 및 게인 적용부(1060)를 포함한다.
라인 분할부(1010)는 촬상 소자(110)로부터 입력된 신호를 제1 라인(L1)의 촬상 신호와 제2 라인(L2)의 광원 검출 신호로 분할한다. 라인 분할부(1010)는 어느 라인으로부터 신호가 입력되었는지를 기준으로 촬상 소자(110)로부터의 출력 신호를 촬상 신호와 광원 검출 신호로 분할할 수 있다.
라인 분할부(1010)에서 출력된 촬상 신호(S1)는 딜레이부(1050) 및 제1 레벨 검출부(1020)로 출력된다. 라인 분할부(1010)에서 출력된 광원 검출 신호(S2)는 제2 레벨 검출부(1030)로 출력된다.
제1 레벨 검출부(1020)는 촬상 신호(S1)의 레벨을 검출한다. 제2 레벨 검출부(1030)는 광원 검출 신호(S2)의 레벨을 검출한다.
게인 검출부(1040)는 촬상 신호(S1)의 레벨과 광원 검출 신호(S2)의 레벨을 이용하여, 촬상 신호(S1)에 적용할 게인을 결정한다. 예를 들면, 게인(G)은 수학식 1과 같이 결정될 수 있다.
Figure pat00001
딜레이부(1050)는 라인 분할부(1010)로부터 게인 적용부(1060)로 출력되는 촬상 신호(S1)에 딜레이를 발생시킨다. 딜레이부(1050)는 게인 검출부(1040)에서 게인(G)을 결정한 후에 촬상 신호(S1)가 게인 적용부(1060)로 전달될 수 있도록 촬상 신호(S1)에 딜레이를 발생시킨다.
게인 적용부(1060)는 딜레이부(1050)로부터 출력된 촬상 신호(S1)에 게인(G)을 적용하여, 보정된 촬상 신호(S1)를 생성하고 출력한다. 게인 적용부(1060)는 촬상 신호(S1)에 게인(G)을 곱하여 보정된 촬상 신호(S1)를 생성할 수 있다.
본 발명의 일 실시예에 따르면, 제1 노출 시간과 제2 노출 시간의 비율에 따라 촬상 신호의 레벨, 광원 검출 신호의 레벨, 및 게인 중 적어도 하나가 보정될 수 있다. 예를 들면 제1 노출 시간이 제2 노출 시간의 1/2인 경우를 예로 들어 설명한다. 일 실시예에 따르면, 제1 레벨 검출부(1020)는 촬상 신호의 레벨을 2배로 배가할 수 있다. 다른 실시예에 따르면 제2 레벨 검출부(1020)는 광원 검출 신호의 레벨을 1/2로 감소시킬 수 있다. 또 다른 실시예에 따르면, 게인 검출부(1040)는 게인을 다음 수학식 2와 같이 산출할 수 있다.
Figure pat00002
도 11은 본 발명의 또 다른 실시예에 따른 촬영 장치(100c)의 구조를 나타낸 도면이다. 본 실시예에 따른 촬영 장치(100c)는 광학부(730), 촬상 소자(110), 영상 처리부(120b), 셔터 제어부(130b), 및 제어부(1120)를 포함한다. 셔터 제어부(130b)는 제1 셔터 제어부(710), 제2 셔터 제어부(720), 및 제3 셔터 제어부(1110)를 포함한다.
입사광은 광학부(730)를 통과하여 촬상 소자(110)의 수광면으로 입사한다. 광학부(730)는 렌즈 및 조리개를 포함할 수 있다.
촬상 소자(110)는 입사광을 광전 변환하여 전기적인 촬상 신호를 생성한다. 본 발명의 일 실시예에 따른 촬상 소자(110)는 제1 라인과 제2 라인을 포함할 수 있다. 또한, 본 발명의 일 실시예에 따르면, 상기 제1 라인은 제1 노출 시간으로 노광되어 촬상 신호를 생성하고, 상기 제2 라인은 제2 노출 시간으로 노광되어 촬상 신호를 생성할 수 있다.
셔터 제어부(130)는 셔터 신호를 생성하여 촬상 소자(110)에 출력한다. 셔터 제어부(130)는 제1 셔터 제어부(710), 제2 셔터 제어부(720), 및 제3 셔터 제어부(1110)를 포함한다. 제1 셔터 제어부(710)는 제1 노출 시간을 갖는 제1 셔터 신호를 생성하여, 촬상 소자의 제1 라인에 출력한다. 제2 셔터 제어부(720)는 제2 노출 시간을 갖는 제2 셔터 신호를 생성한다. 제3 셔터 제어부(1110)는 제3 노출 시간을 갖는 제3 셔터 신호를 생성한다. 상기 제2 노출 시간과 제3 노출 시간은 상이하다. 예를 들면, 제2 노출 시간은 60Hz의 광원에 대응하는 1/120초이고, 제3 노출 시간은 50Hz의 광원에 대응하는 1/100초이다.
상기 제1 노출 시간은 사용자에 의해 설정되거나, 촬영 장치(100c)에 의해 자동으로 설정된 시간일 수 있다. 제2 노출 시간은 제1 주파수의 광원에 대응된다. 제3 노출 시간은 제2 주파수의 광원에 대응된다.
제어부(1120)는 촬상 신호에서 플리커가 발생하는지 여부를 검출하고, 플리커가 발생하는 경우, 촬상 소자(110)의 제2 라인(L2)으로 출력되는 셔터 신호의 종류를 변경한다. 예를 들면, 현재 제2 셔터 신호가 촬상 소자(110)로 출력되고 있는데, 촬상 신호에서 플리커가 검출되면, 촬상 소자(110)의 제2 라인(L2)에 제2 셔터 신호 대신 제3 셔터 신호를 출력하도록 제어한다. 제어부(1120)는 제2 셔터 제어부(720)와 제3 셔터 제어부(1110) 중 하나로부터 제2 셔터 신호 또는 제3 셔터 신호가 촬상 소자(110)의 제2 라인(L2)으로 출력되도록 제2 셔터 제어부(720) 및 제3 셔터 제어부(1110)를 제어할 수 있다. 제2 셔터 제어부(720) 및 제3 셔터 제어부(1110)는 제어부(1120)의 제어에 따라 셔터 신호를 생성하고 출력할 수 있다.
일 실시예에 따르면, 제어부(1120)는 촬상 신호에 플리커가 발생하는지 여부를 촬상 신호에 기초하여 판별할 수 있다. 예를 들면, 촬상 신호에서 나타나는 주기적인 밝기 변화의 주파수가 현재 촬상 소자(110)의 제2 라인(L2)으로 출력되고 있는 셔터 신호(제2 셔터 신호 및 제3 셔터 신호 중 하나)의 주파수와 상이한 경우, 제어부(1120)는 플리커가 발생한 것으로 판단할 수 있다.
다른 실시예에 따르면, 제어부(1120)는 촬상 신호에 플리커가 발생하는지 여부를 광원 검출 신호에 기초하여 판별할 수 있다. 예를 들면, 광원 검출 신호에서 주기적인 밝기 변화가 검출되는 경우, 제어부(1120)는 플리커가 발생한 것으로 판단할 수 있다.
영상 처리부(120b)는 촬상 소자(110)로부터 출력된 촬상 신호를 입력 받아, 출력 영상을 생성한다. 본 실시예에 따른 영상 처리부(120b)는 제1 라인(L1)의 신호 레벨과 상기 제2 라인(L2)의 신호 레벨을 검출하고, 제1 라인(L1)의 신호 레벨과 제2 라인(L2)의 신호 레벨에 따라 제1 라인(L1)으로부터 출력된 촬상 신호에 적용될 게인을 결정한다. 또한 영상 처리부(120b)는 제1 라인(L1)으로부터 출력된 촬상 신호에 상기 게인을 적용하여, 보정된 촬상 신호를 생성하고, 상기 촬상 신호로부터 출력 영상을 생성한다.
일 실시예에 따르면, 영상 처리부(120b)는 보정된 촬상 신호에서 플리커가 검출되는 경우, 제어부(1120)로 피드백할 수 있다. 제어부(1120)는 영상 처리부(120b)로부터 보정된 촬상 신호에서 플리커가 검출된다는 피드백이 있는 경우, 촬상 소자(110)의 제2 라인(L2)으로 출력되는 셔터 신호의 종류를 변경할 수 있다.
도 12는 본 발명의 또 다른 실시예에 따른 촬영 장치 제어 방법을 나타낸 흐름도이다.
본 실시예에 따른 촬영 장치 제어 방법은 제1 라인과 제2 라인을 포함하는 촬상 소자를 포함하는 촬영 장치를 제어한다. 우선 상기 촬영 장치 제어 방법은, 제1 노출 시간을 갖는 제1 셔터 신호와 제2 노출 시간을 갖는 제2 셔터 신호를 생성한다(S1202). 상기 제1 노출 시간은 사용자에 의해 설정되거나, 촬영 장치에 의해 자동으로 설정된 시간일 수 있다. 제2 노출 시간은 광원의 주파수에 대응된다.
다음으로, 상기 방법은, 촬상 소자의 제1 라인에서 제1 노출 시간으로 촬상 신호를 생성하고(S1204), 촬상 소자의 제2 라인에서 제2 노출 시간으로 광원 검출 신호를 생성한다(S1206).
다음으로, 상기 촬영 장치 제어 방법은, 촬상 신호 또는 광원 검출 신호에 기초하여, 촬상 신호에서 플리커가 발생하였는지 여부를 검출한다(S1208).
플리커가 발생한 경우, 상기 촬영 장치 제어 방법은 제3 셔터 신호를 생성하고(S1212), 상기 제3 셔터 신호를 이용하여, 촬상 소자(110)의 제2 라인으로부터 광원 검출 신호를 생성한다(S1214).
다음으로, 상기 촬영 장치 제어 방법은, 제1 라인으로부터 출력된 촬상 신호의 신호 레벨과 제2 라인으로부터 출력된 광원 검출 신호의 신호 레벨을 검출한다(S1216).
상기 제1 라인으로부터 출력된 촬상 신호의 신호 레벨과 상기 제2 라인으로부터 출력된 광원 검출 신호의 신호 레벨에 따라, 상기 촬상 신호에 적용될 게인이 결정된다(S1218). 상기 게인이 결정되면, 상기 촬영 장치 제어 방법은, 상기 촬상 신호에 상기 게인을 적용하여, 상기 촬상 신호를 보정한다(S1220).
도 13은 본 발명의 일 실시예에 따른 촬영 장치(100d)의 구조를 설명하기 위한 블록도이다.
본 발명의 일 실시예에 따른 촬영 장치(100d)는 촬영부(1310), 아날로그 신호 처리부(1320), 메모리(1330), 저장/판독 제어부(1340), 데이터 저장부(1342), 프로그램 저장부(1350), 표시 구동부(1362), 표시부(1364), CPU/DSP(1370), 및 조작부(1380)를 포함할 수 있다.
촬영 장치(100d)의 전체 동작은 CPU/DSP(1370)에 의해 통괄된다. CPU/DSP(1370)는 렌즈 구동부(1312), 조리개 구동부(1315), 촬상 소자 제어부(1319) 등에 각 구성 요소의 동작을 위한 제어 신호를 제공한다.
촬영부(1310)는 입사광으로부터 전기적인 신호의 영상을 생성하는 구성요소로서, 렌즈(1311), 렌즈 구동부(1312), 조리개(1313), 조리개 구동부(1315), 촬상 소자(1318), 및 촬상 소자 제어부(1319)를 포함한다.
렌즈(1311)는 복수 군, 복수 매의 렌즈들을 구비할 수 있다. 렌즈(1311)는 렌즈 구동부(1312)에 의해 그 위치가 조절된다. 렌즈 구동부(1312)는 CPU/DSP(1370)에서 제공된 제어 신호에 따라 렌즈(1311)의 위치를 조절한다.
조리개(1313)는 조리개 구동부(1315)에 의해 그 개폐 정도가 조절되며, 촬상 소자(1318)로 입사되는 광량을 조절한다.
렌즈(1311) 및 조리개(1313)를 투과한 광학 신호는 촬상 소자(1318)의 수광면에 이르러 피사체의 상을 결상한다. 상기 촬상 소자(1318)는 광학 신호를 전기 신호로 변환하는 CCD(Charge Coupled Device) 이미지센서 또는 CIS(Complementary Metal Oxide Semiconductor Image Sensor)일 수 있다. 이와 같은 촬상 소자(1318)는 촬상 소자 제어부(1319)에 의해 감도 등이 조절될 수 있다. 촬상 소자 제어부(1319)는 실시간으로 입력되는 영상 신호에 의해 자동으로 생성되는 제어 신호 또는 사용자의 조작에 의해 수동으로 입력되는 제어 신호에 따라 촬상 소자(1318)를 제어할 수 있다. 본 발명의 실시예들에 따른 촬상 소자(1318)의 노광 시간은 전자식 셔터로 조절될 수 있다.
아날로그 신호 처리부(1320)는 촬상 소자(1318)로부터 공급된 아날로그 신호에 대하여, 노이즈 저감 처리, 게인 조정, 파형 정형화, 아날로그-디지털 변환 처리 등을 수행한다.
아날로그 신호 처리부(1320)에 의해 처리된 신호는 메모리(1330)를 거쳐 CPU/DSP(1370)에 입력될 수도 있고, 메모리(1330)를 거치지 않고 CPU/DSP(1370)에 입력될 수도 있다. 여기서 메모리(1330)는 촬영 장치(100d)의 메인 메모리로서 동작하고, CPU/DSP(1370)가 동작 중에 필요한 정보를 임시로 저장한다. 프로그램 저장부(1330)는 촬영 장치(100d)를 구동하는 운영 시스템, 응용 시스템 등의 프로그램을 저장한다.
아울러, 촬영 장치(100d)는 이의 동작 상태 또는 촬영 장치(100d)에서 촬영한 영상 정보를 표시하도록 표시부(1364)를 포함한다. 표시부(1364)는 시각적인 정보 및/또는 청각적인 정보를 사용자에게 제공할 수 있다. 시각적인 정보를 제공하기 위해 표시부(1364)는 예를 들면, 액정 디스플레이 패널(LCD), 유기 발광 디스플레이 패널 등으로 이루어질 수 있다. 또한, 표시부(1364)는 터치 입력을 인식할 수 있는 터치스크린일 수 있다.
표시 구동부(1362)는 표시부(1364)에 구동 신호를 제공한다.
CPU/DSP(1370)는 입력되는 영상 신호를 처리하고, 이에 따라 또는 외부 입력 신호에 따라 각 구성부들을 제어한다. CPU/DSP(1370)는 입력된 영상 데이터에 대해 노이즈를 저감하고, 감마 보정(Gamma Correction), 색 필터 배열보간(color filter array interpolation), 색 매트릭스(color matrix), 색 보정(color correction), 색 향상(color enhancement) 등의 화질 개선을 위한 영상 신호 처리를 수행할 수 있다. 또한, 화질 개선을 위한 영상 신호 처리를 하여 생성한 영상 데이터를 압축 처리하여 영상 파일을 생성할 수 있으며, 또는 상기 영상 파일로부터 영상 데이터를 복원할 수 있다. 영상의 압축형식은 가역 형식 또는 비가역 형식이어도 된다. 적절한 형식의 예로서, 정지 영상에 경우, JPEG(Joint Photographic Experts Group)형식이나 JPEG 2000 형식 등으로 변환도 가능하다. 또한, 동영상을 기록하는 경우, MPEG(Moving Picture Experts Group) 표준에 따라 복수의 프레임들을 압축하여 동영상 파일을 생성할 수 있다. 영상 파일은 예를 들면 Exif(Exchangeable image file format) 표준에 따라 생성될 수 있다.
CPU/DSP(1370)로부터 출력된 이미지 데이터는 메모리(1330)를 통하여 또는 직접 저장/판독 제어부(1340)에 입력되는데, 저장/판독 제어부(1340)는 사용자로부터의 신호에 따라 또는 자동으로 영상 데이터를 데이터 저장부(1342)에 저장한다. 또한 저장/판독 제어부(1340)는 데이터 저장부(1342)에 저장된 영상 파일로부터 영상에 관한 데이터를 판독하고, 이를 메모리(1330)를 통해 또는 다른 경로를 통해 표시 구동부에 입력하여 표시부(1364)에 이미지가 표시되도록 할 수도 있다. 데이터 저장부(1342)는 탈착 가능한 것일 수도 있고 촬영 장치(100d)에 영구 장착된 것일 수 있다.
또한, CPU/DSP(1370)에서는 불선명 처리, 색채 처리, 블러 처리, 에지 강조 처리, 영상 해석 처리, 영상 인식 처리, 영상 이펙트 처리 등도 행할 수 있다. 영상 인식 처리로 얼굴 인식, 장면 인식 처리 등을 행할 수 있다. 아울러, CPU/DSP(1370)에서는 표시부(1364)에 디스플레이하기 위한 표시 영상 신호 처리를 행할 수 있다. 예를 들어, 휘도 레벨 조정, 색 보정, 콘트라스트 조정, 윤곽 강조 조정, 화면 분할 처리, 캐릭터 영상 등 생성 및 영상의 합성 처리 등을 행할 수 있다. 상기 CPU/DSP(1370)는 외부 모니터와 연결되어, 외부 모니터에 디스플레이 되도록 소정의 영상 신호 처리를 행할 수 있으며, 이렇게 처리된 영상 데이터를 전송하여 상기 외부 모니터에서 해당 영상이 디스플레이 되도록 할 수 있다.
또한 CPU/DSP(1370)는 프로그램 저장부(1330)에 저장된 프로그램을 실행하거나, 별도의 모듈을 구비하여, 오토 포커싱, 줌 변경, 초점 변경, 자동 노출 보정 등을 제어하기 위한 제어 신호를 생성하여, 조리개 구동부(1315), 렌즈 구동부(1312), 및 촬상 소자 제어부(1319)에 제공하고, 셔터, 스트로보 등 촬영 장치(100d)에 구비된 구성 요소들의 동작을 총괄적으로 제어할 수 있다.
조작부(1380)는 사용자가 제어 신호를 입력할 수 있는 곳이다. 조작부(1380)는 정해진 시간 동안 촬상 소자(1318)를 빛에 노출하여 사진을 촬영하도록 하는 셔터-릴리즈 신호를 입력하는 셔터-릴리즈 버튼, 전원의 온-오프를 제어하기 위한 제어 신호를 입력하는 전원 버튼, 입력에 따라 화각을 넓어지게 하거나 화각을 좁아지게 줌 버튼, 모드 선택 버튼, 기타 촬영 설정값 조절 버튼 등 다양한 기능 버튼들을 포함할 수 있다. 조작부(1380)는 버튼, 키보드, 터치 패드, 터치스크린, 원격 제어기 등과 같이 사용자가 제어 신호를 입력할 수 있는 어떠한 형태로 구현되어도 무방하다.
도 13에 도시된 촬영 장치(100d)는 본 발명의 일 실시예이며, 본 발명의 실시예들에 따른 촬영 장치(100d)는 도 13에 도시된 촬영 장치(100d)에 한정되지 않음은 물론이다.
도 13의 촬상 소자(1318)은 앞서 설명한 실시예들의 촬상 소자(110)에 대응할 수 있다. 또한 영상 처리부(120a, 120b)와 제어부(1120)는 CPU/DSP(1370) 내에 구현될 수 있다. 셔터 제어부(130, 130a, 130b)는 촬상 소자 제어부(1319) 내에 구현될 수 있다. 광학부(730)는 렌즈(1311) 및 조리개(1313)에 대응될 수 있다.
한편, 본 발명은 컴퓨터 판독가능 저장매체에 컴퓨터가 판독 가능한 코드를 저장하여 구현하는 것이 가능하다. 상기 컴퓨터 판독가능 저장매체는 컴퓨터 시스템에 의하여 판독될 수 있는 데이터가 저장되는 모든 종류의 저장 장치를 포함한다.
상기 컴퓨터가 판독 가능한 코드는, 상기 컴퓨터 판독가능 저장매체로부터 프로세서에 의하여 독출되어 실행될 때, 본 발명에 따른 촬영 장치 제어 방법을 구현하는 단계들을 수행하도록 구성된다. 상기 컴퓨터가 판독 가능한 코드는 다양한 프로그래밍 언어들로 구현될 수 있다. 그리고 본 발명의 실시예들을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 통상의 기술자들에 의하여 용이하게 프로그래밍될 수 있다.
컴퓨터 판독가능 저장매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 반송파(예를 들어 인터넷을 통한 전송)의 형태로 구현하는 것을 포함한다. 또한, 컴퓨터 판독가능 저장매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 판독 가능한 코드가 저장되고 실행되는 것도 가능하다.
이상과 첨부된 도면을 참조하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.

Claims (20)

  1. 제1 노출 시간으로 촬상 신호를 생성하는 제1 라인과, 광원의 주파수에 따른 제2 노출 시간으로 광원 검출 신호를 생성하는 제2 라인을 포함하는 촬상 소자;
    셔터 신호를 생성하여 상기 촬상 소자에 출력하고, 상기 촬상 소자의 노출 시간을 조절하는 셔터 제어부;
    상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨을 검출하고, 상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨에 따라, 게인을 결정하고, 상기 제1 라인으로부터 출력된 촬상 신호에 상기 게인을 적용하여, 보정된 촬상 신호를 생성하는 영상 처리부를 포함하는, 촬영 장치.
  2. 제1항에 있어서,
    상기 촬상 소자는, 상기 제1 라인과 상기 제2 라인을 포함하고, 반복적으로 배치된 복수의 라인 쌍들을 포함하고,
    동일 라인 쌍에 속한 상기 제1 라인과 상기 제2 라인은 인접한 픽셀 라인들인, 촬영 장치.
  3. 제1항에 있어서,
    상기 제2 노출 시간은 광원의 밝기 변화 주기의 1/2인, 촬영 장치.
  4. 제1항에 있어서, 상기 셔터 제어부는,
    상기 제1 노출 시간을 갖는 제1 셔터 신호를 생성하여, 상기 제1 라인에 출력하는 제1 셔터 제어부; 및
    상기 제2 노출 시간을 갖는 제2 셔터 신호를 생성하여, 상기 제2 라인에 출력하는 제2 셔터 제어부를 포함하는 촬영 장치.
  5. 제4항에 있어서,
    상기 제2 셔터 신호는, 제1 주파수의 광원에 대응하는 셔터 신호이고,
    상기 촬영 장치는,
    제2 주파수의 광원에 대응하는 제3 노출 시간을 갖는 제3 셔터 신호를 생성하여 상기 제2 라인에 출력하는 제3 셔터 제어부; 및
    상기 촬상 신호 및 상기 광원 검출 신호 중 적어도 하나에 기초하여, 상기 제2 셔터 신호 및 상기 제3 셔터 신호 중 하나를 상기 제2 라인으로 출력하도록 제어하는 제어부를 더 포함하는 촬영 장치.
  6. 제4항에 있어서,
    상기 제1 라인 및 상기 제2 라인은 상기 촬상 소자 상에서 번갈아서 배치되고,
    상기 제1 셔터 신호의 펄스와 상기 제2 셔터 신호의 펄스는, 노출 종료 시점이 리드아웃 주기에 대응하는 간격을 갖고 라인 순서에 따라 진행하는, 촬영 장치.
  7. 제1항에 있어서,
    상기 영상 처리부는, 상기 제1 노출 시간과 상기 제2 노출 시간의 비율에 따라, 상기 게인, 상기 촬상 신호, 및 상기 광원 검출 신호 중 적어도 하나를 보정하는, 촬영 장치.
  8. 제1 노출 시간으로 촬상 소자의 제1 라인의 픽셀들을 이용하여 촬상 신호를 생성하는 단계;
    상기 촬상 소자의 제2 라인의 픽셀들을 이용하여 광원의 주파수에 따른 제2 노출 시간으로, 광원 검출 신호를 생성하는 단계;
    상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨을 검출하는 단계;
    상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨에 따라, 게인을 결정하는 단계;
    상기 제1 라인으로부터 출력된 촬상 신호에 상기 게인을 적용하여, 보정된 촬상 신호를 생성하는 단계를 포함하는, 촬영 장치 제어 방법.
  9. 제8항에 있어서,
    상기 촬상 소자는, 상기 제1 라인과 상기 제2 라인을 포함하고, 반복적으로 배치된 복수의 라인 쌍들을 포함하고,
    동일 라인 쌍에 속한 상기 제1 라인과 상기 제2 라인은 인접한 픽셀 라인들인, 촬영 장치 제어 방법.
  10. 제8항에 있어서,
    상기 제2 노출 시간은 광원의 밝기 변화 주기의 1/2인, 촬영 장치 제어 방법.
  11. 제8항에 있어서,
    상기 제1 노출 시간을 갖는 제1 셔터 신호를 생성하여, 상기 제1 라인에 출력하는 단계; 및
    상기 제2 노출 시간을 갖는 제2 셔터 신호를 생성하여, 상기 제2 라인에 출력하는 단계를 더 포함하는 촬영 장치 제어 방법.
  12. 제11항에 있어서,
    상기 제2 셔터 신호는 제1 주파수의 광원에 대응하는 셔터 신호이고,
    상기 촬영 장치 제어 방법은,
    제2 주파수의 광원에 대응하는 제3 노출 시간을 갖는 제3 셔터 신호를 생성하여 상기 제2 라인에 출력하는 단계; 및
    상기 촬상 신호 및 상기 광원 검출 신호 중 적어도 하나에 기초하여, 상기 제2 셔터 신호 및 상기 제3 셔터 신호 중 하나를 상기 제2 라인으로 출력하는 단계를 더 포함하는 촬영 장치 제어 방법.
  13. 제11항에 있어서,
    상기 제1 라인 및 상기 제2 라인은 상기 촬상 소자 상에서 번갈아서 배치되고,
    상기 제1 셔터 신호의 펄스와 상기 제2 셔터 신호의 펄스의 노출 종료 시점이 리드아웃 주기에 대응하는 간격을 갖고 라인 순서에 따라 진행하는, 촬영 장치 제어 방법.
  14. 제8항에 있어서,
    상기 제1 노출 시간과 상기 제2 노출 시간의 비율에 따라, 상기 게인, 상기 촬상 신호, 및 상기 광원 검출 신호 중 적어도 하나를 보정하는 단계를 더 포함하는 촬영 장치 제어 방법.
  15. 프로세서에 의해 독출되어 수행되었을 때, 촬영 장치 제어 방법을 수행하는 컴퓨터 프로그램 코드들을 저장하는 컴퓨터 판독가능 기록매체에 있어서, 상기 촬영 장치 제어 방법은,
    제1 노출 시간으로 촬상 소자의 제1 라인의 픽셀들을 이용하여 촬상 신호를 생성하는 단계;
    상기 촬상 소자의 제2 라인의 픽셀들을 이용하여 광원의 주파수에 따른 제2 노출 시간으로, 광원 검출 신호를 생성하는 단계;
    상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨을 검출하는 단계;
    상기 제1 라인의 신호 레벨과 상기 제2 라인의 신호 레벨에 따라, 게인을 결정하는 단계;
    상기 제1 라인으로부터 출력된 촬상 신호에 상기 게인을 적용하여, 보정된 촬상 신호를 생성하는 단계를 포함하는, 컴퓨터 판독가능 기록매체.
  16. 제15항에 있어서,
    상기 촬상 소자는, 상기 제1 라인과 상기 제2 라인을 포함하고, 반복적으로 배치된 복수의 라인 쌍들을 포함하고,
    동일 라인 쌍에 속한 상기 제1 라인과 상기 제2 라인은 인접한 픽셀 라인들인, 컴퓨터 판독가능 기록매체.
  17. 제15항에 있어서,
    상기 제2 노출 시간은 광원의 밝기 변화 주기의 1/2인, 컴퓨터 판독가능 기록매체.
  18. 제15항에 있어서, 상기 촬영 장치 제어 방법은,
    상기 제1 노출 시간을 갖는 제1 셔터 신호를 생성하여, 상기 제1 라인에 출력하는 단계; 및
    상기 제2 노출 시간을 갖는 제2 셔터 신호를 생성하여, 상기 제2 라인에 출력하는 단계를 더 포함하는 컴퓨터 판독가능 기록매체.
  19. 제18항에 있어서,
    상기 제2 셔터 신호는 제1 주파수의 광원에 대응하는 셔터 신호이고,
    상기 촬영 장치 제어 방법은,
    제2 주파수의 광원에 대응하는 제3 노출 시간을 갖는 제3 셔터 신호를 생성하여 상기 제2 라인에 출력하는 단계; 및
    상기 촬상 신호 및 상기 광원 검출 신호 중 적어도 하나에 기초하여, 상기 제2 셔터 신호 및 상기 제3 셔터 신호 중 하나를 상기 제2 라인으로 출력하는 단계를 더 포함하는 컴퓨터 판독가능 기록매체.
  20. 제18항에 있어서,
    상기 제1 라인 및 상기 제2 라인은 상기 촬상 소자 상에서 번갈아서 배치되고,
    상기 제1 셔터 신호의 펄스와 상기 제2 셔터 신호의 펄스의 노출 종료 시점이 리드아웃 주기에 대응하는 간격을 갖고 라인 순서에 따라 진행하는, 컴퓨터 판독가능 기록매체.
KR1020140009177A 2014-01-24 2014-01-24 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체 KR20150088645A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140009177A KR20150088645A (ko) 2014-01-24 2014-01-24 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140009177A KR20150088645A (ko) 2014-01-24 2014-01-24 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체

Publications (1)

Publication Number Publication Date
KR20150088645A true KR20150088645A (ko) 2015-08-03

Family

ID=53873007

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140009177A KR20150088645A (ko) 2014-01-24 2014-01-24 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체

Country Status (1)

Country Link
KR (1) KR20150088645A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10404922B2 (en) 2016-01-13 2019-09-03 Samsung Electronics Co., Ltd. Image capturing apparatus with flicker compensation and method of operating the same

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10404922B2 (en) 2016-01-13 2019-09-03 Samsung Electronics Co., Ltd. Image capturing apparatus with flicker compensation and method of operating the same

Similar Documents

Publication Publication Date Title
JP4626689B2 (ja) 撮像装置、補正回路および補正方法
US10986262B2 (en) Imaging apparatus, control method, and non-transitory storage medium
US10630920B2 (en) Image processing apparatus
KR20150109177A (ko) 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체
KR20140027816A (ko) 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체
US9979876B2 (en) Imaging apparatus, imaging method, and storage medium
US20170257591A1 (en) Signal processing apparatus, image capturing apparatus, control apparatus, signal processing method, and control method
KR101817655B1 (ko) 삼차원 영상 촬영 장치 및 방법
US20110063460A1 (en) Imaging apparatus
US20170142383A1 (en) Projection apparatus, method for controlling the same, and projection system
US9357133B2 (en) Digital photographing apparatus, auto-focusing method, and computer-readable storage medium for executing the auto-focusing method
US20070269133A1 (en) Image-data noise reduction apparatus and method of controlling same
JP2021097347A (ja) 撮像装置およびその制御方法、プログラム
KR20080029051A (ko) 이미지 센서를 구비한 장치 및 영상 획득 방법
JP4055727B2 (ja) プロジェクタ及びパターン画像表示方法
JP2006135381A (ja) キャリブレーション方法およびキャリブレーション装置
KR20150088645A (ko) 촬영 장치, 그 제어 방법, 및 컴퓨터 판독가능 기록매체
JP2006108988A (ja) キャリブレーション装置
US20200112665A1 (en) Image capturing apparatus and control method thereof, and non-transitory storage medium
US11665438B2 (en) Electronic device capable of acquiring line-of-sight information
US20220272252A1 (en) Imaging apparatus, method for reducing color unevenness due to flicker, and computer readable recording medium
JP2012244346A (ja) 撮像装置及び撮像方法
US20200045280A1 (en) Imaging apparatus and endoscope apparatus
JP2017083788A (ja) 表示装置及び表示装置の制御方法
US20080018747A1 (en) Solid-state image pickup module

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid