KR20100079832A - 지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법 - Google Patents

지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법 Download PDF

Info

Publication number
KR20100079832A
KR20100079832A KR1020080138409A KR20080138409A KR20100079832A KR 20100079832 A KR20100079832 A KR 20100079832A KR 1020080138409 A KR1020080138409 A KR 1020080138409A KR 20080138409 A KR20080138409 A KR 20080138409A KR 20100079832 A KR20100079832 A KR 20100079832A
Authority
KR
South Korea
Prior art keywords
subject
motion
time
window
timer
Prior art date
Application number
KR1020080138409A
Other languages
English (en)
Other versions
KR101567812B1 (ko
Inventor
이장원
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020080138409A priority Critical patent/KR101567812B1/ko
Priority to US12/648,705 priority patent/US8711232B2/en
Publication of KR20100079832A publication Critical patent/KR20100079832A/ko
Application granted granted Critical
Publication of KR101567812B1 publication Critical patent/KR101567812B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00—Still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/144—Movement detection

Abstract

본 발명에서는 디지털 카메라 및 그 제어방법이 개시된다. 상기 디지털 카메라는 시간상으로 선후하여 취득된 영상 프레임들로부터 관찰되는 움직임 정도를 산출해내는 움직임 산출부와, 산출된 움직임에 따라 의도하지 않은 방해 피사체의 침입 여부를 판단하는 한편으로, 설정된 타이머 시간의 종료 여부를 판단하여 촬영동작의 개시 여부를 판단하는 촬영개시 판단부를 포함한다.
본 발명에 의하면, 피사체 구도의 범위 내에 원하지 않는 피사체가 침입하는 것을 감지하고 촬영동작을 보류시켰다가 그 이후에 촬영을 개시하는 지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법이 제공된다.

Description

지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법{Digital camera supporting an intelligent self-timer mode and controlling method for the same}
본 발명은 디지털 카메라 및 그 제어방법에 관한 것으로, 보다 구체적으로, 피사체 구도의 범위 내에 원하지 않는 피사체가 침입하는 것을 감지하고 촬영동작을 보류시켰다가 그 이후에 촬영을 개시하는 지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법에 관한 것이다.
카메라의 다양한 기능 중에 셀프 타이머 기능은 타이머 촬영시작으로부터 소정의 시간 경과 후에 촬영이 수행되도록 하는 일종의 시간지연 기능으로, 사진의 흔들림을 방지하거나 촬영자가 자신을 피사체 대상으로 하고자 할 때 사용된다.
그러나, 이러한 셀프 타이머 촬영은 보통 야외에서 수행되고, 촬영자와 카메라 간의 거리가 멀고 촬영이 개시되기까지의 대기시간이 가변적이어서 예기치 못한 상황으로 인해 원하지 않는 사진 촬영이 수행되는 경우가 있다. 즉, 카메라와 피사체가 서로 떨어져 있기 때문에 사람의 왕래가 빈번한 야외에서 촬영시 셀프 타이머 시간이 종료되는 촬영시점에 진정한 피사체가 아닌 다른 피사체가 끼어들어 촬영을 방해하는 경우가 발생하여 다시 촬영해야 하거나 또는 혼잡한 곳에서는 타이머 촬영을 하기 어렵다는 문제가 발생된다.
본 발명의 목적은 피사체 구도의 범위 내에 의도하지 않은 피사체가 침입하는 것을 감지하고 피사체의 침입이 배제된 이후에 촬영을 개시하는 지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법을 제공하는 것이다.
상기와 같은 목적 및 그 밖의 목적을 달성하기 위한 본 발명의 디지털 카메라는,
시간상으로 선후하여 취득된 영상 프레임들로부터 관찰되는 움직임 정도를 산출해내는 움직임 산출부; 및
산출된 움직임에 따라 의도하지 않은 방해 피사체의 침입 여부를 판단하는 한편으로, 설정된 타이머 시간의 종료 여부를 판단하여 촬영동작의 개시 여부를 판단하는 촬영개시 판단부;를 포함한다.
바람직하게, 상기 디지털 카메라는 영상 프레임 상에 서브 윈도를 설정하는 윈도 설정부를 더 포함하고, 상기 움직임 산출부는 설정된 서브 윈도 내에서 움직임 벡터를 산출해낸다. 이때, 상기 윈도 설정부는 방해 피사체가 위치할 개연성이 높은 영상 프레임의 좌우영역 및 상하영역 중의 적어도 어느 한 영역 상에 서브 윈도를 설정하는 것이 바람직하다.
바람직하게, 상기 촬영개시 판단부는 방해 피사체가 침입하지 않았고, 동시에 설정된 타이머 시간이 종료되었다고 판단되면, 촬영개시신호를 출력한다.
바람직하게, 상기 움직임 산출부는 가우시안 필터를 적용하여 에지(edge)를 구성하는 특징점들을 추출해내고, 시간상 선후하는 프레임들 간에 정합되는 특징점들로부터 움직임 벡터를 산출해낸다.
본 발명의 실시형태에서, 상기 촬영개시 판단부는 산출된 움직임 정도와 사전에 설정된 허용 움직임 정도를 상호 비교하여 그 대소관계에 따라 방해 피사체의 침입 여부를 판단할 수 있다. 이때, 상기 허용 움직임 정도는 사용자의 설정에 의해 입력될 수 있다.
바람직하게, 상기 타이머 시간은 셀프 타이머에 관한 사용자의 설정에 따라 입력될 수 있다.
본 발명의 다른 측면에 따른 디지털 카메라의 제어방법은,
시간상으로 선후하여 취득된 영상 프레임들로부터 관찰되는 움직임 정도를 산출해내는 움직임 산출단계;
산출된 움직임에 따라 의도하지 않은 방해 피사체의 침입 여부를 판단하는 단계;
설정된 타이머 시간의 종료 여부를 판단하는 단계; 및
상기 방해 피사체의 침입 여부와 타이머 시간의 종료 여부에 따라 촬영동작의 개시 여부를 판단하는 단계;를 포함한다.
바람직하게, 상기 촬영개시 판단단계에서는 방해 피사체가 침입하지 않았고 설정된 타이머 시간이 종료되었다고 판단되면, 촬영개시신호를 출력한다.
바람직하게, 상기 디지털 카메라의 제어방법은 영상 프레임 상에 서브 윈도 를 설정하는 윈도 설정단계를 더 포함하고, 상기 움직임 산출단계에서는 설정된 서브 윈도 내에서 움직임 벡터를 산출해낸다. 상기 윈도 설정단계에서는 방해 피사체가 위치할 개연성이 높은 영상 프레임의 좌우영역 및 상하영역 중의 적어도 어느 한 영역 상에 서브 윈도를 설정할 수 있다.
본 발명의 실시형태에 의하면, 상기 움직임 산출단계에서는 가우시안 필터를 적용하여 에지에 해당되는 특징점들을 추출해내고, 시간상 선후하는 프레임들 간에 정합되는 특징점들로부터 움직임 벡터를 산출해낸다.
본 발명의 디지털 카메라 및 그 제어방법에 의하면, 셀프 타이머(self-timer) 기능을 설정하여 촬영할 때 단순히 타이머 시간의 종료와 함께 촬영동작을 개시하지 않고, 피사체 구도의 범위 내에 원하지 않는 피사체가 침입하는 것을 감지하고 촬영동작을 보류시켰다가 피사체의 침입이 배제된 이후에 촬영을 개시하는 지능형 셀프 타이머 동작을 수행함으로써 의도하지 않은 피사체가 촬영되는 오류를 방지할 수 있다. 이로써, 진정한 피사체 중심의 원하는 사진이 촬영되도록 하여 카메라에 대한 제품 만족도를 높일 수 있고, 재촬영에 따른 사용자의 불편을 제거하고 디지털 카메라의 구동자원이나 메모리 자원을 절약할 수 있다.
이하, 본 발명의 바람직한 실시형태에 관한 디지털 카메라 및 그 제어방법에 대해 상세히 설명하기로 한다. 본 명세서를 통하여 디지털 카메라란 적정의 촬영 기능을 갖춘 디지털 모바일 기기로서, 단순히 카메라라는 형태적인 특징에 기반하 여 분류된 협의의 카메라만을 의미하는 것은 아니며, 캠코더, 휴대폰, PDA 등과 같이 휴대성과 촬영 기능을 겸비한 디지털 기기들을 모두 포괄하는 광의적인 의미로 사용된다. 도 1에는 본 발명에 따른 디지털 카메라의 전체적인 구성이 개략적으로 도시되어 있다. 도시된 디지털 카메라는 다수의 광학 렌즈들을 포함하여 피사체 영상을 촬상면에 대해 결상시키기 위한 광학 유닛(110), 상기 광학 유닛(110)을 경유한 피사체 영상을 전기적인 영상신호로 변환하기 위한 촬상소자(120), 상기 촬상소자(120)의 출력신호를 처리하여 디지털 영상신호로 변환하기 위한 아날로그 프론트 엔드(Analog Front End;AFE) 회로(130), 영상처리를 위한 작업영역을 제공하도록 영상신호를 일시적으로 저장하는 DRAM(Dynamic Random Access Memory) 등의 메모리(180), 피사체의 영상 데이터가 정지영상 또는 동영상 파일 형태로 저장되는 기록매체(170), 그리고, 전반적인 데이터 흐름과 각 구성부분들을 총괄적으로 제어하는 디지털 신호 처리기(150)를 포함한다.
상기 광학 유닛(110)은 광축 방향을 따라 전후 이동하며 초점 거리를 변화시키는 줌 렌즈(112), 촬상소자(120)로의 노광시간 및 입사 광량을 조절하기 위한 셔터(114)와 조리개(116), 그리고, 촬상소자(120)에 결상되는 피사체 영상의 초점을 조절하는 포커스 렌즈(118)를 포함한다. 상기 줌 렌즈(112), 셔터(114), 조리개(116), 그리고 포커스 렌즈(118)는 드라이버(111)로 제어되는 액츄에이팅 모터(미도시)에 의해 구동될 수 있다.
상기 촬상소자(120)는 예를 들어, CCD(Charged Coupled Device) 또는 CMOS(Complementary Metal Oxide Semiconductor) 이미지 센서로서, 광학 유닛(110) 을 경유하여 입사된 피사체의 영상을 전기적인 화상 신호로 변환한다. 상기 촬상소자(120)의 동작은 타이밍 생성기(121;Timing Generator;TG)를 개재하여 디지털 신호 처리기(150)에 의해 제어될 수 있다.
상기 아날로그 프론트엔드 회로(130;AFE 회로)는 촬상소자(120)의 출력 신호에 대해, CDS(Correlated Double Sampling) 처리와 ADC(Analog Digital Conversion) 처리를 수행함으로써, 촬상소자(120)로부터 출력된 아날로그 화상 신호를 디지털 영상 신호로 변환한다. 양자화된 디지털 영상 신호는 인코더/디코더(160)로 전달되어, 규정된 압축방식에 따라 부호화 데이터로 변환된 후 기록매체(170)에 저장된다. 상기 메모리(180)는 인코더/디코더(160)와 디지털 신호 처리기(150)의 데이터 처리를 위한 작업영역을 제공한다. 또한, 상기 메모리(180)는 시간상으로 선후하는 프레임들을 임시로 저장하여 두고 움직임 벡터를 산출하기 위한 작업공간을 제공할 수도 있다.
상기 디지털 신호 처리기(150)는 EEPROM(165;Electronically Erasable and Programmable ROM)에 기록된 프로그램을 실행함으로써 디지털 카메라의 각 구성요소들을 총괄적으로 제어하게 되며, 각종 처리를 수행하게 된다. 특히, 상기 디지털 신호 처리기(150)는 피사체 구도의 범위 내에 원하지 않는 피사체가 침입하는 것을 감지하고 촬영동작을 보류시켰다가 그 이후에 촬영을 개시하는 지능형 셀프 타이머 동작을 수행함으로써 의도하지 않은 피사체가 촬영되는 오류를 방지한다. 즉, 상기 디지털 신호 처리기(150)는 단순히 촬영자가 설정해둔 타이머 시간의 종료에 따라 촬영을 개시하지 않고, 설정된 타이머 시간이 종료된 이후에도 의도하지 않은 방해 피사체가 끼어드는 것을 감지하고 촬영을 지연시켰다가 방해 피사체가 배제된 이후에 비로소 촬영을 개시한다는 것이다.
도 2에는 지능형 셀프 타이머 동작을 수행하기 위한 세부 구성이 도시되어 있다. 도면을 참조하면, 상기 디지털 신호 처리기(150)는 원도 설정부(151), 움직임 산출부(140), 및 촬영개시 판단부(155)를 포함한다. 상기 윈도 설정부(151)는 영상 프레임(Frame k-1,k) 내에 적정의 서브 윈도를 설정하는데, 방해 피사체가 위치할 개연성이 높은 영상 프레임(Frame k-1,k)의 가장자리 영역을 따라 적정의 서브 윈도를 설정할 수 있다. 도 3에 도시된 바와 같이, 상기 윈도 설정부(151)는 프레임 중앙영역을 둘러싸는 좌우영역에 서브 윈도(WL,WR)를 설정할 수 있으며, 또는 영상 프레임(Frame k-1,k)의 좌우영역과 상하영역을 따라 서브 윈도(WL,WR,WU,WD)를 설정할 수도 있다. 상기 서브 위도(WL,WR,WU,WD)는 방해 피사체의 침입 여부를 검출하는 후보 영역이 되며, 설정된 서브 윈도(WL,WR,WU,WD) 내로부터 움직임 벡터가 산출되고, 움직임 벡터의 대소관계에 따라 방해 피사체의 침입 여부를 판단하게 된다. 도 4에 도시된 바와 같이, 서브 윈도(WL,WR,WU,WD)가 설정된 프레임 상하좌우 영역은 방해 피사체의 침입을 인식하기 위한 움직임 감시 영역이 된다.
상기 움직임 산출부(140)는 시간상으로 연속하는 현재의 입력 프레임(Frame k)과 이전의 참조 프레임(Frame k-1)을 영상 블록 단위로 비교하여 서로 정합되는 영상 블록을 찾아내고, 정합되는 영상 블록 간의 상대적인 위치로부터 움직임 벡터 를 산출하게 된다. 보다 구체적으로 상기 움직임 산출부(140)는 현재 프레임(Frame k)의 주목하는 영상 블록을 참조 프레임(Frame k-1)의 대응되는 영역 상에서 픽셀 단위로 이동시키면서 정합되는 영상 블록을 찾아내며, 서로 정합되는 영상 블록들 간의 상대적인 위치를 움직임 벡터로 산출한다. 예를 들어, 모든 픽셀에 대해 움직임 벡터를 산출하는 것은 처리시간의 지연을 초래하므로, 시간상으로 연속하는 양 프레임에 대해 가우시안 필터(Gaussian filter)를 반복적으로 적용하여 불필요한 영역들을 제거해내고 에지(edge) 내지 코너(corner)를 구성하는 특징점들을 원하는 개수만큼 선별해낸 다음, 최소자승법(Least Square Method)을 이용하여 양 프레임(Frame k-1,k)들 간에 가장 근사하게 정합하는 특징점들을 검출해내고 움직임 벡터를 산출하는 Lucas-Kanade 알고리즘이 적용될 수 있다. 예를 들어, 상기 움직임 산출부(140)는 시간상으로 연속하여 취득되는 영상 프레임(Frame k,k-1)들로부터 휘도분포를 참조하여 피사체의 윤곽정보만을 추출해내는 영상 변환부(141)와, 변환된 영상 데이터에 가우시안 필터를 적용하여 특징점들을 추출해내는 특징점 추출부(143)와, 시간상으로 연속하는 양 프레임들(Frame k,k-1) 간에 정합되는 특징점들을 추출해내기 위해 특징점들 간에 상관계수를 산출해내는 상관계수 산출부(145)와, 상관계수가 가장 큰 정합되는 특징점들로부터 움직임 벡터를 산출해내는 움직임 벡터 산출부(147)를 포함할 수 있다.
도 5a 및 도 5b에는 시간상으로 선후하는 영상 프레임들이 각기 도시되어 있으며, 도 6에는 도 5a 및 도 5b의 영상 프레임들로부터 산출된 옵티컬 플로우(optical flow)가 도시되어 있다. 옵티컬 플로우란 시간상으로 선후하는 영상 프 레임들에서 관찰되는 외견상의 움직임을 일군의 움직임 벡터들로 표현한 것이며, Lucas-Kanade 알고리즘을 적용함으로써 산출될 수 있다. 도 7에는 도 6의 VII 부분을 확대하여 도시한 옵티컬 플로우가 도시되어 있다. 도면을 참조하면, 정지된 피사체에 관한 옵티컬 플로우는 약하게 나타나는데 반하여, 동적인 피사체에 관한 옵티컬 플로우는 강하게 나타나는 것을 알 수 있다. 도 6에서는 영상 프레임의 전체영역에 대한 옵티컬 플로우가 도시되어 있으나, 연산처리능력과 시간지연을 고려하여, 예를 들어, 서브 윈도(WL,WR,WU,WD)가 설정된 영상 프레임의 가장자리 영역을 중심으로 움직임 벡터들을 산출해낼 수 있다.
도 2를 참조하면, 상기 촬영개시 판단부(155)는 산출된 움직임 벡터들을 취합하여, 서브 윈도(WL,WR,WU,WD) 내로 침입한 방해 피사체가 존재하는지 여부를 판단하게 된다. 예를 들어, 상기 촬영개시 판단부(155)는 서브 윈도(WL,WR,WU,WD)에서 산출된 일군의 움직임 벡터들을 평균하고, 이를 허용된 움직임 정도와 비교하여 그 대소관계에 따라 방해 피사체의 침입 여부를 판단할 수 있다. 대안으로, 상기 촬영개시 판단부(155)는 서브 윈도(WL,WR,WU,WD) 내에서 산출된 최대 움직임 벡터와 허용된 움직임 정도를 비교하여 그 대소관계에 따라 방해 피사체의 침입 여부를 판단할 수도 있다.
상기 촬영개시 판단부(155)는 방해 피사체의 침입 여부와 시적 기준을 함께 고려하여 촬영시점을 결정한다. 상기 촬영개시 판단부(155)는 셀프 타이머(153)의 가동시로부터 타이머 시간이 종료되었는지 여부를 판단한다. 셀프 타이머 모드가 설정됨에 따라 셀프 타이머(153)가 초기화되고, 셀프 타이머(153)가 가동되며 이후의 경과시간이 산출된다. 타이머 시간은 촬영자에 의해 설정되고 촬영준비를 위해 일정시간 촬영을 대기시키는 것이므로, 타이머 시간의 종료를 기다렸다가 촬영동작을 개시한다. 다만, 타이머 시간의 종료와 함께 방해 피사체가 없다고 판단될 때, 비로소 촬영개시신호를 출력한다.
도 8은 본 발명의 일 실시형태에 관한 디지털 카메라의 제어방법을 설명하기 위한 도면으로, 지능형 셀프 타이머 동작의 흐름도이다. 디지털 신호 처리기(150)는 사용자의 요청에 따라 셀프 타이머 설정화면을 표시하고 사용자의 설정을 입력받는다(S10). 예를 들어, 상기 디지털 신호 처리기(150)는 타이머 시간과 허용 움직임 정도에 관한 사용자의 설정 값을 입력받을 수 있다. 그리고, 셀프 타이머(153)를 초기화시키고, 셀프 타이머(153)를 가동하여 경과시간을 산출하게 된다(S11). 디지털 신호 처리기(150)는 사용자에 의해 설정된 타이머 시간의 종료 여부를 점검하고(S12), 타이머 시간의 종료와 함께 시간상으로 선후하는 영상 프레임들(Frame k-1,k)로부터 움직임 벡터를 산출해낸다(S13~S16). 먼저 시간상으로 선행하는 프레임(Frame k-1)을 참조 프레임으로 하여 메모리(180)에 저장해 두는 한편으로, 이어서 입력되는 프레임(Frame k)을 현재 프레임으로 하여 메모리(180)에 저장해둔다(S13,S14). 상기 메모리(180)는 시간상으로 선후하는 프레임들(Frame k-1,k)을 임시로 저장해두고 움직임 벡터를 산출하기 위한 작업공간을 제공하는데, 상기 영상 프레임들(Frame k-1,k)은 디지털 신호 처리기(150)에 내장된 프레임 메모리 내에 저장될 수도 있다.
다음에, 시간상으로 연속하여 취득된 양 프레임(Frame k-1,k) 상에 적정의 서브 윈도를 설정할 수 있다(S15). 예를 들어, 상기 서브 윈도(WL,WR,WU,WD)는 방해 피사체의 침입이 예상되는 프레임 좌우영역에 설정되거나, 또는 좌우영역과 상하영역을 포함하는 프레임의 가장자리를 따라 서브 윈도(WL,WR,WU,WD)가 설정될 수도 있다. 그리고, 서브 윈도(WL,WR,WU,WD) 내에서 관찰되는 움직임 정도(m)를 산출하는데, 예를 들어, 서브 윈도(WL,WR,WU,WD)에 가우시안 필터를 반복적으로 적용하여 원하는 개수의 특징점들을 추출해내고, 최소자승법을 적용하여 최 근사의 특징점들을 찾아내고 움직임 벡터를 산출할 수 있다(S16).
다음에, 서브 윈도(WL,WR,WU,WD) 내에서 산출된 움직임 정도(m)와 허용된 움직임(M)을 상호 비교하고, 그 대소관계에 따라 방해 피사체의 침입 여부를 판단하게 된다(S17). 이때, 상기 움직임 정도(m)는 서브 윈도(WL,WR,WU,WD) 내에서 산출된 움직임 벡터들 취합하고 이들을 평균한 평균치 또는 서브 윈도(WL,WR,WU,WD) 내에서 산출된 움직임 벡터들의 최대치로 나타낼 수 있다. 보다 구체적으로, 산출된 움직임 정도(m)와 허용 움직임(M)을 상호 비교하여 m > M 이면, 방해 피사체가 침입한 것으로 판단하고, 반면에 m < M 이면 방해 피사체가 없는 것으로 판단한다. 만일 방해 피사체가 침입한 것으로 판단되면, 시간 스텝을 증가시키고 움직임 벡터를 다시 산출하게 되는데, 예를 들어, 현재 프레임(Frame k)을 참조 프레임으로 저장해두고, 현재 입력되는 프레임(Frame k+1)을 현재 프레임으로 하여, 현재 프레 임(Frame k+1)과 참조 프레임(Frame k) 간에 관찰되는 움직임 정도를 산출하고, 방해 피사체의 침입 여부를 판단하기 위한 일련의 단계들을 반복하게 된다(S13~S17).
한편, 상기 디지털 신호 처리기(150)는 카메라와 진정한 피사체 사이에 방해 피사체가 없는 것으로 판단되면 촬영개시신호를 출력한다. 이에 따라, AF(Auto Focusing) 동작, AE(Auto Exposure) 동작이 수행될 수 있고, 피사체의 영상이 디지털 파일화되어 기록매체에 저장될 수 있다(S19,S20).
도 9는 본 발명의 다른 실시형태에 따른 디지털 카메라의 제어방법을 설명하기 위한 도면으로, 지능형 셀프 타이머 동작의 흐름도이다. 먼저, 디지털 신호 처리기(150)는 사용자의 요청에 따라 셀프 타이머의 설정화면을 표시하고 사용자의 설정을 입력받을 수 있다(P10). 예를 들어, 상기 디지털 신호 처리기(150)는 타이머 시간과 허용 움직임 정도에 관한 사용자의 설정 값을 입력받을 수 있다. 그리고, 셀프 타이머(153)를 초기화시키고, 셀프 타이머(153)를 가동하여 경과시간을 산출하게 된다(P11).
다음에, 상기 디지털 신호 처리기(150)는 촬상소자(120)에서 연속적으로 출력되는 영상 프레임들(Frame k-1,k)을 순차적으로 저장해두는데, 예를 들어, 선행하여 출력되는 이전 프레임(Frame k-1)을 참조 프레임으로 하여 메모리(180)에 저장해두고, 이어서 출력되는 현재 프레임(Frame k)도 함께 저장해둔다(P12,P13). 예를 들어, 영상 프레임(Frame k-1,k)들의 좌우/상하 영역에 서브 윈도(WL,WR,WU,WD)를 설정해두고(P14), 설정된 서브 윈도(WL,WR,WU,WD)에서 관찰되는 움직임 정도를 산출 하는데, Lucas-Kanade 알고리즘에 따라 특징점들을 추출해내고 현재 프레임(Frame k)과 참조 프레임(Frame k-1) 간에 정합되는 특징점들을 찾아내어 움직임 벡터를 산출할 수 있다(P15). 예를 들어, 산출된 움직임 정도(m)와 사전에 설정된 허용된 움직임(M)을 상호 비교하여 그 대소관계에 따라 방해 피사체의 침입 여부를 판단하게 된다(P16). 만일, 피사체가 침입한 것으로 판단되면, 즉 m > M 이면, 시간 스텝을 증가시키고 움직임 벡터를 다시 산출하게 되는데(P17), 예를 들어, 현재 프레임(Frame k)을 참조 프레임으로 저장해두고, 현재 입력되는 프레임(Frame k+1)을 현재 프레임으로 하여, 현재 프레임(Frame k+1)과 참조 프레임(Frame k) 간의 움직임 벡터를 산출한다(P12,P16). 반면에, 방해 피사체가 침입하지 않은 것으로 판단되면, 즉 m < M 이면, 디지털 신호 처리기(150)는 타이머 시간의 종료 여부를 판단하게 된다(P18). 방해 피사체가 침입하지는 않았으나 아직 타이머 시간이 종료되지 않았다고 판단되면, 시간 스텝을 증가시키고 움직임 벡터를 다시 산출하게 된다(P17). 예를 들어, 현재 프레임(Frame k)을 참조 프레임으로 저장해두고, 현재 입력되는 프레임(Frame k+1)을 현재 프레임으로 하여, 현재 프레임(Frame k+1)과 참조 프레임(Frame k) 간의 움직임 벡터를 산출하게 된다(P12~P16). 방해 피사체가 침입하지 않았고 또한 타이머 시간이 종료되었다고 판단되면, 촬영동작을 개시하고, 예를 들어, AF(Auto Focusing) 동작이나 AE(Auto Exposure) 동작을 수행하고 획득된 영상을 기록매체에 저장해두게 된다(P19,P20).
한편, 본 발명은 도면에 도시된 실시예들을 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.
도 1은 본 발명의 바람직한 일 실시형태에 관한 디지털 카메라의 전체적인 구성을 보여주는 블록도이다.
도 2는 도 1에 도시된 디지털 신호 처리기의 상세한 구성을 보여주는 도면으로, 지능형 셀프 타이머 동작을 설명하기 위한 도면이다.
도 3은 서브 윈도 설정을 설명하기 위한 도면이다.
도 4는 서브 윈도가 설정된 사진의 예시이다.
도 5a 및 5b는 시간상으로 선후하는 영상 프레임들의 예시이다.
도 6은 도 5a 및 도 5b로부터 산출된 옵티컬 플로우를 보여주는 사진이다.
도 7은 도 6의 VII 부분을 보다 상세히 보여주는 사진이다.
도 8은 본 발명의 일 실시형태에 따른 디지털 카메라의 제어방법을 설명하기 위한 동작 흐름도이다.
도 9는 본 발명의 다른 실시형태에 따른 디지털 카메라의 제어방법을 설명하기 위한 동작 흐름도이다.
<도면의 주요 부분에 대한 부호의 설명>
110 : 광학 유닛 112 : 줌 렌즈
114 : 셔터 116 : 조리개
118 : 포커스 렌즈 120 : 촬상소자
121 : 타이밍 생성기 130 : 아날로그 프론트엔드 회로
140 : 움직임 산출부 141 : 영상 변환부 143 : 특징점 추출부 145 : 상관계수 산출부
147 : 움직임 벡터 산출부 150 : 디지털 신호 처리기
151 : 윈도 설정부 153 : 셀프 타이머
155 : 촬영개시 판단부 160 : 인코더/디코더
165 : EEPROM 170 : 기록매체
180 : 메모리 WL,WR,WU,WD : 서브 윈도
Frame k-1,k : 영상 프레임

Claims (13)

  1. 시간상으로 선후하여 취득된 영상 프레임들로부터 관찰되는 움직임 정도를 산출해내는 움직임 산출부; 및
    산출된 움직임에 따라 의도하지 않은 방해 피사체의 침입 여부를 판단하는 한편으로, 설정된 타이머 시간의 종료 여부를 판단하여 촬영동작의 개시 여부를 판단하는 촬영개시 판단부;를 포함하는 디지털 카메라.
  2. 제1항에 있어서,
    상기 영상 프레임 상에 서브 윈도를 설정하는 윈도 설정부를 더 포함하고, 상기 움직임 산출부는 설정된 서브 윈도 내에서 움직임 벡터를 산출해내는 것을 특징으로 하는 디지털 카메라.
  3. 제2항에 있어서,
    상기 윈도 설정부는 방해 피사체가 위치할 개연성이 높은 영상 프레임의 좌우영역 및 상하영역 중의 적어도 어느 한 영역 상에 서브 윈도를 설정하는 것을 특징으로 하는 디지털 카메라.
  4. 제1항에 있어서,
    상기 촬영개시 판단부는 방해 피사체가 침입하지 않았고, 동시에 설정된 타 이머 시간이 종료되었다고 판단되면, 촬영개시신호를 출력하는 것을 특징으로 하는 디지털 카메라.
  5. 제1항에 있어서,
    상기 움직임 산출부는 가우시안 필터를 적용하여 에지(edge)를 구성하는 특징점들을 추출해내고, 시간상 선후하는 프레임들 간에 정합되는 특징점들로부터 움직임 벡터를 산출해내는 것을 특징으로 하는 디지털 카메라.
  6. 제1항에 있어서,
    상기 촬영개시 판단부는 산출된 움직임 정도와 사전에 설정된 허용 움직임 정도를 상호 비교하여 그 대소관계에 따라 방해 피사체의 침입 여부를 판단하는 것을 특징으로 하는 디지털 카메라.
  7. 제6항에 있어서,
    상기 허용 움직임 정도는 사용자의 설정에 의해 입력되는 것을 특징으로 하는 디지털 카메라.
  8. 제1항에 있어서,
    상기 타이머 시간은 셀프 타이머에 관한 사용자의 설정에 따라 입력되는 것을 특징으로 하는 디지털 카메라.
  9. 시간상으로 선후하여 취득된 영상 프레임들로부터 관찰되는 움직임 정도를 산출해내는 움직임 산출단계;
    산출된 움직임에 따라 의도하지 않은 방해 피사체의 침입 여부를 판단하는 단계;
    설정된 타이머 시간의 종료 여부를 판단하는 단계; 및
    상기 방해 피사체의 침입 여부와 타이머 시간의 종료 여부에 따라 촬영동작의 개시 여부를 판단하는 단계;를 포함하는 디지털 카메라의 제어방법.
  10. 제9항에 있어서,
    상기 촬영개시 판단단계에서는 방해 피사체가 침입하지 않았고 설정된 타이머 시간이 종료되었다고 판단되면, 촬영개시신호를 출력하는 것을 특징으로 하는 디지털 카메라의 제어방법.
  11. 제9항에 있어서,
    상기 영상 프레임 상에 서브 윈도를 설정하는 윈도 설정단계를 더 포함하고,
    상기 움직임 산출단계에서는 설정된 서브 윈도 내에서 움직임 벡터를 산출해내는 것을 특징으로 하는 디지털 카메라의 제어방법.
  12. 제11항에 있어서,
    상기 윈도 설정단계에서는 방해 피사체가 위치할 개연성이 높은 영상 프레임의 좌우영역 및 상하영역 중의 적어도 어느 한 영역 상에 서브 윈도를 설정하는 것을 특징으로 하는 디지털 카메라의 제어방법.
  13. 제9항에 있어서,
    상기 움직임 산출단계에서는 가우시안 필터를 적용하여 에지에 해당되는 특징점들을 추출해내고, 시간상 선후하는 프레임들 간에 정합되는 특징점들로부터 움직임 벡터를 산출해내는 것을 특징으로 하는 디지털 카메라의 제어방법.
KR1020080138409A 2008-12-31 2008-12-31 지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법 KR101567812B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080138409A KR101567812B1 (ko) 2008-12-31 2008-12-31 지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법
US12/648,705 US8711232B2 (en) 2008-12-31 2009-12-29 Digital camera supporting intelligent self-timer mode and method of controlling the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080138409A KR101567812B1 (ko) 2008-12-31 2008-12-31 지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법

Publications (2)

Publication Number Publication Date
KR20100079832A true KR20100079832A (ko) 2010-07-08
KR101567812B1 KR101567812B1 (ko) 2015-11-11

Family

ID=42284451

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080138409A KR101567812B1 (ko) 2008-12-31 2008-12-31 지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법

Country Status (2)

Country Link
US (1) US8711232B2 (ko)
KR (1) KR101567812B1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI428836B (zh) * 2010-10-20 2014-03-01 Htc Corp 影像擷取方法及系統，及其電腦程式產品
KR101839617B1 (ko) * 2011-07-11 2018-03-19 포항공과대학교 산학협력단 멀티프레임을 이용한 비균일 모션 블러 제거 방법 및 장치
CN106233709B (zh) * 2014-05-08 2020-12-01 索尼公司 成像装置
US9288396B2 (en) * 2014-05-30 2016-03-15 Apple Inc. Camera timer
EP3300023A1 (en) * 2016-09-21 2018-03-28 Autoliv Development AB Vision system and method for a motor vehicle

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7212230B2 (en) * 2003-01-08 2007-05-01 Hewlett-Packard Development Company, L.P. Digital camera having a motion tracking subsystem responsive to input control for tracking motion of the digital camera
TWI296178B (en) * 2005-12-12 2008-04-21 Novatek Microelectronics Corp Image vibration-compensating apparatus and the method thereof
JP2008113293A (ja) * 2006-10-31 2008-05-15 Victor Co Of Japan Ltd ビデオカメラ
US20080220809A1 (en) * 2007-03-07 2008-09-11 Sony Ericsson Mobile Communications Ab Method and system for a self timer function for a camera and ...
JP2008306404A (ja) * 2007-06-06 2008-12-18 Fujifilm Corp 撮像装置
JP4488038B2 (ja) * 2007-07-24 2010-06-23 ソニー株式会社 画像撮像装置
JP5060233B2 (ja) * 2007-09-25 2012-10-31 富士フイルム株式会社 撮像装置およびその自動撮影方法
KR101436839B1 (ko) * 2008-07-31 2014-09-03 삼성전자주식회사 사람 수 체크를 이용한 셀프타이머 촬영 장치 및 방법

Also Published As

Publication number Publication date
US20100165128A1 (en) 2010-07-01
KR101567812B1 (ko) 2015-11-11
US8711232B2 (en) 2014-04-29

Similar Documents

Publication Publication Date Title
US7916182B2 (en) Imaging device and method which performs face recognition during a timer delay
JP4674471B2 (ja) デジタルカメラ
JP3867687B2 (ja) 撮像装置
JP6936930B2 (ja) 撮像装置および焦点調節方法
JP2007108412A (ja) オートフォーカス装置及びそのプログラム
KR20080101780A (ko) 촬상장치, 포커스 제어방법 및 포커스 제어프로그램을기록한 기록매체
US20070052820A1 (en) Imaging apparatus, control method for the imaging apparatus, and storage medium storing computer program which causes a computer to execute the control method for the imaging apparatus
JP2004040712A (ja) 撮像装置
KR101728042B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
JP2003167182A (ja) オートフォーカス装置
JP2003307669A (ja) カメラ
JP4645413B2 (ja) 撮像装置
JP2004361484A (ja) オートフォーカスカメラ
KR20100079832A (ko) 지능형 셀프 타이머 모드를 지원하는 디지털 카메라 및 그 제어방법
JP5027580B2 (ja) 撮影装置および方法並びにプログラム
JP2008028747A (ja) 撮像装置及びそのプログラム
JP2003244520A (ja) 撮影装置
JP5073602B2 (ja) 撮像装置および撮像装置の制御方法
KR101589498B1 (ko) 디지털 카메라 및 그 제어방법
JP4565370B2 (ja) 電子カメラ及びオートフォーカス制御方法
KR101720189B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
JP6476064B2 (ja) 撮像装置、及び撮像制御方法
JP4106485B2 (ja) カメラ
JP2010134309A (ja) オートフォーカス装置、オートフォーカス方法及び撮像装置
JP4871664B2 (ja) 撮像装置及び撮像装置の制御方法

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20181030

Year of fee payment: 4