KR101537950B1 - 디지털 영상 처리장치 및 그 제어방법 - Google Patents

디지털 영상 처리장치 및 그 제어방법 Download PDF

Info

Publication number
KR101537950B1
KR101537950B1 KR1020080133793A KR20080133793A KR101537950B1 KR 101537950 B1 KR101537950 B1 KR 101537950B1 KR 1020080133793 A KR1020080133793 A KR 1020080133793A KR 20080133793 A KR20080133793 A KR 20080133793A KR 101537950 B1 KR101537950 B1 KR 101537950B1
Authority
KR
South Korea
Prior art keywords
zoom
input image
image
level
bracketing
Prior art date
Application number
KR1020080133793A
Other languages
English (en)
Other versions
KR20100075166A (ko
Inventor
송원석
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020080133793A priority Critical patent/KR101537950B1/ko
Publication of KR20100075166A publication Critical patent/KR20100075166A/ko
Application granted granted Critical
Publication of KR101537950B1 publication Critical patent/KR101537950B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G02B7/282—Autofocusing of zoom lenses

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은, 줌 브라켓팅(zoom bracketing) 조정의 시점에 따라 적절한 줌 조정 방법을 선택함으로써, 자동 초점 조정에 소요되는 시간을 단축할 수 있는 디지털 영상 처리장치 및 그 제어방법에 관한 것이다. 본 발명은, 입력 영상을 입력받는 단계; 상기 입력 영상에서 얼굴 영역을 검출하는 단계; 상기 입력 영상에 대하여 포커스를 조정하는 단계; 상기 입력 영상을 촬영하는 단계; 상기 입력 영상에서 중심 영역을 설정하는 단계; 및 상기 중심 영역에 대하여 포커스 조정없이 줌 브라켓팅 촬영을 수행하는 단계를 구비하는 디지털 영상 처리장치의 제어방법을 제공한다.

Description

디지털 영상 처리장치 및 그 제어방법{Apparatus for processing digital image and method for controlling thereof}
본 발명은 디지털 영상 처리장치 및 그 제어방법에 관한 것으로서, 보다 상세하게는 멀리 있는 피사체를 근접시켜 촬영할 수 있는 줌 기능을 구비하는 디지털 영상 처리장치 및 그 제어방법에 관한 것이다.
통상적으로, 디지털 영상 처리장치는 디지털 카메라, PDA(personal digital assistant), 폰 카메라, PC 카메라 등의 영상을 처리하거나 영상 인식 센서를 사용하는 모든 장치를 포함한다.
디지털 영상 처리장치는 촬상 소자를 통하여 입력받은 영상을 디지털 신호 처리기에서 이미지 프로세싱하고 이를 압축하여 이미지 파일을 생성하고, 그 이미지 파일을 메모리에 저장할 수 있다.
또한, 디지털 영상 처리장치는 촬상 소자를 통하여 입력받거나 저장매체에 저장된 이미지 파일의 이미지를 LCD(Liquid Crystal Display)와 같은 표시장치에 표시하여 보여줄 수 있다.
통상적으로 디지털 영상 처리장치는 줌(zoom) 기능을 구비할 수 있다. 이때, 줌 기능에는 광각(wide) 줌 기능과 망원(tele) 줌 기능이 있을 수 있다. 광각(wide) 줌 기능에 의하여 화각이 넓어지고 선택된 노출 영역이 커질 수 있다. 망원(tele) 줌 기능에 의하여 화각이 좁아지고 선택된 노출 영역이 작아질 수 있다.
본 발명은, 줌 브라켓팅(zoom bracketing) 조정의 시점에 따라 적절한 줌 조정 방법을 선택함으로써, 자동 초점 조정에 소요되는 시간을 단축할 수 있는 디지털 영상 처리장치 및 그 제어방법을 제공하는 것을 목적으로 한다.
본 발명은, 입력 영상을 입력받는 단계; 상기 입력 영상에서 얼굴 영역을 검출하는 단계; 상기 입력 영상에 대하여 포커스를 조정하는 단계; 상기 입력 영상을 촬영하는 단계; 상기 입력 영상에서 중심 영역을 설정하는 단계; 및 상기 중심 영역에 대하여 포커스 조정없이 줌 브라켓팅 촬영을 수행하는 단계를 구비하는 디지털 영상 처리장치의 제어방법을 제공한다.
상기 중심을 영역을 설정하는 단계가, 상기 입력 영상에서 얼굴 영역이 검출되었는가를 판단하는 단계, 상기 입력 영상에서 상기 얼굴 영역이 검출된 경우에 상기 얼굴 영역을 상기 중심 영역으로 설정하는 단계, 및 상기 입력 영상에서 얼굴 영역이 검출되지 아니한 경우에 상기 포커스 조정을 위한 포커스 영역을 상기 중심 영역으로 설정하는 단계를 구비할 수 있다.
상기 얼굴 영역이 복수개 검출되는 경우에 지정된 얼굴을 인식하고, 인식된 얼굴 영역을 상기 중심 영역으로 설정할 수 있다.
상기 줌 브라켓팅 촬영을 수행하는 단계가, 현재의 줌 레벨을 판단하는 단계, 상기 현재의 줌 레벨이 설정된 광각단인 경우에 디지털 줌 인에 의하여 줌 브 라켓팅 촬영을 수행하는 단계, 및 상기 현재의 줌 레벨이 설정된 망원단인 경우에 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행하는 단계를 구비할 수 있다.
상기 줌 브라켓팅 촬영을 수행하는 단계가, 상기 현재의 줌 레벨이 상기 광각단에 가까운 중간 레벨인 경우에 상기 현재의 줌 레벨을 상기 광각단으로 이동하는 단계, 상기 현재의 줌 레벨이 상기 망원단에 가까운 중간 레벨인 경우에 상기 현재의 줌 레벨을 상기 망원단으로 이동하는 단계, 및 현재의 상기 줌 레벨에서 포커스 조정을 수행하는 단계를 더 구비할 수 있다.
설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 디지털 줌 인 하여, 디지털 줌 인에 의하여 줌 브라켓팅 촬영을 수행할 수 있다.
상기 입력 영상에서 상기 중심 영역의 중심점의 위치를 고정하여 상기 디지털 줌 인 할 수 있다.
상기 디지털 줌 인에 의하여 줌 브라켓팅 촬영을 수행하는 단계가, 현재의 줌 레벨에 대하여 디지털 줌 인 하여 줌 인 영상을 생성하는 단계, 상기 중심 영역이 잘리는가 여부를 판단하는 단계, 상기 중심 영역이 잘리는 것으로 판단되는 경우에 상기 중심 영역이 잘리지 않을 때까지 상기 중심점의 위치를 이동시켜 상기 줌 인 영상을 생성하는 단계, 및 상기 줌 인 영상을 촬영하는 단계를 구비할 수 있다.
설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 광학 줌 아웃 하여, 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행할 수 있다.
상기 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행하는 단계가, 현재의 줌 레벨에 대하여 광학 줌 아웃 하는 단계, 상기 줌 아웃에 의한 줌 레벨에 의하여 줌 아웃 영상을 입력받는 단계, 및 상기 줌 아웃 영상을 촬영하는 단계를 구비할 수 있다.
상기 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행하는 단계가, 상기 입력 영상에서 상기 얼굴 영역이 검출된 경우에 상기 줌 아웃 영상에서 얼굴 영역을 검출하는 단계, 및 상기 줌 아웃 영상에서 상기 얼굴 영역이 검출된 경우에 상기 줌 아웃 영상에 대한 촬영을 수행하는 단계를 구비할 수 있다.
본 발명의 다른 측면은, 입력 영상을 입력받는 영상 입력부; 상기 입력 영상의 줌 레벨을 조정하는 줌 조정부; 상기 입력 영상의 포커스를 조정하는 포커스 조정부; 및 상기 입력 영상에서 중심 영역을 설정하고, 상기 중심 영역에 대하여 포커스 조정없이 줌 브라켓팅 촬영을 수행하도록 제어하는 제어부를 구비하는 디지털 영상 처리장치를 제공한다.
상기 입력 영상에 대하여 포커스를 조정하여 촬영을 수행할 수 있다.
상기 입력 영상에서 얼굴 영역을 검출하여, 상기 입력 영상에서 상기 얼굴 영역이 검출된 경우에 상기 얼굴 영역을 상기 중심 영역으로 설정하고, 상기 입력 영상에서 얼굴 영역이 검출되지 아니한 경우에 상기 포커스 조정을 위한 포커스 영역을 상기 중심 영역으로 설정할 수 있다.
상기 얼굴 영역이 복수개 검출되는 경우에 지정된 얼굴을 인식하고, 인식된 얼굴 영역을 상기 중심 영역으로 설정할 수 있다.
현재의 줌 레벨이 설정된 광각단인 경우에 디지털 줌 인에 의하여 줌 브라켓 팅 촬영을 수행하고, 상기 현재의 줌 레벨이 설정된 망원단인 경우에 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행할 수 있다.
상기 현재의 줌 레벨이 상기 광각단에 가까운 중간 레벨인 경우에 상기 현재의 줌 레벨을 상기 광각단으로 이동하고, 상기 현재의 줌 레벨이 상기 망원단에 가까운 중간 레벨인 경우에 상기 현재의 줌 레벨을 상기 망원단으로 이동하고, 현재의 상기 줌 레벨에서 포커스 조정을 수행할 수 있다.
상기 입력 영상에서 상기 중심 영역의 중심점의 위치를 고정하여 상기 디지털 줌 인 할 수 있다.
설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 디지털 줌 인 하여 줌 인 영상을 생성하고, 상기 중심 영역이 잘리는 것으로 판단되는 경우에 상기 중심 영역이 잘리지 않을 때까지 상기 중심점의 위치를 이동시켜 상기 줌 인 영상을 촬영할 수 있다.
설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 광학 줌 아웃 하여 줌 아웃 영상을 입력받고, 상기 입력 영상에서 상기 얼굴 영역이 검출되고, 상기 줌 아웃 영상에서 상기 얼굴 영역이 검출된 경우에 상기 줌 아웃 영상에 대한 촬영을 수행할 수 있다.
본 발명에 따른 디지털 영상 처리장치 및 그 제어방법에 의하면, 줌 브라켓팅(zoom bracketing) 조정의 시점에 따라 적절한 줌 조정 방법을 선택함으로써, 자동 초점 조정에 소요되는 시간을 단축할 수 있다.
이하, 첨부된 도면을 참조하여 바람직한 실시예에 따른 본 발명을 상세히 설명하기로 한다.
도 1에는 본 발명에 따른 디지털 영상 처리장치의 일 실시예인 디지털 카메라(100)의 뒷면 외형이 도시되어 있다.
도면을 참조하면, 디지털 카메라(100)의 뒷면에는 방향 버튼(21), 메뉴-OK 버튼(22), 광각(Wide angle)-줌(Zoom) 버튼(W), 망원(Telephoto)-줌(Zoom) 버튼(T), 및 디스플레이 패널(25) 등이 구비될 수 있다.
방향 버튼(21)에는 상향 버튼(21a), 하향 버튼(21b), 좌향 버튼(21c), 우향 버튼(21d)의 총 4개의 버튼이 포함될 수 있다. 방향 버튼(21)과 메뉴-OK 버튼(22)은 디지털 카메라와 같은 디지털 영상 처리장치의 동작에 관한 각종 메뉴를 실행시키기 위해 입력하는 키이다.
광각-줌 버튼(W) 또는 망원-줌 버튼(T)은 그 입력에 따라 화각이 넓어지거나, 화각이 좁아진다. 특히, 선택된 노출영역의 크기를 변경시키고자 할 때 사용될 수 있다. 이때, 광각-줌 버튼(W)이 입력되면 선택된 노출영역의 크기가 커지고, 망원-줌 버튼(T)이 입력되면 선택된 노출영역의 크기가 작아질 수 있다.
디스플레이 패널(25)로는 LCD(liquid crystal display)등의 영상 표시소자가 사용될 수 있다. 디스플레이 패널(25)은 설정된 줌 레벨에 의하여 입력되는 입력 영상이 표시되는 표시부(도 3의 350)에 포함될 수 있다.
한편, 디지털 카메라(100)의 앞면 또는 윗면에는 셔터 릴리즈 버튼(26), 플 래시(미도시), 전원 스위치(28), 렌즈부(미도시)가 구비될 수 있다. 또한, 디지털 카메라(100)의 앞면과 뒷면에는 뷰 파인더(27)의 대물 렌즈와 접안 렌즈가 구비될 수 있다.
셔터 릴리즈 버튼(26) 및 전원 스위치(28) 등은 사용자가 외부로부터 조작하고자 하는 사항을 입력하는 사용자 조작부(도 3의 360)에 포함될 수 있다.
셔터 릴리즈 버튼(26)은 정해진 시간 동안 CCD(Charge Coupled Device)와 같은 촬상 소자나 필름을 빛에 노출시키기 위해 열리고 닫힌다. 또한, 셔터 릴리즈 버튼은 조리개(미도시)와 연동하여 피사체를 적정하게 노출시켜 촬상 소자에 영상을 기록한다.
한편, 셔터 릴리즈 버튼(26)은 2단으로 눌려질 수 있다. 셔터 릴리즈 버튼(26)이 일단으로 눌려지면 제1신호(S1)가 생성되고, 이단으로 눌려지면 제2신호(S2)가 생성될 수 있다. 제1신호(S1)에 의하여 촬영 준비 설정이 수행되고, 제2신호(S2)에 의하여 촬영 작업이 수행될 수 있다.
본 발명이 적용될 수 있는 디지털 영상 처리장치의 일 실시예로서 디지털 카메라와 그 제어장치, 및 그 제어방법이 본 출원인의 미국 특허출원 공개번호 제2004/0130650호(명칭: 카메라의 이차함수를 이용한 자동 포커싱 방법, Method of automatically focusing using a quadratic function in camera)에 개시되어 있다.
상기 미국출원에 개시된 디지털 카메라와 그 제어장치, 및 그 제어방법에 관한 사항은 본 명세서에 포함되는 것으로 하고, 그 자세한 설명은 생략한다.
도 2에는 본 발명에 따른 바람직한 실시예인 디지털 영상 처리장치의 제어장 치(200)의 블록도가 도시되어 있다. 디지털 영상 처리장치의 제어장치(200)는 도 1의 디지털 카메라(100)의 내부에 장착될 수 있다.
도면을 참조하면, 렌즈부와 필터부를 포함한 광학계(OPS)는 피사체로부터의 빛을 광학적으로 처리한다. 광학계(OPS)의 렌즈부는 줌 렌즈, 포커스 렌즈 및 보상 렌즈를 포함한다. 사용자가 사용자 입력부(INP)에 포함된 광각-줌 버튼(W) 또는 망원-줌 버튼(T)을 누르면, 이에 상응하는 신호가 마이크로제어기(212)에 입력된다.
이에 따라, 마이크로제어기(212)가 렌즈 구동부(210)를 제어함에 따라, 줌 모터(MZ)가 구동되어 줌 렌즈가 이동된다. 즉, 광각-줌 버튼(W)이 눌려지면 줌 렌즈의 초점 길이가 짧아져서 화각이 넓어지고, 망원-줌 버튼(T)이 눌려지면 줌 렌즈의 초점 길이가 길어져서 화각이 좁아진다.
이때, 줌 조절은 줌 조정부(도 3의 380)에 의하여 이루어질 수 있다. 줌 조정부(380)는 줌 렌즈 및 줌 구동부를 구비할 수 있다. 줌 구동부는 줌 모터(Mz) 및 렌즈 구동부(210)를 구비하여, 줌 렌즈의 위치가 이동되도록 줌 렌즈를 구동할 수 있다.
한편, 자동 초점 모드(auto focusing mode)에는, 디지털 신호 처리기(207) 안에 내장된 주 제어기가 마이크로제어기(212)를 통하여 렌즈 구동부(210)를 제어하고, 그에 따라 포커스 모터(MF)가 구동된다. 즉, 포커스 모터(MF)를 구동하여 가장 선명한 사진을 얻을 수 있는 위치로 포커스 렌즈를 이동시킨다.
자동 초점 모드는 사용자 입력부(INP)를 통하여 입력되는 셔터 릴리즈 버튼(도 1의 26)이 일단으로 눌려져 생성되는 제1신호(S1)에 따라 수행될 수 있다. 이때, 포커스 렌즈의 위치를 광축을 따라 이동시키면서 복수개의 영상을 입력받고, 복수개의 영상들 중에서 가장 선명한 영상을 얻어지는 포커스 렌즈의 위치를 구한다.
이를 위하여, 초점 조정은 포커스 조정부(도 3의 370)에 의하여 이루어질 수 있다. 포커스 조정부(도 3의 370)는 포커스 렌즈 및 포커스 구동부를 구비하고, 줌 렌즈의 위치가 이동되도록 줌 렌즈를 구동할 수 있다. 포커스 구동부는 포커스 모터(MF) 및 렌즈 구동부(210)를 구비하여, 포커스 렌즈의 위치가 이동되도록 포커스 렌즈를 구동할 수 있다.
보상 렌즈는 전체적인 굴절률을 보상하는 역할을 하므로 별도로 구동되지 않는다. 참조 부호 MA는 조리개(aperture, 도시되지 않음)를 구동하기 위한 조리개 조정 모터(MA)를 가리킨다.
광학계(OPS)의 필터부에 있어서, 광학적 저역통과필터(Optical Low Pass Filter)는 고주파 성분의 광학적 노이즈를 제거한다. 적외선 차단 필터(Infra-Red cut Filter)는 입사되는 빛의 적외선 성분을 차단한다.
광전 변환부(OEC)는 CCD(Charge Coupled Device) 또는 CMOS(Complementary Metal-Oxide- Semiconductor) 등의 촬상 소자를 포함하여 이루어질 수 있다. 광전 변환부(OEC)는 광학계(OPS)로부터의 빛을 전기적 아날로그 신호로 변환시킨다.
아날로그-디지털 변환부는 CDS-ADC(Correlation Double Sampler and Analog-to-Digital Converter) 소자(201)를 포함하여 이루어질 수 있다. 아날로그-디지털 변환부는 광전 변환부(OEC)로부터의 아날로그 신호를 처리하여, 그 고주파 노이즈를 제거하고 진폭을 조정한 후, 디지털 신호로 변환시킨다. 여기서, 디지털 신호 처리기(207)는 타이밍 회로(202)를 제어하여 광전 변환부(OEC)와 아날로그-디지털 변환부(201)의 동작을 제어한다.
광학계(OPS), 광전 변환부(OEC), CDS-ADC 소자(201) 등은 본 발명에 따른 영상 입력부(도 3의 310)에 포함될 수 있다.
실시간 클럭(203)은 디지털 신호 처리기(207)에 시간 정보를 제공한다. 디지털 신호 처리기(207)는 CDS-ADC 소자(201)로부터의 디지털 신호를 처리하여 휘도(Y 값) 및 색도(R, G, B) 신호로 분류된 디지털 화상 신호를 발생시킨다.
디지털 신호 처리기(207)에 내장된 주 제어기의 제어에 따라 마이크로 제어기(212)에 의하여 구동되는 발광부(LAMP)에는, 셀프-타이머 램프, 자동-초점 램프, 모드 지시 램프 및 플래시 대기 램프 등이 포함될 수 있다.
사용자 입력부(INP)에는, 방향 버튼(21), 광각-줌 버튼(W) 및 망원-줌 버튼(T) 등이 포함될 수 있다. 이러한 사용자 입력부(INP)는 본 발명에 따른 사용자 조작부(도 3의 360)에 포함될 수 있다.
DRAM(Dynamic Random Access Memory, 204)에는 디지털 신호 처리기(207)로부터의 디지털 화상 신호가 일시 저장된다. EEPROM(Electrically Erasable and Programmable Read Only Memory, 205)에는 디지털 신호 처리기(207)의 동작에 필요 한 부팅 프로그램 및 키 입력 프로그램 등과 같은 알고리즘 및 설정 데이터가 저장된다. 메모리 카드 인터페이스(206)에서는 사용자의 메모리 카드가 착탈될 수 있다.
EEPROM(205)에는 줌 조정을 위한 줌 테이블, 포커스 조정을 위한 포커스 테이블, 및 줌 브라켓팅 촬영을 위한 줌 레벨 간격이 저장될 수 있다.
디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)는 본 발명에 따른 제어부(도 3의 320)에 포함될 수 있다. 또한, 디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)에는 임시 저장 공간으로 캐시 메모리가 장착될 수 있다.
이때, 캐시 메모리와 DRAM(204)는 줌 브라켓팅 촬영을 위한 줌 레벨 간격 및 입력 영상이 일시적으로 저장되는 제1 저장부(도 3의 330)에 포함될 수 있다. 제1 저장부(도 3의 330)에 포함되는 캐시 메모리는 디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)와 분리되어 별도로 포함될 수 있다.
메모리 카드 인터페이스(206)를 통하여 인식되는 메모리 카드는 촬영된 영상이 비휘발성으로 저장되는 것으로 도 3의 제2 저장부(340)에 포함될 수 있다.
디지털 신호 처리기(207)로부터의 디지털 화상 신호는 디스플레이 패널 구동부(214)에 입력되고, 이로 인하여 디스플레이 패널(215)에 화상이 디스플레이 된다.
디지털 영상 처리장치의 제어장치(200)는 표시부(214, 215)를 더 구비할 수 있다. 표시부(214, 215)는 디스플레이 패널(215) 및 디스플레이 패널(215)을 구동하는 디스플레이 패널 구동부(214)를 구비할 수 있다. 표시부(214, 215)는 본 발명 에 따른 표시부(도 3의 350)에 포함될 수 있다.
한편, 디지털 신호 처리기(207)로부터의 디지털 화상 신호는, USB(Universal Serial Bus) 접속부(31a) 또는 RS232C 인터페이스(208)와 그 접속부(31b)를 통하여 직렬 통신으로써 전송될 수 있고, 비디오 필터(209) 및 비디오 출력부(31c)를 통하여 비디오 신호로서 전송될 수 있다. 여기서, 디지털 신호 처리기(207)는 그 내부에 마이크로제어기를 내장할 수 있다.
오디오 처리기(213)는, 마이크로폰(MIC)으로부터의 음성 신호를 디지털 신호 처리기(207) 또는 스피커(SP)로 출력하고, 디지털 신호 처리기(207)로부터의 오디오 신호를 스피커(SP)로 출력한다.
도 3에는 본 발명에 따른 바람직한 실시예인 디지털 영상 처리장치(300)의 블록도가 도시되어 있다. 디지털 영상 처리장치(300)는 도 4에 도시된 디지털 영상 처리장치의 제어방법(S400)에 의하여 제어될 수 있다.
도면을 참조하면, 디지털 영상 처리장치(300)는 영상 입력부(310); 제어부(320); 저장부(330, 340); 표시부(350); 사용자 조작부(360); 포커스 조정부(370); 및 줌 조정부(380)를 구비할 수 있다.
영상 입력부(310)는 입력 영상을 입력받는다. 줌 조정부(380)는 입력 영상의 줌 레벨을 조정한다. 포커스 조정부(370)는 입력 영상의 포커스를 조정한다. 제어부(320)는 입력 영상에서 중심 영역을 설정하고, 중심 영역에 대하여 포커스 조정없이 줌 브라켓팅 촬영을 수행하도록 제어한다.
본 발명에 따른 디지털 영상 처리장치(300)는 줌 브라켓팅(zoom bracketing) 조정의 시점에 따라 적절한 줌 조정 방법을 선택함으로써, 줌 브라켓팅 촬영 시에 별도의 포커스 조정이 필요없다. 따라서, 줌 브라켓팅 촬영 시에 포커스 조정에 소요되는 시간을 단축하여, 빠른 시간 내에 줌 브라켓팅 촬영을 수행할 수 있다.
또한, 줌 인에 의한 줌 브라켓팅 촬영 시에 입력 영상에서 중심 영역의 중심점의 위치를 고정하여 디지털 줌 인 하므로, 처음 사용자가 설정한 구도를 유지하면서 줌 브라켓팅 촬영을 수행할 수 있다.
영상 입력부(310)를 통하여 입력되는 입력 영상에 포함된 얼굴을 검색하여, 입력 영상의 전체 영역에서 얼굴이 차지하는 얼굴 영역을 검출할 수 있다.
현재 설정된 줌 레벨에 의하여 입력 영상을 입력받을 수 있다. 현재 설정된 줌 레벨에 의한 입력 영상에서 얼굴 영역을 검출한다. 이때, 얼굴 검출은 통상의 얼굴 검출 알고리즘에 의하여 수행될 수 있다. 얼굴 검출은 얼굴의 색상 및 형상 정보를 이용하여 수행될 수 있다.
현재 설정된 줌 레벨에 의한 입력 영상에 대하여 포커스를 조정한다. 이때, 포커스 조정은 입력 영상의 특정 영역을 기준으로 수행되는 자동 포커스 조정이 될 수 있다. 현재 설정된 줌 레벨에 의하여 자동 포커스 조정되어 입력된 입력 영상이 디폴트로 촬영될 수 있다.
현재 설정된 줌 레벨에 의하여 최초로 입력되는 입력 영상에 대하여 별도의 줌 조정 없이 촬영을 수행할 수 있다. 이때, 현재 설정된 줌 레벨이 사용자에게 가장 관심이 되는 줌 레벨이 가능성이 크다. 따라서, 현재 설정된 줌 레벨에 의하여 최초로 입력되는 입력 영상을 기본으로 촬영함으로써, 줌 브라켓팅 촬영 시에도 사 용자가 설정한 줌 레벨에 의한 사진을 찍을 수 있게 된다.
입력 영상에서 얼굴 영역을 검출하여, 입력 영상에서 얼굴 영역이 검출된 경우에 얼굴 영역을 중심 영역으로 설정할 수 있다. 입력 영상에서 얼굴 영역이 검출되지 아니한 경우에 포커스 조정을 위한 포커스 영역을 중심 영역으로 설정할 수 있다.
한편, 도 9 및 도 10에 도시된 바와 같이 얼굴 영역이 복수개 검출되는 경우에 지정된 얼굴을 인식하고, 인식된 얼굴 영역을 중심 영역으로 설정할 수 있다.
현재의 줌 레벨이 설정된 광각단인 경우에 디지털 줌 인에 의하여 줌 브라켓팅 촬영을 수행할 수 있다. 이때, 입력 영상에서 상기 중심 영역의 중심점의 위치를 고정하여 디지털 줌 인을 수행할 수 있다.
설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 디지털 줌 인 하여 줌 인 영상을 생성하여 저장할 수 있다.
이때, 광학 줌을 사용한다면 줌 레벨이 변경된 이후에 별도의 포커스 조정단계가 필요하여 추가적인 시간이 소요될 수 있다.
하지만, 본 발명에서와 같이 디지털 줌을 이용하여 줌 인 하는 경우에는 별도의 포커스 조정 없이 트리밍(trimming) 기법으로 원하는 화각의 줌 인 영상을 촬영할 수 있게 된다. 이미지 센서 기술이 발달하여 디지털 카메라의 해상력이 좋아지고 수퍼 해상도(super resolution) 기술이 발달함에 따라, 해상력 저하 문제를 최소화 할 수 있다.
현재의 줌 레벨이 설정된 망원단인 경우에 광학 줌 아웃에 의하여 줌 브라켓 팅 촬영을 수행할 수 있다. 설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 광학 줌 아웃 하여 줌 아웃 영상을 입력받고, 입력 영상에서 얼굴 영역이 검출되고, 줌 아웃 영상에서 상기 얼굴 영역이 검출된 경우에 줌 아웃 영상에 대한 촬영을 수행할 수 있다.
따라서, 줌 아웃 브라켓팅 촬영 시에 별도의 포커스 조정 단계 없이 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행할 수 있게 된다. 이에 따라, 종래의 줌 브라켓팅 촬영에서 문제가 되었던 동작 시간을 크게 개선할 수 있게 된다.
현재의 줌 레벨이 광각단에 가까운 중간 레벨인 경우에 현재의 줌 레벨을 광각단으로 이동하고, 현재의 줌 레벨이 상기 망원단에 가까운 중간 레벨인 경우에 현재의 줌 레벨을 망원단으로 이동할 수 있다. 이때, 광각단 또는 망원단으로 이동된 현재의 줌 레벨에서 포커스 조정을 수행할 수 있다.
줌 레벨의 조정은 줌 조정부(380)에 의하여 이루어질 수 있다. 줌 조정부(380)는 줌 렌즈 및 줌 구동부를 구비할 수 있다. 줌 구동부는 줌 모터(도 2의 Mz) 및 렌즈 구동부(도 2의 210)를 구비하여, 줌 렌즈의 위치가 이동되도록 줌 렌즈를 구동할 수 있다. 이때, 줌 레벨은 미리 설정된 스텝 단위로 조정될 수 있다.
초점 조정은 포커스 조정부(370)에 의하여 이루어질 수 있다. 포커스 조정부(370)는 포커스 렌즈 및 포커스 구동부를 구비하여 줌 렌즈의 위치가 이동되도록 줌 렌즈를 구동할 수 있다. 포커스 구동부는 포커스 모터(MF) 및 렌즈 구동부(210)를 구비하여, 포커스 렌즈의 위치가 이동되도록 포커스 렌즈를 구동할 수 있다.
표시부(350)에는 입력 영상이 라이브 뷰로 표시될 수 있다. 이때, 줌 레벨이 조정되어 입력되는 각각의 입력 영상이 라이브 뷰로 표시될 수 있다.
영상 입력부(310)는 외부로부터 입력 영상을 입력받는다. 영상 입력부(310)는 도 2에 도시된 광학계(OPS), 광전 변환부(OEC), CDS-ADC 소자(201) 등을 포함할 수 있다.
제어부(320)는 영상 입력부(310); 제어부(320); 저장부(330, 340); 표시부(350); 사용자 조작부(360); 포커스 조정부(370); 및 줌 조정부(380)를 제어하여, 자동 줌 브라켓팅 촬영을 수행할 수 있다. 제어부(320)는 도 2에 도시된 디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)를 포함할 수 있다.
저장부(330, 340)에는 입력 영상, 및 촬영된 영상이 저장될 수 있다. 저장부(330, 340)는 제1 저장부(330) 및 제2 저장부(340)를 구비할 수 있다. 제1 저장부(330)에는 입력 영상이 임시 저장될 수 있다. 제2 저장부(340)에는 촬영된 영상이 저장될 수 있다.
표시부(350)는 도 1에 도시된 디스플레이 패널(25) 및/또는 도 2의 디스플레이 패널 구동부(214) 및 디스플레이 패널(215)을 포함할 수 있다. 사용자 조작부(360)를 통하여 사용자가 외부로부터 원하는 지령을 입력할 수 있다. 사용자 조작부(360)는 도 1의 셔터 릴리즈 버튼(26) 및 전원 스위치(28) 등 및/또는 도 2의 사용자 입력부(INP) 등을 포함할 수 있다.
본 발명에 따르면, 줌 브라켓팅(zoom bracketing) 조정의 시점에 따라 적절한 줌 조정 방법을 선택함으로써, 자동 초점 조정에 소요되는 시간을 단축할 수 있 다.
도 4에는 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치의 제어방법(S400)에 대한 흐름도가 도시되어 있다. 도 5에는 도 4의 디지털 영상 처리장치의 제어방법(S400)에서 중심 영역에 대하여 줌 브라켓팅 촬영이 수행되는 과정(S500)에 대한 흐름도가 도시되어 있다.
디지털 영상 처리장치의 제어방법(S400)은 도 2 및/또는 도 3의 디지털 영상 처리장치 및 그 제어장치(200, 300)에서 구현될 수 있다. 이를 위하여, 본 발명에 따른 디지털 영상 처리장치의 제어방법(S400)이 도 2의 저장 수단에 저장되거나 펌웨어(Firmware) 등의 반도체 칩의 형태로 구현된 프로그램 또는 알고리즘이 될 수 있다.
따라서, 디지털 영상 처리장치의 제어방법(S400)에서 디지털 영상 처리장치 및 그 제어장치(200, 300)에 대하여 설명된 사항과 동일한 사항에 대해서는 이를 참조하고 자세한 설명은 생략한다.
도면을 참조하면, 디지털 영상 처리장치의 제어방법(S400)은, 입력영상 입력단계(S420); 얼굴 검출단계(S430); 포커스 조정단계(S440); 촬영 단계(S450); 중심영역 설정단계(S460 내지 S480); 및 줌 브라켓팅 단계(S500)를 구비할 수 있다.
입력영상 입력단계(S420)에는 입력 영상을 입력받는다. 얼굴 검출단계(S430)에는 입력 영상에서 얼굴 영역을 검출한다. 포커스 조정단계(S440)에는 입력 영상에 대하여 포커스를 조정한다. 촬영 단계(S450)에는 입력 영상을 촬영한다.
중심영역 설정단계(S460 내지 S480)에는 입력 영상에서 중심 영역을 설정한 다. 줌 브라켓팅 단계(S500)에는 중심 영역에 대하여 포커스 조정없이 줌 브라켓팅 촬영을 수행한다.
본 발명에 따른 디지털 영상 처리장치의 제어방법(S400)은 줌 브라켓팅(zoom bracketing) 조정의 시점에 따라 적절한 줌 조정 방법을 선택함으로써, 줌 브라켓팅 촬영 시에 별도의 포커스 조정이 필요없다. 따라서, 줌 브라켓팅 촬영 시에 포커스 조정에 소요되는 시간을 단축하여, 빠른 시간 내에 줌 브라켓팅 촬영을 수행할 수 있다.
또한, 줌 인에 의한 줌 브라켓팅 촬영 시에 입력 영상에서 중심 영역의 중심점의 위치를 고정하여 디지털 줌 인 하므로, 처음 사용자가 설정한 구도를 유지하면서 줌 브라켓팅 촬영을 수행할 수 있다.
디지털 영상 처리장치의 제어방법(S400)은 스마트 오토 줌 브라켓팅(smart auto zoom bracketing) 기능 판단단계(S410)를 구비할 수 있다. 스마트 오토 줌 브라켓팅 기능 판단단계(S410)에서 현재 모드가 스마트 오토 줌 브라켓팅 기능이 온(ON) 상태인가를 판단하여, 스마트 오토 줌 브라켓팅 기능이 온(ON) 상태인 경우에 본 발명에 따른 스마트 오토 줌 브라켓팅 기능이 수행될 수 있다.
스마트 오토 줌 브라켓팅 기능은 줌 브라켓팅(zoom bracketing) 조정의 시점이 설정된 광각단 또는 망원단인지에 따라 적절한 줌 조정 방법을 선택함으로써, 줌 브라켓팅 촬영 시에 별도의 포커스 조정이 필요 없도록 하는 기능이다.
입력영상 입력단계(S420)에는 현재 설정된 줌 레벨에 의하여 입력 영상을 입력받는다. 얼굴 검출단계(S430)에는 현재 설정된 줌 레벨에 의한 입력 영상에서 얼 굴 영역을 검출한다. 이때, 얼굴 검출은 통상의 얼굴 검출 알고리즘에 의하여 수행될 수 있다. 얼굴 검출은 얼굴의 색상 및 형상 정보를 이용하여 수행될 수 있다.
포커스 조정단계(S440)에는 현재 설정된 줌 레벨에 의한 입력 영상에 대하여 포커스를 조정한다. 이때, 포커스 조정은 입력 영상의 특정 영역을 기준으로 수행되는 자동 포커스 조정이 될 수 있다.
입력 영상에 얼굴 영역이 포함된 경우에는 얼굴 영역을 기준으로 자동 포커스 조정이 수행될 수 있다. 입력 영상에 얼굴 영역이 포함되지 아니한 경우에는 입력 영상의 중앙부의 일정 영역 또는 입력 영상에 대하여 미리 설정된 위치의 복수개의 포커스 영역에 대하여 자동 포커스 조정이 수행될 수 있다.
촬영 단계(S450)에는 현재 설정된 줌 레벨에 의하여 자동 포커스 조정되어 입력된 입력 영상이 촬영될 수 있다. 촬영 단계(S450)에서 현재 설정된 줌 레벨에 의하여 최초로 입력되는 입력 영상에 대하여 별도의 줌 조정 없이 촬영을 수행할 수 있다.
이때, 현재 설정된 줌 레벨이 사용자에에 가장 관심이 되는 줌 레벨이 가능성이 크다. 따라서, 현재 설정된 줌 레벨에 의하여 최초로 입력되는 입력 영상을 기본으로 촬영함으로써, 줌 브라켓팅 촬영 시에도 사용자가 설정한 줌 레벨에 의한 사진을 찍을 수 있게 된다.
중심영역 설정단계(S460 내지 S480)에는 입력 영상에서 디지털 줌 인 시에 중심이 되는 중심 영역을 설정한다. 중심영역 설정단계(S460 내지 S480)는 얼굴검출 판단단계(S460), 및 중심영역 설정단계(S470, S480)를 구비할 수 있다.
얼굴검출 판단단계(S460)에는 입력 영상에서 얼굴 영역이 검출되었는가를 판단한다. 중심영역 설정단계(S470, S480)에는 얼굴 영역 검출 여부에 따라 중심 영역을 설정한다. 중심영역 설정단계(S470, S480)는 얼굴검출 판단단계(S460)에서의 판단 결과에 따라 어느 하나가 수행되는 제1 설정단계(S470) 및 제2 설정단계(S480)를 구비할 수 있다.
이때, 얼굴검출 판단단계(S460)에서의 판단 결과, 입력 영상에서 얼굴 영역이 검출된 경우에는 제1 설정단계(S470)가 수행될 수 있다. 또한, 입력 영상에서 얼굴 영역이 검출되지 아니한 경우에는 제2 설정단계(S480)가 수행될 수 있다.
제1 설정단계(S470)에는 얼굴 영역을 중심 영역으로 설정할 수 있다. 제2 설정단계(S480)에는 포커스 조정을 위한 포커스 영역을 중심 영역으로 설정할 수 있다.
한편, 도 9 및 도 10에 도시된 바와 같이 얼굴 영역이 복수 개 검출될 수 있다. 이때, 얼굴 영역이 복수개 검출되는 경우에는 미리 지정된 얼굴을 인식하고, 인식된 얼굴 영역을 중심 영역으로 설정할 수 있다.
도 9에는 본 발명에 따른 줌 브라켓팅 촬영 시에 얼굴 영역(91, 92, 93)이 복수개 검출된 입력 영상(90)이 도시되어 있다. 도 10에는 도 9에 도시된 실시예에서 입력 영상(90)에 대한 디지털 줌 인을 수행하여 생성된 줌 인 영상(90a)이 도시되어 있다.
도 9 및 도 10에 도시된 실시예에서는 입력 영상(90)에서 세 명의 아이 얼굴 영역(91, 92, 93)이 검출되고, 좌측 아이의 얼굴이 미리 지정 얼굴로 지정되어, 지 정 얼굴이 인식되어 인식 얼굴이 될 수 있다. 그에 따라 인식 얼굴의 얼굴 영역(91)을 중심 영역으로 설정할 수 있다. 이때, 얼굴 인식은 통상의 얼굴 인식 알고리즘에 의하여 미리 저장된 얼굴 데이터 베이스와 비교하여 수행될 수 있다.
따라서, 줌 브라켓팅 단계(S500)에서 줌 브라켓팅 촬영 시에 좌측 아이의 얼굴 영역(91)을 중심 영역으로 하여, 줌 인되어 줌 인 영상(90a)이 촬영될 수 있다. 줌 인 영상(90a)에서 좌측 아이의 얼굴 영역(91a)이 중심 영역이 되고, 중심 영역의 중심점에 대하여 줌 인이 수행될 수 있다.
다른 실시예로서, 복수개의 얼굴이 검출되는 경우에 입력 영상의 중앙점에서 가장 가까운 얼굴의 얼굴 영역(92)을 기준으로 줌 인이 수행될 수도 있다.
입력 영상에서 얼굴 영역이 검출되지 아니한 것으로 판단되는 경우에 제2 설정단계(S480)에 포커스 영역이 중심 영역으로 설정될 수 있다. 이때, 포커스 영역은 현재 설정된 줌 레벨에 의하여 최초로 촬영된 입력 영상의 포커스 영역이 될 수 있다. 이 경우 얼굴 영역의 한계에 의한 줌 리미트가 없으므로, 모든 줌 단에서 촬영이 가능하다.
복수개의 포커스 영역에 의하여 자동 포커스 조정이 이루어지는 경우에는 입력 영상에서 가장 가까운 위치에 위치되는 포커스 영역의 중심점을 기준으로 줌 인이 수행될 수 있다.
줌 브라켓팅 단계(S500)에는 중심 영역에 대하여 포커스 조정없이 줌 브라켓팅 촬영을 수행한다. 줌 브라켓팅 단계(S500)에는 설정된 줌 레벨의 줌 리미트 범위 내에서 미리 설정된 간격으로 줌 레벨을 조정하면서 각각의 줌 레벨에 대하여 자동으로 사진을 찍을 수 있다.
줌 브라켓팅 단계(S500)는 줌 레벨 판단단계(S510), 줌 인 브라켓팅 촬영단계(S520), 및 줌 아웃 브라켓팅 촬영단계(S530), 및 줌 브라켓팅 준비단계(S540)를 구비할 수 있다.
줌 레벨 판단단계(S510)에는 현재의 줌 레벨을 판단한다. 줌 인 브라켓팅 촬영단계(S520)에는 현재의 줌 레벨이 설정된 광각단인 경우에 디지털 줌 인에 의하여 줌 브라켓팅 촬영을 수행한다. 줌 아웃 브라켓팅 촬영단계(S530)에는 현재의 줌 레벨이 설정된 망원단인 경우에 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행한다.
줌 브라켓팅 단계(S500)에는 줌 레벨을 광각단으로부터 망원단으로 이동하는 경우에는 줌 인 브라켓팅 촬영단계(S520)에 의하여 디지털 줌 인(digital zoom in)에 의하여 줌 브라켓팅 촬영을 수행할 수 있다. 이때, 광학 줌을 사용한다면 줌 레벨이 변경된 이후에 별도의 포커스 조정단계가 필요하여 추가적인 시간이 소요될 수 있다.
하지만, 본 발명에서와 같이 디지털 줌을 이용하여 줌 인 하는 경우에는 별도의 포커스 조정 없이 트리밍(trimming) 기법으로 원하는 화각의 줌 인 영상을 촬영할 수 있게 된다. 이미지 센서 기술이 발달하여 디지털 카메라의 해상력이 좋아지고 수퍼 해상도(super resolution) 기술이 발달함에 따라, 해상력 저하 문제를 최소화 할 수 있다.
또한, 줌 레벨을 망원단으로부터 광각단으로 이동하는 경우에는 줌 아웃 브 라켓팅 촬영단계(S530)에 의하여 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행할 수 있다. 도 6에 도시된 바와 같이 광각단에서 맞추어진 포커스는 망원단으로 갈수록 벗어나는 정도가 커지나, 망원단에서 포커스를 맞추고 광각단으로 이동할 때에는 포커스를 벗어나는 정도가 적어지는 것을 알 수 있다.
도 6에 도시된 그래프에서는 광각단에서 포커스를 맞추고 망원단으로 줌 인할 때에는 광학적 특성으로 포커스가 많이 벗어나기 때문에 포커스를 다시 맞추어 주어야 하는 것을 보여주고 있다. 하지만, 망원단에서 포커스를 맞추고 광각단으로 이동할 때에는 포커스를 벗어나는 정도가 적어지므로, 줌 동작 후에도 추가적으로 포커스를 맞출 필요가 없게 된다.
따라서, 줌 아웃 브라켓팅 촬영단계(S530)에서는 별도의 포커스 조정 단계 없이 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행할 수 있게 된다. 이에 따라, 종래의 줌 브라켓팅 촬영에서 문제가 되었던 동작 시간을 크게 개선할 수 있게 된다.
줌 브라켓팅 준비단계(S540)에는 현재의 줌 레벨이 광각단 및 망원단이 아닌 중간 레벨인 경우에 줌 레벨을 광각단 또는 망원단으로 이동하여 줌 브라켓팅 촬영을 준비한다.
줌 브라켓팅 준비단계(S540)는 줌 단 판단단계(S541), 광각단 이동단계(S542), 망원단 이동단계(S543), 및 포커스 조정단계(S544, S545)를 구비할 수 있다.
줌 단 판단단계(S541)에는 현재의 줌 레벨이 광각단에 가까운지 또는 망원단 에 가까운지 여부를 판단한다. 광각단 이동단계(S542)에는 현재의 줌 레벨이 광각단에 가까운 중간 레벨인 경우에 현재의 줌 레벨을 광각단으로 이동한다.
망원단 이동단계(S543)에는 현재의 줌 레벨이 망원단에 가까운 중간 레벨인 경우에 현재의 줌 레벨을 망원단으로 이동한다. 포커스 조정단계(S544, S545)에는 현재의 줌 레벨에서 포커스 조정을 수행한다. 이때, 포커스 조정은 통상의 자동 포커스 조정에 의하여 수행될 수 있다.
줌 인 브라켓팅 촬영단계(S520)에는 설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 디지털 줌 인 하여, 디지털 줌 인에 의하여 줌 브라켓팅 촬영을 수행할 수 있다. 이때, 줌 리미트는 하드웨어적인 줌 한계에 해당하는 망원단이 될 수 있다. 또한, 줌 리미트는 하드웨어적인 줌 한계 내에서 미리 설정된 소프트웨어적인 줌 한계에 해당하는 망원단이 될 수 있다.
다른 실시예로서, 줌 리미트는 중심 영역이 잘리지 아니하면서 촬영될 수 있도록 망원단 방향으로 최대한 이동된 줌 한계가 될 수 있다.
줌 인 브라켓팅 촬영단계(S520)에는 줌 레벨을 설정된 광각단으로부터 설정된 망원단으로 설정된 간격으로 이동하면서 서로 다른 줌 레벨에 따라 복수개의 사진을 촬영할 수 있다. 이때, 최초 촬영되는 입력 영상에서 중심 영역의 중심점의 위치를 고정하여 디지털 줌 인 하는 것이 바람직하다.
도 7 및 도 8에는 각각 줌 브라켓팅 촬영 시에 줌 작동 전의 입력 영상(70)과 입력 영상(70)에 대한 디지털 줌 인을 수행하여 생성된 줌 인 영상(80)이 개시되어 있다.
도면에 도시된 실시예에서 입력 영상(70)에서 얼굴 영역이 중심 영역(71)이 되고, 줌 리미트(72) 범위 내에서 중심 영역(71)의 중심점(71a)의 위치를 고정하여 디지털 줌 인 할 수 있다. 이때, 줌 리미트(72)는 중심 영역이 잘리지 아니하는 범위가 될 수 있다.
또한, 줌 인 영상(80)에서 중심 영역(81)의 중심점(81a)의 위치는 입력 영상(70)에서의 중심점(71a)과 동일한 점이 될 수 있다. 또한, 줌 인 영상(80)에서의 줌 리미트(82)는 입력 영상에서의 줌 리미트(72)와 동일한 영역이 될 수 있다.
줌 인 브라켓팅 촬영단계(S520)는 디지털 줌 인 단계(S521), 줌 리미트 판단단계(S522), 및 저장단계(S523)를 구비할 수 있다.
디지털 줌 인 단계(S521)에는 현재의 줌 레벨에 대하여 디지털 줌 인 하여 줌 인 영상을 생성한다. 줌 리미트 판단단계(S522)에는 현재의 줌 레벨이 상기 줌 리미트를 넘었는가를 판단한다. 저장단계(S523)에는 현재의 줌 레벨이 줌 리미트를 넘지 않은 경우에 줌 인 영상을 저장한다.
줌 리미트 판단단계(S522)에서의 판단 결과 현재의 줌 레벨이 줌 리미트를 넘지 않은 경우에, 줌 리미트 판단단계(S522) 및 저장단계(S523)를 반복적으로 수행함으로써, 중심 영역이 잘리지 않는 범위 내에서 디지털 줌 인에 의하여 줌 인 영상을 저장할 수 있다.
따라서, 디지털 줌 인 브라켓팅 촬영 시에 중심 영역에 해당하는 얼굴 좌표가 화면에서 일정 범위 안에 들어오는지를 확인하여 얼굴이 잘려지는 현상이 생기지 않도록 할 수 있다.
줌 인 브라켓팅 촬영단계(S520)는 줌 리미트 판단단계(S522)를 구비하여, 줌 리미트에 도달될 때까지 줌 레벨을 변경하면서 줌 리미트 판단단계(S522) 및 저장단계(S523)를 수행하여, 서로 다른 줌 레벨에 대하여 복수개의 줌 인 영상을 촬영할 수 있다.
또한, 줌 인에 의한 줌 브라켓팅 촬영 시에 관심 대상이 되는 중심 영역에 해당하는 얼굴 영역이 잘리지 아니하고 줌 인 영상을 촬영할 수 있다.
또한, 줌 아웃 브라켓팅 촬영단계(S530)에는 줌 레벨을 설정된 망원단으로부터 설정된 광각단으로 설정된 간격으로 이동하면서 서로 다른 줌 레벨에 따라 복수개의 사진을 촬영할 수 있다. 이때, 설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 광학 줌 아웃 하여, 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행할 수 있다.
줌 아웃 브라켓팅 촬영단계(S530)에는 광학 줌이 동작하고 화각이 점점 넓어지기 때문에 줌 브라켓팅 촬영 시에 얼굴이 잘리는 문제가 없다. 다만, 인물 사진을 촬영하는 경우에, 얼굴 영역이 너무 작게 나오지 않게 하는 것이 필요하다.
이때, 거리가 멀어지면 얼굴 검출기에 필요한 정보가 그만큼 작아져 검출이 안될 수 있다. 따라서, 줌 아웃 브라케팅 촬영 시에 얼굴 검출기에서 얼굴이 검출되는지의 여부 확인하면서 촬영을 수행할 수 있다.
줌 아웃 브라켓팅 촬영단계(S530)는 줌 아웃 단계(S531), 줌 아웃 영상 입력단계(S532), 및 줌 아웃 영상 촬영단계(S533 내지 S537)를 구비할 수 있다.
줌 아웃 단계(S531)에는 현재의 줌 레벨에 대하여 광학 줌 아웃 한다. 줌 아 웃 영상 입력단계(S532)에는 줌 아웃에 의한 줌 레벨에 의하여 줌 아웃 영상을 입력받는다. 줌 아웃 영상 촬영단계(S534 내지 S537)는 줌 아웃 영상을 촬영한다.
줌 아웃 영상 촬영단계(S534 내지 S537)는 얼굴 영역 검출 단계(S534), 얼굴 영역 판단단계(S535), 및 촬영단계(S536, S537)를 구비할 수 있다.
얼굴 영역 검출 단계(S534)에는 줌 아웃 영상에서 얼굴 영역을 검출한다. 얼굴 영역 판단단계(S535)에는 줌 아웃 영상에서 얼굴 영역이 검출되었는가를 판단한다. 촬영단계(S536, S537)에는 줌 아웃 영상에 대한 촬영을 수행한다.
이를 위하여, 먼저 입력 영상에서 얼굴 영역이 검출되었는가를 판단하고(S533), 입력 영상에서 얼굴 영역이 검출된 경우에 얼굴 영역 검출 단계(S534) 및 얼굴 영역 판단단계(S535)에서 줌 아웃 영상에서 얼굴 영역을 검출하고 검출 여부를 판단할 수 있다.
이때, 줌 아웃 영상에서 얼굴 영역이 검출되지 아니한 경우에는 줌 아웃 브라켓팅 촬영단계(S530)를 종료한다. 줌 아웃 영상에서 얼굴 영역이 검출된 경우에는 촬영단계(S536)에서 줌 아웃 영상에 대한 촬영을 수행한다.
이에 따라, 얼굴 영역이 포함된 영상에서 얼굴 영역이 인식 가능한 정도까지 줌 아웃을 할 수 있다.
입력 영상에서 얼굴 영역이 검출되지 아니한 경우에는 얼굴 영역 검출 단계(S534) 및 얼굴 영역 판단단계(S535)를 수행하지 아니하고, 촬영단계(S537)에서 줌 아웃 영상에 대한 촬영을 수행한다.
또한, 줌 아웃에 의한 줌 브라켓팅 촬영 시에 관심 대상이 되는 중심 영역에 해당하는 얼굴 영역이 식별 가능한 상태에서 줌 아웃 영상을 촬영할 수 있다.
본 발명에 따르면, 줌 브라켓팅(zoom bracketing) 조정의 시점에 따라 적절한 줌 조정 방법을 선택함으로써, 자동 초점 조정에 소요되는 시간을 단축할 수 있다.
본 발명은 첨부된 도면에 도시된 일 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 수 있을 것이다. 따라서, 본 발명의 진정한 보호 범위는 첨부된 청구 범위에 의해서만 정해져야 할 것이다.
도 1은 본 발명에 따른 디지털 영상 처리장치의 실시예로서, 디지털 카메라의 뒷면 외형을 보여주는 도면이다.
도 2는 도 1의 디지털 카메라 내부에 포함될 수 있는 제어장치를 개략적으로 도시한 블록도이다.
도 3은 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치를 개략적으로 도시한 블록도이다.
도 4는 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치의 제어방법을 개략적으로 도시한 흐름도이다.
도 5는 도 4의 디지털 영상 처리장치의 제어방법에서 중심 영역에 대하여 줌 브라켓팅 촬영이 수행되는 과정을 개략적으로 도시한 흐름도이다.
도 6은 본 발명에 의한 줌 브라켓팅 촬영에서 줌 동작 시에 초점 위치를 추적할 때, 초점에서 벗어나는 정도를 개략적으로 도시한 도면이다.
도 7은 본 발명에 따른 줌 브라켓팅 촬영 시에 줌 작동 전의 입력 영상을 개략적으로 도시한 도면이다.
도 8은 도 7의 입력 영상에 대한 디지털 줌 인을 수행하여 생성된 줌 인 영상을 개략적으로 도시한 도면이다.
도 9는 본 발명에 따른 줌 브라켓팅 촬영 시에 얼굴 영역이 복수개 검출된 입력 영상을 개략적으로 도시한 도면이다.
도 10은 도 9의 입력 영상에 대한 디지털 줌 인을 수행하여 생성된 줌 인 영 상을 개략적으로 도시한 도면이다.

Claims (20)

  1. 입력 영상을 입력받는 단계;
    상기 입력 영상에서 얼굴 영역을 검출하는 단계;
    상기 입력 영상에 대하여 포커스를 조정하는 단계;
    상기 입력 영상을 촬영하는 단계;
    상기 입력 영상에서 중심 영역을 설정하는 단계; 및
    현재의 줌 레벨이 설정된 망원단인 경우에 상기 중심 영역에 대하여 포커스 조정없이 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행하는 단계를 구비하는 디지털 영상 처리장치의 제어방법.
  2. 제1항에 있어서,
    상기 중심을 영역을 설정하는 단계가,
    상기 입력 영상에서 얼굴 영역이 검출되었는가를 판단하는 단계,
    상기 입력 영상에서 상기 얼굴 영역이 검출된 경우에 상기 얼굴 영역을 상기 중심 영역으로 설정하는 단계, 및
    상기 입력 영상에서 얼굴 영역이 검출되지 아니한 경우에 상기 포커스 조정을 위한 포커스 영역을 상기 중심 영역으로 설정하는 단계를 구비하는 디지털 영상 처리장치의 제어방법.
  3. 제2항에 있어서,
    상기 얼굴 영역이 복수개 검출되는 경우에 지정된 얼굴을 인식하고, 인식된 얼굴 영역을 상기 중심 영역으로 설정하는 디지털 영상 처리장치의 제어방법.
  4. 제1항에 있어서,
    상기 줌 브라켓팅 촬영을 수행하는 단계가,
    현재의 줌 레벨을 판단하는 단계; 및
    상기 현재의 줌 레벨이 설정된 광각단인 경우에 디지털 줌 인에 의하여 줌 브라켓팅 촬영을 수행하는 단계를 구비하는 디지털 영상 처리장치의 제어방법.
  5. 제4항에 있어서,
    상기 줌 브라켓팅 촬영을 수행하는 단계가,
    상기 현재의 줌 레벨이 상기 광각단에 가까운 중간 레벨인 경우에 상기 현재의 줌 레벨을 상기 광각단으로 이동하는 단계,
    상기 현재의 줌 레벨이 상기 망원단에 가까운 중간 레벨인 경우에 상기 현재의 줌 레벨을 상기 망원단으로 이동하는 단계, 및
    현재의 상기 줌 레벨에서 포커스 조정을 수행하는 단계를 더 구비하는 디지털 영상 처리장치의 제어방법.
  6. 제4항에 있어서,
    설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 디지털 줌 인 하여, 디지털 줌 인에 의하여 줌 브라켓팅 촬영을 수행하는 디지털 영상 처리장치의 제어방법.
  7. 제6항에 있어서,
    상기 입력 영상에서 상기 중심 영역의 중심점의 위치를 고정하여 상기 디지털 줌 인 하는 디지털 영상 처리장치의 제어방법.
  8. 제7항에 있어서,
    상기 디지털 줌 인에 의하여 줌 브라켓팅 촬영을 수행하는 단계가,
    현재의 줌 레벨에 대하여 디지털 줌 인 하여 줌 인 영상을 생성하는 단계,
    현재의 줌 레벨이 상기 줌 리미트를 넘었는가를 판단하는 단계, 및
    현재의 줌 레벨이 상기 줌 리미트를 넘지 않은 경우에 상기 줌 인 영상을 저장하는 단계를 구비하는 디지털 영상 처리장치의 제어방법.
  9. 제1항에 있어서,
    설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 광학 줌 아웃 하여, 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행하는 디지털 영상 처리장치의 제어방법.
  10. 제9항에 있어서,
    상기 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행하는 단계가,
    현재의 줌 레벨에 대하여 광학 줌 아웃 하는 단계,
    상기 줌 아웃에 의한 줌 레벨에 의하여 줌 아웃 영상을 입력받는 단계, 및
    상기 줌 아웃 영상을 촬영하는 단계를 구비하는 디지털 영상 처리장치의 제어방법.
  11. 제10항에 있어서,
    상기 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행하는 단계가,
    상기 입력 영상에서 상기 얼굴 영역이 검출된 경우에 상기 줌 아웃 영상에서 얼굴 영역을 검출하는 단계, 및
    상기 줌 아웃 영상에서 상기 얼굴 영역이 검출된 경우에 상기 줌 아웃 영상에 대한 촬영을 수행하는 단계를 구비하는 디지털 영상 처리장치의 제어방법.
  12. 입력 영상을 입력받는 영상 입력부;
    상기 입력 영상의 줌 레벨을 조정하는 줌 조정부;
    상기 입력 영상의 포커스를 조정하는 포커스 조정부; 및
    상기 입력 영상에서 중심 영역을 설정하고, 상기 중심 영역에 대하여 포커스 조정없이 줌 브라켓팅 촬영을 수행하도록 제어하는 제어부를 구비하고,
    현재의 줌 레벨이 설정된 망원단인 경우에 광학 줌 아웃에 의하여 줌 브라켓팅 촬영을 수행하는 디지털 영상 처리장치.
  13. 제12항에 있어서,
    상기 입력 영상에 대하여 포커스를 조정하여 촬영을 수행하는 디지털 영상 처리장치.
  14. 제13항에 있어서,
    상기 입력 영상에서 얼굴 영역을 검출하여,
    상기 입력 영상에서 상기 얼굴 영역이 검출된 경우에 상기 얼굴 영역을 상기 중심 영역으로 설정하고,
    상기 입력 영상에서 얼굴 영역이 검출되지 아니한 경우에 상기 포커스 조정을 위한 포커스 영역을 상기 중심 영역으로 설정하는 디지털 영상 처리장치.
  15. 제14항에 있어서,
    상기 얼굴 영역이 복수개 검출되는 경우에 지정된 얼굴을 인식하고, 인식된 얼굴 영역을 상기 중심 영역으로 설정하는 디지털 영상 처리장치.
  16. 제12항에 있어서,
    현재의 줌 레벨이 설정된 광각단인 경우에 디지털 줌 인에 의하여 줌 브라켓팅 촬영을 수행하는 디지털 영상 처리장치.
  17. 제16항에 있어서,
    상기 현재의 줌 레벨이 상기 광각단에 가까운 중간 레벨인 경우에 상기 현재의 줌 레벨을 상기 광각단으로 이동하고,
    상기 현재의 줌 레벨이 상기 망원단에 가까운 중간 레벨인 경우에 상기 현재의 줌 레벨을 상기 망원단으로 이동하고,
    현재의 상기 줌 레벨에서 포커스 조정을 수행하는 디지털 영상 처리장치.
  18. 제16항에 있어서,
    상기 입력 영상에서 상기 중심 영역의 중심점의 위치를 고정하여 상기 디지털 줌 인 하는 디지털 영상 처리장치.
  19. 제16항에 있어서,
    설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 디지털 줌 인 하여 줌 인 영상을 생성하여 저장하는 디지털 영상 처리장치.
  20. 제16항에 있어서,
    설정된 줌 리미트에 도달할 때까지 현재의 줌 레벨에 대하여 광학 줌 아웃 하여 줌 아웃 영상을 입력받고, 상기 입력 영상에서 얼굴 영역이 검출되고, 상기 줌 아웃 영상에서 상기 얼굴 영역이 검출된 경우에 상기 줌 아웃 영상에 대한 촬영을 수행하는 디지털 영상 처리장치.
KR1020080133793A 2008-12-24 2008-12-24 디지털 영상 처리장치 및 그 제어방법 KR101537950B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080133793A KR101537950B1 (ko) 2008-12-24 2008-12-24 디지털 영상 처리장치 및 그 제어방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080133793A KR101537950B1 (ko) 2008-12-24 2008-12-24 디지털 영상 처리장치 및 그 제어방법

Publications (2)

Publication Number Publication Date
KR20100075166A KR20100075166A (ko) 2010-07-02
KR101537950B1 true KR101537950B1 (ko) 2015-07-22

Family

ID=42637588

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080133793A KR101537950B1 (ko) 2008-12-24 2008-12-24 디지털 영상 처리장치 및 그 제어방법

Country Status (1)

Country Link
KR (1) KR101537950B1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116790A (ja) * 1995-10-23 1997-05-02 Canon Inc カメラ制御装置
JP2002335436A (ja) * 2001-05-08 2002-11-22 Fuji Photo Film Co Ltd カメラ
JP2004064259A (ja) * 2002-07-26 2004-02-26 Kyocera Corp ディジタルカメラのピント確認方式
JP2005318515A (ja) * 2004-03-31 2005-11-10 Fuji Photo Film Co Ltd ディジタル・スチル・カメラ，画像再生装置および顔画像表示装置ならびにそれらの制御方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116790A (ja) * 1995-10-23 1997-05-02 Canon Inc カメラ制御装置
JP2002335436A (ja) * 2001-05-08 2002-11-22 Fuji Photo Film Co Ltd カメラ
JP2004064259A (ja) * 2002-07-26 2004-02-26 Kyocera Corp ディジタルカメラのピント確認方式
JP2005318515A (ja) * 2004-03-31 2005-11-10 Fuji Photo Film Co Ltd ディジタル・スチル・カメラ，画像再生装置および顔画像表示装置ならびにそれらの制御方法

Also Published As

Publication number Publication date
KR20100075166A (ko) 2010-07-02

Similar Documents

Publication Publication Date Title
KR101398475B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR20100056280A (ko) 디지털 영상 처리장치 및 그 제어방법
KR101594291B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101510101B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101537950B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101564417B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101411912B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101396347B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101480401B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101396333B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR20100077719A (ko) 디지털 영상 처리장치 및 그 제어방법
KR101284038B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101411318B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101457412B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101336924B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101387408B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101362769B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101510106B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101417803B1 (ko) 디지털 영상 처리장치
KR101582085B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101436834B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101288914B1 (ko) 디지털 영상 처리장치의 제어방법 및 그 장치
KR101235803B1 (ko) 영역 설정에 의한 디지털 영상 처리 방법
KR101444101B1 (ko) 디지털 영상 처리장치 및 그 제어방법
KR101436323B1 (ko) 디지털 영상 처리장치 및 그 제어방법

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20180628

Year of fee payment: 4