KR20140148448A - 이미징 디바이스를 오토포커싱하는 방법 및 장치 - Google Patents

이미징 디바이스를 오토포커싱하는 방법 및 장치 Download PDF

Info

Publication number
KR20140148448A
KR20140148448A KR1020147029980A KR20147029980A KR20140148448A KR 20140148448 A KR20140148448 A KR 20140148448A KR 1020147029980 A KR1020147029980 A KR 1020147029980A KR 20147029980 A KR20147029980 A KR 20147029980A KR 20140148448 A KR20140148448 A KR 20140148448A
Authority
KR
South Korea
Prior art keywords
focus
objects
image
image sensor
color
Prior art date
Application number
KR1020147029980A
Other languages
English (en)
Inventor
아놀드 제이 검
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20140148448A publication Critical patent/KR20140148448A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/675Focus control based on electronic image sensor signals comprising setting of focusing regions

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

이미지를 오토포커싱하는 방법들 및 장치들은 포커싱할 오브젝트를 선택할 때 오브젝트의 컬러 또는 오브젝트 움직임을 고려한다. 일부 구현들에서, 포커싱할 오브젝트 컬러에 대응하는 입력이 수신된다. 그 후에, 이미지는 이미지 센서로 캡처된다. 오브젝트들은 이미지에서 검출중이고, 오브젝트는 포커싱할 컬러에 대응하는 오브젝트의 컬러에 기초하여 선택된다. 그 후에, 일부 구현들에서, 이미지 센서는 선택된 오브젝트에 포커스를 맞추도록 오토포커싱될 수도 있다.

Description

이미징 디바이스를 오토포커싱하는 방법 및 장치{METHOD AND APPARATUS FOR AUTOFOCUSING AN IMAGING DEVICE}
본 발명의 실시형태들은 이미징 디바이스들에 관한 것이며, 특히, 이미징 디바이스들의 자동 포커싱을 위한 방법들 및 장치들에 관한 것이다.
디지털 프로세싱 기술의 이미징 디바이스들과의 통합은 사진 제품들을 사용하는데 있어 더 강력하고 용이할 수 있게 하였다. 예를 들어, 이미징 디바이스의 셔터 속도, 조리개 및 센서 감도를 디지털로 제어하는 능력은 다양한 이미징 환경들에서 개선된 픽처 품질을, 사진가가 각각의 환경에 대하여 이들 파라미터들을 수동적으로 결정하고 세팅할 필요 없이 제공하였다.
오토포커스 성능은 또한 거의 모든 사진가들이 스킬에 관계없이 대부분의 이미징 환경들에서 명확한 이미지를 획득하는 것을 가능하게 함으로써 고 품질의 사진들을 캡처하는 것을 용이하게 하였다. 오토포커스 성능은 또한 전문 사진가들의 작업 부하를 감소시킬 수도 있다. 오토포커스 성능은 이들 사진가들에 의해 생성된 사진들의 품질에 있어서의 대응하는 증가로, 사진가들이 그들 직업의 창조적인 측면에 더 많은 에너지를 집중하게 할 수 있다.
다양한 오토포커스 방법들이 현재의 디지털 이미징 디바이스들에서 사용될 수도 있다. 예를 들어, 더 높은 콘트라스트를 갖는 이미지들이 더 선명한 포커스를 가지는 경향이 있을 수도 있기 때문에, 일부 오토포커스 방법들은 최고 콘트라스트를 이미지에 제공하는 포커스 위치를 찾아낸다. 일부 다른 오토포커스 방법들은 이미지의 일 부분 내에서 콘트라스트를 최적화시킬 수도 있다.
디지털 프로세싱 기술과 사진술의 통합은 전술된 것과 같은 몇몇 개선들을 가능하게 했지만, 일부 문제들이 해결되지 않고 남아있다. 예를 들어, 디지털 카메라들의 오토포커스 성능들은 일부 이미징 환경들에서 비효율적으로 유지된다. 일반적인 인물 사진들 및 풍경 장면들은 카메라가 오토포커스 모드에 있을 때 충분한 포커스를 획득할 수도 있지만, 일부 장면들에 대하여 이미징 디바이스를 포커싱하는 것은 여전히 수동 포커스가 수행될 것을 요구할 수도 있다. 일부 이미징 환경들에서, 예컨대, 사진가의 피사체는 다른 오브젝트들 사이에 위치되거나, 다른 오브젝트들 뒤에 위치되거나, 심지어 다른 오브젝트들에 의해 가려질 수도 있다. 이는 카메라가 어떤 오브젝트를 포커싱할지 결정하는 것을 어렵게 할 수도 있다. 그 결과, 잘못된 오브젝트가 포커스를 위해 선택될 수도 있다. 일부 이미징 환경들에서, 카메라는 선택된 포커스를 빈번하게 변경할 수도 있다.
이는 야생 동물을 촬영할 때 그러할 수도 있다. 사슴은 사진가와 사슴 사이에 몇 개의 나무들이 있는, 숲이 울창한 환경에서 보여질 수도 있다. 이러한 이미징 환경에서, 사슴은 여전히 매우 가시적이어서 적절한 포커스가 매력적인 사진을 제공하게 할 수도 있다. 그러나, 다수의 오토포커스 방법들은 이러한 환경에 대하여 최적화되지 않기 때문에, 이미징 디바이스가 오토포커스 모드에 있을 때 사슴에 포커스가 맞지 않을 수도 있다. 예를 들면, 일부 이미징 디바이스들은 사슴 자체보다는 사슴과 사진가 사이의 나무들에 포커싱하는 것을 시도할 수도 있다. 나무에 있는 새를 촬영하는 것을 시도할 때 유사한 결과가 발생할 수도 있다. 종래의 오토포커스 방법들은 나무의 가지들 또는 나뭇잎들이 아닌 새에 대한 포커스를 획득하는데 있어 어려움이 있을 수도 있다. 이는 특히, 나뭇잎들 및 가지들이 새보다 사진가에 가까울 경우, 종래의 오토포커스 방법들에는 문제가 될 수도 있다.
다른 이미징 환경들은 종래의 오토포커스 방법들에 대하여 추가의 도전과제들을 제시할 수도 있다. 예컨대, 일부 이미징 환경들에서, 사진가는 움직이는 오브젝트에 이미지를 포커싱할 것을 원할 수도 있다. 스포츠 포토그래피는 이러한 이미징 환경을 제시할 수도 있다. 야구장의 이미지는 야구장 위의 몇몇 플레이어들을 포함할 수도 있고, 한 명의 플레이어는 베이스들 사이를 달리고 있다. 사진가는 달리는 플레이어의 이미지를 캡처하는 것을 원할 수도 있으며, 그 플레이어는 가장 선명한 초점을 갖는다. 베이스들 사이를 달리는 플레이어는 야구장 위의 다른 플레이어들보다 이미징 디바이스로부터 상이한 거리에 있을 수도 있으며, 따라서 특정 포커스 세팅은 달리는 플레이어에 적절한 포커스를 맞출 수도 있다. 종래의 오토포커스 방법들은 몇몇 이유들로 이러한 환경에서 적절한 포커스를 달성할 수 없을 수도 있다. 먼저, 종래의 오토포커스 방법들은 프레임 내의 다수의 플레이어들 중 어떤 플레이어에게 최상의 포커스를 제공해야하는지 식별할 수 없을 수도 있다. 예를 들어, 일부 오토포커스 방법들은 카메라에 가장 가까운 플레이어에 포커싱하는 것을 선택할 수도 있다. 1루 베이스로부터 2루 베이스로 달리는 플레이어가 예컨대 1루수보다 카메라로부터 더 떨어져 있다면, 상기 방법은 적절한 포커스를 달성하지 못할 수도 있다.
다른 방법들은 우수한 전체 포커스를 제공하는 절충형 포커스를 찾아낼 수도 있다. 이러한 방법으로, 카메라로부터 "평균" 거리에 있는 플레이어들은 포커스 내에 많이 있을 수도 있지만, 사진가로부터 "평균" 플레이어보다 더 가깝거나 더 떨어진 플레이어들은 포커스 내에 적게 있을 수도 있다.
플레이어의 움직임은 또한 종래의 오토포커스 방법들에 대하여 도전과제들을 생성할 수도 있다. 일부 종래의 오토포커스 방법들은 최상의 포커스 위치를 결정할 때 다수의 이미지들을 캡처할 수도 있다. 이들 방법들 중 일부는 상이한 포커스 위치를 갖는 다수의 이미지들의 각각을 캡처할 수도 있다. 오토포커스 프로세스 동안 캡처된 이미지들의 각각으로부터 도출된 데이터는 그 후, 비교될 수도 있다. 몇몇 이미지들로부터 도출된 데이터의 이러한 상대적인 비교는 최상의 포커스를 결정하는데 사용될 수도 있다. 예를 들어, 각각의 포커스 위치에서 이미지들의 콘트라스트는, 이미징 디바이스들을 어떻게 오토포커싱할지 결정할 때, 비교될 수도 있다.
이러한 상대적인 비교는, 각각의 포커스 위치에서 캡처된 각각의 이미지의 콘텐츠가 상대적으로 일정할 때, 잘 작용할 수도 있다. 이는 상대적인 비교가 변화하는 포커스 위치가 각각의 이미지의 특징들에 어떻게 영향을 주는지 평가하게 할 수도 있다. 오토포커스 프로세스 동안 캡처된 다수의 이미지들이 포커스 위치에 대한 변화들뿐만 아니라 이미지 자체에 대한 변화들을 포함할 경우, 상기 상대적인 비교에 몇몇 부정확성이 도입될 수도 있다. 이는 열등한 포커스 위치를 선택하는 오토포커스 방법을 발생할 수도 있다.
본 발명의 실시형태들 중 일부는 디지털 이미징 디바이스를 포커싱하는 방법을 포함할 수도 있다. 그 방법은, 이미지 센서로 이미지를 캡처하는 단계, 이미지 내에서 하나 이상의 오브젝트들을 식별하는 단계, 이미지 배경에 대한 적어도 하나의 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 적어도 하나의 오브젝트를 선택하는 단계, 및 선택된 오브젝트에 이미지 센서를 오토포커싱하는 단계를 포함할 수도 있다.
개시된 하나의 혁신적인 양태는 디지털 이미징 디바이스를 포커싱하는 방법이다. 그 방법은 이미지 센서로 이미지를 캡처하는 단계를 포함한다. 캡처된 이미지는 오브젝트들 및 배경을 포함할 수도 있다. 그 방법은 또한, 이미지 내에서 하나 이상의 오브젝트들을 식별하는 단계, 및 식별된 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 식별된 오브젝트들 중 적어도 하나를 선택하는 단계를 포함할 수도 있다. 그 후에, 이미지 센서는 적어도 하나의 선택된 오브젝트에 오토포커싱된다. 일부 구현들에서, 식별된 오브젝트들 중 적어도 하나를 선택하는 단계는 하나 이상의 식별된 오브젝트들의 적어도 일부분에 대하여 모션 벡터들을 결정하는 단계를 포함한다. 선택하는 단계는, 모션 벡터들의 사이즈에 적어도 부분적으로 기초할 수도 있다. 일부 구현들에서, 식별된 오브젝트들 중 적어도 하나를 선택하는 단계는, 이미지 배경에 대한 식별된 오브젝트의 움직임에 적어도 부분적으로 기초한다. 일부 구현들에서, 식별된 오브젝트들 중 적어도 하나를 선택하는 단계는, 디바이스의 팬 모션과 일치하는 식별된 오브젝트의 움직임에 적어도 부분적으로 기초한다. 일부 구현들에서, 식별된 오브젝트들 중 적어도 하나를 선택하는 단계는, 이미지 내에서 식별된 오브젝트의 상대적인 위치에 적어도 부분적으로 기초한다. 이미지 센서의 오토포커싱은, 이미지 센서가 적어도 하나의 선택된 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱되어야만 하는 것을 표시하는 입력을 수신하는 것을 포함할 수도 있다. 그 방법은 이미지 센서가 오브젝트 움직임에 포커싱되어야하는지 여부를 표시하는 사용자 인터페이스를 적어도 부분적으로 전자 디스플레이 상에 디스플레이하는 단계를 포함할 수도 있다. 일부 구현들에서, 식별된 오브젝트들 중 적어도 하나를 선택하는 단계는 추가로, 식별된 오브젝트들의 하나 이상의 컬러들에 기초할 수도 있다.
일부 구현들에서, 그 방법은 이미지 내에서 적어도 2 개의 오브젝트들을 식별하는 단계를 포함할 수도 있고, 선택된 오브젝트에 이미지 센서를 오토포커싱하는 단계는 적어도 2 개의 오브젝트들에 이미지 센서를 포커싱하기 위해 이미지 센서의 조리개를 조정하는 단계를 포함할 수도 있다. 일부 구현들에서, 일 시점에서 하나 이상의 오브젝트들의 위치를 예측하는 단계는 각각의 오브젝트의 모션에 기초할 수도 있고, 하나 이상의 오브젝트들은 포커스를 위해 선택된 적어도 하나의 오브젝트를 포함한다. 이미지 센서의 오토포커싱은 또한, 선택된 적어도 하나의 오브젝트의 예측된 위치에 기초할 수도 있다.
다른 혁신적인 양태는 이미징 디바이스를 포함한다. 그 디바이스는 이미지 센서, 및 이미지 센서로 이미지를 캡처하도록 구성된 센서 제어 모듈을 포함할 수도 있다. 그 디바이스는 또한, 캡처된 이미지 내에서 하나 이상의 오브젝트들을 식별하도록 구성된 오브젝트 검출 모듈, 및 적어도 하나의 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 적어도 하나의 오브젝트를 선택하도록 구성된 포커스 우선순위화 모듈, 및 선택된 적어도 하나의 오브젝트에 이미지 센서를 오토포커싱하도록 구성된 마스터 제어 모듈을 포함할 수도 있다.
일부 구현들에서, 그 디바이스는 하나 이상의 식별된 오브젝트들의 적어도 일부분에 대한 모션 벡터들을 결정하도록 구성된 오브젝트 모션 검출 모듈을 포함할 수도 있다. 일부 구현들에서, 포커스 우선순위화 모듈은 추가로, 이미지 배경에 대한 적어도 하나의 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 적어도 하나의 오브젝트를 선택하도록 구성된다. 일부 구현들에서, 포커스 우선순위화 모듈은 추가로, 디바이스의 팬과 실질적으로 일치하는 적어도 하나의 오브젝트의 움직임에 적어도 부분적으로 기초하여 식별된 오브젝트들 중 적어도 하나를 선택하도록 구성된다. 일부 구현들에서, 포커스 우선순위화 모듈은 추가로, 이미지 내에서 적어도 하나의 오브젝트의 위치에 적어도 부분적으로 기초하여 적어도 하나의 오브젝트를 선택하도록 구성된다.
그 디바이스는 이미지 센서가 이동 중인 적어도 하나의 오브젝트에 적어도 부분적으로 기초하여 포커싱되어야만 하는 것을 표시하는 입력을 수신하도록 구성된 입력 프로세싱 모듈을 포함할 수도 있다. 일부 구현들에서, 디바이스는 전자 디스플레이를 포함할 수도 있고, 마스터 제어 모듈은 추가로, 이미지 센서가 적어도 부분적으로 오브젝트 움직임에 포커싱되어야하는지 여부를 표시하는 사용자 인터페이스를 디스플레이하도록 구성될 수도 있다.
개시된 또 다른 혁신적인 양태는 이미징 디바이스이다. 그 이미징 디바이스는 이미지 센서로 이미지를 캡처하는 수단을 포함한다. 캡처된 이미지는 오브젝트들 및 배경을 포함할 수도 있다. 그 디바이스는 또한, 이미지 내에서 하나 이상의 오브젝트들을 식별하는 수단, 적어도 하나의 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 식별된 오브젝트들 중 적어도 하나를 선택하는 수단, 및 적어도 하나의 선택된 오브젝트에 이미지 센서를 오토포커싱하는 수단을 포함할 수도 있다. 일부 구현들에서, 이미지를 캡처하는 수단은 이미지 센서를 포함한다. 일부 구현들에서, 식별된 오브젝트들 중 하나를 선택하는 수단은, 적어도 부분적으로, 모션 벡터들의 사이즈에 기초하여 오브젝트를 선택한다. 일부 구현들에서, 오브젝트를 선택하는 수단은 또한, 이미지 내에서 오브젝트의 상대적인 위치에 적어도 부분적으로 기초하여 오브젝트를 선택한다.
일부 구현들에서, 선택하는 수단은 이미지 배경에 대한 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 오브젝트를 선택한다. 일부 구현들에서, 선택하는 수단은 디바이스의 팬과 실질적으로 일치하는 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 오브젝트를 선택한다. 일부 구현들에서, 이미징 디바이스는 또한 각각의 오브젝트의 모션에 기초하여 일 시점에서 하나 이상의 오브젝트들의 위치를 예측하는 수단을 포함하며, 여기서 하나 이상의 오브젝트들은 포커스를 위해 선택된 오브젝트를 포함하고, 이미지 센서의 오토포커싱은 선택된 오브젝트의 예측된 위치에 기초한다.
개시된 다른 혁신적인 양태는 디지털 이미징 디바이스를 포커싱하는 방법이다. 그 방법은 선택된 컬러를 표시하는 입력을 사용자로부터 수신하는 단계, 이미지 센서로 이미지를 캡처하는 단계, 캡처된 이미지 내에서 하나 이상의 오브젝트들을 식별하는 단계, 선택된 컬러에 적어도 부분적으로 기초하여 포커싱할 제 1 오브젝트를 선택하는 단계, 및 선택된 오브젝트에 이미지 센서를 오토포커싱하는 단계를 포함한다. 일부 구현들에서, 포커싱할 제 1 오브젝트를 선택하는 단계는 또한 제 1 오브젝트의 상대적인 위치에 기초한다. 일부 다른 구현들에서, 그 방법은 선택된 컬러에 적어도 부분적으로 기초하여 포커싱할 적어도 제 2 오브젝트를 선택하는 단계를 포함하며, 오토포커싱하는 단계는 포커싱할 제 1 오브젝트와 포커싱할 제 2 오브젝트 양자에 포커싱하는 단계를 포함한다. 일부 구현들에서, 포커싱할 제 1 오브젝트를 선택하는 단계는 추가로, 캡처된 이미지 내에서 제 1 오브젝트의 사이즈 중 하나 이상에 적어도 부분적으로 기초한다. 일부 구현들에서, 방법은 포커싱하지 않을 제 2 컬러를 표시하는 입력을 수신하는 단계를 더 포함하며, 포커싱할 제 1 오브젝트를 선택하는 단계는 추가로, 제 2 컬러에 기초한다.
개시된 또 다른 혁신적인 양태는 이미징 디바이스이다. 이미징 디바이스는, 이미지 센서, 입력 디바이스, 입력 디바이스로부터 선택된 컬러를 표시하는 입력을 수신하도록 구성된 입력 프로세싱 모듈을 포함한다. 그 디바이스는 또한, 이미지 센서로 이미지를 캡처하도록 구성된 센서 제어 모듈, 캡처된 이미지 내에서 하나 이상의 오브젝트들을 식별하도록 구성된 오브젝트 검출 모듈, 및 선택된 컬러에 적어도 부분적으로 기초하여 포커싱할 적어도 하나의 오브젝트를 선택하도록 구성된 포커스 우선순위화 모듈, 및 적어도 하나의 선택된 오브젝트에 이미지 센서를 오토포커싱하도록 구성된 마스터 제어 모듈을 포함한다. 일부 구현들에서, 디바이스는 포커싱할 컬러 상에 입력을 위한 프롬프트를 디스플레이하도록 구성된 전자 디스플레이를 포함한다. 일부 구현들에서, 포커스 우선순위화 모듈은 추가로, 이미지 내에서 오브젝트의 위치에 적어도 부분적으로 기초하여 오브젝트를 선택하도록 구성된다. 일부 구현들에서, 포커스 우선순위화 모듈은 추가로, 캡처된 이미지 내에서 오브젝트의 사이즈에 적어도 부분적으로 기초하여 오브젝트를 선택하도록 구성된다. 일부 구현들에서, 포커스 우선순위화 모듈은 추가로, 이미지 배경에 대한 오브젝트의 움직임에 적어도 부분적으로 기초하여 오브젝트를 선택하도록 구성된다.
개시된 양태들은 이하에서 개시된 양태들을 예시하고 제한하지 않도록 제공되는 첨부된 도면들과 결합하여 설명될 것이며, 유사한 지시들은 유사한 엘리먼트들을 표시한다.
도 1 은 사진가가 가지들과 나뭇잎들을 포함하는 자연 환경 내에서 새의 이미지를 캡처하는 것을 포함하는 이미징 환경을 도시한다.
도 2 는 사진가가 레이스 트랙에서 움직이고 있는 레이싱 카들의 이미지를 캡처하는 것을 포함하는 이미징 환경을 도시한다.
도 3 은 적어도 하나의 동작 실시형태를 구현하는 이미징 디바이스의 블록 다이어그램이다.
도 4 는 이미징 디바이스를 오토포커싱하는 프로세스의 플로우차트이다.
도 5 는 장면 내에서 움직이는 오브젝트들을 우선순위화하는 프로세스의 플로우차트이다.
도 6 은 이미징 디바이스를 오토포커싱하는 프로세스의 플로우차트이다.
도 7 은 이미징 디바이스를 오토포커싱하는 프로세스의 플로우차트이다.
도 8 은 이미징 디바이스를 오토포커싱하는 방법의 일부로서 캡처될 수도 있는 이미지이다.
본원에 개시된 구현들은 디지털 이미징 디바이스를 오토포커싱하는 방법들 및 시스템들에 관한 것이다. 일 구현은 이미징 디바이스로 이미지를 캡처하도록 구성된 시스템 또는 방법이다. 이미지가 캡처되면, 이미지 내의 하나 이상의 오브젝트들이 식별된다. 그 후에, 포커싱할 적어도 하나의 오브젝트는 이미지의 배경에 대한 적어도 하나의 오브젝트의 모션에 기초하여 선택될 수도 있다. 그 후에, 이미지 센서는 적어도 하나의 선택된 오브젝트를 포커싱하도록 조정될 수도 있다. 이 방법은, 종래의 오토포커스 방법들과 비교할 때, 움직이고 있는 적어도 하나의 오브젝트의 포커스를 개선할 수도 있다. 따라서, 예를 들어, 디지털 카메라와 같은 디지털 이미징 디바이스는 축구 경기에서 달리는 사람 쪽을 가리킬 수도 있다. 시스템은 달리는 사람을 나머지 배경에 대한 그들의 모션에 기초하여 식별할 것이며, 다른 축구 경기 플레이어들이 디지털 카메라에 대하여 더 가깝거나 더 중심에 위치된 경우에도, 그 사람에 이미지 센서를 포커싱할 것이다. 배경에 대한 모션은 또한, 배경보다는 피사체에 대한 포커스를 우선순위화하는데 사용될 수도 있다.
다른 실시형태들은 적어도 하나의 오브젝트의 컬러에 기초하여 포커싱할 적어도 하나의 오브젝트를 선택할 수도 있다. 이 실시형태에서, 디지털 이미징 디바이스는 관심 있는 특정 컬러를 표시하는 사용자로부터의 입력을 수신할 수도 있다. 관심 있는 컬러와 매칭하는 컬러를 갖는 오브젝트들이 포커스를 위해 선택될 수도 있다. 일 예에서, 사용자는 녹색 덤불 내의 적색 새를 포커싱하는 것을 원할 수도 있다. 사용자는 디지털 이미징 디바이스에서 적색 컬러를 선택할 것이며, 그 후에 디바이스는, 상이한 컬러의 오브젝트들이 장면에서 더 가깝거나 더 두드러지는 경우에도, 매칭된 적색 컬러를 갖는 오브젝트들을 포커싱하는 것을 시도할 것이다. 다른 예에서, 카메라는 녹색 배경으로 둘러싸인 전술된 적색 새와 같이 배경으로부터 상이하거나 고유한 컬러를 자동 선택할 수도 있다. 이러한 실시형태들은 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 임의의 조합으로 구현될 수도 있음을 당업자는 인식할 것이다.
다음의 설명에서, 예들에 대한 완전한 이해를 제공하기 위해 특정 세부사항들이 주어진다. 그러나, 예들은 이러한 특정 세부사항들이 없이 실시될 수도 있음이 당업자에 의해 이해될 것이다. 예를 들어, 불필요한 세부사항으로 예들을 모호하게 하지 않기 위해, 전기 컴포넌트들/디바이스들은 블록 다이어그램들로 보여질 수도 있다. 다른 사례들에서, 이러한 컴포넌트들, 다른 구조들, 및 기법들이 예들을 추가적으로 설명하기 위해 상세히 도시될 수도 있다.
예들은 프로세스로서 설명될 수도 있으며, 프로세스는 플로우차트, 플로우 다이어그램, 유한 상태 다이어그램, 구조 다이어그램, 또는 블록 다이어그램으로 도시됨에 또한 유의한다. 플로우차트가 동작들을 순차적인 프로세스로 설명할 수도 있지만, 동작들 중 다수는 병렬로, 또는 동시에 수행될 수 있고, 프로세스는 반복될 수 있다. 또한, 동작들의 순서는 재배열될 수도 있다. 프로세스는 프로세스의 동작들이 완료되는 경우 종료된다. 프로세스는 방법, 함수, 절차, 서브루틴, 서브프로그램 등에 대응할 수도 있다. 프로세스가 소프트웨어 함수에 대응하는 경우, 프로세스의 종료는 호 함수 또는 메인 함수로의 함수의 반환에 대응한다.
당업자라면, 정보 및 신호들이 임의의 다양한 상이한 기술들 및 기법들을 사용하여 표현될 수도 있음을 이해할 것이다. 예를 들면, 상기 설명을 통해 참조될 수도 있는 데이터, 명령들, 커맨드들, 정보, 신호들, 비트들, 심볼들, 및 칩들은 전압들, 전류들, 전자기파들, 자기장들 또는 자기 입자들, 광학 필드들 또는 입자들, 이들의 임의의 조합에 의해 표현될 수도 있다.
앞서 설명된 것과 같이, 종래의 오토포커스 방법들은 특정 이미징 환경들에서 적당한 포커스를 달성하는데 대한 무능력을 경험한다. 예를 들어, 이미지 센서로부터 상이한 거리들에서 이미지 내에 다수의 오브젝트들을 제시하는 이미징 환경들은, 오토포커스 방법이 다수의 오브젝트들 중 어떤 오브젝트 또는 오브젝트들이 포커스를 위해 선택되어야 하는지를 결정하는 것을 어렵게 할 수도 있다. 다른 이미징 환경들은 움직이고 있는 오브젝트들을 포함할 수도 있다. 움직이고 있는 오브젝트들은 종래의 오토포커스 방법들에 의해 인식될 수도 있다. 이는 본원에 개시된 방법들과 비교할 때, 열등한 포커스를 발생할 수도 있다.
기술된 방법들 및 장치들 중 일부는 그들의 이미징 환경에 대한 사진가의 이전 지식을 사용한다. 사진가는 그들의 이미징 환경이 어떤 특징들을 포함하는 피사체들 및 배경들을 제시할 것임을 미리 알고 있을 수도 있다. 예를 들어, 야생 동물 사진가는 그들의 이미지 배경들이 나무들, 가지들, 나뭇잎들, 풀들 또는 꽃들과 같은 오브젝트들을 포함할 수도 있음을 이해할 수도 있다. 사진가는 또한 그들의 사진 피사체들이 어떤 특징들을 가지는지 알고 있을 수도 있다. 예를 들어, 야생동물 사진가는 적색 컬러를 가질 수도 있는 새들, 및 구체적으로는 홍관조들을 촬영하는 것을 의도하고 있을 수도 있다. 본원에 개시된 방법들 및 장치들 중 일부에서, 사진가는 예컨대, 적색 오브젝트들에 이미징 디바이스에 의한 포커스를 위해 더 높은 우선순위가 제공되어야 하는 것을 표시하는 입력을 사용자 인터페이스를 통해 제공할 수도 있다. 일부 구현들은 또한, 갈색 및 녹색 오브젝트들이 탈우선순위화되어 이미징 디바이스가 이들 컬러 피처들을 가지지 않는 임의의 오브젝트에 포커싱하도록 하는 것을, 사진가가 구성하게 할 수도 있다. 따라서, 사진가가 개시된 방법들 또는 시스템들에 따른 디바이스들을 사용하여 이미지들을 캡처할 경우, 디지털 이미징 디바이스는 사진가에 의해 디바이스에서 선택된 컬러 정보에 기초하여 개선된 포커스를 제공할 수도 있다.
일부 다른 구현들에서, 이미지 내에서 오브젝트의 컬러의 고유성은 그 오브젝트가 포커스를 위해 선택되는지 여부를 결정할 수도 있다. 예를 들어, 이미징 환경은 하나의 노란색 오브젝트 및 몇몇 청색 오브젝트들을 포함하여 몇몇 오브젝트들을 포함할 수도 있다. 일부 구현들에서, 노란색 오브젝트는, 그 컬러가 이미지에서 검출된 다른 오브젝트들에 대하여 고유하기 때문에, 포커스를 위해 선택될 수도 있다. 이러한 구현에서, 시스템은 장면 내에서 상이한 컬러들의 비율을 측정할 것이다. 이러한 선택에 기초하여, 가장 고유한 컬러들 또는 미리 결정된 임계치에 기초하여 최저 비율에 있는 컬러들이 오토포커스를 위해 선택될 것이다. 따라서, 이러한 세팅을 사용하여, 사용자는 미리 세팅된 임계치를 초과하는, 장면 내의 가장 고유한 컬러의 오브젝트에 계속해서 오토포커싱할 수 있다. 예를 들어, 사용자는 장면의 전체 컬러의 50, 40, 30, 20, 10, 5, 2, 또는 1 퍼센트 미만인 컬러를 가진 임의의 오브젝트에 오토포커싱할 것을 선택할 수 있다. 이러한 세팅은, 녹색 또는 갈색의 덤불들의 큰 나뭇잎에 존재하는 임의의 컬러의 새에 오토포커싱하는 것을 허용할 것이다. 관련된 구현에서, 오토포커스 컬러는 자연 현상에서 낮은 발생율에 기초하여 결정될 수도 있다. 예를 들어, 밝은 청색들, 적색들 및 노란색들은 일부 구현들에서, 외부 사진 세팅에서 더 빈번하게 발생하는 자연적 컬러들, 예컨대 난색조들 (갈색들, 탄색들), 하늘색들 및 나뭇잎 색들 (녹색 범위) 보다 더 높게 우선순위화될 수도 있다.
일부 다른 구현들에서, 다른 오브젝트 특징들은 포커스를 위해 오브젝트를 선택할 때 오브젝트 움직임 또는 오브젝트 컬러와 함께 고려될 수도 있다. 예를 들어, 이미지 내에서 오브젝트의 위치는 또한, 포커싱할 오브젝트를 선택할 때 고려될 수도 있다. 이는 이미징 환경이 동일한 컬러의 몇몇 오브젝트들을 제시할 경우 오토포커스를 개선시킬 수도 있다. 이러한 환경에서, 하나의 특정 오브젝트는, 그 오브젝트가 동일한 컬러의 다른 오브젝트들 보다 프레임의 중심에 더 가깝게 위치될 경우, 적어도 부분적으로 포커스를 위해 선택될 수도 있다.
도 1 은 사진가 (10) 가 가지들 (25) 과 나뭇잎들 (30) 을 포함하는 자연 환경 내에서 새 (20) 의 이미지 (15) 를 캡처하는 카메라 (12) 를 사용하는 것을 포함하는 이미징 환경을 도시한다. 카메라 (12) 는 예시된 이미징 환경에서 새의 개선된 포커스를 제공하는 소프트웨어 명령들 또는 커맨드들을 포함한다. 이하 설명되는 것과 같이, 카메라 (12) 는 포커싱할 오브젝트들의 컬러를 표시하는 입력을 수신하는 소프트웨어 및 하드웨어를 포함할 수도 있다. 그 후에, 이러한 컬러에 매칭하는 오브젝트들에는 포커스를 위해 더 높은 우선순위가 제공된다. 예를 들어, 사진가 (10) 는 카메라 (12) 상의 전자 사용자 인터페이스를 통해, 적색 오브젝트들에는 적색이 아닌 컬러의 오브젝트들보다 더 높은 포커스 우선순위가 제공되어야만 하는 것을 선택할 수도 있다. 예시된 실시예에서, 가지들 (25) 및 나뭇잎들 (30) 은 갈색 또는 탄색일 수도 있다. 사진가가 적색 오브젝트들이 포커스를 위해 우선순위화되어야만 한다는 입력을 카메라 (12) 에 이미 제공하였다면, 카메라 (12) 는 녹색 또는 갈색 가지들보다 적색 새에 더 우수한 오토포커스를 제공하는 포커스 위치를 선택할 것이다. 일 실시형태에서, 포커싱할 오브젝트들의 컬러는 또한, 하나 이상의 배경 컬러들과 비교할 때, 이미지에서의 오브젝트의 위치 및/또는 오브젝트의 고유성에 기초하여 자동으로 결정될 수도 있다. 예를 들어, 이미지의 에지들에 위치된 동일한 컬러를 갖는 오브젝트들에 비해 이미지에서 더 중심에 위치된 오브젝트가 선택될 수도 있다. 유사하게, 오브젝트의 형상 또는 컬러의 고유성은 또한, 더 높은 포커스 우선순위의 오브젝트를 자동으로 선택하는데 사용될 수도 있다.
일부 구현들에서, 카메라는 다수의 오브젝트들에 포커스가 맞춰져야만 하는 것을 결정하도록 프로그래밍될 수도 있다. 이들 구현들은 이미지가 캡처될 때 다수의 오브젝트들의 포커스 및 명확성을 개선하기 위해, 셔터 속도, 조리개 및 이미지 센서 감도를 조정할 수도 있다. 예를 들어, 일부 구현들은 다수의 오브젝트들이 적당한 포커스를 획득하는 것을 보장하도록 캡처된 이미지의 피사계 심도를 증가시킬 수도 있다.
도 2 는 레이스 트랙 (45) 에서 움직이고 있는 레이싱 카들 (40a - 40b) 의 이미지 (35) 를 캡처하기 위해 카메라 (12) 를 사용하는 사진가 (10) 를 포함하는 이미징 환경을 도시한다. 카메라 (12) 는 이미지에서 고정된 레이스 트랙 (45) 과 같은 다른 오브젝트들과 비교할 때, 움직이는 레이싱 카들 (40a - 40b) 의 포커스를 우선순위화함으로써 레이싱 카들 (40a - 40b) 에 대한 포커스를 개선하는 소프트웨어 및 하드웨어를 포함할 수도 있다. 일부 구현들은 또한, 검출된 모션의 존재시 이미지 명확성을 개선시키기 위해 셔터 속도 및/또는 이미지 센서 감도를 결정할 수도 있다. 일부 구현들은 얼마나 많은 움직임의 오브젝트에 오토포커스 우선순위가 제공되어야 하는지를 정의하는 임계치를 사진가가 선택하게 하는 구성 세팅을 포함할 수도 있다. 예를 들어, 카메라는 장면 내의 다른 오브젝트들보다 1, 3, 5, 8, 10, 12, 15, 20, 25, 40, 50, 75 또는 그 이상의 퍼센트 더 빨리 움직이는 오브젝트들에 오토포커싱하도록 프로그래밍될 수도 있다.
일부 구현들은 또한, 카메라가 움직이는 장면을 가로질러 패닝되고 있는 동안 카메라의 중심에서 얼마나 많이 포커싱되고 있는지에 기초하여 오브젝트들을 트래킹할 수도 있다. 예를 들어, 사진가 (10) 는 그가 레이싱 카 (40a) 의 이미지를 캡처하는 것을 시도하고 있기 때문에 레이싱 카 (45) 를 가로질러 카메라 (12) 를 패닝할 수도 있다. 이러한 구현에서, 카메라 (12) 는 카메라의 패닝 모션을 검출하는 소프트웨어 및 하드웨어를 포함한다. 패닝은 카메라 디바이스가 내장된 다른 모션 감지 디바이스 또는 가속도계에 의해 검출될 수도 있다. 하나 이상의 캡처된 장면들은 패닝 모션과 일치하거나 실질적으로 일치하는 방향으로 이동 중일 수도 있는 하나 이상의 오브젝트들을 식별하기 위해 분석될 수도 있다. 일부 구현들은 개별 모션 검출기의 도움 없이 카메라의 팬과 일치하는 오브젝트들을 식별할 수도 있다. 예를 들면, 이들 구현들은 하나 이상의 이미지들에서 오브젝트들에 대한 모션 벡터들을 결정할 수도 있다. 팬 방향 및 속도는 모션 벡터들의 방향 및 길이에 기초하여 결정될 수도 있다. 더 작은 모션 벡터들을 갖는 오브젝터들이 디바이스의 팬과 일치하는 것으로 선택될 수도 있다. 그 후에, 이들 오브젝트들은 포커스를 위해 우선순위화될 수도 있다.
이들 구현들에서, 카메라 소프트웨어가 레이싱 카 (40a) 가 패닝 모션 동안 시계의 중심에서 위치를 유지하고 있는 것으로 결정한다면, 카메라 (12) 는, 카메라 (12) 가 사진가 (10) 에 의해 패닝되고 있을 때, 프레임에서 상대적으로 안정된 위치 때문에 레이싱 카 (40a) 에 오토포커싱할 수도 있다.
일부 구현들은 또한 움직이는 오브젝트의 모션을 예측할 수도 있다. 예를 들어, 이들 구현들은 사진 스냅샷과 같은 이미지가 캡처될 때 향후 일 시점에서 움직이는 오브젝트의 위치를 예측할 수도 있다. 그 후에, 이들 구현들은 스냅샷이 캡처되는 시간에 움직이는 오브젝트를 포커싱하는 포커스 위치 또는 세팅을 결정할 수도 있다. 예를 들어, 포커스 또는 세팅은 포커스의 추정된 변화율 및 포커스의 변화율의 가속/감속에 기초하여 결정될 수도 있다. 그 후에, 이들 구현들은 초점 거리를 세팅하고, 예측을 위해 사용된 시간에 이미지를 캡처할 수도 있다. 예를 들어, 오브젝트 모션 검출 모듈 (355) 에서의 명령들은 움직이는 오브젝트의 모션을 예측하기 위한 일 수단을 나타낼 수도 있다. 마스터 제어 모듈 (375) 에서의 명령들은 이미지가 캡처되는 시간에 움직이는 오브젝트를 포커싱하는 포커스 위치를 결정하기 위한 일 수단을 나타낼 수도 있다.
이들 구현들은 또한, 이미지가 캡처될 때 움직이는 오브젝트들의 포커스 및 명확성을 개선하기 위해, 셔터 속도, 조리개 및 이미지 센서 감도를 조정할 수도 있다.
도 3 은 적어도 하나의 동작 실시형태를 구현하는 이미징 디바이스 (12) 의 블록 다이어그램이다. 이미징 디바이스 (12) 는 메모리 (330), 이미지 센서 (315), 작업 메모리 (305), 스토리지 (310), 디스플레이 (325), 및 입력 디바이스 (390) 를 포함하는 몇몇 컴포넌트들에 동작가능하게 커플링된 프로세서 (320) 를 포함한다. 메모리 (330) 는 몇몇 모듈들을 저장한다. 이들 모듈들은 이하 설명되는 것과 같은 특정 기능들을 수행하도록 프로세서 (320) 를 구성하는 명령들을 포함한다. 예를 들어, 오퍼레이팅 시스템 모듈 (380) 은 디바이스 (10) 의 하드웨어 및 소프트웨어 리소스들을 관리하도록 프로세서 (320) 를 구성하는 명령들을 포함한다. 센서 제어 모듈 (335) 은 이미지 센서 (315) 를 제어하도록 프로세서 (320) 를 구성하는 명령들을 포함한다. 예를 들어, 센서 제어 모듈 (335) 에서의 일부 명령들은 이미지 센서 (315) 의 포커스 위치를 변경하도록 프로세서 (320) 를 구성할 수도 있다. 센서 제어 모듈 (335) 에서의 다른 명령들은 프로세서 (320) 가 이미지 센서 (315) 를 제어하여 이미지를 캡처하도록 프로세서 (320) 를 구성할 수도 있다. 그러므로, 센서 제어 모듈 (335) 에서의 명령들은 이미지 센서로 이미지를 캡처하는 일 수단을 나타낼 수도 있다. 센서 제어 모듈 (335) 에서의 다른 명령들은 이미지 센서 (315) 의 세팅들을 제어할 수도 있다. 예를 들어, 셔터 속도, 조리개, 또는 이미지 센서 감도는 센서 제어 모듈 (335) 에서의 명령들에 의해 세팅될 수도 있다.
입력 프로세싱 모듈 (337) 은 입력 디바이스 (390) 로부터 입력 데이터를 판독하도록 프로세서 (320) 를 구성하는 명령들을 포함한다. 예를 들어, 입력 데이터는 포커싱할 컬러를 표시할 수도 있다. 다른 입력 데이터는 이미징 디바이스 (12) 의 어떤 오토포커스 모드들이 활성인지를 표시할 수도 있다. 예를 들어, "움직이는 오브젝트들에 포커싱" 모드가 활성인 것을 표시하는 입력이 수신될 수도 있다. "고유한 컬러를 갖는 오브젝트들에 포커싱" 모드가 활성인 것을 표시하는 다른 입력이 수신될 수도 있다. 다른 입력은 포커싱하지 않을 하나 이상의 컬러들의 표시들을 포함할 수도 있다.
오브젝트 검출 모듈 (340) 은 이미지 센서 (315) 에 의해 캡처된 이미지 내의 오브젝트들을 검출하도록 프로세서 (320) 를 구성할 수도 있다. 그러므로, 오브젝트 검출 모듈 (340) 에서의 명령들은 이미지 내에서 하나 이상의 오브젝트들을 식별하는 일 수단을 나타낼 수도 있다. 오브젝트 모션 검출 모듈 (355) 은 이미지 센서 (315) 에 의해 캡처된 하나 이상의 이미지들 내에서 각각의 오브젝트에 대한 모션을 검출하도록 프로세서 (320) 를 구성하는 명령들을 포함할 수도 있다. 오브젝트 모션 검출 모듈 (355) 은 당업계에 공지된 모션 검출 기술들 중 임의의 하나를 사용할 수도 있다. 예를 들어, 오브젝트 모션 검출 모듈 (355) 은 하나 이상의 식별된 오브젝트들의 적어도 일 부분에 대하여 모션 벡터들을 결정할 수도 있다. 그 후에, 각각의 오브젝트의 모션 벡터들은 각 오브젝트의 모션의 정도 및 방향을 결정하도록 평가될 수도 있다. 오브젝트 컬러 검출 모듈 (360) 은 오브젝트 검출 모듈 (340) 에 의해 검출된 각 오브젝트의 컬러를 결정할 수도 있다.
포커스 우선순위화 모듈 (365) 은 오브젝트 검출 모듈 (340) 에 의해 검출된 각각의 오브젝트에 대하여 포커스 우선순위를 결정할 수도 있다. 예를 들어, 포커스 우선순위화 모듈 (365) 은 오브젝트 컬러 검출 모듈 (360) 로부터 오브젝트 컬러 데이터를 수신할 수도 있다. 이 정보는 오브젝트의 포커스 우선순위를 결정하는데 사용될 수도 있다. 포커스 우선순위화 모듈 (365) 은 또한 오브젝트 모션 검출 모듈 (355) 로부터 데이터를 수신할 수도 있다. 수신된 모션 데이터는 또한 오브젝트의 포커스 우선순위를 결정하는데 사용될 수도 있다. 포커스 우선순위화 모듈 (365) 은 또한 포커스를 위해 하나 이상의 오브젝트들을 선택할 수도 있다. 선택은 앞서 결정된 오브젝트들의 우선순위에 기초할 수도 있다. 그러므로, 포커스 우선순위화 모듈에서의 명령들은 이미지 배경에 대한 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱하기 위한 하나 이상의 오브젝트들을 선택하는 일 수단을 나타낸다. 포커스 우선순위화 모듈에서의 명령들은 또한 오브젝트의 컬러에 적어도 부분적으로 기초하여 포커싱할 하나 이상의 오브젝트들을 선택하는 수단을 나타낼 수도 있다. 오브젝트의 컬러는 입력 디바이스 (390) 로부터의 입력을 통해 수신된 컬러에 대응할 수도 있다.
마스터 제어 모듈 (375) 은 디바이스 (12) 의 전체 동작을 제어하도록 프로세서 (320) 를 구성하는 명령들을 포함할 수도 있다. 예를 들면, 마스터 제어 모듈 (375) 은 이미지 센서 (315) 의 포커스 위치를 변경하고 이미지 센서 (315) 로 이미지들을 캡처하는 센서 제어 모듈 (335) 에서의 서브루틴들을 호출하도록 프로세서 (320) 를 구성하는 명령들을 포함할 수도 있다. 마스터 제어 모듈 (375) 은 또한 디스플레이 (325) 상에 사용자 인터페이스를 디스플레이하는 명령들을 포함할 수도 있다. 예를 들어, 마스터 제어 모듈 (375) 은 디스플레이 (325) 상에 프롬프트를 디스플레이할 수도 있다. 프롬프트는 오브젝트 컬러를 표시하는 입력을 요청할 수도 있다. 그 후에, 마스터 제어 모듈 (375) 은 입력 디바이스 (390) 와 같은 입력 디바이스를 통해 입력을 수신하도록 프로세서 (320) 를 구성할 수도 있다. 입력은 포커스를 위해 우선순위화되어야만 하는 오브젝트의 컬러를 표시할 수도 있다. 그러므로, 마스터 제어 모듈에서의 명령들은 포커싱할 컬러를 표시하는 입력을 수신하는 일 수단을 나타낼 수도 있다.
대안적으로, 일부 구현들에서 프롬프트는 대신 오브젝트의 포커스를 우선순위화하는데 움직임이 활용되어야만하는지 여부를 요청할 수도 있다. 마스터 제어 모듈 (375) 은 또한, 이미지 센서 (315) 에 의해 캡처된 이미지에서 검출된 다수의 오브젝트들의 포커스를 우선순위화하기 위해 포커스 우선순위화 모듈 (365) 에서의 서브루틴들을 호출할 수도 있다. 포커스 우선순위화 모듈 (365) 은 일부 구현들에서, 포커싱할 하나 이상의 선택된 오브젝트들을 마스터 제어 모듈 (375) 로 리턴할 수도 있다. 마스터 제어 모듈 (375) 은 또한 하나 이상의 선택된 오브젝트들에 이미지 센서 (315) 를 오토포커싱하도록 프로세서 (320) 를 구성하는 명령들을 포함할 수도 있다. 그러므로, 마스터 제어 모듈 (375) 에서의 명령들은 이미지 센서를 하나 이상의 선택된 오브젝트들에 오토포커싱하는 일 수단을 나타낼 수도 있다.
입력 디바이스 (390) 는 그 구현에 의존하여 다수의 형태들을 취할 수도 있다. 일부 구현들에서, 입력 디바이스 (390) 는 터치 스크린 디스플레이를 형성하도록 디스플레이 (325) 와 통합될 수도 있다. 다른 구현들에서, 입력 디바이스 (390) 는 이미징 디바이스 (12) 상의 개별 키들 또는 버튼들을 포함할 수도 있다. 이들 키들 또는 버튼들은 디스플레이 (325) 상에 디스플레이된 메뉴의 네비게이션을 위한 입력을 제공할 수도 있다. 디스플레이 (325) 상에 디스플레이된 일부 메뉴들은 특정 컬러들 또는 다른 세팅들을 선택하는 입력을 수신할 수도 있다. 예를 들어, 입력 디바이스 (390) 로부터의 입력은 디스플레이 (325) 상에 디스플레이된 메뉴를 통해 컬러를 선택할 수도 있다. 다른 구현들에서, 입력 디바이스 (390) 는 입력 포트일 수도 있다. 예를 들어, 입력 디바이스 (390) 는 다른 디바이스의 이미징 디바이스 (12) 로의 동작가능한 커플링을 위해 제공할 수도 있다. 이미징 디바이스 (12) 는 입력 디바이스 (390) 를 통해 부착된 키보드 또는 마우스로부터 입력을 수신할 수도 있다.
도 4 는 움직이는 오브젝트에 이미징 디바이스를 오토포커싱하는 일 프로세스 (400) 의 플로우차트이다. 프로세스 (400) 는 도 3 에 도시된 이미징 디바이스 (12) 에 의해 수행될 수도 있다. 프로세스 (400) 는 블록 (405) 에서 시작하고, 그 후 블록 (410) 으로 이동하며, 여기서 오브젝트 움직임 검출 임계치가 결정된다. 이러한 임계치는 어떤 오브젝트들이 움직이는 오브젝트들로 분류되는지와 어떤 오브젝트들이 움직이지 않거나 고정된 오브젝트들로 분류되는지를 결정하기 위해 일부 구현들에서 사용될 수도 있다. 임계치보다 긴 길이의 모션 벡터들을 갖는 오브젝트들은 움직이는 오브젝트들로 고려될 수도 있지만, 임계치보다 짧은 길이의 모션 벡터들을 갖는 오브젝트들은 움직이지 않는 오브젝트들로 고려될 수도 있다. 이러한 임계치는 이미징 디바이스 또는 카메라가 제조될 때 세팅되는 디폴트 값을 가질 수도 있다. 일부 구현들은 사용자에 의해 또는 특권의 구성 인터페이스를 통해, 움직임 검출 임계치가 구성가능하게 할 수도 있다. 특권의 구성 인터페이스로의 액세스는, 전문화된 지식 또는 훈련을 받은 개인들만이 임계치를 변경할 수 있도록 패스워드 또는 다른 수단들을 통해 제한될 수도 있다. 오브젝트 움직임 검출 임계치가 세팅된 후에, 프로세스 (400) 는 블록 (420) 으로 이동하며, 여기서 장면의 제 1 이미지가 캡처된다. 이미지는 이미지 센서로 캡처될 수도 있다. 그 후에, 프로세스 (400) 는 블록 (430) 으로 이동하며, 여기서 장면의 제 2 이미지가 캡처된다. 이러한 제 2 이미지는 또한 이미지 센서로 캡처될 수도 있다. 그 후에, 프로세스 (400) 는 블록 (435) 으로 이동하며, 여기서 장면에서 오브젝트들이 검출된다. 오브젝트들은 또한 제 1 이미지와 제 2 이미지 사이에서 상관될 수도 있다. 블록 (435) 은 도 3 에 도시된 오브젝트 검출 모듈 (340) 에 포함된 명령들에 의해 수행될 수도 있다.
오브젝트들이 검출되고 2 개 이미지들 사이에서 상관된 후에, 프로세스 (400) 는 블록 (440) 으로 이동하며, 여기서 오브젝트들의 각각에 대한 모션 벡터들이 계산된다. 예시된 것과 같이, 프로세스 (400) 의 일부 구현들은 모션을 검출하기 위해 다수의 이미지들을 캡처할 수도 있다. 이들 구현들은 제 1 이미지에서 오브젝트의 위치와 제 2 이미지에서 오브젝트의 위치에 기초하여 오브젝트들의 모션 벡터들을 계산할 수도 있다. 일부 구현들에서, 제 1 이미지 및 제 2 이미지는 동일한 포커스 위치를 사용하여 캡처될 수도 있다. 다른 구현들에서, 제 1 이미지와 제 2 이미지는 상이한 포커스 위치들을 사용하여 캡처될 수도 있다. 모션 벡터들에 기초하여, 이들 구현들은 이미지들에서 검출된 오브젝트들의 포커스 우선순위를 조정할 수도 있다.
그 후에, 프로세스 (400) 는 결정 블록 (445) 으로 이동하고, 여기서 검출된 오브젝트들 중 임의의 오브젝트가 블록 (410) 에서 결정된 모션 검출 임계치를 초과하는 모션 벡터들을 가지는지 결정된다. 어떤 오브젝트들도 모션 검출 임계치를 초과하는 모션 벡터들을 가지지 않을 경우, 프로세스 (400) 는 결정 블록 (465) 으로 이동하며, 여기서 프로세싱되어야만 하는 추가 장면들이 존재하는지가 결정된다. 예를 들어, 일부 구현들은 장면에 대한 적절한 오토포커스 솔루션 및/또는 최대 노출 시간을 결정하기 위해 반복적으로 프로세싱되고 분석된 이미지들을 계속해서 동작하는 오토포커스 모드에 제공할 수도 있다. 이들 구현들에서, 예컨대, 프로세스 (400) 는 결정 블록 (465) 으로부터 블록 (420) 으로 리턴할 수도 있다. 그 후에, 프로세스 (400) 는 블록 (420) 으로부터 반복될 수도 있다.
블록 (445) 의 결정으로 리턴하여, 적어도 하나의 오브젝트의 모션 벡터들이 블록 (410) 에서 결정된 오브젝트 모션 검출 임계치를 초과한다면, 프로세스 (400) 는 블록 (445) 으로부터 블록 (450) 으로 이동하고, 여기서 검출된 움직이는 오브젝트들이 우선순위화된다. 일부 장면들에서, 블록 (410) 에서 결정된 오브젝트 움직임 검출 임계치를 초과하는 모션 벡터들을 갖는 하나 이상의 오브젝트가 존재할 수도 있다. 그러한 장면을 분석할 때, 프로세스 (400) 는 다수의 움직이는 오브젝트들 중 어느 것이 포커싱되어야만 하는지 결정할 수도 있다. 일부 구현들에서, 각각의 움직이는 오브젝트의 우선순위가 결정될 수도 있고, 이미징 디바이스 또는 카메라는 최고 우선순위의 움직이는 오브젝트에 포커싱된다. 움직이는 오브젝트 우선순위화에 대한 더 세부사항이 이하 도 5 의 논의에서 제공된다. 움직이는 오브젝트들이 우선순위화된 후에, 프로세스 (400) 는 결정 블록 (455) 으로 이동하며, 여기서 우선순위화된 오브젝트들 중 임의의 오브젝트가 포커스 우선순위 임계치를 초과하는 우선순위를 가지는지의 결정이 실행된다. 포커스 우선순위 임계치는 이미징 디바이스가 오브젝트에 오토포커싱하도록 하기 위해 오브젝트의 포커스 우선순위에 대한 더 낮은 제한치를 세팅할 수도 있다. 적어도 하나의 오브젝트가 포커스 우선순위 임계치를 초과하는 우선순위를 가질 경우, 프로세스 (400) 는 블록 (460) 으로 이동하며, 여기서 이미징 디바이스 또는 카메라는 최고 우선순위 오브젝트에 오토포커싱된다. 블록 (460) 은 도 3 에 도시된 마스터 제어 모듈 (375) 에 포함된 명령들에 의해 수행될 수도 있다.
더 높은 우선순위의 오브젝트 또는 오브젝트들에 대한 오토포커싱은, 장면 내에서 움직이는 오브젝트의 증가된 콘트라스트를 위해 제공하는 렌즈 포커스 위치를 선택하는 것을 포함할 수도 있다. 움직이는 오브젝트에 대한 오토포커싱은 하나 이상의 이미지 센서 파라미터들을 조정하는 것을 포함할 수도 있다. 예를 들어, 이미징 센서의 셔터 속도, 센서 감도, 및 조리개는 조정될 수도 있다. 일부 포커스 모드들에서, 주변광의 양이 또한 고려될 수도 있다. 오토포커스 방법을 구현하는 명령들, 예컨대 마스터 제어 모듈 (375) 에서의 명령들은 또한, 더 높은 우선순위 오브젝트의 속도를 추정할 수도 있다. 추정된 속도, 및 주변광 또는 플래시 디바이스에 의해 생성된 광에 기초하여, 셔터 속도가 결정될 수도 있다. 예를 들어, 움직이는 오브젝트 또는 오브젝트들의 블러를 감소시키는 셔터 속도가 선택될 수도 있다. 셔터 속도가 감소될 경우, 다른 이미징 파라미터들은 또한, 적당한 노출을 유지하도록 조정될 수도 있다. 예를 들어, 이미지 센서의 조리개가 증가될 수도 있다. 센서 감도는 또한, 감소된 셔터 속도를 보상하도록 증가될 수도 있다.
최고 우선순위 오브젝트 또는 오브젝트들에 대한 오토포커싱은 또한, 1 초과의 오브젝트에 포커싱하도록 노출 파라미터들을 조정하는 것을 포함할 수도 있다. 예를 들어, 프로세싱 블록 (460) 은 다수의 오브젝트들이 우선순위 임계치를 초과하는 포커스 우선순위를 갖는 것으로 결정할 수도 있다. 상기 오브젝트들을 적당한 포커스에 맞추기 위해, 프로세싱 블록 (460) 은 이미지 센서의 조리개와 같은 이미징 파라미터들을 추가로 조정할 수도 있다. 조리개를 감소시킴으로써, 이미지 센서에 의해 캡처된 이미지의 피사계 심도는 증가될 수도 있다. 이는 더 큰 조리개 세팅에서 캡처된 이미지와 비교할 때, 더 많은 오브젝트들에 적당한 포커스를 제공할 수도 있다. 전술된 것과 같이, 이미지 센서를 오토포커싱하는 것은 조리개를 조정하는데 부가하여 다른 이미징 파라미터들을 조정하는 것을 더 포함할 수도 있다. 예를 들어, 더 작은 조리개로, 적당한 노출을 제공하기 위해 셔터 속도가 증가되거나 센서 감도가 증가되어야 할 수도 있다.
일부 구현들은 이미징 디바이스가 이미징 파라미터들을 조정하는 정도를 제어하는 몇몇 포커스 모드들을 제공할 수도 있다. 예를 들어, 이미징 디바이스는 f 스톱 (조리개), 센서 감도, 또는 셔터 속도에 대한 파라미터들을 포함할 수도 있다. 파라미터들은 특정 값들로 세팅될 수도 있거나, 일부 구현들에서 각각 "자동" 모드로 세팅될 수도 있다. 그 후에, 일부 구현들은 파라미터들이 자동 모드로 세팅될 경우 이들 파라미터들을 조정할 수도 있다.
블록 (460) 에서 이미지 센서가 오토포커싱된 이후, 일부 구현들은 오토포커싱된 이미지 센서를 사용하여 이미지를 캡처할 수도 있다. 블록 (460) 의 프로세싱이 완료한 후에, 프로세스 (400) 는 종료 블록 (490) 으로 이동한다.
어떤 오브젝트도 오토포커스를 위한 적당한 우선순위를 가지고 있지 않는다면, 프로세스 (400) 는 블록 (455) 으로부터 결정 블록 (465) 으로 이동하며, 여기서 추가의 장면들이 캡처되어야하는지 결정된다. 추가의 장면들은, 예컨대 카메라가 연속 오토포커스 모드에서 동작하고 있는 경우, 캡처될 수도 있다. 연속 오토포커스 모드에서, 일부 구현들은 모션에 대한 이미지들을 계속해서 캡처하고 분석할 수도 있다. 결정 블록 (465) 에서 더 많은 장면들이 캡처되어야하는 것으로 결정이 실행되면, 프로세스 (400) 는 블록 (420) 으로 리턴한다. 어떤 추가 장면들도 캡처되지 않는다면, 프로세스 (400) 는 종료 블록 (490) 으로 이동한다. 일부 구현들에서, 임계치를 초과하는 어떤 모션도 발생하지 않는다면, 일부 구현들은 장면 모드와 같이, 상이한 초점 우선순위 결정 모드를 자동으로 선택할 수도 있다.
프로세스 (400) 가 제 1 및 제 2 이미지를 캡처하고, 제 1 및 제 2 이미지들에 기초하여 오브젝트들에 대한 모션 벡터들을 캡처하는 것으로 도시되면, 다른 구현들은 그 이미지에서의 오브젝트의 블러의 정도 및 방향에 기초하여 모션을 검출할 수도 있다. 이들 구현들은 추가로, 모션 검출이 이미지 센서의 셔터 속도 또는 감도에 기초하게 할 수도 있다. 이들 구현들은 단일 이미지에 기초하여 하나 이상의 오브젝트들의 모션을 검출할 수도 있다.
오브젝트 움직임에 부가하여, 일부 구현들은 다른 오브젝트 특징들에 적어도 부분적으로 기초하여 포커싱할 하나 이상의 오브젝트들을 선택할 수도 있다. 예를 들어, 오브젝트의 선택은 또한 이미지 내의 오브젝트의 위치에 기초할 수도 있다. 예를 들어, 이미지의 중심에 더 가깝게 위치된 오브젝트들은 이미지의 에지에 더 가깝게 위치된 오브젝트들보다 높게 우선순위화될 수도 있다. 오브젝트의 선택은 추가로 오브젝트의 컬러에 기초할 수도 있다.
일부 구현들은 블록 (450) 에서 검출된 각각의 오브젝트에 대하여 포커스 우선순위를 결정하기 위해 복수의 오브젝트 특징들을 결합할 수도 있다. 포커스 우선순위는 오브젝트의 상대적인 모션에 기초하여 증가될 수도 있다. 포커스 우선순위는 오브젝트의 컬러 또는 이미지 내의 오브젝트의 상대적인 위치에 기초하여 증가되거나 감소될 수도 있다. 이들 구현들에서, 각각의 오브젝트의 포커스 우선순위가 이들 및 다른 오브젝트 특징들에 기초하여 조정된 후에, 최고 우선순위를 갖는 오브젝트가 포커스를 위해 선택될 수도 있다.
일부 다른 구현들에서, 1 초과의 오브젝트가 포커스를 위해 선택될 수도 있다. 예를 들어, 복수의 오브젝트들의 포커스 우선순위들이 임계치 내에 또는 서로의 임계 퍼센트 내에 있다면, 복수의 오브젝트들은 모두 포커스를 위해 선택될 수도 있다. 이들 구현들에서, 이미지 센서의 포커스 위치는 선택된 오브젝트들의 포커스를 개선하도록 조정될 수도 있다. 이들 구현들 중 일부에서, 피사계 심도는, 복수의 오브젝트들이 모두 적당한 포커스에 맞춰질 수도 있도록 이미지 센서의 조리개를 조정함으로써 조정될 수도 있다. 그 후에, 이미지는 선택된 포커스 위치 및 선택된 피사계 심도를 사용하여 캡처될 수도 있다. 이는 다수의 오브젝트들이 포커스 내에 있도록 허용할 수도 있다.
도 5 는 장면 내에서 움직이는 오브젝트들을 우선순위화하는 프로세스 (450) 의 플로우차트이다. 프로세스 (450) 는 도 3 에 도시된 포커스 우선순위화 모듈 (365) 에서 구현될 수도 있다. 프로세스 (450) 는 블록 (505) 에서 시작한 후, 블록 (510) 으로 이동하며, 여기서 제 1 오브젝트가 취출된다. 그 후에, 프로세스 (450) 는 블록 (515) 으로 이동하며, 여기서 오브젝트의 사이즈는 사이즈 임계치와 비교된다. 일부 구현들에서, 임계치 사이즈보다 더 작은 오브젝트들은 포커스 우선순위화를 위해 고려되지 않을 수도 있다. 이는 이미징 디바이스 또는 카메라가 배경에서의 오브젝트와 같이 장면에서 매우 작은 오브젝트들을 포커싱하는 것을 시도한 경우 발생할 수 있는 일부 스퓨리어스 영향들을 회피할 수도 있다. 예시된 구현에서, 오브젝트의 사이즈가 사이즈 임계치보다 작다면, 오브젝트는 우선순위화되거나 우선순위 리스트에 입력되지 않으며, 이는 예시된 구현에서 오토포커싱할 오브젝트를 결정하는데 사용된다. 대신에, 오브젝트가 임계치보다 작다면, 프로세스 (450) 는 결정 블록 (530) 으로 이동하며, 프로세스 (450) 에서 분석되어야 하는 추가의 오브젝트들이 존재하는지 결정된다.
오브젝트의 사이즈가 사이즈 임계치 이상이면, 프로세스 (450) 는 블록 (520) 으로 이동하며, 여기서 오브젝트의 우선순위는 오브젝트의 모션 벡터(들) 의 사이즈, 장면 내의 오브젝트의 위치, 및 오브젝트의 사이즈 중 적어도 하나에 기초하여 계산된다. 일부 구현에서, 각각의 특징에는, 포커스 우선순위화에 대한 특징의 상대적인 중요성에 기초하여 가중치가 할당될 수도 있다. 오브젝트는 또한 각각의 특징에 대하여 스코어링될 수도 있다. 예를 들어, 오브젝트에는 사이즈 스코어, 위치 스코어, 및 움직임 스코어가 할당될 수도 있다. 그 후, 이들 특징들의 가중된 합 또는 평균은 각 오브젝트에 대하여 생성될 수도 있다. 그 후에, 다수의 검출된 오브젝트들은 가중된 합들 또는 평균들에 기초하여 우선순위화될 수도 있다. 다른 구현들은 단일 특징에 전체적으로 기초하여 수행되는 우선순위화와 함께 이들 특징들 중 오직 하나를 고려할 수도 있다.
일부 구현들에서, 오브젝트들이 우선순위화되는 방식은 구성가능할 수도 있다. 예를 들어, 전술된 각각의 특징과 연관된 임계치들 및/또는 가중치들은 우선순위화를 변경시키도록 구성될 수도 있다. 일부 구현들에서, 임계치들 또는 가중치들의 결정은 예컨대, 사용자 인터페이스를 통해 디바이스 사용자에 의해 실행될 수도 있다. 일부 구현들에서, 이미징 디바이스는 주문형 우선순위화 소프트웨어가 개발되게 하는 API 를 포함할 수도 있다. 예를 들어, 일부 구현들에서, 포커스 우선순위화 모듈 (365) 은 API "후크"를 제공할 수도 있다. 후크는 주문형 소프트웨어가 포커스 우선순위화 모듈에 의해 결정된 우선순위를 변경하게 할 수도 있다.
블록 (520) 에서 오브젝트의 우선순위가 결정된 후에, 오브젝트는 우선순위에 기초하여 우선순위화된 오브젝트 리스트에 삽입된다. 그 후에, 프로세스 (450) 는 블록 (530) 으로 이동하며, 여기서 분석할 추가의 오브젝트들이 존재하는지 결정한다. 우선순위화할 추가의 오브젝트들이 존재하는 경우, 프로세스 (450) 는 프로세싱 블록 (550) 으로 이동하며, 여기서 다음 오브젝트가 획득된다. 그 후, 프로세스 (450) 는 결정 블록 (515) 으로 리턴하고, 프로세스 (450) 가 반복된다. 프로세스 (500) 는 연속 방식으로 각 오브젝트의 프로세싱을 예시하지만, 다른 구현들은 오브젝트들을 동시에 프로세싱할 수도 있음에 유의하라. 예를 들어, 2 이상의 스레드들 또는 프로세스들이 생성되거나 사용될 수도 있고, 각각의 식별된 오브젝트는 프로세싱을 위해 프로세스들 또는 스레드들 중 하나에 할당될 수도 있다. 그 후, 각각의 프로세스 또는 스레드는 스레드 안전성을 보장하기 위해 뮤텍스들에 의해 적절히 보호되는 우선순위 리스트에 프로세싱된 오브젝트를 입력할 수도 있다.
결정 블록 (530) 에서 프로세싱을 위해 어떤 추가의 오브젝트들도 식별되지 않는다면, 프로세스 (450) 는 블록 (540) 으로 이동하고, 여기서 우선순위화된 오브젝트 리스트가 리턴된다. 일부 구현들에서, 우선순위화된 리스트는 프로세스 (450) 를 구현하는 서브루틴에 대한 파라미터로서 리턴될 수도 있다. 다른 구현들에서, 우선순위화된 리스트는 프로세스 (450) 를 구현하는 함수에 대한 리턴 함수 값일 수도 있다. 그 후에, 프로세스 (450) 는 종료 블록 (545) 으로 이동한다.
도 6 은 타겟 컬러에 기초하여 이미징 디바이스를 오토포커싱하는 프로세스 (600) 의 플로우차트이다. 일부 구현들에서, 다수의 컬러들이 우선순위화될 수도 있다. 프로세스 (600) 는 도 3 에 도시된 이미징 디바이스 (12) 에 의해 수행될 수도 있다. 프로세스 (600) 는 시작 블록 (605) 에서 시작한 후, 프로세싱 블록 (610) 으로 이동하며, 여기서 포커싱할 컬러 또는 컬러들을 표시하는 입력이 수신된다. 블록 (610) 은 도 3 에 도시된 것과 같은 마스터 제어 모듈 (375) 에 포함된 명령들에 의해 수행될 수도 있다. 입력은 도 3 에 또한 도시된 입력 디바이스 (390) 에 의해 수신될 수도 있다. 그 후에, 프로세스 (600) 는 블록 (615) 으로 이동하고, 여기서 이미지가 캡처된다. 블록 (615) 은 도 3 에 도시된 센서 제어 모듈 (335) 에 포함된 명령들에 의해 수행될 수도 있다. 그 후에, 프로세스 (600) 는 블록 (620) 으로 이동하고, 여기서 하나 이상의 오브젝트들이 이미지 내에서 식별된다. 블록 (620) 은 도 3 에 도시된 오브젝트 검출 모듈 (340) 에 포함된 명령들에 의해 수행될 수도 있다.
그 후에, 프로세스 (600) 는 블록 (630) 으로 이동하며, 여기서 식별된 오브젝트들의 컬러들이 결정된다. 그 후에, 프로세스 (600) 는 결정 블록 (640) 으로 이동하며, 여기서 임의의 오브젝트들이 블록 (610) 에서 수신된 포커싱할 컬러와 유사한 컬러를 가지는지 여부를 결정한다. 오브젝트가 포커싱할 컬러와 유사한 컬러를 가지는지 여부를 프로세스 (600) 가 결정하는 방식은 구현에 따라 변화할 수도 있다. 일부 구현들은 포커싱할 컬러와 오브젝트의 컬러를 컬러 공간, 예컨대 RGB 컬러 공간 또는 YCbCr 컬러 공간으로 맵핑할 수도 있다. 그 후에, 오브젝트의 컬러와 공간에서 포커싱할 컬러 간의 거리가 계산될 수도 있다. 거리가 임계치 미만이면, 오브젝트의 컬러는 포커싱할 컬러와 "유사한" 것으로 고려될 수도 있다. 결정 블록 (640) 이 적어도 하나의 오브젝트가 포커싱할 컬러와 유사한 컬러를 갖는다고 결정한다면, 프로세스 (600)는 블록 (650) 으로 이동하고, 여기서 오브젝트들은 포커스를 위해 우선순위화된다.
일부 장면들에서, 다수의 오브젝트들은 포커싱할 컬러와 유사한 컬러를 가질 수도 있다. 이러한 장면들을 이미징할 때, 이미징 디바이스 또는 카메라가 어떤 오브젝트들에 오토포커싱되어야만 하는지 결정하기 위해 오브젝트들 중에서 우선순위화하는 것은 필수적일 수도 있다. 일부 구현들에서, 오브젝트들의 우선순위화는 다차원 컬러 공간에서 포커싱할 컬러로부터 각각의 오브젝트의 컬러의 거리에 기초할 수도 있다. 예를 들어, 3 차원 컬러 공간에서 포커싱할 컬러에 더 가까운 컬러를 갖는 오브젝트는 3 차원 공간에서 포커싱할 컬러로부터 더 떨어진 컬러를 갖는 오브젝트보다 더 높게 우선순위화될 수도 있다.
다른 구현들에서, 포커싱할 컬러로부터 오브젝트의 컬러의 거리는 오브젝트의 포커스 우선순위를 결정하는데 있어 하나의 고려사항일 수도 있다. 예를 들어, 이미지 내에서 오브젝트의 사이즈 및 위치가 또한 고려될 수도 있다. 일부 구현들은 사이즈 스코어를 각각의 오브젝트에 할당할 수도 있고, 사이즈 스코어의 크기는 장면에서 오브젝트의 사이즈와 비례한다. 따라서, 더 큰 오브젝트들은 더 작은 오브젝트들보다 더 큰 사이즈 스코어를 수신할 것이다. 오브젝트들에는 또한 위치 스코어가 할당될 수도 있다. 장면의 중심에 더 가까운 오브젝트들에는 장면의 중심으로부터 더 떨어진 오브젝트들보다 더 높게 포지션 스코어가 할당될 수도 있다. 각각의 오브젝트에는 또한, 컬러 공간에서 포커싱할 컬러에 대한 오브젝트의 컬러의 거리에 반비례하는 컬러 매치 스코어가 할당될 수도 있다. 이들 구현들에서, 포커싱할 컬러에 더 가까운 컬러를 갖는 오브젝트들은, 그 컬러들이 컬러 공간에서 포커싱할 컬러로부터 더 떨어진 오브젝트들 보다 더 높은 컬러 매치 스코어들을 수신한다.
일부 구현들에서, 컬러, 사이즈 및 위치 스코어들은 오브젝트의 우선순위를 결정하기 위해 가산되거나 평균될 수도 있다. 그 후에, 각 오브젝트의 우선순위들은 어떤 오브젝트가 최고 우선순위를 가지는지 결정하기 위해 비교될 수도 있다. 일부 구현들에서, 이들 스코어들 각각에는 또한, 가중치, 및 생성된 각 오브젝트에 대한 가중된 합 또는 평균이 할당될 수도 있다. 가중된 합 또는 평균은 각 오브젝트의 우선순위를 결정할 수도 있다. 일부 구현들에서, 디폴트 가중치들은 이미징 디바이스 또는 카메라가 설계될 때 할당될 수도 있다. 일부 구현들에서, 하나 이상의 특징들의 가중치가 구성가능할 수도 있다. 가중치들은 이미징 디바이스 또는 카메라의 전자 디스플레이 상에 제공된 사용자 인터페이스를 통해 구성가능할 수도 있다. 일부 구현들에서, 가중치들은 입력 디바이스에 의해 제공된 통신 인터페이스를 통해 구성가능할 수도 있다. 예를 들어, 일부 이미징 디바이스들은, 외부 디바이스들과의 전자 통신을 가능하게 하는 USB 또는 다른 I/O 포트를 포함할 수도 있다. 외부 디바이스들이 I/O 포트를 경유한 통신을 통해 이미징 디바이스 파라미터들을 구성할 수 있게 하는 API 가 정의될 수도 있다.
포커싱할 컬러와 유사한 컬러를 갖는 오브젝트들이 우선순위화되면, 그 후 프로세스 (600) 는 블록 (660) 으로 이동하고, 여기서 이미징 디바이스는 최고 우선순위의 오브젝트 또는 오브젝트들에 오토포커싱된다. 블록 (660) 은 도 3 에 도시된 것과 같은 마스터 제어 모듈 (375) 에 포함된 명령들에 의해 수행될 수도 있다. 일부 구현들에서, 이미지는 센서가 오토포커싱된 후에 캡처될 수도 있다. 그 후에, 프로세스 (600) 는 종료 블록 (670) 으로 이동한다.
블록 (640) 으로 리턴하여, 어떤 오브젝트들도 포커싱할 컬러와 유사한 컬러를 가지지 않는다면, 프로세스 (600) 는 결정 블록 (645) 으로 이동한다. 블록 (645) 에서, 추가의 이미지들이 캡처되어야만 하는지 여부에 관한 결정이 실행된다. 일부 다른 구현들에서, 어떤 오브젝트들도 포커싱할 컬러와 유사한 컬러를 가지지 않는다면, 대안적인 포커스 방법이 선택될 수도 있다. 예를 들어, 포커스는 장면에서의 오브젝트들의 중심성, 또는 이미지들 내에서 오브젝트들의 움직임에 기초하여 선택될 수도 있다. 일부 구현들은 전체 장면에 대하여 우수한 포커스를 제공하기 위해 포커스를 선택할 수도 있다. 예를 들어, 이미지 센서에 의해 캡처된 이미지의 콘트라스트는 선택된 포커스 세팅에 의해 최대화될 수도 있다. 일부 구현들에서, 오토포커스 성능은 계속해서 동작하여 이미지들이 계속해서 캡처되고 포커싱할 오브젝트들에 대하여 평가될 수도 있다. 이들 구현들에서, 프로세스 (600) 는 결정 블록 (645) 으로부터 블록 (615) 으로 이동할 수도 있고, 여기서 다른 이미지가 캡처되고 프로세스 (600) 가 반복된다. 다른 구현들에서, 프로세스 (600) 는 블록 (645) 으로부터 종료 블록 (670) 으로 이동할 수도 있다.
포커싱할 최고 우선순위 오브젝트를 선택할 때, 일부 구현들은 단일 오브젝트를 선택할 수도 있다. 다른 구현들은 포커싱할 다수의 오브젝트들을 선택할 수도 있다. 일부 구현들에서, 장면의 속성은 오토포커스를 위해 단일 오브젝트가 선택될지 아니면 다수의 오브젝트들이 선택될지 결정할 수도 있다. 예를 들어, 일부 장면들에서, 몇몇 오브젝트들은 유사한 포커스 우선순위를 가질 수도 있다. 일부 장면들에서, 이는 포커싱할 컬러와 유사한 다수의 오브젝트들을 발생할 수도 있다. 다른 장면들에서, 이는 2 이상의 오브젝트들에 대하여 유사한 포커스 우선순위들을 발생하는 포커스 우선순위 계산의 성분들에 의해 야기될 수도 있다.
예를 들어, 일 장면에서, 제 1 오브젝트의 컬러는 포커싱할 컬러와 정확히 매칭할 수도 있다. 다차원 컬러 공간내에서 이러한 오브젝트 컬러와 포커싱할 컬러 간의 거리는 0 이거나 매우 작을 수도 있다. 이는 상기 오브젝트가 높은 컬러 매치 스코어를 가지게 할 수도 있다. 제 1 오브젝트는 장면의 에지에 위치될 수도 있고, 그 결과 제 1 오브젝트에 대하여 낮은 위치 스코어를 발생한다. 제 2 오브젝트의 컬러는 포커싱할 컬러와 덜 유사할 수도 있고, 그 결과, 제 1 오브젝트보다 더 낮은 컬러 매치 스코어를 발생한다. 제 2 오브젝트는 또한, 제 1 오브젝트보다 장면의 중심에 더 가깝게 위치될 수도 있고, 그 결과 제 2 오브젝트는 제 1 오브젝트보다 더 높은 위치 스코어를 갖는다. 결과적으로, 일부 구현들에서, 제 1 오브젝트와 제 2 오브젝트의 결과적인 우선순위들은 유사할 수도 있다. 이들 장면들에서, 일부 구현들은 오토포커스를 위해 양자의 이미지들을 선택할 수도 있다. 이들 구현들에서, 선택된 오브젝트들에 이미지 센서를 오토포커싱하는 것은 포커스 위치를 선택하는 것과 이미지에 대한 피사계 심도를 선택하는 것 양자를 포함할 수도 있다. 선택된 피사계 심도는 양자의 오브젝트들이 선택된 포커스 위치에서 적당한 포커스를 가지게 할 수도 있다.
도 7 은 디지털 이미징 디바이스를 오토포커싱하는 프로세스의 플로우차트이다. 프로세스 (700) 는 도 3 에 도시된 이미징 디바이스 (12) 에 의해 구현될 수도 있다. 프로세스 (700) 는 시작 블록 (705) 에서 시작하고, 그 후에 블록 (710) 으로 이동하여 오토포커스 파라미터들이 획득된다. 블록 (710) 은 도 3 에 도시된 마스터 제어 모듈 (375) 에 포함된 명령들에 의해 적어도 부분적으로 수행될 수도 있다. 오토포커스 파라미터들은 예컨대, 프로세스 (700) 에 의해 설명된 방법과 같은 오토포커스 방법에 일반적인 제어를 제공할 수도 있다. 이들 파라미터들은 프로세스 (700) 의 일부로서 검출된 특정 오브젝트들에 특정되지 않을 수도 있다.
일부 구현들에서, 블록 (710) 은 하나 이상의 오토포커스 파라미터들의 값들을 정의하는 입력을 수신하는 것을 포함할 수도 있다. 예를 들어, 오토포커스 파라미터들의 제 1 세트는 하나 이상의 제 1 컬러들을 표시할 수도 있다. 제 1 컬러들의 오브젝트들에는 상이한 컬러의 오브젝트들보다 더 높은 포커스 우선순위가 제공될 수도 있다. 대안적으로, 제 1 컬러들 중 하나와 유사한 컬러의 오브젝트들에는 이하 설명되는 것과 같이, 더 높은 컬러 매치 스코어가 제공될 수도 있다. 일부 구현들에서, 오브젝터의 컬러 매치 스코어는 다차원 컬러 공간내에서 오브젝트의 컬러의 하나 이상의 제 1 컬러들까지의 거리에 반비례할 수도 있다.
오토포커스 파라미터들의 제 2 세트는 하나 이상의 제 2 파라미터들을 표시할 수도 있다. 이들 파라미터들의 제 2 세트는, 제 2 컬러들 중 하나 이상과 유사한 컬러를 갖는 오브젝트들에는 하나 이상의 제 2 컬러들과 상이한 컬러의 오브젝트들보다 더 낮은 포커스 우선순위가 제공되는 것을 표시할 수도 있다.
오토포커스 파라미터들의 제 3 세트는 이미지에서 식별된 오브젝트들의 포커스 우선순위를 결정할 때 오브젝트 움직임이 고려되어야만 하는지 여부를 표시하는 부울 (boolean) 파라미터를 포함할 수도 있다. 파라미터들의 제 4 세트는 오브젝트에 할당된 각 스코어에 할당된 가중치를 표시할 수도 있다. 예를 들어, 파라미터들의 제 4 세트는 컬러 매치 스코어, 오브젝트 위치 스코어, 및 오브젝트 사이즈 스코어에 대한 가중치들을 표시할 수도 있다.
오토포커스 파라미터들의 제 5 세트는 셔터 속도, 조리개, 또는 이미지 감도에 대한 이진 값들을 포함할 수도 있다. 이들 이진 값들은, 오토포커스 방법이 이미징 디바이스 또는 카메라를 오토포커싱할 때 이들 파라미터들을 세팅할 수도 있는 방식에 대한 제한들을 세팅할 수도 있다.
다른 오토포커스 파라미터들은 하나 이상의 오토포커스 모드들을 정의할 수도 있다. 예를 들어, 오토포커스 모드들은 "움직이는 오브젝트들에 포커싱", "고유한 컬러를 갖는 오브젝트들에 포커싱", "특정 컬러의 오브젝트들에 포커싱", 또는 "이미지의 중심에 가장 가까운 오브젝트들에 포커싱" 를 포함할 수도 있다. "고유한 컬러를 갖는 오브젝트들에 포커싱" 모드에서, 이미지 내에서 더 고유한 컬러를 갖는 오브젝트들에는 덜 고유한 컬러를 갖는 오브젝트들보다 더 높은 포커스 우선순위가 제공될 수도 있다.
오토포커스 파라미터들이 획득된 후에, 프로세스 (700) 는 블록 (720) 으로 이동하고, 여기서 하나 이상의 이미지들이 이미지 센서로 캡처된다. 블록 (720) 은 도 3 에 도시된 센서 제어 모듈 (335) 에 포함된 명령들에 의해 구현될 수도 있다. 1 초과의 이미지를 캡처하는 일부 구현들에서, 이미지들 중 일부는 상이한 초점 거리들에서 캡처될 수도 있다. 블록 (720) 에서 1 초과의 이미지를 캡처하는 일부 구현들에서, 이미지들 중 일부는 동일한 초점 거리들에서 캡처될 수도 있다. 일부 구현들은 블록 (720) 에서 캡처된 다수의 이미지들을 활용하여 다수의 이미지들에 걸쳐 모션을 검출할 수도 있다.
그 후에, 프로세스 (700) 는 프로세싱 블록 (730) 으로 이동한다. 프로세싱 블록 (730) 에서, 오브젝트들은 하나 이상의 이미지들에서 식별된다. 1 초과의 이미지를 캡처하는 구현들에서, 오브젝트들을 식별하는 것은, 일 이미지에서의 오브젝트를 다른 이미지에서의 오브젝트와 상관시키는 것을 포함할 수도 있다. 그 후에, 프로세스 (700) 는 블록 (740) 으로 이동하며, 여기서 각각의 식별된 오브젝트에 대하여 포커스 우선순위화 데이터가 결정된다. 일부 구현들에서, 포커스 우선순위화 데이터는 오브젝트의 컬러들, 오브젝트의 컬러의 고유성, 오브젝트의 모션, 오브젝트의 사이즈, 및 이미지 내에서 오브젝트의 위치 중 적어도 하나를 포함할 수도 있다. 일부 구현들에서, 포커스 우선순위화 데이터를 결정하는 것은 오토포커스 파라미터들로부터 데이터를 판독하는 것을 포함할 수도 있다. 포커스 우선순위화 데이터를 결정하는 것은 또한 데이터를 획득하기 위해 하나 이상의 이미지들을 분석하는 것을 포함할 수도 있다. 예를 들어, 하나 이상으 이미지들은 오브젝트의 컬러 또는 움직임을 결정하기 위해 분석될 수도 있다.
그 후에, 프로세스 (700) 는 블록 (750) 으로 이동하며, 여기서 포커싱할 하나 이상의 오브젝트들은 포커스 우선순위화 데이터 및 구성 데이터에 기초하여 선택된다. 블록 (750) 은 이하 도 8 의 논의에서 더 상세히 설명된다.
그 후에, 프로세스 (700) 는 블록 (760) 으로 이동하며, 여기서 하나 이상의 선택된 오브젝트들의 포커스에 영향을 미치는 이미징 파라미터들이 결정된다. 몇몇 이미징 파라미터들은 선택된 오브젝트들의 포커스에 영향을 미칠 수도 있다. 예를 들어, 렌즈 포커스 위치는 하나 이상의 오브젝트들의 포커스에 영향을 미칠 수도 있다. 다른 파라미터들은 또한 하나 이상의 오브젝트들의 포커스에 영향을 미칠 수도 있다. 예를 들어, 다수의 오브젝트들이 선택된다면, 선택된 오브젝트들은 이미지 센서로부터 상이한 거리들에 있을 수도 있다. 이러한 이미징 환경에서, 단일 초점 길이는 다른 이미징 파라미터들이 조정되지 않는다면 선택된 오브젝트들 모두에 대하여 적당한 초점을 달성할 수 없을 수도 있다. 이미지 센서에 대한 조리게 세팅은 또한, 피사계 심도를 증가시키거나 감소시킬 것으로 결정될 수도 있다. 조리개 세팅은, 선택된 오브젝트들 중 2 이상의 오브젝트들이 적당한 포커스를 달성하게 하도록, 조정될 수도 있다. 이러한 조정의 결정은 블록 (710) 에서 획득된 경계 파라미터들에 의해 경계가 이뤄질 수도 있다. 다른 이미지 센서 세팅들, 예컨대 셔터 속도 및 이미지 센서 감도는 또한, 결정된 조리개가 제공될 때 적절한 노출을 제공하도록 조정될 수도 있다.
이미징 파라미터들이 결정되면, 프로세스 (700) 는 블록 (770) 으로 이동하고, 여기서 결정된 이미징 파라미터들은 하나 이상의 선택된 오브젝트들에 이미지 센서를 포커싱하도록 세팅된다. 일부 구현들에서, 이는 이미지 캡처 파라미터들을 이미지 센서에 기록하거나, 그렇지 않으면 전송하는 것을 포함할 수도 있다. 블록 (770) 은 또한, 선택된 오브젝트들에 렌즈를 포커싱하는 초점 거리에 대응하도록 렌즈의 초점 위치를 물리적으로 변화시키는 것을 포함할 수도 있다. 일부 구현들에서, 블록 (770) 은 하나 이상의 선택된 오브젝트들에 이미지 센서를 오토포커싱하는 것으로 고려될 수도 있다. 그 후에, 프로세스 (700) 는 블록 (780) 으로 이동하며, 여기서 이미지는 세팅된 이미징 파라미터들을 사용하여 캡처된다. 그 후에, 프로세스 (700) 는 종료 블록 (790) 으로 이동한다.
도 8 은 이미징 디바이스를 오토포커싱하는 방법의 일부로서 캡처될 수도 있는 이미지이다. 예를 들면, 도 8 에 도시된 이미지는 도 4 에 예시된 프로세스 (400), 구체적으로 블록 (420) 또는 블록 (430), 도 6 에 예시된 프로세스 (600), 구체적으로 블록 (615), 또는 도 7 에 예시된 프로세스 (700), 구체적으로 블록 (720) 의 수행 동안 캡처될 수도 있다. 이미지 디바이스를 오토포커싱하는 전술된 방법들은 이미지 (800) 내에서 오브젝트들을 식별할 수도 있다. 예를 들면, 이들 방법들은 비행기 (820) 및 해변에 있는 사람들을 오브젝트들 (810, 830, 840, 850, 및 860) 로서 식별할 수도 있다.
그 후에, 일부 구현들은 하나 이상의 오브젝트들 중 포커싱할 오브젝트를 결정하기 위해 검출된 오브젝트들을 우선순위화할 수도 있다. 이들 구현들은 이하 제시되는 표 1 과 유사한 표에서 검출된 오브젝트들에 대한 포커스 데이터를 체계화할 수도 있다:
Figure pct00001
* 예시된 구현들이 주황색 오브젝트들이 포커스를 위해 선택되어야만 하거나, 또는 주황색 오브젝트들에 다른 컬러들의 오브젝트들보다 더 높은 포커스 우선순위가 제공되어야만 하는 것을 나타내는 입력을 수신한 것으로 가정한다.
표 1 은 포커스 우선순위화 표에 대한 적어도 일 구현의 체계화 또는 구성을 도시한다. 표 1 의 로우들은 개별 오브젝트들을 나타낸다. 예를 들어, 각 로우는 도 3 에 예시된 오브젝트 검출 모듈 (340) 에 의해 검출된 오브젝트를 나타낼 수도 있다. 표 1 의 컬럼들 b - g 는 각각, 각 오브젝트의 포커스 우선순위를 적어도 부분적으로 결정하는데 사용될 수도 있는 특정 오브젝트 특징을 나타낸다. 일부 구현들은 이들 컬럼들의 오직 서브세트만을 구현할 수도 있다. 다른 구현들은 표 1 에 예시된 컬럼들 및 예시되지 않은 다른 추가의 컬럼들을 구현할 수도 있다.
표 1 의 셀들, 컬럼들 (b) - (g) 은, 각 컬럼에 의해 표현된 오브젝트 특징들에 대한 "스코어들" 을 기록할 수도 있다. 예를 들어, 오브젝트 (720) 는 높은 컬러 고유성 스코어이지만 낮은 컬러 매치 스코어를 가지는 것으로 예시된다. 컬럼들 b - g 에서 표 1 의 셀들은 "높음", "중간" 및 "낮음" 의 스코어들로 도시되지만, 이들 값들은 오직 예시의 목적을 위한 것이다. 일부 구현들은 컬럼들의 셀들에 수치 값들을 제공할 것이다. 예를 들어, 일부 구현들은 포커스 우선순위를 생성하기 위해 각각의 오브젝트의 포커스들을 합산하거나 평균할 수도 있다. 이 포커스 우선순위는 이하 논의되는 컬럼 (h) 또는 컬럼 (i) 에 기록될 수도 있다.
표 1 의 컬럼 (a) 은 이 설명의 목적을 위해 오브젝트를 식별한다. 열거된 각 오브젝트는 도 8 에서 식별된다. 컬럼 (b) 은 각 검출된 오브젝트의 컬러를 식별한다. 일부 구현들에서, (컬럼들 (h) 또는 (i) 에 의해 표현된) 포커스 우선순위는 오브젝트 컬러에 기초할 수도 있다. 예를 들어, 구현은 하나 이상의 컬러들을 표시하는 입력을 수신할 수도 있다. 검출된 오브젝트가 이들 컬러들 중 하나와 매칭할 때, 그 오브젝트의 포커스 우선순위가 증가될 수도 있다. 이들 구현들은 컬럼 (c) 을 활용할 수도 있고, 오브젝트의 컬러가 입력으로서 수신된 컬러에 얼마나 밀접하게 매칭하는지를 포커싱할 컬러로서 나타낸다. 컬럼 (c) 의 컬러 매치 스코어는, 각각의 오브젝트의 컬러로부터 포커싱할 컬러들이 되도록 구성된 하나 이상의 컬러들까지의 거리에 기초하여 결정될 수도 있다. 그 거리는 RGB 컬러 공간 또는 YCrCb 컬러 공간과 같은 다차원 컬러 공간내에 있을 수도 있다. 오브젝트의 컬러 매치 스코어는 오브젝트의 컬러로부터 포커스를 위해 구성된 하나 이상의 컬러들까지의 거리에 반비례할 수도 있다.
컬럼 (d) 은 각 오브젝트에 대한 컬러 고유성 스코어를 표시한다. 오브젝트의 컬러 고유성 스코어는 이미지의 다른 오브젝트들과 비교할 때, 오브젝트의 컬러의 상대적인 고유성을 나타낼 수도 있다. 일부 구현들에서, 컬러의 고유성 스코어는 오브젝트의 컬러와 다차원 컬러 공간 내에서 모든 다른 검출된 오브젝트들의 컬러 간의 거리에 비례할 수도 있다. 예를 들어, 이들 구현들은 먼저, 오브젝트 컬러로부터 다른 검출된 오브젝트들의 컬러들 각각까지의 거리를 계산할 수도 있다. 그 후에, 이들 거리들은 컬러 고유성 스코어를 생성하도록 합산될 수도 있다. 그 후에, 이 프로세스는 각각의 검출된 오브젝트에 대하여 반복될 수도 있다.
도 8 의 예시된 실시예에서, 검출된 오브젝트들 중 3 개, 즉 오브젝트 (840, 830, 및 850) 는 "피부색" 의 검출된 컬러를 갖는다. 이미지 내의 다른 오브젝트들이 동일한 컬러를 가지기 때문에, 이들 오브젝트들은 고유한 컬러를 가지는 것으로 고려되지 않을 수도 있다. 예를 들어, 전술된 컬러 고유성 스코어를 결정하는 방법을 사용하여, 다차원 컬러 공간에서 오브젝트들 (830, 840 및 850) 에 대한 컬러들 간의 거리는 0 일 수도 있다. 그 결과, 이들 오브젝트들은 상대적으로 낮은 컬러 고유성 스코어를 가질 수도 있다. 대안적으로, 오브젝트 (820) 는 오직 청색 오브젝트이며, 따라서 높은 컬러 고유성 스코어를 갖는다. 2개 오브젝트들, 즉 오브젝트들 (810 및 860) 은 주황색 컬러를 가지며, 그 결과 그들 오브젝트들에 대하여 중간 컬러 고유성 스코어를 발생한다. 오브젝트들 (820, 810, 및 860) 모두는 오브젝트들 (830, 840, 및 850) 과 비교할 때 더 높은 고유성 스코어들을 갖는다.
컬럼 (e) 은 오브젝트의 움직임 스코어를 나타낸다. 오브젝트의 움직임이 검출되면, 오브젝트의 움직임 스코어는 더 고정된 오브젝트의 움직임 스코어보다 더 높을 수도 있다. 일부 구현들에서, 오브젝트의 움직임 스코어는 그 오브젝트에 대하여 결정된 모션 벡터들의 사이즈에 기초할 수도 있다. 예를 들어, 일부 구현들은 다수의 캡처된 이미지들, 예컨대 제 1 이미지와 제 2 이미지에 걸쳐 오브젝트를 상관시킬 수도 있다. 오브젝트에 대한 모션 벡터들이 계산될 수도 있고, 제 1 이미지에서 오브젝트의 위치를 제 2 이미지에서의 오브젝트의 위치에 맵핑한다. 이들 모션 벡터들의 절대 사이즈는 고정된 이미지 배경에 대한 오브젝트의 모션의 정도 또는 속도를 표시할 수도 있다. 표 1 에 예시된 움직임 스코어는 이들 모션 벡터들의 사이즈에 기초할 수도 있다. 도 8 및 표 1 의 예시된 실시예에 도시될 수도 있는 것과 같이, 비행기 (820) 는 표의 다른 오브젝트들보다 더 높은 움직임 스코어를 갖는다. 비행기는 예시된 이미지에서 다른 검출된 오브젝트들보다 더 빠를 수도 있는 속도로 우측으로 이동하고 있다.
컬럼 (f) 은 각각의 검출된 오브젝트의 위치 스코어를 나타낸다. 일부 구현들에서, 이미지의 중심에 더 가깝게 위치된 오브젝트들은 이미지의 에지에 더 가깝게 위치된 오브젝트들보다 더 높은 포지션 스코어를 가질 수도 있다. 예시된 실시예에서, 오브젝트들 (820 및 810) 양자는 높은 위치 스코어를 갖는다. 이들 오브젝트들은 이미지의 중심에 가깝게 예시된다. 나머지 오브젝트들은 이미지의 에지들에 가깝게 위치되며, 따라서 더 낮은 위치 스코어를 갖는다.
컬럼 (g) 은 각각의 검출된 오브젝트의 사이즈 스코어를 나타낸다. 일부 구현들에서, 오브젝트들에는 이미지에서 그들의 상대적인 사이즈에 비례하는 사이즈 스코어가 할당된다. 이미지 (800) 의 예시된 실시예에서, 비행기 (820) 는 해변에 있는 사람들, 예컨대 해변에 있는 사람 (810) 보다 명확히 더 큰 사이즈이다. 그러므로, 비행기의 사이즈 스코어는 해변에 있는 사람의 사이즈 스코어보다 더 클 수도 있다.
컬럼들 (h) 및 (i) 각각은 표 1 의 컬럼들 (a) - (g) 에서 제공된 데이터에 기초하여 검출된 오브젝트들의 상이한 구현의 우선순위화의 결과를 나타낸다. 각각의 오브젝트의 우선순위가 표 1 에 "높음", "중간", 또는 "낮음" 으로 표현되지만, 이들 포커스 우선순위들은 오직 예시적인 목적들을 위한 것이다. 일부 구현들은 오브젝트 스코어들 및 우선순위들의 합산, 평균 및 수치적 비교들을 가능하게 하기 위해, 수치적 스코어들 및 포커스 우선순위들을 제공할 수도 있다. 간단함을 위해, 스코어들은 예시적인 것으로 표현된다.
컬럼들 (h) 및 (i) 에 도시된 것과 같은 포커스 우선순위는 오브젝트의 컬러 매치 스코어 (컬럼 (c)), 오브젝트의 컬러 고유성 스코어 (컬럼 (d)), 오브젝트의 움직임 스코어 (컬럼 (e)), 오브젝트의 위치 스코어 (컬럼 (f)), 또는 오브젝트의 사이즈 스코어 (컬럼 (g)) 중 하나 이상에 기초할 수도 있다.
일부 구현들은 오브젝트 포커스 우선순위를 결정하기 위해 표 1 에 표현된 스코어들 중 하나 이상의 가산하거나 평균할 수도 있다. 다른 구현들은 각각의 컬럼에 가중치를 할당할 수도 있다. 그 후에, 가중된 합 또는 가중된 평균은 오브젝트의 포커스 우선순위를 결정하는데 사용될 수도 있다.
포커스 우선순위를 결정할 시 각 컬럼에 할당된 가중치는 구현에 따라 변화할 수도 있다. 예를 들어, 일부 구현들은 오브젝트의 위치 스코어보다 더 높게 오브젝트의 움직임 스코어를 가중할 수도 있다. 다른 구현들은 위치 및 움직임에 대하여 다른 가중치들을 사용할 수도 있다. 가중치들은 타겟 시장에 기초하여 이미지 디바이스의 설계자들에 의해 결정될 수도 있다. 예를 들어, 일부 이미징 디바이스들은 움직임에 대한 포커스를 우선순위화하는데 가장 관심이 있는 사진가들에게 판매될 수도 있다. 이들 디바이스들에서, 컬럼 (e) 에 도시된 움직임 스코어에는 최고 가중치가 제공될 수도 있다. 다른 타겟 시장들에서, 큰 오브젝트들이 중요할 수도 있다. 이들 시장들을 위해 설계된 디바이스들에서, 컬럼 (g) 에 도시된 오브젝트 사이즈 스코어에는 최고 우선순위가 제공될 수도 있다.
일부 구현들에서, 각 컬럼에 할당된 가중치는 구성가능한 파라미터들에 의해 결정될 수도 있다. 예를 들어, 일부 구현들은 다중 오토포커스 모드들을 제공할 수도 있고, 사용자는 그들의 필요에 기초하여 특정 모드를 선택한다. 모드는 표 1 의 각 컬럼의 가중치들을 결정할 수도 있다. 예를 들어, "움직이는 오브젝트들에 포커싱" 오토포커스 모드가 가능하지 않다면, 일 구현은 움직임 스코어 컬럼에 0 의 가중치를 할당할 수도 있다.
다른 오토포커스 모드, 예컨대 "매칭하는 컬러에 포커싱" 모드는, 표 1 의 다른 컬럼들보다 컬럼 (c) 의 컬러 매치 스코어에 더 높은 가중치를 할당할 수도 있다. 이러한 모드에서, 컬럼 (d) 의 가중치는 0 일 수도 있다. 대안적으로, 컬럼 (d) 의 가중치는 0 이 아닌 가중치일 수도 있지만, 컬럼 (c) 의 가중치보다 낮은 가중치를 가질 수도 있다.
"고유한 컬러의 오브젝트들에 포커싱" 모드는 컬럼 (d) 에 도시된 컬러 고유성 스코어에 더 높은 가중치를 할당할 수도 있다. 이러한 모드에서, 컬럼 (c) 의 가중치는 0 일 수도 있다. 대안적으로, 이 모드에서 컬럼 (c) 의 가중치는 0 이 아닌 가중치일 수도 있지만, 컬럼 (d) 의 가중치 미만일 수도 있다.
일부 구현들에서, 하나 이상의 컬럼들에 할당된 가중치들은 직접 구성가능할 수도 있다. 이러한 능력은 "향상된 구성" 모드에서 제공될 수도 있고, 이 모드는 이미징 디바이스 또는 카메라의 오토포커스 방법을 커스터마이징하거나 튜닝하는 능력을 향상된 사진가들에게 제공한다.
컬럼 (h) 에 의해 표현된 구현은 오브젝트 (820) 에 최고 포커스 우선순위를 제공한다. 오브젝트들 (810 및 860) 은 제 2 의 최고 포커스 우선순위를 갖는다. 오브젝트들 (830, 840, 및 850) 은 각각 상기 구현에서 최저 포커스 우선순위를 갖는다. 이러한 구현은 포커스 우선순위를 결정할 때 오브젝트 움직임 컬럼을 일부 다른 컬럼들보다 높게 가중했을 수도 있다. 예를 들어, 컬럼 (h) 은 이미징 디바이스가 "움직이는 오브젝트들에 포커싱" 모드에 있을 경우 결정된 포커스 우선순위를 나타낼 수도 있다. 이러한 모드에서, 오브젝트 (810) 의 컬러가 약간 고유하고, 오브젝트 (810) 가 이미지의 중심에 가깝게 위치된다는 사실에도 불구하고, 비행기 (820) 의 포커스 우선순위는 사람 (810) 의 포커스 우선순위보다 높다.
컬럼 (i) 에 의해 표현된 구현은 동일한 오브젝트들에 대하여 상이한 포커스 우선순위들을 달성한다. 컬럼 (i) 은 특정 컬러의 오브젝트들에 포커싱하는 오토포커스 모드를 포함하는 일 구현을 나타낼 수도 있다. 컬럼 (i) 에 도시된 결과들은 이러한 모드가 활성일 때 생성될 수도 있다. 이러한 예에서, 구현은 주황색 오브젝트들에 포커싱하도록 구성되었을 수도 있다. 이 모드에서, 오브젝트의 움직임 스코어를 나타내는 컬럼 (e) 은 컬럼 (f) 에 의해 나타낸 구현에서 수신될 것보다, 포커스 우선순위를 결정하는데 있어 더 낮은 가중치를 수신할 수도 있다. 예를 들어, 컬럼 (e) 은 이러한 오토포커스 모드에서 0 의 가중치를 수신할 수도 있다. 대안적으로, 컬럼 (e) 은 이 오토포커스 모드에서 비-제로 가중치를 수신할 수도 있다.
도 8 에 의해 표현된 이미지에서, 오브젝트들 (810 및 860) 양자는 주황색의 검출된 컬러를 갖는다. 이러한 이미징 환경에서, 일부 구현들은 포커싱할 주황색 오브젝트들 양자를 선택할 수도 있다. 이들 구현들에서, 단일 초점 거리가 양자의 오브젝트들에 대하여 적당한 포커스를 달성할 수 있는지 여부에 관한 결정이 실행될 수도 있다. 만약 달성할 수 있다면, 어떠한 추가 조정들도 수행되지 않을 수도 있고, 이미지는 적절한 초점 거리에서 캡처될 수도 있다. 현재 이미징 파라미터들이 제공될 때 양자의 오브젝트들에 포커스가 적당히 맞춰질 수 없다고 결정된다면, 일부 조정들이 실행될 수도 있다. 예를 들어, 일부 구현들은 모든 선택된 오브젝트들에 적당한 포커스를 제공하도록, 이미지의 피사계 심도를 조정할 수도 있다.
다른 구현들은 이미지 내에서 오브젝트의 상대적인 위치에 기초하여 동일한 컬러의 오브젝트들 간에 추가로 구별할 수도 있다. 예를 들어, 컬럼 (i) 에 제공된 포커스 우선순위를 생성한 구현은, 이미지 내에서 각 오브젝트의 위치에 기초하여 동일한 컬러의 오브젝트들을 추가로 우선순위화할 수도 있다. 예시된 구현에서, 오브젝트 (860) 는 오브젝트 (810) 보다 더 낮은 위치 스코어를 갖는다. 이는 오브젝트 (860) 보다 이미지의 중신에 더 가까운 오브젝트 (810) 에 의해 발생될 수도 있다. 컬럼 (i) 에 의해 예시된 구현에서, 각 오브젝트의 위치 스코어는 오브젝트 (860) 앞의 포커스를 위해 오브젝트 (810) 를 우선순위화하는데 있어 결정적이다
본원에서 개시된 구현들과 연계하여 설명된 여러가지 예시적인 논리 블록들, 모듈들, 및 회로들은 본원에서 개시된 기능들을 수행하도록 설계된 범용 프로세서, 디지털 신호 프로세서 (DSP), 주문형 반도체 (ASIC), 필드 프로그래머블 게이트 어레이 (FPGA) 또는 다른 프로그래머블 로직 디바이스, 이산 게이트 또는 트랜지스터 로직, 이산 하드웨어 컴포넌트들, 또는 이들의 임의의 조합에 의해 구현되거나 수행될 수도 있다. 범용 프로세서는 마이크로프로세서일 수도 있지만, 다르게는, 상기 프로세서는 임의의 종래의 프로세서, 컨트롤러, 마이크로컨트롤러, 또는 상태 머신일 수도 있다. 프로세서는 컴퓨팅 디바이스들의 조합, 예를 들면, DSP와 마이크로프로세서의 조합, 복수의 마이크로프로세서들, DSP 코어와 연계한 하나 이상의 마이크로프로세서들, 또는 임의의 다른 이러한 구성들로서 구현될 수도 있다.
본원에서 개시된 구현들과 연계하여 설명된 방법 또는 프로세스의 단계들은 하드웨어에서, 프로세서에 의해 실행되는 소프트웨어 모듈에서, 또는 이들 양자의 조합에서 직접적으로 구현될 수도 있다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터들, 하드 디스크, 이동식 디스크, CD-ROM, 또는 공지된 임의의 다른 형태의 저장 매체 내에 상주할 수도 있다. 예시적인 컴퓨터 판독가능 저장 매체는 프로세서에 커플링되어, 그 프로세서가 컴퓨터 판독가능 저장 매체로부터 정보를 판독하거나 컴퓨터 판독가능 저장 매체에 정보를 기록할 수 있다. 대안적으로, 저장 매체는 프로세서에 통합될 수도 있다. 프로세서와 저장 매체는 ASIC 내에 상주할 수도 있다. ASIC 는 사용자 단말, 카메라, 또는 다른 디바이스 내에 상주할 수도 있다. 대안에서, 프로세서와 저장 매체는 사용자 단말, 카메라, 또는 다른 디바이스에서 개별 컴포넌트들로 상주할 수도 있다.
소프트웨어로 구현된다면, 그 기능들은 하나 이상의 명령들 또는 코드로서 컴퓨터 판독 가능한 매체 상에 저장되거나 또는 송신될 수도 있다. 본원에서 개시된 방법 또는 알고리즘의 단계들은, 컴퓨터 판독가능 매체 상에 상주할 수도 있는 프로세서 실행가능 소프트웨어 모듈에서 구현될 수도 있다. 컴퓨터 판독 가능 매체는 컴퓨터 프로그램을 한 장소에서 다른 장소로 전송하도록 인에이블될 수 있는 임의의 매체를 포함하는 컴퓨터 저장 매체 및 통신 매체 양자를 포함한다. 저장 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 이용 가능한 매체일 수도 있다. 제한이 아닌 예로서, 이러한 컴퓨터 판독가능 매체는 RAM, ROM, EEPROM, CD-ROM 또는 다른 광학 디스크 스토리지, 자기 디스크 스토리지 또는 다른 자기 스토리지 디바이스들, 또는 요구되는 프로그램 코드를 명령들 또는 데이터 구조들의 형태로 저장하기 위해 사용될 수 있으며 컴퓨터에 의해 액세스될 수 있는 임의의 다른 매체를 포함할 수 있다. 또한, 임의의 접속물은 컴퓨터 판독 가능한 매체를 적절히 칭한다. 본원에서 사용된 바와 같이, 디스크 (disk) 및 디스크 (disc) 는, 컴팩트 디스크 (CD), 레이저 디스크, 광학 디스크, 디지털 다기능 디스크 (DVD), 플로피디스크 및 블루레이 디스크를 포함하며, 여기서 디스크 (disk) 는 통상 자기적으로 데이터를 재생하고, 디스크 (disc) 는 레이저를 이용하여 광학적으로 데이터를 재생한다. 위의 조합들도 컴퓨터 판독가능 매체의 범위 내에 포함되어야 한다. 추가적으로, 방법 또는 알고리즘의 동작들은 코드들 및/또는 명령들의 하나 또는 임의의 조합 또는 세트로서 머신 판독가능 매체 및/또는 컴퓨터 판독가능 매체 상에 상주할 수도 있고, 이들은 컴퓨터 프로그램 제품에 통합될 수도 있다.
본 개시물에서 설명된 구현들에 대한 여러 변형예들이 당업자에게 용이하게 인식될 수도 있고, 본원에서 정의된 일반적인 원리들은 본 개시물의 취지와 범위를 벗어나지 않으면서 다른 구현예들에 적용될 수도 있다. 따라서, 청구항들은 본원에서 보여진 구현들로 제한되도록 의도된 것은 아니며, 본원의 개시된 원칙들 및 신규의 특징들과 일치하는 최광의 범위에 따르기 위한 것이다. 단어 "예시적인"은 본원에서 "실시형태, 예 또는 예증으로서 기능하는" 것을 의미하기 위해 사용된다. 본원에서 "예시적인"으로서 설명된 임의의 구현예는 다른 구현예들에 비해 더 선호되거나 또는 더 유익한 것으로 해석될 필요는 없다. 또한, 당업자라면, 용어들 "상부" 및 "하부" 가 도면들의 설명을 용이하게 하기 위해 가끔 사용되고, 적절히 배향된 페이지에서 도면의 배향에 대응하는 상대적 위치들을 나타내며, 구현된 바와 같은 IMOD의 적절한 배향을 반영하지 않을 수도 있는 것을 용이하게 인식할 것이다.
별도의 구현들의 관점에서 본원 명세서에서 설명된 어떤 특징들은 또한, 단일 구현에서 결합하여 구현될 수 있다. 대조적으로, 단일 구현의 관점에서 설명된 여러 특징들은 복수의 구현들로 별개로 구현될 수도 있고 또는 임의의 적절한 부분조합으로 구현될 수 있다. 또한, 특징들이 어떤 조합들에서 작용하는 것으로 그리고 심지어 그와 같이 초기에 요구되는 것으로 위에서 설명될 수도 있지만, 요구된 조합의 하나 이상의 특징들은 어떤 경우들에서는 조합으로부터 삭제될 수 있고, 청구된 조합이 부분 조합 또는 부분 조합의 변형예로 변형될 수도 있다.
마찬가지로, 동작들이 도면들에서는 특정 순서로 묘사되지만, 소정의 결과들을 얻기 위해, 이러한 동작들이 도시된 특정 순서 또는 순차적인 순서로 수행되어야 하는 것을, 또는 모든 예시된 동작들이 수행되어야 하는 것을 필요로 하는 것으로 이해되어선 안된다. 또한, 도면들은 하나 이상의 예시적인 프로세스들을 흐름도의 형태로 개략적으로 나타낼 수도 있다. 그러나, 묘사되지 않은 다른 동작들이 개략적으로 예시된 예시적인 프로세스들에 통합될 수 있다. 예를 들면, 하나 이상의 추가적인 동작들이, 예시된 임의의 동작들의, 이전에, 이후에, 동시에, 또는 그들 사이에서 수행될 수 있다. 어떤 환경들에서, 멀티태스킹 및 병렬 프로세싱이 유익할 수도 있다. 또한, 상술한 구현들에서의 여러 시스템 컴포넌트들의 분리는 모든 구현들에서 이러한 분리를 필요로 하는 것으로 이해되어선 안되며, 설명된 프로그램 컴포넌트들 및 시스템들은 일반적으로 단일의 소프트웨어 제품으로 함께 통합되거나 또는 복수의 소프트웨어 제품들로 패키지화될 수 있음을 이해해야만 한다. 또한, 다른 구현들은 하기의 특허청구범위의 범위 내에 있다. 몇몇 경우들에서, 청구항에서 언급된 액션들은 상이한 순서로 수행될 수 있고 그리고 소망의 결과들을 여전히 달성할 수 있다.
제목들은 참조를 위해 본원에 포함되고 다양한 섹션들을 위치를 찾는 것을 돕고자 한다. 이러한 제목들은 그와 관련하여 설명된 개념들의 범위를 제한하고자 하지 않는다. 이러한 개념들은 전체 명세서에 걸쳐 적용가능할 수도 있다.
개시된 구현들의 상기 설명들은 임의의 당업자가 본 발명을 실시하거나 이용하는 것을 가능하게 하도록 하기 위해 제공된다. 이러한 구현들에 대한 다양한 변형예들이 당업자에게는 자명할 것이고, 본원에서 정의된 일반적인 원칙들은 본 발명의 취지와 범위를 벗어나지 않으면서 다른 구현들에 적용될 수도 있다. 따라서, 본 발명은 본원에서 보여진 예시적인 구현들로 제한되도록 의도된 것은 아니며 본원의 개시된 원칙들과 신규의 특징들과 일치하는 최광의 범위를 제공하기 위한 것이다.

Claims (34)

  1. 디지털 이미징 디바이스를 포커싱하는 방법으로서,
    이미지 센서로 이미지를 캡처하는 단계로서, 상기 캡처된 이미지는 오브젝트들 및 배경을 포함하는, 상기 이미지를 캡처하는 단계;
    상기 이미지 내에서 하나 이상의 오브젝트들을 식별하는 단계;
    상기 식별된 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 상기 식별된 오브젝트들 중 적어도 하나를 선택하는 단계; 및
    상기 적어도 하나의 선택된 오브젝트에 상기 이미지 센서를 오토포커싱하는 단계를 포함하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  2. 제 1 항에 있어서,
    상기 식별된 오브젝트들 중 적어도 하나를 선택하는 단계는, 상기 하나 이상의 식별된 오브젝트들의 적어도 일부분에 대한 모션 벡터들을 결정하는 단계를 포함하며,
    상기 선택은 상기 모션 벡터들의 사이즈에 적어도 부분적으로 기초하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  3. 제 1 항에 있어서,
    상기 식별된 오브젝트들 중 적어도 하나를 선택하는 단계는, 이미지 배경에 대한 상기 식별된 오브젝트의 움직임에 적어도 부분적으로 기초하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  4. 제 1 항에 있어서,
    상기 식별된 오브젝트들 중 적어도 하나를 선택하는 단계는, 상기 디바이스의 팬 모션과 일치하는 식별된 오브젝트의 움직임에 적어도 부분적으로 기초하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  5. 제 1 항에 있어서,
    상기 식별된 오브젝트들 중 적어도 하나를 선택하는 단계는, 상기 이미지 내에서 상기 식별된 오브젝트의 상대적인 위치에 적어도 부분적으로 기초하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  6. 제 1 항에 있어서,
    상기 이미지 센서를 오토포커싱하는 단계는, 상기 이미지 센서가 상기 적어도 하나의 선택된 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱되어야 하는 것을 표시하는 입력을 수신하는 단계를 포함하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  7. 제 6 항에 있어서,
    상기 이미지 센서가 적어도 부분적으로 오브젝트 움직임에 포커싱되어야하는지 여부를 표시하는 사용자 인터페이스를 전자 디스플레이 상에 디스플레이하는 단계를 더 포함하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  8. 제 1 항에 있어서,
    상기 식별된 오브젝트들 중 적어도 하나를 선택하는 단계는 추가로, 상기 식별된 오브젝트들의 하나 이상의 컬러들에 기초하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  9. 제 1 항에 있어서,
    상기 이미지 내에서 적어도 2 개의 오브젝트들을 식별하는 단계를 더 포함하며,
    상기 선택된 오브젝트에 상기 이미지 센서를 오토포커싱하는 단계는 상기 적어도 2 개의 오브젝트들에 상기 이미지 센서를 포커싱하기 위해 상기 이미지 센서의 조리개를 조정하는 단계를 포함하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  10. 제 1 항에 있어서,
    각각의 오브젝트의 모션에 기초하여 일 시점에서 하나 이상의 오브젝트들의 위치를 예측하는 단계를 더 포함하며,
    상기 하나 이상의 오브젝트들은 포커스를 위해 선택된 적어도 하나의 오브젝트를 포함하고, 상기 이미지 센서의 오토포커싱은 선택된 적어도 하나의 오브젝트의 예측된 위치에 기초하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  11. 이미징 디바이스로서,
    이미지 센서;
    상기 이미지 센서로 이미지를 캡처하도록 구성된 센서 제어 모듈;
    상기 캡처된 이미지 내에서 하나 이상의 오브젝트들을 식별하도록 구성된 오브젝트 검출 모듈;
    적어도 하나의 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 적어도 하나의 오브젝트를 선택하도록 구성된 포커스 우선순위화 모듈; 및
    상기 선택된 적어도 하나의 오브젝트에 상기 이미지 센서를 오토포커싱하도록 구성된 마스터 제어 모듈을 포함하는, 이미징 디바이스.
  12. 제 11 항에 있어서,
    상기 하나 이상의 식별된 오브젝트들의 적어도 일부분에 대한 모션 벡터들을 결정하도록 구성된 오브젝트 모션 검출 모듈을 더 포함하는, 이미징 디바이스.
  13. 제 11 항에 있어서,
    상기 포커스 우선순위화 모듈은 추가로, 이미지 배경에 대한 상기 적어도 하나의 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 적어도 하나의 오브젝트를 선택하도록 구성되는, 이미징 디바이스.
  14. 제 11 항에 있어서,
    상기 포커스 우선순위화 모듈은 추가로, 상기 디바이스의 팬과 실질적으로 일치하는 적어도 하나의 오브젝트의 움직임에 적어도 부분적으로 기초하여 상기 식별된 오브젝트들 중 적어도 하나를 선택하도록 구성되는, 이미징 디바이스.
  15. 제 11 항에 있어서,
    상기 포커스 우선순위화 모듈은 추가로, 상기 이미지 내에서 상기 적어도 하나의 오브젝트의 위치에 적어도 부분적으로 기초하여 적어도 하나의 오브젝트를 선택하도록 구성되는, 이미징 디바이스.
  16. 제 11 항에 있어서,
    상기 이미지 센서가 움직이고 있는 적어도 하나의 오브젝트에 적어도 부분적으로 기초하여 포커싱되어야 하는 것을 표시하는 입력을 수신하도록 구성된 입력 프로세싱 모듈을 더 포함하는, 이미징 디바이스.
  17. 제 11 항에 있어서,
    전자 디스플레이를 더 포함하며,
    상기 마스터 제어 모듈은 추가로, 상기 이미지 센서가 적어도 부분적으로 오브젝트 움직임에 포커싱되어야하는지 여부를 표시하는 사용자 인터페이스를 디스플레이하도록 구성되는, 이미징 디바이스.
  18. 이미징 디바이스로서,
    이미지 센서로 이미지를 캡처하는 수단으로서, 상기 캡처된 이미지는 오브젝트들 및 배경을 포함하는, 상기 이미지를 캡처하는 수단;
    상기 이미지 내에서 하나 이상의 오브젝트들을 식별하는 수단;
    적어도 하나의 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 상기 식별된 오브젝트들 중 적어도 하나를 선택하는 수단; 및
    상기 적어도 하나의 선택된 오브젝트에 상기 이미지 센서를 오토포커싱하는 수단을 포함하는, 이미징 디바이스.
  19. 제 18 항에 있어서,
    상기 이미지를 캡처하는 수단은 이미지 센서를 포함하는, 이미징 디바이스.
  20. 제 18 항에 있어서,
    상기 식별된 오브젝트들 중 하나를 선택하는 수단은 모션 벡터들의 사이즈에 적어도 부분적으로 기초하여 상기 오브젝트를 선택하는, 이미징 디바이스.
  21. 제 18 항에 있어서,
    상기 오브젝트를 선택하는 수단은 또한 상기 이미지 내에서 상기 오브젝트의 상대적인 위치에 적어도 부분적으로 기초하여 오브젝트를 선택하는, 이미징 디바이스.
  22. 제 18 항에 있어서,
    상기 선택하는 수단은 이미지 배경에 대한 상기 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 오브젝트를 선택하는, 이미징 디바이스.
  23. 제 18 항에 있어서,
    상기 선택하는 수단은 상기 디바이스의 팬과 실질적으로 일치하는 상기 오브젝트의 움직임에 적어도 부분적으로 기초하여 포커싱할 오브젝트를 선택하는, 이미징 디바이스.
  24. 제 18 항에 있어서,
    각각의 오브젝트의 모션에 기초하여 일 시점에 하나 이상의 오브젝트들의 위치를 예측하는 수단을 더 포함하며,
    상기 하나 이상의 오브젝트들은 포커스를 위해 선택된 오브젝트를 포함하고, 상기 이미지 센서의 오토포커싱은 상기 선택된 오브젝트의 예측된 위치에 기초하는, 이미징 디바이스.
  25. 디지털 이미징 디바이스를 포커싱하는 방법으로서,
    선택된 컬러를 표시하는 입력을 사용자로부터 수신하는 단계;
    이미지 센서로 이미지를 캡처하는 단계;
    상기 캡처된 이미지 내에서 하나 이상의 오브젝트들을 식별하는 단계;
    상기 선택된 컬러에 적어도 부분적으로 기초하여 포커싱할 제 1 오브젝트를 선택하는 단계; 및
    상기 선택된 오브젝트에 상기 이미지 센서를 오토포커싱하는 단계를 포함하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  26. 제 25 항에 있어서,
    상기 포커싱할 제 1 오브젝트를 선택하는 단계는 또한, 상기 이미지 내에서 상기 제 1 오브젝트의 상대적인 위치에 기초하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  27. 제 25 항에 있어서,
    상기 선택된 컬러에 적어도 부분적으로 기초하여 포커싱할 적어도 제 2 오브젝트를 선택하는 단계를 더 포함하며,
    상기 오토포커싱은 상기 포커싱할 제 1 오브젝트와 상기 포커싱할 제 2 오브젝트 양자에 포커싱하는 것을 포함하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  28. 제 25 항에 있어서,
    상기 포커싱할 제 1 오브젝트를 선택하는 단계는 추가로, 상기 캡처된 이미지 내에서 상기 제 1 오브젝트의 사이즈 중 하나 이상에 적어도 부분적으로 기초하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  29. 제 25 항에 있어서,
    포커싱하지 않을 제 2 컬러를 표시하는 입력을 수신하는 단계를 더 포함하며,
    상기 포커싱할 제 1 오브젝트를 선택하는 단계는 추가로, 상기 제 2 컬러에 기초하는, 디지털 이미징 디바이스를 포커싱하는 방법.
  30. 이미징 디바이스로서,
    이미지 센서;
    입력 디바이스;
    선택된 컬러를 표시하는 입력을 상기 입력 디바이스로부터 수신하도록 구성된 입력 프로세싱 모듈;
    상기 이미지 센서로 이미지를 캡처하도록 구성된 센서 제어 모듈;
    상기 캡처된 이미지 내에서 하나 이상의 오브젝트들을 식별하도록 구성된 오브젝트 검출 모듈;
    상기 선택된 컬러에 적어도 부분적으로 기초하여 포커싱할 적어도 하나의 오브젝트를 선택하도록 구성된 포커스 우선순위화 모듈; 및
    상기 적어도 하나의 선택된 오브젝트에 상기 이미지 센서를 오토포커싱하도록 구성된 마스터 제어 모듈을 포함하는, 이미징 디바이스.
  31. 제 30 항에 있어서,
    포커싱할 컬러 상에 입력을 위한 프롬프트를 디스플레이하도록 구성된 전자 디스플레이를 더 포함하는, 이미징 디바이스.
  32. 제 30 항에 있어서,
    상기 포커스 우선순위화 모듈은 추가로, 상기 이미지 내에서 오브젝트의 위치에 적어도 부분적으로 기초하여 오브젝트를 선택하도록 구성되는, 이미징 디바이스.
  33. 제 30 항에 있어서,
    상기 포커스 우선순위화 모듈은 추가로, 상기 캡처된 이미지 내에서 오브젝트의 사이즈에 적어도 부분적으로 기초하여 오브젝트를 선택하도록 구성되는, 이미징 디바이스.
  34. 제 30 항에 있어서,
    상기 포커스 우선순위화 모듈은 추가로, 이미지 배경에 대한 오브젝트의 움직임에 적어도 부분적으로 기초하여 오브젝트를 선택하도록 구성되는, 이미징 디바이스.
KR1020147029980A 2012-03-28 2013-03-25 이미징 디바이스를 오토포커싱하는 방법 및 장치 KR20140148448A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/433,123 2012-03-28
US13/433,123 US20130258167A1 (en) 2012-03-28 2012-03-28 Method and apparatus for autofocusing an imaging device
PCT/US2013/033731 WO2013148591A1 (en) 2012-03-28 2013-03-25 Method and apparatus for autofocusing an imaging device

Publications (1)

Publication Number Publication Date
KR20140148448A true KR20140148448A (ko) 2014-12-31

Family

ID=48087746

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020147029980A KR20140148448A (ko) 2012-03-28 2013-03-25 이미징 디바이스를 오토포커싱하는 방법 및 장치

Country Status (5)

Country Link
US (1) US20130258167A1 (ko)
EP (1) EP2832089A1 (ko)
KR (1) KR20140148448A (ko)
CN (1) CN104205801B (ko)
WO (1) WO2013148591A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11195465B2 (en) 2019-01-09 2021-12-07 Samsung Display Co., Ltd. Display device
WO2023210856A1 (ko) * 2022-04-29 2023-11-02 한화비전 주식회사 오토 포커스 조절 방법 및 이를 이용한 카메라 장치

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014109125A1 (ja) * 2013-01-09 2014-07-17 ソニー株式会社 画像処理装置、画像処理方法、プログラム
US20150092089A1 (en) * 2013-09-27 2015-04-02 Broadcom Corporation System And Method For Under Sampled Image Enhancement
US9584725B2 (en) * 2014-06-03 2017-02-28 Xiaomi Inc. Method and terminal device for shooting control
CN104065878B (zh) * 2014-06-03 2016-02-24 小米科技有限责任公司 拍摄控制方法、装置及终端
CN105472231B (zh) * 2014-09-03 2019-03-29 联想(北京)有限公司 控制方法、图像采集装置和电子设备
US9570106B2 (en) * 2014-12-02 2017-02-14 Sony Corporation Sensor configuration switching for adaptation of video capturing frame rate
US9973681B2 (en) 2015-06-24 2018-05-15 Samsung Electronics Co., Ltd. Method and electronic device for automatically focusing on moving object
US20170054897A1 (en) * 2015-08-21 2017-02-23 Samsung Electronics Co., Ltd. Method of automatically focusing on region of interest by an electronic device
CN106231174A (zh) * 2016-07-11 2016-12-14 深圳天珑无线科技有限公司 一种拍照的方法及设备
KR20180052002A (ko) * 2016-11-09 2018-05-17 삼성전자주식회사 이미지 처리 방법 및 이를 지원하는 전자 장치
JP7145638B2 (ja) * 2018-05-07 2022-10-03 シャープ株式会社 電子機器、撮像方法、制御装置、及び制御プログラム
CN109561255B (zh) * 2018-12-20 2020-11-13 惠州Tcl移动通信有限公司 终端拍照方法、装置及存储介质
CN109639976B (zh) * 2018-12-24 2021-02-09 北京百度网讯科技有限公司 焦点确定方法和装置
CN111314611A (zh) * 2020-02-26 2020-06-19 浙江大华技术股份有限公司 一种多个运动对象的拍摄方法及装置
JP7541850B2 (ja) * 2020-05-15 2024-08-29 キヤノン株式会社 電子機器、制御方法、プログラム

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2603211B2 (ja) * 1984-06-18 1997-04-23 キヤノン株式会社 カメラにおける自動追尾装置
DE68921840T2 (de) * 1988-10-27 1995-09-07 Canon Kk Bildaufnahme- und Verarbeitungseinrichtung.
JP3918788B2 (ja) * 2003-08-06 2007-05-23 コニカミノルタフォトイメージング株式会社 撮像装置、およびプログラム
JP4819380B2 (ja) * 2004-03-23 2011-11-24 キヤノン株式会社 監視システム、撮像設定装置、制御方法、及びプログラム
US8035721B2 (en) * 2004-08-05 2011-10-11 Panasonic Corporation Imaging apparatus
WO2006082967A1 (ja) * 2005-02-07 2006-08-10 Matsushita Electric Industrial Co., Ltd. 撮像装置
CN101616262B (zh) * 2005-02-07 2012-07-25 松下电器产业株式会社 成像装置
JP4823179B2 (ja) * 2006-10-24 2011-11-24 三洋電機株式会社 撮像装置及び撮影制御方法
JP2008129554A (ja) * 2006-11-27 2008-06-05 Sanyo Electric Co Ltd 撮像装置及びオートフォーカス制御方法
US20080278589A1 (en) * 2007-05-11 2008-11-13 Karl Ola Thorn Methods for identifying a target subject to automatically focus a digital camera and related systems, and computer program products
JP5176483B2 (ja) * 2007-10-30 2013-04-03 株式会社ニコン 画像認識装置、画像追尾装置および撮像装置
CN101547306B (zh) * 2008-03-28 2010-12-08 鸿富锦精密工业(深圳)有限公司 摄像装置及其对焦方法
JP4384240B2 (ja) * 2008-05-28 2009-12-16 株式会社東芝 画像処理装置、画像処理方法、画像処理プログラム
US7995909B2 (en) * 2008-12-12 2011-08-09 Samsung Electro-Mechanics Co., Ltd. Auto-focusing method
JP5223644B2 (ja) * 2008-12-15 2013-06-26 パナソニック株式会社 撮像装置
JP5423287B2 (ja) * 2009-09-29 2014-02-19 リコーイメージング株式会社 撮像装置
JP5589527B2 (ja) * 2010-04-23 2014-09-17 株式会社リコー 撮像装置および追尾被写体検出方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11195465B2 (en) 2019-01-09 2021-12-07 Samsung Display Co., Ltd. Display device
US11545092B2 (en) 2019-01-09 2023-01-03 Samsung Display Co., Ltd. Display device
WO2023210856A1 (ko) * 2022-04-29 2023-11-02 한화비전 주식회사 오토 포커스 조절 방법 및 이를 이용한 카메라 장치

Also Published As

Publication number Publication date
US20130258167A1 (en) 2013-10-03
CN104205801A (zh) 2014-12-10
WO2013148591A1 (en) 2013-10-03
CN104205801B (zh) 2018-06-26
EP2832089A1 (en) 2015-02-04

Similar Documents

Publication Publication Date Title
KR20140148448A (ko) 이미징 디바이스를 오토포커싱하는 방법 및 장치
US10706892B2 (en) Method and apparatus for finding and using video portions that are relevant to adjacent still images
US9854149B2 (en) Image processing apparatus capable of obtaining an image focused on a plurality of subjects at different distances and control method thereof
CN104767933B (zh) 一种具备拍照功能的便携数码设备及筛选照片的方法
US20200120262A1 (en) Image processing device, image processing method, and program
US9706120B2 (en) Image pickup apparatus capable of changing priorities put on types of image processing, image pickup system, and method of controlling image pickup apparatus
JP5423305B2 (ja) 画像評価装置及びカメラ
US10070052B2 (en) Image capturing apparatus, image processing apparatus, and control methods thereof
US20110026837A1 (en) Image processing device and method
CN103222259A (zh) 高动态范围的转换
JP2012054810A (ja) 画像処理装置、画像処理方法、撮像装置、および画像処理プログラム
CN108702457B (zh) 用于自动图像校正的方法、装置和计算机可读存储媒体
WO2021051304A1 (zh) 快门速度调节、安全快门标定方法、便携式设备及无人机
US20150085145A1 (en) Multiple image capture and processing
JP2015103852A (ja) 画像処理装置、撮像装置、画像処理装置の制御方法、画像処理装置の制御プログラム及び記憶媒体
US20210158537A1 (en) Object tracking apparatus and control method thereof
CN111771372A (zh) 相机拍摄参数的确定方法和装置
JP4743097B2 (ja) カメラ、および画像検索プログラム
US20150085159A1 (en) Multiple image capture and processing
JP5032363B2 (ja) 画像表示方法
JP6157238B2 (ja) 画像処理装置、画像処理方法及び画像処理プログラム
EP3272111B1 (en) Automatic image frame processing possibility detection
JP5499818B2 (ja) 画像処理装置及び方法、並びにプログラム
JP5287965B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP2024003949A (ja) 電子機器、電子機器の制御方法、プログラム、記憶媒体

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application