KR20200087746A

KR20200087746A - 상이한 줌 레벨들에서 카메라를 오리엔팅하기 위한 보조

Info

Publication number: KR20200087746A
Application number: KR1020207006795A
Authority: KR
Inventors: 컬럼 볼드윈; 파시 파크킬라
Original assignee: 퀄컴 인코포레이티드
Priority date: 2017-09-11
Filing date: 2018-09-10
Publication date: 2020-07-21
Also published as: WO2019051376A2; US20190082101A1; AU2018330318A1; US20220321776A1; US20200244874A1; US10630895B2; TWI803517B; EP3682627A2; TW201921909A; WO2019051376A3; BR112020004680A2; SG11202000954XA; CN113329160A; CN111066315A; CN111066315B; US20230362482A1; US11750918B2; CN113329160B; US11394876B2; TW202333486A

Abstract

본 개시의 양태들은 상이한 줌 레벨들에서 카메라를 포지셔닝시키는 것을 보조하기 위한 시스템들 및 방법들에 관한 것이다. 일 예시적인 디바이스는 이미지 데이터를 저장하도록 구성된 메모리를 포함할 수도 있다. 예시적인 디바이스는, 메모리와 통신하는 프로세서를 더 포함할 수도 있고, 그 프로세서는, 장면과 연관된 제 1 이미지 스트림을 프로세싱하고, 장면의 공간적 부분과 연관된 제 2 이미지 스트림을 독립적으로 프로세싱하는 것으로서, 상기 제 2 이미지 스트림은 상기 제 1 이미지 스트림과 상이한, 상기 제 2 이미지 스트림을 독립적으로 프로세싱하는 것을 행하며, 프로세싱된 제 1 이미지 스트림을 출력하고, 그리고, 프로세싱된 제 1 이미지 스트림의 출력 동안, 제 2 이미지 스트림과 연관된 공간적 부분을 나타내는 시각적 표시를 출력하도록 구성된다.

Description

상이한 줌 레벨들에서 카메라를 오리엔팅하기 위한 보조

우선권 출원에 대한 참조에 의한 통합

본 특허출원은 2017년 9월 11일 출원된 "ASSIST FOR ORIENTING A CAMERA AT DIFFERENT ZOOM LEVELS" 라는 제목의 비-가 출원 제 15/701,293 호에 대해 우선권을 주장하고, 그것은 본원의 양수인에게 양도되었고 본원에 참조에 의해 명시적으로 여기에 통합된다.

기술 분야

본 개시물은 일반적으로 이미지 캡처 디바이스들을 위한 시스템들에 관한 것이고, 구체적으로는, 이미지들 또는 비디오를 레코딩하기 위해 카메라를 포지셔닝시키는 것에 관한 것이다.

관련 기술의 배경

(스마트폰들, 태블릿들, 디지털 카메라들, 보안 시스템들, 컴퓨터들 등과 같은) 많은 디바이스들 및 시스템들은 다양한 애플리케이션들을 위한 카메라들을 포함한다. 많은 카메라 시스템들에 대해, 이미지들을 취하거나 비디오를 레코딩할 때, (스마트폰 또는 태블릿 디스플레이와 같은) 카메라용 디스플레이는 그 카메라에 의해 캡처되는 이미지들 또는 비디오를 프리뷰한다. 예를 들어, 카메라가 픽처들을 취하거나 비디오를 레코딩하는 동안 줌인하는 경우에, 디스플레이는 (그 카메라를 이용하여 레코딩되고 있는 것인) 줌인된 뷰를 보여준다.

요약

이 요약은 상세한 설명에서 하기 추가로 설명되는 개념들의 선택을 간략화된 형태로 도입하기 위해 제공된다. 이 요약은, 청구된 주제의 핵심적인 특징들 또는 본질적인 특징들을 식별하도록 의도되지 않았고, 청구된 주제의 범위를 제한하도록 의도되지도 않았다.

본 개시의 양태들은 상이한 줌 레벨들에서 카메라를 포지셔닝 (positioning) 시키는 것을 보조하는 것에 관한 것이다. 일부 구현들에서, 일 예시적인 디바이스는 이미지 데이터를 저장하도록 구성된 메모리를 포함할 수도 있다. 그 예시적인 디바이스는, 메모리와 통신하는 프로세서를 더 포함할 수도 있고, 그 프로세서는, 장면 (scene) 과 연관된 제 1 이미지 스트림을 프로세싱하고, 장면의 공간적 부분 (spatial portion) 과 연관된 제 2 이미지 스트림을 독립적으로 프로세싱하는 것으로서, 상기 제 2 이미지 스트림은 상기 제 1 이미지 스트림과 상이한, 상기 제 2 이미지 스트림을 독립적으로 프로세싱하는 것을 행하며, 프로세싱된 제 1 이미지 스트림을 출력하고, 그리고, 프로세싱된 제 1 이미지 스트림의 출력 동안, 제 2 이미지 스트림과 연관된 공간적 부분을 나타내는 시각적 표시 (visual indication) 를 출력하도록 구성된다.

다른 예에서, 방법이 개시된다. 그 예시적인 방법은, 프로세서에 의해, 장면과 연관된 제 1 이미지 스트림을 프로세싱하는 단계; 프로세서에 의해, 장면의 공간적 부분과 연관된 제 2 이미지 스트림을 독립적으로 프로세싱하는 단계로서, 상기 제 2 이미지 스트림은 상기 제 1 이미지 스트림과 상이한, 상기 제 2 이미지 스트림을 독립적으로 프로세싱하는 단계; 프로세싱된 제 1 이미지 스트림을 출력하는 단계; 및, 프로세싱된 제 1 이미지 스트림의 출력 동안, 제 2 이미지 스트림과 연관된 공간적 부분을 나타내는 시각적 표시를 출력하는 단계를 포함한다.

또 다른 예에서, 비일시적 (non-transitory) 컴퓨터 판독가능 매체가 개시된다. 그 비일시적 컴퓨터 판독가능 매체는 명령들을 저장할 수도 있고, 그 명령들은, 프로세서에 의해 실행될 때, 디바이스로 하여금, 프로세서에 의해, 장면과 연관된 제 1 이미지 스트림을 프로세싱하는 것; 프로세서에 의해, 장면의 공간적 부분과 연관된 제 2 이미지 스트림을 독립적으로 프로세싱하는 것으로서, 상기 제 2 이미지 스트림은 상기 제 1 이미지 스트림과 상이한, 상기 제 2 이미지 스트림을 독립적으로 프로세싱하는 것; 프로세싱된 상기 제 1 이미지 스트림을 출력하는 것; 및, 프로세싱된 제 1 이미지 스트림의 출력 동안, 제 2 이미지 스트림과 연관된 공간적 부분을 나타내는 시각적 표시를 출력하는 것을 포함하는 동작들을 수행하게 한다.

또 다른 예에서, 디바이스가 개시된다. 그 디바이스는, 장면과 연관된 제 1 이미지 스트림을 프로세싱하는 수단; 장면의 공간적 부분과 연관된 제 2 이미지 스트림을 독립적으로 프로세싱하는 수단으로서, 상기 제 2 이미지 스트림은 상기 제 1 이미지 스트림과 상이한, 상기 제 2 이미지 스트림을 독립적으로 프로세싱하는 수단; 프로세싱된 제 1 이미지 스트림을 출력하는 수단; 및, 프로세싱된 제 1 이미지 스트림의 출력 동안, 제 2 이미지 스트림과 연관된 공간적 부분을 나타내는 시각적 표시를 출력하는 수단을 포함한다.

도면들의 간단한 설명
본 개시의 양태들은, 우사한 참조 부호들이 유사한 엘리먼트들을 가리키는 첨부 도면들의 도들에서 예시적으로 하지만 비한정적으로 나타내어진다.
도 1a 는 다수의 카메라들을 포함하는 일 예시적인 디바이스를 나타낸다.
도 1b 는 다수의 카메라들을 포함하는 다른 예시적인 디바이스를 나타낸다.
도 2a 는 이미지 프로세싱을 위한 일 예시적인 디바이스의 블록도이다.
도 2b 는 이미지 프로세싱을 위한 일 예시적인 디바이스의 다른 블록도이다.
도 3 은 일 예시적인 이미지 신호 프로세서의 블록도이다.
도 4a 는 카메라에 의해 캡처되는 예시적인 장면을 나타낸다.
도 4b 는 도 4a 의 예시적인 장면, 레코딩될 도 4a 의 장면의 의도된 부분, 및 레코딩되고 있는 도 4a 의 장면의 실제 부분을 나타낸다.
도 5a 는 캡처되고 있는 도 4a 의 장면을 프리뷰하는 예시적인 디스플레이 및 레코딩되고 있거나 레코딩될 도 4a 의 장면의 부분의 시각적 표시를 나타낸다.
도 5b 는 도 4a 의 장면을 캡처하는 제 1 카메라 및 레코딩되고 있거나 레코딩될 도 4a 의 장면의 부분을 캡처하는 제 2 카메라의 예를 나타낸다.
도 6 은 시각적 표시를 출력하기 위한 예시적인 동작을 나타내는 예시적인 플로우 차트이다.
도 7 은 캡처되고 있는 도 4a 의 장면의 프리뷰와 레코딩되고 있거나 레코딩될 도 4a 의 장면의 부분 사이의 디스플레이 스위칭의 일례를 나타낸다.
도 8 은 캡처되고 있는 장면과 레코딩되고 있거나 레코딩될 장면의 부분 사이의 스위칭을 위한 예시적인 동작을 나타내는 예시적인 플로우 차트이다.
도 9a 는 캡처되고 있는 도 4a 의 장면 및 레코딩되고 있거나 레코딩될 도 4a 의 장면의 부분을 동시에 프리뷰하는 예시적인 디스플레이를 나타낸다.
도 9b 는, 레코딩되고 있거나 레코딩될 도 4a 의 장면의 부분의 프리뷰와, 캡처되고 있는 도 4a 의 장면과 레코딩되고 있거나 레코딩될 도 4a 의 장면의 부분의 동시 프리뷰 사이의 디스플레이 스위칭의 일례를 나타낸다.
도 9c 는 도 4a 의 장면의 줌 보조 프리뷰, 레코딩되고 있거나 레코딩될 도 4a 의 장면의 부분의 프리뷰, 및 도 4a 의 장면의 동시 프리뷰 사이의 디스플레이 스위칭의 일례를 나타낸다.
도 10 은 장면의 동시 프리뷰와 레코딩되고 있거나 레코딩될 장면의 프리뷰 사이의 스위칭을 위한 예시적인 동작을 나타내는 예시적인 플로우 차트이다.
도 11a 는 캡처되고 있는 도 4a 의 장면을 프리뷰하고 레코딩되고 있거나 레코딩될 도 4a 의 장면의 시각적 표시를 리사이징하는 예시적인 디스플레이를 나타낸다.
도 11b 는 캡처되고 있는 도 4a 의 장면을 프리뷰하고 레코딩되고 있거나 레코딩될 도 4a 의 장면의 시각적 표시를 이동시키는 예시적인 디스플레이를 나타낸다.
도 12 는 사용자가 레코딩되고 있거나 레코딩될 도 4a 의 장면의 부분의 시각적 표시를 조정하는 것에 기초하여 레코딩되고 있거나 레코딩될 도 4a 의 장면의 부분을 조정하기 위한 예시적인 동작을 나타내는 예시적인 플로우 차트이다.
도 13a 는 제 1 카메라에 의해 캡처되고 있는 예시적인 장면 및 제 2 카메라에 의해 캡처된 또는 캡처될 수 있는 장면의 예시적인 부분을 나타낸다.
도 13b 는 도 13a 의 예시적인 장면 및 레코딩되고 있거나 레코딩될 도 13a 의 장면의 부분을 나타낸다.
도 14 는 제 1 이미지 스트림과 제 2 이미지 스트림 사이의 스위칭을 위한 예시적인 동작을 나타내는 예시적인 플로우 차트이다.
도 15 는 프로세싱된 제 2 이미지 스트림으로부터 프로세싱된 제 1 이미지 스트림으로 스위칭하기 위한 예시적인 동작을 나타내는 예시적인 플로우 차트이다.
도 16 은 프로세싱된 제 2 이미지 스트림으로부터 프로세싱된 제 1 이미지 스트림으로 스위칭하기 위한 다른 예시적인 동작을 나타내는 예시적인 플로우 차트이다.

상세한 설명

본 개시의 양태들은 이미지들 또는 비디오를 레코딩하기 위한 카메라를 포지셔닝시킴에 있어서 사용자를 보조할 수도 있고, 다양한 카메라 구성들을 갖는 디바이스들에 적용가능할 수도 있다.

각각의 카메라는 장면을 캡처하기 위한 시야 (field of view) 를 포함한다. 많은 사람들은 시야 내의 장면의 부분만을 캡처 (capture) 하기 위해 줌 ("줌 인 (zoom in)") 을 사용한다. 줌은 광학적일 수도 있고, 카메라 렌즈들은카메라의 초점 걸이를 변경하기 위해 이동된다 (해상도의 손실 없이 장면에서의 오브젝트 (object) 가 확대되도록 허용). 줌은 대안적으로 디지털일 수도 있고, 캡처된 장면의 부분들이 크로핑된다. 캡처된 장면의 부분들이 크로핑되는 경우에, 나머지 부분은 디스플레이 상에서 신장될 수도 있다 (해상도에서의 약간의 손실을 초래).

줌인된 뷰에서, (레코딩 동안 카메라를 패닝 (panning) 또는 틸팅 (tilting) 하는 것, 또는 사용자가 스마트폰 또는 태블릿을 이동시키는 것과 같은) 카메라 이동들은 (뷰에서의 오브젝트가 확대되거나 신장될 수도 있기 때문에) 증폭되고, 프리뷰된 상 또는 비디오 (그리고 따라서 레코딩된 상 또는 비디오) 가 사용자에 의해 레코딩되도록 의도된 오브젝트 또는 장면을 포함하지 않거나 중심에 오지 않는 결과를 초래한다. 예를 들어, 디바이스가 축구 게임으로부터의 이미지들 또는 비디오를 레코딩하고 있고, 사용자가 카메라에게 특정 선수 또는 공에 줌인하도록 명령하는 경우에, 그 선수나 공은 줌인되는 동안 카메라의 시야에서 중심에 유지되지 못할 수도 있다 (또는 심지어 그 시야에 존재하지 않을 수도 있다). 사용자는, 예를 들어, 카메라 디스플레이의 줌인된 프리뷰에서 선수나 공을 찾기를 시도함으로써, 카메라를 포지셔닝시키기 위해 고군분투할 수도 있다. 예를 들어 주밍된 뷰 동안 카메라를 포지셔닝시킴에 있어서의 사용자 어려움들을 감소시키기 위해서, 카메라를 포지셔닝시킴에 있어서 사용자를 보조하는 것이 바람직하다.

일부 구현들에서, (하나 이상의 프로세서들과 같은) 디바이스의 적어도 부분은, 장면과 연관된 (제 1 카메라로부터의) 제 1 이미지 스트림을 프로세싱하고, 제 1 이미지 스트림과는 상이한 장면의 공간적 부분과 연관된 (제 2 카메라로부터의) 제 2 이미지 스트림을 독립적으로 프로세싱하며, (디스플레이를 통해 프리뷰 등에) 프로세싱된 제 1 이미지 스트림을 출력하고, 그리고, (프로세싱된 제 1 이미지 스트림의 프리뷰 등 상에) 프로세싱된 제 1 이미지 스트림의 출력 동안 제 2 이미지 스트림과 연관된 장면의 공간적 부분의 시각적 표시를 출력할 수도 있다. 이러한 방식으로, 본 개시의 양태들은, 사용자가 이미지들 또는 비디오를 캡처 및/또는 레코딩하는 동안 상이한 줌 레벨들에서 카메라를 포지셔닝시키기 위해 고군분투하는 것을 방지할 수도 있고, 또한, 디바이스가 장면의 의도된 부분들을 보다 효율적으로 캡처 및/또는 레코딩하도록 허용할 수도 있다. 예를 들어, 상기 언급된 바와 같이, 축구 게임을 레코딩하고 있는 사용자는 장면의 어느 부분이 레코딩되고 있는지를 식별하기 위해 프리뷰에서 시각적 표시를 사용할 수도 있고, 따라서, 프리뷰를 위한 줌인된 뷰에서의 검색 없이 원하는 바와 같이 카메라를 포지셔닝시킬 수도 있다.

용어들 "캡처" 및 "레코딩" 은, (프로세싱되기 전의 또는 (프리뷰 등을 위한) 충분히 프로세싱되지 않은 카메라 센서로부터의 이미지들과, (나중의 보기를 위해서 스토리지에 놓거나 다른 것들로의 스트리밍을 위한 등의) 충분히 프로세싱된 이미지들 사이에 구별하기 위해 사용된다. 카메라 센서가 활성일 때, 카메라는 이미지들을 계속적으로 (예컨대, 초 당 미리결정된 수의 프레임들 등으로) "캡처" 할 수도 있다. 이들 이미지들 중 많은 것이 폐기되고 사용되지 않거나, 완전히 프로세싱된다 (예컨대, 디노이징, 에지 개선, 컬러 밸런스, 및 이미지 신호 프로세서에 의한 다른 필터들 적용). "레코딩된" 이미지들 또는 비디오는 (예컨대 이미지에 대해 카메라 버튼을 누르는 것, 비디오에 대한 레코드 버튼을 누르는 것 등에 의해) 사용자가 이미지 신호 프로세서에 의해 완전히 프로세싱되도록 의도하거나 요청하는 캡처들이다. 카메라 프리뷰는 완전히 프로세싱되는 일 없이 캡처들을 보여준다. 카메라 프리뷰가 또한 레코딩되고 있는 캡처들을 보여주는 경우에, 프리뷰는 이미지 신호 프로세서가 캡처들을 완전히 프로세싱하는 동안 부분적으로 프로세싱된 캡처들을 보여준다. 카메라 프리뷰가 이미지들 또는 비디오가 레코딩되기 전에 캡처들을 보여주는 경우에, 프리뷰는 프리뷰 후에 폐기되는 부분적으로 프로세싱된 캡처들을 보여준다. 일단 캡처들이 레코딩을 위해 완전히 프로세싱되고 나면, 결과적인 이미지들 또는 비디오는, 예컨대, 나중의 보기를 위해 메모리에 저장되고, 라이브 보기를 위해 다른 것들로 스트리밍되는 등이 될 수도 있다.

이하의 설명에서, 본 개시의 완전한 이해를 제공하기 위해 특정 컴포넌트들, 회로들, 및 프로세스들의 예들과 같은 수많은 특정 상세들이 전개된다. 본 명세서에서 사용된 바와 같은 "커플링된 (coupled)" 이라는 용어는 하나 이상의 개재하는 컴포넌트들 또는 회로들을 통해 접속되거나 직접 접속되는 것을 의미한다. 또한, 이하의 설명에서 그리고 설명의 목적들을 위해, 본 개시의 완전한 이해를 제공하기 위해 특정 전문용어가 전개된다. 하지만, 본원에 개시된 교시들을 실시하기 위해 이들 특정 상세들은 요구되지 않을 수도 있음은 당업자에게 명백할 것이다. 다른 경우들에서, 잘 알려진 회로들 및 디바이스들은 본 개시의 교시들을 불명료하게 하는 것을 회피하기 위해 블록도 형태로 도시된다. 다음에 이어지는 상세한 설명들의 일부 부분들은 절차들, 로직 블록들, 프로세싱 및 컴퓨터 메모리 내에서의 데이터 비트들에 대한 동작들의 다른 심볼 표현들의 관점에서 제시된다.　 이들 설명들 및 표현들은 데이터 프로세싱 기술들에서의 당업자에 의해 그 작업의 실체를 당업계의 타인들에게 가장 효과적으로 전달하기 위해 사용되는 수단들이다.　 본원 개시물에서, 절차, 로직 블록, 프로세스 등은 원하는 결과로 이끄는 단계들 또는 명령들의 자기-일관성있는 시퀀스인 것으로 인식된다.　 그 단계들은 물리량들의 물리적 조작들을 필요로 하는 것들이다.　 필수적인 것은 아니지만 통상적으로, 이들 양들은 컴퓨터 시스템에서 저장되고, 전송되고, 결합되고, 비교되고 그 외에 조작되는 것이 가능한 전기적 또는 자기적 신호들의 형태를 취한다.

하지만, 이들 용어 및 유사한 용어 모두는 적절한 물리량들과 연관되어야 하고, 이들 양들에 적용된 단지 편리한 라벨들임을 명심해야 한다.　 다음의 논의들로부터 명백한 바와 같이 특별히 달리 언급되지 않으면, 본원 전반에 걸쳐, "액세스하는 것", "수신하는 것", "전송하는 것", "이용하는 것", "선택하는 것", "결정하는 것", "정규화하는 것", "승산하는 것", "평균화하는 것", "모니터링하는 것", "비교하는 것", "적용하는 것", "업데이트하는 것", "측정하는 것", "도출하는 것" 등과 같은 용어를 이용하는 논의들은 컴퓨터 시스템 또는 유사한 전자 컴퓨팅 디바이스의 액션들 및 프로세스들을 지칭함이 인식되며, 이 컴퓨터 시스템 또는 유사한 전자 컴퓨팅 디바이스는 컴퓨터 시스템의 레지스터들 및 메모리들 내의 물리(전자)량들로서 표현된 데이터를 컴퓨터 시스템 메모리들 또는 레지스터들 또는 다른 그러한 정보 스토리지, 송신 또는 디스플레이 디바이스들 내의 물리량들로서 유사하게 표현된 다른 데이터로 조작 및 변환한다.

도면들에서, 단일 블록이 기능 또는 기능들을 수행하는 것으로서 설명될 수도 있지만, 실제 실시에 있어서, 그 블록에 의해 수행된 기능 또는 기능들은 단일 컴포넌트에서 또는 다중의 컴포넌트들에 걸쳐 수행될 수도 있고/있거나 하드웨어를 이용하여, 소프트웨어를 이용하여, 또는 하드웨어와 소프트웨어의 조합을 이용하여 수행될 수도 있다.　 하드웨어와 소프트웨어의 이러한 상호교환 가능성을 분명히 예시하기 위해, 다양한 예시적인 컴포넌트들, 블록들, 모듈들, 회로들 및 단계들이 일반적으로 그들의 기능성의 면에서 이하에서 설명된다. 그러한 기능성이 하드웨어로서 구현되는지 또는 소프트웨어로서 구현되는지는 전체 시스템에 부과된 설계 제약들 및 특정 애플리케이션에 의존한다.　 당업자들은 설명된 기능성을 각각의 특정한 애플리케이션에 대해 다양한 방식들로 구현할 수도 있지만, 이러한 구현 결정들은 본 개시의 범위로부터의 일탈을 야기하는 것으로서 해석되지 않아야 한다.　 또한, 예시적인 디바이스들은, 프로세서, 메모리 등과 같은 잘 알려진 컴포넌트들을 포함하여, 도시된 것들 이외의 컴포넌트들을 포함할 수도 있다.

본 개시의 양태들은 임의의 적합한 프로세서 (예컨대 이미지 신호 프로세서) 또는, 하나 이상의 카메라들을 포함하는 디바이스 (예컨대 스마트폰들, 태블릿들, 랩탑 컴퓨터들, 디지털 카메라들, 웹 카메라들 등) 에 적용가능하고, 다양한 카메라 구성들에 대해 구현될 수도 있다. 이하의 설명 및 예들의 부분들은 본 개시의 양태들을 설명하기 위해 디바이스에 대해 2 개의 카메라들을 사용하지만, 본 개시는 적어도 하나의 카메라를 갖는 임의의 디바이스에 적용된다. 다수의 카메라들을 갖는 디바이스들에 대해, 카메라들은 유사한 또는 상이한 능력들 (예컨대, 해상도, 컬러 또는 흑백, 와이드 뷰 렌즈 대 텔레포토 렌즈, 줌 능력들 등) 을 가질 수도 있다.

도 1a 는 제 1 구성으로 배열된 제 1 카메라 (102) 및 제 2 카메라 (104) 를 갖는 듀얼 카메라를 포함하는 예시적인 디바이스 (100) 를 나타낸다. 도 1b 는 제 2 구성으로 배열된 제 1 카메라 (112) 및 제 2 카메라 (114) 를 갖는 듀얼 카메라를 포함하는 다른 예시적인 디바이스 (110) 를 나타낸다. 일부 양태들에서, (제 1 카메라들 (102 및 112) 과 같은) 카메라들 중 하나는 주 카메라일 수도 있고, (제 2 카메라들 (104 및 114) 과 같은) 다른 카메라들은 보조 카메라일 수도 있다. 추가적으로 또는 대안적으로, 제 2 카메라들 (104 및 114) 은 제 1 카메라들 (102 및 112) 과는 상이한 초점 길이, 캡처율, 해상도, 컬러 팔레트 (예컨대, 컬러 대 흑백), 및/또는 뷰 또는 캡처의 필드를 가질 수도 있다. 일부 양태들에서, 제 1 카메라들 (102 및 112) 각각은 넓은 시야를 포함할 수도 있고, 제 2 카메라들 (104 및 114) 각각은 (텔레포토 카메라와 같이) 좁은 시야를 포함할 수도 있다. 다른 양태들에서, 제 1 카메라들 (102 및 112) 은 제 2 카메라들 (104 및 114) 과 동일한 능력들을 가질 수도 있지만, 캡처될 또는 레코딩될 장면의 동일한 입장을 가지지는 않는다.

듀얼 카메라를 포함하는 스마트폰 또는 태블릿일 수도 있는 예시적인 디바이스가 도시되지만, 본 실시형태들의 양태들은 이미지 신호 프로세서를 갖는 임의의 디바이스에서 구현될 수도 있다. 다른 예시적인 디바이스는 스마트폰 또는 태블릿에 접속할 수도 있는 (스마트워치들과 같은) 웨어러블이다. 추가적인 예시적인 디바이스는 카메라들에 커플링된 (예컨대, 카메라와 통신하거나 물리적으로 접속된) 증간 또는 가상 현실 헤드셋이다. 또 다른 예시적인 디바이스는 카메라들을 포함하거나 카메라들에 접속된 드론 또는 자동차이다. 추가적인 예시적인 디바이스는 보안 카메라들에 커플링된 비디오 보안 시스템이다. 그 예들은 오직 예시적인 목적들을 위한 것이고, 본 개시는 임의의 특정 예 또는 디바이스에 제한되지 않아야 한다.

용어 "디바이스" 는 하나 또는 특정 수의 물리적 오브젝트들 (예컨대 하나의 스마트폰) 에 제한되지 않는다. 본 명세서에서 사용된 바와 같이, 디바이스는 이 개시의 적어도 일부 부분들에서 구현될 수도 있는 다수의 부분들을 갖는 임의의 일렉트로닉일 수도 있다. 이하의 설명 및 예들은 이 개시의 다양한 양태들을 설명하기 위해 용어 "디바이스" 를 사용하지만, 용어 "디바이스" 는 특정 구성, 타입, 또는 수의 오브젝트들에 제한되지 않는다.

도 2a 는 다수의 카메라들을 포함하는 예시적인 디바이스 (200) 의 블록도이다. 도 1a 및 도 1b 의 디바이스들 (100 및 110) 의 하나의 구현일 수도 있는 예시적인 디바이스 (200) 는 예를 들어 유선 및 무선 통신 디바이스들 (예컨대, 카메라 폰들, 스마트폰들, 태블릿들, 보안 시스템들, 대시 카메라들, 랩탑 컴퓨터들, 데스크탑 컴퓨터들, 웨어러블 카메라들, 드론들 등), (스틸 카메라들, 비디오 카메라들 등을 포함하는) 디지털 카메라들, 또는 임의의 다른 적합한 디바이스를 포함하는, 이미지들 또는 비디오를 캡처할 수 있는 임의의 적합한 디바이스일 수도 있다. 그 예시적인 디바이스 (200) 는 제 1 카메라 (202), 제 2 카메라 (204), 프로세서 (206), 명령들 (210) 을 저장하는 메모리 (208), 카메라 제어기 (212), 디스플레이 (216), 및 다수의 입력/출력 (I/O) 컴포넌트들 (218) 을 포함하는 것으로 도 2a 에서 도시된다. 디바이스 (200) 는 도시되지 않은 추가적인 피처들 또는 컴포넌트들을 포함할 수도 있다. 예를 들어, 다수의 트랜시버들 및 베이스밴드 프로세서를 포함할 수도 있는 무선 인터페이스가 무선 통신 디바이스를 위해 포함될 수도 있다. 디바이스 (200) 는 제 1 카메라 (202) 및 제 2 카메라 (204) 이외의 추가적인 카메라들을 포함할 수도 있다. 본 개시는 예시적인 디바이스 (200) 를 포함하는, 임의의 특정 예들 또는 예시들에 제한되지 않아야 한다.

제 1 카메라 (202) 및 제 2 카메라 (204) 는 (스틸 이미지들과 같은) 개별 이미지 프레임들을 캡처하는 것 및/또는 (캡처된 이미지 프레임들의 연속과 같은) 비디오를 캡처하는 것이 가능할 수도 있다. 카메라로부터의 비디오 또는 스틸 이미지들의 연속은 이미지 스트림이라 불릴 수도 있다. 제 1 카메라 (202) 및 제 2 카메라 (204) 는 이미지 스트림을 캡처하고 캡처된 이미지 스트림을 카메라 제어기 (212) 에 제공하기 위한 하나 이상의 이미지 센서들 (단순성을 위해 미도시) 및 셔터들을 포함할 수도 있다.

메모리 (208) 는 이 개시에서 설명된 하나 이상의 동작들의 전부 또는 부분을 수행하기 위한 컴퓨터 실행가능 명령들 (210) 을 저장한 비일시적 컴퓨터 판독가능 매체일 수도 있다. 디바이스 (200) 는 또한, 그 디바이스 (200) 에 커플링되거나 그 디바이스 (200) 에 통합될 수도 있는 전력 공급기 (220) 를 포함할 수도 있다.

프로세서 (206) 는 메모리 (208) 내에 저장된 (명령들 (210) 과 같은) 하나 이상의 소프트웨어 프로그램들의 명령들 또는 스크립트들을 실행 가능한 하나 이상의 적합한 프로세서들일 수도 있다. 일부 양태들에서, 프로세서 (206) 는, 디바이스 (200) 로 하여금 임의의 수의 상이한 기능들 또는 동작들을 수행하게 하기 위해 명령들 (210) 을 실행하는 하나 이상의 범용 프로세서들일 수도 있다. 추가적인 또는 대안적인 양태들에서, 프로세서 (206) 는 소프트웨어의 사용 없이 기능들 또는 동작들을 수행하기 위한 집적 회로들 또는 다른 하드웨어를 포함할 수도 있다. 도 2 의 예에서 프로세서 (206) 를 통해 서로 커플링되는 것으로 도시되지만, 프로세서 (206), 메모리 (208), 카메라 제어기 (212), 디스플레이 (216), 및 I/O 컴포넌트들 (218) 은 다양한 배열들로 서로 커플링될 수도 있다. 예를 들어, 프로세서 (206), 메모리 (208), 카메라 제어기 (212), 디스플레이 (216), 및/또는 I/O 컴포넌트들 (218) 은 (단순성을 위해 도시되지 않은) 하나 이상의 로컬 버스들을 통해 서로 커플링될 수도 있다.

디스플레이 (216) 는 사용자에 의한 보기를 위해 (캡처된 이미지들 및 비디오와 같은) 아이텐들을 제시하도록 및/또는 사용자 상호작용을 허용하는 적합한 디스플레이 또는 스크린일 수도 있다. 일부 양태들에서, 디스플레이 (216) 는 터치 감지 디스플레이일 수도 있다. I/O 컴포넌트들 (218) 은 사용자로부터 (커맨드들과 같은) 입력을 수신하고 사용자에 출력을 제공하기 위한 임의의 적합한 메커니즘, 인터페이스, 또는 디바이스이거나 그것들을 포함할 수도 있다. 예를 들어, I/O 컴포넌트들 (218) 은 그래픽 사용자 인터페이스, 키보드, 마우스, 마이크로폰 및 스피커들 등을 포함할 수도 있다 (하지만 이에 한정되지 않는다).

카메라 제어기 (212) 는 제 1 카메라 (202) 및/또는 제 2 카메라 (204) 에 의해 제공된 캡처된 이미지 프레임들 또는 비디오를 프로세싱하기 위한, 하나 이상의 이미지 신호 프로세서들일 수도 있는, 이미지 신호 프로세서 (214) 를 포함할 수도 있다. 일부 예시적인 구현들에서, 카메라 제어기 (212) 는 (예컨대 이미지 신호 프로세서 (214) 를 사용함으로써) 제 1 카메라 (202) 및 제 2 카메라 (204) 의 동작을 제어할 수도 있다. 일부 양태들에서, 이미지 신호 프로세서 (214) 는, 카메라들 (202 및 204) 의 동작을 제어하기 위해서 및/또는 레코딩 또는 프리뷰를 위해 하나 이상의 이미지 스트림들을 프로세싱하고 제공하기 위해서 메모리로부터의 명령들 (예컨대, 메모리 (208) 로부터의 명령들 또는 이미지 신호 프로세서 (214) 에 커플링된 별도의 메모리에 저장된 명령들) 을 실행할 수도 있다. 다른 양태들에서, 이미지 신호 프로세서 (214) 는 카메라들 (202 및 204) 의 동작을 제어하기 위한 및/또는 레코딩 또는 프리뷰를 위해 하나 이상의 이미지 스트림들을 프로세싱하고 제공하기 위한 특정 하드웨어를 포함할 수도 있다. 이미지 신호 프로세서 (214) 는 대안적으로 또는 추가적으로, 소프트웨어 명령들을 실행하기 위한 능력 및 특정 하드웨어의 조합을 포함할 수도 있다.

도 2a 는 디바이스 (200) 의 예시적인 구현을 나타내지만, 디바이스 (200) 는 도 2a 에 도시된 컴포넌트들 전부를 포함하도록 요구되지 않는다. 도 2b 는, 디바이스 (200) 가 도 2a 에서 예시된 컴포넌트들의 전부를 포함할 필요가 없음을 보여주는, 디바이스 (200) 의 다른 예시적인 구현을 나타낸다. 예를 들어, 디바이스 (200) 는 (카메라 제어기의 부분일 수도 있는) 이미지 신호 프로세서 (214) 및 명령들 (210) 을 포함하는 메모리 (208) 를 포함할 수도 있고, 전력 공급기 (220) 에 커플링되거나 그 전력 공급기 (220) 를 포함할 수도 있다. 제 1 카메라 (202) 및 제 2 카메라 (204) 는 (보안 시스템, 데스크탑 컴퓨터, 또는 카메라들이 디바이스에 대해 원격인 다른 디바이스들 등에 대한) 디바이스 (200) 와 분리되거나 디바이스 (200) 에 커플링될 수도 있다. 일부 예시적인 구현들에서, 디바이스 (200) 는 프로세싱을 위해 카메라로부터 캡처 스트림들을 수신하고, 카메라를 포지셔닝시키기 위해 카메라들에 커맨드들을 제공한다.

대안적으로 또는 추가적으로, 디스플레이 (216) 는 디바이스 (200) 로부터 분리될 수도 있고 디바이스 (200) 에 커플링될 수도 있다. 하나의 예에서, 디스플레이 (216) 는 이미지 프로세싱을 수행하는 디바이스에 커플링된 무선 디스플레이일 수도 있다. 예를 들어, 드론은 프리뷰를 위해 사용자의 태블릿 또는 스마트폰에 캡처를 제공할 수도 있고, 드론은 레코딩을 위해 의도된 임의의 캡처들을 완전히 프로세싱하기 위한 이미지 신호 프로세서를 포함할 수도 있다. I/O 컴포넌트들 (218) 은 또한 디바이스 (200) 로부터 분리될 수도 있다. 예를 들어, 입력부가 그래픽 사용자 인터페이스인 경우에, i/O 컴포넌트들의 일부 또는 전부는 디스플레이 (216) 의 부분일 수도 있다.

나타낸 바와 같이, 다양한 디바이스 구성들 및 타입들이 본 개시의 양태들에 구현하는데 사용될 수도 있다. 결과로서, 본 개시는 특정 디바이스 구성 또는 타입에 제한되어서는 아니된다.

도 3 은 일 예시적인 이미지 신호 프로세서 (300) 의 블록도이다. 이미지 신호 프로세서 (300) 는 도 2 에서 예시된 카메라 제어기 (212) 의 이미지 신호 프로세서 (214) 의 하나의 구현일 수도 있다. 이미지 신호 프로세서 (300) 는 제 1 이미지 스트림을 프로세싱하기 위해 필터들 (302A-302N) 의 시퀀스를 갖는 단일 스레드 (또는 단일 코어) 프로세서일 수도 있다. 하나의 예시적인 구현에서, 필터 1 (302A) 은 노이즈 감소 필터일 수도 있고, 필터 2 (302B) 는 에지 개선 필터일 수도 있으며, 필터 N (302N) 은 이미지 스트림을 프로세싱하는 것을 완료하기 위한 최종 필터일 수도 있다. 대안적으로 이미지 신호 프로세서 (300) 는 다른 이미지 스트림들을 프로세싱하기 위해 필터들 (304A-304N) 의 하나 이상의 추가적인 시퀀스들을 갖는 다중 스레드 (또는 다중 코어) 프로세서일 수도 있다.

사용자가 장면을 레코딩하거나 캡처하기 위해 종래를 디바이스를 이용할 때 (예컨대, 아빠가 그의 아이의 축구 게임 또는 피아노 연주회를 레코딩하기 위해 스마트폰을 사용할 때), 그 장면은 통상적으로 디바이스의 디스플레이 상에 프리뷰된다. 사용자가 장면의 부분 내로 주밍할 때 (예컨대 아빠가 그의 아이에 대해 줌인할 때), 디바이스는 통상적으로 그 장면의 줌인된 부분을 프리뷰한다. 줌이 디지털 줌인 경우에, 디바이스는 디바이스의 카메라(들)에 의해 캡처되는 장면의 부분만을 프리뷰할 수도 있다. 이러한 방식으로, 종래의 카메라 제어기는 캡처되고 있는 이미지 스트림의 부분만을 프리뷰를 위채 출력할 수도 있다. 사용자가 줌인된 뷰에서 레코딩될 오브젝트의 추적을 상실하고 프리뷰가 오브젝트를 보여주지 못하는 경우에, 사용자는 포지셔닝 (예컨대, 프리뷰에서 오브젝트를 발견하기 위해 카메라를 (예컨대, 좌측으로, 우측으로, 위로, 아래로, 및 대각선으로) 이동 또는 오리엔팅 (orienting) (예컨대, 패닝, 틸팅, 및 회전) 하는데 어려움들을 가질 수도 있다. 예를 들어, 전술한 아빠가 줌인된 프리뷰에서 그의 아이를 보지 못하는 경우에, 그 아빠는 그의 아이를 로케이팅시키기 위해 카메라의 포지션을 변경할 방향 및 거리를 결정하는데 어려움들을 가질 수도 있다.

도 4a 는 카메라에 의해 캡처되고 있는 예시적인 장면 (402) 을 나타낸다. 본원에서의 논의의 목적들을 위해, 예시적인 장면 (402) 은 도 2 의 디바이스 (200) 의 제 1 카메라 (202) 및 제 2 카메라 (204) (또는 제 1 카메라 (202) 및 제 2 카메라 (204) 양자) 에 의해 캡처되거나 레코딩된다. 예시적인 장면 (402) 은 선수가 훈련 동안 골을 득점하는 것이다. 사용자는 장면 (402) 을 레코딩하는 동안 공에 줌인하기를 희망할 수도 있고, 레코딩되고 있는 줌인된 장면의 프리뷰는 사용자가 레코딩하고자 의도하는 것과는 상이할 수도 있다. 도 4b 는 도 4a 의 예시적인 장면 (402) 을 나타내고, 레코딩되고 있거나 레코딩될 줌인된 장면의 실제 부분 (404) 을 나타내며, 레코딩될 장면의 의도된 부분 (406) 을 나타낸다. 디바이스가 레코딩되고 있거나 레코딩될 장면의 부분 (404) 을 프리뷰하는 경우에, 사용자는, 레코딩될 장면의 의도된 부분 (406) 의 로케이션이, 이 예에서, 레코딩되고 있거나 레코딩될 장면의 부분 (404) 의 로케이션의 우측 및 아래라고 결정하는데 어려움들을 가질 수도 있다. 결과로서, 사용자는 카메라를 어느 방향으로 이동 또는 오리엔팅할지를 알지 못할 수도 있다. 예를 들어, 사용자는 줌인된 뷰에서 공을 발견하기 위해 시도하기 위해 디바이스를 이동시키는데 시간을 허비할 수도 있거나, 프리뷰에서 공을 리로케이팅하기 위해 줌아웃하고 줌인하는데 디바이스 리소스들을 쓸 수도 있다. 결과로서, 사용자는 원치않는 이미지 또는 비디오를 레코딩하는데 너무 늦거나 그렇지 않으면 (골을 득점할 때 그의 아이를 레코딩하는 등에) 의도된 시간에서 의도된 오브젝트를 레코딩함에 있어서의 기회들을 상실한다.

본 개시의 다양한 양태들에 따르면, (디바이스에 커플링되거나 그 디바이스에 포함될 수도 있는 예시적인 디스플레이 (216) 와 같은) 디스플레이가 하나 이상의 카메라들을 포지셔닝함에 있어서 사용자를 보조하도록 구성될 수도 있다. 일부 구현들에서, 디스플레이는 (레코딩되고 있거나 레코딩될 장면의 부분을 포함하는) 카메라에 의해 캡처되고 있는 장면을 프리뷰할 수도 있다. 장면의 프리뷰에서, (이미지 프로세싱 디바이스와 통신하는) 디스플레이는 레코딩되고 있거나 레코딩될 장면의 부분의 시각적 표시를 디스플레이할 수도 있다. 이러한 방식으로, 사용자는 캡처되고 있는 장면에 대해 레코딩되고 있거나 레코딩될 장면의 부분의 표시를 쉽게 결정할 수 있다.

도 5a 는 캡처되고 있는 도 4a 의 장면 (402) 을 프리뷰하는 예시적인 디스플레이 (502) 및 레코딩되고 있거나 레코딩될 부분의 시각적 표시를 나타낸다. 단순성 및 간결성을 위해, 본 개시의 시각적 표시에 의해 표시되는 바와 같이, 레코딩되고 있거나 레코딩될 장면의 부분에 관련된 논의들은 레코딩되고 있는 장면의 부분으로서 언급될 수도 있다. 디스플레이 (502) 는 도 2a 및 도 2b 의 디바이스 (200) 의 디스플레이 (216) 일 수도 있고, 디바이스 (200) 는 시각적 표시 (504) 에 의해 표시된 장면의 부분을 레코딩하고 있으며, 하지만, 임의의 적합한 디바이스 구성이 사용될 수도 있다. 시각적 표시 (504) 가 레코딩되고 있는 장면의 부분을 나타내는 점선 직사각형으로서 예시되지만, 시각적 표시 (504) 는 레코딩되고 있는 장면의 부분을 나타내기 위한 임의의 형태를 취할 수도 있다. 일부 다른 예들에서, 시각적 표시 (504) 는 그 장면의 부분을 프리뷰의 회색 컬러의 영역 또는 다른 대조된 영역으로서 나타낼 수도 있고, 레코딩되고 있는 장면의 부분의 모서리들을 표시할 수도 있으며, 레코딩되고 있는 장면의 부분의 중앙을 식별하는 마커, 레코딩되고 있는 장면의 부분을 나타내는 실선 박스 등을 포함할 수도 있다. 또한, 장면의 부분을 레코딩하는 것은 비디오 뿐만 아니라 하나 이상의 스틸 이미지들을 레코딩하는 것을 포함한다. 이러한 방식으로, 사용자는 레코딩될 다가오는 이미지 또는 비디오에 대한 장면의 부분에 중심이 맞도록 시각적 표시 (504) 를 준비할 수도 있다.

하나의 카메라의 캡처 스트림은 전체 장면을 포함할 수도 있고, 그 스트림의 공간적 부분 (예컨대, 시각적 표시 (504) 에 의해 정의/한정되는 장면의 공간적 부분) 이 레코딩을 위해 (도 2 의 카메라 제어기 (212) 등에 의해) 출력된다. 대안적으로, 제 1 카메라의 스트림은 전체 장면을 포함할 수도 있는 한편, 제 2 카메라의 스트림은 레코딩되고 있거나 레코딩될 장면의 부분을 포함한다. 도 5b 는 디바이스 (200) 의 제 1 카메라 (202) 가 장면 (506) 을 캡처하고 디바이스 (200) 의 제 2 카메라 (204) 가 장면 (506) 의 레코딩되고 있거나 레코딩될 부분 (508) 을 캡처하는 일례를 나타낸다. 이러한 방식으로, 디스플레이 (216) 는 제 1 카메라 (202) 에 의해 캡처되고 있는 장면 (506) 을 프리뷰하고 레코딩을 위해 제 2 카메라 (204) 에 의해 캡처되고 있는 (장면 (506) 의) 부분 (508) 을 포함하는 시각적 표시를 제시 (예컨대, 디스플레이) 할 수도 있다.

추가적인 또는 대안적인 구현들에서, 디바이스는 캡처 스트림들의 어느 일방 또는 양방을 레코딩하도록 구성될 수도 있다. 하나의 예에서, 디바이스는 사옹자가 레코딩될 스트림들 중 하나를 선택하도록 요청하거나 레코딩될 스트림을 자동적으로 선택할 수도 있다. 다른 예에서, 하나의 캡처 스트림이 프리뷰들을 위해 배타적으로 사용될 수도 있다. 디바이스는 사용자에게 프리뷰를 위해 어느 캡처 스트림을 사용할지를 선택하도록 요청할 수도 있거나, 디바이스는 프리뷰를 위해 사용될 캡처 스트림을 자동적으로 선택할 수도 있다. 추가적인 예에서, 디바이스는 양 캡처 스트림들을 자동적으로 레코딩한다. 양 캡처 스트림들을 레코딩하는 경우에, 사용자는 저장을 위해 레코딩들의 일방 또는 양방을 선택하도록 요청될 수도 있다 (선택되지 않은 레코딩들을 폐기).

일부 예시적인 구현들에서, 제 1 카메라 (202) 및 제 2 카메라 (204) 는 디바이스 (200) 의 듀얼 카메라의 부분이다. 일부 듀얼 카메라들에서, 2 개의 카메라들 (202 및 204) 은 해상도, 컬러 팔레트, 줌, 초점 길이, 셔터 속도 등과 같은 유사한 성능들을 갖는다. 대안적으로, 2 개의 카메라들 (202 및 204) 은 상이한 성능들을 가질 수도 있다. 일부 예들에서, 제 1 카메라 (202) 는 컬러 카메라일 수도 있고, 제 2 카메라 (204) 는 낮은 광 설정들에서 보다 양호한 충실도를 가질 수도 있는 흑백 카메라일 수도 있다. 일부 다른 예들에서, 제 1 카메라 (202) 는 높은 해상도의 카메라 (예컨대, 8 메가픽셀, 13 메가픽셀 등) 일 수도 있고, 제 2 카메라 (204) 는 예를 들어 제 1 카메라의 오토-포커스를 보조하기 위해 제 1 카메라 (202) 보다 더 낮은 해상도의 카메라일 수도 있다. 일부 추가적인 예들에서, 제 1 카메라 (202) 는 광각 뷰 카메라일 수도 있고, 제 2 카메라 (204) 는 예를 들어 디바이스로부터 더 멀리 떨어진 오브젝트들을 캡처하기 위해 제 1 카메라 (202) 보다 더 긴 초점 길이를 갖는 더 좁은 시야의 카메라일 수도 있다. 일부 디바이스들은 듀얼 카메라의 사잉한 구성들을 포함할 수도 있고, 다른 디바이스들은 2 개보다 많은 카메라들을 포함할 수도 있다. 본 개시의 구현들은 디바이스의 임의의 카메라 구성 및 타입에 적용된다. 2 개의 카메라 구성을 이용한 제공된 예들은 오직 예시적 목적들을 위해 제공된 것이고, 본 개시는 제공된 예들 중 임의의 것에 제한되거나 그것들에 의해 제한되어서는 아니된다.

도 6 은 시각적 표시를 출력하기 위한 예시적인 동작 (600) 을 나타내는 예시적인 플로우 차트이다. 출력된 시각적 표시는, 디바이스가 레코딩되고 있는 의도된 장면을 포함하는 캡처 스트림들을 수신할 수도 있도록, 사용자가 카메라를 포지셔닝시키는 것을 보조하기 위해, 디스플레이 상에 제시될 수도 있다. 예를 들어, 사용자는 카메라의 시야가 의도된 장면을 포함하도록 하기 위해 카메라를 어떻게 포지셔닝시킬지를 식별하기 위해 시각적 표시를 사용할 수도 있다. 예시적인 동작 (600) 은 2 개의 이미지 스트림들 (예컨대, 디바이스 (200) 의 제 1 카메라 (202) 로부터의 제 1 이미지 스트림 및 제 2 카메라 (204) 로부터의 제 2 이미지 스트림) 에 대해 이하에서 설명된다. 하지만, 양태들은 (하나의 이미지 스트림 또는 3 개 이상의 이미지 스트림들을 포함하는) 임의의 수의 이미지 스트림들에 적용된다.

(예시적인 동작 (600) 을 포함하는) 예시적인 동작들이 디바이스 (200), 카메라 제어기 (212), 또는 이미지 신호 프로세서 (214) 에 관해 설명되지만, 임의의 가능한 컴포넌트 또는 모듈이 동작을 수행할 수도 있다. 예를 들어, 비록 디바이스 (200) 또는 카메라 제어기 (212) 가 동작을 수행하는 것으로서 설명될 수도 있지만, (도 2a 또는 도 2b 에서와 같은) 이미지 신호 프로세서 (214), 프로세서 (206) (도 2a), 카메라 제어기 (212) (도 2a), 또는 다른 모듈 또는 컴포넌트가 동작을 수행할 수도 있다. 추가로, 용어 "출력 (output)" 은 별개의 디바이스에 제공하는 것, 원격 디스플레이에 제공하는 것, 디바이스의 포함된 디스플레이 상에 디스플레이하는 것, 디바이스의 하나의 컴포넌트로부터 디바이스의 다른 컴포넌트로 제공하는 것, 또는, 디바이스의 하나의 컴포넌트로부터 디바이스 외부의 모듈에 제공하는 것을 포함할 수도 있다. 본 개시는 예시적인 동작들에서 설명된 바와 같은 동작들을 수행하는 특정 컴포넌트들 또는 모듈들에 제한되어서는 아니된다.

602 에서 시작하여, 디바이스 (200) 는 장면의 전체와 연관된 제 1 이미지 스트림을 프로세싱할 수도 있다. 하나의 예에서, 제 1 카메라 (202) 는 장면 (506) (도 5b) 을 캡처하고, 제 1 이미지 스트림을 디바이스 (200) 의 카메라 제어기 (212) 에 제공할 수도 있고, 그 카메라 제어기 (212) 는 들어오는 제 1 이미지 스트림을 프로세싱한다. 다른 예에서, 디바이스 (200) 의 카메라 제어기 (212) 는 다른 디바이스로부터 수신된 또는 (메모리 (208) 와 같은) 메모리에 저장된 이미지 스트림을 프로세싱한다. 일부 예시적인 구현들에서, 이미지 신호 프로세서 (214) 는 제 1 이미지 스트림을 프로세싱할 수도 있다. 예를 들어, 이미지 신호 프로세서 (300) (도 3) 는 제 1 이미지 스트림에 필터들 (302A-302N) 을 적용할 수도 있다. 추가적으로 또는 대안적으로, 이미지 신호 프로세서 (300) 는 크로핑 (cropping), 주밍 (zooming), 디-인터레이싱 (de-interlacing) 등과 같은 제 1 이미지 스트림에 대해 다른 기능들을 수행할 수도 있다.

디바이스 (200) 의 카메라 제어기 (212) 는 또한, 제 2 이미지 스트림에서의 장면의 공간적 부분 (예컨대, 전체보다 적거나 동일한 부분) 과 연관된 제 2 이미지 스트림을 독립적으로 프로세싱할 수도 있다 (604). 하나의 예에서, 제 2 카메라 (204) 는 장면 (506) (도 5b) 의 공간적 부분 (508) 을 캡처하고, 결과적인 제 2 이미지 스트림을 카메라 제어기 (212) 에 제공할 수도 있고, 그 카메라 제어기 (212) 는 들어오는 제 2 이미지 스트림을 프로세싱한다. 다른 예들에서, 제 2 이미지 스트림은 다른 디바이스들에 의해서 또는 (메모리 (208) 와 같은) 메모리로부터 제공될 수도 있다. 제 1 이미지 스트림에 필터들 (302A-302N) 을 적용하는 이미지 신호 프로세서 (300) 의 이전 예를 참조하여, 이미지 신호 프로세서 (300) 는 제 2 이미지 스트림에 필터들 (304A-304N) 을 적용할 수도 있고, 크로핑, 주밍, 디-인터레이싱 등과 같은 다른 기능들을 또한 또는 대안적으로 수행할 수도 있다.

제 2 이미지 스트림을 프로세싱하기 위한 일부 예시적인 구현들에서, 디바이스 (200) (예컨대, 카메라 제어기 (212) 또는 이미지 신호 프로세서 (214)) 는 제 1 이미지 스트림의 장면 (506) 에서의 시각적 표시의 사이즈 (size) 및 로케이션 (location) 을 결정할 수도 있다 (606). 예를 들어, 디바이스 (200) 는 시각적 표시를 프로세싱된 제 1 이미지 스트림 내로 매립하고, 프로세싱된 제 1 이미지 스트림 상에 레이어를 형성하며, 프로세싱된 제 1 이미지 스트림을 증강시키는 등을 할 수도 있어서, 캡처된 장면 (506) 및 시각적 표시가 (예컨대 디스플레이 (216) 상에) 동시에 디스플레이될 수도 있도록 한다.

본 개시는 제 1 카메라 (202) 보다 더 작은 시야를 갖는 제 2 카메라 (204) 에 제한되어서는 아니됨에 유의하여야 한다. 예를 들어, 카메라들은 상이한 줌 레벨들에 있을 수도 있어서, 다른 카메라보다 더 큰 시야를 갖는 카메라는 다른 카메라보다 장면의 더 작은 부분을 캡처하게 된다. 추가적으로, 이전에 언급된 바와 같이, 이미지 신호 프로세서 (214) 는 임의의 수의 프로세서들, 스레드들, 및/또는 코어들일 수도 있다. 일부 예시적인 구현들에서, 이미지 신호 프로세서 (214) 및 프로세서 (206) 는 시스템 온 칩 (SoC) 의 부분일 수도 있다. 이와 같이, 본 개시의 다양한 양태들은 임의의 특정 하드웨어에 한정되지 아니함에 유의하여야 한다.

608 로 진행하여, 디바이스 (200) 는 프리뷰를 위해 프로세싱된 제 1 이미지 스트림을 출력할 수도 있다. 일부 예시적인 구현들에서, 카메라 제어기 (212) 는 프로세싱된 제 1 이미지 스트림을 생성할 수도 있다. 프로세싱된 제 1 이미지 스트림을 생성 시에, 디바이스 (200) 는 디스플레이 (216) 상에 장면 (506) 을 프리뷰할 수도 있다 (610). 예를 들어, 디바이스 (200) 는 프로세싱된 제 1 이미지 스트림을 디스플레이 (216) 에 출력할 수도 있고, 디스플레이 (216) 는 그 프로세싱된 제 1 이미지 스트림을 디스플레이함으로써 장면 (506) 을 프리뷰한다. (카메라 제어기 (212) 등에 의해) 프로세싱된 제 1 이미지 스트림을 생성하고 출력하는 동안 또는 그 후에, 제 2 이미지 스트림과 연관된 장면의 공간적 부분의 시각적 표시가 또한 출력될 수도 있다 (612). 디스플레이 (216) 는 선택적으로, 프리뷰되고 있는 장면 (506) 상에 시각적 표시를 디스플레이할 수도 있다 (614). 예를 들어, 프로세싱된 제 1 이미지 스트림은 시각적 표시를 포함하거나 그렇지 않으면 시각적 표시에 링크될 수도 있어서, 카메라 제어기 (212) 는 프로세싱된 제 1 이미지 스트림에서 레코딩될 장면의 부분과 시각적 표시를 연관시킬 수 있게 된다.

예시적인 동작 (600) 은 이미지 스트림들을 순차적으로 프로세싱하고 프로세싱된 제 1 이미지 스트림 및 시각적 표시를 순차적으로 생성하는 것을 나타내지만, 상이한 이미지 스트림들을 프로세싱하는 것은 동시에 수행될 수도 있고, 프로세싱된 이미지 스트림 및 시각적 표시를 출력하거나 생성하는 것은 또한 동시에 수행될 수도 있다. 프로세싱된 제 1 이미지 스트림을 출력하는 동안 프로세싱된 제 2 이미지 스트림이 출력될 수도 있다. 예를 들어, 카메라 제어기 (212) 는 레코딩되고 있는 장면의 부분과연관된 프로세싱된 제 2 이미지 스트림의 적어도 부분을 생성할 수도 있다. 프로세싱된 이미지 스트림은 (메모리 (208) 와 같은) 디바이스의 메모리에 저장될 수도 있거나 다른 디바이스 또는 메모리에 출력될 수도 있다. 디스플레이 (216) 가 프로세싱된 제 1 이미지 스트림 및 시각적 표시를 프리뷰하는 경우에, 시각적 표시는 제 2 이미지 스트림의 적어도 부분에서 레코딩되고 있는 프로세싱된 제 1 이미지 스트림에서 캡처된 장면의 부분을 나타낸다.

예시적인 동작 (600) (및 본 개시에서의 다른 예시적인 동작들) 은 레코딩을 위한 프로세싱된 제 2 이미지 스트림을 이용하여 설명되지만, 프로세싱된 제 2 이미지 스트림의 오직 부분만이 레코딩을 위해 사용될 수 있을 것이다. 예를 들어, 디지털 줌이 제 2 카메라 (204) 에 대해 사용될 수도 있어서, 제 2 카메라 (204) 에 의해 캡처된 전체 장면이 레코딩되지는 않는다. 이미지 스트림은 이미지 스트림의 하나 이상의 시간적 또는 공간적 부분들 또는 그것의 전체에서의 스트림을 지칭할 수도 있고, 본 개시는 이미지 스트림의 특정 구현에 제한되어서는 아니됨에 유의하여야 한다.

장면의 프리뷰 상에 보여지는 시각적 표시로, 사용자는 레코딩되고 있거나 레코딩될 스트림 (또는 스트림의 부분) 에서의 관심대상의 오브젝트를 로케이팅시키기 위해 카메라들 또는 디바이스를 어떻게 이동시킬지를 더 잘 이해할 수도 있다. 시각적 표시를 갖는 장면의 프리뷰는 "줌 보조 (zoom assist)" 프리뷰로 불릴 수도 있다. 일부 예시적인 구현들에서, 사용자는: (1) 프리뷰가 레코딩되고 있는 장면의 부분의 표시 및 캡처되고 있는 전체 장면의 프리뷰 양자를 나타낼 수도 있는 줌 보조 프리뷰; (2) 프리뷰가 오직 레코딩되고 있는 것만을 나타낼 수도 있는 종래의 프리뷰; (3) 줌 보조 프리뷰와 종래의 프리뷰의 조합이 묘사되는 동시 뷰 (예컨대, 줌 보조 프리뷰 및 종래의 프리뷰의 사이드-바이-사이드 (side-by-side; SBS) 뷰, 픽처 인 픽처 (picture in picture; PiP) 뷰, 윈도우잉된 뷰 등); (4) 프리뷰가 종래의 프리뷰와는 장면의 상이한 부분을 나타낼 수도 있는 대안적 프리뷰; (5) 프리뷰가 종래의 프리뷰와는 상이한 줌 레벨 (예컨대, 상이한 디지털 줌 레벨) 에서 장면의 부분을 나타낼 수도 있는 상이한 줌 레벨 프리뷰; 또는 (6) 상기 프리뷰들 중 2 개 이상의 조합이 묘사되는 동시 뷰; 중 2 개 이상 사이에서 스위칭하기를 희망할 수도 있다.

도 7 은 레코딩되고 있거나 레코딩될 장면의 부분의 프리뷰 (704) 와 줌 보조 프리뷰 (702) 사이의 디스플레이 (216) 의 예시적인 스위칭 동작 (706) 을 나타낸다. 일부 예시적인 구현들에서, 디바이스 (200) 는 프리뷰들 (702 및 704) 사이에 언제 스위칭할지를 결정하기 위한 버튼, 메뉴, 제스처, 또는 다른 사용자 기반 커맨드를 허용할 수도 있다. 일부 구현들에서, 그 커맨드는 줌 보조 프리뷰 기능성의 활성화와 비활성화 사이에 토글링한다. 일부 다른 구현들에서, 커맨드는 하나 이상의 다른 프리뷰들이 여전히 생성되지만 디스플레이되거나 디스플레이를 위해 출력되지 않는 동안 프리뷰를 변경한다.

하나의 예에서, 디스플레이 (216) 는 사용자로 하여금 프리뷰들 (702 및 704) 사이에 스위칭하도록 허용하기 위해 줌 보조 버튼 (708) 을 제시할 수도 있고, 프리뷰 (702) 는 레코딩되고 있거나 레코딩될 장면의 부분을 나타내는 시각적 표시 (710) 를 포함한다. 다른 예들에서, 사용자는 프리뷰들 (702 및 704) 사이에 스위칭하기 위해 스와이프 제스처 (swipe gesture) 를 사용하거나, 디바이스 (200) 를 흔들거나, 가청, 가시 또는 다른 터치 커맨드들을 제공할 수도 있다.

추가적으로 또는 대안적으로, 프리뷰들 (702 및 704) 사이에 스위칭하기 위한 결정은 하나 이상의 기준들에 기초하여 디바이스 (200) 에 의해 자동적으로 (예컨대, "온-더- 플라이 (on-the-fly)") 결정될 수도 있다. 예를 들어, 디바이스 (200) 로 하여금 프리뷰 (704) 로부터 프리뷰 (702) 로 스위칭하게 하기 위한 하나 이상의 기준들은 카메라 이동, 오브젝트가 캡처되고 있는 장면의 부분 내로 이동하는 것, 관심대상의 오브젝트의 모션 (예컨대, 관심대상 오브젝트가 레코딩을 위해 디바이스 (200) 에 의해 자동적으로 추적될 수도 있다) 등을 포함할 수도 있고, 이는 디바이스 (200) 로 하여금 제 1 카메라 (202) 및/또는 제 2 카메라 (204) 를 포지셔닝함에 있어서 사용자를 보조하기 위해 줌 보조 프리뷰 (702) 를 제시하게 할 수도 있다. 마찬가지로, 디바이스 (200) 로 하여금 프리뷰 (702) 로부터 프리뷰 (704) 로 스위칭하게 하기 위한 하나 이상의 기준들은, 예를 들어, 다양한 연관된 임계 레벨들에 대한 추적되고 있는 (예컨대, 사용자 선택 또는 미리결정된 기준들에 기초하여 추적되는) 관심대상의 오브젝트의 결정된 양의 모션, 결정된 심도, 및/또는 결정된 사이즈의 평가 (또는 분석) 을 포함할 수도 있다.

도 8 은 (제 1 카메라 (202) 에 의해 캡처되고 있는 제 1 이미지 스트림에서의 장면과 같이) 캡처되고 있는 장면과 (제 2 카메라 (204) 에 의해 캡처되는 제 2 이미지 스트림의 적어도 부분과 같이) 레코딩되고 있거나 레코딩될 장면의 부분 사이의 스위칭을 위한 예시적인 동작 (800) 을 나타내는 예시적인 플로우 차트이다. 예를 들어, (단독으로 또는 프로세서 (206) 와 같이 다른 컴포넌트들과 협력하여 동작하는) 카메라 제어기 (212) 는 프로세싱된 제 1 이미지 스트림 (및 시각적 표시) 과 프로세싱된 제 2 이미지 스트림을 (프리뷰 등을 위해) 출력하는 것 사이에 스위칭할지 여부를 결정할 수도 있다. 출력 이미지 스트림은 디스플레이 (216) 에 의해 프리뷰되는 이미지 스트림일 수도 있다.

일부 예시적인 구현들에서, 카메라 제어기 (212) 는 (제 1 이미지 스트림 및 제 2 이미지 스트림 양자와 같이) 하나보다 많은 이미지 스트림을 레코딩을 위해 생성하고 출력할 수도 있다. 하나의 예에서, 카메라 제어기 (212) 는 동시에 프리뷰되고 있지 않은 프로세싱된 이미지 스트림을 레코딩을 위해 생성하고 출력할 수도 있다. 사용자는, 각 이미지 스트림을 리뷰하고 유지되거나 삭제될 리뷰되고 있는 이미지 스트림을 선택할 수 있는 등에 의해, 어느 레코딩된 이미지 스트림을 유지할지를 선택하는 옵션 (option) 을 제시받을 수도 있다. 예시적인 동작 (800) 은 캡처되고 있는 이미지 스트림과 레코딩되고 있는 이미지 스트림 사이의 스위칭을 나타내지만, 양 이미지 스트림들이 레코딩될 수도 있고, 본 개시는 하나의 이미지 스트림을 레코딩하는 것 또는 제공된 특정 예들에서 나타낸 바와 같은 레코딩에 제한되지 않아야 한다.

802 에서 시작하여, 프로세싱된 제 1 이미지 스트림이 프리뷰를 위해 생성될 수도 있다. 예를 들어, 카메라 제어기 (212) 는 (이미지 신호 프로세서 (214) 를 이용하는 등에 의해) 프로세싱된 제 1 이미지 스트림을 생성할 수도 있다. 디스플레이 (216) 는 선택적으로, 예를 들어, 프로세싱된 제 1 이미지 스트림 및 시각적 표시를 제시함으로써, 줌 보조 프리뷰를 디스플레이할 수도 있다 (804). 도 7 을 다시 참조하면, 디스플레이 (216) 는 시각적 표시 (710) 와 함께 줌 보조 프리뷰 (702) 를 디스플레이할 수도 있다. 디바이스 (200) 는 그 다음, 디바이스 (200) 가 프로세싱된 제 1 이미지 스트림을 출력하는 것으로부터 프로세싱된 제 2 이미지 스트림을 출력하는 것으로 스위칭하려는 경우에, 하나 이상의 기준들 (예컨대, 사용자가 줌 보조 버튼을 태핑 (tapping) 하는 것, 스크린을 스와이핑 (swiping) 하는 것, 장면에서의 이동, 카메라 이동 등) 로부터 결정할 수도 있다 (806). 예를 들어, 도 7 의 예에서 나타낸 바와 같이 디스플레이 (216) 가 줌 보조 프리뷰 (702) 로부터 레코딩되고 있는 장면 부분의 프리뷰 (704) 로 스위칭하여야 하는지를 디바이스 (200) 가 결정한다. 디바이스 (200) 가 스위칭하지 않는 경우에, 디바이스 (200) 는 프로세싱된 제 1 이미지 스트림을 계속 출력한다 (802). 예를 들어, 디스플레이 (216) 는 시각적 표시 (710) 와 함께 줌 보조 프리뷰 (702) 를 계속 제시한다 (804).

디바이스 (200) 가 프로세싱된 제 1 이미지 스트림을 출력하는 것으로부터 스위칭하려는 경우에, 디바이스 (200) 는 프리뷰를 위해 프로세싱된 제 2 이미지 스트림을 출력하는 것으로 스위칭한다 (808). 하나의 예에서, 카메라 제어기 (212) 는 프로세싱된 제 2 이미지 스트림을 생성하는 것으로 스위칭할 수도 있다. 다른 예에서, 카메라 제어기 (212) 는 양 프로세싱된 이미지 스트림들을 생성하고, 디바이스 (200) 는 디스플레이 (216) 에 줌 보조 프리뷰 (702) 를 출력하는 것으로부터 프로세싱된 제 2 이미지 스트림의 프리뷰 (704) 를 출력하는 것으로 스위칭하도록 결정한다. 이러한 방식으로, 디스플레이 (216) 는 선택적으로, 예를 들어, 사용자에게 레코딩되고 있거나 레코딩될 것을 프리뷰함으로써, 프로세싱된 제 2 이미지 스트림을 제시할 수도 있다 (810).

(카메라 제어기 (212) 와 같은) 디바이스 (200) 는 그 다음, 디바이스 (200) 가 프로세싱된 제 2 이미지 스트림을 출력하는 것으로부터 프로세싱된 제 1 이미지 스트림으로 스위칭하려는 경우에, 하나 이상의 기준들로부터 결정할 수도 있다 (예컨대, 하나 이상의 기준들에서의 변경 또는 추가적인 사용자 요청 또는 입력) (812). 예를 들어, 디바이스 (200) 는, 디스플레이 (216) 가 도 7 에서 레코딩되고 있는 장면 부분 (704) 을 제시하는 것으로부터 줌 보조 프리뷰 (702) 로 스위칭하여야 하는지를 결정한다. 아무런 스위칭도 발생하지 않아야 하는 경우에는, 디바이스 (200) 는 프로세싱된 제 2 이미지 스트림을 계속 출력한다 (808). 예를 들어, 디스플레이 (216) 는 레코딩되고 있는 장면 부분 (704) 을 계속 제시한다 (808). 스위칭이 발생하여야 하는 경우에 (812), 디바이스 (200) 는, 예를 들어, 줌 보조 프리뷰가 디스플레이 (216) 상에 제시될 수도 있도록, 프로세싱된 제 1 이미지 스트림을 출력하는 것으로 스위칭한다. 하나의 예에서, 양 프로세싱된 이미지 스트림들이 카메라 제어기 (212) 또는 이미지 신호 프로세서 (214) 에 의해 생성되는 경우에, 디바이스 (200) 는 생성된 이미지 스트림들을 출력하는 것 사이에 스위칭할 수도 있다. 다른 예에서, 카메라 제어기 (212) 는 하나의 프로세싱된 이미지 스트림을 출력하고 출력될 프로세싱된 이미지 스트림들로 스위칭할 수도 있다.

일부 예시적인 구현들에서, 디스플레이 (216) 는 줌 보조 프리뷰 및 레코딩되고 있거나 레코딩될 장면의 부분을 동시에 디스플레이할 수도 있다. 도 9a 는 (시각적 표시 (908) 를 갖는) 줌 보조 프리뷰 (904) 및 레코딩되고 있는 장면의 부분 (906) 을 포함하는, 동시적 프리뷰 (902) 를 제시하는 예시적인 디스플레이를 나타낸다. 디스플레이 (216) 의 하나의 구현일 수도 있는 디스플레이 (902) 는 추가적으로, 프리뷰들 사이에 (예컨대, 프리뷰들 (904 및 906) 의 동시적 디스플레이와 레코딩되고 있거나 레코딩될 것의 프리뷰 (906) 사이에) 스위칭하기 위한 버튼 (910) 을 포함할 수도 있다. 프리뷰들 (904 및 906) 을 포함하는 동시적 프리뷰 (902) 는 나란히 도시되지만, 프리뷰들 (904 및 906) 은 픽처 속의 픽처, 별개의 윈도우들 등과 같이 임의의 방식으로 동시에 제시될 수도 있다. 추가적으로, 프리뷰 (906) 는 레터박스 방식으로 도시되고, 줌 보조 프리뷰 (904) 의 오직 부분만이 도시되며, 프리뷰들의 각각은 디스플레이의 절반 상에 디스플레이되지만, 각각의 프리뷰 (904 및 906) 의 전부 또는 임의의 부분이 디스플레이의 임의의 양에 보여질 수도 있다. 예를 들어, 디스플레이 (216) 는 레터박스 방식으로 양 프리뷰들 (904 및 906) 을 디스플레이할 수도 있고, 프리뷰들 (904 및 906) 의 각각의 부분만을 디스플레이하고 사용자로 하여금 프리뷰들 (904 및 906) 이 어떻게 동시에 디스플레이될지를 결정하도록 허용하거나 사용자로 하여금 디스플레이 (902) 중 얼마나 많은 것이 프리뷰들 (904 및 906) 의 각각에 대해 사용될지를 변경하도록 허용할 수도 있다. 따라서, 본 개시는 제공된 예시적인 디스플레이들 또는 프리뷰들의 임의의 것에 제한되어서는 아니됨에 유의하여야 한다.

사용자는 줌 보조 프리뷰와 프리뷰들의 동시적 디스플레이 ("동시적 프리뷰 (concurrent preview)") 사이에 스위칭하기를 희망할 수도 있다 (또는 디바이스 (200) 는 프로세싱된 이미지 스트림들의 출력들을 스위칭함으로써) 자동으로 스위칭할 수도 있다). 도 9b 는 동시적 프리뷰 (902) 와 줌 보조 프리뷰 (904) 사이의 디스플레이 스위칭의 예시적인 동작 (912) 을 나타낸다. 하나의 예에서, 사용자는 프리뷰들 (902 및 904) 사이에 스위칭하기 위해서 줌 보조 (zoom assist; ZA) 버튼을 누를 수도 있다. 디바이스 (200) 는 추가적으로 또는 대안적으로, 디스플레이가 하나 이상의 기준들 (예컨대, 카메라 이동, 오브젝트 이동 등) 에 기초하여 프리뷰들 (902 및 904) 을 제시하는 것 사이에서 스위칭하도록, 디스플레이 (216) 에 대한 출력들을 스위칭할 수도 있다.

추가적으로 또는 대안적으로, 디스플레이는 동시적 프리뷰 (902), 줌 보조 프리뷰 (904), 및 레코딩되고 있거나 레코딩될 프리뷰 (906) 사이에 스위칭할 수도 있다. 예를 들어, 디바이스 (200) 는 프리뷰들의 각각에 대해 프로세싱된 이미지 스트림들을 출력하는 것 사이에서 스위칭할 수도 있다. 도 9c 는 스위칭 동작들 (914A-914C) 에 의해 나타낸 바와 같이, 줌 보조 프리뷰 (904), 레코딩되고 있거나 레코딩될 장면의 부분 (906), 및/또는 동시적 프리뷰 (902) 사이의 디스플레이 스위칭의 예를 나타낸다. 하나의 예에서, 사용자는 프리뷰들을 사이를 순환시키기 위해서 ZA 버튼을 누를 수도 있다. 다른 예에서, 디스플레이는, 사용자가 직접 의도된 프리뷰를 스위칭할 수도 있도록, 다수의 버튼들 (예컨대, 소프트 버튼들 및/또는 물리적 버튼들) 을 포함할 수도 있다. 추가적인 예에서, 사용자는 하나의 프리뷰를 위해 좌측으로 스와이핑하고 다른 프리뷰를 위해 우측으로 스와이핑 (또는 상, 하, 대각선과 같이 임의의 다른 방향으로 스와이핑) 할 수도 있다. 디바이스가 프리뷰들을 스위칭하도록 결정하기 위해 다른 기준들이 추가적으로 또는 대안적으로 사용될 수도 있다 (예컨대, 카메라 이동, 오브젝트 이동 등).

도 10 은 레코딩되고 있는 장면의 프리뷰와 동시 프리뷰 사이의 스위칭을 위한 예시적인 동작 (1000) 을 나타내는 예시적인 플로우 차트이다. 예를 들어, 카메라 제어기 (212) (또는 디바이스 (200)) 는, 프리뷰를 위해 (디스플레이 (216) 상에 동시적 프리뷰를 디스플레이하는 등을 위해) 프로세싱된 제 1 이미지 스트림 (및 시각적 표시) 및 프로세싱된 제 2 이미지 스트림을 동시에 출력하는 것으로부터, 프리뷰를 위해 (레코딩되고 있는 것을 디스플레이 (216) 상에 디스플레이하는 등을 위해) 프로세싱된 제 2 이미지 스트림만을 출력하는 것으로 스위칭할 수도 있다. 일부 대안적인 구현들에서, 카메라 제어기 (212) (또는 디바이스 (200)) 는 동시적 프리뷰와 레코딩되고 있거나 레코딩될 프리뷰 사이에 스위칭하는 동안 프리뷰를 위해 프로세싱된 제 1 이미지 스트림 및 프로세싱된 제 2 이미지 스트림을 동시에 출력할 수도 있다. 도 10 의 예시적인 동작 (1000) 은 도 9b 와 관련하여 논의되지만, 도 10 의 예시적인 동작 (1000) 에서의 유사한 프로세스들 또는 단계들은 도 9c 또는 다른 예시적인 구현들에서 예시된 프리뷰들 사이에 스위칭하기 위해 이용될 수도 있다.

1002 에서 시작하여, 디바이스 (200) 는 디스플레이 (216) 상에 동시적 프리뷰를 위해 프로세싱된 제 1 이미지 스트림 및 프로세싱된 제 2 이미지 스트림 을 동시에 출력할 수도 있다. 예를 들어, 카메라 제어기 (212) 는 (이미지 신호 프로세서 (214) 를 이용하는 등에 의해) 프로세싱된 제 1 이미지 스트림 및 프로세싱된 제 2 이미지 스트림을 동시에 출력할 수도 있다. 디스플레이 (216) 는 줌 보조 프리뷰 및 레코딩되고 있거나 레코딩될 것의 프리뷰를 포함하는 동시적 프리뷰 (902) 를 디스플레이할 수도 있다 (1004). 디바이스 (200) 는 그 다음, 디바이스 (200) (또는 카메라 제어기 (212)) 가 프로세싱된 제 1 및 제 2 이미지 스트림들을 동시에 출력하는 것으로부터 프로세싱된 제 2 이미지 스트림만을 프리뷰를 위해 출력하는 것으로 스위칭하려는 경우에, 하나 이상의 기준들 (예컨대, 사용자가 줌 보조 버튼을 태핑하거나 스크린을 스와이핑하는 것에 의해 디스플레이 (216) 로부터 사용자 커맨드를 수신하는 것, 장면에서의 이동 또는 카메라 이동을 결정하는 것 등) 로부터 결정할 수도 있다 (1006). 예를 들어, 디바이스 (200) 는 디스플레이 (216) 가 동시적 프리뷰 (902) 로부터 레코딩되고 있는 것의 프리뷰 (904) 로 스위칭 (913) 하여야만 하는지를 결정한다. 아무런 스위칭도 발생하지 않아야 하는 경우에, 디바이스 (200) 는 프로세싱된 제 1 및 제 2 이미지 스트림들을 동시에 계속 출력한다 (1002). 예를 들어, 디스플레이 (216) 는 동시적 프리뷰 (902) 를 제시하는 것을 계속한다 (1004).

스위칭이 발생하여야 하는 경우에 (1006), 디바이스 (200) 는 프로세싱된 제 2 이미지 스트림을 출력하는 것으로 스위칭한다 (1008). 하나의 예에서, 카메라 제어기 (212) 는 (이미지 신호 프로세서 (214) 를 이용하는 등에 의해) 프로세싱된 제 2 이미지 스트림을 출력하는 것으로 스위칭할 수도 수도 있다. 다른 예에서, 카메라 제어기 (212) 는 프리뷰를 위해 양 프로세싱된 이미지 스트림들을 출력하고, 디바이스 (200) 는 동시적 프리뷰를 제시하기 위해 디스플레이 (216) 에 대해 프로세싱된 제 1 이미지 스트림을 출력하는 것으로부터 제시하기 위해 디스플레이 (216) 에 대해 프로세싱된 제 2 이미지 스트림을 출력하는 것으로 스위칭할 것을 결정한다. 이러한 방식으로, 디스플레이 (216) 는 선택적으로, 레코딩되고 있거나 레코딩될 것을 프리뷰하는, 프로세싱된 제 2 이미지 스트림을 디스플레이할 수도 있다 (1010).

디바이스 (200) 는 그 다음, 프리뷰를 위해 프로세싱된 제 2 이미지 스트림을 출력하는 것으로부터 프리뷰를 위해 프로세싱된 제 1 및 제 2 이미지 스트림들을 출력하는 것으로 스위칭할지를 하나 이상의 기준들 (예컨대, 하나 이상의 기준들에서의 변화 또는 추가적인 사용자 요청 또는 입력) 로부터 결정할 수도 있다 (1012). 예를 들어, 디바이스 (200) 는, 레코딩되고 있는 장면 부분을 나타내는 프리뷰 (904) 로부터 도 9a 에서의 동시적 프리뷰 (902) 로 프리뷰들을 제시하는 것으로부터 스위칭 (913) 하여야만 하는지를 결정한다. 아무런 스위칭도 발생하지 않아야 하는 경우에, 디바이스 (200) 는 프로세싱된 제 2 이미지 스트림을 계속 출력한다 (1008). 예를 들어, 디스플레이 (216) 는 레코딩되고 있거나 레코딩될 장면 부분을 나타내는 프리뷰 (904) 를 계속 제시한다 (1010). 스위칭이 발행하여야 하는 경우에 (1012), 디바이스 (200) 는 프로세싱된 제 1 및 제 2 이미지 스트림들을 동시에 스위칭도 출력하는 것으로 스위칭한다 (1002). 이러한 방식으로, 동시적 프리뷰 (902) 는 디스플레이 (216) 에 의해 제시될 수도 있다. 일부 대안적인 구현들에서, 디바이스 (200) 는 (카메라 제어기 (212) 를 사용하는 등에 의해) 프로세싱된 제 1 및 제 2 이미지 스트림들 양자를 동시에 출력할 수도 있고, 디스플레이 (216) 는 레코딩되고 있는 프리뷰를 제시하는 것으로부터 동시적 프리뷰를 제시하는 것으로 스위칭한다.

일부 예시적인 구현들에서, 디스플레이 (216) 는 사용자로 하여금 제시된 프리뷰와 상호작용하도록 허용할 수도 있다 (예컨대, 사용자가 디스플레이 (216) 상에 보여지는 시각적 표시를 리사이징 및/또는 이동). 일부 예들에서, 디스플레이 (216) 가 터치-감지 디스플레이인 경우에, 디바이스 (200) 는 사용자가 시각적 표시의 사이즈를 감소시키기 위해 오므리는 제스처를 및/또는 시각적 표시의 사이즈를 증가시키기 위해서 넓히는 제스처를 제공하였다는 표시를 디스플레이 (216) 로부터 수신할 수도 있다. 추가적으로 또는 대안적으로, 사용자는 시각적 표시의 로케이션을 이동시키기 위해서 드래그 제스처를 제공할 수도 있다. 일부 다른 예들에서, 사용자는 디스플레이 (216) 또는 디바이스 (200) 또는 가청 커맨드들을 수신하는 마이크로폰의 물리적 버튼들 (예컨대, 방향성 버튼들, 줌 또는 스크롤 휠 등) 을 통해 커맨드들을 제공할 수도 있다. 일부 다른 예들에서, 디바이스 (200) 는 포스 커맨드들을 수신하는 자이로스코프 및/또는 가속도계를 포함하거나 그것들에 커플링될 수도 있다.

도 11a 는 줌 보조 프리뷰를 제공하는 예시적인 디스플레이 (1102) 를 나타내고, 여기서, 제 1 시각적 표시 (1104) 는 레코딩되고 있거나 레코딩될 장면의 부분의 더 많은 것을 나타내기 위해서 제 2 시각적 표시 (1106) 로 리사이징된다. 예시적인 디스플레이 (1102) 는 디바이스 (200) 의 디스플레이 (216) 의 하나의 구현이거나 디바이스 (200) 에 커플링될 수도 있다. 장면 부분 (1108) 은 제 1 시각적 표시 (1104) 에 대응하고, 장면 부분 (1110) 은 제 2 시각적 표시 (1106) 에 대응한다. 일부 예들에서, 사용자는 제 1 시각적 표시 (1104) 로부터 제 2 시각적 표시 (1106) 로 스위칭하기 위해 디스플레이 (216) 를 통해 제 1 시각적 표시 (1104) 에 대해 넓히는 제스처를 제공하고, 따라서, 장면 부분 (1108) 으로부터 레코딩되고 있거나 레코딩될 장면 부분 (1110) 으로 스위칭한다.

도 11b 는 줌 보조 프리뷰를 제공하는 예시적인 디스플레이 (1112) 를 나타내고, 여기서, 제 1 시각적 표시 (1114) 는 레코딩되고 있거나 레코딩될 장면의 상이한 부분을 나타내기 위해서 제 2 시각적 표시 (1116) 로 이동된다. 예시적인 디스플레이 (1112) 는 디바이스 (200) 의 디스플레이 (216) 의 하나의 구현이거나 디바이스 (200) 에 커플링될 수도 있다. 장면 부분 (1118) 은 제 1 시각적 표시 (1114) 에 대응하고, 장면 부분 (1120) 은 제 2 시각적 표시 (1116) 에 대응한다. 일부 예들에서, 사용자는 제 1 시각적 표시 (1114) 로부터 제 2 시각적 표시 (1116) 로 스위칭 (예컨대, 시각적 표시를 이동) 하기 위해 디스플레이 (216) 를 통해 제 1 시각적 표시 (1114) 에 대해 드래그 제스처를 제공하고, 따라서, 장면 부분으로부터 레코딩되고 있거나 레코딩될 장면 부분 (1110) 으로 스위칭한다.

도 12 는 시각적 표시를 조정하기 위해 사용자 입력에 기초하여 레코딩되고 있거나 레코딩될 장면의 부분을 조정하기 위한 예시적인 동작 (1200) 을 나타내는 예시적인 플로우 차트이다. 도 12 의 예시적인 동작 (1200) 은 도 11a 및 도 11b 와 관련하여 논의되지만, 도 12 의 예시적인 동작 (1200) 에서의 유사한 프로세스들 또는 단계들은 다른 예시적인 구현들에 대해 레코딩될 것이거나 레코딩되고 있는 것을 리사이징하기 위해 사용될 수도 있다. 예를 들어, 줌 보조 프리뷰가 설명되지만, 시각적 표시를 조정하는 것은 동시적 프리뷰 또는 다른 프리뷰들에서 발생할 수도 있다.

1202 에서 시작하여, 디스플레이 (216) 는 레코딩되고 있거나 레코딩될 장면의 부분의 시각적 표시를 포함하는 줌 보조 프리뷰 (또는 대안적으로, 동시적 프리뷰) 를 디스플레이할 수도 있다. 디스플레이 (216) 가 줌 보조 프리뷰를 제시하는 동안, 디바이스 (200) 는, 디스플레이와의 사용자 상호작용으로부터 사용자 커맨드들을 제공하는 디스플레이 (216) 등으로부터, 시각적 표시를 조정하기 위한 사용자 입력 또는 요청을 수신할 수도 있다 (1204). 예를 들어, 디바이스 (200) 는 선택적으로, 도 11a 에서의 시각적 표시 (1104) 의 사이즈를 조정하기 위해 사용자 커맨드를 수신할 수도 있다 (1206). 추가적으로 또는 대안적으로, 디바이스 (200) 는 선택적으로, 시각적 표시의 로케이션을 이동시키기 위해 사용자 커맨드를 수신할 수도 있다 (1208). (예컨대 디스플레이 (216) 와의 상호작용을 통해) 시각적 표시가 조정되도록 요청함으로써, 사용자는, 디바이스 (200) 가 줌 보조 프리뷰에서 시각적 표시에 의해 동시에 표시되는 것과는 장면의 상이한 부분을 레코딩하여야 함을 나타낸다.

사용자 커맨드에 응답하여, 디바이스 (200) 는 제 2 이미지 스트림을 프로세싱하는 것을 조정할 수도 있다 (1210). 제 2 이미지 스트림의 프로세싱을 조정 (1210) 함에 있어서, 디바이스 (200) 는 선택적으로, 제 2 이미지 스트림에서 레코딩되고 있거나 레코딩될 장면의 부분의 사이즈를 조정할 수도 있다 (1212). 예를 들어, 장면 부분 (1108) (도 11a) 이 레코딩을 위해 출력될 때, 디바이스 (200) 는 사용자가 제 1 시각적 표시 (1104) 로부터 제 2 시각적 표시 (1106) 로 변경하는 경우에 장면 부분 (1110) 이 레코딩을 위해 출력되도록, 제 2 이미지 스트림을 프로세싱하는 것을 조정한다. 추가적으로 또는 대안적으로, 디바이스 (200) 는 선택적으로, 레코딩되고 있거나 레코딩될 장면의 부분의 공간적 로케이션을 변경할 수도 있다 (1214). 예를 들어, 장면 부분 (1118) (도 11b) 이 레코딩을 위해 출력되는 경우에, 디바이스 (200) 는 사용자가 시각적 표시 (1114) 를 프리뷰 (1112) 에서의 시각적 표시 (1116) 의 로케이션으로 이동시키는 경우에 장면 부분 (1120) 이 레코딩을 위해 출력되도록, 제 2 이미지 스트림을 프로세싱하는 것을 조정한다.

일부 예시적인 구현들에서, 디바이스 (200) 는 장면의 어느 부분을 제 2 카메라 (204) 가 레코딩을 위해 캡처하는지를 조정하거나, 캡처된 제 2 이미지 스트림에 하나 이상의 필터들을 적용하기 전에, 무엇이 캡처되고 있는지를 조정하기 위해 제 2 카메라 (204) 에 커맨드를 전송할 수도 있다. 하나의 예에서, 카메라 제어기 (212) 는 제 2 카메라 (204) 의 광학적 줌 레벨을 변경하기 위해 제 2 카메라 (204) 에 커맨드를 전송할 수도 있다. 다른 예에서, 카메라 제어기 (212) 는 (보안 카메라 등에 대해) 제 2 카메라 (204) 의 팬 및/또는 틸트를 조정하기 위해 제 2 카메라 (204) 에 커맨드를 전송할 수도 있다.

일부 다른 예시적인 구현들에서, 디바이스 (200) 는 제 2 카메라 (204) 로부터 캡처된 제 2 이미지 스트림 (또는 하나 이상의 필터들을 적용한 후에 프로세싱된 제 2 이미지 스트림) 을 크로핑할 수도 있다. 이러한 방식으로, 디바이스 (200) 는, 조정된 시각적 표시와 연관된 장면의 부분만이 레코딩을 위해 출력되도록 제 2 이미지 스트림의 크로핑을 조정할 수도 있다. 예를 들어, 제 2 카메라 (204) 는 레코딩되는 것보다 장면의 더 많은 것을 캡처한다 (예컨대, 레코딩될 것이거나 레코딩되고 있는 것을 보여주기 위해 제 2 이미지 스트림에 대해 디지털 줌이 사용될 수도 있다). 디바이스 (200) 가 제 2 이미지 스트림에서 현재 레코딩되고 있는 장면의 상이한 부분을 레코딩하려는 경우에, 제 2 카메라 (204) 는 동일한 장면을 캡처할 수도 있을 것이고, (카메라 제어기 (212) 와 같은) 디바이스 (200) 는 제 2 카메라 (204) 를 조정함이 없이 레코딩되고 있는 제 2 이미지 스트림의 부분을 조정할 수도 있다.

다시 도 12 를 참조하면, 디바이스 (200) 는, 제 2 이미지 스트림을 프로세싱하는 것을 조정하는 것에 응답하여 및/또는 시각적 표시를 조정하기 위한 사용자 입력에 응답하여 디스플레이된 시각적 표시를 생성하는 것을 조정할 수도 있다 (1216). 일부 예시적인 구현들에서, 디바이스 (200) 는 선택적으로, 프리뷰에서 디스플레이될 시각적 표시의 사이즈를 조정할 수도 있다 (1218). 추가적으로 또는 대안적으로, 디바이스 (200) 는 선택적으로, 시각적 표시를 프리뷰에서 디스플레이될 새로운 로케이션으로 이동시킬 수도 있다 (1220).

사용자가 (터치-감지 디스플레이 (216) 상의 사용자 제스처들 또는 다른 사용자 입력들 등에 의한) 시각적 표시의 사이즈 및/또는 로케이션에 대해 변경을 요청하는 것에 추가하여 또는 대안적으로, 디바이스 (200) 는 하나 이상의 기준들에 응답하여 시각적 표시의 사이즈 및/또는 로케이션 (그리고 따라서 레코딩되고 있거나 레코딩될 장면의 부분) 을 생성하는 것을 자동적으로 조정할 수도 있다. 하나의 예에서, 디바이스 (200) 가 (얼굴, 사람, 축구 공 등과 같이) 레코딩을 위한 오브젝트를 추적하고, 카메라가 오브젝트 상에 포커싱할 수 없는 (예컨대, 레코딩에서 오브젝트가 흐릿한) 경우에, 디바이스 (200) 는 레코딩에서 오브젝트를 선명하게 하기 위해 초점을 조정하기 위해 오브젝트를 포함하는 장면의 보다 많은 것을 레코딩할 수도 있다 (시각적 표시의 사이즈 증가 및 따라서 오브젝트로부터 "주밍 아웃 (zooming out)"). 예를 들어, 디바이스 (200) 는 장면의 보다 많은 것이 캡처되도록 선택적으로 줌 아웃하도록 카메라에 커맨드를 전송할 수도 있다. 다른 예에서, 장면의 밝기가 감소되는 경우에, 디바이스 (200) 는 보다 많은 환경 광을 캡처하는 것을 시도하기 위해 레코딩을 위한 장면의 보다 많은 부분을 캡처하도록 카메라에 명령할 수도 있다 (이는 시각적 표시의 사이즈를 증가시킨다). 추가적인 예에서, 디바이스 (200) 가 움직이는 오브젝트를 추적하고 있는 경우에, 디바이스는 오브젝트를 추적하기를 시도하기 위해서 레코딩되고 있거나 레코딩될 장면의 부분을 조정 (따라서, 프리뷰에서 시각적 표시의 로케이션을 조정) 한다.

일부 예시적인 구현들에서, 제 2 카메라 (204) 는 제 1 카메라 (202) 만큼 많이 장면의 부분을 캡처하지 않거나, 제 2 카메라 (204) 는 제 1 카메라 (202) 와는 상이한 장면의 부분을 캡처한다. 예를 들어, 일부 듀얼 카메라들은 넓은 시야를 갖는 제 1 카메라 및 (텔레포토 카메라와같이) 좁은 시야를 갖는 제 2 카메라를 갖는다. 이러한 방식으로, 제 2 카메라는 제 1 이미지 스트림에서 장면의 전부를 캡처 가능하지 않을 수도 있다. 디바이스 (200) 의 사용자가 제 2 카메라 (204) 에 의해 캡처되지 않는 장면의 영역에 줌 보조 프리뷰에서의 시각적 표시를 조정 (예컨대, 디스플레이 (216) 를 통해 시각적 표시를 이동하거나 리사이징) 하기를 시도하는 경우에, 디바이스 (200) 는 장면의 새로운 부분을 레코딩함에 있어서 (제 1 카메라 (202) 로부터 제공된) 제 1 이미지 스트림을 이용하는 것으로 자동적으로 스위칭할 수도 있다. 레코딩을 위해 제 2 이미지 스트림을 이용하는 것으로부터 제 1 이미지 스트림으로 스위칭하는 것은 사용자에게는 끊김 없고 안보일 수도 있다. 예를 들어, 카메라 제어기 (212) 는 레코딩을 위해 프로세싱된 제 2 이미지 스트림의 적어도 부분을 출력하는 것으로부터 레코딩을 위해 프로세싱된 제 1 이미지 스트림의 적어도 부분을 출력하는 것으로 끊김없이 스위칭할 수도 있다. 대안적으로, 디바이스 (200) 는 레코딩을 위해 사용되는 스트림이 변경된 것을 사용자에게 통지 (예컨대, 가청 또는 가시 통지들) 할 수도 있다. 일부 다른 예시적인 구현들에서, 양 이미지 스트림들이 레코딩될 수도 있고, 디바이스 (200) 는 시각적 표시에 의해 표시된 장면의 부분에 대응하는 프로세싱된 이미지 스트림을 생성하기 위해 2 개의 이미지 스트림들의 부분들을 함께 스티치 (stitch) 할 수도 있다.

도 13a 는 제 1 카메라 (202) 에 의해 캡처되고 있는 예시적인 장면 (1302) 및 제 2 카메라 (204) 에 의해 캡처된 또는 캡처될 수 있는 장면의 예시적인 부분 (1304) 을 나타낸다. 도시된 바와 같이, 제 2 카메라 (204) 에 의해 캡처된 장면 부분 (1304) 은 제 1 카메라 (202) 에 의해 캡처된 장면 (1302) 보다 더 적다. 도시된 예에서, 장면 부분 (1306) 은 원래 레코딩될 수도 있거나 레코딩될 것일 수도 있다. 레코딩될 장면 부분이 장면 부분 (1308) 으로 조정되는 경우에, 제 2 카메라 (204) 는 레코딩을 위한 장면 부분을 캡처 가능하지 않을 수도 있다. 예를 들어, 사용자는 장면 부분 (1306) 을 레코딩하는 것으로부터 제 2 카메라 (204) 에 의해 그 전체가 캡처되지 않는 장면 부분 (1308) 을 레코딩하는 것으로 변경하기 위해서 줌 보조 프리뷰에서 시각적 표시를 조정하기 위해 디스플레이 (216) 상에서 제스처할 수도 있다. 디바이스 (200) 는, 장면의 의도된 부분의 전부가 레코딩되도록, 레코딩을 위해 제 2 이미지 스트림을 이용하는 것으로부터 레코딩을 위해 제 1 이미지 스트림을 이용하는 것으로 스위칭할 수도 있다.

도 13b 는 제 1 카메라 (202) 에 의해 캡처된 도 13a 에서의 예시적인 장면 (1302) 및 레코딩되고 있거나 레코딩될 장면 부분 (1308) 을 나타내고, 여기서, (제 1 카메라 (202) 로부터 제공된) 제 1 이미지 스트림은 레코딩되거나 레코딩될 (이미지 (1310) 에 대응하는) 장면 부분 (1308) 을 포함한다. 이러한 방식으로, (제 2 카메라 (204) 에 의해 제공된) 제 2 이미지 스트림은 장면 부분 (1308) 을 레코딩하기 위해 사용되지 않을 수도 있을 것이다.

도 14 는 장면의 부분을 레코딩하기 위해 프로세싱된 제 2 이미지 스트림과 프로세싱된 제 1 이미지 스트림 사이에 스위칭하기 위한 예시적인 동작 (1400) 을 나타내는 예시적인 플로우 차트이다. 1402 에서 시작하여, 디스플레이 (216) 는 (줌 보조 프리뷰 또는 동시적 프리뷰와 같은) 시각적 표시를 포함하는 프리뷰를 제시할 수도 있다. 레코딩되고 있거나 레코딩될 장면 부분을 나타내는 시각적 표시가 디스플레이 (216) 상에 디스플레이되고 있는 상태에서, 디바이스 (200) 는 (예컨대 카메라 제어기 (212) 를 이용함으로써) 프로세싱된 제 2 이미지 스트림을 레코딩을 위해 출력할 수도 있다 (1404). 디바이스 (200) 는 그 다음, 시각적 표시를 조정하기 위해 사용자 커맨드를 수신할 수도 있다 (1406). 예를 들어, 디바이스 (200) 는, 디스플레이 (216) 와 상호작용하는 것을 통해 사용자에 의해 제공된 사용자 커맨드를 디스플레이 (216) 로부터 수신할 수도 있다. 일부 예시적인 구현들에서, 디바이스 (200) 는, 시각적 표시의 사이즈를 조정하기 위해 사용자 커맨드를 수신할 수도 있다 (1408). 추가적으로 또는 대안적으로, 디바이스 (200) 는, 프리뷰에 대한 시각적 표시의 로케이션을 이동시키기 위한 사용자 커맨드를 수신할 수도 있다 (1410).

디바이스 (200) 가 레코딩되고 있는 장면의 부분을 조정하기 위해, 디바이스 (200) 는 시각적 표시가 레코딩되고 있는 장면의 조정된 부분에 대응하도록 시각적 표시를 조정할 수도 있다 (1412). 사용자 커맨드에 응답하여, 디바이스 (200) 는 레코딩을 위한 장면의 적어도 부분이 제 2 이미지 스트림에서의 시야 밖에 있는지를 결정할 수도 있다 (1414). 예를 들어, 디바이스 (200) 는, 제 2 카메라 (204) 에 의해 캡처된 장면 부분 (1304) (도 13a) dl 레코딩을 위한 장면 (1308) 의 전부를 포함하지 않는지를 결정한다. 제 2 이미지 스트림이 레코딩을 위한 장면 (1308) 의 전부를 포함하는 경우에, 디바이스 (200) 는 프로세싱된 제 2 이미지 스트림을 레코딩을 위해 계속 출력한다 (1404). 예를 들어, 카메라 제어기 (212) 는 레코딩을 위한 것인 제 2 이미지 스트림의 부분을 조정하고, 레코딩을 위한 프로세싱된 제 2 이미지 스트림을 계속 생성 및 출력한다.

(제 2 카메라 (204) 가 도 13a 에서의 장면 부분 (1308) 의 전부를 캡처하지 않는 것과 같이) 제 2 이미지 스트림이 레코딩을 위한 장면의 전부를 포함하지 않는 경우에, 디바이스 (200) 는 프로세싱된 제 2 이미지 스트림을 레코딩을 위해 출력하는 것으로부터 프로세싱된 제 1 이미지 스트림을 레코딩을 위해 출력하는 것으로 스위칭할 수도 있다 (1416). 예를 들어, 카메라 제어기 (212) 는 프로세싱된 제 2 이미지 스트림의 부분을 출력하는 것으로부터 도 13b 에서의 장면 부분 (1308) 에 대응하는 프로세싱된 제 1 이미지 스트림의 부분을 출력하는 것으로 스위칭할 수도 있다. 일부 대안적인 구현들에서, 카메라 제어기 (212) 는 프로세싱된 제 1 이미지 스트림 및 프로세싱된 제 2 이미지 스트림 양자를 동시에 출력할 수도 있다. 이러한 방식으로, 디바이스 (200) 는 장면의 부분을 레코딩하기 위해 레코딩을 위해 프로세싱된 제 2 이미지 스트림을 이용하는 것으로부터 프로세싱된 제 1 이미지 스트림을 이용하는 것으로 스위칭하도록 결정할 수도 있다.

사용자가 (예컨대 디스플레이 (216) 상의 사용자 제스처들 또는 다른 사용자 입력들에 의해) 시각적 표시의 사이즈 및/또는 로케이션에 대해 변경을 요청하는 것에 추가하여 또는 대안적으로, 디바이스 (200) 는 장면, 디바이스 (200), 및/또는 다른 컴포넌트들의 하나 이상의 기준들에 응답하여 레코딩을 위해 프로세싱된 제 2 이미지 스트림을 이용하는 것으로부터 프로세싱된 제 1 이미지 스트림을 이용하는 것으로 자동적으로 스위칭할 수도 있다. 일부 예시적인 구현들에서, 밝기에서의 변화는 디바이스 (200) 가 레코딩을 위한 이미지 스트림들을 스위칭하게 할 수도 있다. 예를 들어, 듀얼 카메라는 컬러 카메라 및 흑백 카메라를 포함할 수도 있고, 여기서, 흑백 카메라는 컬러 카메라보다 낮은 광 상황들에서 더 양호한 충실도를 갖는다. 이러한 방식으로, 디바이스 (200) 는, 장면의 밝기가 임계치 미만으로 떨어지는 경우에, 레코딩을 위해 컬러 카메라의 이미지 스트림을 이용하는 것으로부터 흑백 카메라의 이미지 스트림을 이용하는 것으로 스위칭하도록 결정할 수도 있다.

일부 예시적인 구현들에서, (제 1 카메라 (202) 및 제 2 카메라 (204) 와 같이) 카메라들 중 하나 이상은, 추적되고 있는 오브젝트가 카메라들 중 하나에 의해 캡처되고 있는 장면의 부분 밖에 속할 수도 있도록 이동될 수도 있다. 예를 들어, 제 1 카메라 (202) 가 넓은 뷰 (view) 를 포함하고 제 2 카메라 (204) 는 텔레포토 카메라인 경우에, 제 1 이미지 스트림 및/또는 제 2 이미지 스트림에서의 글로벌 모션 (global motion) 은 오브젝트가 제 2 카메라 (204) 의 시야 밖으로 나가게 하거나 거의 밖으로 나가게 할 수도 있다. 결과로서, 디바이스 (200) 는 오브젝트에 대한 추적을 유지하기 위해서 레코딩을 위해 제 2 카메라 (204) 로부터 제 1 카메라 (202) 로 이미지 스트림들을 스위칭할 수도 있다. 유사하게, 추적되고 있는 오브젝트는 제 2 이미지 스트림이 오브젝트를 포함하지 않을 수도 있도록 이동할 수도 있다 (로컬 모션). 디바이스 (200) 는 (텔레포토 카메라에 의해 캡처될 수도 있는) 제 2 이미지 스트림을 이용하는 것으로부터 (더 넓은 시야의 카메라에 의해 캡처될 수도 있는) 제 1 이미지 스트림을 이용하는 것으로 스위칭할 수도 있다.

도 15 는 하나 이상의 기준들에 기초하여 레코딩을 위해 프로세싱된 제 2 이미지 스트림으로부터 프로세싱된 제 1 이미지 스트림으로 스위칭하기 위한 예시적인 동작 (1500) 을 나타내는 예시적인 플로우 차트이다. 1502 에서 시작하여, 디바이스 (200) 는 프로세싱된 제 2 이미지 스트림을 레코딩을 위해 출력할 수도 있다. 디바이스 (200) 는 그 다음, 장면의 하나 이상의 특성들에서의 변화를 결정할 수도 있다 (1504). 하나의 예에서, 디바이스 (200) 는 선택적으로, 이미지 스트림들 중 적어도 하나에서의 밝기 또는 휘도에서의 변화를 결정할 수도 있다 (1506). 예를 들어, 환경 광 강도는 레코딩을 위해 사용되고 있는 현재의 프로세싱된 이미지 스트림에 대한 임계치 미만에 속한다고 결정될 수도 있다. 다른 예에서, 디바이스 (200) 는 선택적으로, 이미지 스트림들 중 적어도 하나에서의 글로벌 모션을 결정할 수도 있다 (1508). 예를 들어, 제 2 카메라 (204) 는, 제 1 카메라 (202) 가 레코딩을 위한 장면의 부분을 캡처하기 위해 사용되도록 이동될 수도 있다. 추가적인 예에서, 디바이스 (200) 는 선택적으로, 오브젝트의 로컬 모션 (local motion) 을 결정할 수도 있다 (1510). 예를 들어, 디바이스 (200) 에 의해 추적되고 있는 오브젝트는 제 2 카메라 (204) 의 시야 밖으로 이동할 수도 있어서, 프로세싱된 제 1 이미지 스트림이 레코딩을 위해 사용되어야 할 수도 있다.

장면의 하나 이상의 특성들에 대한 변경들에 기초하여, 디바이스 (200) 는 프로세싱된 제 2 이미지 스트림을 레코딩을 위해 출력하는 것으로부터 프로세싱된 제 1 이미지 스트림을 레코딩을 위해 출력하는 것으로 스위칭한다 (1512). 하나의 예에서, 카메라 제어기 (212) 는 레코딩을 위해 프로세싱된 제 2 이미지 스트림을 출력하는 것으로부터 레코딩을 위해 프로세싱된 제 1 이미지 스트림을 출력하는 것으로 스위칭할 수도 있고, 여기서, 프로세싱된 제 1 및/또는 제 2 이미지 스트림들의 부분은 나중의 사용을 위해서 저장될 수도 있다. 다른 예에서, 카메라 제어기 (212) 는 양 프로세싱된 이미지 스트림들을 출력할 수도 있고, 디바이스 (200) 는 레코딩을 위해 출력된 프로세싱된 제 2 이미지 스트림을 이용하는 것으로부터 출력된 프로세싱된 제 1 이미지 스트림을 이용하는 것으로 스위칭하도록 결정할 수도 있다.

레코딩을 위해 프로세싱된 이미지 스트림들 사이에서 자동적으로 스위칭하는 디바이스 (200) 의 다른 예시적인 구현에서, 다른 오브젝트가 레코딩되고 있거나 레코딩될 장면의 부분에 침입할 수도 있다. 예를 들어, 아이의 축구 게임을 레코딩함에 있어서, 아빠 전면에 앉아 있는 사람이 (일어서거나, 그 또는 그녀의 머리를 이동시키는 등과 같이) 레코딩되고 있거나 레코딩될 장면의 부분에 갑자기 들어올 수도 있어서, 디바이스 (200) 는 장면의 의도된 부분을 레코딩하고 있지 않게 된다 (또는 레코딩을 위해 출력하고 있지 않게 된다). 오브젝트가 레코딩되고 있는 장면의 작은 부분을 차단하거나 가로막는 경우에, 동일한 이미지 스트림을 이용하는 레코딩이 제한된 방해들을 가지면서 계속될 수도 있다. 하지만, 오브젝트가 장면의 큰 부분을 차단하거나 가로막는 경우에는, 디바이스 (200) 는 레코딩을 위해 상이한 이미지 스트림을 이용하기를 시도하도록 결정할 수도 있다. 일부 예시적인 구현들에서, 디바이스 (200) 는 (예컨대 다른 카메라가 외부 오브젝트에 의해 가로막히지 않는 장면의 부분의 상이한 유리한 위치를 갖거나 다른 카메라가 장면을 캡처하기 위해 "줌 아웃" 하도록 더 넓은 시야를 갖는 경우 등에) 장면의 의도된 부분을 캡처하기를 시도하기 위해 다른 프로세싱된 이미지 스트림으로 스위칭할 수도 있다. 예를 들어, 디바이스 (200) 는 장면의 부분의 일정 비율이 가로막힌다고 결정할 수도 있고, 다른 오브젝트가 레코딩되고 있는 장면의 중심으로부터 일정 거리 내에 있다고 결정할 수도 있는 등이다.

도 16 은 오브젝트가 레코딩되고 있거나 레코딩될 장면의 부분을 가로막는 것에 기초하여 레코딩을 위해 프로세싱된 제 2 이미지 스트림으로부터 프로세싱된 제 1 이미지 스트림으로 스위칭하기 위한 예시적인 동작 (1600) 을 나타내는 예시적인 플로우 차트이다. 1602 에서 시작하여, 디바이스 (200) 는 프로세싱된 제 2 이미지 스트림을 레코딩을 위해 출력할 수도 있다. 하나의 예에서, 카메라 제어기 (212) 는 레코딩을 위해 프로세싱된 제 2 이미지 스트림을 출력할 수도 있다. 다른 예에서, 카메라 제어기 (212) 는 다중의 프로세싱된 이미지 스트림들을 출력할 수도 있고, 디바이스 (200) 는 장면의 부분을 레코딩하기 위해 프로세싱된 제 2 이미지 스트림을 사용할 수도 있다.

프로세싱된 제 2 이미지 스트림이 장면의 부분을 레코딩하기 위해 사용되고 있는 상태에서, 디바이스 (200) 는 오브젝트가 레코딩되고 있거나 레코딩될 장면의 부분을 가로막기 위해 이동한다고 결정할 수도 있다 (1604). 디바이스 (200) 는 그러면, 그 오브젝트에 기초하여 프로세싱된 제 2 이미지 스트림으로부터 프로세싱된 제 1 이미지 스트림으로 스위칭할지 여부를 결정할 수도 있다 (1606). 하나의 예에서, 디바이스 (200) 는 오브젝트가 레코딩되고 있거나 레코딩될 장면의 부분의 일정 비율보다 더 많은 것을 가로막는다고 결정할 수도 있다. 다른 예에서, 디바이스 (200) 는 오브젝트가 레코딩되고 있거나 레코딩될 장면의 부분의 일정 비율보다 더 많은 것을 가로막는다고 결정할 수도 있다. 추가적인 예에서, 디바이스 (200) 는, 오브젝트가 레코딩을 위한 장면의 부분의 일정 비율 또는 레코딩을 위한 장면의 부분의 중심을 가로막으려 하는 지를 오브젝트의 이동으로부터 예측할 수도 있다. 디바이스 (200) 가 장면의 부분을 레코딩하기 위해 프로세싱된 이미지 스트림들을 스위칭하지 않도록 결정하는 경우에, 디바이스 (200) 는 장면의 부분을 레코딩하기 위해 프로세싱된 제 2 이미지 스트림을 계속 출력한다 (1602). 디바이스 (200) 가 장면의 부분을 레코딩하기 위해 프로세싱된 이미지 스트림들을 스위칭하도록 결정하는 경우에, 디바이스 (200) 는 장면의 부분을 레코딩하기 위해 프로세싱된 제 1 이미지 스트림을 출력하는 것으로 스위칭한다 (1608).

대안적으로, 카메라 제어기 (212) 가 프로세싱된 제 1 이미지 스트림 및 프로세싱된 제 2 이미지 스트림 양자를 출력하는 경우에, 디바이스 (200) 는 장면의 부분을 레코딩하기 위해 프로세싱된 제 2 이미지 스트림을 이용하는 것으로부터 프로세싱된 제 1 이미지 스트림을 이용하는 것으로 스위칭할 수도 있다. 일부 예시적인 구현들에서, 디바이스 (200) 는 가로막는 오브젝트를 계속 추적할 수도 있다. 가로막는 오브젝트가 레코딩되고 있거나 레코딩될 장면의 부분을 떠나는 경우에, 디바이스 (200) 는 레코딩을 위해 프로세싱된 이미지 스트림들을 스위칭하도록 결정할 수도 있다. 대안적으로, 디바이스 (200) 는, 다른 기준이 디바이스로 하여금 레코딩을 위해 프로세싱된 이미지 스트림들을 이용하는 것으로 스위칭하도록 결정하게 할 때까지, 레코딩을 위해 현재 프로세싱되는 이미지 스트림을 계속 사용할 수도 있다.

본 명세서에서 설명된 기법들은, 특정 방식으로 구현되는 것으로서 구체적으로 설명되지 않으면, 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 임의의 조합에서 구현될 수도 있다.　 모듈들 또는 컴포넌트들로서 설명된 임의의 피처들은 또한, 집적된 로직 디바이스에서 함께 또는 별개지만 상호운용가능한 로직 디바이스들로서 별도로 구현될 수도 있다.　 소프트웨어로 구현되는 경우에, 본 기법들은 적어도 부분적으로, 프로세서 (206) (또는 이미지 신호 프로세서 (214)) 에 의해 실행될 때 디바이스 (200) 로 하여금 상술된 방법들 중 하나 이상을 수행하게 하는 명령들 (210) 을 포함하는 (도 2 의 예시적인 디바이스 (200) 에서의 메모리 (208) 와 같은) 비일시적 프로세서 판독가능 저장 매체에 의해 실행될 수도 있다.　 비일시적 프로세서 판독가능 데이터 저장 매체는 컴퓨터 프로그램 제품의 부분을 형성할 수도 있으며, 이는 패키징 재료들을 포함할 수도 있다.

비일시적 프로세서 판독가능 저장 매체는 동기식 다이내믹 랜덤 액세스 메모리 (SDRAM) 와 같은 랜덤 액세스 메모리 (RAM), 판독 전용 메모리 (ROM), 비휘발성 랜덤 액세스 메모리 (NVRAM), 전기적으로 소거가능한 프로그램가능 판독 전용 메모리 (EEPROM), 플래시 메모리, 다른 알려진 저장 매체 등을 포함할 수도 있다.　 본 기법들은 부가적으로 또는 대안적으로, 명령들 또는 데이터 구조들의 형태로 코드를 운반하거나 통신하고 컴퓨터 또는 다른 프로세서에 의해 액세스, 판독 및/또는 실행될 수 있는 프로세서 판독가능 통신 매체에 의해 적어도 부분적으로 실현될 수도 있다.

본원에 개시된 실시형태들과 관련하여 설명된 다양한 예시적인 논리적 블록들, 모듈들, 회로들 및 명령들은 도 2a 및 도 2b 의 예시적인 디바이스 (200) 에서의 프로세서 (206) 또는 이미지 신호 프로세서 (214) 와 같은 하나 이상의 프로세서들에 의해 실행될 수도 있다. 이러한 프로세서(들)는, 하나 이상의 디지털 신호 프로세서 (DSP) 들, 범용 마이크로프로세서들, ASIC (application specific integrated circuit) 들, FPGA (field programmable logic array) 들, 또는 다른 동등한 집적 또는 이산 로직 회로를 포함할 수도 있지만 이에 한정되지는 않는다.　 본 명세서에서 사용된 바와 같은 용어 "프로세서" 는, 전술한 구조들 또는 본 명세서에서 설명된 기법들의 구현에 적합한 임의의 다른 구조 중 임의의 것을 지칭할 수도 있다.　 또한, 일부 양태들에 있어서, 본 명세서에서 설명된 기능성은 본 명세서에서 설명된 바와 같이 구성된 전용 소프트웨어 모듈들 또는 하드웨어 모듈들 내에 제공될 수도 있다.　 또한, 본 기법들은 하나 이상의 회로들 또는 로직 엘리먼트들에서 완전히 구현될 수 있을 것이다.　 범용 프로세서는 마이크로프로세서일 수도 있지만, 대안적으로, 그 프로세서는 임의의 종래의 프로세서, 제어기, 마이크로제어기, 또는 상태 머신일 수도 있다.　 프로세서는 또한, 계산 디바이스들의 조합, 예를 들어, DSP 와 마이크로프로세서의 조합, 복수의 마이크로프로세서들, DSP 코어와 결합한 하나 이상의 마이크로프로세서들, 또는 임의의 다른 이러한 구성으로서 구현될 수도 있다.

본 개시는 예시적인 양태들을 나타내지만, 첨부된 청구항들의 범위로부터 일탈함 없이, 다양한 변경들 및 수정들이 본원에서 행해질 수 있음이 주목되어야 한다. 추가적으로, 본원에 기술된 양태들에 따른 방법 청구항들의 기능들, 단계들 또는 액션들은 달리 명시적으로 언급되지 않는 한 임의의 특정 순서로 수행될 필요는 없다. 예를 들어, 도 6, 도 8, 도 10, 도 12, 및 도 14 내지 도 16 에서 도시된 예시적인 동작들의 단계들은, 디바이스, 카메라 제어기, 프로세서, 또는 이미지 신호 프로세서에 의해 수행되는 경우에, 임의의 순서로 그리고 임의의 빈도로 (예컨대, 매 이미지 캡처마다, 프로세싱된 이미지 스트림에서의 이미지 캡처들의 주기적 간격으로, 미리정의된 시간 주기로, 사용자 제스처들이 수신될 때 등) 수행될 수도 있다. 더욱이, 비록 엘리먼트들이 단수로 설명되거나 또는 청구될 수도 있지만, 단수로의 제한이 명시적으로 언급되지 않는다면, 복수가 고려된다. 예를 들어, 2 개의 프로세싱된 이미지 스트림들이 설명되지만, 하나의 프로세싱된 이미지 스트림 또는 3 개 이상의 프로세싱된 이미지 스트림들이 본 개시의 양태들을 수행함에 있어서 사용될 수도 있다. 따라서, 본 개시는 예시된 예들로 한정되지 않으며, 본 명세서에서 설명된 기능을 수행하는 임의의 수단이 본 개시의 양태들에 포함된다.

Claims

디바이스로서,
이미지 데이터를 저장하도록 구성된 메모리; 및
상기 메모리와 통신하는 프로세서를 포함하고,
상기 프로세서는,
장면과 연관된 제 1 이미지 스트림을 프로세싱하고;
상기 장면의 공간적 부분과 연관된 제 2 이미지 스트림을 독립적으로 프로세싱하는 것으로서, 상기 제 2 이미지 스트림은 상기 제 1 이미지 스트림과 상이한, 상기 제 2 이미지 스트림을 독립적으로 프로세싱하는 것을 행하며;
프로세싱된 상기 제 1 이미지 스트림을 출력하고; 그리고
상기 프로세싱된 제 1 이미지 스트림의 출력 동안, 상기 제 2 이미지 스트림과 연관된 상기 공간적 부분을 나타내는 시각적 표시를 출력하도록
구성되는, 디바이스.
제 1 항에 있어서,
상기 프로세서는 또한,
프로세싱된 상기 제 2 이미지 스트림 및 상기 프로세싱된 제 1 이미지 스트림의 동시 디스플레이를 위해 상기 프로세싱된 제 2 이미지 스트림을 출력하도록 구성되는, 디바이스.
제 1 항에 있어서,
상기 프로세서는 또한,
프로세싱된 상기 제 2 이미지 스트림을 출력하도록 구성되고,
상기 디바이스는, 하나 이상의 기준들에 기초하여 상기 프로세싱된 제 1 이미지 스트림을 디스플레이하는 것과 상기 제 2 이미지 스트림을 디스플레이하는 것 사이에 스위칭하도록 구성되는, 디바이스.
제 1 항에 있어서,
상기 프로세서는 또한,
디스플레이되고 있는 상기 시각적 표시를 조정하기 위한 요청을 수신하고;
수신된 상기 요청에 기초하여 디스플레이되고 있는 상기 시각적 표시를 조정하며;
상기 수신된 요청에 기초하여 상기 제 2 이미지 스트림에서 상기 장면의 상기 공간적 부분을 조정하기 위한 제어 신호를 생성하고; 그리고
상기 제어 신호에 응답하여 상기 장면의 조정된 상기 공간적 부분에 대해 조정된 제 2 이미지 스트림을 프로세싱하도록 구성되는, 디바이스.
제 4 항에 있어서,
상기 제 1 이미지 스트림을 캡처하도록 구성된 제 1 카메라; 및
상기 제 2 이미지 스트림을 캡처하도록 그리고 상기 제어 신호를 수신하도록 구성된 제 2 카메라를 더 포함하고,
상기 제어 신호는 상기 제 2 카메라의 줌 레벨을 조정하기 위한 것인, 디바이스.
제 4 항에 있어서,
상기 프로세싱된 제 1 이미지 스트림을 디스플레이하고;
상기 프로세싱된 제 1 이미지 스트림을 디스플레이하는 동안 디스플레이되고 있는 상기 시각적 표시를 조정하기 위한 사용자 커맨드를 수신하며; 그리고
상기 시각적 표시를 조정하기 위한 상기 사용자 커맨드를 수신하는 것에 응답하여 상기 시각적 표시를 조정하기 위한 상기 요청을 출력하도록
구성된 터치-감지 디스플레이를 더 포함하는, 디바이스.
제 4 항에 있어서,
상기 프로세서는 또한,
조정된 상기 시각적 표시에 대응하는 상기 장면의 공간적 부분에 대한 상기 프로세싱된 제 1 이미지 스트림; 또는
프로세싱된 상기 조정된 제 2 이미지 스트림
중 하나를 레코딩을 위해 출력하고; 그리고
상기 조정된 시각적 표시에 대응하는 상기 장면 내의 영역의 사이즈 또는 로케이션 중 적어도 하나에 기초하여 레코딩을 위한 상기 출력을 결정하도록 구성되는, 디바이스.
제 1 항에 있어서,
상기 프로세서는 또한,
상기 시각적 표시에 대응하는 상기 장면의 공간적 부분에 대한 상기 프로세싱된 제 1 이미지 스트림; 또는
프로세싱된 상기 제 2 이미지 스트림
중 하나를 레코딩을 위해 출력하고; 그리고
상기 장면의 하나 이상의 특성들; 또는
상기 시각적 표시에 대응하는 상기 장면의 상기 공간적 부분에서의 오브젝트의 이동
중 적어도 하나에 기초하여 레코딩을 위한 상기 출력을 결정하도록 구성되는, 디바이스.
방법으로서,
프로세서에 의해, 장면과 연관된 제 1 이미지 스트림을 프로세싱하는 단계;
상기 프로세서에 의해, 상기 장면의 공간적 부분과 연관된 제 2 이미지 스트림을 독립적으로 프로세싱하는 단계로서, 상기 제 2 이미지 스트림은 상기 제 1 이미지 스트림과 상이한, 상기 제 2 이미지 스트림을 독립적으로 프로세싱하는 단계;
프로세싱된 상기 제 1 이미지 스트림을 출력하는 단계; 및
상기 프로세싱된 제 1 이미지 스트림의 출력 동안, 상기 제 2 이미지 스트림과 연관된 상기 공간적 부분을 나타내는 시각적 표시를 출력하는 단계를 포함하는, 방법.
제 9 항에 있어서,
프로세싱된 상기 제 2 이미지 스트림 및 상기 프로세싱된 제 1 이미지 스트림의 동시 디스플레이를 위해 상기 프로세싱된 제 2 이미지 스트림을 출력하는 단계를 더 포함하는, 방법.
제 9 항에 있어서,
프로세싱된 상기 제 2 이미지 스트림을 출력하는 단계를 더 포함하고,
상기 프로세서에 커플링된 디스플레이는, 하나 이상의 기준들에 기초하여 상기 프로세싱된 제 1 이미지 스트림을 디스플레이하는 것과 상기 제 2 이미지 스트림을 디스플레이하는 것 사이에 스위칭하도록 구성되는, 방법.
제 9 항에 있어서,
디스플레이되고 있는 상기 시각적 표시를 조정하기 위한 요청을 수신하는 단계;
수신된 상기 요청에 기초하여 디스플레이되고 있는 상기 시각적 표시를 조정하는 단계;
상기 수신된 요청에 기초하여 상기 제 2 이미지 스트림에서 상기 장면의 상기 공간적 부분을 조정하기 위한 제어 신호를 생성하는 단계; 및
상기 제어 신호에 응답하여 상기 장면의 조정된 상기 공간적 부분에 대해 조정된 제 2 이미지 스트림을 프로세싱하는 단계를 더 포함하는, 방법.
제 12 항에 있어서,
상기 제 1 이미지 스트림을 캡처하도록 구성된 제 1 카메라로부터 상기 제 1 이미지 스트림을 수신하는 단계; 및
상기 제 2 이미지 스트림을 캡처하도록 구성된 제 2 카메라로부터 상기 제 2 이미지 스트림을 수신하는 단계를 더 포함하고,
상기 제어 신호를 출력하는 것은 상기 제어 신호를 상기 제 2 카메라에 출력하는 것을 포함하고, 상기 제어 신호는 상기 제 2 카메라의 줌 레벨을 조정하기 위한 것인, 방법.
제 12 항에 있어서,
상기 시각적 표시를 디스플레이하는 것을 포함하는, 터치-감지 디스플레이 상에 상기 프로세싱된 제 1 이미지 스트림을 디스플레이하는 단계;
상기 터치-감지 디스플레이를 통해, 상기 시각적 표시를 조정하기 위한 사용자 커맨드를 수신하는 단계; 및
상기 시각적 표시를 조정하기 위한 상기 사용자 커맨드를 수신하는 것에 응답하여, 조정된 시각적 표시를 디스플레이하는 단계를 더 포함하는, 방법.
제 12 항에 있어서,
조정된 상기 시각적 표시에 대응하는 상기 장면의 공간적 부분에 대한 상기 프로세싱된 제 1 이미지 스트림; 또는
프로세싱된 상기 조정된 제 2 이미지 스트림
중 하나를 레코딩을 위해 출력하는 단계; 및
상기 조정된 시각적 표시에 대응하는 상기 장면 내의 영역의 사이즈 또는 로케이션 중 적어도 하나에 기초하여 레코딩을 위한 상기 출력을 결정하는 단계를 더 포함하는, 방법.
제 9 항에 있어서,
상기 시각적 표시에 대응하는 상기 장면의 공간적 부분에 대한 상기 프로세싱된 제 1 이미지 스트림; 또는
프로세싱된 상기 제 2 이미지 스트림
중 하나를 레코딩을 위해 출력하는 단계; 및
상기 장면의 하나 이상의 특성들; 또는
상기 시각적 표시에 대응하는 상기 장면의 상기 공간적 부분에서의 오브젝트의 이동
중 적어도 하나에 기초하여 레코딩을 위한 상기 출력을 결정하는 단계를 더 포함하는, 방법.
명령들을 포함하는 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서,
상기 명령들은, 디바이스의 하나 이상의 프로세서들에 의해 실행될 때, 상기 디바이스로 하여금,
프로세서에 의해, 장면과 연관된 제 1 이미지 스트림을 프로세싱하는 동작;
상기 프로세서에 의해, 상기 장면의 공간적 부분과 연관된 제 2 이미지 스트림을 독립적으로 프로세싱하는 동작으로서, 상기 제 2 이미지 스트림은 상기 제 1 이미지 스트림과 상이한, 상기 제 2 이미지 스트림을 독립적으로 프로세싱하는 동작;
프로세싱된 상기 제 1 이미지 스트림을 출력하는 동작; 및
상기 프로세싱된 제 1 이미지 스트림의 출력 동안, 상기 제 2 이미지 스트림과 연관된 상기 공간적 부분을 나타내는 시각적 표시를 출력하는 동작
을 포함하는 동작들을 수행하게 하는, 비일시적 컴퓨터 판독가능 저장 매체.
제 17 항에 있어서,
상기 명령들의 실행은 상기 디바이스로 하여금,
프로세싱된 상기 제 2 이미지 스트림 및 상기 프로세싱된 제 1 이미지 스트림의 동시 디스플레이를 위해 상기 프로세싱된 제 2 이미지 스트림을 출력하는 동작을 더 포함하는 동작들을 수행하게 하는, 비일시적 컴퓨터 판독가능 저장 매체.
제 17 항에 있어서,
상기 명령들의 실행은 상기 디바이스로 하여금, 프로세싱된 상기 제 2 이미지 스트림을 출력하는 동작을 더 포함하는 동작들을 수행하게 하며,
상기 디바이스는, 하나 이상의 기준들에 기초하여 상기 프로세싱된 제 1 이미지 스트림을 디스플레이하는 것과 상기 제 2 이미지 스트림을 디스플레이하는 것 사이에 스위칭하도록 구성되는, 비일시적 컴퓨터 판독가능 저장 매체.
제 17 항에 있어서,
상기 명령들의 실행은 상기 디바이스로 하여금,
디스플레이되고 있는 상기 시각적 표시를 조정하기 위한 요청을 수신하는 동작;
수신된 상기 요청에 기초하여 디스플레이되고 있는 상기 시각적 표시를 조정하는 동작;
상기 수신된 요청에 기초하여 상기 제 2 이미지 스트림에서 상기 장면의 상기 공간적 부분을 조정하기 위한 제어 신호를 생성하는 동작; 및
상기 제어 신호에 응답하여 상기 장면의 조정된 상기 공간적 부분에 대해 조정된 제 2 이미지 스트림을 프로세싱하는 동작
을 더 포함하는 동작들을 수행하게 하는, 비일시적 컴퓨터 판독가능 저장 매체.
제 20 항에 있어서,
상기 명령들의 실행은 상기 디바이스로 하여금,
상기 제 1 이미지 스트림을 캡처하도록 구성된 제 1 카메라로부터 상기 제 1 이미지 스트림을 수신하는 동작; 및
상기 제 2 이미지 스트림을 캡처하도록 구성된 제 2 카메라로부터 상기 제 2 이미지 스트림을 수신하는 동작
을 더 포함하는 동작들을 수행하게 하고,
상기 제어 신호를 출력하는 것은 상기 제어 신호를 상기 제 2 카메라에 출력하는 것을 포함하고, 상기 제어 신호는 상기 제 2 카메라의 줌 레벨을 조정하기 위한 것인, 비일시적 컴퓨터 판독가능 저장 매체.
제 20 항에 있어서,
상기 명령들의 실행은 상기 디바이스로 하여금,
상기 시각적 표시를 디스플레이하는 것을 포함하는, 터치-감지 디스플레이 상에 상기 프로세싱된 제 1 이미지 스트림을 디스플레이하는 동작;
상기 터치-감지 디스플레이를 통해, 상기 시각적 표시를 조정하기 위한 사용자 커맨드를 수신하는 동작; 및
상기 시각적 표시를 조정하기 위한 상기 사용자 커맨드를 수신하는 것에 응답하여, 조정된 시각적 표시를 디스플레이하는 동작
을 더 포함하는 동작들을 수행하게 하는, 비일시적 컴퓨터 판독가능 저장 매체.
제 20 항에 있어서,
상기 명령들의 실행은 상기 디바이스로 하여금,
조정된 상기 시각적 표시에 대응하는 상기 장면의 공간적 부분에 대한 상기 프로세싱된 제 1 이미지 스트림; 또는
프로세싱된 상기 조정된 제 2 이미지 스트림
중 하나를 레코딩을 위해 출력하는 동작; 및
상기 조정된 시각적 표시에 대응하는 상기 장면 내의 영역의 사이즈 또는 로케이션 중 적어도 하나에 기초하여 레코딩을 위한 상기 출력을 결정하는 동작
을 더 포함하는 동작들을 수행하게 하는, 비일시적 컴퓨터 판독가능 저장 매체.
제 17 항에 있어서,
상기 명령들의 실행은 상기 디바이스로 하여금,
상기 시각적 표시에 대응하는 상기 장면의 공간적 부분에 대한 상기 프로세싱된 제 1 이미지 스트림; 또는
프로세싱된 상기 제 2 이미지 스트림
중 하나를 레코딩을 위해 출력하는 동작; 및
상기 장면의 하나 이상의 특성들; 또는
상기 시각적 표시에 대응하는 상기 장면의 상기 공간적 부분에서의 오브젝트의 이동
중 적어도 하나에 기초하여 레코딩을 위한 상기 출력을 결정하는 동작
을 더 포함하는 동작들을 수행하게 하는, 비일시적 컴퓨터 판독가능 저장 매체.
디바이스로서,
장면과 연관된 제 1 이미지 스트림을 프로세싱하는 수단;
상기 장면의 공간적 부분과 연관된 제 2 이미지 스트림을 독립적으로 프로세싱하는 수단으로서, 상기 제 2 이미지 스트림은 상기 제 1 이미지 스트림과 상이한, 상기 제 2 이미지 스트림을 독립적으로 프로세싱하는 수단;
프로세싱된 상기 제 1 이미지 스트림을 출력하는 수단; 및
상기 프로세싱된 제 1 이미지 스트림의 출력 동안, 상기 제 2 이미지 스트림과 연관된 상기 공간적 부분을 나타내는 시각적 표시를 출력하는 수단을 포함하는, 디바이스.
제 25 항에 있어서,
프로세싱된 상기 제 2 이미지 스트림 및 상기 프로세싱된 제 1 이미지 스트림의 동시 디스플레이를 위해 상기 프로세싱된 제 2 이미지 스트림을 출력하는 수단을 더 포함하는, 디바이스.
제 25 항에 있어서,
상기 디바이스는, 프로세싱된 상기 제 2 이미지 스트림을 출력하는 수단을 더 포함하고, 상기 디바이스는, 하나 이상의 기준들에 기초하여 상기 프로세싱된 제 1 이미지 스트림을 디스플레이하는 것과 상기 제 2 이미지 스트림을 디스플레이하는 것 사이에 스위칭하도록 구성되는, 디바이스.
제 25 항에 있어서,
디스플레이되고 있는 상기 시각적 표시를 조정하기 위한 요청을 수신하는 수단;
수신된 상기 요청에 기초하여 디스플레이되고 있는 상기 시각적 표시를 조정하는 수단;
상기 수신된 요청에 기초하여 상기 제 2 이미지 스트림에서 상기 장면의 상기 공간적 부분을 조정하기 위한 제어 신호를 생성하는 수단; 및
상기 제어 신호에 응답하여 상기 장면의 조정된 상기 공간적 부분에 대해 조정된 제 2 이미지 스트림을 프로세싱하는 수단을 더 포함하는, 디바이스.
제 28 항에 있어서,
상기 제 1 이미지 스트림을 캡처하도록 구성된 제 1 카메라로부터 상기 제 1 이미지 스트림을 수신하는 수단; 및
상기 제 2 이미지 스트림을 캡처하도록 구성된 제 2 카메라로부터 상기 제 2 이미지 스트림을 수신하는 수단을 더 포함하고,
상기 제어 신호를 출력하는 것은 상기 제어 신호를 상기 제 2 카메라에 출력하는 것을 포함하고, 상기 제어 신호는 상기 제 2 카메라의 줌 레벨을 조정하기 위한 것인, 디바이스.
제 28 항에 있어서,
상기 시각적 표시를 디스플레이하는 것을 포함하는, 터치-감지 디스플레이 상에 상기 프로세싱된 제 1 이미지 스트림을 디스플레이하는 수단;
상기 터치-감지 디스플레이를 통해, 상기 시각적 표시를 조정하기 위한 사용자 커맨드를 수신하는 수단; 및
상기 시각적 표시를 조정하기 위한 상기 사용자 커맨드를 수신하는 것에 응답하여, 조정된 시각적 표시를 디스플레이하는 수단을 더 포함하는, 디바이스.