KR20210101656A - 카메라를 포함하는 전자 장치 및 촬영 방법 - Google Patents

Abstract

본 문서에 개시된 다양한 실시예에 따른 전자 장치는, 카메라 및 상기 카메라와 작동적으로 연결되는 프로세서를 포함할 수 있고, 상기 프로세서는, 상기 카메라를 통해 서로 다른 적어도 둘 이상의 화각으로 영상을 획득할 수 있도록 준비할 수 있고, 상기 카메라를 통해 획득되는 영상에 포함된 피사체의 상태를 분석할 수 있고, 상기 분석에 기반하여 촬영 화각을 결정할 수 있고, 결정된 촬영 화각으로 프리뷰 영상 및 이미지를 제공할 수 있다. 이 밖에도 다양한 실시예가 가능할 수 있다.

Description

카메라를 포함하는 전자 장치 및 촬영 방법{ELECTRONIC DEVICE INCLUDING CAMERA AND SHOOTING METHOD}

본 문서에 개시된 다양한 실시예들은, 카메라를 포함하는 전자 장치와 전자 장치에 포함된 카메라를 통한 촬영 방법에 관한 것이다.

전자 장치에 탑재되는 카메라의 성능이 발전함에 따라 전자 장치의 카메라를 이용하는 사용자도 점차 증가하고 있다.

전자 장치의 카메라는 크롭 또는 복수의 카메라를 통해 다양한 화각으로의 촬영을 제공할 수 있다.

최근에는 인공지능 또는 기계학습 기술을 카메라에 도입하려는 시도도 점차 늘어나고 있다. 이러한 기술을 통해 촬영되는 부분의 피사체를 검출 또는 인식하고 검출 또는 인식된 피사체에 기반하여 촬영 모드를 자동으로 변경해주는 기술들도 활발하게 개발되고 있다.

전자 장치의 카메라가 다양한 화각으로 촬영을 지원하지만 사용자들은 특정 상황에서 어떠한 화각으로 촬영을 해야할지 쉽게 알 수 없는 경우가 발생할 수 있다.

또한, 종래의 경우 촬영 화각을 변경하는 과정에서 디스플레이에 표시되는 실시간 영상(프리뷰 영상)이 끊기는 문제가 발생하거나, 파이프라인(pipeline) 구성 시 결정된 해상도로 스캐일링(scaling)된 영상(digital zoom)을 전달받을 수밖에 없는 문제가 존재한다.

본 문서에 개시된 다양한 실시예에 따르면 촬영 상황에 따라 최적의 촬영 화각을 결정할 수 있고 화각이 변경되는 과정에서 프리뷰 영상이 끊기지 않고 계속적으로 제공될 수 있는 카메라를 포함하는 전자 장치 및 촬영 방법을 제공할 수 있다.

본 문서에 개시된 다양한 실시예에 따른 전자 장치는, 카메라 및 상기 카메라와 작동적으로 연결되는 프로세서를 포함할 수 있고, 상기 프로세서는, 상기 카메라를 통해 서로 다른 적어도 둘 이상의 화각으로 영상을 획득할 수 있도록 준비할 수 있고, 상기 카메라를 통해 획득되는 영상에 포함된 피사체의 상태를 분석할 수 있고, 상기 분석에 기반하여 촬영 화각을 결정할 수 있고, 결정된 촬영 화각으로 프리뷰 영상 및 이미지를 제공할 수 있다.

본 문서에 개시된 다양한 실시예에 따른 카메라 촬영 방법은, 카메라를 통해 서로 다른 적어도 둘 이상의 화각으로 영상을 획득할 수 있도록 준비하는 동작, 상기 카메라를 통해 획득되는 영상에 포함된 피사체의 상태를 분석하는 동작, 상기 분석에 기반하여 촬영 화각을 결정하는 동작 및 결정된 촬영 화각으로 프리뷰 영상 및 이미지를 제공하는 동작을 포함할 수 있다.

본 문서에 개시된 다양한 실시예에 따른 전자 장치는, 서로 다른 화각을 갖는 복수의 카메라 및 상기 복수의 카메라와 작동적으로 연결된 프로세서를 포함할 수 있고, 상기 프로세서는, 상기 복수의 카메라를 통해 서로 다른 적어도 둘 이상의 화각으로 영상을 획득할 수 있도록 준비할 수 있고, 상기 복수의 카메라 중 하나를 통해 획득되는 영상에 포함된 피사체의 상태를 분석할 수 있고, 상기 분석에 기반하여 상기 복수의 카메라 중 하나를 결정할 수 있고, 결정된 카메라를 통해 프리뷰 영상 및 이미지를 제공할 수 있다.

본 문서에 개시된 다양한 실시예에 따르면, 프리뷰 영상에 존재하는 피사체의 상태에 따라 촬영 화각이 최적의 촬영 화각으로 변경될 수 있다.

또한, 촬영 화각이 변경되는 과정에서도 화질 열화 없이 끊김없이 부드러운 프리뷰 영상을 제공할 수 있다.

도면의 설명과 관련하여, 동일 또는 유사한 구성 요소에 대해서는 동일 또는 유사한 참조 부호가 사용될 수 있다.
도 1은, 다양한 실시예들에 따른, 네트워크 환경 내의 전자 장치의 블럭도이다.
도 2는, 본 문서에 개시된 다양한 실시예에 따른 전자 장치의 블록도이다.
도 3은, 본 문서에 개시된 다양한 실시예에 다른 흐름도이다.
도 4는, 본 문서에 개시된 다양한 실시예에 따른 다양한 촬영 화각에 대응되는 파이프라인의 개념도이다.
도 5는, 본 문서에 개시된 다양한 실시예에 따른 촬영 방법의 순서도이다.
도 6a 내지 도 6d는, 본 문서에 개시된 다양한 실시예에 따른 촬영 화각 전환을 설명하기 위한 도면이다.
도 7은, 본 문서에 개시된 다양한 실시예에 따른 촬영 방법의 순서도이다.

본 문서의 다양한 실시 예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시 예들로 한정하려는 것이 아니며, 해당 실시 예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다.

도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다.

본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나",“또는 B 중 적어도 하나,”"A, B 또는 C," "A, B 및 C 중 적어도 하나,”및 “B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에, “기능적으로” 또는 “통신적으로”라는 용어와 함께 또는 이런 용어 없이, “커플드” 또는 “커넥티드”라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제 3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.

도 1은, 다양한 실시예들에 따른, 네트워크 환경(100) 내의 전자 장치(101)의 블럭도이다. 도 1을 참조하면, 네트워크 환경(100)에서 전자 장치(101)는 제 1 네트워크(198)(예: 근거리 무선 통신 네트워크)를 통하여 전자 장치(102)와 통신하거나, 또는 제 2 네트워크(199)(예: 원거리 무선 통신 네트워크)를 통하여 전자 장치(104) 또는 서버(108)와 통신할 수 있다. 일실시예에 따르면, 전자 장치(101)는 서버(108)를 통하여 전자 장치(104)와 통신할 수 있다. 일실시예에 따르면, 전자 장치(101)는 프로세서(120), 메모리(130), 입력 장치(150), 음향 출력 장치(155), 표시 장치(160), 오디오 모듈(170), 센서 모듈(176), 인터페이스(177), 햅틱 모듈(179), 카메라 모듈(180), 전력 관리 모듈(188), 배터리(189), 통신 모듈(190), 가입자 식별 모듈(196), 또는 안테나 모듈(197)을 포함할 수 있다. 어떤 실시예에서는, 전자 장치(101)에는, 이 구성요소들 중 적어도 하나(예: 표시 장치(160) 또는 카메라 모듈(180))가 생략되거나, 하나 이상의 다른 구성 요소가 추가될 수 있다. 어떤 실시예에서는, 이 구성요소들 중 일부들은 하나의 통합된 회로로 구현될 수 있다. 예를 들면, 센서 모듈(176)(예: 지문 센서, 홍채 센서, 또는 조도 센서)은 표시 장치(160)(예: 디스플레이)에 임베디드된 채 구현될 수 있다

프로세서(120)는, 예를 들면, 소프트웨어(예: 프로그램(140))를 실행하여 프로세서(120)에 연결된 전자 장치(101)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)을 제어할 수 있고, 다양한 데이터 처리 또는 연산을 수행할 수 있다. 일실시예에 따르면, 데이터 처리 또는 연산의 적어도 일부로서, 프로세서(120)는 다른 구성요소(예: 센서 모듈(176) 또는 통신 모듈(190))로부터 수신된 명령 또는 데이터를 휘발성 메모리(132)에 로드하고, 휘발성 메모리(132)에 저장된 명령 또는 데이터를 처리하고, 결과 데이터를 비휘발성 메모리(134)에 저장할 수 있다. 일실시예에 따르면, 프로세서(120)는 메인 프로세서(121)(예: 중앙 처리 장치 또는 어플리케이션 프로세서), 및 이와는 독립적으로 또는 함께 운영 가능한 보조 프로세서(123)(예: 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 추가적으로 또는 대체적으로, 보조 프로세서(123)은 메인 프로세서(121)보다 저전력을 사용하거나, 또는 지정된 기능에 특화되도록 설정될 수 있다. 보조 프로세서(123)는 메인 프로세서(121)와 별개로, 또는 그 일부로서 구현될 수 있다.

보조 프로세서(123)는, 예를 들면, 메인 프로세서(121)가 인액티브(예: 슬립) 상태에 있는 동안 메인 프로세서(121)를 대신하여, 또는 메인 프로세서(121)가 액티브(예: 어플리케이션 실행) 상태에 있는 동안 메인 프로세서(121)와 함께, 전자 장치(101)의 구성요소들 중 적어도 하나의 구성요소(예: 표시 장치(160), 센서 모듈(176), 또는 통신 모듈(190))와 관련된 기능 또는 상태들의 적어도 일부를 제어할 수 있다. 일실시예에 따르면, 보조 프로세서(123)(예: 이미지 시그널 프로세서 또는 커뮤니케이션 프로세서)는 기능적으로 관련 있는 다른 구성 요소(예: 카메라 모듈(180) 또는 통신 모듈(190))의 일부로서 구현될 수 있다.

메모리(130)는, 전자 장치(101)의 적어도 하나의 구성요소(예: 프로세서(120) 또는 센서모듈(176))에 의해 사용되는 다양한 데이터를 저장할 수 있다. 데이터는, 예를 들어, 소프트웨어(예: 프로그램(140)) 및, 이와 관련된 명령에 대한 입력 데이터 또는 출력 데이터를 포함할 수 있다. 메모리(130)는, 휘발성 메모리(132) 또는 비휘발성 메모리(134)를 포함할 수 있다.

프로그램(140)은 메모리(130)에 소프트웨어로서 저장될 수 있으며, 예를 들면, 운영 체제(142), 미들 웨어(144) 또는 어플리케이션(146)을 포함할 수 있다.

입력 장치(150)는, 전자 장치(101)의 구성요소(예: 프로세서(120))에 사용될 명령 또는 데이터를 전자 장치(101)의 외부(예: 사용자)로부터 수신할 수 있다. 입력 장치(150)은, 예를 들면, 마이크, 마우스, 키보드, 또는 디지털 펜(예:스타일러스 펜)을 포함할 수 있다. 다양한 실시예에 따르면, 입력 장치(150)는 사용자의 음성을 인식할 수 있다. 입력 장치(150)는 사용자의 음성을 통한 명령을 수신할 수 있다. 입력 장치(150)는 전자 장치(101)의 주변에서 발생하는 음성을 인식할 수 있도록 360도 방향에 대응되는 다중 마이크 장치일 수 있다.

음향 출력 장치(155)는 음향 신호를 전자 장치(101)의 외부로 출력할 수 있다. 음향 출력 장치(155)는, 예를 들면, 스피커 또는 리시버를 포함할 수 있다. 스피커는 멀티미디어 재생 또는 녹음 재생과 같이 일반적인 용도로 사용될 수 있고, 리시버는 착신 전화를 수신하기 위해 사용될 수 있다. 일실시예에 따르면, 리시버는 스피커와 별개로, 또는 그 일부로서 구현될 수 있다.

표시 장치(160)는 전자 장치(101)의 외부(예: 사용자)로 정보를 시각적으로 제공할 수 있다. 표시 장치(160)은, 예를 들면, 디스플레이, 홀로그램 장치, 또는 프로젝터 및 해당 장치를 제어하기 위한 제어 회로를 포함할 수 있다. 일실시예에 따르면, 표시 장치(160)는 터치를 감지하도록 설정된 터치 회로(touch circuitry), 또는 상기 터치에 의해 발생되는 힘의 세기를 측정하도록 설정된 센서 회로(예: 압력 센서)를 포함할 수 있다.

오디오 모듈(170)은 소리를 전기 신호로 변환시키거나, 반대로 전기 신호를 소리로 변환시킬 수 있다. 일실시예에 따르면, 오디오 모듈(170)은, 입력 장치(150)를 통해 소리를 획득하거나, 음향 출력 장치(155), 또는 전자 장치(101)와 직접 또는 무선으로 연결된 외부 전자 장치(예: 전자 장치(102)) (예: 스피커 또는 헤드폰))를 통해 소리를 출력할 수 있다.

센서 모듈(176)은 전자 장치(101)의 작동 상태(예: 전력 또는 온도), 또는 외부의 환경 상태(예: 사용자 상태)를 감지하고, 감지된 상태에 대응하는 전기 신호 또는 데이터 값을 생성할 수 있다. 일실시예에 따르면, 센서 모듈(176)은, 예를 들면, 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.

인터페이스(177)는 전자 장치(101)이 외부 전자 장치(예: 전자 장치(102))와 직접 또는 무선으로 연결되기 위해 사용될 수 있는 하나 이상의 지정된 프로토콜들을 지원할 수 있다. 일실시예에 따르면, 인터페이스(177)는, 예를 들면, HDMI(high definition multimedia interface), USB(universal serial bus) 인터페이스, SD카드 인터페이스, 또는 오디오 인터페이스를 포함할 수 있다.

연결 단자(178)는, 그를 통해서 전자 장치(101)가 외부 전자 장치(예: 전자 장치(102))와 물리적으로 연결될 수 있는 커넥터를 포함할 수 있다. 일실시예에 따르면, 연결 단자(178)은, 예를 들면, HDMI 커넥터, USB 커넥터, SD 카드 커넥터, 디스플레이 포트(display port ;DP) 또는 오디오 커넥터(예: 헤드폰 커넥터)를 포함할 수 있다.

햅틱 모듈(179)은 전기적 신호를 사용자가 촉각 또는 운동 감각을 통해서 인지할 수 있는 기계적인 자극(예: 진동 또는 움직임) 또는 전기적인 자극으로 변환할 수 있다. 일실시예에 따르면, 햅틱 모듈(179)은, 예를 들면, 모터, 압전 소자, 또는 전기 자극 장치를 포함할 수 있다.

카메라 모듈(180)은 정지 영상 및 동영상을 촬영할 수 있다. 일실시예에 따르면, 카메라 모듈(180)은 하나 이상의 렌즈들, 이미지 센서들, 이미지 시그널 프로세서들, 또는 플래시들을 포함할 수 있다.

전력 관리 모듈(188)은 전자 장치(101)에 공급되는 전력을 관리할 수 있다. 일실시예에 따르면, 전력 관리 모듈(188)은, 예를 들면, PMIC(power management integrated circuit)의 적어도 일부로서 구현될 수 있다. 전자 장치(101)에 공급되는 전력은 유선 또는 무선 방식으로 공급될 수 있다. 예를 들어, 전자 장치(101)는 무선으로 전력을 공급받기 위해 무선 충전 모듈(미도시)를 포함할 수 있다. 무선 충전 모듈은 자기 유도 방식 또는 공진 유도 방식으로 전력을 수신하는 장치일 수 있다. 무선 충전 모듈은 도전성의 금속 선이 권선된 무선 충전 코일을 포함할 수 있다.

배터리(189)는 전자 장치(101)의 적어도 하나의 구성 요소에 전력을 공급할 수 있다. 일실시예에 따르면, 배터리(189)는, 예를 들면, 재충전 불가능한 1차 전지, 재충전 가능한 2차 전지 또는 연료 전지를 포함할 수 있다.

통신 모듈(190)은 전자 장치(101)와 외부 전자 장치(예: 전자 장치(102), 전자 장치(104), 또는 서버(108))간의 직접(예: 유선) 통신 채널 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(190)은 프로세서(120)(예: 어플리케이션 프로세서)와 독립적으로 운영되고, 직접(예: 유선) 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일실시예에 따르면, 통신 모듈(190)은 무선 통신 모듈(192)(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(194)(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다. 이들 통신 모듈 중 해당하는 통신 모듈은 제 1 네트워크(198)(예: 블루투스, WiFi direct 또는 IrDA(infrared data association) 같은 근거리 통신 네트워크) 또는 제 2 네트워크(199)(예: 셀룰러 네트워크, 인터넷, 또는 컴퓨터 네트워크(예: LAN 또는 WAN)와 같은 원거리 통신 네트워크)를 통하여 외부 전자 장치와 통신할 수 있다. 이런 여러 종류의 통신 모듈들은 하나의 구성 요소(예: 단일 칩)으로 통합되거나, 또는 서로 별도의 복수의 구성 요소들(예: 복수 칩들)로 구현될 수 있다. 무선 통신 모듈(192)은 가입자 식별 모듈(196)에 저장된 가입자 정보(예: 국제 모바일 가입자 식별자(IMSI))를 이용하여 제 1 네트워크(198) 또는 제 2 네트워크(199)와 같은 통신 네트워크 내에서 전자 장치(101)를 확인 및 인증할 수 있다.

안테나 모듈(197)은 신호 또는 전력을 외부(예: 외부 전자 장치)로 송신하거나 외부로부터 수신할 수 있다. 일실시예에 따르면, 안테나 모듈은 서브스트레이트(예: PCB) 위에 형성된 도전체 또는 도전성 패턴으로 이루어진 방사체를 포함하는 하나의 안테나를 포함할 수 있다. 일실시예에 따르면, 안테나 모듈(197)은 복수의 안테나들을 포함할 수 있다. 이런 경우, 제 1 네트워크(198) 또는 제 2 네트워크(199)와 같은 통신 네트워크에서 사용되는 통신 방식에 적합한 적어도 하나의 안테나가, 예를 들면, 통신 모듈(190)에 의하여 상기 복수의 안테나들로부터 선택될 수 있다. 신호 또는 전력은 상기 선택된 적어도 하나의 안테나를 통하여 통신 모듈(190)과 외부 전자 장치 간에 송신되거나 수신될 수 있다. 어떤 실시예에 따르면, 방사체 이외에 다른 부품(예: RFIC)이 추가로 안테나 모듈(197)의 일부로 형성될 수 있다. 다양한 실시예에 따르면 안테나 모듈(197)은 전자 장치(101)가 5G 통신을 지원할 수 있도록 5G 통신 신호를 송수신할 수 있다. 예를 들어, 안테나 모듈(197)은 수기가헤르츠 대역 및 수십에서 수백기가 대역(예: mmWave)의 신호를 송수신할 수 있다. 안테나 모듈은 복수의 안테나(예: 복수의 patch array 안테나)를 포함하여 RF Beam을 생성할 수 있다.

상기 구성요소들 중 적어도 일부는 주변 기기들간 통신 방식(예: 버스, GPIO(general purpose input and output), SPI(serial peripheral interface), 또는 MIPI(mobile industry processor interface))를 통해 서로 연결되고 신호(예: 명령 또는 데이터)를 상호간에 교환할 수 있다.

일실시예에 따르면, 명령 또는 데이터는 제 2 네트워크(199)에 연결된 서버(108)를 통해서 전자 장치(101)와 외부의 전자 장치(104)간에 송신 또는 수신될 수 있다. 전자 장치(102, 104) 각각은 전자 장치(101)와 동일한 또는 다른 종류의 장치일 수 있다. 일실시예에 따르면, 전자 장치(101)에서 실행되는 동작들의 전부 또는 일부는 외부 전자 장치들(102, 104, or 108) 중 하나 이상의 외부 장치들에서 실행될 수 있다. 예를 들면, 전자 장치(101)가 어떤 기능이나 서비스를 자동으로, 또는 사용자 또는 다른 장치로부터의 요청에 반응하여 수행해야 할 경우에, 전자 장치(101)는 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 하나 이상의 외부 전자 장치들에게 그 기능 또는 그 서비스의 적어도 일부를 수행하라고 요청할 수 있다. 상기 요청을 수신한 하나 이상의 외부 전자 장치들은 요청된 기능 또는 서비스의 적어도 일부, 또는 상기 요청과 관련된 추가 기능 또는 서비스를 실행하고, 그 실행의 결과를 전자 장치(101)로 전달할 수 있다. 전자 장치(101)는 상기 결과를, 그대로 또는 추가적으로 처리하여, 상기 요청에 대한 응답의 적어도 일부로서 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.

도 2는, 본 문서에 개시된 다양한 실시예에 따른 전자 장치의 블록도이다.

다양한 실시예에 따르면, 전자 장치(예: 도 1의 전자 장치(101))는 카메라(270)(예: 도 1의 카메라 모듈(180)) 및 프로세서(230)(예: 도 1의 프로세서(120))를 포함할 수 있다.

다양한 실시예에 따르면, 카메라(270)는 전자 장치의 전면 및/또는 후면에 배치될 수 있다. 카메라(270)는 피사체를 촬영하여 이미지 신호를 생성할 수 있다. 카메라(270)는 빛을 전기적 신호로 변환하는 소자(예: CMOS(complementary metal-oxide-semiconductor), CCD(charge-coupled device))를 구비하는 이미지 센서를 포함할 수 있다. 카메라(270)는 다양한 화각(angle of view 또는 field of view)으로 영상을 촬영할 수 있다. 여기서 화각은 카메라(270)로 촬영되는 영상의 범위로 이해될 수 있다. 예를 들어, 화각이 넓다는 것은 영상이 넓은 범위로 촬영된다는 것을 의미하고, 화각이 좁다는 것은 영상이 좁은 범위로 촬영된다는 것을 의미할 수 있다. 화각은 렌즈를 통해 이미지 센서에 입사되는 빛의 범위를 조절함으로써 변경될 수도 있고, 영상을 크롭(crop)하여 변경될 수도 있다. 예를 들어, 이미지 센서로 수신되는 영상 정보 중 일부를 크롭하는 경우 원 영상에 비해 좁은 화각의 영상을 획득할 수 있다. 영상을 크롭하여 화각을 조절하는 경우 영상의 해상도(resolution)이 변경될 수 있다. 예를 들어, 카메라(270)의 이미지 센서가 최대 8000 X 6000의 해상도를 가질 때, 영상을 크롭하여 7680 X 4320의 해상도의 영상을 획득할 수 있다. 이하에서는 크롭에 의한 해상도를 변경도 화각을 조절하는 것으로 동일시하여 설명하도록 한다.

다양한 실시예에 따르면, 프로세서(230)는 카메라(270)로부터 수신되는 이미지 신호를 처리하여 디스플레이(210)(예: 도 1의 표시 장치(160))에 영상을 표시할 수 있다. 예를 들어, 프로세서(230)는 프리뷰 영상(예: 도 4의 프리뷰 영상(421)을 디스플레이(210)에 표시할 수 있다. 프리뷰 영상은 카메라(270)로 촬영되는 실시간 영상을 의미할 수 있다. 사용자는 프리뷰 영상을 확인하며 촬영할 영역, 노출 정도, 구도 등을 확인할 수 있다. 프로세서(230)는 카메라(270)로 수신되는 이미지 신호를 미리 결정된 프리뷰 영상의 규격(예: 해상도)에 맞게 처리하여 디스플레이(210)에 표시할 수 있다. 예를 들어, 프로세서(230)는 이미지 신호를 FHD(full hd, 1920 X 1080) 규격으로 변환(예: 리사이징)하여 디스플레이(210)에 표시할 수 있다. 프로세서(230)는 현재 설정된 촬영 화각의 영상을 프리뷰 영상으로 변환하여 표시할 수 있다. 촬영 화각이 변경되는 경우에는 변경된 화각의 영상을 프리뷰 영상으로 변환하여 표시할 수 있다. 다양한 실시예에 따르면, 프로세서(230)는 프리뷰 명령을 생성할 수 있다. 프로세서(230)는 생성된 프리뷰 명령에 따라 프리뷰 영상을 디스플레이(210)에 표시할 수 있다. 프리뷰 명령은 다양한 트리거에 의해 생성될 수 있다. 예를 들어, 사용자가 카메라(270) 관련 어플리케이션을 실행하면, 프리뷰 명령이 생성될 수 있다.

다양한 실시예에 따르면, 프로세서(230)는 현재 설정된 촬영 화각으로 이미지(예: 도 4의 제1 화각 이미지(431) 또는 제2 화각 이미지(441))를 생성하여 제공할 수 있다. 프로세서(230)는 사용자의 다양한 입력(예: 터치 입력, 음성 입력 및 제스처 입력 등)을 수신하여 촬영 명령을 생성할 수 있다. 프로세서(230)는 촬영 명령에 기반하여 사용자의 입력이 수신된 시점에서 카메라(270)에 수신된 이미지 신호를 처리하여 현재 설정된 촬영 화각의 이미지로 생성할 수 있다.

다양한 실시예에 따르면, 프로세서(230)는 카메라(270)를 통해 획득되는 영상(예: 프리뷰 영상)에 포함된 피사체의 상태를 분석할 수 있다. 프로세서(230)는 영상에 포함된 피사체의 상태에 기반하여 촬영 화각을 결정할 수 있다. 결정된 촬영 화각에 따라 프리뷰 영상 및 이미지가 제공될 수 있다. 프로세서(230)는 촬영 화각이 변경되더라도 프리뷰 영상이 끊김없이 제공될 수 있도록 미리 준비할 수 있다.

다양한 실시예에 따르면, 도 2에 도시된 것과 같이, 프로세서(230)는 영상 구성부(231), 영상 제공부(232) 및 영상 분석부(233)를 포함할 수 있다. 영상 구성부(231), 영상 제공부(232) 및 영상 분석부(233)는 설명의 편의를 위하여 구분한 것에 불과하며 물리적으로 구분되는 구성은 아닐 수 있다. 영상 구성부(231)는 프리뷰 영상을 표시하기 위한 프리뷰 명령을 생성하고, 이미지를 생성하기 위한 촬영 명령을 생성할 수 있다. 영상 제공부(232)는 카메라(270)로부터 이미지 신호를 수신하여 영상 구성부(231)의 제어에 따라 영상을 제공할 수 있다. 영상 분석부(233)는 영상 제공부(232)에서 제공되는 영상에 포함된 피사체의 상태를 분석하여 촬영 화각을 결정할 수 있다. 영상 분석부(233)가 분석하는 피사체는 예를 들어 인물의 얼굴 및 동물의 얼굴일 수 있다. 경우에 따라서는 사용자가 관심을 갖는 피사체를 직접 선택할 수도 있다. 이 경우에 영상 분석부(233)는 사용자가 선택한 피사체를 분석할 수도 있다.

다양한 실시예에 따르면, 전자 장치는 이미지 신호 프로세서(250)(image signal processor; ISP)를 포함할 수 있다. 이미지 신호 프로세서(250)는 카메라(270)의 이미지 센서에서 수신한 이미지 신호를 후처리(post processing)할 수 있다. 이미지 신호 프로세서(250)는 이미지 센서에 수신된 원 이미지 신호에 노이즈 등을 제거하여 영상의 품질을 향상시킬 수 있다. 이미지 신호 프로세서(250)는 별도의 IC(integrated circuit)로 구성될 수 있다. 다양한 실시예에 따르면, 이미지 신호 프로세서(250)는 프로세서(230)에 포함되거나, 카메라(270)에 포함될 수도 있다.

도 3은, 본 문서에 개시된 다양한 실시예에 다른 흐름도이고, 도 4는, 본 문서에 개시된 다양한 실시예에 따른 다양한 촬영 화각에 대응되는 파이프라인의 개념도이다.

다양한 실시예에 따르면, 영상 구성부(231)는 영상 제공부(232)에 파이프라인(pipeline) 준비 요청을 송신할 수 있다(311). 영상 제공부(232)는 파이프라인 준비 요청을 수신하여 파이프라인을 구성할 수 있다(312). 영상 제공부(232)는 프리뷰 파이프라인(420) 및 화각 파이프라인(예: 제1 화각 파이프라인(430), 제2 화각 파이프라인(440))을 구성할 수 있다.

다양한 실시예에 따르면, 파이프라인은 이미지 신호를 처리하여 프리뷰 영상(421) 또는 이미지(예: 제1 화각 이미지(431), 제2 화각 이미지(441)) 생성을 수행하는 일련의 데이터 처리 구조를 의미할 수 있다. 파이프라인에서 수행되는 데이터 처리는 하드웨어 또는 소프트웨어를 통해 이루어질 수 있다. 예를 들어, 데이터 처리는 특별한 목적을 위해 물리적으로 연결된(예: 하드 와이어드(hard wired)) 이미지 프로세싱 블록(image processing block) 및 소프트웨어(예: 카메라 관련 어플리케이션)에서 이루어질 수 있다. 카메라의 이미지 센서에서 수신되는 이미지 신호는 다양한 처리 과정을 통해 프리뷰 영상(421) 또는 이미지로 변환될 수 있다. 예를 들어, 이미지 신호는 카메라, 프로세서 및 이미지 신호 프로세서 중 적어도 하나를 통해 처리될 수 있다. 파이프라인의 이미지 프로세싱(410)은 결함 보정(defective pixel correction), 색상 보간(color interpolation), 색 오차 보정(color correction), 감마 보정(gamma correction), RGB의 색 영역을 YCrCb로 변환, 노이즈 감소(noise reduction), 에지 강조(edge enhancement), 노출, 대비, 계조 및 화이트밸런스와 같은 보정 및 인코딩을 포함할 수 있다. 파이프라인에 입력되는 이미지 신호는 파이프라인을 통해 위와 같은 후처리(post processing)을 거치면서 전자 장치의 디스플레이에 표시될 수 있는 프리뷰 영상(421) 또는 이미지로 변환될 수 있다.

다양한 실시예에 따르면, 영상 제공부(232)가 준비하는 프리뷰 파이프라인(420)은 촬영 중인 영상을 실시간으로 표시하는 프리뷰 영상(421)을 처리할 수 있다. 프리뷰 파이프라인(420)은 이미지 신호를 실시간으로 수신하여 프리뷰 영상(421)으로 변환할 수 있다. 프리뷰 파이프라인(420)은 미리 설정된 해상도로 영상을 변환(예: 리사이징)할 수 있다.

다양한 실시예에 따르면, 영상 제공부(232)가 준비하는 화각 파이프라인은 이미지 신호를 수신하여 촬영 화각에 맞는 스틸 사진 형태의 이미지로 변환할 수 있다. 화각 파이프라인은 예를 들어, 제1 화각 파이프라인(430) 및 제2 화각 파이프라인(440)을 포함할 수 있다. 여기서 제1 화각은 제2 화각에 비해 넓은 화각을 의미할 수 있다. 제1 화각 파이프라인(430)은 이미지 신호를 수신하여 제1 화각 이미지(431)로 변환할 수 있다. 제2 화각 파이프라인(440)은 이미지 신호를 수신하여 제2 화각 이미지(441)로 변환할 수 있다. 제1 화각 이미지(431)는 제2 화각 이미지(441)보다 넓은 범위로 촬영된 이미지일 수 있다.

종래의 경우, 촬영 화각이 변경되면 구성된 파이프라인을 제거하고 변경된 화각에 대응되는 새로운 파이프라인을 준비하는 동작이 요구된다. 이 과정에서 이미지 신호의 수신 중단이 요구되며 이로 인해 화각 변경 과정에서 디스플레이에 프리뷰 영상 출력이 중단되는 문제가 발생할 수 있다. 본 문서에 개시된 다양한 실시예에 따른 전자 장치는 프리뷰 파이프라인(420) 및 복수의 화각에 대응되는 화각 파이프라인(430, 440)을 미리 구성할 수 있다. 따라서, 촬영 화각이 변경되더라도 파이프라인의 제거가 필요하지 않다. 미리 구성된 파이프라인을 통해 이미지 신호를 계속적으로 수신할 수 있으므로 촬영 화각이 변경되는 과정에서도 디스플레이에 프리뷰 영상(421)을 계속적으로 출력할 수 있다. 이로 인해, 본 문서에 개시된 다양한 실시예에 따른 전자 장치는 촬영 화각이 변경되더라도 화질 열화 없이 끊김없는(seamless) 프리뷰 영상(421) 제공이 가능할 수 있다.

다양한 실시예에 따르면, 영상 제공부(232)는 파이프라인 구성이 완료되면 파이프라인 준비 완료 신호를 영상 구성부(231)에 송신할 수 있다(313).

다양한 실시예에 따르면, 영상 구성부(231)는 프리뷰 명령을 영상 제공부(232)에 송신할 수 있다(321). 프리뷰 명령은 다양한 트리거에 의해 생성될 수 있다. 예를 들어, 사용자가 카메라 관련 어플리케이션을 실행시키는 경우, 프리뷰 명령이 생성될 수 있다. 프리뷰 명령은 현재 설정된 촬영 화각을 포함할 수 있다. 영상 제공부(232)는 이미지 신호를 수신하여 미리 구성된 프리뷰 파이프라인(420)을 통해 이미지 신호를 처리하여 프리뷰 영상(421)을 생성할 수 있다(322). 이 때, 영상 제공부(232)는 현재 설정된 촬영 화각에 맞게 프리뷰 영상(421)을 변환(예: 리사이징)할 수 있다.

다양한 실시예에 따르면, 영상 제공부(232)에서 생성된 프리뷰 영상(421)은 영상 구성부(231)에 제공될 수 있고(323) 영상 분석부(233)에 제공될 수 있다(324). 영상 구성부(231)는 영상 분석부(233)에 프리뷰 영상(421) 분석 요청을 송신할 수 있다(331). 영상 분석부(233)는 프리뷰 영상(421) 분석 요청을 수신하여 프리뷰 영상(421)을 분석할 수 있다. 영상 분석부(233)는 프리뷰 영상(421)에 포함된 피사체의 상태를 분석하여 촬영 화각을 결정할 수 있다(332). 영상 분석부(233)는 촬영 화각의 변경 여부를 결정하여 결정된 촬영 화각을 영상 구성부(231)에 제공할 수 있다(333).

예를 들어, 현재 제1 화각으로 프리뷰 영상(421)이 제공되고 있는 상태에서 영상 분석부(233)가 제2 화각으로 촬영 화각을 변경할 것을 결정할 수 있다. 영상 분석부(233)는 제2 화각으로 촬영 화각을 결정하여 결정된 화각을 영상 구성부(231)에 제공할 수 있다. 영상 구성부(231)는 변경된 촬영 화각에 따라 영상 제공부(232)에 프리뷰 명령을 송신할 수 있다(325). 영상 제공부(232)는 이미지 신호를 수신하여 미리 구성된 프리뷰 파이프라인(420)을 통해 이미지 신호를 처리하여 제2 화각의 프리뷰 영상(421)을 생성할 수 있다(326). 영상 제공부(232)에서 생성한 제2 화각의 프리뷰 영상(421)은 영상 구성부(231)에 제공될 수 있고(327) 영상 분석부(233)에 제공될 수 있다(328). 영상 분석부(233)의 영상 분석 결과 촬영 화각 변경이 필요하지 않은 경우에는 앞에서 설명한 변경된 촬영 화각에 따른 프리뷰 명령 송신(325) 및 변경된 촬영 화각의 프리뷰 영상 제공(327) 동작은 생략될 수 있다.

다양한 실시예에 따르면, 영상 구성부(231)는 촬영 명령을 생성하여 영상 제공부(232)에 송신할 수 있다(341). 촬영 명령은 사용자의 다양한 입력(예: 터치 입력, 음성 입력 및 제스처 입력 등)에 의해 생성될 수 있다. 영상 제공부(232)는 촬영 명령을 수신하여 미리 구성된 화각 파이프라인(예: 제1 화각 파이프 라인(430) 또는 제2 화각 파이프라인(440))을 이용하여 이미지를 생성할 수 있다(342). 영상 제공부(232)는 현재 촬영 화각에 대응되는 화각 파이프라인을 이용하여 이미지를 생성할 수 있다. 예를 들어, 현재 촬영 화각이 제1 화각인 경우에는 제1 화각 파이프라인(430)을 이용하여 제1 화각 이미지(431)를 생성할 수 있다. 현재 촬영 화각이 제2 화각인 경우에는 제2 화각 파이프라인(440)을 이용하여 제2 화각 이미지(441)를 생성할 수 있다. 영상 제공부(232)는 생성된 이미지를 영상 구성부(231)에 제공할 수 있다(343). 영상 구성부(231)는 영상 제공부(232)로부터 제공받은 이미지를 메모리(예: 도 1의 메모리(130))에 저장할 수 있다(344).

도 5는, 본 문서에 개시된 다양한 실시예에 따른 촬영 방법의 순서도이고, 도 6a 내지 도 6d는, 본 문서에 개시된 다양한 실시예에 따른 촬영 화각 전환을 설명하기 위한 도면이다. 이하에서는, 도 2에서 설명된 구성과 동일한 구성요소에는 도 2에서 사용한 부재번호를 동일하게 사용하도록 한다.

다양한 실시예에 따르면, 영상 분석부(233)는 도 5에 도시된 것과 같은 순서로 촬영 화각을 결정할 수 있다. 도 5에 도시된 순서는 예시에 불과하며 영상 분석부(233)는 이외에도 다양한 순서로 촬영 화각을 결정할 수 있다.

다양한 실시예에 따르면, 영상 분석부(233)는 영상 제공부(232)에서 제공되는 프리뷰 영상(예: 도 4의 프리뷰 영상(421))을 수신할 수 있다(510). 영상 분석부(233)는 영상 구성부(231)에서 송신되는 영상 분석 요청을 수신할 수 있다. 사용자는 카메라 관련 어플리케이션의 설정에서 자동 화각 변경 기능을 사용할지 여부(560)를 선택할 수 있다. 사용자가 자동 화각 변경 기능을 사용하는 것으로 선택한 경우에는 프리뷰 영상 수신과 함께 영상 분석 요청이 송신될 수 있다. 다양한 실시예에 따르면, 사용자는 프리뷰 영상과 함께 표시되는 UI(user interface)를 통해 자동 화각 변경 여부를 선택할 수도 있다. 사용자가 자동 화각 변경 여부를 선택한 경우에는 영상 구성부(231)에서 영상 분석 요청이 송신될 수 있다. 다양한 실시예에 따르면, 사용자로부터 자동 화각 변경 여부의 선택 여부를 수신하는 동작(560)은 생략될 수 있다.

다양한 실시예에 따르면, 영상 분석부(233)는 프리뷰 영상에 포함된 피사체를 검출하고 인식할 수 있다(520). 피사체 검출은 프리뷰 영상에서 배경과 피사체를 구분하는 동작을 의미할 수 있다. 피사체 검출 동작에서 영상 분석부(233)는 프리뷰 영상에 포함된 피사체의 수를 검출할 수 있다. 피사체 인식은 검출된 피사체를 식별하는 동작을 의미할 수 있다. 예를 들어, 영상 분석부(233)는 피사체의 종류를 인식하거나 피사체가 인물인 경우 얼굴을 인식(face recognition)하여 그 인물이 누구인지를 인식할 수 있다.

다양한 실시예에 따르면, 영상 분석부(233)는 검출 및 인식된 피사체의 상태를 분석할 수 있다(530). 피사체의 상태는 예를 들어, 피사체의 수, 크기, 위치 및 노출 정도 중 적어도 하나를 포함할 수 있다. 영상 분석부(233)는 피사체의 상태를 분석하여 촬영 화각 변경이 필요한 경우에는 촬영 화각 변경을 결정하고 결정된 촬영 화각을 영상 구성부(231)로 송신할 수 있다(540). 촬영 화각 변경이 필요하지 않은 경우에는 현재 촬영 화각을 유지하고 현재 촬영 화각이 유지되었음을 영상 구성부(231)로 송신할 수 있다(550). 사용자는 디스플레이(600)에 표시되는 UI(630)을 통해 현재 촬영 화각을 확인할 수 있다. UI(630)는 현재 촬영 화각이 제1 화각임을 나타내는 제1 표시(631)와 현재 촬영 화각이 제2 화각임을 나타내는 제2 표시(633)를 포함할 수 있다. 여기서 제1 화각은 제2 화각보다 넓은 화각을 의미할 수 있다.

다양한 실시예에 따르면, 피사체의 수가 많은 경우에 영상 분석부(233)는 촬영 화각이 넓어지도록 촬영 화각을 결정할 수 있다. 도 6a에 도시된 것과 같이, 피사체의 수가 많은 경우 영상 분석부(233)는 현재 촬영 화각(예: 제2 화각)보다 넓은 촬영 화각(예: 제1 화각)으로 촬영 화각 변경을 결정할 수 있다. 예를 들어, 도 6a의 (a)의 경우, 제2 표시(633)가 선택되었으므로 도 6a의 (a)의 현재 촬영 화각은 제2 화각임을 알 수 있다. 영상 분석부(233)의 분석 결과 화각이 변경될 수 있다. 도 6a의 (b)와 같이 제1 표시(631)가 선택되면 현재 촬영 화각은 제1 화각임을 알 수 있다. 다양한 실시예에 따르면, 영상 분석부(233)는 피사체의 인식 결과를 촬영 화각 변경에 반영할 수 있다. 예를 들어, 프리뷰 영상에 포함된 둘 이상의 피사체가 모두 전자 장치에 등록된 인물인 경우에는 촬영 화각을 넓게 변경할 수 있다. 프리뷰 영상에 포함된 피사체가 전자 장치에 등록되지 않은 인물인 경우에는 촬영 화각을 변경하지 않을 수 있다. 또한, 복수의 피사체가 검출되더라도 피사체가 기준 속도 이상으로 움직이는 경우에는 촬영 화각을 변경하지 않을 수 있다. 경우에 따라서는 사용자의 선호 이미지를 분석하여 촬영 화각을 변경하는 것도 가능할 수 있다. 예를 들어, 영상 분석부(233)는 전자 장치에 저장된 사진들을 분석하여 사용자가 피사체를 크게 촬영하는 것을 선호하는 것을 확인할 수 있다. 이러한 경우 영상 분석부(233)는 현재 촬영 화각이 좁아 피사체가 다소 크게 촬영되는 상황이더라도 촬영 화각을 변경하지 않을 수 있다.

다양한 실시예에 따르면, 영상 분석부(233)는 피사체의 프리뷰 영상 내의 위치를 고려하여 촬영 화각 변경을 변경할 수 있다. 영상 분석부(233)는 도 6b에 도시된 것과 같이 피사체의 일부가 프리뷰 영상에 포함되지 않은 경우에는 촬영 화각을 넓어지게 변경할 수 있다. 도 6b의 (a)의 경우, 제2 표시(633)가 선택되어 있으므로 현재 촬영 화각은 제2 화각임을 알 수 있다. 촬영 화각이 변경된 도 6b의 (b)의 경우, 제1 표시(631)가 선택되어 있으므로 현재 촬영 화각은 제1 화각임을 알 수 있다. 촬영 화각이 넓어지면 프리뷰 영상에 포함되지 않았던 피사체의 일부분이 프리뷰 영상 내에 포함될 수 있다. 또한, 영상 분석부(233)는 피사체가 도 6c에 도시된 것과 같이, 프리뷰 영상의 가장자리에 존재하는 경우에는 촬영 화각을 좁아지게 변경할 수 있다. 도 6c의 (a)의 경우, 제1 표시(631)가 선택되어 있으므로 현재 촬영 화각은 제1 화각임을 알 수 있다. 촬영 화각이 변경된 도 6c의 (b)의 경우, 제2 표시(633)가 선택되어 있으므로 현재 촬영 화각은 제2 화각임을 알 수 있다. 영상의 가장자리 또는 주변부에는 카메라의 광학적 특성에 의해 왜곡(distortion)이 발생할 수 있다. 또한, 주변부는 중심부에 비해 화질이 낮을 수 있다. 영상 분석부(233)는 촬영 화각을 좁아지게 변경하여 사용자로 하여금 피사체를 프리뷰 영상의 중심부로 이동시키도록 유도할 수 있다. 다양한 실시예에 따르면, 영상 분석부(233)는 피사체의 인식 결과를 촬영 화각 변경에 반영할 수 있다. 예를 들어, 프리뷰 영상의 주변부에 위치한 피사체가 전자 장치에 등록되지 않은 인물인 경우에는 촬영 화각을 변경하지 않을 수 있다.

다양한 실시예에 따르면, 영상 분석부(233)는 피사체의 노출 정도를 고려하여 촬영 화각을 변경할 수 있다. 예를 들어, 도 6d에 도시된 것과 같이 프리뷰 영상 내에 밝은 광원(예: 태양 및 조명)이 피사체와 함께 존재하는 경우, 카메라의 측광 방식에 따라 피사체의 노출이 과도하게 줄어들 수 있다. 이로 인해 피사체의 노출 정도가 부족해질 수 있다. 이러한 상태에서 촬영을 진행하면 피사체가 어둡게 촬영될 수 있다. 영상 분석부(233)는 촬영 화각을 좁아지게 변경하여 프리뷰 영상 내에 존재하던 밝은 광원을 프리뷰 영상 내에서 제거되도록 할 수 있다. 도 6d의 (a)의 경우, 제1 표시(631)가 선택되어 있으므로 현재 촬영 화각은 제1 화각임을 알 수 있다. 촬영 화각이 변경된 도 6d의 (b)의 경우, 제2 표시(633)가 선택되어 있으므로 현재 촬영 화각은 제2 화각임을 알 수 있다.

다양한 실시예에 따르면, 영상 분석부(233)는 앞서 설명한 피사체의 상태에 따라 촬영 화각 변경 조건이 충돌하는 경우에는, 미리 설정된 우선 순위에 따라 우선 순위가 높은 기준을 적용하여 촬영 화각을 변경할 수 있다.

앞에서는 영상 분석부(233)가 피사체의 상태에 따라 촬영 화각을 결정하고 촬영 화각이 변경되는 것으로 설명하였으나, 영상 분석부(233)가 결정한 촬영 화각을 디스플레이에 표시할 수도 있다. 이 경우, 사용자의 선택에 따라 촬영 화각이 변경되거나 변경되지 않을 수 있다.

도 7은, 본 문서에 개시된 다양한 실시예에 따른 촬영 방법의 순서도이다. 이하에서는, 도 2에서 설명된 구성과 동일한 구성요소에는 도 2에서 사용한 부재번호를 동일하게 사용하도록 한다.

다양한 실시예에 따르면, 영상 분석부(233)의 피사체 상태 분석은 도 7에 도시된 순서로 이루어질 수 있다. 도 7에 도시된 순서는 예시에 불과하며 영상 분석부(233)는 이 밖에도 다양한 순서 및 방법으로 피사체의 상태를 분석할 수 있다. 영상 분석부(233)가 분석하는 피사체는 예를 들어 인물의 얼굴 및 동물의 얼굴일 수 있다. 경우에 따라서는 사용자가 관심을 갖는 피사체를 직접 선택할 수도 있다. 이 경우에 영상 분석부(233)는 사용자가 선택한 피사체를 분석할 수도 있다.

다양한 실시예에 따르면, 영상 분석부(233)는 현재 프리뷰 영상(예: 도 4의 프리뷰 영상(421))이 전자 장치가 지원하는 가장 넓은 화각으로 제공되는지 여부를 확인할 수 있다(710). 현재 프리뷰 영상이 가장 넓은 화각이 아닌 경우에 영상 분석부(233)는 피사체의 수를 확인할 수 있다(721). 피사체가 2개 이상 존재하는 경우에는 촬영 화각을 확대할 수 있다(723)(예: 도 6a). 촬영 화각 확대는 촬영 화각을 넓게 변경하는 것을 의미할 수 있다. 피사체가 하나인 경우에 영상 분석부(233)는 피사체의 위치가 가장자리에 존재하는지 확인할 수 있다(722). 피사체가 프리뷰 영상의 가장자리에 존재하여 일부가 잘리는 경우에는 촬영 화각을 확대할 수 있다(723)(예: 도 6b).

다양한 실시예에 따르면, 영상 분석부(233)는 현재 프리뷰 영상에서 노출 과다로 인한 포화(saturation)가 발생하는지 여부를 확인할 수 있다(730). 포화는 이미지 센서가 구분할 수 없는 밝기 단계의 빛이 프리뷰 영상 내에 존재하는 것을 의미할 수 있다. 포화가 발생한 경우라면, 영상 분석부(233)는 포화를 유발하는 구성이 현재 설정된 촬영 화각에만 존재하는 것인지 확인할 수 있다(740).

다양한 실시예에 따르면, 포화를 유발하는 구성(예: 밝은 광원)이 현재 설정된 촬영 화각에만 존재하는 것이 아닌 경우에는 피사체가 가장자리에 존재하는지 여부를 확인할 수 있다(741). 피사체가 가장자리에 존재하는 경우에는 피사체에 왜곡이 발생할 수 있다. 영상 분석부(233)는 촬영 화각을 축소할 수 있다(751). 촬영 화각 축소는 촬영 화각을 좁게 변경하는 것을 의미할 수 있다. 촬영 화각의 축소를 통해 사용자로 하여금 가장자리에 존재하는 피사체를 중심부로 이동시킬 수 있도록 유도할 수 있다(예: 도 6c).

다양한 실시예에 따르면, 포화를 유발하는 구성이 현재 설정된 촬영 화각에만 존재하는 경우에는 촬영 화각 변경에 따른 피사체의 상태(예: 잘림)를 분석할 수 있다(750). 촬영 화각을 변경하더라도 피사체가 변경되지 않는 경우에는 촬영 화각을 축소할 수 있다(751)(예: 도 6d). 촬영 화각을 변경하면 피사체가 변경되는 경우에는 촬영 화각을 유지할 수 있다.

다양한 실시예에 따르면, 영상 분석부(233)가 결정한 촬영 화각은 영상 구성부(231)에 제공되고 영상 구성부(231)는 결정된 촬영 화각에 따른 촬영 명령을 영상 제공부(232)에 송신할 수 있다. 영상 제공부(232)는 결정된 촬영 화각에 대응되는 화각 파이프라인(예: 도 4의 제1 화각 파이프라인(430) 또는 제2 화각 파이프라인(440))을 이용하여 이미지 센서에서 수신되는 이미지 신호를 결정된 촬영 화각의 이미지(예: 도 4의 제1 화각 이미지(431) 또는 제2 화각 이미지(441)로 변환할 수 있다. 영상 구성부(231)는 변환된 이미지를 획득할 수 있다(760).

다양한 실시예에 따르면, 전자 장치는 서로 다른 화각을 갖는 복수의 카메라를 포함할 수 있다. 예를 들어, 전자 장치는 표준 화각의 카메라, 광각 카메라 및 망원 카메라를 포함할 수 있다. 전자 장치의 프로세서는 서로 다른 복수의 카메라의 화각에 대응되는 화각 파이프라인을 미리 구성할 수 있다. 예를 들어, 표준 화각의 카메라에 대응되는 화각 파이프라인과, 광각 카메라에 대응되는 화각 파이프라인과 망원 카메라에 대응되는 화각 파이프라인을 미리 구성할 수 있다.

다양한 실시예에 따르면, 영상 분석부는 피사체의 상태를 분석하여 분석된 피사체의 상태에 기반하여 복수의 카메라 중 하나를 선택할 수 있다. 영상 구성부(231)는 선택된 카메라를 포함하는 촬영 명령을 영상 제공부(232)에 송신할 수 있다. 영상 제공부(233)는 미리 구성된 화각 파이프라인을 이용하여 선택된 카메라에서 수신되는 이미지 신호를 이미지로 생성할 수 있다.

본 문서에 개시된 다양한 실시예에 따른 전자 장치는, 카메라 및 상기 카메라와 작동적으로 연결되는 프로세서를 포함할 수 있고, 상기 프로세서는, 상기 카메라를 통해 서로 다른 적어도 둘 이상의 화각으로 영상을 획득할 수 있도록 준비할 수 있고, 상기 카메라를 통해 획득되는 영상에 포함된 피사체의 상태를 분석할 수 있고, 상기 분석에 기반하여 촬영 화각을 결정할 수 있고, 결정된 촬영 화각으로 프리뷰 영상 및 이미지를 제공할 수 있다.

또한, 상기 프로세서는, 상기 카메라로부터 이미지 신호를 수신하고, 프리뷰 명령 및 촬영 명령 중 적어도 하나에 기반하여 적어도 둘 이상의 화각을 갖는 프리뷰 영상 및 이미지를 제공하는 영상 제공부, 상기 프리뷰 영상에 포함된 피사체의 상태를 분석하여 촬영 화각을 결정하는 영상 분석부 및 상기 영상 분석부에서 결정한 촬영 화각에 따라 상기 프리뷰 명령 및 상기 촬영 명령 중 적어도 하나를 생성하는 영상 구성부를 포함할 수 있다.

또한, 상기 영상 구성부는, 상기 영상 제공부에 프리뷰 파이프라인(pipeline)과 서로 다른 화각의 이미지에 각각 대응되는 복수의 화각 파이프라인을 준비시킬 수 있고, 상기 프리뷰 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 프리뷰 영상으로 변환하는 데이터 처리 구조일 수 있고, 상기 복수의 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 서로 다른 화각의 이미지로 각각 변환하는 데이터 처리 구조일 수 있다.

또한, 상기 영상 구성부는, 상기 영상 제공부에 프리뷰 파이프라인, 제1 화각 파이프라인 및 제2 화각 파이프라인을 준비시킬 수 있고, 상기 제1 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 제1 화각의 이미지로 변환하는 데이터 처리 구조일 수 있고, 상기 제2 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 제1 화각과 다른 화각인 제2 화각의 이미지로 변환하는 데이터 처리 구조일 수 있다.

또한, 상기 영상 제공부는, 상기 프리뷰 명령에 따라 상기 프리뷰 파이프라인을 이용하여 상기 제1 화각 및 제2 화각 중 적어도 하나로 상기 프리뷰 영상을 제공할 수 있고, 상기 촬영 명령에 따라 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 적어도 하나를 이용하여 상기 제1 화각 및 제2 화각 중 적어도 하나로 촬영된 이미지를 제공할 수 있다.

또한, 상기 영상 제공부는, 상기 촬영 명령에 기반하여 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 적어도 하나에서 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 나머지 하나로 데이터 처리 구조를 변경할 수 있되, 상기 변경 과정에서 상기 카메라로부터 이미지 신호를 계속 수신하여 상기 프리뷰 영상을 끊김없이 제공할 수 있다.

또한, 상기 영상 분석부는, 상기 프리뷰 영상에 포함된 피사체의 개수, 위치 및 크기 중 적어도 하나에 기반하여 상기 촬영 화각을 결정할 수 있다.

또한, 상기 영상 분석부는, 등록된 피사체의 개수, 위치 및 크기 중 적어도 하나에 기반하여 상기 촬영 화각을 결정할 수 있다.

또한, 상기 영상 분석부는, 상기 프리뷰 영상에 포함된 피사체의 노출 정도에 기반하여 상기 촬영 화각을 결정할 수 있다.

본 문서에 개시된 다양한 실시예에 따른 카메라 촬영 방법은, 카메라를 통해 서로 다른 적어도 둘 이상의 화각으로 영상을 획득할 수 있도록 준비하는 동작, 상기 카메라를 통해 획득되는 영상에 포함된 피사체의 상태를 분석하는 동작, 상기 분석에 기반하여 촬영 화각을 결정하는 동작 및 결정된 촬영 화각으로 프리뷰 영상 및 이미지를 제공하는 동작을 포함할 수 있다.

또한, 영상 제공부가 상기 카메라로부터 이미지 신호를 수신하고, 프리뷰 명령 및 촬영 명령 중 적어도 하나에 기반하여 적어도 둘 이상의 화각을 갖는 프리뷰 영상 및 이미지를 제공할 수 있고, 영상 분석부가 상기 프리뷰 영상에 포함된 피사체의 상태를 분석하여 촬영 화각을 결정할 수 있고, 영상 구성부가 상기 영상 분석부에서 결정한 촬영 화각에 따라 상기 프리뷰 명령 및 상기 촬영 명령 중 적어도 하나를 생성할 수 있다.

또한, 상기 영상 구성부는, 상기 영상 제공부에 프리뷰 파이프라인과 서로 다른 화각의 이미지에 각각 대응되는 복수의 화각 파이프라인을 준비시킬 수 있고, 상기 프리뷰 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 프리뷰 영상으로 변환하는 데이터 처리 구조일 수 있고, 상기 복수의 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 서로 다른 화각의 이미지로 각각 변환하는 데이터 처리 구조일 수 있다.

또한, 상기 영상 구성부는, 상기 영상 제공부에 프리뷰 파이프라인, 제1 화각 파이프라인 및 제2 화각 파이프라인을 준비시킬 수 있고, 상기 제1 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 제1 화각의 이미지로 변환하는 데이터 처리 구조일 수 있고, 상기 제2 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 제1 화각과 다른 화각인 제2 화각의 이미지로 변환하는 데이터 처리 구조일 수 있다.

또한, 상기 영상 제공부는, 상기 프리뷰 명령에 따라 상기 프리뷰 파이프라인을 이용하여 상기 제1 화각 및 제2 화각 중 적어도 하나로 상기 프리뷰 영상을 제공할 수 있고, 상기 촬영 명령에 따라 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 적어도 하나를 이용하여 상기 제1 화각 및 제2 화각 중 적어도 하나로 촬영된 이미지를 제공할 수 있다.

또한, 상기 영상 제공부는, 상기 촬영 명령에 기반하여 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 적어도 하나에서 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 나머지 하나로 데이터 처리 구조를 변경할 수 있되, 상기 변경 과정에서 상기 카메라로부터 이미지 신호를 계속 수신하여 상기 프리뷰 영상을 끊김없이 제공할 수 있다.

또한, 상기 영상 분석부는, 상기 프리뷰 영상에 포함된 피사체의 개수, 위치 및 크기 중 적어도 하나에 기반하여 상기 촬영 화각을 결정할 수 있다.

또한, 상기 영상 분석부는, 등록된 피사체의 개수, 위치 및 크기 중 적어도 하나에 기반하여 상기 촬영 화각을 결정할 수 있다.

또한, 상기 영상 분석부는, 상기 프리뷰 영상에 포함된 피사체의 노출 정도에 기반하여 상기 촬영 화각을 결정할 수 있다.

본 문서에 개시된 다양한 실시예에 따른 전자 장치는, 서로 다른 화각을 갖는 복수의 카메라 및 상기 복수의 카메라와 작동적으로 연결된 프로세서를 포함할 수 있고, 상기 프로세서는, 상기 복수의 카메라를 통해 서로 다른 적어도 둘 이상의 화각으로 영상을 획득할 수 있도록 준비할 수 있고, 상기 복수의 카메라 중 하나를 통해 획득되는 영상에 포함된 피사체의 상태를 분석할 수 있고, 상기 분석에 기반하여 상기 복수의 카메라 중 하나를 결정할 수 있고, 결정된 카메라를 통해 프리뷰 영상 및 이미지를 제공할 수 있다.

또한, 상기 프로세서는, 프리뷰 파이프라인과 서로 다른 화각의 이미지에 각각 대응되는 복수의 화각 파이프라인을 준비시킬 수 있고, 상기 프리뷰 파이프라인은, 상기 복수의 카메라 중 하나로부터 수신된 이미지 신호를 상기 프리뷰 영상으로 변환하는 데이터 처리 구조일 수 있고, 상기 복수의 화각 파이프라인은, 상기 복수의 카메라로부터 수신된 이미지 신호를 서로 다른 화각의 이미지로 각각 변환하는 데이터 처리 구조일 수 있다.

그리고 본 명세서와 도면에 개시된 본 문서에 개시된 실시예들은 본 문서에 개시된 실시예에 따른 기술 내용을 쉽게 설명하고 본 문서에 개시된 실시예의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 문서에 개시된 실시예의 범위를 한정하고자 하는 것은 아니다. 따라서 본 문서에 개시된 다양한 실시예의 범위는 여기에 개시된 실시예들 이외에도 본 문서에 개시된 다양한 실시예의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 문서에 개시된 다양한 실시예의 범위에 포함되는 것으로 해석되어야 한다.

210: 디스플레이 230: 프로세서
231: 영상 구성부 232: 영상 제공부
233: 영상 분석부 250: 이미지 신호 프로세서
270: 카메라

Claims (20)

1. 전자 장치에 있어서,
   카메라; 및
   상기 카메라와 작동적으로 연결되는 프로세서;를 포함하고,
   상기 프로세서는,
   상기 카메라를 통해 서로 다른 적어도 둘 이상의 화각으로 영상을 획득할 수 있도록 준비하고,
   상기 카메라를 통해 획득되는 영상에 포함된 피사체의 상태를 분석하고,
   상기 분석에 기반하여 촬영 화각을 결정하고,
   결정된 촬영 화각으로 프리뷰 영상 및 이미지를 제공하는 전자 장치.
2. 제1항에 있어서,
   상기 프로세서는,
   상기 카메라로부터 이미지 신호를 수신하고, 프리뷰 명령 및 촬영 명령 중 적어도 하나에 기반하여 적어도 둘 이상의 화각을 갖는 프리뷰 영상 및 이미지를 제공하는 영상 제공부,
   상기 프리뷰 영상에 포함된 피사체의 상태를 분석하여 촬영 화각을 결정하는 영상 분석부 및
   상기 영상 분석부에서 결정한 촬영 화각에 따라 상기 프리뷰 명령 및 상기 촬영 명령 중 적어도 하나를 생성하는 영상 구성부를 포함하는 전자 장치.
3. 제2항에 있어서,
   상기 영상 구성부는,
   상기 영상 제공부에 프리뷰 파이프라인(pipeline)과 서로 다른 화각의 이미지에 각각 대응되는 복수의 화각 파이프라인을 준비시키고,
   상기 프리뷰 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 프리뷰 영상으로 변환하는 데이터 처리 구조이고,
   상기 복수의 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 서로 다른 화각의 이미지로 각각 변환하는 데이터 처리 구조인 전자 장치.
4. 제2항에 있어서,
   상기 영상 구성부는,
   상기 영상 제공부에 프리뷰 파이프라인, 제1 화각 파이프라인 및 제2 화각 파이프라인을 준비시키고,
   상기 제1 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 제1 화각의 이미지로 변환하는 데이터 처리 구조이고,
   상기 제2 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 제1 화각과 다른 화각인 제2 화각의 이미지로 변환하는 데이터 처리 구조인 전자 장치.
5. 제4항에 있어서,
   상기 영상 제공부는,
   상기 프리뷰 명령에 따라 상기 프리뷰 파이프라인을 이용하여 상기 제1 화각 및 제2 화각 중 적어도 하나로 상기 프리뷰 영상을 제공하고,
   상기 촬영 명령에 따라 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 적어도 하나를 이용하여 상기 제1 화각 및 제2 화각 중 적어도 하나로 촬영된 이미지를 제공하는 전자 장치.
6. 제4항에 있어서,
   상기 영상 제공부는,
   상기 촬영 명령에 기반하여 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 적어도 하나에서 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 나머지 하나로 데이터 처리 구조를 변경하되,
   상기 변경 과정에서 상기 카메라로부터 이미지 신호를 계속 수신하여 상기 프리뷰 영상을 끊김없이 제공하는 전자 장치.
7. 제2항에 있어서,
   상기 영상 분석부는,
   상기 프리뷰 영상에 포함된 피사체의 개수, 위치 및 크기 중 적어도 하나에 기반하여 상기 촬영 화각을 결정하는 전자 장치.
8. 제2항에 있어서,
   상기 영상 분석부는,
   등록된 피사체의 개수, 위치 및 크기 중 적어도 하나에 기반하여 상기 촬영 화각을 결정하는 전자 장치.
9. 제2항에 있어서,
   상기 영상 분석부는,
   상기 프리뷰 영상에 포함된 피사체의 노출 정도에 기반하여 상기 촬영 화각을 결정하는 전자 장치.
10. 카메라 촬영 방법에 있어서,
    카메라를 통해 서로 다른 적어도 둘 이상의 화각으로 영상을 획득할 수 있도록 준비하는 동작;
    상기 카메라를 통해 획득되는 영상에 포함된 피사체의 상태를 분석하는 동작;
    상기 분석에 기반하여 촬영 화각을 결정하는 동작; 및
    결정된 촬영 화각으로 프리뷰 영상 및 이미지를 제공하는 동작을 포함하는 카메라 촬영 방법.
11. 제10항에 있어서,
    영상 제공부가 상기 카메라로부터 이미지 신호를 수신하고, 프리뷰 명령 및 촬영 명령 중 적어도 하나에 기반하여 적어도 둘 이상의 화각을 갖는 프리뷰 영상 및 이미지를 제공하고,
    영상 분석부가 상기 프리뷰 영상에 포함된 피사체의 상태를 분석하여 촬영 화각을 결정하고,
    영상 구성부가 상기 영상 분석부에서 결정한 촬영 화각에 따라 상기 프리뷰 명령 및 상기 촬영 명령 중 적어도 하나를 생성하는 카메라 촬영 방법.
12. 제11항에 있어서,
    상기 영상 구성부는,
    상기 영상 제공부에 프리뷰 파이프라인과 서로 다른 화각의 이미지에 각각 대응되는 복수의 화각 파이프라인을 준비시키고,
    상기 프리뷰 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 프리뷰 영상으로 변환하는 데이터 처리 구조이고,
    상기 복수의 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 서로 다른 화각의 이미지로 각각 변환하는 데이터 처리 구조인 카메라 촬영 방법.
13. 제11항에 있어서,
    상기 영상 구성부는,
    상기 영상 제공부에 프리뷰 파이프라인, 제1 화각 파이프라인 및 제2 화각 파이프라인을 준비시키고,
    상기 제1 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 제1 화각의 이미지로 변환하는 데이터 처리 구조이고,
    상기 제2 화각 파이프라인은, 상기 카메라로부터 수신된 이미지 신호를 상기 제1 화각과 다른 화각인 제2 화각의 이미지로 변환하는 데이터 처리 구조인 카메라 촬영 방법.
14. 제13항에 있어서,
    상기 영상 제공부는,
    상기 프리뷰 명령에 따라 상기 프리뷰 파이프라인을 이용하여 상기 제1 화각 및 제2 화각 중 적어도 하나로 상기 프리뷰 영상을 제공하고,
    상기 촬영 명령에 따라 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 적어도 하나를 이용하여 상기 제1 화각 및 제2 화각 중 적어도 하나로 촬영된 이미지를 제공하는 카메라 촬영 방법.
15. 제13항에 있어서,
    상기 영상 제공부는,
    상기 촬영 명령에 기반하여 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 적어도 하나에서 상기 제1 화각 파이프라인 및 제2 화각 파이프라인 중 나머지 하나로 데이터 처리 구조를 변경하되,
    상기 변경 과정에서 상기 카메라로부터 이미지 신호를 계속 수신하여 상기 프리뷰 영상을 끊김없이 제공하는 카메라 촬영 방법.
16. 제11항에 있어서,
    상기 영상 분석부는,
    상기 프리뷰 영상에 포함된 피사체의 개수, 위치 및 크기 중 적어도 하나에 기반하여 상기 촬영 화각을 결정하는 카메라 촬영 방법.
17. 제11항에 있어서,
    상기 영상 분석부는,
    등록된 피사체의 개수, 위치 및 크기 중 적어도 하나에 기반하여 상기 촬영 화각을 결정하는 카메라 촬영 방법
18. 제11항에 있어서,
    상기 영상 분석부는,
    상기 프리뷰 영상에 포함된 피사체의 노출 정도에 기반하여 상기 촬영 화각을 결정하는 카메라 촬영 방법.
19. 전자 장치에 있어서,
    서로 다른 화각을 갖는 복수의 카메라; 및
    상기 복수의 카메라와 작동적으로 연결된 프로세서;를 포함하고,
    상기 프로세서는,
    상기 복수의 카메라를 통해 서로 다른 적어도 둘 이상의 화각으로 영상을 획득할 수 있도록 준비하고,
    상기 복수의 카메라 중 하나를 통해 획득되는 영상에 포함된 피사체의 상태를 분석하고,
    상기 분석에 기반하여 상기 복수의 카메라 중 하나를 결정하고,
    결정된 카메라를 통해 프리뷰 영상 및 이미지를 제공하는 전자 장치.
20. 제19항에 있어서,
    상기 프로세서는,
    프리뷰 파이프라인과 서로 다른 화각의 이미지에 각각 대응되는 복수의 화각 파이프라인을 준비시키고,
    상기 프리뷰 파이프라인은, 상기 복수의 카메라 중 하나로부터 수신된 이미지 신호를 상기 프리뷰 영상으로 변환하는 데이터 처리 구조이고,
    상기 복수의 화각 파이프라인은, 상기 복수의 카메라로부터 수신된 이미지 신호를 서로 다른 화각의 이미지로 각각 변환하는 데이터 처리 구조인 전자 장치.
    

Images