KR20170013877A

KR20170013877A - 동적 배향 잠금, 일정한 프레이밍 및 규정된 종횡비를 갖는 사진 비디오 카메라

Info

Publication number: KR20170013877A
Application number: KR1020167033164A
Authority: KR
Inventors: 닐 디. 보스
Original assignee: 톰슨 라이센싱
Priority date: 2014-05-27
Filing date: 2015-05-19
Publication date: 2017-02-07
Also published as: TW201617717A; JP2017517969A; EP3149624B1; WO2015183636A1; US20150348325A1; EP3149624A1

Abstract

비디오의 수평 프레이밍을 동적으로 유지하는 방법 및 장치가 개시된다. 이 시스템은 촬영 동안 디바이스 뷰 파인더 또는 화면 상에 오버레이에서 최종 출력을 시각화하면서 사용자가 촬영 동안 디바이스를 자유롭게 회전할 수 있게 한다. 그 결과 기록은 안정된 수평선을 갖는 단일 배향을 유지하도록 후속하여 보정된다. 상기 시스템 및 방법은 캡처된 비디오의 캡처된 표현 위에 오버레이를 디스플레이하도록 동작하며, 상기 오버레이는 상기 배향에 대해 수정된 이미지를 나타낸다.

Description

동적 배향 잠금, 일정한 프레이밍 및 규정된 종횡비를 갖는 사진 비디오 카메라{PHOTO-VIDEO-CAMERA WITH DYNAMIC ORIENTATION LOCK, CONSTANT FRAMING AND DEFINED ASPECT RATIO}

본 출원은 대리인 문서 번호 PU140089를 갖는 2014년 5월 27일자로 출원된 미국 가출원 번호 제62/003281호 및 대리인 문서 번호 PU140119-US를 갖는 2014년 9월 2일자로 출원된 미국 실용신안 출원 번호 제14/475,192호의 우선권을 주장한다.

휴대용 전자 디바이스들이 점점 더 보편화되고 있다. 휴대폰들, 음악 플레이어들, 카메라들, 태블릿들 등과 같은 이러한 디바이스들은 종종 디바이스들의 조합을 포함하고, 따라서 여러 물체들을 가지고 다니는 것을 불필요하게 만든다. 예를 들어, 애플 아이폰 또는 삼성 갤럭시 안드로이드 폰과 같은 현재의 터치 스크린 휴대폰들은 비디오 및 정지(steel) 카메라들, 범지구 위치결정 내비게이션 시스템(global positioning navigation system), 인터넷 브라우저, 텍스트 및 전화, 비디오 및 음악플레이어 등을 포함한다. 이러한 디바이스들은 종종 wifi, 유선, 및 셀룰러, 예컨대 3G와 같은 여러 네트워크들을 통해 데이터를 송신 및 수신할 수 있다.

휴대용 전자 장치들에서의 보조 기능들의 품질이 계속 향상되고 있다. 예를 들어, 초기 "카메라 폰들"은 고정 초점 렌즈들(fixed focus lenses)을 가지며 플래시를 갖지 않는 저해상도 센서들로 이루어졌다. 오늘날, 많은 휴대폰들은 풀 고해상도(full high definition) 비디오 기능들, 편집 및 필터링 도구들, 그뿐만 아니라, 고해상도 디스플레이들을 포함한다. 이러한 향상된 기능들에 의해, 많은 사용자들은 이러한 디바이스들을 그들의 주된 사진 촬영 디바이스들로서 사용하고 있다. 따라서, 훨씬 더 향상된 성능의 전문가급 내장형 사진 촬영 도구들(professional grade embedded photography tools)이 요구되고 있다.

예를 들어, 모바일 디바이스 상의 많은 비디오는 사용자가 모바일 디바이스를 부주의하게 회전시킬 수 있는 방식으로 기록되어, 비디오 수평선을 시청자에 대한 비디오의 수직 방향으로 기울인다. 극단적인 경우에, 사용자는 수직 방향으로 카메라로 촬영을 시작하여 수평 방향으로 변경할 수 있다. 이는 비디오가 적절히 배향되어 개시되지만 시청자에게 디스플레이될 때 90도 회전되어 종료하게 된다. 이러한 문제를 고치기 위해, 후처리(post processing)가 필요하며, 소셜 네트워크를 통해 비디오를 직접 공유하려는 사용자에게는 바람직하지 않은 옵션이다.

또한, 모바일 디바이스를 이용하여 비디오를 수직 위치에서 기록하면 종종 그 너비보다 높이가 큰 비디오가 된다. 이러한 최종 결과는 TV 화면과 같이 전형적으로 높이보다 폭이 넓은 대부분의 디스플레이에서의 소비에는 적합하지 않다. 다수의 경우에서, 특히 소셜 활동, 라이브 이벤트 또는 녹화하고 있는 디바이스에 집중하지 못한 경험을 한 주제를 촬영할 때, 사용자는 수평 방향에 특별한 주의를 기울이지 않고 비디오를 촬영한다. 또한 대부분의 휴대 전화는 수직 방향으로 사용되도록 설계된다. 따라서, 사용자는 의도된 배향으로 디바이스를 사용하기 시작할 수 있으며, 나중에 단지 비디오가 수평 배향으로 촬영되어야 한다는 것을 깨닫는다.

따라서, 모바일 전자 디바이스들에 내장된 현재 비디오 카메라들이 갖는 이러한 문제들을 극복하는 것이 바람직하다.

비디오의 수평 프레이밍을 동적으로 유지하는 방법 및 장치가 개시된다. 이 시스템은 촬영 동안 디바이스 뷰 파인더 또는 화면 상에 오버레이(overlay)에서 최종 출력을 시각화하면서 사용자가 촬영 동안 디바이스를 자유롭게 회전할 수 있게 한다. 그 결과 기록은 안정된 수평선을 갖는 단일 배향을 유지하도록 후속하여 보정된다. 상기 시스템 및 방법은 캡처된 비디오의 캡처된 표현 위에 오버레이를 디스플레이하도록 동작하며, 상기 오버레이는 상기 배향에 대해 수정된 이미지를 나타낸다.

일 실시예에서, 본 발명은 비디오 스트림을 처리하는 방법을 또한 포함한다. 상기 방법은 비디오 캡처 모드를 초기화하는 단계와, 비디오 스트림을 나타내는 데이터를 수신하는 단계와, 상기 비디오 스트림의 표현을 디스플레이하는 단계와, 종횡비를 나타내는 데이터를 수신하는 단계와, 회전 위치를 나타내는 데이터를 수신하는 단계와, 회전 위치를 나타내는 상기 수신된 데이터에 기초하여 배향을 보간하는 단계와, 상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 배향을 나타내는 그래픽을 오버레이하는 단계를 포함한다.

다른 실시예에서, 장치가 제공된다. 상기 장치는 이미지 센서, 관성 센서, 프로세서 및 메모리를 포함한다. 이미지 센서는 제1 배향을 갖는 이미지 데이터를 캡처하기 위한 것이다. 관성 센서는 회전 값을 결정하기 위한 것이다. 프로세서는 관성 센서로부터 수신된 상기 회전 값에 기초하여 제2 배향을 결정하고, 제1 및 제2 배향에 기초하여 중간 배향을 보간하고, 상기 중간 배향을 통해 상기 제1 배향으로부터 상기 제2 배향까지 상기 이미지 데이터를 재배향하기 위한 것이다. 메모리는 프로세서에 연결되고, 이미지 데이터 및 재배향된 이미지 데이터를 저장하기 위한 것이다.

다른 실시예는, 제1 배향을 갖는 제1 이미지를 나타내는 데이터를 수신하는 단계와, 중력에 대해 디바이스 수직 배향을 나타내는 제2 배향을 나타내는 데이터를 수신하는 단계와, 상기 제2 배향이 상기 제1 이미지의 수직 배향으로 되도록 상기 제1 이미지를 재배향해서 재배향된 이미지를 생성하는 단계 - 상기 이미지의 프레이밍은 유지됨 - 와, 상기 재배향된 이미지를 저장하는 단계를 포함하는, 이미지 데이터를 저장하는 방법을 포함한다.

다른 실시예는, 비디오 캡처 모드를 초기화하는 단계와, 비디오 스트림을 나타내는 제1 데이터를 수신하는 단계와, 상기 비디오 스트림의 표현을 디스플레이하는 단계와, 종횡비를 나타내는 제2 데이터를 수신하는 단계와, 회전 위치를 나타내는 제3 데이터를 수신하는 단계와, 상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 회전 위치를 나타내는 그래픽을 오버레이하는 단계 - 비디오의 프레이밍은 유지됨 - 를 포함하는, 비디오 스트림을 처리하는 방법을 포함한다.

다른 양태에서, 본 개시 내용은 제1 배향을 갖는 이미지 데이터를 캡처하기 위한 이미지 센서와, 회전 값을 결정하기 위한 관성 센서와, 상기 회전 값에 응답하여 제2 배향을 결정하고, 상기 이미지 데이터의 프레이밍을 유지하면서 상기 제2 배향에 응답하여 상기 이미지 데이터를 재배향해서 동일한 프레이밍을 갖는 재배향된 이미지를 생성하고, 상기 재배향된 이미지를 저장하기 위한 프로세서를 포함하는 장치를 또한 포함한다.

본 개시 내용의 이러한 및 다른 양태들, 특징들, 및 장점들은 첨부 도면들에 관련하여 읽힐, 바람직한 실시예들의 다음의 상세한 설명에 기술될 것이거나 또는 이로부터 명백해질 것이다.
도면에서, 유사한 참조 번호들은 도면들 전체에 걸쳐 유사한 요소들을 나타낸다.
도 1은 모바일 전자 디바이스의 예시적인 실시예의 블록도를 도시한다.
도 2는 본 발명에 따른 활성 디스플레이를 갖는 예시적인 모바일 디바이스 디스플레이를 도시한다.
도 3은 본 개시 내용에 따른 이미지 안정화(stabilization) 및 리프레이밍(reframing)을 위한 예시적인 프로세스를 도시한다.
도 4는 본 발명에 따른 캡처 초기화(400)를 갖는 예시적인 모바일 디바이스 디스플레이를 도시한다.
도 5는 본 개시 내용에 따른 이미지 또는 비디오 캡처(500)를 개시하기 위한 예시적인 프로세스를 도시한다.
도 6은 본 개시 내용에 따른 비디오 캡처 동안 회전을 추적하기 위한 예시적인 프로세스를 도시한다.
도 7은 본 개시 내용에 따른 이미지 캡처 동안 회전을 추적하기 위한 예시적인 프로세스를 도시한다.
도 8은 본 개시 내용에 따른 비디오 캡처 동안 회전한 샷의 프레이밍을 유지하기 위한 예시적인 프로세스를 도시한다.

본 명세서에 기재된 예시들은 본 발명의 바람직한 실시예들을 예시하고, 그러한 예시들은 어떤 방식으로든 본 발명의 범위를 제한하는 것으로 해석되어서는 안 된다.

도 1을 참조하면, 모바일 전자 디바이스의 예시적인 실시예의 블록도가 도시된다. 도시된 모바일 전자 디바이스가 휴대폰(100)이지만, 본 발명은 음악 플레이어들, 카메라들, 태블릿들, 범지구 위치결정 내비게이션 시스템들 등과 같은 임의의 수의 디바이스들에서 동등하게 구현될 수 있다. 휴대폰은 전형적으로 전화 통화 및 텍스트 메시지를 송신 및 수신하고, 셀룰러 네트워크 또는 로컬 무선 네트워크를 통해 인터넷과 인터페이스하며, 사진 및 비디오를 촬영하고, 오디오 및 비디오 콘텐트를 재생하며, 워드 프로세싱, 프로그램들, 또는 비디오 게임들과 같은 애플리케이션들을 실행하는 능력을 포함한다. 많은 휴대폰들은 GPS를 포함하고, 또한 터치 스크린 패널을 사용자 인터페이스의 일부로서 포함한다.

휴대폰은 다른 주요 구성요소들 각각에 결합되어 있는 주 프로세서(main processor)(150)를 포함한다. 주 프로세서(150)는 본 기술분야의 통상의 기술자에게 공지된 바와 같이 단일 프로세서 또는 2개 이상의 프로세서일 수 있다. 주 프로세서(150) 또는 프로세서들은 네트워크 인터페이스들(110, 120), 카메라(140), 관성 센서(170), 터치 스크린(180), 및 다른 입력/출력(I/O) 인터페이스(190)와 같은 다양한 구성요소들 간에 정보를 라우팅한다. 주 프로세서(150)는 또한 디바이스 상에서 직접 또는 오디오/비디오 인터페이스를 통해 외부 디바이스 상에서 재생하기 위해 오디오 및 비디오 콘텐트를 처리한다. 주 프로세서(150)는 카메라(140), 관성 센서(170), 터치 스크린(180), 및 USB 인터페이스(130)와 같은 다양한 서브 디바이스들을 제어하도록 동작한다. 주 프로세서(150)는 컴퓨터와 유사하게 데이터를 조작하는 데 사용되는 서브루틴들을 휴대폰에서 실행하도록 추가로 동작한다. 예를 들어, 주 프로세서는 카메라 기능(140)에 의해 사진이 촬영된 후에 이미지 파일들을 조작하기 위해 사용될 수 있다. 이러한 조작들은 크로핑(cropping), 압축, 색 및 밝기 조절 등을 포함할 수 있다.

셀 네트워크 인터페이스(110)는 주 프로세서(150)에 의해 제어되고, 셀룰러 무선 네트워크를 통해 정보를 수신 및 전송하기 위해 사용된다. 이 정보는 TDMA(time division multiple access), CDMA(code division multiple access) 또는 OFDM(Orthogonal frequency-division multiplexing)과 같은 다양한 포맷들로 인코딩될 수 있다. 정보가 디바이스로부터 셀 네트워크 인터페이스(110)를 통해 전송 및 수신된다. 이 인터페이스는 정보를 전송을 위해 적절한 포맷으로 인코딩 및 디코딩하기 위해 사용되는 여러 안테나 인코더들, 복조기들 등으로 이루어져 있을 수 있다. 셀 네트워크 인터페이스(110)는 음성 또는 텍스트 송신들을 용이하게 하기 위해, 또는 인터넷으로부터 정보를 수신 및 송신하기 위해 사용될 수 있다. 이 정보는 비디오, 오디오, 및/또는 이미지를 포함할 수 있다.

무선 네트워크 인터페이스(120), 또는 wifi 네트워크 인터페이스는 wifi 네트워크를 통해 정보를 송신 및 수신하기 위해 사용된다. 이 정보는 802.11g, 802.11b, 802.11ac 등과 같은 상이한 wifi 표준들에 따라 다양한 포맷들로 인코딩될 수 있다. 이 인터페이스는 정보를 전송을 위해 적절한 포맷으로 인코딩 및 디코딩하고 정보를 복조를 위해 디코딩하기 위해 사용되는 여러 안테나 인코더들, 복조기들 등으로 이루어져 있을 수 있다. wifi 네트워크 인터페이스(120)는 음성 또는 텍스트 전송을 용이하게 하기 위해, 또는 인터넷으로부터 정보를 수신 및 송신하기 위해 사용될 수 있다. 이 정보는 비디오, 오디오, 및/또는 이미지를 포함할 수 있다.

USB(universal serial bus) 인터페이스(130)는 정보를 유선 링크를 통해, 전형적으로 컴퓨터 또는 다른 USB 가능형 디바이스로, 전송 및 수신하기 위해 사용된다. USB 인터페이스(120)는 정보를 송신 및 수신하기 위해, 인터넷에 연결하기 위해, 음성 및 텍스트 통화들 등을 송신 및 수신하기 위해 사용될 수 있다. 또한, 이 유선 링크는 USB 가능형 디바이스를 모바일 디바이스들의 셀 네트워크 인터페이스(110) 또는 wifi 네트워크 인터페이스(120)를 사용하여 다른 네트워크에 연결시키기 위해 사용될 수 있다. USB 인터페이스(130)는 구성 정보를 컴퓨터로 전송 및 수신하기 위해 주 프로세서(150)에 의해 사용될 수 있다.

메모리(160) 또는 저장 디바이스는 주 프로세서(150)에 결합될 수 있다. 메모리(160)는 모바일 디바이스의 동작에 관련되고 주 프로세서(150)가 필요로 하는 특정 정보를 저장하기 위해 사용될 수 있다. 메모리(160)는 사용자에 의해 저장 및 검색되는 오디오, 비디오, 사진, 또는 다른 데이터를 저장하기 위해 사용될 수 있다.

관성 센서(170)는 모바일 디바이스의 위치의 수평 및/또는 수직 표시를 결정하는 데 사용되는 자이로스코프, 가속도계, 축 배향 센서, 광 센서 등일 수 있다.

입력 출력(I/O) 인터페이스(190)는 전화 통화들, 오디오 녹음 및 재생, 또는 음성 활성화 제어에서 사용하기 위한 버튼들, 스피커/마이크를 포함한다. 모바일 디바이스는 터치 스크린 제어기를 통해 주 프로세서(150)에 결합된 터치 스크린(180)을 포함할 수 있다. 터치 스크린(180)은 용량성 및 저항성 터치 센서 중 하나 이상을 사용하는 단일 터치 또는 다중 터치 스크린일 수 있다. 스마트폰은 또한 온/오프 버튼, 활성화 버튼, 볼륨 컨트롤, 벨소리 컨트롤, 및 다중 버튼 키패드 또는 키보드와 같은, 그러나 이들로 제한되지 않는 부가의 사용자 컨트롤들을 포함할 수 있다.

이제 도 2를 참조하면, 본 발명에 따른, 활성 디스플레이(200)를 갖는 예시적인 모바일 디바이스 디스플레이가 도시된다. 예시적인 모바일 디바이스 애플리케이션은 사용자가 임의의 프레이밍에서 기록하고 촬영 동안 그의 디바이스를 자유롭게 회전시킬 수 있게 하며, 촬영 동안 디바이스의 뷰파인더 상에 오버레이로 최종 출력을 시각화하고, 궁극적으로 최종 출력에서의 그의 배향에 대해 정정하도록 동작한다.

예시적인 실시예에 따르면, 사용자가 촬영을 개시할 때, 사용자의 현재 배향이 고려되고, 장치의 센서에 기초한 중력 벡터가 수평선을 정렬(register)시키기 위해 사용된다. 디바이스의 화면 및 관련 광 센서가 폭보다 높이가 더 큰 포트레이트(portrait)(210), 또는 디바이스의 화면 및 관련 광 센서가 높이보다 폭이 더 큰 랜드스케이프(landscape)(250)와 같은 각각의 가능한 배향에 대해, 최적의 목표 종횡비가 선택된다. 주어진 (현재) 배향에 대한 원하는 최적의 종횡비를 고려하여 센서의 최대 경계들에 가장 적합한 삽입 직사각형(inset rectangle)(225)이 전체 센서 내에 내접(inscribe)된다. 센서의 경계들(boundaries)은 정정을 위한 '여유 공간(breathing room)'을 제공하기 위해 약간 패딩되어(padded) 있다. 이 삽입 직사각형(225)은 회전(220, 230, 240)을 보상하기 위해 디바이스의 통합된 자이로스코프로부터 샘플링되는 디바이스 자신의 회전의 반대로 본질적으로 회전하는 것에 의해 변환된다. 변환된 내부 직사각형(225)은 전체 센서의 최대 이용 가능한 경계들에서 패딩을 뺀 것 내부에 최적으로 내접된다. 디바이스의 현재 대부분인 배향에 따라, 변환된 내부 직사각형(225)의 치수들이 회전의 양에 대해 2개의 최적 종횡비들 사이에서 보간(interpolate)되도록 조절된다.

예를 들어, 포트레이트 배향에 대해 선택된 최적의 종횡비가 정사각형(1:1)이고 랜드스케이프 배향에 대해 선택된 최적의 종횡비가 와이드(wide)(16:9)인 경우, 내접된 직사각형은 하나의 배향에서 다른 배향으로 회전될 때 1:1과 16:9 사이에서 최적으로 보간될 것이다. 내접된 직사각형이 샘플링되고, 그 후 최적의 출력 치수에 맞도록 변환된다. 예를 들어, 최적의 출력 치수가 4:3이고 샘플링된 직사각형이 1:1인 경우, 샘플링된 직사각형이 애스팩트 필(aspect filled)(1:1 영역을 광학적으로 완전히 채우고, 필요에 따라 데이터를 크로핑함)되거나 애스팩트 피트(aspect fit)(1:1 영역 내부에 광학적으로 완전히 맞추고, '레터 박싱(letter boxing)' 또는 '필러 박싱(pillar boxing)'으로 임의의 사용되지 않는 영역을 블랙 아웃(black out)함)될 것이다. 결국, 결과물은 콘텐트 프레이밍(content framing)이 정정 동안 동적으로 제공되는 종횡비에 기초하여 조절되는 고정 애스팩트 자산(fixed aspect asset)이다. 따라서, 예를 들어, 1:1 내지 16:9 콘텐트로 이루어진 16:9 비디오는 광학적으로 채워진 것(260)(16:9 부분들 동안)과 필러 박싱으로 맞춤된 것(250)(1:1 부분들 동안) 사이에서 왔다갔다(oscillate) 할 것이다.

모든 움직임의 총 집계(total aggregate)가 최적의 출력 종횡비의 선택에 고려되고 가중되는(weighed) 부가의 개선들(refinements)이 적절하다. 예를 들어, 사용자가 포트레이트 콘텐트는 소수이고 '대체로 랜드스케이프'인 비디오를 녹화하는 경우, 출력 포맷은 랜드스케이프 종횡비(포트레이트 세그먼트들을 필러 박싱함)일 것이다. 사용자가 대체로 포트레이트인 비디오를 녹화하는 경우, 반대가 적용된다(비디오가 포트레이트일 것이고 출력을 광학적으로 채우며, 출력 직사각형의 경계들을 벗어나는 임의의 랜드스케이프 콘텐트를 크로핑함).

이제 도 3을 참조하면, 본 개시 내용에 따른, 이미지 안정화 및 리프레이밍을 위한 예시적인 프로세스(300)가 도시된다. 카메라의 캡처 모드가 개시되는 것에 응답하여 시스템이 초기화된다(310). 이 초기화는 하드웨어 또는 소프트웨어 버튼에 따라 또는 사용자 동작에 응답하여 생성되는 다른 제어 신호에 응답하여 개시될 수 있다. 디바이스의 캡처 모드가 개시되면, 사용자 선택들에 응답하여 모바일 디바이스 센서가 선택된다(320). 사용자 선택들은 터치 스크린 디바이스 상에서의 설정을 통해, 메뉴 시스템을 통해, 또는 버튼이 어떻게 작동되는지에 응답하여 행해질 수 있다. 예를 들어, 한번 눌러지는 버튼은 사진 센서를 선택할 수 있는 반면, 계속 누른 채로 있는 버튼은 비디오 센서를 지시할 수 있다. 또한, 버튼을 미리 결정된 시간, 예컨대 3초 동안 누르고 있는 것은 비디오가 선택되었다는 것을 지시할 수 있고 버튼이 재차 작동될 때까지 모바일 디바이스에서의 비디오 녹화가 계속될 것이다.

적절한 캡처 센서가 선택되면, 본 시스템은 그 후 관성 센서에 측정을 요청한다(330). 관성 센서는 모바일 디바이스의 위치의 수평 및/또는 수직 표시를 결정하는 데 사용되는 자이로스코프, 가속도계, 축 배향 센서, 광 센서 등일 수 있다. 측정 센서는 주기적인 측정들을 제어 프로세서로 전송할 수 있고, 그로써 모바일 디바이스의 수직 및/또는 수평 배향을 계속하여 지시할 수 있다. 이와 같이, 디바이스가 회전될 때, 제어 프로세서는 디스플레이를 계속하여 업데이트하고 연속적인 일관성 있는 수평선을 갖는 방식으로 비디오 또는 이미지를 저장할 수 있다.

관성 센서가 모바일 디바이스의 수직 및/또는 수평 배향의 지시를 리턴한 후에, 모바일 디바이스는 비디오 또는 이미지의 캡처된 배향을 지시하는 삽입 직사각형을 디스플레이 상에 묘사한다(340). 모바일 디바이스가 회전될 때, 시스템 프로세서는 삽입 직사각형을 관성 센서로부터 수신되는 회전 측정과 계속 동기화시킨다(350). 배향의 표현은 라인 인식, 얼굴 인식 등과 같은 기술을 이용하여 이미지를 분석함으로써 확인되고, 더 정련되거나 향상될 수 있다.

사용자는 옵션적으로 선호하는 최종 비디오 또는 이미지 비율, 예컨대 1:1, 9:16, 16:9, 또는 사용자에 의해 선택된 임의의 다른 비율을 지시할 수 있다. 시스템은 또한 모바일 디바이스의 배향에 따라 상이한 비율들에 대한 사용자 선택을 저장할 수 있다. 예를 들어, 사용자는 수직 배향으로 녹화되는 비디오에 대해서는 1:1 비율을 지시할 수 있지만, 수평 배향으로 녹화되는 비디오에 대해서는 16:9 비율을 지시할 수 있다. 이 경우에, 시스템은 모바일 디바이스가 회전될 때 비디오를 연속적으로 또는 증분적으로 리스케일링할 수 있다(360). 이와 같이, 비디오가 1:1 배향으로 개시할 수 있지만, 사용자가 촬영 동안 수직 배향으로부터 수평 배향으로 회전하는 것에 응답하여 점진적으로 리스케일링되어 16:9 배향으로 끝날 수 있을 것이다. 옵션적으로, 사용자는 개시 배향 또는 종료 배향이 비디오의 최종 비율을 결정하는 것을 지시할 수 있다.

특정한 다른 실시예들에서, 출력 박스 내에서 이미지의 프레이밍은 종횡비와 관계없이 유지된다. 따라서, 디바이스가 어떻게 배향되어도, 장면(scene)은 일관된 프레이밍을 유지하기 위해 줌 인(zoom in)되거나 줌 아웃(zoom out)된다. 일부 그러한 경우에서, 비디오의 관심 대상은 배향 및 종횡비에 관계없이 동일한 크기를 유지할 것이다. 다른 경우에서, 최대 해상도가 요망되는 곳에 줌 인 및 줌 아웃하는 것은 관심 대상의 크기를 변화시킬 수 있다. 대신에, 배향과 종횡비에 관계없이 크기를 유지하기 위해 이미지가 크로핑될 수 있다.

이제 도 4를 참조하면, 캡처 초기화를 갖는 예시적인 모바일 디바이스 디스플레이(400)가 도시된다. 이미지 또는 비디오를 캡처하기 위한 터치 톤 디스플레이(touch tone display)를 나타내는 예시적인 모바일 디바이스가 도시된다. 본 발명의 양태에 따르면, 예시적인 디바이스의 캡처 모드가 다수의 동작들에 응답하여 개시될 수 있다. 캡처 시퀀스를 개시하기 위해 모바일 디바이스의 하드웨어 버튼들(410) 중 임의의 것이 눌러질 수 있다. 대안적으로, 캡처 시퀀스를 개시하기 위해 소프트웨어 버튼(420)이 터치 스크린을 통해 활성화될 수 있다. 소프트웨어 버튼(420)은 터치 스크린 상에 디스플레이되는 이미지(430) 상에 오버레이될 수 있다. 이미지(430)는 이미지 센서에 의해 캡처되는 현재 이미지를 지시하는 뷰파인더로서 작용한다. 캡처되는 이미지 또는 비디오의 종횡비를 지시하기 위해, 앞서 기술된 바와 같은 내접된 직사각형(440)이 또한 이미지에 오버레이될 수 있다.

이제 도 5를 참조하면, 본 개시 내용에 따른, 이미지 또는 비디오 캡처를 개시하기 위한 예시적인 프로세스(500)가 도시된다. 이미지 소프트웨어(imaging software)가 개시되면, 시스템은 이미지 캡처를 개시하라는 지시를 기다린다. 이미지 캡처 지시가 주 프로세서에 의해 수신되면(510), 디바이스는 이미지 센서로부터 송신되는 데이터를 저장하기 개시한다(520). 또한, 시스템은 타이머를 기동시킨다. 그 후 시스템은 이미지 센서로부터의 데이터를 비디오 데이터로서 계속 캡처한다. 캡처가 중단되었다는 것을 지시하는 캡처 지시로부터의 제2 지시에 응답하여(530), 시스템은 이미지 센서로부터의 데이터를 저장하는 것을 중단하고 타이머를 종료시킨다.

그 후 시스템은 타이머 값을 미리 결정된 시간 임계치와 비교한다(540). 미리 결정된 시간 임계치는 예를 들어 1초와 같은, 소프트웨어 공급자에 의해 결정된 디폴트 값일 수 있거나, 또는 사용자에 의해 결정되는 구성 가능한 설정치일 수 있다. 타이머 값이 미리 결정된 임계치 미만인 경우(540), 시스템은 정지 이미지가 요망된 것으로 결정하고 비디오 캡처의 첫 번째 프레임을 정지 이미지로서 정지 이미지 포맷, 예컨대 jpeg 등으로 저장한다(560). 시스템은 옵션적으로 다른 프레임을 정지 이미지로서 선택할 수 있다. 타이머 값이 미리 결정된 임계치 초과인 경우(540), 시스템은 비디오 캡처가 요망된 것으로 결정한다. 그 후 시스템은 캡처 데이터를 비디오 파일로서 비디오 파일 포맷, 예컨대 mpeg 등으로 저장한다(550). 시스템은 그 후 초기화 모드로 되돌아가서, 캡처 모드가 다시 개시되기를 기다릴 수 있다. 모바일 디바이스가 정지 이미지 캡처 및 비디오 캡처를 위한 상이한 센서들을 구비하고 있는 경우, 시스템은 옵션적으로 정지 이미지 센서로부터의 정지 이미지를 저장할 수 있고 비디오 이미지 센서로부터의 캡처 데이터를 저장하기 개시할 수 있다. 타이머 값이 미리 결정된 시간 임계치와 비교될 때, 원하는 데이터는 저장되는 반면, 원하지 않는 데이터는 저장되지 않는다. 예를 들어, 타이머 값이 임계 시간 값을 초과하는 경우, 비디오 데이터가 저장되고 이미지 데이터는 폐기된다.

발생할 수 있는 한 가지 잠재적인 문제는 비디오 또는 정지 이미지의 시간 스탬프 및 관성 센서의 측정들이 이상적으로 동기화되지 않을 수 있다는 것이다. 예를 들어, 비디오 또는 이미지 캡처에 대해 업데이트된 위치 또는 회전 측정 및/또는 데이터의 기간이 너무 드물어서 비디오 또는 이미지에 대해 배향이 부정확해질 수 있다. 이로 인해 비디오가 고르지 않게 보일 수 있다. 이 위치 또는 회전 데이터를 처리하기 위해 보간되어 중간 배향을 결정할 수 있다. 이 예는 도 6 및 도 7에서 볼 수 있다.

도 6은 캡처 동안 회전이 발생하는 비디오 스트림을 처리하기 위한 예시적인 방법의 흐름도(600)를 도시한다. 가장 기본적인 수준에서 방법은 7단계를 포함한다. 제1 단계는 비디오 스트림의 캡처를 개시하는 것이다(단계 610). 다음 단계는 비디오 스트림을 나타내는 데이터를 수신하는 것이다 (단계 620). 그 후, 비디오 스트림의 표현이 디스플레이될 수 있다(단계 630). 제4 단계는 종횡비를 나타내는 데이터를 수신하는 것이다(단계 640). 제5 단계는 회전 위치를 나타내는 데이터를 수신하는 것이다(단계 650). 그 후, 배향은 회전 위치를 나타내는 데이터를 사용하여 보간될 수 있다(단계 660). 기본 방법의 최종 단계는 상기 종횡비 및 상기 배향을 나타내는 그래픽을 상기 비디오 스트림의 상기 표현 위에 오버레이하는 것(단계 670)이다.

도 7은 캡처 동안 회전이 발생하는 정지 이미지를 처리하기 위한 예시적인 방법의 흐름도(700)를 도시한다. 가장 기본적인 수준에서 방법은 7단계를 포함한다. 제1 단계는 캡처 모드를 초기화하는 것이다(단계 710). 다음 단계는 이미지를 나타내는 데이터를 수신하는 것이다(단계 720). 캡처 동안, 회전 위치를 나타내는 데이터가 수신된다(단계 730). 그 후, 캡처는 비활성화된다(단계 740). 그 후, 배향은 회전 위치를 나타내는 데이터를 사용하여 보간될 수 있다(단계 750). 배향이 보간되면, 이미지는 그에 따라 회전될 수 있다(단계 760). 기본 방법의 최종 단계는 회전된 이미지를 저장하는 것이다(단계 770).

일부 실시예에서, 캡처의 시작과 끝에서 위치 또는 회전 측정이 획득될 수 있고, 중간 배향이 보간될 수 있다. 이러한 보간은 시간에 따라 보다 정확하게 비디오를 배향시키기 위해 비디오의 시간 스탬프 정보를 더 포함할 수 있다. 이동 평균 속도와 같은 다른 기술을 사용하여 보간을 정련하는 데 사용될 수도 있다. 다른 추정 기술도 사용될 수 있다. 다른 실시예들에서, 비디오와 함께 제 시간에 더 정확한 위치 정보를 제공하기 위해 비디오 캡처 동안 회전 측정의 빈도가 증가될 수 있다.

특정한 다른 실시예에서, 출력 박스 내에서 이미지의 프레이밍은 종횡비에 관계없이 유지된다. 따라서, 디바이스가 어떻게 배향되어도, 장면은 일관된 프레이밍을 유지하기 위해 줌 인되거나 줌 아웃된다. 이것의 예는 도 8에서 볼 수 있다.

도 8은 캡처 동안 회전이 발생하는 비디오 스트림을 처리하기 위한 예시적인 방법의 흐름도(단계 800)를 도시한다. 가장 기본적인 수준에서, 방법은 6단계를 포함한다. 제1 단계는 비디오 스트림의 캡처를 개시하는 것이다(단계 610). 다음 단계는 비디오 스트림을 나타내는 데이터를 수신하는 것이다(단계 820). 그 후, 비디오 스트림의 표현이 디스플레이될 수 있다(단계 830). 제4 단계는 종횡비를 나타내는 데이터를 수신하는 것이다(단계 840). 제5 단계는 회전 위치를 나타내는 데이터를 수신하는 것이다(단계 850). 기본 방법의 최종 단계는 상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 배향을 나타내는 그래픽을 오버레이하는 것이고, 원래의 비디오의 프레이밍이 오버레이에서 유지된다(단계 860).

일부 실시예에서, 비디오에서 관심 대상 또는 피사체는 배향 및 종횡비에 관계없이 동일한 크기를 유지할 것이다. 다른 실시예에서, 최대 해상도가 요망되는 곳에 줌 인 및 줌 아웃하는 것은 관심 대상의 크기를 변화시킬 수 있다. 대신에, 배향과 종횡비에 관계없이 크기를 유지하기 위해 이미지가 크로핑될 수 있다.

상기에서 나타내어지고 논의된 요소들은 하드웨어, 소프트웨어, 또는 그들의 조합들의 다양한 형태들로 구현될 수 있다는 것을 이해해야 한다. 바람직하게, 이러한 요소들은 프로세서, 메모리, 및 입력/출력 인터페이스들을 포함할 수 있는 하나 이상의 적절히 프로그램된 범용 디바이스들 상에서 하드웨어와 소프트웨어의 조합으로 구현된다. 본 설명은 본 개시 내용의 원리들을 설명한다. 따라서, 통상의 기술자가, 본 명세서에 명확히 기술되거나 나타내어지진 않았어도, 본 개시 내용의 원리들을 구현하며 그 범위 내에 포함되는 다양한 구성들을 안출할 수 있을 것임을 이해할 것이다. 본 명세서에서 인용되는 모든 예들 및 조건부 언어는 본 개시 내용의 원리들, 및 기술을 발전시키기 위해 발명자에 의해 기여된 개념들을 독자가 이해하는 데 도움을 주도록 정보 제공 목적을 위해 의도된 것이고, 그러한 구체적으로 인용된 예들 및 조건들로 제한되지 않고서 해석되어야 한다. 게다가, 본 개시 내용의 원리들, 양태들, 및 실시예들은 물론 그 구체적인 예들을 인용하는 본 명세서의 모든 서술들은 본 개시 내용의 구조적 및 기능적 등가물들 양쪽을 포괄하도록 의도된다. 부가적으로, 그러한 등가물들은 현재 공지된 등가물들뿐만 아니라 미래에 개발되는 등가물들, 즉, 구조에 상관없이, 동일 기능을 수행하는, 개발되는 임의의 요소들 양쪽을 포함하도록 의도된다. 따라서, 예를 들어, 통상의 기술자는 본 명세서에 제시된 블록도들이 본 개시 내용의 원리들을 구현하는 예시적인 회로의 개념도들을 나타낸다는 것을 이해할 것이다. 유사하게, 임의의 플로우차트, 흐름도, 상태 천이도, 의사코드 등은, 실질적으로 컴퓨터 판독가능 매체에 표현될 수 있어서, 컴퓨터, 또는 프로세서가 명시적으로 나타내어지든지 아니든지 간에, 그러한 컴퓨터 또는 프로세서에 의해 실행될 수 있는 다양한 프로세스들을 나타낸다는 것을 이해할 것이다.

Claims

비디오 스트림을 처리하는 방법으로서,
비디오 스트림의 캡처를 개시하는 단계와,
비디오 스트림을 나타내는 데이터를 수신하는 단계와,
상기 비디오 스트림의 표현을 디스플레이하는 단계와,
종횡비를 나타내는 데이터를 수신하는 단계와,
회전 위치를 나타내는 데이터를 수신하는 단계와,
회전 위치를 나타내는 상기 수신된 데이터에 기초하여 배향을 보간하는 단계와,
상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 배향을 나타내는 그래픽을 오버레이(overlay)하는 단계
를 포함하는, 비디오 스트림을 처리하는 방법.
제1항에 있어서,
상기 종횡비는 상기 배향에 응답하여 변화하는, 비디오 스트림을 처리하는 방법.
제1항에 있어서,
상기 배향의 상기 보간은 상기 회전의 평균 속도를 결정하는 것을 더 포함하는, 비디오 스트림을 처리하는 방법.
제1항에 있어서,
상기 배향의 상기 보간은 또한 이미지 데이터의 일부인 시간 스탬프 정보에 기초하는, 비디오 스트림을 처리하는 방법.
제1항에 있어서,
상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 배향을 나타내는 그래픽을 오버레이하는 단계는 이미지 분석을 더 포함하는, 비디오 스트림을 처리하는 방법.
제1항에 있어서,
상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 배향을 나타내는 그래픽을 오버레이하는 단계는 프레이밍(framing)을 유지하는 단계를 더 포함하는, 비디오 스트림을 처리하는 방법.
제7항에 있어서,
상기 이미지의 프레이밍을 유지하는 단계는 상기 프레이밍을 유지하기 위해 줌 인(zoom in) 또는 줌 아웃(zoom out)하는 단계를 포함하는, 비디오 스트림을 처리하는 방법.
제7항에 있어서,
상기 이미지의 프레이밍을 유지하는 단계는 상기 프레이밍을 유지하기 위해 상기 이미지 데이터를 크로핑(cropping)하는 단계를 포함하는, 비디오 스트림을 처리하는 방법.
장치로서,
비디오 스트림을 캡처하는 이미지 센서와,
회전 값을 결정하는 관성 센서와,
데이터를 저장하는 메모리와,
비디오 스트림의 캡처를 개시하고, 비디오 스트림을 나타내는 데이터를 수신하고, 상기 비디오 스트림의 표현의 디스플레이를 제공하고, 종횡비를 나타내는 데이터를 수신하고, 회전 위치를 나타내는 데이터를 수신하고, 회전 위치를 나타내는 상기 수신된 데이터에 기초하여 배향을 보간하고, 상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 배향을 나타내는 그래픽의 오버레이를 제공하도록 구성된 프로세서
를 포함하는, 장치.
제9항에 있어서,
상기 종횡비는 상기 배향에 응답하여 변화하는, 장치.
제9항에 있어서, 상기 프로세서는 상기 회전의 평균 속도를 결정함으로써 상기 배향을 보간하는, 장치.
제9항에 있어서,
상기 프로세서는 상기 이미지 데이터의 일부인 시간 스탬프 정보를 사용하여 상기 배향을 보간하는, 장치.
제9항에 있어서,
상기 프로세서는 이미지 분석을 추가로 사용하여 상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 배향을 나타내는 상기 그래픽을 오버레이하는, 장치.
제9항에 있어서,
상기 프로세서는 프레이밍이 유지되도록 상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 배향을 나타내는 상기 그래픽을 오버레이하는, 장치.
제14항에 있어서,
상기 프레이밍은 줌 인 및 줌 아웃 중 적어도 하나에 의해 유지되는, 장치.
제14항에 있어서,
상기 프레이밍은 상기 이미지 데이터를 크로핑함으로써 유지되는, 장치.
제9항에 있어서,
상기 비디오 스트림의 상기 표현 및 오버레이를 디스플레이하기 위한 디스플레이를 더 포함하는, 장치.
방법으로서,
캡처 모드를 초기화하는 단계와,
이미지를 나타내는 데이터를 수신하는 단계와,
회전 위치를 나타내는 데이터를 수신하는 단계와,
상기 캡처 모드를 비활성화하는 단계와,
회전 위치 데이터에 기초하여 상기 이미지의 배향을 보간하는 단계와,
상기 보간된 배향에 응답하여 상기 이미지를 회전시켜서 회전된 이미지를 생성하는 단계와,
상기 회전된 이미지를 저장하는 단계
를 포함하는, 방법.
제18항에 있어서,
상기 이미지를 디스플레이하고 상기 회전 위치를 나타내는 표시자를 디스플레이하는 단계를 더 포함하는, 방법.
제19항에 있어서,
상기 표시자는 종횡비 및 상기 회전 위치를 나타내는 그래픽이고, 상기 표시자는 상기 회전된 이미지를 나타내는 방식으로 상기 이미지 위에 오버레이되는, 방법.
제18항에 있어서,
종횡비는 상기 회전 위치에 응답하여 변화하는, 방법.
제18항에 있어서,
상기 이미지는 비디오의 프레임인, 방법.
제18항에 있어서,
상기 회전 위치를 나타내는 데이터는 상기 캡처 모드의 시작과 끝에서 수신 되고, 상기 이미지의 배향은 상기 캡처 모드의 시작과 끝에서 수신된 회전 위치를 나타내는 데이터로부터 보간되는, 방법.
제18항에 있어서,
상기 배향의 보간은 상기 회전의 평균 속도를 결정하는 것을 더 포함하는, 방법.
제18항에 있어서,
상기 배향의 보간은 또한 상기 이미지 데이터의 일부인 시간 스탬프 정보에 기초하는, 방법.
제18항에 있어서,
상기 이미지의 회전은 이미지 분석을 더 포함하는, 방법.
제18항에 있어서,
상기 이미지 데이터의 회전은 상기 이미지의 프레이밍을 유지하는 것을 더 포함하는, 방법.
제18항에 있어서,
상기 이미지의 프레이밍을 유지하는 것은 상기 프레이밍을 유지하기 위해 줌 인 또는 줌 아웃하는 것을 포함하는, 방법.
제18항에 있어서,
상기 이미지의 프레이밍을 유지하는 것은 상기 프레이밍을 유지하기 위해 상기 이미지 데이터를 크로핑하는 것을 포함하는, 방법.
장치로서,
이미지 데이터를 캡처하는 이미지 센서와,
회전 값을 결정하는 관성 센서와,
데이터를 저장하는 메모리와,
캡처 모드를 초기화하고, 이미지를 나타내는 데이터를 수신하고, 회전 위치를 나타내는 데이터를 수신하고, 상기 캡처 모드를 비활성화하고, 회전 위치 데이터에 기초하여 상기 이미지의 배향을 보간하고, 상기 보간된 배향에 응답하여 상기 이미지를 회전시켜서 회전된 이미지를 생성하고, 상기 회전된 이미지를 저장하도록 구성되는 프로세서
를 포함하는, 장치.
제30항에 있어서,
상기 종횡비는 상기 배향에 응답하여 변화하는, 장치.
제30항에 있어서,
상기 회전 위치를 나타내는 데이터는 상기 캡처 모드의 시작과 끝에서 수신되고, 상기 이미지의 배향은 상기 캡처 모드의 시작과 끝에서 수신된 회전 위치를 나타내는 데이터로부터 보간되는, 장치.
제30항에 있어서,
상기 프로세서는 상기 회전의 평균 속도를 결정함으로써 상기 배향을 보간하는, 장치.
제30항에 있어서,
상기 프로세서는 상기 이미지 데이터의 일부인 시간 스탬프 정보에 기초하여 상기 배향을 보간하는, 장치.
제30항에 있어서,
상기 프로세서는 이미지 분석을 사용하여 상기 이미지를 회전시키는, 장치.
제30항에 있어서,
상기 이미지 데이터의 회전은 상기 이미지의 프레이밍을 유지하는 것을 더 포함하는, 장치.
제36항에 있어서,
상기 이미지의 프레이밍을 유지하는 것은 상기 프레이밍을 유지하기 위해 줌인 또는 줌 아웃하는 것을 포함하는, 장치.
제36항에 있어서,
상기 이미지의 프레이밍을 유지하는 것은 상기 프레이밍을 유지하기 위해 상기 이미지 데이터를 크로핑하는 것을 포함하는, 장치.
제30항에 있어서,
상기 이미지 데이터를 디스플레이하기 위한 디스플레이를 더 포함하는, 장치.
비디오 스트림을 처리하는 방법으로서,
비디오 스트림의 캡처를 개시하는 단계와,
비디오 스트림을 나타내는 데이터를 수신하는 단계와,
상기 비디오 스트림의 표현을 디스플레이하는 단계와,
종횡비를 나타내는 데이터를 수신하는 단계와,
회전 위치를 나타내는 데이터를 수신하는 단계와,
상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 회전 위치를 나타내는 그래픽을 오버레이하는 단계
를 포함하고,
상기 비디오의 프레이밍은 상기 오버레이된 그래픽 표현에서 유지되는, 비디오 스트림을 처리하는 방법.
제40항에 있어서,
상기 종횡비는 상기 회전 위치에 응답하여 변화하는, 비디오 스트림을 처리하는 방법.
제40항에 있어서,
상기 비디오의 프레이밍은 상기 비디오를 줌(zoom)함으로써 유지되는, 비디오 스트림을 처리하는 방법.
제40항에 있어서,
상기 비디오의 프레이밍은 상기 비디오를 크로핑함으로써 유지되는, 비디오 스트림을 처리하는 방법.
제40항에 있어서,
회전 위치를 나타내는 상기 수신된 데이터에 기초하여 배향을 보간하는 단계를 더 포함하는, 비디오 스트림을 처리하는 방법.
제44항에 있어서,
상기 배향의 보간은 상기 회전의 평균 속도를 결정하는 것을 더 포함하는, 비디오 스트림을 처리하는 방법.
제44항에 있어서,
상기 배향의 보간은 또한 상기 이미지 데이터의 일부인 시간 스탬프 정보에 기초하는, 비디오 스트림을 처리하는 방법.
제1항에 있어서,
상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 배향을 나타내는 그래픽을 오버레이하는 단계는 이미지 분석을 더 포함하는, 비디오 스트림을 처리하는 방법.
장치로서,
비디오 스트림을 캡처하는 이미지 센서와,
회전 값을 결정하는 관성 센서와,
데이터를 저장하는 메모리와,
비디오 스트림의 캡처를 개시하고, 비디오 스트림을 나타내는 데이터를 수신하고, 상기 비디오 스트림의 표현의 디스플레이를 제공하고, 종횡비를 나타내는 데이터를 수신하고, 회전 위치를 나타내는 데이터를 수신하고, 상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 회전 위치를 나타내는 그래픽을 오버레이하도록 구성된 프로세서
를 포함하며,
상기 비디오의 프레이밍은 상기 오버레이된 그래픽 표현에서 유지되는, 장치.
제48항에 있어서,
상기 종횡비는 상기 배향에 응답하여 변화하는, 장치.
제48항에 있어서,
상기 프로세서는 상기 비디오를 줌함으로써 프레이밍을 유지하는, 장치.
제48항에 있어서,
상기 프로세서는 상기 비디오를 크로핑함으로써 프레이밍을 유지하는, 장치.
제48항에 있어서,
상기 프로세서는 회전 위치를 나타내는 상기 수신된 데이터에 기초하여 배향을 보간하는, 장치.
제52항에 있어서,
상기 프로세서는 상기 회전의 평균 속도를 결정함으로써 상기 배향을 보간하는, 장치.
제52항에 있어서,
상기 프로세서는 상기 이미지 데이터의 일부인 시간 스탬프 정보에 기초하여 상기 배향을 보간하는, 장치.
제48항에 있어서,
상기 프로세서는 이미지 분석을 사용하여 상기 비디오 스트림의 상기 표현 위에 상기 종횡비 및 상기 배향을 나타내는 그래픽을 오버레이하는, 장치.
제48항에 있어서,
상기 비디오 스트림의 상기 표현 및 오버레이를 디스플레이하기 위한 디스플레이를 더 포함하는, 장치.