KR20140009130A

KR20140009130A - 정지 사진과 비디오 내용을 캡쳐하고 표시하는 시스템 및 장치

Info

Publication number: KR20140009130A
Application number: KR1020137008009A
Authority: KR
Inventors: 아담 해리스
Original assignee: 소니 컴퓨터 엔터테인먼트 아메리카 엘엘씨
Priority date: 2010-09-28
Filing date: 2011-08-18
Publication date: 2014-01-22
Also published as: US20120075488A1; WO2012044408A1; KR101956099B1; US8681234B2; KR20180011879A

Abstract

본 발명에 따르면, 정지 영상을, 비디오 프레임을 캡쳐하는 동안에 다른 해상도로 캡쳐할 수 있다. 서로 다른 해상도와 서로 다른 데이터 포맷의 정지 영상 데이터와 비디오 데이터를 하나의 파일로서 결합할 수 있고 메모리에 저장할 수 있다. 비디오 데이터와 정지 영상 데이터를 하나의 파일로 저장함에 의해, 대표 정지 영상의 표시와 함께 비디오의 표시 처리가 단순화된다.

Description

정지 사진과 비디오 내용을 캡쳐하고 표시하는 시스템 및 장치 {SYSTEM AND APPARATUS FOR CAPTURING AND DISPLAYING STILL PHOTO AND VIDEO CONTENT}

본 발명의 실시예들은 비디오 캡쳐 장치에 관한 것으로서, 보다 구체적으로는, 일련의 비디오 프레임을 기록하고 이 비디오 프레임과 다른 해상도로 정지 영상을 캡쳐할 수 있으며 이 비디오 프레임과 정지 영상을 하나의 파일로서 저장할 수 있는 비디오 캡쳐 장치에 관한 것이다.

사진 분야에서의 최근의 진보는 디지털 카메라의 발전에 있다. 해당 광학계는 필름 카메라에서와 동일한 작용을 하는데, 통상적으로, 영상 취득 장치에 광을 결상(focus)하기 위하여 가변적인 조리개(diaphragm)를 갖는 렌즈를 사용하고 있다. 필름의 경우에서처럼 조리개와 셔터가 정확한 광량을 영상 장치로 보내는 것은 동일하지만, 그러나 이 영상 취득 장치는 화학적으로 처리된 감광 필름이 아니라, 전자적인 영상 센서이다. 많은 소형 디지털 스틸 카메라는 정지 사진(photo) 뿐만 아니라 사운드와 동영상을 기록할 수 있다. 디지털 카메라는 필름 카메라가 하지 못하는 많은 능력을 갖고 있다. 예를 들어, 디지털 카메라는 영상(image)을 기록하는 즉시 이를 화면에 표시할 수 있고, 수천 개의 영상을 하나의 작은 전자적 메모리 장치에 저장할 수 있고, 사운드와 함께 비디오(video)를 기록할 수 있고, 저장 공간을 비우기 위해서 영상을 지울 수 있다. 일부 디지털 카메라는 그림(picture)을 잘라낼 수 있고 그 밖에 기본적인 영상 편집을 수행할 수 있다.

현재 많은 디지털 카메라는 정지 그림과 비디오 시퀀스를 캡쳐할 수 있는 능력을 제공하고 있다. 그러나 비디오 기록시에는 정지 그림 화질과 성능 사이에서 타협해야 한다. 예를 들어, 비디오 정보의 처리는, 연속된 정지 그림의 기록가능한 속도를 제한한다. 또한 정지 그림이 캡쳐될 때에는 비디오의 기록이 중단된다. 특히, 카메라가 비디오를 처리하는 대신에 정지 그림을 처리하고 있는 동안에는, 일반적으로 여러 개의 비디오 프레임을 잃게된다.

비디오 카메라의 확산으로 비디오와 정지 사진을 온라인으로 다른 사람에게 보내어 보도록 하는 것이 인기를 끌고 있다. 그러나, 비디오와 사진 내용을 온라인으로 보내는 것 사이에는 기술적 분단이 존재한다. 사진은 비디오보다, 전송하고 보는 데 더 흥미가 있고 시간이 덜 소요된다. 현재, 사진을 온라인으로 전송시에는 사진의 짧은 설명(thumbnail)이 표시된다. 그러나 비디오의 경우에는 "재생" 버튼이 포함된 박스가 표시된다. 때로는 섬네일 영상이 재생 버튼 박스와 함께 표시되기도 하지만, 자동으로 선택된 정지 영상과 함께 비디오를 전송하는 것에 편리한 방법은 없다. 왜냐하면 정지 영상과 비디오 영상은 다른 포맷으로 저장되기 때문이다. 특히, 정지 영상은 일반적으로 .jpg 포맷으로 저장되고 비디오는.mp4 또는 이와 유사한 몇 가지 포맷으로 저장된다. 섬네일로서 정지 영상을 갖는 비디오를 전송하려면, 비디오를 전송하고자 하는 사용자는 적절한 정지 영상을 찾아서 이를 비디오에 연계된 링크와 함께 전송해야만 한다.

이러한 맥락에서 본 발명의 실시예들을 제시한다.

본 발명의 목적은, 일련의 비디오 프레임을 기록하고 이 비디오 프레임과 다른 해상도로 정지 영상을 캡쳐할 수 있으며 이 비디오 프레임과 정지 영상을 하나의 파일로서 저장할 수 있는 비디오 캡쳐 장치를 제공하는 데에 있다.

상기와 같은 목적을 달성하기 위하여, 본 발명은, 영상 형성 광학계, 영상 형성 광학계에 광학적으로 연결된 빔 분할기, 빔 분할기에 광학적으로 연결되며, 상기 영상 형성 광학계와 빔 분할기에 의해 피사체의 광학적 신호가 결상되도록 구성되는 영상 센서를 포함하되, 상기 영상 센서는, 제1해상도로 비디오 프레임을 캡쳐하도록 구성되는 제1광검출기 배열체와, 이 제1광검출기가 비디오 프레임을 캡쳐하는 동안에 제2해상도로 정지 영상을 캡쳐하도록 구성되는 제2광검출기 배열체를 포함하는 것을 특징으로 하는 비디오 캡쳐 장치를 제공한다.

또한, 본 발명은, 영상 센서, 상기 영상 센서에 광학적으로 연결되며, 광학적 신호를 영상 센서에 결상시키는 영상 형성 광학계, 상기 영상 센서에 연결되는 프로세서, 및 상기 프로세서에 연결되는 메모리를 포함하되, 상기 영상 센서, 프로세서, 및 메모리는 정지 영상과 비디오 파일을 저장하도록 구성되며, 상기 프로세서는, 비디오 프레임을 나타내는 데이터를 비디오 데이터 포맷으로서 제1해상도로 메모리에 저장하고, 상기 비디오 프레임을 저장하는 동안에, 하나 이상의 정지 영상에 해당되는 데이터를 정지 영상 데이터 포맷으로서 제2해상도로 메모리 내의 전용 위치에 저장하도록 구성되고, 상기 프로세서는 추가적으로, 비디오 프레임을 나타내는 데이터와 정지 영상을 나타내는 데이터를 하나의 파일로 결합하도록 구성되는 것을 특징으로 하는 비디오 캡쳐 장치를 제공한다.

또한, 본 발명은, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법으로서, 영상 형성 광학계를 이용하여 피사체에 해당되는 광학 신호를 캡쳐하는 단계, 상기 광학 신호를 제1부분 및 제2부분으로 분할하는 단계, 상기 제1부분을 제1광검출기를 이용해 제1해상도의 비디오 프레임으로서 캡쳐하는 단계, 상기 제2부분을 제2광검출기를 이용해 제2해상도의 하나 이상의 정지 영상으로서 캡쳐하는 단계, 상기 정지 영상을 정지 영상 포맷의 데이터로 변환하고, 상기 비디오 프레임을 제2포맷의 비디오 데이터로 변환하는 단계, 상기 정지 영상 데이터와 비디오 프레임 데이터를 하나의 파일로 결합하는 단계, 상기 하나의 파일을 메모리에 저장하는 단계를 포함하는 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법을 제공한다.

또한, 본 발명은, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법으로서, 영상 형성 광학계를 이용하여 피사체에 해당되는 광학 신호를 캡쳐하고, 광검출기 배열체 상에 이 광학 신호를 영상으로서 형성하는 단계, 광검출기 배열체를 이용해서 비디오 프레임을 캡쳐하고 이 비디오 프레임을 나타내는 데이터(비디오 데이터)를 제1포맷의 제1해상도로 메모리에 저장하는 단계, 상기 비디오 프레임을 캡쳐하는 동안에, 광검출기 배열체를 이용해서 정지 영상을 캡쳐하고 이 정지 영상을 나타내는 데이터(정지 영상 데이터)를 제2포맷의 제2해상도로 메모리에 저장하는 단계, 상기 비디오 프레임이 캡쳐되는 동안에 상기 정지 영상을 메모리의 전용 위치에 저장하는 단계, 상기 비디오 데이터와 정지 영상 데이터를 하나의 파일로 결합하는 단계, 및 상기 하나의 파일을 메모리에 저장하는 단계를 포함하는 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법을 제공한다.

또한, 본 발명은, 비디오 프레임 및 정지 영상의 동기적 표시 방법에 있어서, 제1해상도의 제1포맷의 비디오 프레임을 나타내는 비디오 데이터와 제2해상도의 제2포맷의 하나 이상의 정지 영상을 나타내는 정지 영상 데이터가 포함되고, 상기 정지 영상 데이터 또는 비디오 데이터 내에 있으며 정지 영상을 비디오 프레임 중의 해당되는 하나에 동기화시키되 비디오 프레임의 재생 시작 지점을 마킹하는 마커를 포함하는 하나의 파일을 업로드하는 단계, 상기 마커에 의해 해당 비디오 영상에 동가화된 정지 영상을 제1해상도로 디스플레이장치에 표시하는 단계, 및 트리거 신호가 수신될 때 비디오 프레임의 표시를 시작하는 단계를 포함하는 것을 특징으로 하는, 비디오 프레임 및 정지 영상의 동기적 표시 방법을 제공한다.

본 발명에 따르면, 일련의 비디오 프레임을 기록하고 이 비디오 프레임과 다른 해상도로 정지 영상을 캡쳐할 수 있으며 이 비디오 프레임과 정지 영상을 하나의 파일로서 저장할 수 있는 비디오 캡쳐 장치가 제공된다.

아래와 같은 부속 도면들과 함께 이하의 상세한 설명에 의해서 본 발명의 사상에 대해서 쉽게 이해하게 될 것이다.
도 1은 휴대용 디지털 카메라의 구성도이다.
도 2a는 본 발명의 제1실시예에 따른 디지털 카메라 시스템의 일부의 구성도이다.
도 2b는 본 발명의 제1실시예에 따른 정지 영상 및 비디오를 하나의 파일로서 처리하는 방법을 나타내는 순서도이다.
도 3a는 본 발명의 제2실시예에 따른 제2의 디지털 카메라 시스템의 구성도이다.
도 3b는 본 발명의 제2실시예에 따른 정지 영상 및 비디오를 하나의 파일로서 처리하는 방법을 나타내는 순서도이다.
도 4는 본 발명의 제3실시예에 따른, 하나의 파일로서 저장된 정지 영상 및 비디오를 표시하는 방법을 나타내는 순서도이다.

비디오 취득 데이터 장치의 일례를 휴대용 카메라(100)의 형태로서 도 1의 구성도에 도시하였다. 이 카메라는, 케이스(101), 영상 형성 광학계(102), 그리고 프로세서(106)와 통신하는 사용자 인터페이스(112)를 포함하는 것으로 개략적으로 도시되어 있다. 상기 인터페이스(112)는 사용자에 의해 조작되는 스위치 및 제어장치, 그리고 카메라의 동작과 상태를 표시하는 장치를 포함한다. 또한, 프로세서(106)에 의해 제어되는 조명(플래쉬) 유닛(114)이 또한 선택사양으로서 포함될 수 있다. 광학계(102)는 도시한 것과 같이 하나의 렌즈일 수도 있지만, 보통은 여러 렌즈가 한 조로 구성될 것이다. 센서(104)는 보통, 영상의 각 픽셀을 검출하기 위해서 행과 열로 2차원 배열된 다수의 광검출기(예를 들어, 전하결합 소자(CCD))를 포함한다. 광학계(102)는 피사체 영상을 카메라의 센서(104)의 2차원 광검출기 배열체 위에 결상(focus)시키는 역할을 한다. 센서 배열체(104)는 광학 영상을 일련의 신호 값으로 변환하는 기능을 할 수 있다. 신호로서 전송되는 이 값들은, 센서 배열체(104)의 각 개별 센서 요소에 해당되는 소정의 색상에 대한 강도 값을 나타내는 아날로그 전압일 수 있다. 센서 배열체(104)는 전자적 자르기(cropping) 능력(또는 윈도우잉(windowing))을 포함할 수 있다. 전자적 자르기 능력은 센서 배열체(104)의 윈도우(즉, 활성 영역)에서의 영상 요소의 독출(readout)을 제한하도록 기능할 수 있다. 각 개별 광검출기에 조사되는 광의 강도에 비례하는 신호를 시간 순서대로 센서(104)의 출력으로부터 얻을 수 있는데, 일반적으로 이는, 광검출기의 구성 소자의 행들을 맨 위의 행에서 시작하여 좌측에서 우측으로 한번씩 스캔하는 래스터 패턴 스캔(raster pattern scan) 방식을 통해서 이루어진다. 이로써 영상의 재구성을 가능케하는 비디오 데이터의 프레임이 생성된다.

카메라(100)는 프로세서(106) 및/또는 센서(104)에 연결되는 시스템 클럭(107)을 포함할 수 있다. 클럭 신호는 프로세서(106)에 의해서 센서(104)와 아날로그-디지털 변환기(116)로 공급될 수 있다. 센서(104)와 프로세서(106)의 동작을 동기화시키는 부가적인 타이밍 신호도 또한 프로세서(106)에서 만들어져서 센서(104)에 공급된다. 일부 실시예에서, 클럭(107)은 프로세서(106)의 일부일 수 있다. 다른 방식으로서, 별도의 시스템 클럭을 이용할 수 있으며 그리고/또는 동기용 타이밍 신호를 센서(104)에서 생성하여 대신에 프로세서(106)로 공급할 수도 있다. 프로세서 칩(106)은 조리개(aperture), 셔터, 그 밖에 이들을 제어하기 위한 카메라의 기타 구성요소에 연결된다.

카메라가 캡쳐한 영상 데이터는 카메라 내에 설치된 비휘발성 메모리(108)에 저장될 수 있다. 이 메모리(108)로는, 상업적으로 입수가능한 반도체 플래시형의 전기적 소거/기입(프로그램) 방식 독출전용 메모리(EEPROM), 소형의 소거가능한 회전식 자기디스크 또는 광디스크, 자기 테이프, 배터리 백업이 포함된 휘발성 반도체 메모리, 또는 그 밖의, 센서(104)가 취득한 영상 프레임의 비디오 데이터를 저장할 수 있는 비휘발성 메모리를 사용할 수 있다. 다량의 개별 프레임 데이터는, 센서(104)가 이들 데이터를 취득할 때에 프로세서(106)에 의해서 메모리(108) 내로 기입(프로그램)된다. 영상 데이터의 후속 처리에 유용하거나 필요한 부가적인 영상 지원 데이터도 또한, 이 데이터에 의해 지원되는 영상 프레임 데이터와 함께 메모리(108) 내에 기입된다.

메모리(108)를 플래시 메모리 카드나 소거가능한 소형 하드디스크 장치를 사용함으로써 카메라로부터 물리적으로 소거가능하도록 만들 수도 있지만, 본 예에서는, 메모리(108)를 카메라 케이스(101) 내에 영구적으로 설치한다. 사용자가 영상 프레임 데이터를 카메라 밖으로 내보내려면, 이는 메모리(108)에서 독출된 데이터를 수신하는 통신 장치(110)를 통해서 이루어진다. 통신 장치(110)는 다양한 형식, 가령, 영상 처리용 워크스테이션과의 연결 케이블이 접속되는 소켓의 형식, 적외선 디지털 데이터 송신 장치의 형식, 무선주파수 신호 송신기의 형식, 또는 그 밖의 무선 데이터 통신 링크의 형식을 취할 수 있다.

소비자의 관점에서 볼 때, 카메라는 카메라가 켜지는 순간부터 비디오를 작동시킬 수도 있을 것이다. 일부 디지털 카메라의 경우에는, 셔터 버튼을 누를 때에, 정지 영상으로서 선택된 비디오 프레임 상에 마커(marker)가 위치할 수 있다. 현재의 디지털 카메라는 이러한 기능을 할 수 있지만 일부 소수(예컨대, 4개)의 정지 영상에 대해서만 한정된다. 현재의 많은 디지털 비디오 카메라의 또다른 단점은, 비디오 영상은 테이프에 저장되고 정지 영상은 메모리의 완전 별개의 부분에 저장된다는 것이다. 또한, 비디오 및 정지 영상이 서로 다른 해상도 값으로 저장된다. 일반적으로, 비디오 프레임은 프레임당 1 메가픽셀로 저장되지만, 정지 영상은 4 메가픽셀로 저장된다. 게다가, 대부분의 소비자는 적어도 10 메가픽셀의 해상도를 요구하는 것 같다.

위에서 논한 것과 같이, 비디오 및 정지 영상을 온라인으로 업로드시에는 정지 및 비디오 영상의 포맷이 서로 다르기 때문에 문제가 발생한다. 이러한 문제점을 극복하고 소비자로 하여금, 정지 영상(이를 클릭함으로써 비디오가 시작될 수도 있음)의 온라인 슬라이드쇼를 프리젠테이션할 수 있도록 하기 위하여, 비디오 및 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷(이하에서는 편의상 .xxx 포맷이라고 부르기로 함)이 요구된다. 예를 들어서, .xxx 포맷은 정지 영상에 대한 .jpg 파일 및 비디오에 대한 .mp4 파일을 지칭할 수 있다. .xxx 포맷의 파일이 업로드될 때에, 정지 영상(이를 클릭함으로써 비디오가 시작될 수도 있음)의 슬라이드쇼가 재생될 것이다.

본 발명의 제1실시예에 따른 한 가지 해결방안을 도 2a-2b에 나타내었다. 도 2a의 구성도는 도 1에 나타낸 것과 유사한 형태의 디지털 카메라(200)의 부분을 나타낸다. 도 2a에 나타낸 것과 같이, 카메라(200)는 렌즈(201)가 포함될 수 있는 광학계(202)를 포함한다. 센서(204)는 빔 분할기(206), 정지 영상을 검출하는 광검출기(예컨대, CCD(208)), 비디오를 검출하는 광검출기(예컨대, CCD(210))를 포함한다. 이들 광검출기(208, 210)는 빔 분할기(206)에서 나오는 광을 통해 영상을 취합할 수 있도록 그 위치가 정해진다. CCD(208)에 의해 캡쳐된 정지 영상과 CCD(210)에 의해 캡쳐된 비디오에 해당되는 데이터는 프로세서(209)에 의해 처리될 수 있으며 처리 후에 기록용 메모리(212)에 저장된다. 정지 및 비디오 영상을 각자의 서로 다른 포맷으로 하나의 공통된 파일(215)에 저장하기 위하여 프로세서(209)는, 예컨대, 적절한 소프트웨어 프로그래밍, 하드웨어, 또는 펌웨어로 구성된다.

도 2b는 정지 영상(214)과 비디오(216)를 포함하는 하나의 파일(215)을 형성하는 방법(220)을 나타내는 순서도이다. 광학계(202)가 정지 및 비디오 영상에 대한 광을 취합한다(222로 표시함). 광학계(202)에 의해 취합된 광은, 예컨대, 빔 분할기(206)에 의해 분할된다(224로 표시함). 광의 일부는 정지 영상 광검출기(208)로 가고(226로 표시함), 일부는 비디오 광검출기(210)로 간다(228로 표시함). 비디오 및 정지 영상은 서로 다른 포맷으로 메모리에 저장될 수 있지만, 특별한 포맷의 하나의 파일로 결합될 수 있다(230으로 표시함).

예를 들어서(한정하고자 하는 것은 아님), 비디오 CCD(210)는 카메라가 켜지는 순간부터 비디오 영상을 취합할 수 있다. 프로세서(209)는 비디오 영상을 메모리에, 연속된 그림(또는 프레임)으로 이루어진, 적절한 비디오 포맷(예컨대, ITU-R BT.656-4, H.264/AVC, MPEG-2, MPEG-4)의 비디오 비트 스트림으로 저장할 수 있다. 셔터 버튼이 눌러지면, 프로세서(209)는 정지 CCD(208)로부터 정지 영상을 취합할 수 있다. 프로세서(209)는 정지 영상이 취합되자마자 캡쳐된 해당 비디오 프레임을 식별하기 위하여, 디지털 마커를 비디오 데이터(216) 내에 위치시킬 수 있다. 해당 비디오 프레임을 식별하는, 유사한 디지털 마커를 정지 영상을 나타내는 데이터(214)에 위치시킬 수 있다. 일반적으로, 정지 영상 데이터(214)에는 적절한 포맷(예컨대, JPEG, TIFF)의 하나 이상의 정지 그림이 포함될 수 있다. 비디오 스트림과 정지 영상을 나타내는 데이터는 비디오 광검출기(210)와 정지 영상 광검출기(208)로 전송된다(224, 226, 228로 표시함).

비디오 영상(216)과 대표 정지 영상(들)(214)이 처리되어 새로운 포맷(.xxx 포맷으로 칭함)의 하나의 파일(215)로 결합된 다음에 메모리(212)에 저장된다. 새로운 .xxx 포맷은 정지 영상에 대한 파일(예컨대, JPEG, TIFF)과 비디오에 대한 파일(예컨대, ITU-R BT.656-4, H.264/AVC, MPEG-2, MPEG-4)을 나타내는 것이다. 이 새로운 파일 포맷은 또한, 정지 영상(또는 영상들)이 비디오 스트림의 시간 프레임에 대해서 캡쳐된 상대적 시간(또는 시간들)을 나타낸다.

하나의 파일(215)이 업로드되면, 업로드 소프트웨어는 정지 영상(214)에 대한 시간 마커로부터, 비디오(216) 내의 해당 프레임을 결정할 수 있다. 사용자는 정지 영상(214)의 슬라이드쇼를 프리젠테이션할 수 있을 것이다. 사용자가 소정 영상을 클릭하면, 프리젠테이션 소프트웨어는 정지 영상에 대한 시간 마커로부터, 재생이 시작되는, 비디오(216) 내 해당 프레임을 결정할 수 있을 것이다. 이에, 이 정지 영상에 해당되는 비디오 프레임에서부터 비디오가 시작될 것이다. 사용자에게는, 사용자가 이 정지 영상을 클릭할 때에 이 정지 영상이 "살아나는" 것으로 보이게 될 것이다.

본 발명의 제2실시예에 따른, 정지 및 비디오 영상을 하나의 파일로 결합하는 다른 방안이 도 3a-3b에 도시되어 있다. 도 3a의 구성도는 도 1에 나타낸 것과 유사한 디지털 카메라(300)의 일부를 나타낸다. 도 3a에 나타낸 것과 같이 카메라(300)는 하나 이상의 광학소자(예를 들어, 렌즈(201))가 포함될 수 있는 광학계(202)를 포함한다. 영상 센서(304)는 정지 영상 및 비디오 영상 모두를 검출하는 하나의 광검출기(306)를 포함한다. 카메라가 캡쳐한 정지 영상 및 비디오의 데이터는 프로세서(308)에서 처리된 후에 기록용 메모리(309)에 저장된다. 이 실시예에서, 카메라는 또한, 별도의 전용 버퍼(310)를 포함하는데, 이는 메모리(309) 내에 또는 별도의 전용 저장장치 내에 위치할 수 있다. 전용 버퍼는 광검출기(306) 및 프로세서(308)에 연결되어 정지 영상 데이터(312)를 임시로 저장하기 위한 것이다. 프로세서(308)는 정지 영상 데이터(312)와 비디오 데이터(314)를 하나의 파일(315)로 결합하여 이 하나의 파일을 메모리(309)에 저장할 수 있다.

도 3b는 정지 영상 및 비디오 모두를 하나의 파일로 형성하는 다른 방법(320)을 나타내는 순서도이다. 이 실시예에서, 영상이 하나의 영상 검출기로 캡쳐된다. 특히, 비디오는 카메라가 켜진 순간부터 캡쳐될 수 있다(322로 표시함). 비디오 프레임은 통상의 방식을 이용하여 비디오 데이터(314)로서 메모리(309)에 저장될 수 있다. 이 비디오 데이터(314)에는 일반적으로, 연속된 그림(또는 프레임)으로 이루어진, 적절한 비디오 데이터 포맷(예컨대, ITU-R BT.656-4, H.264/AVC, MPEG-2, MPEG-4)의 비디오 비트 스트림을 나타내는 데이터가 포함될 수 있다.

정지 영상이 캡쳐되면, 프로세서(308)는 비디오 데이터 내의 비디오 스트림에 대한 정지 영상의 위치를 마킹(mark)할 수 있다(324로 표시함). 예를 들어, 셔터 버튼이 눌려질 때, 마커는, 정지 영상으로서 선택된 비디오 프레임 상에 위치할 수 있다. 또는 이와 달리, 마커는 정지 영상 데이터(312) 내에 위치하여 하나 이상의 정지 영상을 하나 이상의 해당 비디오 프레임에 동기화시킬 수도 있다. 일반적으로, 이 정지 영상 데이터(312)에는, 적절한 정지 영상 데이터 포맷(예컨대, JPEG, TIFF)의 하나 이상의 정지 그림을 나타내는 데이터가 포함될 수 있다. 이 정지 영상은, 비디오가 작동되는 동안에 전용 버퍼 메모리(310)로 신속하게 로딩될 수 있다(326으로 표시함). 비디오 데이터 및 정지 영상 데이터는 새로운 포맷(.xxx 포맷으로 칭함)의 하나의 파일로 결합될 수 있다. 이 하나의 파일은 또한, 메모리(309)에 저장될 수 있다(328로 표시함). 새로운 .xxx 포맷은 정지 영상 해상도(예컨대, 4 메가픽셀 또는 10 메가픽셀)의 제1포맷(예컨대, JPEG, TIFF)의 의 정지 영상 데이터 파일과, 이와 별도의, 다른 해상도(예컨대, 1 메가픽셀)의 비디오 데이터 포맷(예컨대, ITU-R BT.656-4, H.264/AVC, MPEG-2, MPEG-4)의 비디오 데이터 파일을 나타낼 수 있다. 새로운 포맷의 파일이 업로드되면, 정지 영상의 슬라이드쇼를 프리젠테이션할 수 있는데, 이 정지 영상을 클릭하면 해당 비디오 프레임에서 비디오가 시작될 수 있다.

앞에서 설명한 실시예에 따라 캡쳐한 비디오 및 정지 영상의 상기와 같은 동기화된 표시는 도 4의 순서도로써 설명되는 제3실시예에 의해 구현될 수 있다. 구체적으로, 제1해상도에서의 제1포맷의 비디오 프레임을 나타내는 비디오 데이터와, 제2해상도에서의 제2포맷의 하나 이상의 정지 영상을 나타내는 정지 영상 데이터가 포함된 하나의 파일을 디스플레이 장치로 업로드할 수 있다(402로 표시함). 예를 들어서(그러나 한정하는 것은 아님), 이 파일을 웹사이트로 업로드할 수 있는 것이다. 또는 이와 달리, 이 파일을 독립형 디스플레이 장치(예컨대, 표시화면과 재생 기능을 갖는 비디오 픽쳐 프레임(비디오 화상 액자), 비디오 프로젝터, 또는 디지털 카메라 등)로 업로드할 수 있다. 이 하나의 파일은, 정지 영상 데이터 또는 비디오 데이터 내의 마커를 포함하는데, 이는 정지 영상을 비디오 프레임들 중의 해당되는 것에 동기화시킨다. 이 마커는 비디오 프레임의 재생 시작 위치를 표시한다. 이러한 파일은 앞에서 설명한 것과 같이 생성될 수 있다.

업로드되고 나면, 대표 정지 영상이 디스플레이 장치에 제1해상도로 표시될 수 있다(404로 표시함). 이 대표 정지 영상은 마커에 의해서 해당 비디오 영상에 동기화된다. 트리거 신호가 수신되면, 비디오 프레임의 표시가 시작될 수 있다(406으로 표시함). 비디오 프레임은 제2해상도로 표시될 수 있다. 일부 실시의 경우에, 비디오 표시는, 정지 영상에 동기되어 있는 비디오 프레임에서 시작될 수 있다. 비디오 영상 및 정지 영상이 마커에 의해 동기화되기 때문에, 사용자는 단지, 파일을 업로드할 때, 표시할 대표 영상(또는 영상들)을 선택하기만 하면 된다. 이로써, 비디오 및 정지 영상 표시의 동기화 처리가 매우 단순해지게 되어, 정지 영상을 "살아나게" 할 수 있다. 다른 방식의 실시에 있어서는, 정지상태로부터 비디오 프레임 순서(시퀀스)의 시작위치로 비디오를 되돌릴 수 있도록 하는 조작 기능을 구현할 수 있다. 비디오 표시는 이 순서(시퀀스)의 처음 프레임에서부터 시작할 수 있다. 정지 영상에 해당되는 비디오 프레임에서 비디오 시퀀스가 표시되는 동안에, 정지 영상이 취해진 위치를 나타내기 위하여 플래쉬 등의 신호를 표시할 수 있다.

본 발명의 실시예들은 가족 사진 및 전문 디지털 잡지에 응용할 수 있다. 또한, 일부 실시예에서는, 하위 호환성(backward compatibility)을 위해, 비디오 및 정지 포맷을 새로운 포맷 파일로부터 분리해내는 도구를 포함할 수 있다.

본 명세서(청구범위, 요약서, 및 도면을 포함)에 개시된 모든 특징은 명시 적으로 달리 언급되지 않은 한, 동일하거나 등가이거나 또는 유사한 목적을 제공하는 다른 특징들로 대체될 수 있다. 따라서, 명시적으로 달리 언급되지 않은 한, 개시된 각 특징은 일반적인 등가의 또는 유사한 특징들의 한 예에 불과하다. 임의의 특징(바람직한지의 여부에 관계없음)을 다른 모든 특징(바람직한지의 여부에 관계없음)과 결합할 수 있다. 이하의 청구범위에서, 명시적으로 달리 언급하지 않은 한, 부정관사 "a" 또는 "an"은 이 관사 뒤에 오는 사물의 한 개 이상의 수량을 나타낸다. 청구항에서, 특정 기능을 수행하는 "...수단(means for)"이라고 명시적으로 표현되지 않은 모든 구성요소는 35 USC §112 ¶6에 규정된 "수단(means)" 또는 "단계(step)"로 해석될 수 없다. 특히, 본 명세서의 청구범위에서 "...의 단계(step of)"를 사용하는 것는 35 USC §112 ¶6 규정을 행사하고자 의도한 것이 아니다.

독자는 본 명세서와 함께 제출되고, 여기에 참조로서 포함되었으며 공중 심사를 위해 공개되는, 본 명세서 및 모든 서류와 문서의 내용에 주의를 기울여야 한다.

Claims

영상 형성 광학계,
영상 형성 광학계에 광학적으로 연결된 빔 분할기,
빔 분할기에 광학적으로 연결되며, 상기 영상 형성 광학계와 빔 분할기에 의해 피사체의 광학적 신호가 결상되도록 구성되는 영상 센서를 포함하되,
상기 영상 센서는, 제1해상도로 비디오 프레임을 캡쳐하도록 구성되는 제1광검출기 배열체와, 이 제1광검출기가 비디오 프레임을 캡쳐하는 동안에 제2해상도로 정지 영상을 캡쳐하도록 구성되는 제2광검출기 배열체를 포함하는 것을 특징으로 하는 비디오 캡쳐 장치.
제1항에 있어서, 상기 영상 센서에 연결되는 프로세서를 더 포함하며,
상기 프로세서는 비디오 프레임에 해당되는 제1포맷의 데이터와 정지 영상에 해당하는 제2포맷의 데이터를 하나의 파일로 결합하도록 구성되는 것을 특징으로 하는 비디오 캡쳐 장치.
제2항에 있어서, 상기 프로세서에 연결되는 메모리를 더 포함하며,
상기 프로세서는 하나의 파일을 이 메모리에 저장하도록 구성되는 것을 특징으로 하는 비디오 캡쳐 장치.
제1항에 있어서, 상기 제2해상도는 제1해상도보다 적어도 네 배 더 높은 것을 특징으로 하는 비디오 캡쳐 장치.
제1항에 있어서, 상기 제2해상도는 제1해상도보다 적어도 열 배 더 높은 것을 특징으로 하는 비디오 캡쳐 장치.
제1항에 있어서, 상기 프로세서는, 정지 영상을 비디오 프레임 중의 해당되는 하나에 동기화시키는 마커를 이용하여, 정지 영상 또는 비디오 프레임을 나타내는 데이터를 마킹(mark)하도록 구성되는 것을 특징으로 하는 비디오 캡쳐 장치.
제6항에 있어서, 상기 마커는 비디오 프레임의 재생 시작 지점을 마킹하는 것을 특징으로 하는 비디오 캡쳐 장치.
영상 센서,
상기 영상 센서에 광학적으로 연결되며, 광학적 신호를 영상 센서에 결상시키는 영상 형성 광학계,
상기 영상 센서에 연결되는 프로세서, 및
상기 프로세서에 연결되는 메모리를 포함하되,
상기 영상 센서, 프로세서, 및 메모리는 정지 영상과 비디오 파일을 저장하도록 구성되며,
상기 프로세서는, 비디오 프레임을 나타내는 데이터를 비디오 데이터 포맷으로서 제1해상도로 메모리에 저장하고, 상기 비디오 프레임을 저장하는 동안에, 하나 이상의 정지 영상에 해당되는 데이터를 정지 영상 데이터 포맷으로서 제2해상도로 메모리 내의 전용 위치에 저장하도록 구성되고,
상기 프로세서는 추가적으로, 비디오 프레임을 나타내는 데이터와 정지 영상을 나타내는 데이터를 하나의 파일로 결합하도록 구성되는 것을 특징으로 하는 비디오 캡쳐 장치.
제8항에 있어서, 프로세서는 추가적으로, 상기 하나의 파일을 메모리에 저장하도록 구성되는 것을 특징으로 하는 비디오 캡쳐 장치.
제8항에 있어서, 상기 제2해상도는 제1해상도보다 적어도 네 배 더 높은 것을 특징으로 하는 비디오 캡쳐 장치.
제8항에 있어서, 상기 제2해상도는 제1해상도보다 적어도 열 배 더 높은 것을 특징으로 하는 비디오 캡쳐 장치.
제8항에 있어서, 상기 프로세서는, 정지 영상을 비디오 프레임 중의 해당되는 하나에 동기화시키는 마커를 이용하여, 정지 영상 또는 비디오 프레임을 나타내는 데이터를 마킹(mark)하도록 구성되는 것을 특징으로 하는 비디오 캡쳐 장치.
제12항에 있어서, 상기 마커는 비디오 프레임의 재생 시작 지점을 마킹하는 것을 특징으로 하는 비디오 캡쳐 장치.
비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법으로서,
영상 형성 광학계를 이용하여 피사체에 해당되는 광학 신호를 캡쳐하는 단계,
상기 광학 신호를 제1부분 및 제2부분으로 분할하는 단계,
상기 제1부분을 제1광검출기를 이용해 제1해상도의 비디오 프레임으로서 캡쳐하는 단계,
상기 제2부분을 제2광검출기를 이용해 제2해상도의 하나 이상의 정지 영상으로서 캡쳐하는 단계,
상기 정지 영상을 정지 영상 포맷의 데이터로 변환하고, 상기 비디오 프레임을 제2포맷의 비디오 데이터로 변환하는 단계,
상기 정지 영상 데이터와 비디오 프레임 데이터를 하나의 파일로 결합하는 단계,
상기 하나의 파일을 메모리에 저장하는 단계를 포함하는 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법.
제14항에 있어서, 상기 제2해상도는 제1해상도보다 적어도 네 배 더 높은 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법.
제14항에 있어서, 상기 제2해상도는 제1해상도보다 적어도 열 배 더 높은 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법.
제14항에 있어서, 정지 영상을 비디오 프레임 중의 해당되는 하나에 동기화시키는 마커를 이용하여, 상기 비디오 데이터 또는 정지 영상 데이터를 마킹하는 단계를 추가로 포함하는 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법.
제17항에 있어서, 상기 마커는 비디오 프레임의 재생 시작 지점을 마킹하는 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법.
비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법으로서,
영상 형성 광학계를 이용하여 피사체에 해당되는 광학 신호를 캡쳐하고, 광검출기 배열체 상에 이 광학 신호를 영상으로서 형성하는 단계,
광검출기 배열체를 이용해서 비디오 프레임을 캡쳐하고 이 비디오 프레임을 나타내는 데이터(비디오 데이터)를 제1포맷의 제1해상도로 메모리에 저장하는 단계,
상기 비디오 프레임을 캡쳐하는 동안에, 광검출기 배열체를 이용해서 정지 영상을 캡쳐하고 이 정지 영상을 나타내는 데이터(정지 영상 데이터)를 제2포맷의 제2해상도로 메모리에 저장하는 단계,
상기 비디오 프레임이 캡쳐되는 동안에 상기 정지 영상을 메모리의 전용 위치에 저장하는 단계,
상기 비디오 데이터와 정지 영상 데이터를 하나의 파일로 결합하는 단계, 및
상기 하나의 파일을 메모리에 저장하는 단계를 포함하는 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법.
제19항에 있어서, 상기 제2해상도는 제1해상도보다 적어도 네 배 더 높은 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법.
제19항에 있어서, 상기 제2해상도는 제1해상도보다 적어도 열 배 더 높은 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법.
제19항에 있어서, 정지 영상을 비디오 프레임 중의 해당되는 하나에 동기화시키는 마커를 이용하여, 상기 비디오 데이터 또는 정지 영상 데이터를 마킹하는 단계를 추가로 포함하는 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법.
제22항에 있어서, 상기 마커는 비디오 프레임의 재생 시작 지점을 마킹하는 것을 특징으로 하는, 비디오 캡쳐 장치로부터 캡쳐된 비디오 프레임과 대표 정지 영상을 하나의 파일로 결합하는 새로운 파일 포맷을 구성하는 방법.
비디오 프레임 및 정지 영상의 동기적 표시 방법에 있어서,
제1해상도의 제1포맷의 비디오 프레임을 나타내는 비디오 데이터와 제2해상도의 제2포맷의 하나 이상의 정지 영상을 나타내는 정지 영상 데이터가 포함되고, 상기 정지 영상 데이터 또는 비디오 데이터 내에 있으며 정지 영상을 비디오 프레임 중의 해당되는 하나에 동기화시키되 비디오 프레임의 재생 시작 지점을 마킹하는 마커를 포함하는 하나의 파일을 업로드하는 단계,
상기 마커에 의해 해당 비디오 영상에 동가화된 정지 영상을 제1해상도로 디스플레이장치에 표시하는 단계, 및
트리거 신호가 수신될 때 비디오 프레임의 표시를 시작하는 단계를 포함하는 것을 특징으로 하는, 비디오 프레임 및 정지 영상의 동기적 표시 방법.
제24항에 있어서, 상기 비디오 프레임의 표시는 정지 영상에 동기된 비디오 프레임에서 시작되는 것을 특징으로 하는, 비디오 프레임 및 정지 영상의 동기적 표시 방법.
제24항에 있어서, 상기 비디오 프레임의 표시는,
프레임들의 시퀀스 중의 첫번째 비디오 프레임에서 표시를 시작하는 단계, 및
정지 영상에 해당되는 상기 시퀀스 내의 프레임을 나타내는 신호를 표시하는 단계를 포함하는 것을 특징으로 하는, 비디오 프레임 및 정지 영상의 동기적 표시 방법.