KR20090064278A - 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 프로그램기록 매체 - Google Patents

기록 장치, 재생 장치, 기록 방법, 재생 방법 및 프로그램기록 매체 Download PDF

Info

Publication number
KR20090064278A
KR20090064278A KR1020080058059A KR20080058059A KR20090064278A KR 20090064278 A KR20090064278 A KR 20090064278A KR 1020080058059 A KR1020080058059 A KR 1020080058059A KR 20080058059 A KR20080058059 A KR 20080058059A KR 20090064278 A KR20090064278 A KR 20090064278A
Authority
KR
South Korea
Prior art keywords
image data
frame
shooting
data
recording
Prior art date
Application number
KR1020080058059A
Other languages
English (en)
Other versions
KR101480406B1 (ko
Inventor
미네키 타오카
Original Assignee
삼성디지털이미징 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성디지털이미징 주식회사 filed Critical 삼성디지털이미징 주식회사
Publication of KR20090064278A publication Critical patent/KR20090064278A/ko
Application granted granted Critical
Publication of KR101480406B1 publication Critical patent/KR101480406B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

본 발명에 관한 기록 장치는, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리하여 프레임 단위의 처리 완료 화상 데이터를 생성하는 화상 처리부와, 원시 화상 데이터를 프레임마다 순차적으로 재생하기 위해 정지화상 촬영이 행해졌을 때의 촬영 조건을 처리 완료 화상 데이터의 기록시에 프레임마다 취득하는 촬영 조건 취득부와, 프레임 단위의 원시 화상 데이터와 프레임 단위의 처리 완료 화상 데이터와 정지화상 촬영이 행해진 프레임의 촬영 조건을 순차적으로 기록 매체에 기록하는 매체 기록부를 구비한다.

Description

기록 장치, 재생 장치, 기록 방법, 재생 방법 및 프로그램 기록 매체{Recording apparatus, replaying apparatus, recording method, replaying method and program recording medium}
본 발명은 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 프로그램 기록매체에 관한 것으로, 보다 상세하게는 동영상 촬영 중에 정지화상으로 기록한 원시 화상 데이터를 사용하여, 동영상 재생을 부드럽게 수행할 수 있는 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 프로그램 기록 매체에 관한 것이다.
동영상을 기록할 수 있는 비디오 카메라와 캠코더 등의 촬상 장치는, 일반적으로 CCD 등의 촬상 소자의 각 화소로부터 출력된 신호에 소정의 화상 처리(현상처리; 現像處理)를 한 후, MPEG-2, Motion JPEG 등의 압축 처리를 하여 화상 데이터를 생성하고, 플래시 메모리나 HDD, DVD 등의 기록 매체에 화상 데이터를 기록한다.
화상 처리란, 예컨대 화이트 밸런스 제어, 노출 제어 등을 포함한다. 또한 동영상의 촬영과 정지화상의 촬영을 동시에 행하는 경우, 정지화상의 촬영이 행해진 프레임에 대해서, 프레임의 일부를 동영상 재생용으로 잘라내는 처리를 하고, 해상도 등을 조정하여 동영상 재생을 위한 연속성을 확보한다.
일본 등록특허공보 제3881168호에서는, 동영상을 촬영할 때에 촬상 소자의 출력을 데시메이트(decimate)하여 동영상 데이터를 생성, 기록하고, 동영상 촬영 중에 정지화상 촬영의 지시가 있었을 때 데시메이트하지 않은 화상을 압축 부호화 하며, 동영상용 화상 데이터와 정지화상 용화상 데이터를 관련시켜 기록하는 기술이 개시된다.
또한 일본 특허공개공보 제2006-41861호에서는, 동영상 촬영 중에 정지화상 화상의 촬영이 있었을 때 정지화상의 압축 부호화 처리를 병행하고, 동영상용 화상 데이터로부터 프레임을 데시메이트하며, 데시메이트 처리된 프레임 전후의 화상 데이터와의 인터 프레임 압축 처리를 행하고, 재생시에 이 압축 처리된 동영상용 화상 데이터를 사용하여 정지화상 데이터를 보강하는 기술이 개시된다.
일반적으로 화상 처리를 한 후 압축 처리가 행해지기 때문에, 기록된 화상의 재생 품질은 압축 처리가 행해지기 전의 데이터에 비해 저하된다. 따라서 정지화상을 기록하는 디지털 카메라 등의 촬상 장치 중에는, 압축 처리를 행하지 않고 촬상 소자의 출력 신호를 원시 데이터(raw data; 로데이터) 형식으로 기록하는 것이 있다. 그러나 동영상을 기록하는 캠코더 등의 촬상 장치에서 원시 데이터 형식으로 기록할 때에 데이터의 처리량이 커지기 때문에, 축소 화상을 보존하여 현상하는 작업을 할 때나 촬상 장치에서 재생할 때에 축소 화상을 이용하는 경우가 많았다.
동영상 촬영 중에 정지화상을 기록하는 경우, 통상, 촬상 소자로부터의 독출 방식은, 정지화상의 경우와 동영상의 경우가 다르기 때문에, 상술한 바와 같이, 정 지화상 촬영이 행해진 프레임에 대해서, 프레임의 일부를 동영상 재생용으로 잘라내는 절단 처리를 한다. 그리고 이와 같은 절단 처리에 있어서 동영상과 일치하는 정지화상 중의 위치는, 촬상 소자의 종류에 따라 상이하고, 촬상 장치의 독출 모드에 의해서도 달라진다.
본 발명의 목적은, 동영상 촬영 중에 정지화상으로 기록한 원시 화상 데이터를 사용하여, 동영상 재생을 부드럽게 할 수 있는 기록 장치, 재생 장치, 기록 방법, 재생 방법, 및 프로그램 기록 매체를 제공하는 데 있다.
본 발명에 관한 기록 장치는, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리하여 프레임 단위의 처리 완료 화상 데이터를 생성하는 화상 처리부와, 원시 화상 데이터를 프레임마다 순차적으로 재생하기 위해 정지화상 촬영이 행해졌을 때의 촬영 조건을 처리 완료 화상 데이터의 기록시에 프레임마다 취득하는 촬영 조건 취득부와, 프레임 단위의 원시 화상 데이터와 프레임 단위의 처리 완료 화상 데이터와 정지화상 촬영이 행해진 프레임의 촬영 조건을 순차적으로 기록 매체에 기록하는 매체 기록부를 구비한다.
본 발명에 있어서, 촬영 조건은, 정지화상 촬영시의 해상도와, 원시 화상 데이터의 프레임내의 일부 영역을 절단하기 위한 절단 위치 데이터나 동영상 재생용 프레임과의 위치 관계 데이터를 포함할 수 있다.
본 발명에 관한 재생 장치는, 프레임 단위의 원시 화상 데이터와, 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리한 프레임 단위의 처리 완료 화상 데이터와, 처리 완료 화상 데이터의 기록시에 정지화상 촬영이 행해졌을 때의 촬영 조건이 프레임마다 순차적으로 기록된 기록 매체로부터, 원시 화상 데이터와, 화상 처리 데이터와, 촬영 조건 중 적어도 하나를 독출하는 데이터 독출부와, 원시 화상 데이터를 프레임마다 순차적으로 재생할 때, 독출된 촬영 조건에 따라 정지화상 촬영이 행해졌을 때의 원시 화상 데이터를 동영상 재생용으로 화상 처리를 하는 화상 처리부를 구비한다.
본 발명에 관한 기록 방법은, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리하여 프레임 단위의 처리 완료 화상 데이터를 생성하는 단계와, 원시 화상 데이터를 프레임마다 순차적으로 재생하기 위해, 정지화상 촬영이 행해졌을 때의 촬영 조건을 처리 완료 화상 데이터의 기록시에 프레임마다 취득하는 단계와, 프레임 단위의 원시 화상 데이터와, 프레임 단위의 처리 완료 화상 데이터와, 정지화상 촬영이 행해진 프레임의 촬영 조건을 프레임마다 순차적으로 기록 매체에 기록하는 단계를 포함한다.
본 발명에 관한 재생 방법은, 프레임 단위의 원시 화상 데이터와, 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리한 프레임 단위의 처리 완료 화상 데이터와, 처리 완료 화상 데이터의 기록시에 정지화상 촬영이 행해졌을 때의 촬영 조건이 프레임마다 순차적으로 기록된 기록 매체로부터, 원시 화상 데이터와, 화상 처리 데이터와, 촬영 조건 중 적어도 하나를 독출하는 단계와, 원시 화상 데이터를 프레임마다 순차적으로 재생할 때, 독출한 촬영 조건에 따라 정지화상 촬영이 행해졌을 때의 원시 화상 데이터를 동영상 재생용으로 화상 처리를 하는 단계를 포함한다.
본 발명에 관한 컴퓨터로 읽을 수 있는 매체는, 컴퓨터에, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리하여 프레임 단위의 처리 완료 화상 데이터를 생성하는 기능과, 원시 화상 데이터를 프레임마다 순차적으로 재생하기 위해, 정지화상 촬영이 행해졌을 때의 촬영 조건을 처리 완료 화상 데이터의 기록시에 프레임마다 취득하는 기능과, 프레임 단위의 원시 화상 데이터와, 프레임 단위의 처리 완료 화상 데이터와, 정지화상 촬영이 행해진 프레임의 촬영 조건을 프레임마다 순차적으로 기록 매체에 기록하는 기능을 실현시킬 수 있다.
본 발명의 다른 측면에 관한 컴퓨터로 읽을 수 있는 매체는, 컴퓨터에, 프레임 단위의 원시 화상 데이터와, 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리한 프레임 단위의 처리 완료 화상 데이터와, 처리 완료 화상 데이터의 기록시에 정지화상 촬영이 행해졌을 때의 촬영 조건이 프레임마다 순차적으로 기록된 기록 매체로부터, 원시 화상 데이터와, 화상 처리 데이터와, 촬영 조건 중 적어도 하나를 독출하는 기능과, 원시 화상 데이터를 프레임마다 순차적으로 재생할 때, 독출된 촬영 조건에 따라, 정지화상 촬영이 행해졌을 때의 원시 화상 데이터를 동영상 재생용으로 화상 처리를 하는 기능을 실현시킬 수 있다.
상술한 바와 같은 본 발명의 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 프로그램은, 동영상 촬영 중에 정지화상으로 기록된 원시 화상 데이터를 사용하여, 동영상 재생을 부드럽게 행할 수 있다.
이하, 첨부 도면의 실시예들을 통하여, 본 발명에 관한 기록 장치, 재생 장치 등의 구성과 작용을 상세히 설명한다.
도 1은 본 발명의 일 실시예에 관한 동영상 기록 장치(100)의 구성을 나타내는 블록도이다. 도 1을 참조하여, 본 발명의 일 실시예에 관한 동영상 기록 장치(100)에 대해 설명한다.
동영상 기록 장치(100)는, 도 1에 도시한 바와 같이, 카메라(102), 카메라 신호 처리부(104), 포맷 처리부(110), 현상 처리부(120), 크기 처리부(122), JPEG 인코더(124), 촬영 조건 제어부(130), 포맷 처리부(136), 파일화 처리부(140), 미디어 기록부(150), 마이크(160), 음성 신호 처리부(162), 포맷 처리부(164)를 구비한다.
카메라 신호 처리부(104)에는, 카메라(102)의 촬상 소자(CCD(charge coupled device), CMOS(complementary metal oxide semiconductor) 등의 센서)로부터 출력된 동영상 데이터가 1 프레임 마다 입력된다. 카메라 신호 처리부(104)는, 입력된 신호를 AD(analog to digital) 변환을 수행하는 AD 컨버터를 구비한다. 카메라 신호 처리부(104)로부터 출력된 디지털 영상 신호는 포맷 처리부(110)와 현상 처리부(120)에 각각 입력된다.
포맷 처리부(110)는, 촬상 소자의 화소 배열(예컨대 베이어(bayer) 배열, 3판 CCD 등)에 따라, 디지털 변환된 R, G, B의 각 신호를 재정렬하는 처리를 한다. 또한 포맷 처리부(110)는, 프레임 내에서 가역적인 압축 처리를 동영상 데이터에 대해 한다. 가역 압축 방식에 의한 압축 처리에 의해 화질 등을 저하시키지 않고 화상 데이터를 기록, 재생할 수 있다. 가역 압축 방식으로는, 예컨대, 하프만 부호를 사용한 엔트로피 부호화(entropy coding) 등이 있다. 또한 가역 압축 방식은, 엄밀한 「가역」에 한정되지 않는다. 이와 같이 포맷 처리부(110)에 의한 포맷 처리에서는, 원시 화상 데이터로서의 화질을 유지하기 위해 화질을 손상시키는 압축 처리는 행하지 않는다. 한편, 원시 화상 데이터는 매우 큰 파일 크기를 가지므로, 용장도(冗長度; redundancy)가 작은 데이터로 처리한다. 포맷 처리부(110)에 의해 포맷 처리된 동영상 데이터는 원시 화상 데이터의 화질을 유지하며 파일화 처리부(140)로 입력된다.
현상 처리부(120)는, 입력된 영상 데이터에 대해, 화이트 밸런스 처리, 베이어 배열로부터의 보간처리, 노이즈 제거, 휘도 및 색보정 등의 일련의 현상 처리를 행한다. 현상 처리부(120)에 현상 처리가 행해진 데이터는, 크기 처리부(122)로 보내진다.
크기 처리부(122)는, 동영상 데이터의 크기를 축소하거나 확대하는 처리를 한다. 또한 크기 처리부(122)는, 동영상 촬영 중에 정지화상의 촬영이 행해졌을 때 동영상용의 해상도를 정지화상용 해상도로 변경하는 처리를 행한다. 크기 처리부(122)로부터 출력된 데이터는, JPEG 인코더(124)로 보내진다.
또한 크기 처리부(122)는, 필요에 따라 EVF(electronic view finder; 전자 뷰파인더)(미도시), LCD(liquid crystal display)(미도시) 등의 표시 장치의 화면 크기에 맞추어 동영상 데이터의 크기를 축소하는 처리를 한다. 크기 처리부(122)로 부터 출력된 데이터는, EVF, LCD로 보내져 화면에 표시된다. 이에 따라, 사용자는 카메라(102)로 촬영된 영상을 실시간으로 확인할 수 있다.
JPEG 인코더(124)는, 입력된 데이터에 대해 JPEG의 압축 부호화 처리를 하여 압축 화상 데이터(처리 완료 화상 데이터)를 파일화 처리부(140)로 보낸다.
촬영 조건 제어부(130)는 동영상 기록 장치(100)가 촬영을 수행할 때의 촬영 조건을 제어한다. 예컨대, 촬영 조건 제어부(130)가 제어하는 촬영 조건은 정지화상 촬영과 동영상 촬영의 전환, 동영상 촬영시에 있어서의 해상도의 전환 등이 있다. 촬영 조건 제어부(130)는, 카메라(102), 카메라 신호 처리부(104), 포맷 처리부(110), 현상 처리부(120), 크기 처리부(122), JPEG 인코더(124), 포맷 처리부(164)에 촬영 조건을 지시한다. 이러한 각 부분은 지시에 따라 촬영 조건을 설정한다.
그리고 촬영 조건 제어부(130)는 촬영 조건 데이터를 포맷 처리부(136)로 보낸다. 포맷 처리부(136)는 촬영 조건 데이터를 포맷 처리하여 데이터를 파일화 처리부(140)로 보낸다. 포맷 처리부(136)는 촬영 조건 취득부의 일예로서, 처리가 완료된 화상 데이터가 기록될 때에 원시 화상 데이터를 프레임마다 순차적으로 재생하기 위해 필요한 촬영 조건을 프레임마다 취득한다. 즉 포맷 처리부(136)는 정지화상 촬영이 행해졌을 때에 촬영 조건 제어부(130)가 설정한 촬영 조건을 프레임마다 취득한다. 촬영 조건은, 정지화상 촬영시의 해상도, 원시 화상 데이터의 프레임 내의 일부의 영역을 잘라내기 위한 절단 위치 데이터 또는 동영상 재생용 프레임과의 위치 관계 데이터 등을 포함한다.
파일화 처리부(140)는 포맷 처리부(110)로부터 전송된 원시 화상 데이터나, JPEG 인코더(124)에서 압축 처리된 압축 화상 데이터나, 포맷 처리부(136)에서 전송된 촬영 조건 데이터를 일시적으로 축적한다. 파일화 처리부(140)에 축적된 압축 화상 데이터, 원시 화상 데이터 및 촬영 조건 데이터는 미디어 기록부(150)로 전송되고, 기록 미디어의 기록 포맷에 따라 기록 미디어에 기록된다. 기록 미디어는, 예컨대, 광학식 기록 매체(CD, DVD 등), 광자기 디스크, 자기 디스크, 반도체 기억 매체 등을 포함할 수 있다.
또한 마이크(160)는 카메라(102)에 의한 동영상 촬영과 동시에 피사체의 음성을 취득하여, 음성 신호 처리부(162)로 보낸다. 음성 신호 처리부(162)는, 입력된 음성의 아날로그 신호를 AD 변환하는 AD 컨버터를 구비한다. 음성 신호 처리부(162)로부터 출력된 디지털 음성 신호는 포맷 처리부(164)로 전송된다. 포맷 처리부(164)에서는, 비압축 PCM방식, 또는 ADPCM방식, AAC방식, AC3방식, MP3방식 등의 압축 처리에 의해 음성 데이터를 포맷한다. 포맷 처리부(164)에서 포맷된 음성 데이터는 파일화 처리부(140)로 입력된다. 파일화 처리부(140)는 음성 데이터를 일시적으로 축적한다.
또한 도시하지는 않았지만 동영상 기록 장치(100)는 호스트 CPU를 구비할 수 있다. 호스트 CPU는 파일화 처리부(140)의 미디어 기록부(150)에 대한 데이터 송신, 및 미디어 기록부(150)의 기록 미디어에 대한 데이터의 기록을 제어한다. 호스트 CPU는 파일화 처리부(140)에 축적되어 있는 압축 화상 데이터, 원시 화상 데이터, 음성 데이터 및 촬영 조건 데이터를 소정량마다(예컨대, 1프레임의 데이터량마 다) 미디어 기록부(150)로 전송하여 기록 미디어에 순차적으로 기록하도록, 파일화 처리부(140) 및 미디어 기록부(150)를 제어한다. 호스트 CPU는 압축 화상 데이터, 원시 화상 데이터, 음성 데이터 및 촬영 조건 데이터를 소정의 순서로 기록 미디어에 기록한다.
또한 동영상 기록 장치(100)에서의 일련의 처리는 하드웨어에서 처리해도 되고, 컴퓨터상의 프로그램에 의한 소프트웨어 처리로 실현해도 된다.
이상과 같이 구성된 본 발명의 일 실시예의 동영상 기록 장치(100)에서는, 카메라(102)의 촬상 소자로부터 출력되어 AD 변환된 영상 디지털 데이터가, 포맷 처리부(110)로 전송되고, 원시 화상 데이터가 그대로 기록 미디어에 기록된다. 이와 같이 기록 미디어는 고화질의 원시 화상 데이터가 기록되므로, 원시 화상 데이터를 독출하여 표시함으로써 압축된 영상 데이터에 비해 고화질의 영상을 재생할 수 있다.
한편, 원시 화상 데이터는 데이터량이 많기 때문에, 원시 화상 데이터 그대로는 EVF, LCD에 대한 실시간 화면 표시를 할 수 없고, 또한 JPEG 등의 압축 처리를 직접 할 수 없다. 본 발명의 일 실시예에 관한 동영상 기록 장치(100)에서는, 원시 화상 데이터의 기록과 함께, 동영상 데이터의 현상 처리, 축소 처리, 압축 처리를 하기 때문에, 촬영과 동시에 EVF, LCD에 대한 실시간 표시를 할 수 있고, 표시 화면을 모니터링하면서 촬영을 행할 수 있다. 또한 기록 미디어에는 원시 화상 데이터와 함께 압축 처리된 압축 화상 데이터가 기록되기 때문에, 재생시에는 압축 화상 데이터에 의해 영상의 검색, 섬네일 이미지(thumbnail image)의 표시 등을 행 할 수 있다. 이에 따라 영상의 중요한 부분에 대해서는 원시 화상 데이터에 의한 고화질 재생이 가능하고, 영상의 중요도가 비교적 낮은 부분에 대해서는 압축 화상 데이터를 고속으로 독출함으로써 임시적인 재생이 가능하다.
또한 본 발명의 일 실시예의 동영상 기록 장치(100)는 원시 화상 데이터를 그대로 보존하고, 원시 화상 데이터를 프레임마다 순차적으로 재생하기 위해 필요한 압축 화상으로 기록할 때에 정지화상 촬영이 행해졌을 때의 촬영 조건과 함께 파일화한다. 기록 미디어에는 원시 화상 데이터와 함께 촬영 조건 데이터가 기록되기 때문에, 재생시 원시 화상 데이터를 현상 처리할 때 촬영 조건 데이터를 독출하여 현상 처리할 수 있다. 그 결과 정지화상용 프레임으로 기록된 원시 화상 데이터에 대해서도 동영상 재생용의 프레임으로 화상 처리할 수 있다.
이어서, 기록 미디어에서의 기록 포맷에 대해 설명한다. 도 2는 동영상 기록 장치(100)에 의한 기록 미디어에 대한 기록 포맷을 나타내는 모식도이다. 예를 들어, 촬상 소자가 베이어 배열의 단판이라고 가정하면, 출력되는 데이터는 [R:G:B=1:2:1]의 비율로 베이어 배열된 화소의 순서로 출력된다. 동영상 기록 장치(100)는 이 베이어 배열 데이터의 화질을 손상시키지 않고 기록하기 때문에, 포맷 처리부(110)에 의해 RGB의 순서대로 재정렬하고, 화질을 손상시키는 압축 처리를 하지 않고 기록한다.
도 2(A)는 영상의 기록 개시(녹화 시작)로부터 기록 정지(녹화 정지)까지의 하나의 동영상 파일을 나타낸다. 또한 도 2(B)는 도 2(A)의 기록 데이터 중 1프레임 만큼의 데이터를 나타낸다.
베이어 배열 RGB 데이터는, 포맷 처리부(110)에 의해 재정렬되어 기록 미디어의 데이터 영역에 기록된다. 또한 JPEG 인코더(124)에 의해 인코딩된 압축 화상 데이터, 및 포맷 처리부(164)에 포맷된 음성 데이터도 기록 미디어의 데이터 영역에 기록된다. 도 2(A)에 도시한 바와 같이, 기록 포맷의 선두에는 헤더(header)가 기록된다. 헤더에는, 촬영 일시, 카메라(102)의 촬상 소자의 정보, 동영상 기록 장치(100)의 기기 명칭, 오디오의 채널수, 비트수, 기록 미디어의 기록 포맷 정보, 카메라(102)의 렌즈의 사양 데이터 등의 전체적인 정보가 기록된다. 헤더에 이어 영상의 1프레임 마다 데이터가 기록된다.
1프레임의 데이터는, 프레임 헤더(프레임 헤더 0, 1, …, n)와 프레임 데이터(F0, F1, …, Fn)로 구성된다. 도 2(B)에 도시된 바와 같이, 각각의 프레임 데이터에는, 음성 데이터(Audio), 압축 화상 데이터(compressed image data), 원시 화상 데이터(G, B, R)의 순으로 프레임 단위로 반복 기록된다. 그리고 최후의 프레임 Fn의 데이터에 이어 푸터(Footer)가 기록된다.
각 프레임의 프레임 헤더에는, 예를 들어, 각 프레임의 음성 데이터, 압축 화상 데이터, 원시 화상 데이터의 데이터 크기가 기록된다. 또한 각 프레임의 프레임 헤더에는 프레임마다의 촬영 조건 데이터가 기록된다.
도 3은 도 1의 기록 장치의 촬상 소자의 촬상면을 나타내는 모식도이다. 도 3을 참조하여 정지화상용으로 촬영된 원시 화상 데이터로부터 동영상 재생용으로 데이터를 독출하는 예에 대해 설명하기로 한다.
동영상 기록 장치(100)를 이용하여 동영상을 촬영하는 동안, 촬상 소자로부 터 순차적으로 프레임 단위의 원시 화상 데이터가 출력된다. 그리고 동영상 촬영 중에 정지 화상을 촬영하면, 동영상용 프레임의 사이에 정지화상용 프레임이 삽입되는 형식으로 데이터가 출력된다. 예를 들어, 도 3(A)는 순차적으로 출력되는 프레임을 나타내는데, I0∼I4, I6, I7이 동영상용 프레임이며, I5가 정지화상용 프레임이다.
정지화상용 프레임의 크기는, 일반적으로 동영상용 프레임의 크기보다 크다. 또한 정지화상 촬영에 소요된 시간은 동영상 촬영의 1프레임의 사이의 시간 보다 긴 경우가 많고, 정지화상용 프레임과 동영상용 프레임의 사이의 시간은 동영상 촬영 2프레임 이상이 되는 경우가 있다.
상술한 바와 같이 정지화상용 프레임과 동영상용 프레임의 크기는 다르고, 도 3(B)에 도시한 바와 같이 촬영되는 동안 촬상 소자로부터 데이터가 독출되는 위치가 다르다. 즉 정지화상 촬영 중에는 동영상 촬영의 영역 보다 넓은 영역에서 촬영이 이루어지므로, 동영상 촬영 중의 영역 보다 외측 영역에 해당하는 촬상 소자의 데이터도 받아들일 필요가 있다. 따라서 정지화상 촬영시의 해상도와, 원시 화상 데이터의 프레임내의 일부의 영역을 절단하기 위한 절단 위치 데이터나 동영상 재생용 프레임과의 위치 관계 데이터 등을 촬영 조건으로 기록함으로써, 원시 화상 데이터를 현상 처리하여 재생할 때 기록된 촬영 조건을 이용하여 동영상 재생이 부드럽게 이루어지도록 할 수 있다.
도 3(B)에 나타난 예에서는, 동영상 촬영시의 프레임의 좌상단을 기준으로 좌표를 잡고, 화소 위치를 이용하여 정지화상 촬영시의 프레임의 좌상단의 좌표를 예를 들어 (X, Y)로 표현하고, 이를 절단 위치로 기록한다. 또한 동영상용 프레임과 정지화상용 프레임의 차이를 촬영 조건으로 기록해도 좋다. 예를 들어, 프레임 레이트나 해상도, 화소 영역의 넓이, 동영상 재생용 프레임과의 위치 관계에 관한 데이터를 촬영 조건으로 기록할 수도 있다.
도 4는 본 발명의 일 실시예에 관한 동영상 재생 장치(200)의 구성을 나타내는 블록도이다. 도 4를 참조하여, 도 1의 동영상 기록 장치(100)에 기록된 동영상 데이터를 재생하는 동영상 재생 장치(200)에 대해 설명한다.
도 4에 도시한 바와 같이, 동영상 재생 장치(200)는 호스트 CPU(202), 미디어 독출부(210), de-multiplex(디멀티플렉스; 212), 화상 위치 정보 추출부(220), 음성 신호 처리부(230), 오디오 출력부(232), JPEG 디코딩부(240), 영역 절단부(250), 현상 처리부(252), 크기 처리부(254), 프레임 레이트 변환부(256), MUX(multiplex, 멀티플렉스; 260), 비디오 출력부(262)를 구비한다.
미디어 독출부(210)는, 호스트 CPU(202)의 명령에 의해 기록 미디어로부터 데이터를 독출한다. de-multiplex(212)는 미디어 독출부(210)로부터 독출한 데이터를 일시적으로 모아 음성 신호 처리부(230), JPEG 디코딩부(240), 영역 절단부(250)의 각각으로 보낸다.
화상 위치 정보 추출부(220)는 프레임 헤더에 기록된 촬영 조건 데이터를 추출하여 호스트 CPU(202)로 보낸다.
호스트 CPU(202)는 화상 위치 정보 추출부(220)로부터 전송된 촬영 조건 데이터에 따라, 현상 처리부(252), 크기 처리부(254) 또는 프레임 레이트 변환 부(256)에서의 화상 처리를 제어한다. 따라서 기록 미디어로부터 촬영 조건 데이터가 독출된 경우, 독출된 촬영 조건 데이터에 따라 현상 처리, 사이즈 처리, 프레임 레이트 변환 처리가 행해지기 때문에 동영상 촬영 중에 정지화상 촬영이 행해진 경우에도 정지화상용 프레임을 동영상 재생용 프레임으로 변환할 수 있고, 원시 화상 데이터에 따른 동영상 재생시에도 부드러운 동영상 재생을 행할 수 있다.
음성 신호 처리부(230)는 음성 데이터를 디포맷하고, 디포맷된 신호를 DA변환하여 오디오 출력부(232)로 보낸다. 오디오 출력부(232)는 아날로그 변환된 오디오 신호를 외부로 출력한다.
JPEG 디코딩부(240)은 압축 화상 데이터를 디코딩하고, 디코딩된 영상 데이터를 축소 또는 확대하여 MUX(260)로 보낸다.
영역 절단부(250)는 원시 화상 데이터를 베이어 디포맷하여 베이어 배열로 재정렬하여 현상 처리부(252)로 보낸다. 또한 영역 절단부(250)는 호스트 CPU(202)를 통해 화상 위치 정보 추출부(220)로부터 전송된 촬영 조건 데이터에 따라, 동영상 재생을 위한 절단 분량을 산출하고, 정지화상용 프레임의 일부 영역을 절단하는 크롭(crop) 처리를 한다.
현상 처리부(252)는 디포맷된 원시 화상 데이터에 대해, 화이트 밸런스 처리, 베이어 배열로부터의 보간처리, 노이즈 제거, 휘도 및 색보정 등의 일련의 현상 처리를 한다.
크기 처리부(254)는, 현상 처리가 행해진 원시 화상 데이터의 크기를 축소하는 처리를 한다.
프레임 레이트 변환부(256)는 정지화상 촬영에 걸린 시간이 동영상 촬영 1프레임간의 시간 보다 길 때, 정지화상용 프레임을 동영상 촬영 프레임 레이트에 맞추어 2이상의 프레임을 복제하는 등의 처리를 하고, MUX(260)에 전송한다.
MUX(260)는 JPEG 디코딩부(240)나 크기 처리부(254)로부터 전송된 영상 데이터를 비디오 출력부(262)로 보낸다. 비디오 출력부(262)에서는 전송된 데이터를 DA 변환하여 아날로그 신호 데이터를 외부로 출력한다.
동영상 재생 장치(200)에서 수행되는 일련의 처리는 하드웨어에서 처리해도 되고, 컴퓨터상의 프로그램에 의한 소프트웨어 처리로 실현해도 된다.
이상과 같은 구성의 본 발명의 일 실시예에 관한 동영상 재생 장치(200)는 미디어 독출부(210)부터 독출된 파일의 각 프레임 헤더에 기록된 촬영 조건 데이터를 이용하여 현상 처리와, 사이즈 처리를 행한다. 그리고 통상적으로 동영상 기록 장치(100)의 촬상 소자의 차이나 독출 모드의 차이에 의해 동영상용 프레임과 일치하는 정지화상용 프레임의 위치가 달라지지만, 동영상 재생 장치(200)는 촬영 조건을 기초로 정지화상용 프레임을 동영상용 프레임용으로 절단하는 등의 처리를 행할 수 있어서, 동영상의 부드러운 재생이 가능하다.
원시 화상 데이터의 재생시에는, 기록 미디어로부터 G, B, R의 각각의 원시 화상 데이터를 독출하고, 그 데이터를 현상 처리하여, 원시 화상 데이터가 영상 신호화된다. 영상 신호는, 소정의 화상 크기로 축소 처리되고, 비디오 출력부(262)에 비디오 출력된다. 이에 따라, 동영상 재생 장치(200)에 의해 고화질 재생이 가능하다.
압축 화상 데이터를 재생하는 경우에는, 기록 미디어로부터 압축 화상 데이터를 프레임 단위로 순차적으로 독출함으로써 압축 화상 데이터를 재생할 수 있다. 이 경우, 독출되는 데이터의 크기는 원시 화상 데이터에 비해 매우 작다. JPEG 디코딩된 영상 신호를 소정의 화상 크기로 축소 처리하거나, 또는 확대 처리하여 출력함으로써, 원시 화상 데이터를 재생하는 경우에 비교하여 가벼운 처리로 재생을 할 수 있다. 이와 같이 압축 화상 데이터에 의한 간이 재생 모드를 활용함으로써 동영상 재생 장치(200)의 하드웨어 구성을 크게 단순화할 수 있으며, 이로 인해 소비전력도 크게 절감할 수 있다.
또한 특수 재생 모드로서, 고속 재생 모드에 대해서도 JPEG 데이터를 사용함으로써 부하가 적은 처리가 가능하다. 이 경우, 재생 배속율에 맞추어 프레임 헤더만을 검색 하면서 음성 데이터, 압축 화상 데이터, 원시 화상 데이터의 데이터 크기 정보로부터 필요한 프레임만을 비월 주사하여 압축 화상 데이터를 독출하고, JPEG 디코딩하여 독출하면 된다. 역회전 방향의 재생도 같은 방법을 이용함으로써 용이하게 실현 가능하다.
또한 압축 화상 데이터를 이용하여 파일 중의 촬영 화상의 일람을 섬네일 이미지로 표시하는 것도 가능하다. 이 경우, 예를 들어 복수의 동영상 파일의 각각에 대해 1프레임의 화상을 섬네일 이미지로 표시해도 되고, 각 동영상 파일을 동영상 재생하여 섬네일 이미지로 표시해도 된다.
이상 설명한 바와 같이 본 발명의 일 실시예에 의하면, 원시 화상 데이터와 압축 화상 데이터를 모두 관련시켜 기록할 수 있으므로, 고화질의 재생을 행하는 경우에는 원시 화상 데이터를 사용하고, 리얼 타임 표시, 화상 검색 등의 경우에는 데이터량이 적은 압축 화상 데이터를 사용할 수 있다. 이에 따라, 고화질의 조작성이 뛰어난 동영상 기록 장치(100), 및 동영상 재생 장치(200)을 제공할 수 있다.
본 발명은 상술한 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 당해 기술 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위에 의해 정해져야 할 것이다.
도 1은 본 발명의 일 실시예에 관한 동영상 기록 장치의 구성을 나타내는 블록도이다.
도 2는 화상 기록 장치에 의한 기록 미디어에 대한 기록 포맷을 나타내는 모식도이다.
도 3은 도 1의 기록 장치의 촬상 소자의 촬상면을 나타내는 모식도이다.
도 4는 본 발명의 일 실시예에 관한 동영상 재생 장치의 구성을 나타내는 블록도이다.
* 도면의 주요부분에 대한 부호의 설명
100: 동영상 기록 장치 220: 화상 위치 정보 추출부
102: 카메라 232: 오디오 출력부
104: 카메라 신호 처리부 240: JPEG 디코딩부
124: JPEG 인코더 250: 영역 절단부
130: 촬영 조건 제어부 256: 프레임 레이트 변환부
140: 파일화 처리부 260: MUX
150: 미디어 기록부 262: 비디오 출력부
160: 마이크 120, 252: 현상 처리부
200: 동영상 재생 장치 122, 254: 크기 처리부
202: 호스트 CPU 162, 230: 음성 신호 처리부
210: 미디어 독출부 110, 136, 164: 포맷 처리부
212: 디멀티플렉스

Claims (8)

  1. 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리하여 프레임 단위의 처리 완료 화상 데이터를 생성하는 화상 처리부;
    상기 원시 화상 데이터를 프레임마다 순차적으로 재생하기 위해, 정지화상 촬영이 행해졌을 때의 촬영 조건을 상기 처리 완료 화상 데이터의 기록시에 프레임마다 취득하는 촬영 조건 취득부; 및
    프레임 단위의 상기 원시 화상 데이터와, 프레임 단위의 상기 처리 완료 화상 데이터와, 상기 정지화상 촬영이 행해진 프레임의 상기 촬영 조건을 순차적으로 기록 매체에 기록하는 매체 기록부;를 구비하는 기록 장치.
  2. 제1항에 있어서,
    상기 촬영 조건은, 상기 정지화상 촬영시의 해상도와, 상기 원시 화상 데이터의 프레임내의 일부 영역을 절단하기 위한 절단 위치 데이터나 동영상 재생용 프레임과의 위치 관계 데이터를 포함하는, 기록 장치.
  3. 프레임 단위의 원시 화상 데이터와, 상기 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리한 프레임 단위의 처리 완료 화상 데이터와, 상기 처리 완료 화상 데이터의 기록시에 정지화상 촬영이 행해졌을 때의 촬영 조건이 프레임마 다 순차적으로 기록된 기록 매체로부터, 상기 원시 화상 데이터와, 상기 화상 처리 데이터와, 상기 촬영 조건 중 적어도 하나를 독출하는 데이터 독출부; 및
    상기 원시 화상 데이터를 프레임마다 순차적으로 재생할 때, 독출된 상기 촬영 조건에 따라 상기 정지화상 촬영이 행해졌을 때의 상기 원시 화상 데이터를 동영상 재생용으로 화상 처리를 하는 화상 처리부;를 구비하는 재생 장치.
  4. 제3항에 있어서,
    상기 촬영 조건은, 상기 정지화상 촬영시의 해상도와, 상기 원시 화상 데이터의 프레임내의 일부 영역을 절단하기 위한 절단 위치 데이터나 동영상 재생용 프레임과의 위치 관계 데이터를 포함하는, 재생 장치.
  5. 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리하여 프레임 단위의 처리 완료 화상 데이터를 생성하는 단계와,
    상기 원시 화상 데이터를 프레임마다 순차적으로 재생하기 위해, 정지화상 촬영이 행해졌을 때의 촬영 조건을 상기 처리 완료 화상 데이터의 기록시에 프레임마다 취득하는 단계와,
    프레임 단위의 상기 원시 화상 데이터와, 프레임 단위의 상기 처리 완료 화상 데이터와, 상기 정지화상 촬영이 행해진 프레임의 상기 촬영 조건을 프레임마다 순차적으로 기록 매체에 기록하는 단계를 포함하는, 기록 방법.
  6. 프레임 단위의 원시 화상 데이터와, 상기 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리한 프레임 단위의 처리 완료 화상 데이터와, 상기 처리 완료 화상 데이터의 기록시에 정지화상 촬영이 행해졌을 때의 촬영 조건이 프레임마다 순차적으로 기록된 기록 매체로부터, 상기 원시 화상 데이터와, 상기 화상 처리 데이터와, 상기 촬영 조건 중 적어도 하나를 독출하는 단계와,
    상기 원시 화상 데이터를 프레임마다 순차적으로 재생할 때, 독출한 상기 촬영 조건에 따라 상기 정지화상 촬영이 행해졌을 때의 상기 원시 화상 데이터를 동영상 재생용으로 화상 처리를 하는 단계를 포함하는, 재생 방법.
  7. 컴퓨터에, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리하여 프레임 단위의 처리 완료 화상 데이터를 생성하는 기능;
    상기 원시 화상 데이터를 프레임마다 순차적으로 재생하기 위해, 정지화상 촬영이 행해졌을 때의 촬영 조건을 상기 처리 완료 화상 데이터의 기록시에 프레임마다 취득하는 기능; 및
    프레임 단위의 상기 원시 화상 데이터와, 프레임 단위의 상기 처리 완료 화상 데이터와, 상기 정지화상 촬영이 행해진 프레임의 상기 촬영 조건을 프레임마다 순차적으로 기록 매체에 기록하는 기능;을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 매체.
  8. 컴퓨터에, 프레임 단위의 원시 화상 데이터와, 상기 원시 화상 데이터를 재생 가능한 화상 데이터로 화상 처리한 프레임 단위의 처리 완료 화상 데이터와, 상기 처리 완료 화상 데이터의 기록시에 정지화상 촬영이 행해졌을 때의 촬영 조건이 프레임마다 순차적으로 기록된 기록 매체로부터, 상기 원시 화상 데이터와, 상기 화상 처리 데이터와, 상기 촬영 조건 중 적어도 하나를 독출하는 기능; 및
    상기 원시 화상 데이터를 프레임마다 순차적으로 재생할 때, 독출된 상기 촬영 조건에 따라, 상기 정지화상 촬영이 행해졌을 때의 상기 원시 화상 데이터를 동영상 재생용으로 화상 처리를 하는 기능;을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 매체.
KR20080058059A 2007-12-14 2008-06-19 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 프로그램기록 매체 KR101480406B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2007323931A JP5118465B2 (ja) 2007-12-14 2007-12-14 記録装置、再生装置、記録方法、再生方法及びプログラム
JPJP-P-2007-00323931 2007-12-14

Publications (2)

Publication Number Publication Date
KR20090064278A true KR20090064278A (ko) 2009-06-18
KR101480406B1 KR101480406B1 (ko) 2015-01-12

Family

ID=40917821

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20080058059A KR101480406B1 (ko) 2007-12-14 2008-06-19 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 프로그램기록 매체

Country Status (2)

Country Link
JP (1) JP5118465B2 (ko)
KR (1) KR101480406B1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5603641B2 (ja) 2010-04-23 2014-10-08 キヤノン株式会社 撮像装置、画像処理装置、制御方法及びプログラム
JP4987129B2 (ja) 2010-04-23 2012-07-25 キヤノン株式会社 画像処理装置及びその制御方法
JP5843525B2 (ja) * 2010-11-10 2016-01-13 キヤノン株式会社 撮像装置及びその制御方法
JP2013146001A (ja) * 2012-01-16 2013-07-25 Olympus Imaging Corp 撮像装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3809629B2 (ja) * 1998-01-20 2006-08-16 株式会社熊平製作所 画像撮像録画装置
JP2001111934A (ja) * 1999-10-04 2001-04-20 Olympus Optical Co Ltd 電子カメラ装置
JP2007166193A (ja) * 2005-12-13 2007-06-28 Fujifilm Corp カメラシステム

Also Published As

Publication number Publication date
JP5118465B2 (ja) 2013-01-16
KR101480406B1 (ko) 2015-01-12
JP2009147745A (ja) 2009-07-02

Similar Documents

Publication Publication Date Title
US8194143B2 (en) Digital camera apparatus and recording method thereof
JP4958758B2 (ja) 記録装置、再生装置、記録方法、再生方法及びプログラム
US7535495B2 (en) Digital camera, control method thereof and portable terminal
KR20090063062A (ko) 동화상 기록 장치, 동화상 재생 장치 및 기록매체
US20090153704A1 (en) Recording and reproduction apparatus and methods, and a storage medium having recorded thereon computer program to perform the methods
US8379093B2 (en) Recording and reproduction apparatus and methods, and a recording medium storing a computer program for executing the methods
JP2004088567A (ja) 撮像装置および方法、記録媒体、並びにプログラム
KR101480406B1 (ko) 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 프로그램기록 매체
JP4901673B2 (ja) 撮像装置、記録装置、再生装置、撮像方法、記録方法、再生方法及びプログラム
JP2007067708A (ja) 撮像装置およびその画像生成方法
JP5290568B2 (ja) 動画像記録装置、動画像再生装置及びプログラム
JP5118466B2 (ja) 記録装置、再生装置、記録方法、再生方法及びプログラム
KR101480407B1 (ko) 디지털 영상 처리 장치, 이의 제어 방법 및 상기 제어방법을 기록한 기록 매체
JP2000138941A (ja) 符号化装置、カメラ装置および記録方法
JP2005277591A (ja) 電子カメラ装置、及び撮像信号生成方法
JP4446669B2 (ja) 動画データの記録方法及びその再生方法並びに動画データの記録装置及びその再生装置
US20090040382A1 (en) Camera apparatus and still image generating method of camera apparatus
JP2012074756A (ja) 映像記録装置
KR20090071317A (ko) 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 그 방법을실현시키는 프로그램을 기록한 저장 매체
US20100149375A1 (en) Apparatus and method for faster recording and reproduction of digital video images
JP2000138940A (ja) 画像信号符号化装置、カメラ装置および記録方法
JP2012147129A (ja) 撮像装置及びその制御方法
JP2010199781A (ja) 動画編集装置および動画編集方法
JP2007067823A (ja) 撮像圧縮記録再生装置

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20171228

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee