KR101545902B1 - 촬상 장치, 기록 장치, 재생 장치, 촬상 방법, 기록 방법, 재생 방법 및 기록 방법에 관한 프로그램을 기록한 저장 매체 - Google Patents

촬상 장치, 기록 장치, 재생 장치, 촬상 방법, 기록 방법, 재생 방법 및 기록 방법에 관한 프로그램을 기록한 저장 매체 Download PDF

Info

Publication number
KR101545902B1
KR101545902B1 KR1020080126536A KR20080126536A KR101545902B1 KR 101545902 B1 KR101545902 B1 KR 101545902B1 KR 1020080126536 A KR1020080126536 A KR 1020080126536A KR 20080126536 A KR20080126536 A KR 20080126536A KR 101545902 B1 KR101545902 B1 KR 101545902B1
Authority
KR
South Korea
Prior art keywords
image data
raw image
frame
parameter
recording
Prior art date
Application number
KR1020080126536A
Other languages
English (en)
Other versions
KR20100067931A (ko
Inventor
나오즈미 수기무라
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020080126536A priority Critical patent/KR101545902B1/ko
Priority to US12/358,403 priority patent/US20100149375A1/en
Publication of KR20100067931A publication Critical patent/KR20100067931A/ko
Application granted granted Critical
Publication of KR101545902B1 publication Critical patent/KR101545902B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/12—Formatting, e.g. arrangement of data block or words on the record carriers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/7921—Processing of colour television signals in connection with recording for more than one processing mode
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G11B20/10527—Audio or video recording; Data buffering arrangements
    • G11B2020/10537—Audio or video recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/781—Television signal recording using magnetic recording on disks or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H04N9/8047—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출하는 파라미터 산출부;와, 상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이터와는 별도의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 매체 기록부;를 포함하는 기록 장치 및 이를 구비한 촬상 장치를 제공한다.
Figure R1020080126536
촬상 장치, 기록 장치, 재생 장치

Description

촬상 장치, 기록 장치, 재생 장치, 촬상 방법, 기록 방법, 재생 방법 및 기록 방법에 관한 프로그램을 기록한 저장 매체{Photographing apparatus, recording apparatus, reproducing apparatus, photographing method, recording method, reproducing method, and storing medium having program to perform the recording method}
본 발명은 촬상 장치, 기록 장치, 재생 장치, 촬상 방법, 기록 방법, 재생 방법 및 프로그램에 관한 것이다.
동화상을 기록할 수 있는 비디오 카메라, 캠코더 등의 촬상 장치는, 일반적으로 CCD 등의 촬상 소자로부터 출력된 신호에 소정의 화상 처리를 행한 후, MPEG-2 등의 압축 처리를 하여 플래시 메모리나 HDD, DVD 등의 기록 매체에 기록하고 있다.
상기의 화상 처리에는, 예컨대 화이트 밸런스 제어, 노출 제어가 있다. 일본특허공개공보 제2006-80892호에는 동영상의 일부를 정지화상으로서 기록할 때, 화상 처리에 의해 얻어진 화이트 밸런스에 관한 정보를, 화상에 관한 화상 데이터와 함께 화상 파일에 기록하는 기술이 개시되어 있다.
통상, 압축 처리가 실시됨으로써, 화상의 기록 재생 품질은 압축 처리가 실시되기 전의 데이터에 비해 저하된다. 그 때문에, 정지화상을 기록하는 디지털 카메라 등의 촬상 장치에는, 압축 처리를 하지 않고 촬상 소자로부터 출력된 신호를 RAW 형식으로 직접 기록하는 기술이 있다.
일본특허공개공보 평11-261933호, 제2001-60876호, 제2001-61067호에는, 화상 신호의 기록 시에 JPEG 등의 압축 형식인지, 직접 신호를 기록하는 RAW 형식인지를 선택하여 기록하는 기술이 개시되어 있다. 그런데, 촬상 소자로부터의 신호를 직접 기록 매체에 기록하는 경우에 고화질로 화상을 기록할 수는 있지만, 데이터 용량이 증가하기 때문에 동화상의 기록에는 행해지지 않았다.
또한, 정지화상을 표시할 때, 우선 RAW 형식으로 기록한 화상 데이터를 읽어들여 화상 표시에 적합한 파라미터를 산출한다. 그리고, 그 파라미터를 사용하여 화상 처리를 하고, 화상을 표시한다. 여기서, 파라미터란, 화이트 밸런스를 제어하는 화이트 밸런스 보정값이나, 휘도를 보정하는 휘도 보정값 등을 말한다.
한편, 촬상 소자로부터 직접 기록된 신호를 사용하여 동화상을 재생하고자 할 때, 정지화상의 표시와 달리 연속적인 고속의 화상 처리가 필요하다. 따라서, 동화상을 구성하는 하나씩의 프레임 화상에 대해 RAW 형식의 정지화상과 마찬가지로, 화상 데이터의 독출, 파라미터의 산출, 파라미터를 사용한 화상 처리를 하는 경우, 일련의 처리에 시간이 소요되기 때문에, 동화상의 재생 처리가 곤란하다는 문제가 있었다.
본 발명은, 촬상 소자로부터 프레임 단위로 순차적으로 출력된 RAW 화상 데이터를 재생할 때, 화상 처리를 신속하고도 정확하게 할 수 있는 촬상 장치, 기록 장치, 재생 장치, 촬상 방법, 기록 방법, 재생 방법 및 프로그램을 저장한 저장 매체를 제공하는 것을 주된 과제로 한다.
본 발명은, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출하는 파라미터 산출부와, 상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이터와는 별개의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 매체 기록부를 구비하는 기록 유닛;과, 상기 기록 매체에 기록되어 있는 각 상기 RAW 화상 데이터 및 상기 파라미터 파일을 독출하는 데이터 독출부와, 상기 독출한 파라미터 파일로부터 프레임 단위로 상기 RAW 화상 데이터를 순차적으로 재생하기 위해 필요한 파라미터를 취득하는 파라미터 파일 처리부와, 상기 각 파라미터에 따라 대응되는 상기 RAW 화상 데이터에 대해 프레임마다 재생에 필요한 화상 처리를 하는 화상 처리부를 구비하는 재생 유닛;을 포함하는 촬상 장치를 제공한다.
이러한 구성에 의해, 파라미터 산출부는, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출하고, 매체 기록부는, 산출된 각 프레임에 대응되는 파라미터를 RAW 화상 데이터와는 별도의 파라미터 파일로서 각 RAW 화상 데이터와 함께 기록 매체에 기록한다. 또한, 데이터 독출부는, 기록 매체에 기록되어 있는 각 RAW 화상 데이터 및 파라미터 파일을 독출하고, 파라미터 파일 처리부는, 독출한 파라미터 파일로부터 프레임 단위로 RAW 화상 데이터를 순차적으로 재생하기 위해 필요한 파라미터를 취득하고, 화상 처리부는, 각 파라미터에 따라 대응되는 RAW 화상 데이터에 대해 프레임마다 재생에 필요한 화상 처리를 한다. 그 결과, 사전에 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터가 프레임마다 산출되어 있고, RAW 화상 데이터를 재생할 때, 미리 산출된 파라미터에 따라 RAW 화상 데이터가 재생되기 때문에, 재생 시의 화상 처리를 신속하고도 정확하게 할 수 있다.
여기서, 상기 재생 유닛에 있어서, 상기 파라미터 파일 처리부는 원하는 일련의 장면에 해당하는 복수의 프레임만큼의 상기 RAW 화상 데이터에 대해 상기 각 RAW 화상 데이터에 대응되는 파라미터를 지정된 값으로 일률적으로 설정할 수 있다. 이러한 구성에 의해, 일련의 장면에서의 파라미터의 분산을 미리 억제할 수 있어 매끄러운 재생이 가능하게 된다.
또한, 본 발명은, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출하는 파라미터 산출부;와, 상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이터와는 별도의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 매체 기록부;를 포함하는 기록 장치를 제공한다.
또한, 본 발명은, 프레임 단위의 RAW 화상 데이터와 상기 각 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터로 이루어지는 파라미터 파일이 기록된 기록 매체로부터 각 상기 RAW 화상 데이터 및 상기 파라미터 파일을 독출하는 데이터 독출부;와, 상기 독출한 파라미터 파일로부터 프레임 단위로 상기 RAW 화상 데이터를 순차적으로 재생하기 위해 필요한 파라미터를 취득하는 파라미터 파일 처리부;와, 상기 각 파라미터에 따라 대응되는 상기 RAW 화상 데이터에 대해 프레임마다 재생에 필요한 화상 처리를 하는 화상 처리부;를 포함하는 재생 장치를 제공한다.
여기서, 상기 파라미터 파일 처리부는 원하는 일련의 장면에 해당하는 복수의 프레임만큼의 상기 RAW 화상 데이터에 대해 상기 각 RAW 화상 데이터에 대응되는 파라미터를 지정된 값으로 일률적으로 설정할 수 있다.
또한, 본 발명은, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출한 후, 상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이터와는 별도의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 기록 처리 단계;와, 상기 기록 매체에 기록되어 있는 각 상기 RAW 화상 데이터 및 상기 파라미터 파일을 독출하고, 그 독출한 파라미터 파일로부터 프레임 단위로 상기 RAW 화상 데이터를 순차적으로 재생하기 위해 필요한 파라미터를 취득한 후, 상기 각 파라미터에 따라 대응되는 상기 RAW 화상 데이터에 대해 프레임마다 재생에 필요한 화상 처리를 하는 재생 처리 단계;를 포함하는 촬상 방법을 제공한다.
또한, 상기 재생 처리 단계에 있어서, 상기 화상 처리의 전(前)단계에서, 원하는 일련의 장면에 해당하는 복수의 프레임만큼의 상기 RAW 화상 데이터에 대해 상기 각 RAW 화상 데이터에 대응되는 파라미터를 지정된 값으로 일률적으로 설정할 수 있다.
또한, 본 발명은, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출한 후, 상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이터와는 별도의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 기록 방법을 제공한다.
또한, 본 발명은, 프레임 단위의 RAW 화상 데이터와, 상기 각 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터로 이루어지는 파라미터 파일이 기록된 기록 매체로부터 각 상기 RAW 화상 데이터 및 상기 파라미터 파일을 독출한 후, 상기 독출한 파라미터 파일로부터 프레임 단위로 상기 RAW 화상 데이터를 순차적으로 재생하기 위해 필요한 파라미터를 취득하고, 상기 각 파라미터에 따라 대응되는 상기 RAW 화상 데이터에 대해 프레임마다 재생에 필요한 화상 처리를 하는 재생 방법을 제공한다.
여기서, 상기 화상 처리의 전(前)단계에서, 원하는 일련의 장면에 해당하는 복수의 프레임만큼의 상기 RAW 화상 데이터에 대해 상기 각 RAW 화상 데이터에 대응되는 파라미터를 지정된 값으로 일률적으로 설정할 수 있다.
또한, 본 발명은, 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출하는 제1의 단계와, 상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이터와는 별개의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 제2의 단계를 컴퓨터에 실행시키는 프로그램을 기록한 저장 매체를 제공한다.
본 발명에 따르면, 촬상 소자로부터 프레임 단위로 순차적으로 출력된 RAW 화상 데이터를 재생할 때, 화상 처리를 신속하고도 정확하게 할 수 있는 효과가 있다.
이하, 첨부 도면을 참조하면서, 본 발명의 바람직한 실시예에 대해 상세히 설명하기로 한다. 또한, 본 명세서 및 도면에 있어서, 실질적으로 동일한 구성을 갖는 구성 요소에 대해서는, 동일한 부호를 사용함으로써 중복 설명을 생략한다.
(본 발명의 일 실시예의 구성)
본 발명의 일 실시예에 따른 촬상 장치의 구성에 대해서 설명하기로 한다. 본 실시예의 촬상 장치는 화상 및 음성을 기록하는 기록 장치(기록 유닛)(100)와, 화상 및 음성을 재생하는 재생 장치(재생 유닛)(200)로 이루어진다. 또한, 기록 장 치(100)와 재생 장치(200)는 일체로 구성되어도 되고, 각각 독립된 장치로서 별도로 구성되어도 된다.
이하, 기록 장치(100) 및 재생 장치(200)의 구성에 대해 각각 설명하기로 한다. 우선, 도 1을 참조하고, 본 발명의 실시예에 따른 기록 장치(100)에 대해서 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 기록 장치(100)를 나타내는 블록도이다.
기록 장치(100)는, 예컨대, 렌즈 등의 광학계(102)나 촬상 소자(104)를 가지고 동화상을 촬영하여 기록하는 비디오 카메라, 캠코더 등을 말한다.
기록 장치(100)는, 광학계(102), 드라이버(110), 촬상 소자(104), 마이크(112), A/D 변환부(106)(114), 화상 신호 압축부(108), 음성 신호 압축부(116), 파라미터 산출부(120), 데이터 파일 생성부(122), 파라미터 파일 생성부(124), CPU(Central Processing Unit)(130), 화상 신호 처리부(140), D/A 변환부(142), 표시 제어부(144), 표시부(146), 기록 매체 제어부(150), 기록 매체(152), 메모리(160), VRAM(162) 및 조작부(170) 등으로 구성된다.
광학계(102)는, 상세히 도시하지는 않았지만, 예컨대, 초점 렌즈, 줌렌즈, 조리개 등을 가지고 있다. 광학계(102)는 피사체의 영상광을 투과시켜 촬상 소자(104)에 피사체의 상을 결상시킨다. 초점 렌즈는 촬상 소자(104) 상에 피사체의 영상 초점이 맞도록 조절하는 기능을 수행하고, 줌렌즈는 초점 거리가 변화되도록 조절하는 기능을 수행하고, 조리개는 촬상 소자(104)에 입사되는 광량이 변화되도록 조절하는 기능을 수행한다.
드라이버(110)는 광학계(102)의 초점 렌즈, 줌렌즈, 조리개 등을 구동한다. 드라이버(110)는 CPU(130)에서의 초점 제어, 노출 제어에 따라 광학계(102)의 각 구성 요소를 구동한다.
촬상 소자(104)는, 예컨대, CCD(Charge Coupled Device), CMOS(Complementary Metal Oxide Semiconductor) 등의 이미지 센서를 의미하며, 촬상 소자(104) 상에 결상된 광정보를 광전 변환에 의해 전기 신호(화상 신호)로 변환하여, A/D 변환부(106)로 1프레임마다 전기 신호를 출력한다.
A/D 변환부(106)는 촬상 소자(104)로부터 프레임 단위로 순차적으로 출력된 전기 신호를 디지털 변환에 의해 디지털 데이터(RAW 화상 데이터)로 변환한다. 여기서, 촬상 소자(104)와 A/D 변환부(106) 사이에 CDS나 앰프 등의 회로를 구비하여 촬상 소자(104)로부터 출력된 전기 신호에 포함된 노이즈를 제거하거나, 증폭해도 된다.
A/D 변환부(106)는 디지털 변환에 의해 얻어진 화상 데이터를 화상 신호 압축부(108)와 파라미터 산출부(120)로 프레임 단위로 순차 출력한다. A/D 변환부(106)에서 출력되는 화상 데이터는, 화이트 밸런스 제어, 노출 제어 등의 화상 처리나 JPEG 형식 등의 불가역 압축 처리를 하지 않고, RAW 형식으로 처리한다.
화상 신호 압축부(108)는 A/D 변환부(106)부터 출력된 화상 데이터를 가역 압축 방식에 의해 압축 처리하고, 압축된 화상 데이터를 데이터 파일 생성부(122)로 출력한다. 가역 압축 방식에 의한 압축 처리에 의해 화상 데이터의 데이터량을 줄일 수 있고, 또한, 화질 등의 저하없이 화상 데이터를 기록, 재생할 수 있다. 가 역 압축 방식에는, 예컨대, 호프만 부호를 사용한 엔트로피 부호화 등이 있다. 또한, 가역 압축 방식은 엄밀한 「가역」에 한정되지 않는다.
마이크(112)는 음성 입력부의 일례로서, 외부로부터의 음성을 받아들여 전기 신호로 변환하고, 전기 신호를 A/D 변환부(114)로 출력한다.
A/D 변환부(114)는 마이크(112)에서 출력된 전기 신호를 디지털 변환에 의해 음성에 관한 디지털 데이터(음성 데이터)로 변환한다. A/D 변환부(114)는 디지털 변환에 의해 얻어진 음성 데이터를 음성 신호 압축부(116)로 출력한다.
음성 신호 압축부(116)는, A/D 변환부(114)에서 출력된 음성 데이터를 압축 처리하고, 압축된 음성 데이터를 데이터 파일 생성부(122)로 출력한다. 음성 신호 압축부(116)에 의한 압축 방식은, 예컨대 MP3, AAC 등이다.
파라미터 산출부(120)는, A/D 변환부(106)에서 출력된 RAW 형식의 화상 데이터에 따라, RAW 형식의 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출한다. 여기서, 파라미터란 화이트 밸런스를 제어하기 위한 화이트 밸런스 보정값(WB값)이나 노출을 제어하기 위한 노출 보정값(EE값) 등을 의미한다. 파라미터 산출부(120)에 의한 파라미터의 산출은 화상 데이터의 기록과 동시에 해도 되고, 일련의 화상 데이터의 기록이 완료된 후에 기록된 화상 데이터에 따라 해도 된다. 파라미터 산출부(120)에 의해 산출된 파라미터는 파라미터 파일 생성부(124)로 출력된다.
데이터 파일 생성부(122)는 화상 신호 압축부(108)에서 출력된 RAW 형식의 화상 데이터와 음성 신호 압축부(116)에서 출력된 음성 데이터에 따라 데이터 파일 을 생성한다. 데이터 파일 생성부(122)는 생성한 데이터 파일을 기록 매체 제어부(150)로 출력하고, 데이터 파일은 기록 매체(152)에 기록된다.
파라미터 파일 생성부(124)는 파라미터 산출부(120)에서 출력된 파라미터에 따라, 일련의 화상 데이터에서 복수 프레임의 파라미터를 갖는 파라미터 파일을 생성한다. 파라미터 파일 생성부(124)는 생성한 파라미터 파일을 기록 매체 제어부(150)로 출력하고, 파라미터 파일은 기록 매체(152)에 기록된다.
CPU(130)는 프로그램에 의해 연산 처리 장치 및 제어장치로서 기능하고, 기록 장치(100) 내에 설치된 각 구성 요소의 처리를 제어할 수 있다.
CPU(130)는 예컨대, 초점 제어나 노출 제어에 따라 드라이버(110)에 신호를 출력하여 광학계(102)를 구동시킨다. 또한 CPU(130)는 조작부(170)의 신호에 따라 기록 장치(100)의 각 구성 요소를 제어한다.
또한, 본 실시예에서는, CPU(130)가 하나만으로 이루어지는 구성이지만, 신호계의 명령과 조작계의 명령을 각각의 CPU에서 행하는 등 복수의 CPU로 구성해도 된다.
화상 신호 처리부(140)는 A/D 변환부(106)에서 출력된 화상 데이터에 대해, 표시부(146)에서 프레임 단위로 라이브 뷰 화상을 재생할 때 필요한 화상 처리를 한다. 예컨대, 화상 데이터는 화상 신호 처리부(140)에서 화이트 밸런스 제어, 노출 제어 등이 행해진다.
화상 신호 처리부(140)는 YC 변환부(141)를 구비한다. 촬상 소자(104)로부터 A/D 변환부(106)를 통해 직접 출력된 화상 데이터는 RAW 형식이고, YC 변환부(141) 는 RAW 형식의 화상 데이터에 대해 YC 변환 처리를 한다.
YC 변환부(141)는 RAW 형식의 화상 데이터를 휘도 신호 및 색차(色差) 신호로 변환하고, 휘도 신호 및 색차 신호를 취득할 수 있다. YC 변환에 의해 휘도 신호 및 색차 신호가 취득됨으로써, 표시부(146)에 화상 표시가 가능해진다. 화상 신호 처리부(140)에서 취득된 휘도 신호 및 색차 신호는 D/A 변환부(142)로 출력된다.
D/A 변환부(142)는 화상 신호 처리부(140)에서 출력된 디지털 데이터인 휘도 신호 및 색차 신호를 아날로그 변환에 의해 아날로그 신호로 변환한다. D/A 변환부(142)는 표시 제어부(144)에 아날로그 신호를 출력한다.
표시 제어부(144)는 표시부(146)를 구동하고, 표시부(146)의 출력을 제어한다. 표시부(146)는, 예컨대 LCD(Liquid Crystal Display) 등의 표시 수단으로 구성된다. 표시부(146)는 VRAM(162)에서 독출(讀出)된 촬상 조작을 하기 전의 라이브 뷰 표시나, 기록 장치(100)의 각종 설정 화면이나, 촬상하여 기록된 화상의 표시 등을 행한다.
기록 매체 제어부(150)는 매체 기록부의 일례로서, 기록 매체(152)로의 화상 데이터의 기입, 또는 기록 매체(152)에 기록된 화상 데이터나 설정 정보 등의 독출을 제어한다.
기록 매체(152)는, 예컨대, 광학식 기록 매체(CD, DVD 등), 광자기 디스크, 자기 디스크, 반도체 기억 매체 등이며, 촬영된 화상 데이터를 기록한다. 기록 매체 제어부(150), 기록 매체(152)는 기록 장치(100)로부터 착탈 가능하게 구성되어 도 된다.
메모리(160)는, 예컨대 SDRAM(synchronous DRAM) 등의 반도체 기억 소자로 구성되며, 촬상한 화상을 일시적으로 기억하는 것이다. 메모리(160)는 화상 데이터의 복수의 프레임을 기억할 수 있을 만큼의 기억 용량을 가지고 있다. 또한 메모리(160)에는 CPU(130)의 동작 프로그램이 보존된다.
VRAM(162)은, 화상 표시용 메모리이고, 표시 화상의 기입과 표시부(146)에 대한 표시를 동시에 실행할 수 있도록, 복수의 채널을 갖는 메모리로 구성된다. VRAM(162)은 기록시의 표시부(146)에서의 라이브 뷰 표시나, 재생시의 표시부(146)에서의 표시에 있어서 화상 신호를 일시 기억한다.
조작부(170)는, 전원 스위치, 모드 교환 수단 및 녹화 개시 버튼, 녹화 정지 버튼 등으로 구성되고, 사용자가 기록 장치(100)의 동작, 각종 설정 등을 행하기 위해 사용된다. 녹화 개시 버튼, 녹화 정지 버튼은 촬영 조작을 하기 위한 버튼이다.
이어서, 도 2를 참조하여, 본 발명의 일 실시예에 따른 재생 장치(200)의 구성에 대해 설명하기로 한다. 도 2는 본 발명의 일 실시예에 따른 재생 장치(200)를 나타내는 블록도이다.
재생 장치(200)는 본 실시예에 따른 기록 장치(100)에서 기록된 데이터 파일과 파라미터 파일에 따라, 화상 데이터와 음성 데이터를 재생할 수 있다.
재생 장치(200)는, 기록 매체 제어부(202), 기록 매체(204), CPU(210), 드라이버(212), 조작부(220), 데이터 파일 처리부(230), 파라미터 파일 처리부(232), 화상 신호 신장(伸張)부(240), 음성 신호 신장부(260)와, 화상 신호 처리부(242)와, D/A 변환부(244)(262), 표시 제어부(250), 표시부(252) 및 스피커(264) 등으로 이루어진다.
기록 매체 제어부(202)는 데이터 독출부의 일례로서, 기록 매체(204)에 기록된 화상 데이터나 설정 정보 등의 독출을 제어한다.
기록 매체(204)는, 예컨대, 광학식 기록 매체(CD, DVD 등), 광자기 디스크, 자기 디스크, 반도체 기억 매체 등이며, 촬영된 화상 데이터와 녹음된 음성 데이터가 기록되어 있다.
기록 매체 제어부(202) 및 기록 매체(204)는 재생 장치(200)로부터 착탈 가능하게 구성되어도 된다.
기록 매체(204)에 기록 장치(100)에서 생성되어 기록된 데이터 파일 및 파라미터 파일이 기록되어 있는 경우, 기록 매체 제어부(202)에 의해 데이터 파일 및 파라미터 파일이 독출된다. 독출된 데이터 파일은 데이터 파일 처리부(230)로 출력되고, 파라미터 파일은 파라미터 파일 처리부(232)로 출력된다.
CPU(210)는 프로그램에 의해 연산 처리 장치 및 제어 장치로서 기능하고, 재생 장치(200) 내에 설치된 각 구성 요소의 처리를 제어할 수 있다.
CPU(210)는, 예컨대, 조작부(220)의 조작에 따라 드라이버(212)로 신호를 출력하여 기록 매체 제어부(202)를 구동시킨다. 또한 CPU(210)는 조작부(220)로부터의 신호에 따라 재생 장치(200)의 각 구성 요소를 제어한다. 또한, 본 실시예에서는 CPU(210)가 하나만으로 이루어지는 구성이지만, 신호계의 명령과 조작계의 명령 을 각각 CPU에서 행하는 등 복수의 CPU로 구성되어도 된다.
드라이버(212)는 기록 매체 제어부(202)를 구동한다. 드라이버(212)는 CPU(210)에서의 기록 매체(204)의 재생 제어 등에 따라 기록 매체 제어부(202)를 구동한다.
조작부(220)는 전원 스위치, 재생 동작 버튼 및 각종 설정키 등으로 구성되며, 사용자가 재생 장치(200)의 동작, 각종 설정 등을 행하기 위해 사용된다. 예컨대, 재생 동작 버튼은 화상 데이터의 재생 개시를 위한 버튼이다.
데이터 파일 처리부(230)는 기록 매체 제어부(202)에서 출력된 데이터 파일을, 압축된 RAW 형식의 화상 데이터와, 압축된 음성 데이터로 분리한다. 데이터 파일 처리부(230)는 화상 데이터를 화상 신호 신장부(240)로 출력하고, 음성 데이터를 음성 신호 신장부(260)로 출력한다.
파라미터 파일 처리부(232)는 기록 매체 제어부(202)에서 출력된 파라미터 파일로부터 파라미터를 취득하고, 파라미터를 화상 신호 처리부(242)로 출력한다.
화상 신호 신장부(240)는 데이터 파일 처리부(230)에서 출력된 압축 처리된 화상 데이터를 취득한다. 화상 데이터가 기록 장치(100)의 화상 신호 압축부(108)에 의해 가역 압축 처리되어 있는 경우, 화상 신호 신장부(240)는 압축된 화상 데이터를 신장 처리하여 원래의 화상 데이터를 취득한다. 원래의 화상 데이터는 기록 장치(100)에서 A/D 변환부(106)로부터 출력된 가역 압축 처리 전의 화상 데이터와 동일하게 된다. 화상 신호 신장부(240)는 취득된 화상 데이터를 화상 신호 처리부(242)로 출력한다.
화상 신호 처리부(242)는 화상 처리부의 일례로서, 파라미터 파일 처리부(232)에서 출력된 파라미터에 따라, 화상 신호 신장부(240)에서 출력된 화상 데이터에 대해 프레임 단위로 재생할 때 필요한 화상 처리를 한다. 예컨대, 화상 데이터는 파라미터에 따라 화이트 밸런스 제어, 노출 제어 등이 행해진다.
화상 신호 처리부(242)는, YC 변환부(243)를 구비한다. 예컨대, 화상 데이터가 촬상 소자(104)로부터 A/D 변환부(106)를 통해 직접 출력된 RAW 형식인 경우, YC 변환부(243)는 RAW 형식의 화상 데이터에 대해 YC 변환 처리를 한다.
YC 변환부(243)는 RAW 형식의 화상 데이터를 휘도 신호 및 색차 신호로 변환하고, 휘도 신호 및 색차 신호를 취득할 수 있다. RAW 형식의 화상 데이터로는 모니터 등의 표시부(252)에 표시를 할 수 없지만, YC 변환에 의해 휘도 신호 및 색차 신호가 취득됨으로써, 표시부(252)에 화상의 표시를 할 수 있게 된다. 화상 신호 처리부(242)에서 취득된 휘도 신호 및 색차 신호는 D/A 변환부(244)로 출력된다.
D/A 변환부(244)는, 화상 신호 처리부(242)에서 출력된 디지털 데이터인 휘도 신호 및 색차 신호를 아날로그 변환에 의해 아날로그 신호로 변환한다. D/A 변환부(244)는 표시 제어부(250)에 아날로그 신호를 출력한다.
표시 제어부(250)는 표시부(252)를 구동하여 표시부(252)의 출력을 제어한다.
표시부(252)는, 예컨대 LCD(Liquid Crystal Display) 등의 표시 수단으로 구성된다. 표시부(252)는, 재생 장치(200)의 각종 설정 화면이나, 기록 매체(204)에서 독출된 화상의 표시 등을 행한다.
또한, 상기 설명에서는, 표시 제어부(250) 및 표시부(252)가 재생 장치(200)에 일체로 설치되는 경우에 대해 설명하였지만, 본 발명은 이러한 예에 한정되지 않는다. 예컨대, D/A 변환부(244)로부터의 화상 신호가 텔레비젼 모니터 등의 외부의 표시 장치에 출력되는 구성으로 해도 된다.
음성 신호 신장부(260)에는, 데이터 파일 처리부(230)에서 출력된 압축 처리된 음성 데이터가 입력된다. 그리고, 음성 신호 신장부(260)는 압축된 음성 데이터를 신장 처리하고, 신장 처리된 음성 신호를 취득한다. 음성 신호 신장부(260)는 취득된 음성 신호를 D/A 변환부(262)로 출력한다.
D/A 변환부(262)는 음성 신호 신장부(260)로부터 출력된 음성 신호를 아날로그 변환에 의해 아날로그 신호로 변환한다. D/A 변환부(262)는 아날로그 신호를 스피커(264)로 출력한다.
스피커(264)는 D/A 변환부(262)에서 출력된 아날로그 신호에 따라 음성을 출력한다.
(데이터 파일 및 파라미터 파일의 데이터 구조)
이어서, 도 3을 참조하여 데이터 파일 및 파라미터 파일의 데이터 구조에 대해 설명하기로 한다. 도 3은, 본 발명의 일 실시예에 따른 데이터 파일 및 파라미터 파일의 데이터 구조를 나타내는 설명도이다.
데이터 파일은 1프레임의 화상에 관한 화상 데이터와, 해당 화상의 1프레임에 대응되는 기간의 음성 데이터가 번갈아 기록되어 구성된다. 데이터 파일은 화상 데이터와 음성 데이터를 1프레임 단위로 대응시켜 시계열순으로 배열된다. 예컨대, 제1 프레임에서 제N 프레임까지 N개의 프레임이 있는 경우, 도 3에 도시한 바와 같이 각 데이터가 배열된다.
이와 같이 프레임마다 화상 데이터와 음성 데이터가 배열됨으로써, 데이터 파일을 프레임 단위로 절단하거나 접속할 수 있다. 또한 본 실시예에서는, 시간축 방향의 압축 처리가 되지 않은 RAW 형식의 화상 데이터를 다룬다. 따라서, 본 실시예의 데이터 파일에 의하면, 프레임 단위의 영상 편집을 용이하게 할 수 있다.
파라미터 파일은 화상 데이터 및 음성 데이터에 관한 각종 파라미터가 기록된다. 파라미터 파일에는, 예컨대, 화상 데이터의 화소 구조, 화소 사이즈, 화상 데이터 압축 형식, 총프레임 수 등의 기본 정보가 기록되고, 음성 데이터의 비트수나 샘플링 주파수, 샘플수, 데이터 압축 형식 등의 기본 정보가 기록된다.
또한 파라미터 파일에는, 각 프레임의 화상 데이터 및 음성 데이터의 데이터 파일의 기록 바이트 위치가 기록된다. 또한, 각 프레임 화상의 화상 처리에 필요한 파라미터 산출부(120)에서 산출된 파라미터가 기록된다. 도 3에는, 파라미터의 예로서 화이트 밸런스 보정값(WB값), 노출 보정값(EE값)을 나타내며, 파라미터 파일에는 데이터 위치, WB값, EE값이 프레임 단위마다 시계열순으로 배열되어 있다.
파라미터 파일이 데이터 파일의 재생 시 보다 전에 생성되어 기록되어 있으므로, 데이터 파일의 재생 시에 파라미터 파일을 읽어들임으로써, 화이트 밸런스 제어나 노출 제어를 위해 다시 각종 파라미터를 산출할 필요가 없다. 따라서, 데이터 파일의 재생 처리를 신속하고도 용이하게 할 수 있다.
또한, 파라미터 파일을 데이터 파일과는 별도로 단독으로 독출할 수도 있으 므로, 파라미터 파일 처리부(232)는 원하는 일련의 장면에 해당하는 복수의 프레임만큼의 RAW 화상 데이터에 대해 각 RAW 화상 데이터에 대응되는 파라미터를 지정된 값으로 일률적으로 설정할 수 있다. 예컨대, 일련의 장면의 재생 시, 화이트 밸런스나 휘도 보정 등의 변화를 억제하기 위해, 파라미터의 변동을 평균화하는 계산을 미리 할 수도 있다. 그 결과, 일련의 장면 내의 색이나 휘도의 분산을 억제할 수 있어 매끄러운 재생이 가능하다.
(본 발명의 일 실시예의 동작)
이어서, 본 발명의 일 실시예에 따른 기록 장치(100)의 파라미터 파일 생성 처리에 대해 설명하기로 한다. 도 4는 본 발명의 일 실시예에 따른 기록 장치(100)의 파라미터 파일의 생성 처리를 나타내는 순서도이다.
우선, 화상 데이터는 A/D 변환부(106)를 통해 파라미터 산출부(120)로 독출된다(단계 S101).
또한 파라미터 파일 생성부(124)는 파라미터가 기입 가능한 초기화된 파라미터 파일을 생성한다(단계 S102). 그 때, 파라미터 파일에는, 예컨대, 화상 데이터의 화소 구조, 화소 사이즈, 화상 데이터 압축 형식, 총프레임 수 등의 기본 정보와, 음성 데이터의 비트수나 샘플링 주파수, 샘플수, 데이터 압축 형식 등의 기본 정보가 기록된다.
그리고, 파라미터 산출부(120)는 녹화된 최초의 프레임인 제1 프레임으로부터 순차적으로 각 프레임의 화상 처리에 필요한 파라미터를 산출한다(단계 S103∼단계 S107).
예컨대, 우선 n=0이 설정되고(단계 S103), 이어서 n=n+1이 연산된다(단계 S104). 처음에 n=1이 되기 때문에, 제1 프레임의 파라미터가 산출된다(단계 S105). 이어서, 산출된 제1 프레임의 파라미터는 파라미터 파일의 데이터로서 기록된다(스단계 S106). 그리고, 녹화가 정지되었는지 여부가 판단된다(단계 S107). 예컨대 사용자가 녹화 정지 버튼을 눌러 녹화가 정지될 때까지, 단계 S104∼단계 S107이 반복된다.
녹화가 정지된 경우, 화상 데이터 및 음성 데이터의 기본 정보와, 제1 프레임으로부터 녹화된 마지막 프레임인 제N 프레임까지의 파라미터를 갖는 파라미터 파일의 생성이 완료되고, 생성된 파라미터 파일은, 예컨대 기록 매체(152)에 기록된다(단계 S108). 이상과 같은 파라미터 파일의 생성은, 화상 데이터, 음성 데이터의 기록과 동시에 수행해도 되고, 모든 기록이 완료한 후에 수행해도 된다.
이어서, 본 발명의 일 실시예에 따른 기록 장치(100)의 데이터 파일 생성 처리에 대해 설명하기로 한다. 도 5는 본 발명의 일 실시예에 따른 기록 장치(100)의 데이터 파일의 생성 처리를 나타내는 순서도이다.
우선, 기록 장치(100)에 있어서, 촬상 소자(104)를 통하여 화상 데이터가 독출되고, 마이크를 통해 음성 데이터가 독출된다(단계 S201).
그리고, 화상 데이터에 대해서는 화상 신호 압축부(108)에서 압축처리가 되고, 음성 데이터에 대해서는 음성 신호 압축부(116)에서 압축 처리가 이루어진다(단계 S202).
또한 데이터 파일 생성부(122)는, 화상 데이터 및 음성 데이터를 기입할 수 있는 초기화된 데이터 파일을 생성한다(단계 S203).
그리고, 데이터 파일 생성부(122)는, 녹화된 최초의 프레임인 제1 프레임으로부터 순차적으로 각 프레임의 화상 데이터 및 음성 데이터를 데이터 파일의 데이터로서 기록한다(단계 S204∼단계 S208).
예컨대, 우선 n=0이 설정되고(단계 S204), 이어서 n=n+1이 연산된다(단계 S205). 처음에 n=1이 되기 때문에, 제1 프레임의 화상 데이터가 기록되고(단계 S206), 해당 화상 데이터와 동일한 프레임인 제1 프레임의 음성 데이터가 기록된다(단계 S207). 그리고, 녹화가 정지되었는지 여부가 판단된다(단계 S208). 예컨대 사용자가 녹화 정지 버튼을 눌러 녹화가 정지될 때까지 단계 S205∼단계 S208이 반복된다.
녹화가 정지된 경우, 제1 프레임으로부터 녹화된 최후의 프레임인 제N 프레임까지의 매 프레임의 화상 데이터 및 음성 데이터를 갖는 데이터 파일의 생성이 완료되고, 생성된 데이터 파일은, 예컨대 기록 매체(152)에 기록된다(단계 S209).
이어서, 본 발명의 일 실시예에 따른 재생 장치(200)의 재생 처리에 대해 설명하기로 한다. 도 6은 본 발명의 일 실시예에 따른 재생 장치(200)의 재생 처리를 나타내는 순서도이다.
우선, 기록 매체 제어부(202)는, 기록 매체(204)에 기록된 데이터 파일과 파라미터 파일을 독출한다(단계 S301).
또한 파라미터 파일 처리부(232)에는 파라미터 파일이 입력되고, 파라미터 파일로부터 파라미터를 취득한다(단계 S302). 그리고, 파라미터 파일 처리부(232) 는 취득한 파라미터를 화상 신호 처리부(242)로 출력한다.
그리고 데이터 파일 처리부(230)는 데이터 파일을 취득하고, 데이터 파일을 화상 데이터와 음성 데이터로 각각 분리한다(단계 S303).
데이터 파일 처리부(230)는 화상 데이터를 화상 신호 신장부(240)로 출력하고, 음성 데이터를 음성 신호 신장부(260)로 출력한다.
또한, 화상 신호 신장부(240)는 압축된 화상 데이터를 신장 처리하고, 음성 신호 신장부(260)는 압축된 음성 데이터를 신장 처리한다(단계 S304). 신장 처리된 화상 데이터는 화상 신호 처리부(242)로 출력되고, 신장 처리된 음성 데이터는 D/A 변환부(262)로 출력된다.
그리고, 화상 신호 처리부(242)는 화상 신호 신장부(240)로부터 화상 데이터를 취득하고, 파라미터 파일 처리부(232)로부터 파라미터를 취득한 후, 파라미터에 따라 화상 데이터에 대해 프레임마다 재생에 필요한 화상 처리를 한다(단계 S305).
또한 화상 신호 처리부(242)의 YC 변환부(243)는 화상 데이터를 휘도 신호와 색차 신호로 이루어지는 화상 신호로 변환한다(단계 S306).
그리고, 화상 신호는 D/A 변환부(244)를 통해 표시 제어부(250)로 출력되고, 표시부(252)에 의해 화상이 표시된다. 또한 음성 신호는 D/A 변환부(262)에서 스피커(264)로 출력되고, 표시부(252)에 표시된 화상에 맞추어 스피커(264)로부터 음성이 출력된다(단계 S307).
본 실시예에 의하면, 기록 장치(100)에서는, 각 프레임의 화상에 대응되는 재생시의 화상 처리에 필요한 파라미터가 사전에 산출된다. 그리고, 화상 데이터, 음성 데이터를 포함하는 데이터 파일과는 별도의 파라미터 파일로서 파라미터가 기록된다.
화상 데이터, 음성 데이터를 재생 장치(200)에서 재생할 때, 파라미터 파일로부터 각 프레임의 화상에 대응되는 파라미터가 취득되고, 각 프레임의 화상의 화상 처리에 파라미터가 사용된다. 그 결과, 재생 시에 파라미터 연산에 필요한 순서를 생략할 수 있기 때문에, 동화상의 처리에 필요한 시간이 단축되어 동화상의 처리가 용이해진다.
CCD나 CMOS 등의 촬상 소자(104)에서는 컬러 촬영을 위해 체크무늬 모양의 컬러 필터가 화소마다 설치되는 경우가 있다. 종래의 기록 장치에서는, 이 체크무늬 모양의 컬러 필터 패턴으로부터 소정의 화상 처리를 하여 휘도 신호 및 색 신호를 생성하고, 이들 신호를 화상 압축함으로써 영상의 기록을 수행하고 있다. 그리고, 재생 시에는, 기록되어 있는 압축 화상 정보를 신장하고 휘도 신호 및 색 신호를 복원하여 모니터 등의 표시 장치에 표시하고 있다.
한편, 본 실시예에 따른 기록 장치(100)에서는, 상기 컬러 필터 패턴에 화상 처리를 하지 않고 컬러 필터 패턴을 직접 데이터화하여 압축하고, 기록 매체(152)에 기록한다(RAW 형식의 화상 데이터의 기록). 그리고, 재생 장치(200)에서는, 기록 매체(152) 상에서 화상 데이터를 독출하여 데이터 신장하고, 컬러 필터 패턴을 얻는다. 재생 시, 이 컬러 필터 패턴에 대해 소정의 화상 처리를 하여 휘도 신호 및 색차 신호를 생성하고, 모니터 등의 표시부(252) 또는 표시 장치에 화상을 표시한다.
즉, 본 실시예에 따른 기록 재생 방법에서는, 컬러 필터 패턴을 직접 데이터로서 기록하고 있으므로(촬상 소자(104)로부터의 신호를 그대로 기록), 화질 저하 없이 고화질로 기록할 수 있다. 또한 재생 장치(200)측에 화상 신호 처리부(242)가 설치되어 있으므로, 데이터 파일의 기록 시에 화상을 처리할 필요가 없다. 따라서, 기록 장치(100)에 설치되는 회로가 매우 간단해지며 소비전력도 저감할 수 있다.
또한, 컬러 필터 패턴으로부터 휘도 신호와 색차 신호를 생성하는 화상 처리에 있어서는, 각 컬러 필터 패턴으로부터 화이트 밸런스 정보 및 휘도 보정 정보를 산출한다. 동화상에 있어서, 이들 값이 급격하게 변하는 것은 바람직하지 않기 때문에, 종래의 기록 장치에서는, 각 기록 화상에서 계산한 화이트 밸런스값 및 휘도 보정값이 완만하게 변하도록 제어하고 있다. 종래의 기록 장치에서는 이러한 값을 사용하여 화상 처리를 행한 후, 처리 종료된 화상 데이터를 기록 매체에 기록하기 때문에, 나중에 화상 데이터에 대해 별도의 화이트 밸런스나 휘도의 조정을 할 수 없었다.
한편, 본 실시예에 따른 기록 재생 장치에서는 상기 화이트 밸런스 정보 및 휘도 보정 정보를 데이터로 하여 각 프레임의 화상마다 파라미터 파일에 기록하고 있다. 그리고, 재생 시에는, 이들 정보를 이용하여 화상 처리를 하고, 화이트 밸런스나 휘도의 조정을 한다. 이 때, 화상 데이터는 화이트 밸런스 정보 및 휘도 보정 정보와는 독립적으로 데이터 파일에 기록된 것으로, 재생 시에 이들 값을 변화시킴으로써 화질 조정을 할 수 있다. 또한, 이러한 조정은 이용자가 할 수도 있다. 또한 이들 파라미터를 재기입하더라도 화상 데이터에는 영향을 주지 않기 때문에, 조 정 후의 값으로 파라미터 파일을 재기입해도 아무런 문제가 생기지 않으며, 이용자가 설정한 화질로 재생 처리를 할 수 있게 된다. 또한 화이트 밸런스, 휘도 레벨뿐만 아니라, 색수차 등을 촬영 후에 보정할 수 있다.
또한, 퍼스널 컴퓨터 등을 이용하여 재생함으로써, 재기입이 어려운 하드웨어 디코더보다, 기술 진보에 따른 소프트웨어 디코더를 이용할 수 있어 고화질의 재생이 가능하다. 또한, 기록 시에 화상 처리를 하지 않고 재생 시에 화상 처리를 하기 때문에, RAW 형식 데이터의 현상 소프트 등의 화상 처리 기술의 진보에 따라, 기록 완료된 화상 데이터를 보다 고화질의 화상 처리로 재생할 수 있다.
또한 기록된 데이터 파일은 표시를 수행하는 모니터 등의 표시 장치와 독립적으로 기록된 RAW 형식의 데이터를 가지고 있고, 재생 시에 임의의 영상 신호(NTSC/HDTV 등)로 변환하여 출력할 수 있다. 또한, 색공간 등도 재생 시에 임의로 설정할 수 있다.
또한, 본 실시예의 데이터 파일의 데이터 구조에 의하면, 프레임 단위로 영상과 음성을 모두 기록하고 있으므로, 영상과 음성의 동기가 용이하며, 편집도 용이하다.
이상, 첨부 도면을 참조하면서 본 발명의 바람직한 일 실시예에 대해 설명하였지만, 본 발명이 이러한 예에 한정되지 않음은 말할 것도 없다. 당업자라면, 특허 청구의 범위에 기재된 범위내에서 각종 변형 예 또는 수정 예를 생각해 낼 수 있음은 명백하며 그에 대해서도 당연히 본 발명의 기술적 범위에 속하는 것으로 이해된다.
예컨대, 상기 실시예에서는, 기록 장치(100)에 있어서 화상 신호 압축부(108), 음성 신호 압축부(116)가 설치되었지만, 화상 신호 압축부(108), 음성 신호 압축부(116)가 없는 구성으로 해도 된다. 이 때, 데이터 파일에는, 압축 처리가 되지 않은 화상 데이터, 음성 데이터가 기록된다. 또한, 데이터 파일에 압축 처리가 되지 않은 화상 데이터, 음성 데이터가 기록되어 있는 경우, 재생 장치(200)에서 화상 신호 신장부(240), 음성 신호 신장부(260)의 화상 데이터, 음성 데이터의 신장 처리가 불필요하게 된다.
또한, 상기 실시예에서는, 재생 장치(200)에 있어서, 기록 장치(100)에서 기록된 파라미터를 독출하고, 파라미터를 그대로 화상 처리에 사용하는 경우에 대해 설명하였지만, 본 발명은 이러한 예에 한정되지 않는다. 예컨대, 화상 처리에 이용하는 파라미터는 기록 장치(100)에서 취득된 파라미터 파일 상의 파라미터를 보정하여 임의로 설정한 것이어도 된다. 본 실시예에 의하면, 데이터 파일에는 RAW 형식으로 화상 데이터가 기록되고, 파라미터가 데이터 파일과는 별도의 파라미터 파일에 기록되어 있기 때문에, 이용자는 재생을 희망하는 화상을 용이하게 처리할 수 있다.
또한, 상기 실시예에 있어서, YC 변환부(243)는 재생 장치(200)의 화상 신호 처리부(242)에 설치된다고 하였지만, 본 발명은 이러한 예에 한정되지 않는다. 예컨대, 기록 장치(100)의 A/D 변환부(106)의 다음에 YC 변환부가 설치되며, YC 변환된 화상 신호를 가역 압축 처리하고, 압축된 YC 변환 후의 화상 신호를 데이터 파일에 프레임마다 기록해도 된다. 또한 이 때, YC 변환된 화상 신호에 따라 화상 처 리에 필요한 파라미터가 산출되고, 산출된 파라미터에 의해 파라미터 파일이 생성된다.
이와 같이 YC 변환 후의 화상 신호를 갖는 데이터 파일이 생성된 경우, 재생 장치(200)에서는 YC 변환 처리가 불필요하다. 그리고, 재생 장치(200)의 화상 신호 처리부(242)는 데이터 파일로부터 YC 변환 후의 화상 신호를 취득하고, 상기 YC 변환된 화상 신호에 따라 산출된 파라미터에 따라 화상 처리를 한다.
도 1은 본 발명의 일 실시예에 관한 기록 장치를 나타내는 블록도이다.
도 2는 본 발명의 일 실시예에 관한 재생 장치를 나타내는 블록도이다.
도 3은 본 발명의 일 실시예에 관한 데이터 파일 및 파라미터 파일의 구성을 나타내는 설명도이다.
도 4는 본 발명의 일 실시예에 관한 기록 장치의 파라미터 파일의 생성 처리를 나타내는 순서도이다.
도 5는 본 발명의 일 실시예에 관한 기록 장치의 데이터 파일의 생성 처리를 나타내는 순서도이다.
도 6은 본 발명의 일 실시예에 관한 재생 장치의 재생 처리를 나타내는 순서도이다.
<도면의 주요 부분에 대한 부호의 설명>
100: 기록 장치 102: 광학계
104: 촬상소자 106, 114: A/D 변환부
108: 화상 신호 압축부 110, 212: 드라이버
112: 마이크 116: 음성 신호 압축부
120: 파라미터 산출부 122: 데이터 파일 생성부
124: 파라미터 파일 생성부 130: CPU
140, 242: 화상 신호 처리부 141, 243: YC 변환부
142, 244, 262: D/A 변환부 144, 250: 표시 제어부
146, 252: 표시부 150, 202: 기록 매체 제어부
152, 204: 기록 매체 160: 메모리
162: VRAM 170, 220: 조작부
200: 재생 장치 210: CPU
212: 드라이버 230: 데이터 파일 처리부
232: 파라미터 파일 처리부 240: 화상 신호 신장부
260: 음성 신호 신장부 264: 스피커

Claims (11)

  1. 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출하는 파라미터 산출부와, 상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이터와는 별개의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 매체 기록부를 구비하는 기록 유닛; 및
    상기 기록 매체에 기록되어 있는 각 상기 RAW 화상 데이터 및 상기 파라미터 파일을 독출하는 데이터 독출부와, 상기 독출한 파라미터 파일로부터 프레임 단위로 상기 RAW 화상 데이터를 순차적으로 재생하기 위해 필요한 파라미터를 취득하는 파라미터 파일 처리부와, 상기 각 파라미터에 따라 대응되는 상기 RAW 화상 데이터에 대해 프레임마다 재생에 필요한 화상 처리를 하는 화상 처리부를 구비하는 재생 유닛;을 포함하는 촬상 장치.
  2. 제1항에 있어서,
    상기 재생 유닛에 있어서,
    상기 파라미터 파일 처리부는 원하는 일련의 장면에 해당하는 복수의 프레임만큼의 상기 RAW 화상 데이터에 대해 상기 각 RAW 화상 데이터에 대응되는 파라미터를 지정된 값으로 일률적으로 설정하는 촬상 장치.
  3. 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출하는 파라미터 산출부; 및
    상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이터와는 별도의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 매체 기록부;를 포함하는 기록 장치.
  4. 프레임 단위의 RAW 화상 데이터와 상기 각 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터로 이루어지는 파라미터 파일이 기록된 기록 매체로부터 각 상기 RAW 화상 데이터 및 상기 파라미터 파일을 독출하는 데이터 독출부;
    상기 독출한 파라미터 파일로부터 프레임 단위로 상기 RAW 화상 데이터를 순차적으로 재생하기 위해 필요한 파라미터를 취득하는 파라미터 파일 처리부; 및
    상기 각 파라미터에 따라 대응되는 상기 RAW 화상 데이터에 대해 프레임마다 재생에 필요한 화상 처리를 하는 화상 처리부;를 포함하는 재생 장치.
  5. 제4항에 있어서,
    상기 파라미터 파일 처리부는 원하는 일련의 장면에 해당하는 복수의 프레임만큼의 상기 RAW 화상 데이터에 대해 상기 각 RAW 화상 데이터에 대응되는 파라미터를 지정된 값으로 일률적으로 설정하는 재생 장치.
  6. 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출한 후, 상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이터와는 별도의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 기록 처리 단계; 및
    상기 기록 매체에 기록되어 있는 각 상기 RAW 화상 데이터 및 상기 파라미터 파일을 독출하고, 그 독출한 파라미터 파일로부터 프레임 단위로 상기 RAW 화상 데이터를 순차적으로 재생하기 위해 필요한 파라미터를 취득한 후, 상기 각 파라미터에 따라 대응되는 상기 RAW 화상 데이터에 대해 프레임마다 재생에 필요한 화상 처리를 하는 재생 처리 단계;를 포함하는 촬상 방법.
  7. 제6항에 있어서,
    상기 재생 처리 단계에 있어서,
    상기 화상 처리의 전(前)단계에서, 원하는 일련의 장면에 해당하는 복수의 프레임만큼의 상기 RAW 화상 데이터에 대해 상기 각 RAW 화상 데이터에 대응되는 파라미터를 지정된 값으로 일률적으로 설정하는 촬상 방법.
  8. 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출한 후, 상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이 터와는 별도의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 기록 방법.
  9. 프레임 단위의 RAW 화상 데이터와, 상기 각 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터로 이루어지는 파라미터 파일이 기록된 기록 매체로부터 각 상기 RAW 화상 데이터 및 상기 파라미터 파일을 독출한 후, 상기 독출한 파라미터 파일로부터 프레임 단위로 상기 RAW 화상 데이터를 순차적으로 재생하기 위해 필요한 파라미터를 취득하고, 상기 각 파라미터에 따라 대응되는 상기 RAW 화상 데이터에 대해 프레임마다 재생에 필요한 화상 처리를 하는 재생 방법.
  10. 제9항에 있어서,
    상기 화상 처리의 전(前)단계에서, 원하는 일련의 장면에 해당하는 복수의 프레임만큼의 상기 RAW 화상 데이터에 대해 상기 각 RAW 화상 데이터에 대응되는 파라미터를 지정된 값으로 일률적으로 설정하는 재생 방법.
  11. 촬상 소자로부터 프레임 단위로 순차적으로 출력되는 RAW 화상 데이터에 따라 상기 RAW 화상 데이터를 재생할 때의 화상 처리에 필요한 파라미터를 프레임마다 산출하는 제1의 단계와,
    상기 산출된 각 프레임에 대응되는 파라미터를 상기 RAW 화상 데이터와는 별개의 파라미터 파일로서 상기 각 RAW 화상 데이터와 함께 기록 매체에 기록하는 제 2의 단계를 컴퓨터에 실행시키는 프로그램을 기록한 저장 매체.
KR1020080126536A 2008-12-12 2008-12-12 촬상 장치, 기록 장치, 재생 장치, 촬상 방법, 기록 방법, 재생 방법 및 기록 방법에 관한 프로그램을 기록한 저장 매체 KR101545902B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020080126536A KR101545902B1 (ko) 2008-12-12 2008-12-12 촬상 장치, 기록 장치, 재생 장치, 촬상 방법, 기록 방법, 재생 방법 및 기록 방법에 관한 프로그램을 기록한 저장 매체
US12/358,403 US20100149375A1 (en) 2008-12-12 2009-01-23 Apparatus and method for faster recording and reproduction of digital video images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080126536A KR101545902B1 (ko) 2008-12-12 2008-12-12 촬상 장치, 기록 장치, 재생 장치, 촬상 방법, 기록 방법, 재생 방법 및 기록 방법에 관한 프로그램을 기록한 저장 매체

Publications (2)

Publication Number Publication Date
KR20100067931A KR20100067931A (ko) 2010-06-22
KR101545902B1 true KR101545902B1 (ko) 2015-08-20

Family

ID=42240052

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080126536A KR101545902B1 (ko) 2008-12-12 2008-12-12 촬상 장치, 기록 장치, 재생 장치, 촬상 방법, 기록 방법, 재생 방법 및 기록 방법에 관한 프로그램을 기록한 저장 매체

Country Status (2)

Country Link
US (1) US20100149375A1 (ko)
KR (1) KR101545902B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5035292B2 (ja) * 2009-05-11 2012-09-26 株式会社ニコン 撮像装置、データ生成装置、およびデータ生成プログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007259304A (ja) 2006-03-24 2007-10-04 Canon Inc 撮像装置及びその制御方法、コンピュータプログラム及び記憶媒体

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7432940B2 (en) * 2001-10-12 2008-10-07 Canon Kabushiki Kaisha Interactive animation of sprites in a video production
JP2004070715A (ja) * 2002-08-07 2004-03-04 Seiko Epson Corp 画像処理装置
JP4332365B2 (ja) * 2003-04-04 2009-09-16 ソニー株式会社 メタデータ表示システム，映像信号記録再生装置，撮像装置，メタデータ表示方法
JP5140939B2 (ja) * 2006-04-14 2013-02-13 株式会社ニコン 画像記録再生装置
JP5036410B2 (ja) * 2007-05-31 2012-09-26 キヤノン株式会社 撮像装置及びその制御方法
JP4831017B2 (ja) * 2007-08-27 2011-12-07 ソニー株式会社 画像処理装置、現像装置、画像処理方法、現像方法、画像処理プログラム、および現像プログラム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007259304A (ja) 2006-03-24 2007-10-04 Canon Inc 撮像装置及びその制御方法、コンピュータプログラム及び記憶媒体

Also Published As

Publication number Publication date
US20100149375A1 (en) 2010-06-17
KR20100067931A (ko) 2010-06-22

Similar Documents

Publication Publication Date Title
JP5036410B2 (ja) 撮像装置及びその制御方法
JP4724577B2 (ja) 撮像装置及びその制御方法
JP4680166B2 (ja) 撮像装置および撮像方法
JP4943721B2 (ja) 画像データのカラーノイズ除去方法及びこの方法を用いた撮像装置
JP4618802B2 (ja) 撮像装置
US8743227B2 (en) Imaging apparatus and control method for reducing a load of writing image data on a recording medium
JP2008005242A (ja) 画像処理装置、撮像装置、および方法
JP4958758B2 (ja) 記録装置、再生装置、記録方法、再生方法及びプログラム
JP2009194770A (ja) 撮像装置、動画再生装置及びそのプログラム
JP4901673B2 (ja) 撮像装置、記録装置、再生装置、撮像方法、記録方法、再生方法及びプログラム
JP2008124671A (ja) 撮像装置および撮像方法
KR20090064272A (ko) 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 이를수행하는 컴퓨터 프로그램을 기록한 저장 매체
JP3905450B2 (ja) デジタルスチルカメラ
KR101480406B1 (ko) 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 프로그램기록 매체
KR101545902B1 (ko) 촬상 장치, 기록 장치, 재생 장치, 촬상 방법, 기록 방법, 재생 방법 및 기록 방법에 관한 프로그램을 기록한 저장 매체
JP2011233985A (ja) 画像処理装置及びその制御方法
JP4429148B2 (ja) 画像撮影記録装置及び方法
JP4177081B2 (ja) 画像再生装置および方法
JP4220406B2 (ja) 固体撮像装置およびその画像記録方法、ならびにその画像再生方法
KR101480404B1 (ko) 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 이를수행하는 컴퓨터 프로그램을 기록한 저장매체
JP2004120367A (ja) デジタルカメラ
JP5600888B2 (ja) 画像処理装置
JP4635076B2 (ja) 固体撮像装置
KR101589490B1 (ko) 디지털 영상 처리기에서 이미지 압축 및 해제 장치 및 방법
JP2015032114A (ja) 画像処理装置、画像処理方法、画像処理プログラム

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
A201 Request for examination
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20190730

Year of fee payment: 5