KR20040060767A - 기록 방법, 기록 장치, 기록 매체, 재생 방법, 재생 장치및 촬상 장치 - Google Patents

Abstract

화상 정보를 데이터 압축하여 기록 매체에 기록할 때, 이 화상 정보에 대한 부가 정보를 편리하게 이용할 수 있는 상태로 부가하여 기록한다.

압축된 화상 정보의, 기록 매체에 대한 기록 및 판독 단위인 판독/기록 단위 정보에는, 화상 정보의 1 프레임 또는 1 필드로 이루어지는 복호(復號) 재생 단위 정보를 복수 단위분 포함하는 동시에, 적어도 1 개의 복호 재생 단위 정보는 이 복호 재생 단위 내의 화상 정보만을 사용하여 압축 부호화한 것으로 한다. 판독/기록 단위 정보 내에, 판독/기록 단위 내 복수 단위분의 복호 재생 단위 정보에 대한 부가 정보를, 압축된 화상 정보와 분리하여 추출 가능하게 다중화하여 기록한다.

Description

기록 방법, 기록 장치, 기록 매체, 재생 방법, 재생 장치 및 촬상 장치 {RECORDING METHOD, RECORDING APPARATUS, RECORDING MEDIUM, REPRODUCING METHOD, REPRODUCING APPARATUS, AND IMAGING APPARATUS}

본 발명은 화상 정보를 압축 부호화하여 디스크 등의 기록 매체에 기록하는방법, 장치 및 그 재생 방법, 장치에 관한 것이다.

예를 들면, 화상 정보를 디스크, 테이프, 반도체 메모리 등의 기록 매체에 기록하는 경우에는, 한정된 기록 영역에, 보다 장시간분의 화상 정보를 기록할 수 있도록 하기 위해, 일반적으로, 화상 정보는 데이터 압축하도록 한다.

이 데이터 압축 방법으로서는, 종래부터 MPEG(Moving Picture Experts Group) 방식에 의한 압축 부호화 방식이 널리 이용되고 있다.

MPEG 방식에서는, 화상 정보에 대해서는, 화상 정보의 복호 재생 단위인 화상 프레임(또는 화상 필드) 정보의 상관(相關)을 이용한 예측 부호화와, DCT(Discrete Cosine Transform ; 이상 코사인 변환)를 이용한 데이터 압축을 실행한다.

MPEG 방식에서는, 각 프레임(또는 필드. 이상 동일하지만, 설명의 간단을 위해 이하의 설명에서는 「프레임」의 용어만을 사용하기로 한다)의 화상은 압축 부호화의 차이에 의해, I 픽처와, P 픽처와, B 픽처의 3개 타입으로 나누어진다.

I 픽처는 1 프레임 내만으로 닫힌 압축 부호화를 실행하는 화상(프레임 내 부호화 화상)이다. P 픽처는 이 화상 프레임보다 전의 화상 프레임과의 상관을 이용한 압축 부호화를 실행하는 화상(순방향 예측 부호화 화상)이다. 또 B 픽처는 이 화상 프레임의 전과 후의 화상 프레임의 상관을 이용한 압축 부호화를 실행하는 화상(쌍방향 예측 부호화 화상)이다.

그리고 MPEG 방식에서는, 기록 매체에 대한 기록 및 판독 단위(판독/기록 단위)는 복수 프레임(예를 들면 15 프레임)으로 이루어지는 이른바 GOP(Group ofPicture)로 구성된다. 도 15에 GOP의 일례를 나타낸다.

도 15에 나타내는 바와 같이, MPEG 방식에서는, GOP에는 I 픽처가 적어도 1 장 반드시 포함되도록 되어 있다. P 픽처와 B 픽처만으로는, 화상의 복호를 할 수 없기 때문이다. 이와 같이 GOP에 I 픽처가 포함됨으로써, GOP 단위로 랜덤 액세스가 가능해진다.

I 픽처 및 P 픽처는 원래의 화상과 동일 순서로 부호화 처리되지만, B 픽처는 I 픽처 및 P 픽처를 먼저 부호화 처리한 후, 부호화 처리하도록 한다. 이 부호화의 순번을 고려하여, MPEG 인코더에서는, 화상의 순서가 도 15 (A) 상태의 원래의 줄 순서로부터 도 15 (B)에 나타내는 바와 같이 정렬되고, 이 정렬된 화상 정보에 대해 압축 부호화의 처리가 이루어진다[일본국 특개평 8(1996)-214265호 공보 참조].

즉, 도 15 (A)에서 화살표로 나타내는 바와 같이, P 픽처는 전방의 I 픽처 또는 P 픽처를 이용한 예측 부호화를 실행한다. 또 B 픽처는 전방 및 후방의 I 픽처 또는 P 픽처에 끼워지는 2 장분에 대해 그들 전방 및 후방의 I 픽처 또는 P 픽처를 이용한 예측 부호화를 실행한다.

이와 같이 B 픽처는 부호화 시에 후방의 I 픽처 또는 P 픽처를 이용하게 되므로, 도 15 (B)에 나타내는 바와 같이, 이 B 픽처는 그것을 예측 부호화하기 위해 사용하는 후방의 I 픽처 또는 P 픽처보다 뒤의 순서가 되도록 정렬하는 것이다.

그리고 후술하는 바와 같이, 압축 부호화된 화상 데이터에는, 복호 재생 단위, 즉, 픽처 단위의 데이터에 복호 재생 처리를 위한 관리 정보가 부가되어 기록매체에 기록된다. 그리고 MPEG 방식으로 압축된 화상 데이터의 재생 시에는, 복호 재생 처리를 위한 관리 정보가 기록 데이터로부터 추출되고, 이 관리 정보에 따라, 재생된 픽처 단위의 화상 출력이 제어되어 픽처의 줄 순서가 원래대로 되돌아간다.

그런데, 예를 들면, 디지털 카메라에서는, 정지화의 촬영 시에는, 촬영 일시 등의 정보를 기록 화상에 중첩 표시할 수 있도록 기록하는 것은 이미 실행되고 있다. 또 카메라 설정 데이터를 화상 신호와 분리 가능하게 기록 매체에 기록하는 방법이, 예를 들면, 일본국 특개평 9(1997)-69995호 공보에 개시되어 있다.

디지털 카메라에서는, 정지화뿐만 아니라, 동화도 촬영할 수 있도록 되어 있는 것이 많다. 그 경우의 동화 화상 데이터의 데이터 압축 방식으로서는, 통상, 전술한 MPEG 방식이 채용되고 있다.

이 디지털 카메라에서의 동화의 촬영시에도, 촬영 일시 등의 정보나, 조리개, 노출값, 백(白) 밸런스의 상태, 초리 거리 등의 촬영 조건을 화상 정보에 부가하여 기록 매체에 기록할 수 있으면, 촬영 화상의 관리 정보로서 사용할 수 있는 등 편리하다.

전술한 MPEG 방식에서, 화상 데이터, 오디오 데이터 등을 동기화하고 다중화하여 부호화 스트림으로 하고, 그 스트림을 기록 매체 등에 기록하는 시스템 포맷의 하나로서, MPEG-PS(PS : Program Stream)가 알려져 있지만, 이 MPEG-PS에서는 전술한 촬영 시 정보 등의 부가 정보를 스트림 상 어떻게 다중화하는지 하는 것은 정의되어 있지 않다.

그래서, MPEG 방식의 기록 데이터 전송 포맷에서, 어떻게 하여 부가 정보를 편리하게 이용할 수 있는 상태로 부가하는지 하는 것이 기술적인 과제로 되어 있다.

그리고 이 경우에, 예를 들면, 보고 싶은 화상 정보 포인트나 편집 포인트를 용이하게 검색할 수 있도록 하기 위해, 기록 매체로부터의 화상 데이터를 정상 속도보다 고속으로 재생하는 변속 재생 시에 그 부가 정보를 이용할 수 있도록 하는 것이 중요하다.

본 발명은 이상과 같은 요구를 만족시킬 수 있는 상태로 화상 정보에 대한 부가 정보를 기록 매체에 기록할 수 있는 방법 및 장치를 제공하는 것을 목적으로 한다.

도 1은 본 발명에 의한 기록 방법의 실시예가 적용된 촬상 장치의 구성예를 나타내는 도면이다.

도 2는 도 1에서의 데이터 인코드 및 다중화 처리 부분의 구성예를 설명하기 위한 도면이다.

도 3은 DVD-Video 포맷에 의한 광 디스크 상의 논리 배치를 나타내는 도면이다.

도 4는 본 발명에 의한 기록 방법의 실시예 요부의 일례를 설명하기 위한 도면이다.

도 5는 본 발명에 의한 기록 방법의 실시예 요부의 다른 예를 설명하기 위한 도면이다.

도 6은 본 발명에 의한 기록 방법의 실시예에 의해 기록되는 부가 정보의 예를 나타내는 도면이다.

도 7은 도 1에서의 데이터 분리 처리 및 데이터 디코더 부분의 구성예를 설명하기 위한 도면이다.

도 8은 본 발명에 의한 재생 방법의 실시예를 설명하기 위한 도면이다.

도 9는 본 발명에 의한 재생 방법의 실시예를 설명하기 위한 도면이다.

도 10은 본 발명에 의한 재생 방법의 실시예를 설명하기 위한 도면이다.

도 11은 본 발명에 의한 재생 방법의 실시예를 설명하기 위한 도면이다.

도 12는 본 발명에 의한 재생 방법의 실시예를 설명하기 위한 도면이다.

도 13은 본 발명에 의한 재생 방법의 실시예를 설명하기 위한 플로 차트이다.

도 14는 본 발명에 의한 기록 방법의 실시예의 다른 예를 설명하기 위한 도면이다.

도 15는 MPEG 방식에서의 GOP 구성을 설명하기 위한 도면이다.

<도면의 주요 부분에 대한 부호의 설명>

202: 비디오 인코드부, 2021: 픽처 순서 정렬부, 2022: 압축 부호화부, 2023: 가변 길이 부호화부, 208: 부가 정보 처리부, 211: 멀티플렉스부, 220: 제어부, 221: 디ㆍ멀티플렉스부, 225: 비디오 디코더부, 226: 오디오 디코더부, 227: 부가 정보 디코더부, 231: 비디오 신호 처리부, 232: 오디오 신호 처리부, 233: OSD 회로, 234: 합성부.

상기 과제를 해결하기 위해 본 발명에 의한 기록 방법은

화상 정보를 데이터 압축하여 기록 매체에 기록하는 방법으로서, 상기 압축된 화상 정보의, 상기 기록 매체에 대한 기록 및 판독 단위인 판독/기록 단위 정보에는, 상기 화상 정보의 1 프레임 또는 1 필드로 이루어지는 복호 재생 단위 정보를 복수 단위분 포함하는 동시에, 적어도 1 개의 상기 복호 재생 단위 정보는 상기 복호 재생 단위 내의 화상 정보만을 사용하여 압축 부호화한 것으로 하는 기록 방법에 있어서,

상기 판독/기록 단위 정보 내에, 상기 판독/기록 단위 내 복수 단위분의 상기 복호 재생 단위 정보에 대한 부가 정보를, 상기 압축된 화상 정보와 분리하여추출 가능하게 다중화하여 기록하는

것을 특징으로 한다.

전술한 구성의 본 발명에 의하면, 예를 들면, 압축 방식이 MPEG 방식인 경우에 대해 설명하면, I 픽처를 적어도 1 장 포함하는 GOP를 포함하는 판독/기록 단위 정보 내에, 이 판독/기록 단위 정보에 대한 부가 정보가 화상 정보와는 분리 가능하게 기록되어 있다. 따라서, 판독/기록 단위마다 화상 정보를 재생하는 것과 동시에, 부가 정보를 추출하여 재생할 수 있다.

또 판독/기록 단위 정보 정보 중의 I 픽처만 재생함으로써, 변속 재생하는 경우에도, 부가 정보를 재생하여 I 픽처에 부가 표시할 수도 있다. 이 때문에, 예를 들면, 부가 정보로서 촬영 일시의 정보를 기록한 경우에는, 그 촬영 일시의 정보를 편리하게 고속 재생하여 원하는 화상 위치를 용이하게 검색할 수 있게 된다.

이하, 본 발명에 의한 기록 방법 및 재생 방법의 실시예를 기록 매체로서, 예를 들면, 광 디스크를 사용한 촬상 장치로서의 디지털 카메라에 적용한 경우를 예를 들어, 도면을 참조하면서 설명한다.

이 예에서는, 광 디스크로서 DVD-D(Digigal Versatile Disc-Recordable)나 DVD-RW(Digital Versatile Disc-ReWritable) 등의 기록 가능한 광 디스크를 사용하는 경우이다. 그리고 데이터 압축 방식으로서는, MPEG2 방식이 사용되고, 기록 데이터는 MPEG2-PS(PS ; Program Stream)의 구성으로 된다. 그리고 광 디스크에는 DVD-Video 포맷을 MPEG2-PS의 기록 데이터가 기록되는 것으로 한다.

도 1은 실시예인 디지털 카메라의 구성예를 나타내는 블록도이다. 이 예의디지털 카메라는 카메라부(10)와, 기록 재생 처리부(20)와, 제어부(30)로 이루어진다.

제어부(30)는 CPU(Central Processing Unit)(301)에 대해, 시스템 버스(302)를 통해 프로그램 ROM(Reed Only Memory)(303)과, 워크 영역용 RAM(Random Access Memory(303)와, 조작 입력부(31)를 접속하기 위한 조작 입력 인터페이스(305)와, 표시 장치로서의 LCD(Liquid Crystal Display)(32)를 접속하기 위한 LCD 컨트롤러(306)와, 메모리ㆍ카드(50)를 충전하기 위한 메모리ㆍ카드 인터페이스(307)와, USB(Universal Serial Bus) 등의 통신 인터페이스(308)와, 시계 회로(309)와, I/O 포트(310, 311, 312, 313, 314, 315, 316, 317)가 접속되어 구성되어 있다.

ROM(303)에는 카메라부(10)를 제어하기 위한 프로그램이나, 촬영한 화상 정보나 마이크로폰(15)으로부터의 음성 정보에 대한 기록 제어 및 재생 제어, 그 밖의 프로그램이 기록되어 있다.

조작 입력부(31)에는 촬영 모드, 재생 모드 등을 스위칭하는 모드 스위칭 키, 줌 조정키, 노출 조정을 위한 키, 셔터키, 동화 촬영용 키, 백(白) 밸런스 조정용 키 등 복수의 키가 설치되어 있다.

CPU(301)는 조작 입력 인터페이스(305)를 통해 입력되는 조작 입력부(31)로부터의 조작 신호를 해석하여 조작 입력부(31)의 어느 키가 조작되었는지를 판별하고, 그 판별 결과에 따른 제어 처리를 실행한다.

LCD(32)에는 CPU(301)의 제어 하에, 촬영 시의 피사체 화상이나 촬상 조건이표시되는 동시에, 기록 매체로부터 재생된 재생 화상이나 부가 정보가 표시된다.

시계 회로(309)는 도시를 생략한 기준 클록 신호 발생 회로로부터의 클록 신호를 계측하여, 년, 월, 일, 시간, 분, 초를 나타내는 시간 정보를 생성한다. 초로서는, 화상의 프레임 단위를 계수할 수 있는 소수점 이하 정밀도의 정보를 발생하도록, 이 시계 회로(309)는 구성되어 있다.

이 예의 디지털 카메라는 기록 데이터를 광 디스크(40)에 기록할 수 있는 외에, 메모리ㆍ카드(50)에도 기록할 수 있도록 구성되어 있다. 이 경우에는, 메모리ㆍ카드(50)에는 메모리ㆍ카드 인터페이스(307)를 통해 압축 데이터가 기록된다.

통신 인터페이스(308)는, 예를 들면, 이 예의 디지털 카메라를 퍼스널 컴퓨터에 접속하여, 기록 데이터나 그 밖의 데이터의 주고받기를 할 때 사용된다.

카메라부(10)는 카메라 광학계(11)와, 카메라 컨트롤부(12)와, 촬상 소자(13)와, 촬상 신호 처리부(14)와, 마이크로폰(15)과, 입력 오디오 신호 처리부(16)로 구성된다.

카메라 광학계(11)는 도시를 생략했지만, 피사체를 촬상하기 위한 렌즈군과, 조리개 조정 기구, 포커스 조정 기구, 줌 기구, 셔터 기구, 플래시(스트로보) 기구 등을 구비하는 동시에, 손 흔들림 보정 기구를 구비하고 있다.

손 흔들림 보정 기구는 자이로를 구비하고, 이 자이로에 의해 검출된 각(角)속도 정보(ω)(변화 각도 θ/초)에 의해 손 흔들림이 검출되고, 이 검출된 손 흔들림분을 광학계의 보정 기구에 의해 보정한다. 이 경우에 손 흔들림의 값이 보정의 한계를 초과하고 있는 경우에는, 그것을 나타내는 플래그를 세우도록 한다.

즉, 예를 들면, 소정 시간 간격(예를 들면, 1/60초 동안에 8회)으로 자이로로부터의 각속도 정보(ω)의 입력을 받아, 이 각속도 정보(ω)를 기록 개시로부터 시간 적분한다. 그 적분값(θ)이 소정의 각도값, 예를 들면 5°를 초과했을 때, 손 흔들림 보정 한계 플래그를 세우도록 한다. 그리고 각속도 정보(ω)는 기준 위치로부터 한쪽 방향으로 어긋난 경우에는 +ω로 되고, 다른 쪽 방향으로 어긋난 경우에는 -ω로 되므로, + 방향 및 - 방향의 양 방향으로 손 흔들림 보정 한계 검출의 임계값, 예를 들면 ±5°가 설정된다.

카메라 컨트롤부(12)는 제어부(30)의 I/O 포트(310)를 통한 제어 신호를 받아 카메라 광학계(11)에 공급하는 제어 신호를 생성한다. 그리고 생성된 제어 신호를 카메라 광학계(11)에 공급하여, 줌 제어, 셔터 제어, 노출 제어 등의 제어를 실행한다. 제어부(30)의 I/O 포트(310)를 통한 신호에는, 조작 입력부(31)에서의 그 시점에서의 조작 입력에 따른 제어 신호뿐만 아니라, 조작 입력부(31)에서의 조작 입력에 따라 미리 설정된 촬영 조건에 따른 제어 신호가 포함된다.

촬상 소자(13)는, 이 예에서는, CCD(Charge Coupled Device)로 구성되며, 그 결상면에 카메라 광학계(11)를 통한 상이 결상된다. 그리고 셔터 조작 등의 사용자 조작에 따라 제어부(30)의 I/O 포트(311)로부터 발생하는 화상 편입 타이밍 신호를 받고, 결상면에 결상되어 있는 피사체상을 촬상 신호로 변환하여 촬상 신호 처리부(14)에 공급한다.

촬상 신호 처리부(14)에서는, 제어부(30)의 I/O 포트(312)를 통한 제어에 따라, 촬상 신호에 대한 감마 보정이나 AGC(Auto Gain Control) 등의 처리를 실행하는 동시에, 촬상 신호를 디지털 신호로 변환하는 처리도 실행한다.

또 마이크로폰(15)에 의해, 촬상 시의 피사체 주변 음성이 수집된다. 그리고 이 마이크로폰(15)으로부터의 음성 신호가 입력 오디오 신호 처리부(16)에 공급된다.

입력 오디오 신호 처리부(16)에서는, 제어부(30)의 I/O 포트(312)를 통한 제어에 따라, 입력 오디오 신호에 대한 보정이나 AGC(Auto Gain Control) 등의 처리를 실행하는 동시에, 오디오 신호를 디지털 신호로 변환하는 처리도 실행한다.

도 1에서는, 도시를 생략했지만, 이 예의 디지털 카메라에서는, 외부 마이크로폰 단자를 구비하고, 이 외부 마이크로폰 단자에 외부 마이크로폰이 접속된 경우에는, 입력 오디오 신호 처리부(16)에는, 내장 마이크로폰(15)이 아니라, 이 외부 마이크로폰으로부터의 오디오 신호가 공급되도록, 자동적으로 스위칭되게 구성되어 있다.

그리고 이 예에서는, 입력 오디오 신호 처리부(16)에서의 AGC 처리는, 내장 마이크로폰(15)으로부터의 오디오 신호가 입력된 경우와, 외부 마이크로폰으로부터의 오디오 신호가 입력된 경우에는, 그 특성의 차이를 고려한 처리가 이루어지도록 되어 있다. AGC 처리의 스위칭은 입력 오디오 신호 처리부(16)에의 오디오 신호의 입력 스위칭에 연동하여 실행되도록 구성되어 있다.

기록 재생 처리부(20)는 DSP(Digital Signal Processor)(21)와, DVD 신호 처리부(22)와, 기록/판독부(23)와, 비디오/오디오 출력 처리부(24)로 이루어진다. DSP(21)에는, 예를 들면, SDRAM(Synchronlous DRAM)으로 이루어지는 버퍼메모리(25)가 접속되어 있다.

DSP(21)에는, 촬상 신호 처리부(14)로부터의 디지털 화상 신호 및 입력 비디오 신호 처리부(16)로부터의 디지털 오디오 신호가 입력되는 동시에, 제어부(30)의 I/O 포트(313)를 통해 촬영 시의 정보가 입력된다. I/O 포트(313)를 통해 입력되는 촬영 시의 정보에는, 프레임 단위의 촬영 시각이나, 촬영 정보가 포함된다.

촬영 시각의 정보로서는, 이 예에서는, 시계 회로(309)로부터의 시각 정보를 그 때마다 판독하여 사용한다, 그러나, 동화의 촬영 개시 시점에서 시계 회로(309)의 시각 정보(촬상 개시 시각)를 편입하고, 그 이후에는 상기 촬영 개시 시각을 기준으로 한 프레임 단위의 상대 시각(프레임 번호라도 된다)을 촬영 시각으로서 사용하도록 해도 된다.

또 촬영 조건 정보에는, 자동적으로 설정되는 정보 및 사용자에 의해 설정되는 정보의 양쪽을 포함하며, 예를 들면, 노출 제어 정보, 자동 백 밸런스 조정용 정보, 디지털 줌 배율 정보, 혼 흔들림 보정 정보, F값(F 넘버), 노출 시간, AGC 이득값, 렌즈 초점 거리 등의 설정 정보를 포함한다.

그리고 음성 정보의 편입 수단으로서 내장 마이크로폰(15)을 사용했는지, 또는 외부 마이크로폰을 사용했는지의 정보를 촬영 시의 정보에 포함시키도록 해도 된다.

전술한 촬영 시의 정보는 부가 정보로서, 이 실시예에서는 후술하는 바와 같이, GOP 단위로 생성되어 기록되도록 되어 있다.

DSP(21)는 I/O 포트(313)를 통한 카메라 정보에 따라, 촬상 신호 처리부(14)로부터의 디지털 화상 신호에 대해 자동 백 밸런스 제어나, 노출 보정을 위한 제어, 디지털 줌 배율에 따른 제어 등을 실행한다. 그리고 DSP(21)는 이와 같은 제어가 가해진 디지털 화상 신호와, 입력 오디오 신호 처리부(16)로부터의 디지털 오디오 신호를 PMEG2 방식에 의해 데이터 압축한다.

또 DSP(21)는 입력된 촬상 시 정보에 대해 이 촬상 시 정보를 부가 정보로서 압축 화상 데이터나 압축 오디오 데이터와 함께 기록하기 위한 부가 정보 처리를 실행한다.

DSP(21)는 또한 압축한 화상 데이터와, 압축한 오디오 데이터와, 전술한 부가 정보를 다중화하여 MPEG-PS 포맷에 따른 데이터열이 되도록 하는 처리도 실행한다.

그리고 DSP(21)로부터의 MPEG-PS 포맷의 데이터는 I/O 포트(314)를 통해 제어부(30)의 제어를 받는 DVD 신호 처리부(22)의 기록 신호 처리부를 통해 기록/판독부(23)에 공급되고, 이 기록/판독부(23)에 의해 DVD(40)에 기록된다. 기록/판독부(23)는 I/O 포트(316)를 통해 제어부(30)의 제어를 받는다.

그리고 기록/판독부(23)에 의해 DVD(40)로부터 판독된 데이터는 DVD 신호 처리부(22)의 재생 신호 처리부를 통해 DSP(21)에 공급된다.

DSP(21)에서는, 다중화되어 있는 압축 화상 데이터와, 압축 오디오 데이터와, 부가 정보를 분리한다. 그리고 DSP(21)는 분리된 압축 화상 데이터의 압축을 해제하고, 원래의 줄 순서인 프레임 단위의 화상 데이터를 재생하여 비디오/오디오 출력 처리부(24)에 출력하는 동시에, 분리된 압축 오디오 데이터의 압축을 해제하고, 오디오 데이터를 재생하여 비디오/오디오 출력 처리부(24)에 출력한다.

비디오/오디오 출력 처리부(24)는 I/O 포트(315)를 통해 제어부(30)의 제어를 받아, 출력해야 할 화상 데이터 및 오디오 데이터에 대한 처리를 한다. 그리고 비디오/오디오 출력 처리부(24)는, 디지털 데이터로서의 화상 데이터 및 오디오 데이터는 I/O 포트(315)를 통해 제어부(30)에 공급하는 동시에, D/A 변환하여 아날로그 신호로 하고, 출력 단자(26V 및 26A)에 출력한다. I/O 포트(315)를 통해 제어부(30)에 입력된 화상 데이터에 의한 재생 화상은 LCD 컨트롤러(306)의 제어에 따라 LCD(32)의 화면에서 재생 표시된다.

또 이 예에서는, GPS 수신기부(60)가 I/O 포트(317)를 통해 시스템 버스(302)에 접속되고, 이 GPS 수신기부(60)로부터의 위치 정보가 I/O 포트(317)를 통해 제어부(30)에 입력된다. 이 위치 정보는 기록 시에, 촬영된 화상 데이터에 대응하여 기록된다.

따라서, 이 예에서는, 재생 시에는, 재생 화상에는 촬영 위치도 표시하는 것이 가능하다. 또 기록된 촬영 시의 위치 정보를 사용하여, 표시 지도 화면 상에 촬영 시의 코스를 표시할 수도 있다.

그리고 GPS 수신기부(60)를 형성하는 대신에, 통신 수단을 사용하여 공중 기지국이나 네트워크로부터 위치 정보를 입수하도록 구성해도 된다.

[데이터 압축 및 다중화 처리에 대해]

다음에, DSP(21)에서의 데이터 압축 및 다중화 처리에 대해 도 2를 참조해 더욱 상세하게 설명한다.

즉, DSP(21)에서는, 촬상 신호 처리부(14)로부터의 화상 데이터는 전술한 바와 같이, 촬상 시의 설정 조건이나 제어 조건에 따라 제어 처리가 이루어진 후, 버퍼(201)를 통해 비디오 인코더부(202)에 공급된다.

비디오 인코더부(202)에서는, 적어도 1 장의 I 픽처와, 복수 장의 P 픽처 및 B 픽처로 이루어지는 GOP를 구성하고, 이 GOP를 기록 매체로서의 DVD에 대한 기록 단위로서 압축 처리하도록 한다.

즉, 비디오 인코드부(202)에서는, 먼저, 픽처 순서 정렬부(2021)에서, 전술한 도 15를 사용하여 설명한 바와 같이, GOP 내에서의 화상 순서의 정렬을 실행한다.

그리고 다음에 압축 부호화부(2022)에서, I 픽처에 대해서는, 프레임 내 부호화 처리를 실행하여 데이터 압축을 실행하고, P 픽처에 대해서는, 전방의 I 픽처 또는 P 픽처와의 상관을 이용한 프레임 간 예측 부호화 처리를 실행하여 데이터 압축을 실행하고, B 픽처에 대해서는, 전방 및 후방의 I 픽처 또는 P 픽처와의 상관을 이용한 프레임 간 예측 부호화 처리를 실행하여 데이터 압축을 실행한다. 그리고 P 픽처에 대해서는, 프레임 내 부호화 처리를 실행하는 화상 부분도 존재한다.

이상과 같이 하여, 압축 부호화부(2022)에서 압축 부호화 처리가 실행된 화상 데이터는 가변 길이 부호화부(2023)에서 허프만 부호(Huffman code) 등을 사용한 가변 길이 부호화 처리가 실행된 후, 버퍼(2023)를 통해 멀티플렉스부(다중화부)(211)에 공급된다.

또 DSP(21)에서는, 입력 오디오 신호 처리부(16)로부터의 오디오 데이터는촬상 타이밍에 동기하여 편입되어 버퍼(204)를 통해 오디오 인코드부(205)에 공급되고, 소정량의 오디오 데이터(오디오 프레임이라고 불려짐)를 복호 재생 단위로 하여 압축 부호화된다. 압축 부호화된 오디오 데이터는 버퍼(206)를 통해 멀티플렉스부(다중화부)(211)에 공급된다.

또한 DSP(21)에서는, I/O 포트(313)로부터 입력된 촬영 시 정보는 버퍼(207)를 통해 부가 정보 처리부(208)에 공급되어, 화상의 프레임 단위로 부가하는 부가 정보가 생성된다. 그리고 생성된 부가 정보는 버퍼(209)를 통해 멀티플렉스부(211)에 공급된다.

멀티 플렉스부(211)에서는, 화상 데이터, 오디오 데이터, 부가 정보의 각각을 패킷화하여, 화상 데이터, 오디오 데이터, 부가 정보를 다중화한다. 이 경우에, 1 또는 복수 개의 패킷 데이터에 팩 헤더를 부가하여 블록화하고, 팩을 구성한다. 이 멀티플렉스부(211)로부터의 다중화 출력 데이터는 DVD 신호 처리부(22)에 출력되고, 기록/판독부(23)에 의해 전술한 바와 같이 하여 DVD(40)에 기록된다.

그리고 화상 데이터와 오디오의 동기를 취하기 위해, MPEG 방식에서는 화상 데이터 또는 오디오 데이터의 복호 재생 단위(화상 데이터는 1 프레임 단위, 오디오 데이터는 오디오 프레임 단위)마다 타임 스탬프라고 불려지는 관리 정보가 부가된다.

이 타임 스탬프의 정보는 시각 관리 정보 발생부(210)로부터 멀티플렉스부(211)에 공급된다. 이 타임 스탬프는 SCR(System, Clock Reference ; 시스템 시각 기준 참조값)에 의해 시간 기준이 주어진다.

타임 스탬프는 멀티플렉스부(211)에서 패킷 중에 복호 재생 단위 정보의 선두가 있는 경우에, 그 패킷 헤더에 부가되고, 패킷 중에 복호 재생 단위 정보의 선두가 없는 경우에는 부가되지 않는다.

타임 스탬프에는 PTS(Presentation Time Stamp)와, DTS(Decoding Time Stamp)의 2 종류가 있다.

PTS는 복호 재생 단위 정보의 재생 출력의 시각 관리 정보이다. 즉, PTS는 복호 재생 단위 정보를 언제 재생 출력하는지의 시각 관리 정보이다.

또 타임 스탬프(DTS)는 복호 재생 단위 정보의 복호 시각 관리 정보이다. 이것은 전술한 바와 같이, MPEG 방식에서는 픽처의 줄 순서를 부호화 시에 정렬함으로써, 재생 출력 순서와 복호 순서가 상이한 것에 대응하여 설치된 것이다.

타임 스탬프(PTS와 DTS)가 상이한 경우에는, 양쪽의 타임 스탬프가 패킷 헤더에 부가되고, 일치하는 경우에는, 타임 스탬프(PTS)만 패킷 헤더에 부가된다.

이상과 같이, 타임 스탬프(PTS)는 화상 데이터 프레임의, 원래의 줄 순서에 대응하는 것이며, 또한 각 프레임에 1 대 1로 대응하는 시각 관리 정보이다. 오디오 데이터에 대해서는, 타임 스탬프(DTS)는 부가되지 않고, 타임 스탬프(PTS)만 부가된다.

[부가 정보 다중화의 제1 예]

이 제1 예는 DVD-Video 포맷에 의한 기록 시의 경우이다. DVD-Video 포맷에 의한 광 디스크 상에서의 기록 데이터의 논리 배치는 도 3에 나타내는 바와 같은 것으로 한다.

즉, 광 디스크의 기록 영역은 도 3 (A)에 나타내는 바와 같이, 광 디스크의 반경 방향으로 보아, 최내주측으로부터 차례로 리드인 영역, 데이터 존 영역, 리드아웃 영역으로 구분된다. 그리고 데이터 존 영역에 관리 정보 및 화상 데이터 등의 데이터가 기록된다.

데이터 존 영역은 리드인 영역측으로부터 차례로 UDF(Universal Disc Format) 영역, VMG(Video Manager) 영역, 실시간 데이터 기록 영역으로 구분된다. UDF 영역 및 VMG 영역은 광 디스크에 기록된 화상 데이터 등의 파일을 관리하는 관리용 정보의 기록 영역이다. UDF 영역은 UDF 규격과 ISO9660 규격을 서포트함으로써, 컴퓨터로 광 디스크를 판독할 수 있도록 하기 위한 것이다. VMG 영역은 DVD 관리용 정보의 기록 영역이다.

실시간 데이터 기록 영역은 화상 데이터나 오디오 데이터를 기록하는 영역이며, 도 3 (B)에 나타내는 바와 같이, VTS(Video Title Set)라고 불려지는 데이터군을 단위로 하여 데이터 기록이 이루어진다.

VTS는 도 3 (C)에 나타내는 바와 같이, VTSI(Video Title Set Information)와, VTSM_VOBS(Video Object Set For the VTSM)와, VTSTT_VOBS(Video Object Set For Titles in a VTS)와, VTSI_BUP(Backup of VTSI)로 이루어진다.

VTSTT_VOBS에는, 도 3 (D)에 나타내는 바와 같이, MPEG2_PS 포맷의 압축 데이터가 VOBU(Video Object Unit)라고 불려지는 정보 블록을 판독/기록 단위로 하여 기록된다. VOBU 내에는, 화상 데이터는 적어도 1 장의 I 픽처를 포함하는 1 GOP가 포함되고, 오디오 데이터는 이 1 GOP에 대응하는 정보가 포함된다. 즉, 광 디스크에는, 1 GOP 단위로 데이터가 판독/기록되는 것과 동일하다. 그리고 이 실시예에서는, 후술하는 바와 같이, VOBU에는 1 GOP의 화상 데이터에 대한 부가 정보도 포함된다.

VTSI에는 화상 데이터 등의 기록 위치 정보 등 관리 정보가 기록된다. 또 VTSM_VOBS에는 화상 데이터 등의 루트 메뉴가 기록된다. 이 VTSM_VOBS는 옵션이다. 또한 VTSI_BUP는 VTSI의 백업 정보이다.

판독/기록 단위 데이터(VOBU)는 도 3 (E)에 나타내는 바와 같이, 복수 개의 팩(PCK)으로 구성된다. 각 팩(PACK)은 1 또는 복수 개의 패킷으로 구성되는 것이 가능하지만, 이 예에서는, 1 팩은 1 패킷으로 이루어지는 것으로 되어 있다. DVD-Video 포맷에서는, 1 팩은 2048 바이트(1 섹터에 대응)로 정해져 있다.

이 예의 경우의 1 팩은 도 3 (F)에 나타내는 바와 같은 것이 된다. 즉, 팩(PCK)의 선두는 팩 헤더로 된다. 그리고 팩 헤더의 다음에는, 패킷 헤더가 위치하고, 패킷 헤더에 계속해서 화상 데이터나 오디오 데이터 등으로 이루어지는 패킷 데이터가 위치한다. 패킷 데이터로서 화상 데이터가 포함되는 팩은 비디오 팩이라고 칭한다. 패킷 데이터로서 오디오 데이터가 포함되는 팩은 오디오 팩이라고 칭한다. 이 화상 데이터나 오디오 데이터의 패킷 포맷은 프라이비트1ㆍ패킷으로 되어 있다.

그리고 이 명세서에서, 패킷 데이터로서 화상 데이터가 포함되는 팩은 비디오 팩이라고 칭하고, 패킷 데이터로서 오디오 데이터가 포함되는 팩은 오디오 팩이라고 칭한다.

각 팩의 팩 헤더 내에는, 전술한 시간 기준의 정보(SCR)가 포함된다. 그리고 패킷 헤더의 선두는 패킷 개시 코드로 되는 동시에, 이 패킷 헤더 내에는 PTS 플래그, DTS 플래그 등의 플래그 정보와, 타임 스탬프(PTS, DTS)가 포함된다. PTS 플래그, DTS 플래그는 이 패킷 내에 타임 스탬프(PTS, DTS)가 포함되는지 여부를 나타내는 것이다. 전술한 바와 같이, 타임 스탬프(PTS, DTS)는 패킷 내에 픽처의 선두가 포함되는 경우에 그 패킷 헤더 내에 부가된다.

이상과 같은 포맷으로 기록되어 있는 광 디스크가 컴퓨터에 의해 액세스되는 경우에는, UDF 영역의 정보에 의해 원하는 파일이 검색되어 재생된다. 또 상기 광 디스크가 DVD 플레이어에 의해 재생되는 경우에는, UDF 영역의 정보에 의해 VMG 영역의 선두가 검색되고, VMG 영역의 정보에 의해 원하는 타이틀이 검색되어 재생된다.

예를 들면, DVD-RW(DVD Re-Recordable) 광 디스크에 비디오 데이터를 기록하는 방식으로서는, Incremental Recording 방식(이하, INC 방식이라고 부름)이나, Restricted Overwrite 방식(이하, ROW 방식이라고 부름)이 사용된다.

여기에서, INC 방식은 순차식으로 데이터를 기록하는 방식이며, ROW 방식은 덮어쓰기 가능한 광 디스크에 적용되는 방식이다. 단, ROW 방식에서도, 미기록 영역에 데이터를 기록하는 경우에는, 순차식으로 데이터를 기록한다.

이들 INC 방식 및 ROW 방식에서는, 리드인 영역의 내주측에서 RMA(Recording Management Area)에 의해 기록 영역의 예약 등 광 디스크 전체의 관리 정보가 유지되게 되어 있다.

상기 INC 방식, ROW 방식의 어느 것에서도, 끝내기 처리에 의해 UDF 영역, VMG 영역을 형성하고, 또한 리드인 영역, 리드아웃 영역을 형성하고, 이에 따라 재생 전용의 DVD-ROM에서 일반적으로 사용되는 DVD-Video와의 호환성이 도모된다.

다음에, 이 예에서는, 부가 정보는 1 VOBU분마다 1 팩의 정보로서 다중화된다. 그리고 이하의 설명에서는, 부가 정보가 패킷 데이터로서 포함되는 팩은 부가 정보 팩이라고 부른다.

이 예에서는, GOP 내에는 1 장의 I 픽처를 포함하는 것이지만, 부가 정보는 그 I 픽처의 프레임을 촬상 신호로서 편입할 때의 촬영 시 설정 조건 등 촬영 시 정보가 된다.

그리고 이 예에서는, 부가 정보 팩 내의 부가 정보의 패킷도 프라이비트1ㆍ패킷의 형식이 된다. 또 이 예에서는, 그 부가 정보의 패킷에는, 대응하는 I 픽처의 화상 데이터 선두의 비디오 팩에 부가되는 타임 스탬프(PTS)와 동일 타임 스탬프(PTS)가 포함된다.

이 부가 정보 팩의 다중화 위치는 VOBU 내의 미리 정해진 위치로 된다. 정해진 위치의 예로서는, I 픽처의 압축 화상 데이터의 팩열의 안(I 픽처의 선두, 말미도 포함하는 것으로 한다)이 된다. 통상, I 픽처의 화상 데이터는 복수 개의 비디오 팩에 포함되게 되지만, 부가 정보의 팩은, 예를 들면, 그들 I 픽처의 복수 개 비디오 팩의 선두 비디오 팩의 앞 또는 말미 비디오 팩의 뒤를 다중화 위치의 예로서 들 수 있다.

또 부가 정보 팩의 다중화 위치의 예로서는, I 픽처의 복수 개 비디오 팩의선두나 말미가 아니고, I 픽처 데이터의 비디오 팩의 선두로부터 세어, 특정 순위 팩의 앞 또는 뒤라도 된다. 또한 VOBU 단위로 판독/기록이 실행되므로, I 픽처의 근방이 아니라도, 예를 들면, VOBU 단위의 최후미 위치에 부가 정보 팩을 다중화하도록 해도 된다. 또 부가 정보의 팩은 VOBU 내 중간의 미리 정해진 위치에 배치하도록 해도 된다.

단, 후술하는 바와 같이, 변속 재생 시에는 VOBU 내에서 I 픽처 부분만 추출하여 화상 재생하도록 하므로, 이상과 같이, I 픽처의 선두, 말미를 포함한 I 픽처 중의 미리 정해진 위치에 부가 정보 팩을 다중화함으로써, 이 VOBU 내의 I 픽처만의 추출 시, 부가 정보를 합쳐 추출하여 재생하는 것이 용이해진다.

도 4는 1 GOP분의 화상 데이터, 오디오 데이터 및 부가 정보에 대해 그들의 다중화 처리를 설명하기 위한 도면이다. 이 예에서는, 1 GOP는 15 프레임(15 장의 픽처)으로 구성되는 것으로 하는 동시에, I 픽처의 화상 데이터에 대한 촬영 시 정보가 부가 정보로서 다중화된다.

도 4 (A)는 버퍼(201, 204 및 207)에 입력되는 화상 데이터, 오디오 데이터 및 부가 정보의 스트림을 나타내는 것이다. 또 도 4 (B)는 멀티플렉스부(211)로부터의 MPEG-PS 포맷의 1 VOBU 내의 스트림 구조를 나타내고 있다.

도 4 (A)의 화상 데이터 스트림에서, B, I, P는 프레임 단위의 화상 데이터를 픽처 타입도 고려하여 나타낸 것이며, I는 I 픽처를, B는 B 픽처를, P는 P 픽처를 각각 나타내고 있다. 또 도 4 (A)의 오디오 스트림에서의 A는 각 화상 프레임에 대응하는 오디오 데이터를 나타내고 있다.

또 도 4 (A)의 부가 정보(ARI_DATA)는 전술한 바와 같이, 이 예에서는, 1 GOP분의 화상 데이터 중 I 픽처를 편입할 때에 있어서의 촬영 시 정보로 이루어지는 부가 정보를 나타내고 있다. 이 예의 경우, 이 부가 정보(ARI_DATA)는 1 GOP 기간 동안에는 바뀌지 않는 데이터이다.

도 4 (A)에 나타나 있는 화상 데이터는 전술한 바와 같이, 비디오 인코드부(202)에서, 픽처 순서의 정렬이 이루어진 후, 압축 부호화 및 가변 길이 부호화되어 멀티플렉스부(211)에 공급된다. 그리고 이 멀티플렉스부(211)에서, 각 픽처의 압축 화상 데이터는 도 4 (B)에 나타내는 바와 같이, 1 또는 복수 개의 비디오 픽처(V_PCK)로 되어 다중화된다. 이 때, 멀티플렉스부(211)에서는, 각 픽처의 화상 데이터에는, 재생 출력의 시간 관리 정보인 타임 스탬프(PTS)가 각 픽처의 선두가 포함되는 패킷의 헤더에 포함되도록 되어 있다.

그리고 도 4 (B)에서, 각 비디오 팩(V_PCK)의 4각 프레임 내의 I, B, P의 기호는 이 화상 팩 내의 압축 화상 데이터가 I 픽처, B 픽처, P 픽처 중 어느 픽처 타입의 화상 데이터인지를 나타내고 있다.

또 도 4 (A)에 나타나 있는 오디오 데이터는 전술한 바와 같이, 오디오 인코드부(205)에서 MPEG 오디오 압축된 후, 멀티플렉스부(211)에 공급되고, 이 멀티플렉스부(211)에서 소정의 데이터량마다의 오디오 팩(A_PCK)으로서, 도 4 (B)에 나타내는 바와 같이, 비디오 팩(V_PCK) 사이에 다중화된다.

멀티플렉스부(211)에서는, 각 오디오 데이터에 대해서도 재생 출력의 시간 관리 정보인 타임 스탬프(PTS)가 오디오 프레임마다 패킷의 헤더에 포함되도록 되어 있다. 그리고 하나의 패킷에 복수 프레임분이 포함되는 경우에는, 그 선두의 프레임에 대한 타임 스탬프(PTS)가 패킷 헤더에 삽입된다.

그리고 도 4 (A)에 나타내는 부가 정보(ARI_DATA)는 부가 정보 처리부(208)에서 전술한 바와 같은 신호 처리가 이루어진 후, 멀티플렉스부(211)에 공급되고, 이 멀티플렉스부(211)에서 1 GOP마다 1 개의 부가 정보 팩(ARI_PCK)이 형성된다. 그리고 이 부가 정보 팩(ARI_PCK)은 도 4 (B)에 나타내는 바와 같이, 이 예에서는, VOBU 내 I 픽처의 복수 개 화상 팩의 선두에 다중화된다.

전술한 바와 같이, 이 부가 정보 팩(ARI_PCK)에는 부가 정보(ARI_DATA)가 패킷화되어 포함되는 동시에, 그 패킷 헤더 내에는 동일 GOP 내 I 픽처의 선두 팩의 패킷에 포함되는 타임 스탬프(PTS)와 동일 타임 스탬프(PTS)가 포함되어 있다.

그리고 1 GOP의 데이타가 포함되는 VOBU의 선두 팩(NV_PCK)은 내비게이션 팩이라고 불려지는 것이며, 이것에는 데이터 서치 인포메이션(예를 들면, 점프 시에 어느 섹터까지 뛰는지를 지시하는 제어 정보) 등의 재생 관리 정보가 포함되어 있다. 도 4 (B)에 나타내는 바와 같이, 부가 정보 팩(ARI_PCK)은 내비게이션 팩(NV_PCK)의 바로 뒤에 다중화되게 된다.

[부가 정보 다중화의 제2 예]

이 제2 예는 DVD-Video Recording(DVD-VR) 포맷에 의한 기록 시의 경우이다. 이 DVD-VR 포맷에서도, VOBU를 구성하는 복수 개의 팩(PCK)(2048 바이트)으로 이루어지는 구조가 약간 상이할 뿐이며, 그 밖에는, 전술한 DVD-Video 포맷의 경우와 동일하다. 즉, 이 DVD-VR 포맷에서의 VOBU 내의 팩 구조를 도 5에 나타낸다.

즉, DVD-VR 포맷에서의 VOBU의 선두에는, RDI 팩(RDI_PCK)(RDI ; Real-time Data Information)이 배치되고, 그 뒤에 비디오 팩(V_PCK) 및 오디오 팩(A_PCK)이 배치된다.

그리고 선두의 팩(RDI_PCK)은 도 5에 나타내는 바와 같이, 팩 헤더, 시스템 헤더, 및 RDI 패킷으로 구성된다. 팩 헤더는 도 3의 경우와 동일하다. 시스템 헤더에는, 예를 들면, 비트 레이트, 비디오 채널수나 오디오 채널수 등의 속성을 식별하기 위한 데이터나, MPEG 시스템을 제어하기 위한 지령, 예를 들면, 디ㆍ멀티플렉스부(후술하는 재생계에서의 다중화 데이터를 분해하는 수단)의 버퍼 영역의 크기, 사이즈 등의 제어 데이터가 포함되어 있다.

시스템 헤더의 뒤에는, 예를 들면, 2003 바이트분으로 구성되는 RDI 패킷이 배치된다. RDI 패킷은 패킷 헤더와, 서브스트림 ID와, RDIㆍ데이터로 이루어진다. 서브스트림 ID는 이 패킷이 RDI 패킷인 것을 인식시키는 식별자(識別子)이다.

RDIㆍ데이터로서는, VOBU의 기록 시간 등을 포함하는 16 바이트분의 RDI_GI(Real-time Data Information General Information)로 불려지는 데이터와, 디스플레이의 제어 정보 등을 포함하는 8 바이트분의 DCI_CCI(Display Control Information and Copy Control Information)로 불려지는 데이터가 정의되어 있다. 그리고 2003 바이트의 RDIㆍ데이터 영역의 나머지 1979 바이트분의 영역은 필드명 MNFI(Manufacturer's Information)로서 개발자(제조자)에게 개방되어 있다.

제2 예에서는, 이 필드명 MNFI의 영역에 전술한 예와 동일하게, 이 RDI 팩이 포함되는 VOBU 내 I 픽처의 화상 데이터에 대한 부가 정보(ARI_DATA)를 배치하도록한다.

RDI 팩은 VOBU 단위의 데이터를 판독할 때, 반드시 판독할 필요가 있는 팩이며, 이 RDI 팩 내에 부가 정보를 포함시켜 기록하도록 함으로써, 이 제2 예의 경우에도, 제1 예와 동일하게, 정상 속도 재생의 경우에 한정되지 않고, 변속(고속) 재생의 경우에도 부가 정보를 화상 데이터 등과 함께 추출하여 재생하는 것이 용이하다.

[부가 정보(ARI_DATA)의 예]

이상 설명한 DVD-Video 포맷인 경우의 ARI_PCK 내의 ARI_DATA 및 DVD-Video Recording 포맷인 경우의 RDI 팩 내 ARI_DATA의 일례를 도 6에 나타낸다.

도 6에서, RBP(Reference Byte Position)는 패킷 내에서의 상대 바이트 위치를 나타내고, 부가 정보(ARI_DATA)의 선두를 「0」으로 하고 있다.

부가 정보(ARI_DATA)는 도 6에 나타내는 바와 같이, 추가 기록 식별자, 애플리케이션 정보, 기록 시간 정보, 카메라 정보로 이루어진다.

추가 기록 식별자는 패킷 내 데이터가 부가 정보(추가 기록 정보)인 것을 인식시키기 위한 식별자이며, 추가 기록 정보 데이터 식별자와 그 버전 번호가 기록된다.

애플리케이션 정보에는, 제품의 제조원인 공급자명, 제품명인 프로덕트명, 애플리케이션 ID, 개발자용 데이터(Manufacturer's Information Data)가 포함된다.

애플리케이션 ID는 기록 시의 기록 방식을 식별하기 위한 정보이며, 이 예에서는 「00h(h는 16진 표시인 것을 나타낸다. 이하, 동일)」는 DVD-Video 포맷에서의 기록인 것을 나타내고, 「01h」는 DVD-Video Recording 포맷에서의 기록인 것을 나타내는 것으로 되어 있다.

개발자용 데이터는 개발자가 자유롭게 사용할 수 있는 영역이며, 예를 들면 개발 시의 디버그(debug)용 데이터가 기록된다.

다음에, 기록 시간 정보로서는, 이 부가 정보가 포함되는 VOBU에 대한 부가 정보(ARI_DATA) 기록 시의 타임 존(VOBU_LCL_TM_ZONE ; 필드명. 이하 동일)과, 부가 정보(ARI_DATA)의 기록 시간(VOBU_REC_TM)이 기록된다.

부가 정보(ARI_DATA)의 기록 시간(VOBU_REC_TM)은, 이 예에서는, I 픽처 프레임의 촬영 시간이 된다. 이 예에서는, 기록 시간은 년, 월, 일, 시, 분, 초로 기술된다.

부가 정보(ARI_DATA) 기록 시의 타임 존(VOBU_LCL_TM_ZONE)은 부가 정보(ARI_DATA)의 기록 시간(VOBU_REC_TM)에 대한 타임 존을 기록한다. 여기에서, 타임 존이란 사용자가 기기에 설정한 UTC(Coordinnated Universal Time)로부터의 오프셋 시간이다. 즉, 기록 장치를 사용하는 나라의 시각(로컬 타임)에 대응한 시차이다.

부가 정보(ARI_DATA)의 기록 시간(VOBU_REC_TM)으로서, 유니버설 타임(전세계에서 시각을 기록할 때 사용되는 공식적인 시각)을 사용할 수도 있고, 그 경우에는, 부가 정보(ARI_DATA) 기록 시의 타임 존(VOBU_LCL_TM_ZONE)은 제로로 설정된다.

다음에, 카메라 정보로서 촬영 시 설정 조건 등의 정보가 기록된다. 도 6에나타내는 바와 같이, 카메라 정보로서는 F 넘버, 노출 시간, 노출 프로그램, 노출 프로그램 확장 정보, 노광 보정값, AGC 이득값, 렌즈 최소 F값, 플래시, 렌즈 초점 거리, 개별 화상 처리, 백 밸런스, 촬영 신 타입, 포커스 모드, 피사체 거리, 손 흔들림 보정, 디지털 줌 배율 등의 정보가 포함되어 있다.

노출 프로그램(EXP_PRG)에는, 촬영 시에 카메라가 사용한 노출 프로그램의 클래스가 기록된다. 노출 프로그램의 클래스로서는, 지정 없음(Not Specified), 매뉴얼, 정상 프로그램, 프리셋의 4 종이 된다.

노출 프로그램 확장 정보(EXP_PRG_EX)에는, 촬영 시에 카메라가 사용한 노출 프로그램의 클래스가 프리셋인 경우의 상세 정보를 기록한다. 노출 프로그램의 클래스가 프리셋이 아닌 경우에는, 지정 없음(Not Specified)으로 된다. 노출 프로그램의 클래스가 프리셋으로 된 경우에는, 이득 우선, 셔터 우선, 노출 우선 중 어느 하나가 설정된다.

AGC 이득값에는 신호 처리계에서의 AGC 이득의 값이 기록된다. 또 플래시(FLS)에는 플래시 발광, 비발광, 적목(赤目) 방지 발광, 강제 발광 등 촬영 시의 스트로보 상태를 기록한다.

개별 화상 처리(CST_REN)에는, 화상 데이터에 대해 출력을 고려한 글자 넣기(lettering) 등 통상과 상이한 화상 처리가 실시되고 있는 것이 기록된다.

백 밸런스(WHT_BAL)에는, 촬영 시에 설정된 백 밸랜스의 조정 모드가 기록된다. 백 밸런스의 조정 모드로서는, 「자동」, 「홀드(HOLD)」, 「매뉴얼」, 「양초」, 「백열등」, 「낮은 색온도의 형광등」, 「높은 색온도의 형광등」, 「일광」, 「흐림」, 「지정 없음」 등이 설정 가능하게 되어 있다.

촬영 신 타입(SCN_CAP_TYP)에는, 설정된 촬영 시의 피사체 종별이 기록된다. 이 예에서는, 피사체 종별로서는 「표준」, 「풍경화」, 「포트 레이트」, 「야경」, 「지정 없음」 이 설정 가능하게 되어 있다.

포커스 모드(FCS_MOD)에는 「자동 포커스」, 「매뉴얼 포커스」, 「지정 없음」 등 촬영 시에 설정된 포커스 모드가 기록된다.

손 흔들림 보정(IMG_STB)에는 「손 흔들림 보정 온」 또는 「손 흔들림 보정 오프」, 「지정 없음」 등 손 흔들림 보정 기능이 작용하고 있는지 여부가 기록된다.

디지털 줌 배율(DIG_ZOM)에는 촬영 시 사용된 디지털 줌 배율이 기록된다. 디지털 줌이 사용되지 않았을 때에는, 「00h」가 기록된다.

위치 정보(GPS_INFO)에는 GPS 수신기부(60)로부터의(또는 통신 수단을 통해 취득된) 위치 정보가 기록된다.

손 흔들림 보정 한계(STB_LIM)에는 디지털 카메라의 손 흔들림이 보정 한계를 초과하고 있는 경우에, 그것을 나타내는 플랙그가 기록된다. 실제로 디지털 카메라의 손 흔들림이 보정 한계를 초과하고 있는 경우에는, 이 플래그로서 「FF(16진 표시)」가 기록된다.

그리고 부가 정보(ARI_DATA)의 필드 내용 변경에 따른 추가 기록 정보 버전(ARI_DAT_VER) 변경 규칙의 예를 이하에 나타낸다.

(1) 카메라 정보 필드의 내용만 추가ㆍ변경하는 경우에는, 버전 번호의 소수둘째 자리를 증분(增分)한다.

(2) 기록 시간 정보 이후의 필드 내용을 추가ㆍ변경하는 경우에는, 버전 번호의 소수 첫째 자리를 증분한다.

(3) 부가 정보(ARI_DATA) 전체의 내용을 추가ㆍ변경하여, 변경 전 데이터와의 호환성을 취할 수 없게 되는 경우에는, 버전 번호의 정수(整數)값을 증분한다.

[데이터 분리 및 데이터 압축 해제 처리에 대해]

다음에, DSP(21)에서의 화상 데이터, 오디오 데이터 및 부가 정보의 분리 처리 및 화상 데이터와 오디오 데이터의 압축 해제 처리에 대해 도 7을 참조해 설명한다.

기록/판독부(23)에 의해 DVD(40)로부터 VOBU 단위로 판독된 데이터는 디ㆍ멀티플렉스부(221)에서 화상 데이터 팩과, 오디오 데이터 팩과, 부가 정보 팩으로 분리된다.

디ㆍ멀티플렉스부(221)에서는, 각각의 팩으로부터 팩 헤더 및 패킷 헤더를 분리하고, 이들 헤더 정보를 제어부(220)에 공급한다. 제어부(220)에서는 헤더 정보를 해석하여 타임 스탬프(PTS 및 DTS)를 추출하고, 화상 데이터, 오디오 데이터 및 부가 정보의 디코드 처리 및 재생 출력을 제어한다.

또 디ㆍ멀티플렉스부(221)는, 분리한 화상 데이터 팩으로부터 추출한 압축 화상 데이터는 버퍼(222)를 통해 비디오 디코더부(225)에 공급하고, 분리한 오디오 데이터 팩으로부터 추출한 압축 오디오 데이터는 버퍼(223)를 통해 오디오 디코더부(226)에 공급하고, 분리한 부가 정보 팩으로부터 추출한 부가 정보는 버퍼(224)를 통해 부가 정보 디코더부(227)에 공급한다.

그리고 비디오 디코더부(225)에서는, 제어부(220)로부터의 제어에 따라, 타임 스탬프(DTS)에 따른 순서로, 화상 데이터의 압축 해제 처리를 실행하고 프레임 단위의 화상 데이터를 복원하여 버퍼(228)에 출력한다. 그리고 제어부(220)는 이 버퍼(228)로부터 화상 데이터 팩에 포함되어 있던 타임 스탬프(PTS)에 따른 순서로, 프레임 단위의 화상 데이터를 판독하여 비디오 신호 처리부(231)에 공급하도록 제어한다.

또 오디오 디코더부(226)에서는, 제어부(220)로부터의 제어에 따라, 차례로 오디오 데이터의 압축 해제 처리를 실행하고 오디오 데이터를 복원하여 버퍼(229)에 출력한다. 그리고 제어부(220)는 이 버퍼(229)로부터 오디오 데이터 버퍼에 포함되어 있던 타임 스탬프(PTS)에 따른 순서로, 오디오 데이터를 판독하여 오디오 신호 처리부(232)에 공급하도록 제어한다.

또한 부가 정보 디코드(227)에서는, 제어부(220)로부터의 제어에 따라, 1 GOP분의 화상 데이터에 대한 부가 정보(ARI_DATA)를 재생하여, 버퍼(230)에 출력한다. 이 경우, 부가 정보 데이터부(227)에서는, 부가 정보는 화상 데이터의 제어용 정보(Av)와, 촬영 년월일, 시간이나 F 넘버, 렌즈 초점 거리 등의 표시용 정보(Ad)를 생성하여 각각 버퍼(230)에 출력한다.

그리고 제어부(220)는 이 버퍼(230)로부터 부가 정보 팩에 포함되어 있던 타임 스탬프(PTS)에 따른 타이밍으로, 1 GOP분의 화상 데이터에 대한 부가 정보를 판독하지만, 그 중 화상 데이터의 제어용 정보(Av)는 비디오 신호 처리부(231)에, 표시용 정보(Ad)는 OSD(On Screen Display) 회로(233)에 각각 공급하도록 제어한다.

그리고 비디오 신호 처리부(231)에서는, 화상 데이터의 제어용 정보(Av)에 따른 화상 데이터 처리가 이루어진다. 예를 들면, 촬영 시의 오토 백 밸런스 조정에 따른 화상 데이터 제어 등이 실행된다.

표시용 정보(Ad)는 촬영 년월일, 촬영 시각, F 넘버, 렌즈 초점 거리 등의 표시 정보이며, OSD 회로(233)를 통해 합성부(234)에 공급되어 비디오 신호 처리부(231)로부터의 화상 데이터에 합성된다. 이 합성부(234)로부터의 화상 데이터가 비디오/오디오 출력 처리부(24)를 통해 제어부(30)에 공급되어, LCD(32) 화면에 표시된다.

전술한 바와 같이, 이 예에서는, 부가 정보 팩은 I 픽처와 동일 타임 스탬프(PTS)가 부가되고 있으므로, 부가 정보의 표시용 정보(Ad)는 대응하는 I 픽처의 화상으로부터 1 GOP 화상의 모든 픽처에 대해 합성되어 LCD(32)의 화면에 표시된다.

이상과 같이 하여, 본 실시예에 의하면, 촬영된 화상의 판독/기록 단위인 GOP마다 부가 정보가 다중화됨으로써, 이 부가 정보에 따라 상기 판독/기록 단위의 화상 정보가 제어되는 동시에, 이 화상 정보의 표시 화면에 촬영 일시 정보 등의 필요한 부가 정보 표시가 이루어지는 것이다.

그리고 이상의 실시예는 부가 정보에 포함되는 촬영 시간의 정보로서는, VOBU, 즉, 1 GOP에 대한 촬영 시간의 정보로 했지만, 예를 들면, I 픽처에 대한 촬영 시간의 정보로부터 그것에 계속되는 B 픽처, P 픽처의 각 프레임 촬영 시간을계산하여 구하고, 그 각 프레임 단위의 촬영 시간을 표시하거나, 편집 시의 관리 정보로서 사용하거나 할 수도 있다.

[변속 재생의 설명]

전술한 바와 같이 구성된 촬상 장치 제어부(30)의 ROM(303)은 본 실시예에서는, 변속 재생을 실현하기 위한 프로그램을 기억하고 있다. 이하, 이 변속 재생에대해 설명한다.

본 실시예의 변속 재생에서는, VOBU 단위 정보 중의 I 픽처만 재생 화상으로 함으로써 실현한다. 즉, 지금 정상 재생 속도를 1 배속으로 했을 때, 임의의 N 배의 속도로 재생하는 N 배속의 재생을 하는 경우에는, 본 실시예에서는, 1 VOBU당에 대해 I 픽처의 화상 프레임만 15/N 회 반복하여 표시하도록 한다. 그리고 이 변속 재생 시에도, 표시하는 I 픽처의 화면에, 대응하는 부가 정보에 의한 제어 및 대응하는 부가 정보의 표시를 실행하도록 한다.

도 8은 본 실시예에서의 변속 재생 구조를 설명하기 위한 도면이다. 전술한 바와 같이, 광 디스크에 대한 판독/기록 정보 단위는 VOBU이므로, 이 변속 재생 시에도 광 디스크로부터는 VOBU 단위로 정보는 판독되지만, 도 8 (A)에 나타내는 바와 같이, 이 변속 재생 시에 디코드하는 화상 데이터는 VOBU 중의 I 픽처의 화상 데이터만으로 한다. 그리고 본 실시예에서는, I 픽처에 대한 부가 정보도 이 변속 재생 시의 디코드 대상으로 한다.

따라서 본 실시예에서의 변속 재생 시에는, 광 디스크로부터의 VOBU 단위 정보 중의, 도 8 (A)에 나타내는 바와 같이, 부가 정보 팩(ARI_PCK) 및 I 픽처의 화상 데이터가 포함되는 복수 개의 비디오 팩(V_PCK)의 범위를 디코드 데이터 추출 범위로 한다. 즉, 본 실시예에서의 변속 재생 시의 디코드 데이터 추출 범위에는, 부가 정보 팩이 반드시 포함되도록 한다.

그리고 도 8 (B)에서 망점(網點)을 붙여 나타내는 바와 같이, 원래의 비디오 스트림 데이터 중, I 픽처만 전술한 바와 같이, 배속(倍速)값(N)에 따른 회수 반복해 표시하는 동시에, 부가 정보(ARI_DATA)를 디코드하여 촬영 시간이나 F 넘버 등의 표시 정보를 이 I 픽처에 겹쳐 표시하고, 또 부가 정보(ARI_DATA)로부터 생성된 제어 정보에 의해, 이 I 픽처의 화상 데이터 제어를 실행하도록 한다.

예를 들면, 3 배속 재생을 실행한 경우의 LCD 표시 화면의 변화를 도 9에, 5 배속 재생을 실행하는 경우의 LCD 표시 화면의 변화를 도 10에, 15 배속 재생을 실행하는 경우의 LCD 표시 화면의 변화를 도 11에 나타낸다.

즉, 3 배속 재생을 실행하는 경우에는, 도 9에 나타내는 바와 같이, VOBU 단위 정보 중에서 추출하여 디크드한 I 픽처를 15/3=5 회(5 프레임)씩 반복하여 재생하는 것을 VOBU 단위로 반복한다. 그리고 각 I 픽처에는, 도 9에 나타내는 바와 같이, 대응하는 부가 정보의 표시 정보를 중첩 표시하도록 한다.

또 5 배속 재생을 실행하는 경우에는, 도 10에 나타내는 바와 같이, VOBU 단위 정보 중에서 추출하여 디코드한 I 픽처를 15/5=3 회(3 프레임)씩 반복하여 재생하는 것을 VOBU 단위로 반복한다. 그리고 각 I 픽처에는, 도 10에 나타내는 바와 같이, 대응하는 부가 정보의 표시 정보를 중첩 표시하도록 한다.

또한 15 배속 재생을 실행하는 경우에는, 도 11에 나타내는 바와 같이, VOBU단위 정보 중에서 추출하여 디코드 및 재생한 I 픽처를 15/15=1 회(1 프레임)씩 재생하는 것을 VOBU 단위로 반복한다. 그리고 각 I 픽처에는, 도 11에 나타내는 바와 같이, 대응하는 부가 정보의 표시 정보를 중첩 표시하도록 한다.

다음에, 이상 설명한 변속 재생 시에 있어서의 제어부(30)에서의 처리에 대해 설명한다. 도 12는 LCD 컨트롤러(306)에서의 표시 버퍼 메모리의 구성을 설명하기 위한 도면이다. 이 예에서의 LCD 컨트롤러(306)에서의 표시 버퍼 메모리(3060)는 제1 표시 버퍼(3061) 및 제2 표시 버퍼(3062)의, 1 화면분의 표시 버퍼를 구비한다. 표시 버퍼 메모리(3060)의 입력측 및 출력측에는 스위치 회로(3063 및 3064)가 설치된다.

그리고 DSP(21)로부터의 부가 정보가 합성된 합성 화상 신호는 D/A 변환기(3065)에 의해 아날로그 화상 데이터로 변환된 후, 스위치 회로(3063)에 의해, 제1 표시 버퍼(3061)와 제2 표시 버퍼(3062) 중 어느 하나에 선택적으로 기록된다.

또 스위치 회로(3064)에 의해 선택된, 제1 표시 버퍼(3061)와 제2 표시 버퍼(3062) 중 어느 하나로부터 판독된 합성 화상 신호는 LCD(32)에 공급되어, 그 화면에 표시되게 된다.

그리고 이 경우, 표시 버퍼 메모리(3060)의 입력측 및 출력측에 설치되는 스위치 회로(3063 및 3064)가 CPU(301)에 의해 스위칭 제어됨으로써, 표시 버퍼 메모리(3060)의 2개 표시 버퍼(3061 및 3062) 중 한쪽으로부터 화상 데이터가 판독될 때, 다른 쪽으로 화상 데이터가 기록되도록 구성되어 있다.

다음에, 변속 재생 시의 제어부(30)의 처리 동작을 도 13의 플로 차트를 참조하면서 설명한다.

변속 재생을 실행하려고 하는 경우에는, 사용자는 조작 입력부(31)를 통해 N 배속의 N 값을 설정하는 동시에, 변속 재생의 개시 지시를 한다. N 배속의 N 값의 설정은, 예를 들면, 미리 정해진 몇개인가의 N 값으로부터 선택하도록 하는 방법, 직접 N 값을 입력하는 방법, 회전 손잡이를 회전함으로써 설정하는 방법 어느 것이라도 된다. N 값은 정수값이 아니고, 소수값이 되도록 해도 된다.

제어부(30)는 전술한 바와 같은 조작 입력부(31)를 통한 사용자에 의한 변속 재생의 N 배속의 N 값 설정 조작 및 변속 재생 개시 지시에 따라, 도 13의 플로 차트를 스타트시킨다.

먼저, 상기 N 배속의 N 값을 인식한다(스텝 S101). 다음에, 광 디스크(40)로부터 VOBU 단위로 데이터를 편입한다(스텝 S102). 다음에, VOBU 단위 데이터 중의, 변속 재생 시의 디코드 데이터 추출 범위의 데이터, 즉, 부가 정보 팩(ARI_PCK) 및 I 픽처의 화상 데이터를 포함하는 복수 개의 비디오 팩(V_PCK)을 추출한다(스텝 S103).

다음에, 추출한 디코드 데이터 추출 범위의 데이터에 대해 부가 정보 팩(ARI_PCK)과 I 픽처의 화상 데이터를 포함하는 복수의 비디오 팩(V_PCK)을 분리하여, 부가 정보 팩(ARI_PCK)의 데이터는 부가 정보 디코더부(227)에 공급하고, 비디오 팩(V_PCK)은 비디오 디코더부(225)에 공급한다(스텝 S104).

그리고 비디오 디코더부(225)에서 I 픽처의 화상 데이터를 압축 해제하여 화상 데이터를 복원하는 동시에, 부가 정보 디코더부(227)에서 부가 정보를 디코드하여 재생한다(스텝 S105). 다음에, 합성부(234)에서 복원된 I 픽처의 화상 데이터에, 전술한 바와 같이 재생된 부가 정보로부터 생성된 부가 정보 표시용 데이터를 합성하고, 그 합성한 화상 신호를 D/A 변환기(3065)를 통해 아날로그 신호로 변환한 후에, 표시용 버퍼 메모리(3060)의 제1 및 제2 표시 버퍼(3061 및 3062) 중의, 화상 프레임의 기록측 표시 버퍼에 기록한다(스텝 S106).

이 때, 표시용 버퍼 메모리(3060)의 제1 및 제2 표시 버퍼(3061 및 3062) 중, 상기 화상 프레임의 기록측 표시 버퍼가 아닌 쪽의 표시 버퍼(표시 프레임 출력측)로부터는 전에 기록된 화상 데이터가 상기 기록과 병행하여 판독되고, 그 재생 화상이 LCD(32) 화면에 표시되고 있다.

그리고, 제어부(30)의 CPU(301)는 표시 프레임 출력측의 표시 버퍼로부터의 I 픽처에 부가 정보가 합성된 화상 데이터가 15/N 프레임분 반복하여 판독되어 재생되었는지 여부를 판별한다(스텝 S107).

이 스텝 S107에서, 표시 프레임 출력측의 표시 버퍼로부터의 I 픽처에 부가 정보가 합성된 화상 데이터가 아직 상기 15/N 프레임분 반복하여 판독되고 있지 않다고 판별했을 때에는, 조작 입력부(31)를 통한 조작 입력에 의해 변속 재생의 종료 지시가 있었는지 여부를 판별하고(스텝 S110), 이 변속 재생의 처리 루틴을 종료한다. 변속 재생 종료 지시가 있었을 때에는, 이 변속 재생의 처리 루틴을 종료한다.

또 스텝 S110에서, 변속 재생 종료 지시가 없다고 판별했을 때에는, 표시용버퍼의 표시 프레임 출력측의 표시 버퍼로부터의 I 픽처에 부가 정보가 합성된 화상 데이터의 판독을 계속하고(스텝 S111), 스텝 S107로 되돌아간다.

그리고 스텝 S107에서, 표시 프레임 출력측의 표시 버퍼로부터의 I 픽처에 부가 정보가 합성된 화상 데이터가 상기 15/N 프레임분 반복하여 판독되어 재생되었다고 판별했을 때에는, 스위치 회로(3063 및 3064)를 스위칭하여, 표시용 버퍼 메모리(3060)의 제1 및 제2 표시 버퍼(3061 및 3062) 사이에서, 화상 프레임 기록측과, 표시 프레임 출력측을 스위칭한다(스텝 S108).

이 스위칭에 의해, 그때까지 다음에 표시해야 할 VOBU로부터 디코드된 I 픽처에 부가 정보가 합성된 화상 데이터가 기록된 표시 버퍼가 화상 프레임 기록측으로부터 표시 프레임 출력측으로 스위칭되어, 그 재생 화상이 LCD(32) 화면에 표시되게 된다.

스텝 S108의 다음에는, 스텝 S109로 진행하여, 제어부(30)는 다음의 VOBU 단위의 데이터를 광 디스크(40)로부터 편입하도록 제어한다. 그리고 스텝 S103으로 되돌아가 전술한 동작을 반복한다. 이에 따라, 전술한 도 9 내지 도 11에 예시한 바와 같은 변속 재생이 이루어진다.

그리고 스위치 회로(3064)로부터의 표시 화상 데이터와 동일 화상 데이터가 화상 신호 출력 단자(26V)로부터 모니터 수상기에 공급됨으로써, 모니터 수상기에도 도 9 내지 도 11에 나타낸 것과 동일한 변속 재생 시의 재생 화상이 표시된다.

그리고 재생하려고 하는 I 픽처가 이 I 픽처에 대응하는 부가 정보(ARI_DATA)의 손 흔들림 보정 한계 플래그가 서있는([FF]로 되어 있는) 것인경우에는, 그 I 픽처는 선명한 화상으로 되어 있지 않을 가능성이 높으므로, 그 I 픽처는 재생하지 않고, 다음의 I 픽처까지 스킵하도록 해도 된다.

[그 밖의 변형예]

그리고 전술한 실시예에서는, 부가 정보는 I 픽처에 대응하여 작성하고, I 픽처와 동일 타임 스탬프(PTS)를 부가 정보 팩 내의 프라이비트1ㆍ패킷 형성의 패킷 내에 삽입했지만, 타임 스탬프(PTS)는 부가 정보 팩에는 부가하지 않도록 해도 된다.

또 부가 정보는 GOP 단위의 화상 데이터에 대한 것으로 할 수 있으므로, 특히, I 픽처에 대응하는 것으로 할 필요는 없다. 그러므로, 부가 정보는 1 GOP 내 소정 위치의 픽처, 예를 들면 중앙 위치의 픽처(B 픽처라도, P 픽처라도 된다)에 대한 것으로 하도록 해도 된다. 그 경우에는, 부가 정보 팩 내의 프라이비트1ㆍ패킷 형식의 패킷 내에는 타임 스탬프(PTS)는 부가하지 않는다.

또 이상의 실시예에서는, 부가 정보 팩(ARI_PCK) 내의 부가 정보(ARI_DATA)를 포함하는 패킷은 프라이비트1ㆍ패킷 형식이 아니고, 도 14 (C)에 나타내는 바와 같은 프라이비트1ㆍ패킷도 사용 가능하다.

그리고 본 발명에 의한 기록 방법 및 재생 방법은 전술한 촬상 장치에만 적용되는 경우에 한정되는 것이 아니고, 화상 데이터나 오디오 데이터를 압축하여 기록하는 여러 가지의 전자 기기에 적용 가능한 것은 물론이다. 그 경우에, 압축 방식은 MPEG 방식에 한정되는 것이 아닌 것은 물론이다.

그리고 기록 매체는 광 디스크에 한정되는 것이 아니고, 하드 디스크 등의자기 기록 매체나 카드형 메모리 등의 반도체 기록 매체라도 된다.

또 전술한 실시예에서는, 부가 정보로부터 형성하는 제어용 정보로서는, 화상 데이터의 제어용 신호만으로 했지만, 1 GOP분의 오디오 데이터에 대해서도 부가 정보를 형성하고, 그 오디오 데이터에 관한 부가 정보로부터 오디오 데이터의 제어용 신호를 형성하여 오디오 신호 처리부(232)에서 오디오 데이터의 제어를 할 수 있도록 구성할 수도 있다.

예를 들면, 마이크로폰(15)으로서, 내장 마이크로폰을 사용했지만, 외부 마이크로폰을 사용하거나 함으로써, AGC 특성이 바뀌어 오디오 데이터가 기록되도록 하는 동시에, 내장 마이크로폰을 사용했는지 외부 마이크로폰을 사용했는지를 나타내는 정보를 부가 정보(ARI_DATA)에 포함시키도록 한다.

그리고 재생 시에는, 그 부가 정보를 사용하여 오디오 데이터에 대한 제어 신호를 형성하고, 그 제어 신호에 의해 오디오 신호 처리부(232)에서는, 내장 마이크로폰으로부터의 음성인지, 또는 외부 마이크로폰으로부터의 음성인지에 따른 오디오 데이터 제어 처리를 실행하도록 할 수 있다.

이상 설명한 바와 같이, 본 발명에 의하면, 판독/기록 단위마다 화상 정보를 재생하는 것과 동시에, 부가 정보를 추출하여 재생할 수 있고, 이 부가 정보를 편집이나 화상 검색에 이용하는 것이 가능하게 되어 매우 편리하다.

또 판독/기록 단위 정보 중의 복호 재생 단위 내 부호화 화상 정보(MPEG인 경우의 프레임 내 부호화 화상 정보, 즉 I 픽처)만 재생함으로써, 변속 재생하는경우에도 부가 정보를 재생하여 복호 재생 단위 내 부호화 화상 정보에 의한 화상에, 부가 정보를 표시할 수도 있다. 이 때문에, 예를 들면, 부가 정보로서 촬영 일시의 정보를 기록한 경우에는, 그 촬영 일시의 정보를 편리하게 고속 재생하여 원하는 화상 위치를 용이하게 검색할 수 있게 된다.

Claims (30)

1. 압축된 화상 정보의, 상기 기록 매체에 대한 기록 및 판독 단위인 판독/기록 단위 정보에는, 상기 화상 정보의 1 프레임 또는 1 필드로 이루어지는 복호(復號) 재생 단위 정보를 복수 단위분 포함하는 동시에, 적어도 1 개의 상기 복호 재생 단위 정보는 상기 복호 재생 단위 내의 화상 정보만을 사용하여 압축 부호화한 것으로 하는 화상 정보를 데이터 압축하여 기록 매체에 기록하는 방법에 있어서,

   상기 판독/기록 단위 정보 내에, 상기 판독/기록 단위 내 복수 단위분의 상기 복호 재생 단위 정보에 대한 부가 정보를, 상기 압축된 화상 정보와 분리하여 추출 가능하게 다중화하여 기록하는

   것을 특징으로 하는 기록 방법.
2. 제1항에 있어서,

   상기 판독/기록 단위 정보는 소정 데이터량마다 블록화된 복수 개의 블록으로 구성되며,

   상기 부가 정보는 1 개 또는 복수 개의 상기 블록에 의해 구성되는 것을 특징으로 하는 기록 방법.
3. 제2항에 있어서,

   상기 부가 정보의 블록을 상기 판독/기록 단위 내의 미리 정해진 블록 위치에 다중화하여 상기 기록 매체에 기록하는 것을 특징으로 하는 기록 방법.
4. 제2항에 있어서,

   상기 부가 정보의 블록을 상기 복호 재생 단위 내의 화상 정보만을 사용하여 압축 부호화된 압축 화상 정보를 포함하는 블록군(群)의 직전 또는 직후의 블록 위치에 다중화하여 상기 기록 매체에 기록하는 것을 특징으로 하는 기록 방법.
5. 제1항에 있어서,

   상기 부가 정보는 상기 화상 정보의 취득 시간에 관한 정보를 적어도 포함하는 것을 특징으로 하는 기록 방법.
6. 제1항에 있어서,

   상기 부가 정보는 상기 화상 정보의 취득 조건에 관한 정보를 포함하는 것을 특징으로 하는 기록 방법.
7. 화상 정보의 1 프레임 또는 1 필드로 이루어지는 복호 재생 단위 정보마다, 상기 복호 재생 단위 내의 화상 정보만을 사용한 압축 부호화, 및 상기 복호 재생 단위 화상 정보의 전 및/또는 후의 복호 재생 단위 화상 정보의 상관(相關)을 이용한 압축 부호화를 실행하는 데이터 압축 수단과,

   상기 화상 정보에 대한 부가 정보를 생성하는 부가 정보 생성 수단과,

   상기 데이터 압축 수단으로 압축된 상기 복호 재생 단위 정보의 복수 단위분을 기록 매체에 대한 기록 및 판독 단위인 판독/기록 단위로 하고, 상기 판독/기록 단위 내에는 상기 복호 재생 단위 내의 화상 정보만을 사용하여 압축 부호화한 상기 복호 재생 단위 정보를 적어도 1 개 포함하도록 하는 동시에, 상기 부가 정보 생성 수단으로부터 상기 판독/기록 단위 내 복수 단위분의 상기 복호 재생 단위 정보에 대한 부가 정보를, 상기 압축된 화상 정보와 분리하여 추출 가능하게 다중화하여 기록하는 기록 제어 수단

   을 구비하는 것을 특징으로 하는 기록 장치.
8. 제7항에 있어서,

   상기 판독/기록 단위 정보는 소정 데이터량마다 블록화된 복수 개의 블록으로 구성되며,

   상기 부가 정보는 1 개 또는 복수 개의 상기 블록에 의해 구성되는 것을 특징으로 하는 기록 장치.
9. 제8항에 있어서,

   상기 기록 제어 수단은 상기 부가 정보의 블록을 상기 판독/기록 단위 내의 미리 정해진 블록 위치에 다중화하여 상기 기록 매체에 기록하는 것을 특징으로 하는 기록 장치.
10. 제8항에 있어서,

    상기 기록 제어 수단은 상기 부가 정보의 블록을 상기 복호 재생 단위 내의 화상 정보만을 사용하여 압축 부호화된 압축 화상 정보를 포함하는 블록군의 직전 또는 직후의 블록 위치에 다중화하여 상기 기록 매체에 기록하는 것을 특징으로 하는 기록 장치.
11. 제7항에 있어서,

    상기 부가 정보는 상기 화상 정보의 취득 시간에 관한 정보를 적어도 포함하는 것을 특징으로 하는 기록 장치.
12. 제7항에 있어서,

    상기 부가 정보는 상기 화상 정보의 취득 조건에 관한 정보를 포함하는 것을 특징으로 하는 기록 장치.
13. 화상 정보가 데이터 압축되어 기록되는 동시에, 상기 압축된 화상 정보의 기록 및 판독 단위인 판독/기록 단위 정보에는, 상기 화상 정보의 1 프레임 또는 1 필드로 이루어지는 복호 재생 단위 정보를 복수 단위분 포함하는 동시에, 적어도 1 개의 상기 복호 재생 단위 정보는 상기 복호 재생 단위 내의 화상 정보만이 사용되어 압축 부호화된 것이 기록되는 기록 매체로서,

    상기 판독/기록 단위 정보 내에, 상기 판독/기록 단위 내 복수 단위분의 상기 복호 재생 단위 정보에 대한 부가 정보가, 상기 압축된 화상 정보와 분리되어 추출 가능하게 다중화되어 기록되는

    것을 특징으로 하는 기록 매체.
14. 제13항에 있어서,

    상기 판독/기록 단위 정보는 소정의 데이터량마다 블록화된 복수 개의 블록으로 구성되며,

    상기 부가 정보는 1 개 또는 복수 개의 상기 블록에 의해 구성되는 것을 특징으로 하는 기록 매체.
15. 제14항에 있어서,

    상기 부가 정보의 블록은 상기 판독/기록 단위 내의 미리 정해진 블록 위치에 다중화되어 기록되는 것을 특징으로 하는 기록 매체.
16. 제14항에 있어서,

    상기 부가 정보의 블록은 상기 복호 재생 단위 내의 화상 정보만을 사용하여 압축 부호화된 압축 화상 정보를 포함하는 블록군의 직전 또는 직후의 블록 위치에 다중화되어 기록되는 것을 특징으로 하는 기록 매체.
17. 제13항에 있어서,

    상기 부가 정보는 상기 화상 정보의 취득 시간에 관한 정보를 적어도 포함하는 것을 특징으로 하는 기록 매체.
18. 제13항에 있어서,

    상기 부가 정보는 상기 화상 정보의 취득 조건에 관한 정보를 포함하는 것을 특징으로 하는 기록 매체.
19. 제13항 내지 제18항 중 어느 한 항에 기재한 기록 매체의 재생 방법으로서,

    상기 기록 매체로부터 상기 판독/기록 단위의 압축 화상 정보를 판독하여, 상기 압축 화상 정보의 압축을 해제하고, 상기 복호 재생 단위의 화상 정보를 재생 출력하는 동시에,

    상기 판독/기록 단위에 포함되는 상기 부가 정보를 추출하여, 대응하는 상기 판독/기록 단위에 포함되는 상기 복호 재생 단위 화상 정보의 재생 출력에 동기시켜 재생 출력하는

    것을 특징으로 하는 재생 방법.
20. 제13항 내지 제18항 중 어느 한 항에 기재한 기록 매체의 재생 방법으로서,

    상기 기록 매체로부터 상기 판독/기록 단위의 압축 화상 정보를 판독하여, 상기 압축 화상 정보의 압축을 해제하고, 상기 복호 재생 단위의 화상 정보를 재생 출력하는 동시에,

    상기 판독/기록 단위에 포함되는 상기 부가 정보를 추출하여, 대응하는 상기 판독/기록 단위에 포함되는 상기 복호 재생 단위 화상 정보의 재생 출력에 동기시켜 재생하고, 상기 재생된 상기 부가 정보에 의해, 상기 대응하는 상기 판독/기록 단위에 포함되는 상기 복호 재생 단위의 화상 정보를 제어하는

    것을 특징으로 하는 재생 방법.
21. 제13항 내지 제18항 중 어느 한 항에 기재한 기록 매체의 재생 방법으로서,

    상기 기록 매체로부터 상기 판독/기록 단위의 압축 화상 정보를 판독하고, 상기 판독된 상기 압축 화상 정보 중 상기 복호 재생 단위 내의 화상 정보만이 사용되어 압축 부호화되는 복호 재생 단위 내 부호화 정보만을 압축 해제하고, 상기 복호 재생 단위 내 부호화 화상 정보에 의한 화상 정보를, 상기 판독/기록 단위에 포함되는 복호 재생 단위의 수보다 적은 복호 재생 단위 수만큼 반복하여 재생 출력하는 동시에,

    상기 판독/기록 단위에 포함되는 상기 부가 정보를 추출하여, 상기 복호 재생 단위 내 부호화 화상 정보에 의한 화상 정보의 재생 출력에 동기시켜 재생 출력하는

    것을 특징으로 하는 재생 방법.
22. 제13항 내지 제18항 중 어느 한 항에 기재한 기록 매체의 재생 장치로서,

    상기 기록 매체로부터 상기 판독/기록 단위의 압축 화상 정보를 판독하는 판독 수단과,

    상기 판독 수단으로부터 상기 압축되어 있는 화상 정보와 상기 부가 정보를 분리하는 분리 수단과,

    상기 분리 수단으로부터의 상기 화상 정보의 압축을 해제하는 수단과,

    상기 압축을 해제한 화상 정보에 대해 상기 복호 재생 단위 정보를 재생 출력하는 수단과,

    상기 분리 수단으로부터 상기 부가 정보를 상기 복호 재생 단위 정보의 재생 출력에 동기시켜 재생 출력하는 수단

    을 구비하는 것을 특징으로 하는 재생 장치.
23. 제13항 내지 제18항 중 어느 한 항에 기재한 기록 매체의 재생 장치로서,

    상기 기록 매체로부터 상기 판독/기록 단위의 압축 화상 정보를 판독하고, 상기 압축 화상 정보의 압축을 해제하여, 상기 복호 재생 단위의 화상 정보를 재생 출력하는 동시에,

    상기 판독/기록 단위에 포함되는 상기 부가 정보를 추출하여, 대응하는 상기 판독/기록 단위에 포함되는 상기 복호 재생 단위 화상 정보의 재생 출력에 동시시켜 재생하고, 상기 재생한 상기 부가 정보에 의해 상기 대응하는 상기 판독/기록 단위에 포함되는 상기 복호 재생 단위의 화상 정보를 제어하는

    것을 특징으로 하는 재생 장치.
24. 제13항 내지 제18항 중 어느 한 항에 기재한 기록 매체의 재생 장치로서,

    상기 기록 매체로부터 상기 판독/기록 단위의 압축 화상 정보를 판독하는 판독 수단과,

    상기 판독 수단으로부터 상기 압축되어 있는 화상 정보와 상기 부가 정보를 분리하는 분리 수단과,

    상기 분리 수단으로부터의 상기 압축 화상 정보 중 상기 복호 재생 단위 내의 화상 정보만이 사용되어 압축 부호화되는 복호 재생 단위 내 부호화 화상 정보만을 압축 해제하는 수단과,

    상기 압축을 해제한 상기 복호 재생 단위 내 부호화 화상 정보에 의한 화상 정보를 상기 판독/기록 단위로 포함되는 복호 재생 단위의 수보다 적은 복호 재생 단위분을 반복하여 재생 출력하는 수단과,

    상기 분리 수단으로부터 상기 부가 정보를 상기 복호 재생 단위 내 부호화 화상 정보에 의한 화상 정보의 재생 출력에 동기시켜 재생 출력하는 수단

    을 구비하는 것을 특징으로 하는 재생 장치.
25. 촬상 소자와,

    상기 촬상 소자에 피사체상을 결상(結像)시키기 위한 촬상 광학계와,

    상기 촬상 소자로부터 화상 정보에 대해 상기 화상 정보의 1 프레임 또는 1 필드로 이루어지는 복호 재생 단위 정보마다, 상기 복호 재생 단위 내의 화상 정보만을 사용한 압축 부호화, 및 상기 복호 재생 단위 화상 정보의 전 및/또는 후의복호 재생 단위 화상 정보의 상관을 이용한 압축 부호화를 실행하는 데이터 압축 수단과,

    상기 촬상 소자로부터 화상 정보에 대한 부가 정보를 생성하는 부가 정보 생성 수단과,

    상기 데이터 압축 수단으로 압축된 상기 복호 재생 단위 정보의 복수 단위분을 기록 매체에 대한 기록 및 판독 단위인 판독/기록 단위로 하고, 상기 판독/기록 단위 내에는 상기 복호 재생 단위 내의 화상 정보만을 사용하여 압축 부호화한 상기 복호 재생 단위 정보를 적어도 1 개 포함하도록 하는 동시에, 상기 부가 정보 생성 수단으로부터 상기 판독/기록 단위 내 복수 단위분의 상기 복호 재생 단위 정보에 대한 부가 정보를, 상기 압축된 화상 정보와 분리하여 추출 가능하게 다중화하여 기록하는 기록 제어 수단

    을 구비하는 촬상 장치.
26. 제25항에 있어서,

    상기 판독/기록 단위 정보는 소정의 데이터량마다 블록화된 복수 개의 블록으로 구성되며,

    상기 부가 정보는 1 개 또는 복수 개의 상기 블록에 의해 구성되는 것을 특징으로 하는 촬상 장치.
27. 제26항에 있어서,

    상기 기록 제어 수단은 상기 부가 정보의 블록을 상기 판독/기록 단위 내의 미리 정해진 블록 위치에 다중화하여 상기 기록 매체에 기록하는 것을 특징으로 하는 촬상 장치.
28. 제26항에 있어서,

    상기 판독/기록 단위 정보는 복수 개의 패킷으로 이루어지며,

    상기 기록 제어 수단은 상기 부가 정보의 블록을 상기 복호 재생 단위 내의 화상 정보만을 사용하여 압축 부호화된 압축 화상 정보를 포함하는 블록군의 직전 또는 직후의 블록 위치에 다중화하여 상기 기록 매체에 기록하는 것을 특징으로 하는 촬상 장치.
29. 제25항에 있어서,

    상기 부가 정보는 상기 화상 정보의 촬영 시각(時刻)에 관한 정보를 포함하는 것을 특징으로 하는 촬상 장치.
30. 제25항에 있어서,

    상기 부가 정보는 상기 화상 정보를 얻었을 때의 촬상 조건에 관한 정보를 포함하는 것을 특징으로 하는 촬상 장치.