JP2000041212A - Optical disk, recording device, its method, reproduction device and its method - Google Patents

Optical disk, recording device, its method, reproduction device and its method

Info

Publication number
JP2000041212A
JP2000041212A JP11096471A JP9647199A JP2000041212A JP 2000041212 A JP2000041212 A JP 2000041212A JP 11096471 A JP11096471 A JP 11096471A JP 9647199 A JP9647199 A JP 9647199A JP 2000041212 A JP2000041212 A JP 2000041212A
Authority
JP
Japan
Prior art keywords
audio
time
still image
data
stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP11096471A
Other languages
Japanese (ja)
Other versions
JP3411232B2 (en
Inventor
Tomoyuki Okada
智之 岡田
Kaoru Murase
薫 村瀬
Kazuhiro Tsuga
一宏 津賀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP09647199A priority Critical patent/JP3411232B2/en
Publication of JP2000041212A publication Critical patent/JP2000041212A/en
Application granted granted Critical
Publication of JP3411232B2 publication Critical patent/JP3411232B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide the record medium, its device and its method that store data in the MPEG system, can freely revise audio data reproduced with still picture data even after recording the still picture data. SOLUTION: An optical disk that is reproduced by a reproduction device records a 1st system stream (ST1) including still picture data of at least one picture and a 2nd system stream (ST2) that includes audio data reproduced with the still picture data. Each stream stores stamp information denoting a time required for decode processing and an output and the 2nd system stream (ST2) is recorded just after the 1st system stream (ST1).

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、静止画像データ
と、この静止画像データと共に再生される音声データと
を格納した光ディスク、かかる光ディスクの記録装置お
よび方法、並びにかかる光ディスクの再生装置および方
法に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an optical disk storing still image data and audio data reproduced together with the still image data, a recording apparatus and method for such an optical disk, and a reproducing apparatus and method for such an optical disk.

【0002】[0002]

【従来の技術】(ディジタルカメラの説明)近年、JP
EG(ISO/IEC 10918−1)方式の静止画
像データを用いたディジタルスティルカメラが普及して
いる。ディジタルスティルカメラが普及してきた背景の
1つには、パーソナルコンピュータ(PC)のAV処理
機能の充実がある。ディジタルスティルカメラで撮影し
た画像は半導体メモリ、フロッピーディスク、赤外線通
信などを通して、PCで扱えるデータとしてPC内部に
取り込まれる。取り込まれた静止画像データは、プレゼ
ンテーションソフト、ワープロソフト、インターネット
コンテンツにおいて、編集素材の一つとして利用するこ
とが可能である。
2. Description of the Related Art (Description of Digital Camera)
2. Description of the Related Art Digital still cameras using still image data of the EG (ISO / IEC 10918-1) system have become widespread. One of the reasons behind the spread of digital still cameras is the enhancement of AV processing functions of personal computers (PCs). Images taken by the digital still camera are taken into the PC as data that can be handled by the PC through a semiconductor memory, a floppy disk, infrared communication, or the like. The captured still image data can be used as one of editing materials in presentation software, word processing software, and Internet contents.

【0003】近年、静止画像と共に対応する音声の取り
込みが可能なディジタルスティルカメラが登場してき
た。静止画像に対応する音声の録音が同時に可能となっ
たことで、従来のフィルム式スティルカメラに比べて更
なる差別化が可能となった。
[0003] In recent years, digital still cameras have been introduced which are capable of capturing corresponding audio along with still images. The ability to simultaneously record sound corresponding to still images has made it possible to further differentiate it from conventional film still cameras.

【0004】図7は、ディジタルスティルカメラで記録
された静止画像データ(JPEGデータ)とオーディオ
データの関係を示す図である。
FIG. 7 is a diagram showing a relationship between still image data (JPEG data) recorded by a digital still camera and audio data.

【0005】図7に示す様に、静止画像データ(JPE
Gデータ)およびオーディオデータは夫々1つのファイ
ルとして記録される。一回の撮影(且つ録画)でJPE
Gデータファイルとオーディオデータファイルが夫々1
ファイルずつ作成される。
As shown in FIG. 7, still image data (JPE
G data) and audio data are recorded as one file. JPE in one shooting (and recording)
One G data file and one audio data file
Created file by file.

【0006】静止画像データ(JPEGデータ)とオー
ディオデータの関係付けは大きく次の2つの方法で行わ
れる。一つ目は、図7(a)に示すように、JPEGデ
ータファイルとオーディオデータファイル夫々へのリン
ク情報を持つ方法である。二つ目は、図7(b)に示す
ように、JPEGデータファイルとオーディオデータフ
ァイルのボディ名(拡張子を除いたファイル名)を一致
させる方法である。
[0006] The relation between still image data (JPEG data) and audio data is roughly determined by the following two methods. First, as shown in FIG. 7A, there is a method of having link information to each of a JPEG data file and an audio data file. The second method is to match the body names (file names excluding the extension) of the JPEG data file and the audio data file as shown in FIG. 7B.

【0007】以上説明した上記方法であれば、静止画像
データに対応するオーディオデータの関連づけを静止画
像データの記録時のみならず記録後にも行うことができ
る。
According to the above-described method, the association of the audio data corresponding to the still image data can be performed not only at the time of recording the still image data but also after the recording.

【0008】すなわち、静止画像データと共に関連づけ
て記録したオーディオデータが適切でないとユーザが判
断した場合、PC上で記録した静止画像データに別のオ
ーディオデータを関連づけることができる。
That is, if the user determines that the audio data recorded in association with the still image data is not appropriate, another audio data can be associated with the still image data recorded on the PC.

【0009】また、近年、動画・静止画・音声データ等
のAVデータを統合的に扱うマルチメディア時代を迎
え、マルチメディアの中核技術(情報圧縮技術)として
MPEG(Moving Picture Experts Group)が広く使用
されるようになった。
In recent years, in the multimedia age in which AV data such as moving images, still images, audio data, and the like are integrated, MPEG (Moving Picture Experts Group) is widely used as a core technology (information compression technology) of multimedia. It was started.

【0010】[0010]

【発明が解決しようとする課題】前述したMPEGを用
いて画像や音声を記録する場合、MPEGストリームは
図6(c)で示す様に、ビデオストリームとオーディオ
ストリームをマルチプレクスして1つのシステムストリ
ームとして扱うため、ビデオストリームに対して記録後
に、自由にオーディオストリームを組み合わせることは
困難である。すなわち、静止画像データに対して組み合
わせたオーディオデータを変更する場合は、静止画像デ
ータとオーディオデータを一本のMPEGストリームと
して扱う必要がある。そのためには、MPEGシステム
ストリームのデコードを行い、夫々取り出した静止画像
データとオーディオデータを再度システムエンコードし
直さなければならなく、従来の技術で説明したディジタ
ルスティルカメラのように、静止画像データとオーディ
オデータを記録後に自由に組み合わせて使用することは
困難であるという問題を有していた。
When recording an image or sound using the above-described MPEG, the MPEG stream is multiplexed with a video stream and an audio stream as shown in FIG. Therefore, it is difficult to freely combine an audio stream after recording the video stream. That is, when changing audio data combined with still image data, it is necessary to handle the still image data and the audio data as one MPEG stream. For this purpose, it is necessary to decode the MPEG system stream and re-encode the extracted still image data and audio data again. As in the case of the digital still camera described in the related art, the still image data and the audio data must be decoded. There is a problem that it is difficult to freely combine and use data after recording.

【0011】本発明は、MPEG方式でデータを持ち、
かつ、静止画像データの記録後にも、静止画像データと
共に再生される音声データを変更可能な記録媒体及びそ
の装置及び方法の提供を目的とする。
The present invention has data in the MPEG system,
Another object of the present invention is to provide a recording medium capable of changing audio data reproduced together with still image data even after recording of the still image data, and a device and a method thereof.

【0012】[0012]

【課題を解決するための手段】本発明の第1の観点は、
デコーダバッファ(53,57)と、デコーダ(54,
58)と、出力部(55,56)とを備えた再生装置に
より再生可能な光ディスクであって、該光ディスクに
は、少なくとも1枚のピクチャの静止画像データを含む
複数のユニットから構成される第1システムストリーム
(ST1)と、前記静止画像データと共に再生されるオ
ーディオデータを含むひとつまたは複数のユニットから
構成される第2システムストリーム(ST2)とが記録
され、前記ユニットには、デコード処理および出力に必
要な時刻を示すタイムスタンプ情報が格納され、前記タ
イムスタンプ情報には、前記第1のシステムストリーム
の最後の前記ユニットが前記デコーダバッファへ(5
3)入力される時刻SCR2と、前記第2のシステムス
トリームの最初の前記ユニットが前記デコーダバッファ
(57)へ入力される時刻SCR3とが含まれ、これら
時刻SCR2、SCR3の間には、次式、 SCR2+Tp ≦ SCR3 ただし、Tpは、デコーダバッファにひとつのユニット
が入力開始されてから、入力終了するまでに要する時間
を示す、が成立することを特徴とする光ディスクであ
る。
Means for Solving the Problems A first aspect of the present invention is as follows.
A decoder buffer (53, 57);
58) and an output unit (55, 56), the optical disc being reproducible by a reproducing apparatus, the optical disc including a plurality of units including still image data of at least one picture. One system stream (ST1) and a second system stream (ST2) including one or a plurality of units including audio data reproduced together with the still image data are recorded, and the unit performs decoding processing and output. Is stored, and the time stamp information includes the last unit of the first system stream in the decoder buffer (5).
3) Includes an input time SCR2 and a time SCR3 when the first unit of the second system stream is input to the decoder buffer (57), and between these times SCR2 and SCR3, , SCR2 + Tp ≦ SCR3 Here, Tp indicates the time required from the start of input of one unit to the decoder buffer until the end of input, and this holds true for an optical disc.

【0013】これにより、音声データが格納された第2
システムストリームは、静止画像データが格納された第
1システムストリームとはマルチプレクスされることな
く、単独で格納されるので、第2システムストリームだ
けの書換を、容易に行うことができる。
Thus, the second audio data is stored.
The system stream is the first stream in which the still image data is stored.
Since one system stream is stored independently without being multiplexed, rewriting of only the second system stream can be easily performed.

【0014】本発明の第2の観点は、前記タイムスタン
プ情報には、更に前記第1システムストリームの最初の
ユニットが前記デコーダバッファへ入力される時刻SC
R1が含まれ、これら時刻SCR1、SCR2につい
て、次式 SCR1 = 0 SCR2+Tp ≦ 27000000(27MHz) ただし、(27MHz)は、その前に示された数値が2
7MHzのクロックのカウント値であることを示す、が
成立することを特徴とする第1の観点の光ディスクであ
る。
According to a second aspect of the present invention, the time stamp information further includes a time SC at which the first unit of the first system stream is input to the decoder buffer.
R1 is included, and for these times SCR1 and SCR2, the following expression is used: SCR1 = 0 SCR2 + Tp ≦ 27000000 (27 MHz) where (27 MHz) is a value 2
The optical disc according to the first aspect is characterized in that the following holds true: a count value of a clock of 7 MHz.

【0015】これにより、第1システムストリーム全体
がデコーダバッファに転送される時間的長さを1秒また
はそれ以下に設定することができる。
[0015] Thus, it is possible to set the time length for transferring the entire first system stream to the decoder buffer to 1 second or less.

【0016】本発明の第3の観点は、前記時刻SCR3
について、次式 SCR3 = 27000000(27MHz) が成立することを特徴とする第2の観点の光ディスクで
ある。
According to a third aspect of the present invention, there is provided a method for controlling the time SCR3
Is the optical disc according to the second aspect, wherein the following expression is satisfied: SCR3 = 27000000 (27 MHz).

【0017】これにより、第2システムストリームのデ
コーダバッファへの転送開始時刻を、第1システムスト
リームのデコーダバッファへの転送開始時刻から1秒後
に設定することができる。
Thus, the transfer start time of the second system stream to the decoder buffer can be set one second after the transfer start time of the first system stream to the decoder buffer.

【0018】本発明の第4の観点は、前記タイムスタン
プ情報には、更に前記第1システムストリームが前記出
力部(55,56)から出力される時刻PTS1と、前
記第2システムストリームが前記デコーダ(58)から
出力される時刻PTS3とが含まれ、これら時刻PTS
1、PTS3が同一値であることを特徴とする第1から
第3のいずれかの観点の光ディスクである。
According to a fourth aspect of the present invention, the time stamp information further includes a time PTS1 at which the first system stream is output from the output unit (55, 56), and the second system stream includes the decoder (58) and the time PTS3 output from (58).
1. An optical disc according to any one of the first to third aspects, wherein PTS3 has the same value.

【0019】これにより、第1システムストリームによ
る静止画像と、第2システムストリームによる音声とが
同時に、画面およびスピーカから出力される。
Thus, a still image based on the first system stream and a sound based on the second system stream are simultaneously output from the screen and the speaker.

【0020】本発明の第5の観点は、前記タイムスタン
プ情報には、更に前記第1システムストリームが前記デ
コーダ(53)によりデコードされるデコード開始時刻
DTS1が含まれ、該時刻DTS1は、次式 DTS1 = 90000(90kHz) ただし、(90kHz)は、その前に示された数値が9
0kHzのクロックのカウント値であることを示す、が
成立することを特徴とする第1から第4のいずれかの光
ディスクである。
According to a fifth aspect of the present invention, the time stamp information further includes a decoding start time DTS1 at which the first system stream is decoded by the decoder (53). DTS1 = 90000 (90 kHz) where (90 kHz) is 9
The optical disc according to any one of the first to fourth aspects, wherein the following holds true: a count value of a clock of 0 kHz.

【0021】これにより、第2システムストリームのデ
コード開始時刻を、第1システムストリームがデコーダ
バッフアに転送開始されてから1秒後に設定することが
できる。
Thus, the decoding start time of the second system stream can be set one second after the transfer of the first system stream to the decoder buffer is started.

【0022】本発明の第6の観点は、前記時刻PTS
1、PTS3は、次式 PTS1 = PTS3 = 90000(90kH
z)+Tv ただし、(90kHz)は、その前に示された数値が9
0kHzのクロックのカウント値であることを示し、T
vは、ビデオデータのフレーム周期を示す、が成立する
ことを特徴とする第4の観点の光ディスクである。
According to a sixth aspect of the present invention, the time PTS
1, PTS3 is calculated by the following equation: PTS1 = PTS3 = 90000 (90 kHz
z) + Tv where (90 kHz) is 9
0 kHz clock count value, T
v is an optical disc according to a fourth aspect, wherein the following holds.

【0023】これにより、静止画像の画面表示および音
声の出力を、第1システムストリームがデコーダバッフ
アに転送開始されてから1秒と、さらに1フレーム周期
Tvを加えた時刻に行うことができる。
Thus, the still image screen display and audio output can be performed at one second after the transfer of the first system stream to the decoder buffer is started and at a time obtained by adding one frame period Tv.

【0024】本発明の第7の観点は、光ディスクには、
更に第1、第2システムストリームの管理情報(Volum
e)が記録され、前記第1システムストリームの管理情
報中に、該静止画像データと同期して再生される音声デ
ータの存在を示す識別フラグ(Audio_Flag)
が格納されていることを特徴とする第1ないし第6のい
ずれかの光ディスクである。
According to a seventh aspect of the present invention, an optical disc includes:
Further, management information (Volum of the first and second system streams)
e) is recorded, and in the management information of the first system stream, an identification flag (Audio_Flag) indicating the presence of audio data reproduced in synchronization with the still image data
The optical disk according to any one of the first to sixth aspects, wherein:

【0025】この識別フラグにより、静止画像に対し、
同時再生の音声が付随しているかどうかの判別をするこ
とができる。
With this identification flag, a still image
It is possible to determine whether or not a sound of simultaneous reproduction is attached.

【0026】本発明の第8の観点は、デコーダバッファ
(53、57)と、デコーダ(54、58)と、出力部
(55,56)を備えた再生装置により再生可能な光デ
ィスクに、静止画像データと、該静止画像データと共に
再生されるオーディオデータを含むシステムストリーム
を記録する、光ディスク記録装置であって、該記録装置
は、エンコーダ(1204)と、システム制御部(12
02)とを有し、該エンコーダ(1204)は、少なく
とも1枚のピクチャの静止画像データを含む複数のユニ
ットから構成される第1システムストリーム(ST1)
と、前記静止画像データと共に再生されるオーディオデ
ータを含むひとつまたは複数のユニットから構成される
第2システムストリーム(ST2)とを生成し、該シス
テム制御部(1202)は、前記ユニットに、デコード
処理および出力に必要な時刻を示すタイムスタンプ情報
を格納し、前記タイムスタンプ情報には、前記第1のシ
ステムストリームの最後の前記ユニットが前記デコーダ
バッファ(53)へ入力される時刻SCR2と、前記第
2のシステムストリームの最初の前記ユニットが前記デ
コーダバッファ(57)へ入力される時刻SCR3とが
含まれ、これら時刻SCR2、SCR3の間には、次
式、 SCR2+Tp ≦ SCR3 ただし、Tpは、デコーダバッファにひとつのユニット
が入力開始されてから、入力終了するまでに要する時間
を示す、が成立することを特徴とする光ディスク再生装
置である。
According to an eighth aspect of the present invention, a still image is recorded on an optical disk which can be reproduced by a reproducing apparatus having a decoder buffer (53, 57), a decoder (54, 58), and an output section (55, 56). An optical disk recording device for recording data and a system stream including audio data reproduced together with the still image data, wherein the recording device includes an encoder (1204) and a system control unit (12).
02), and the encoder (1204) includes a first system stream (ST1) including a plurality of units including still image data of at least one picture.
And a second system stream (ST2) including one or more units including audio data to be reproduced together with the still image data, and the system control unit (1202) performs a decoding process on the unit. And time stamp information indicating a time required for output, wherein the time stamp information includes a time SCR2 at which the last unit of the first system stream is input to the decoder buffer (53); And the time SCR3 when the first unit of the second system stream is input to the decoder buffer (57). Between these times SCR2 and SCR3, SCR2 + Tp ≦ SCR3 where Tp is the decoder buffer. From the start of input of one unit to the end of input Indicating the time required, an optical disk reproducing apparatus, characterized in that is established.

【0027】これにより、音声データが格納された第2
システムストリームは、静止画像データが格納された第
1システムストリームとはマルチプレクスされることな
く、単独で格納されるので、第2システムストリームだ
けの書換を、容易に行うことができる。
Thus, the second audio data is stored.
The system stream is the first stream in which the still image data is stored.
Since one system stream is stored independently without being multiplexed, rewriting of only the second system stream can be easily performed.

【0028】本発明の第9の観点は、前記システム制御
部は、前記タイムスタンプ情報として、更に前記第1シ
ステムストリームの最初のユニットが前記デコーダバッ
ファへ(53)入力される時刻SCR1と、前記第1シ
ステムストリームが前記出力部(55,56)から出力
される時刻PTS1とを格納し、これら時刻SCR1、
SCR2、PTS1について、次式 SCR1=0 SCR2≦27000000(27MHz)−Tp PTS1=90000(90KHz)+Tv ただし、(27MHz)は、その前に示された数値が2
7MHzのクロックのカウント値であることを示し、
(90KHz)は、その前に示された数値が90KHz
のクロックのカウント値であることを示し、Tpは、該
第1システムストリームの最後のユニットを転送するの
に要する時間を示し、Tvは、ビデオデータのフレーム
周期を示す、が成立することを特徴とする第8の観点の
光ディスク記録装置である。
According to a ninth aspect of the present invention, the system control unit further includes, as the time stamp information, a time SCR1 at which the first unit of the first system stream is input (53) to the decoder buffer; The time PTS1 at which the first system stream is output from the output unit (55, 56) is stored.
For SCR2 and PTS1, the following equation SCR1 = 0 SCR2 ≦ 27000000 (27 MHz) −Tp PTS1 = 90000 (90 KHz) + Tv where (27 MHz) is 2
Indicates that it is a count value of a 7 MHz clock,
(90 KHz) means that the numerical value indicated before that is 90 KHz
Tp indicates the time required to transfer the last unit of the first system stream, and Tv indicates the frame period of the video data. An optical disc recording apparatus according to an eighth aspect.

【0029】これにより、第1システムストリームがデ
コーダバッファに転送開始される時刻を0とし、第1シ
ステムストリームがデコーダバッファに転送終了される
時刻を1秒またはそれ以下とし、静止画像が表示される
時刻を、1秒と、さらに1フレーム周期Tvを加えた時
刻に設定することができる。
Thus, the time when the transfer of the first system stream to the decoder buffer is set to 0, the time when the transfer of the first system stream to the decoder buffer ends is 1 second or less, and a still image is displayed. The time can be set to one second plus one frame period Tv.

【0030】本発明の第6の観点は、前記システム制御
部は、前記タイムスタンプ情報として、更に前記第2シ
ステムストリームが前記デコーダ(58)から出力され
る時刻PTS3を格納し、これら時刻SCR3、PTS
3について、次式 SCR3=27000000(27MHz) PTS3=90000(90KHz)+Tv が成立することを特徴とする第9の観点の光ディスク記
録装置である。
According to a sixth aspect of the present invention, the system control unit further stores, as the time stamp information, a time PTS3 at which the second system stream is output from the decoder (58). PTS
An optical disc recording apparatus according to a ninth aspect, wherein the following equation is satisfied with respect to No.3: SCR3 = 27000000 (27 MHz) PTS3 = 90000 (90 KHz) + Tv

【0031】これにより、第2システムストリームがデ
コーダバッファに転送開始される時刻を1秒とし、音声
がデコーダによりデコードされ再生される時刻を、1秒
と、さらに1フレーム周期Tvを加えた時刻に設定する
ことができる。
Thus, the time at which the transfer of the second system stream is started to the decoder buffer is set to 1 second, the time at which the audio is decoded and reproduced by the decoder is set to 1 second, and the time obtained by adding one frame period Tv. Can be set.

【0032】本発明の第11の観点は、前記システム管
理部は、更に第1、第2システムストリームの管理情報
を生成し、前記第1システムストリームの管理情報中
に、該静止画像データと同期して再生される音声データ
の存在を示す識別フラグ(Audio_Flag)を格
納することを特徴とする第8から第10のいずれかの観
点の光ディスク記録装置である。
According to an eleventh aspect of the present invention, the system management unit further generates management information of first and second system streams, and synchronizes with the still image data in the management information of the first system stream. An optical disc recording apparatus according to any one of the eighth to tenth aspects, wherein an identification flag (Audio_Flag) indicating presence of audio data to be reproduced is stored.

【0033】この識別フラグにより、静止画像に対し、
同時再生の音声が付随しているかどうかの判別をするこ
とができる。
With this identification flag, for a still image,
It is possible to determine whether or not a sound of simultaneous reproduction is attached.

【0034】本発明の第12の観点は、前記システム管
理部は、更に前記第2システムストリームの管理情報中
に前記音声データの再生時間(Cell_Playba
ck_Time)を記録することを特徴とする第8から
第11のいずれかの観点の光ディスク記録装置である。
According to a twelfth aspect of the present invention, the system management unit further includes a reproduction time (Cell_Playba) of the audio data in the management information of the second system stream.
ck_Time) is recorded on the optical disc recording apparatus according to any one of the eighth to eleventh aspects.

【0035】これにより、音声の再生時間を設定するこ
とができる。
As a result, the audio reproduction time can be set.

【0036】本発明の第13の観点は、第7の観点の光
ディスクにを再生する再生装置であって、デコーダバッ
ファ(53、57)と、デコーダ(54,58)と、出
力部(55、56)と、システム制御部(51)とを備
え、該システム制御部(51)は、前記識別フラグ(A
udio_Flag)のセット状態を検出した場合、前
記第1システムストリームの静止画像データと、前記第
2システムストリームの音声データを同期再生すること
を特徴とする光ディスク再生装置である。
According to a thirteenth aspect of the present invention, there is provided a reproducing apparatus for reproducing an optical disk according to the seventh aspect, comprising a decoder buffer (53, 57), a decoder (54, 58), and an output unit (55, 56) and a system control unit (51), and the system control unit (51) includes the identification flag (A).
An optical disc reproducing apparatus characterized in that, when a set state of (audio_Flag) is detected, the still image data of the first system stream and the audio data of the second system stream are synchronously reproduced.

【0037】この識別フラグのセット状態により、静止
画像の第1システムストリームと音声の第2システムス
トリームの存在を予め検出することができる。
The presence of the first system stream of the still image and the second system stream of the audio can be detected in advance based on the set state of the identification flag.

【0038】本発明の第14の観点は、前記システム制
御部(51)は、識別フラグ(Audio_Flag)
のセット状態を検出した場合、前記デコーダ(54)に
より前記第1システムストリームに記録されている1枚の
ピクチャの静止画像データを完全にデコードして出力部
(55,56)に送り、続いて前記デコーダ(58)に
より前記第2システムストリームに記憶されている前記
音声データをデコードすると共に音声の再生をし、該音
声の再生の開始と同時に前記出力部(55,56)から
の静止画像データの再生を開始することを特徴とする第
13の観点の光ディスク再生装置である。
According to a fourteenth aspect of the present invention, the system control unit (51) includes an identification flag (Audio_Flag).
When the set state is detected, the decoder (54) completely decodes still image data of one picture recorded in the first system stream and sends it to the output unit (55, 56). The decoder (58) decodes the audio data stored in the second system stream and reproduces the audio, and simultaneously with the start of the reproduction of the audio, the still image data from the output unit (55, 56). An optical disc reproducing apparatus according to a thirteenth aspect, wherein reproduction of the optical disc is started.

【0039】これにより、第1システムストリームにあ
る静止画像データと、第2システムストリームにある音
声データとを、個別の時間帯にデコードすることが可能
となる。
Thus, the still image data in the first system stream and the audio data in the second system stream can be decoded in individual time zones.

【0040】本発明の第15の観点は、デコーダバッフ
ァ(53、57)と、デコーダ(54、58)と、出力
部(55,56)を備えた再生装置により再生可能な光
ディスクに、静止画像データと、該静止画像データと共
に再生されるオーディオデータを含むシステムストリー
ムを記録する、記録方法であって、少なくとも1枚のピ
クチャの静止画像データを含む複数のユニットから構成
される第1システムストリーム(ST1)を記録するス
テップと、前記静止画像データと共に再生されるオーデ
ィオデータを含むひとつまたは複数のユニットから構成
される第2システムストリーム(ST2)を記録するス
テップと、前記ユニットに、デコード処理および出力に
必要な時刻を示すタイムスタンプ情報を記録するステッ
プとを有し、前記タイムスタンプ情報として、前記第1
のシステムストリームの最後の前記ユニットが前記デコ
ーダバッファ(53)へ入力される時刻SCR2と、前
記第2のシステムストリームの最初の前記ユニットが前
記デコーダバッファ(57)へ入力される時刻SCR3
とを生成し、これら時刻SCR2、SCR3の間には、
次式、 SCR2+Tp ≦ SCR3 ただし、Tpは、デコーダバッファにひとつのユニット
が入力開始されてから、入力終了するまでに要する時間
を示す、が成立することを特徴とする記録方法である。
According to a fifteenth aspect of the present invention, a still image is recorded on an optical disc which can be reproduced by a reproducing apparatus having a decoder buffer (53, 57), a decoder (54, 58), and an output section (55, 56). A recording method for recording a data and a system stream including audio data to be reproduced together with the still image data, wherein the first system stream includes a plurality of units including at least one picture of still image data. ST1), recording a second system stream (ST2) including one or a plurality of units including audio data reproduced together with the still image data, and decoding and outputting to the unit. Recording time stamp information indicating the time required for the As time stamp information, the first
The time SCR2 when the last unit of the system stream is input to the decoder buffer (53), and the time SCR3 when the first unit of the second system stream is input to the decoder buffer (57).
Is generated, and between these times SCR2 and SCR3,
SCR2 + Tp ≦ SCR3 Here, Tp indicates the time required from the start of input of one unit to the decoder buffer until the end of input, and this is a recording method characterized by the following.

【0041】これにより、音声データが格納された第2
システムストリームは、静止画像データが格納された第
1システムストリームとはマルチプレクスされることな
く、単独で格納されるので、第2システムストリームだ
けの書換を、容易に行うことができる。
Thus, the second audio data is stored.
The system stream is the first stream in which the still image data is stored.
Since one system stream is stored independently without being multiplexed, rewriting of only the second system stream can be easily performed.

【0042】本発明の第16の観点は、前記タイムスタ
ンプ情報として、更に前記第1システムストリームの最
初のユニットが前記デコーダバッファへ(53)入力さ
れる時刻SCR1と、前記第1システムストリームが前
記出力部(55,56)から出力される時刻PTS1と
を生成し、これら時刻SCR1、SCR2、PTS1に
ついて、次式 SCR1=0 SCR2≦27000000(27MHz)−Tp PTS1=90000(90KHz)+Tv ただし、(27MHz)は、その前に示された数値が2
7MHzのクロックのカウント値であることを示し、
(90KHz)は、その前に示された数値が90KHz
のクロックのカウント値であることを示し、Tpは、該
第1システムストリームの最後のユニットを転送するの
に要する時間を示し、Tvは、ビデオデータのフレーム
周期を示す、が成立することを特徴とする第15の観点
の記録方法である。
According to a sixteenth aspect of the present invention, as the time stamp information, the time SCR1 at which the first unit of the first system stream is input (53) to the decoder buffer, and the first system stream is The time PTS1 output from the output unit (55, 56) is generated, and for these times SCR1, SCR2, and PTS1, the following expression is used: SCR1 = 0 SCR2 ≦ 27000000 (27 MHz) −Tp PTS1 = 90000 (90 KHz) + Tv where ( 27MHz), the value indicated before it is 2
Indicates that it is a count value of a 7 MHz clock,
(90 KHz) means that the numerical value indicated before that is 90 KHz
Tp indicates the time required to transfer the last unit of the first system stream, and Tv indicates the frame period of the video data. A recording method according to a fifteenth aspect.

【0043】これにより、第1システムストリームがデ
コーダバッファに転送開始される時刻を0とし、第1シ
ステムストリームがデコーダバッファに転送終了される
時刻を1秒またはそれ以下とし、静止画像が表示される
時刻を、1秒と、さらに1フレーム周期Tvを加えた時
刻に設定することができる。
Thus, the time at which the transfer of the first system stream is started to the decoder buffer is set to 0, the time at which the transfer of the first system stream is completed to the decoder buffer is set to 1 second or less, and a still image is displayed. The time can be set to one second plus one frame period Tv.

【0044】本発明の第17の観点は、前記タイムスタ
ンプ情報として、更に前記第2システムストリームが前
記デコーダ(58)から出力される時刻PTS3を生成
し、これら時刻SCR3、PTS3について、次式 SCR3=27000000(27MHz) PTS3=90000(90KHz)+Tv が成立することを特徴とする第16の観点の記録方法で
ある。
According to a seventeenth aspect of the present invention, a time PTS3 at which the second system stream is output from the decoder (58) is generated as the time stamp information, and the time SCR3 and PTS3 are expressed by the following equation SCR3. = 2700000 (27 MHz) PTS3 = 90000 (90 KHz) + Tv is the recording method according to a sixteenth aspect.

【0045】これにより、第2システムストリームがデ
コーダバッファに転送開始される時刻を1秒とし、音声
がデコーダによりデコードされ再生される時刻を、1秒
と、さらに1フレーム周期Tvを加えた時刻に設定する
ことができる。
Thus, the time at which the transfer of the second system stream is started to the decoder buffer is set to 1 second, and the time at which the audio is decoded and reproduced by the decoder is set to 1 second and the time obtained by adding one frame period Tv. Can be set.

【0046】本発明の第18の観点は、更に第1、第2
システムストリームの管理情報を記録するステップを有
し、前記第1システムストリームの管理情報中に、該静
止画像データと同期して再生される音声データの存在を
示す識別フラグ(Audio_Flag)を生成するこ
とを特徴とする第15から第17のいずれかの観点の記
録方法である。
The eighteenth aspect of the present invention further provides the first and second aspects.
Recording management information of a system stream, and generating an identification flag (Audio_Flag) in the management information of the first system stream, which indicates presence of audio data reproduced in synchronization with the still image data. A recording method according to any one of the fifteenth to seventeenth aspects.

【0047】この識別フラグにより、静止画像に対し、
同時再生の音声が付随しているかどうかの判別をするこ
とができる。
With this identification flag, for a still image,
It is possible to determine whether or not a sound of simultaneous reproduction is attached.

【0048】本発明の第19の観点は、更に前記第2シ
ステムストリームの管理情報中に前記音声データの再生
時間(Cell_Playback_Time)を生成
することを特徴とする第18の観点の光ディスク記録装
置である。
A nineteenth aspect of the present invention is the optical disc recording apparatus according to the eighteenth aspect, further comprising generating a reproduction time (Cell_Playback_Time) of the audio data in the management information of the second system stream. .

【0049】これにより、音声の再生時間を設定するこ
とができる。
As a result, the audio playback time can be set.

【0050】本発明の第20の観点は、第7の観点の光
ディスクに記録されたシステムストリームを再生する再
生方法であって、前記1枚のピクチャの静止画像データ
の管理情報中に、該静止画像データと同期して再生され
る音声データの存在を示す識別フラグ(Audio_F
lag)のセット状態を検出するステップと、該識別フ
ラグのセット状態の検出に応答して、前記静止画像デー
タと、前記音声データを同期再生するステップを有する
ことを特徴とする光ディスク再生方法である。
According to a twentieth aspect of the present invention, there is provided a reproduction method for reproducing a system stream recorded on an optical disk according to the seventh aspect, wherein the management information of the still image data of one picture includes An identification flag (Audio_F) indicating presence of audio data reproduced in synchronization with image data
lag), and a step of synchronously reproducing the still image data and the audio data in response to the detection of the set state of the identification flag. .

【0051】この識別フラグのセット状態により、静止
画像の第1システムストリームと音声の第2システムス
トリームの存在を予め検出することができる。
The presence of the first system stream of the still image and the second system stream of the audio can be detected in advance based on the set state of the identification flag.

【0052】本発明の第21の観点は、前記同期再生す
るステップは、前記識別フラグ(Audio_Fla
g)のセット状態の検出に応答して、前記1枚のピクチ
ャの静止画像データを完全にデコードするステップと、
続いて前記音声データをデコードし、再生するステップ
と、該音声の再生の開始と同時に、デコードされた静止
画像データの再生を開始することを特徴とする第20の
観点の光ディスク再生方法である。
According to a twenty-first aspect of the present invention, the step of synchronously reproducing includes the step of setting the identification flag (Audio_Fla).
g) completely decoding still image data of the one picture in response to the detection of the set state of g);
A twentieth aspect of the optical disc reproducing method according to the twentieth aspect, wherein a step of decoding and reproducing the audio data and a step of starting reproduction of the decoded still image data simultaneously with the start of reproduction of the audio data.

【0053】これにより、第1システムストリームにあ
る静止画像データと、第2システムストリームにある音
声データとを、個別の時間帯にデコードすることが可能
となる。
Thus, the still image data in the first system stream and the audio data in the second system stream can be decoded in individual time zones.

【0054】[0054]

【発明の実施の形態】以下、本発明の一実施の形態とし
て、MPEGストリームの記録媒体としてDVD−RA
Mを用いたDVDレコーダについて詳細を説明する。
BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, as one embodiment of the present invention, a DVD-RA
A DVD recorder using M will be described in detail.

【0055】(通常のMPEGストリームの説明)最初
に通常のMPEGストリーム(AVデータ)について説
明する。通常のMPEGストリームの構成は当業者であ
れば明らかであるので、本発明に関連の深い部分を中心
に説明をする。
(Description of Normal MPEG Stream) First, a normal MPEG stream (AV data) will be described. Since the structure of a normal MPEG stream will be apparent to those skilled in the art, a description will be given focusing on parts that are relevant to the present invention.

【0056】先にも述べたがAVデータの圧縮方式とし
てはMPEG(ISO/IEC13818)と呼ばれる
国際標準規格がある。
As described above, as an AV data compression method, there is an international standard called MPEG (ISO / IEC13818).

【0057】MPEGは高効率なデータ圧縮を実現する
ために、主に次の2つの特徴を有している。
MPEG has the following two main features in order to realize highly efficient data compression.

【0058】一つ目は、動画像データの圧縮において、
従来から行われていた1フレーム内で冗長成分を取り除
く空間周波数特性を用いた圧縮方式に加えて、フレーム
間での冗長成分を取り除く時間相関特性を用いた圧縮方
式を取り入れたことである。MPEGでは、各フレーム
(MPEGではピクチャとも呼ぶ)をIピクチャ(フレ
ーム内符号化ピクチャ)、Pピクチャ(フレーム内符号
化と過去からの参照関係を使用したピクチャ)、Bピク
チャ(フレーム内符号化と過去および未来からの参照関
係を使用したピクチャ)の3種類に分類してデータ圧縮
を行う。
First, in the compression of moving image data,
In addition to the conventional compression method using spatial frequency characteristics for removing redundant components in one frame, a compression method using time correlation characteristics for removing redundant components between frames has been introduced. In MPEG, each frame (also referred to as a picture in MPEG) is defined as an I picture (intra-frame coded picture), a P picture (picture using intra-frame coding and a reference relationship from the past), and a B picture (intra-frame coded picture). Data using a reference relationship from the past and the future).

【0059】図3はI,P,Bピクチャの関係を示す図
である。図3に示すように、Pピクチャは過去で一番近
いIまたはPピクチャを参照し、Bピクチャは過去およ
び未来の一番近いIまたはPピクチャを夫々参照してい
る。また、図3に示すようにBピクチャが未来のIまた
はPピクチャを参照するため、各ピクチャの表示順番
(display order)と圧縮されたデータで
のコード化順番(coding order)とが一致
しない現象が生じる。
FIG. 3 is a diagram showing the relationship among I, P, and B pictures. As shown in FIG. 3, the P picture refers to the closest I or P picture in the past, and the B picture refers to the closest I or P picture in the past and the future, respectively. Also, as shown in FIG. 3, since the B picture refers to a future I or P picture, the display order of each picture does not match the coding order of the compressed data. Occurs.

【0060】MPEGの二つ目の特徴は、画像の複雑さ
に応じた動的な符号量割り当てをピクチャ単位で行える
点である。MPEGのデコーダは入力バッファを備え、
このデコーダバッファに予めデータを蓄積する事で、圧
縮の難しい複雑な画像に対して大量の符号量を割り当て
ることが可能になっている。
The second feature of MPEG is that dynamic code amount allocation according to the complexity of an image can be performed on a picture basis. The MPEG decoder has an input buffer,
By storing data in this decoder buffer in advance, a large amount of code can be allocated to a complicated image that is difficult to compress.

【0061】MPEGでは、動画と共に再生されるオー
ディオデータとして、MPEG方式で定められたエンコ
ードタイプであるMPEGオーディオがサポートされて
いる。また、MPEGでは、上述したMPEGオーディ
オに加えて、アプリケーション毎に様々なエンコードタ
イプを利用することが許容されている。
In MPEG, MPEG audio, which is an encoding type defined by the MPEG system, is supported as audio data to be reproduced together with a moving image. In MPEG, in addition to the above-described MPEG audio, it is allowed to use various encoding types for each application.

【0062】本発明で使用するオーディオデータのエン
コードタイプには、データ圧縮をするタイプとデータが
非圧縮なタイプがある。データ圧縮を行うタイプとして
は、MPEGオーディオ、ドルビーディジタル(AC−
3)があり、非圧縮なタイプとしてはLPCMがある。
ドルビーディジタルとLPCMはビットレート固定であ
るが、MPEGオーディオはビデオストリーム程大きく
はないが、オーディオフレーム単位で数種類のサイズか
ら選択することができる。
The audio data encoding type used in the present invention includes a data compression type and a data non-compression type. Types that perform data compression include MPEG audio and Dolby Digital (AC-
3), and LPCM is an uncompressed type.
Dolby Digital and LPCM have a fixed bit rate, while MPEG audio is not as large as a video stream, but can be selected from several sizes in audio frame units.

【0063】上述した動画データ及びオーディオデータ
は、MPEGシステムと呼ばれる方式で一本のストリー
ムに多重化(マルチプレクス)される。多重化された動
画データ及びオーディオデータはMPEGではシステム
ストリームと称される。また、動画データとオーディオ
データとがマルチプレクスされた状態のデータは、一般
的にAVデータと称される。
The moving picture data and audio data described above are multiplexed (multiplexed) into one stream by a method called an MPEG system. The multiplexed moving image data and audio data are called a system stream in MPEG. Data in a state where moving image data and audio data are multiplexed is generally called AV data.

【0064】図4はMPEGのシステムストリームの構
成を示す図である。41はパックヘッダ、42はパケッ
トヘッダ、43はペイロードである。MPEGのシステ
ムストリームはパック、パケットと呼ばれる階層構造を
持っている。
FIG. 4 is a diagram showing the structure of an MPEG system stream. 41 is a pack header, 42 is a packet header, and 43 is a payload. MPEG system streams have a hierarchical structure called packs and packets.

【0065】パケットは多重化処理の際の最小単位であ
り、パックは転送処理の際の最小単位である。
The packet is the minimum unit in the multiplexing process, and the pack is the minimum unit in the transfer process.

【0066】パケットはパケットヘッダ42とペイロー
ド43とから構成される。AVデータは夫々先頭から適
当なサイズ毎に分割されペイロード43に格納される。
パケットヘッダ42はペイロード43に格納されるデー
タのタイプを識別するためのID(stream I
D)と90kHzの精度で表記したペイロード中に含ま
れているデータの再生の際のタイムスタンプが格納され
る。IDが示すデータのタイプには動画、音声等があ
る。またタイムスタンプにはデコード時刻DTS(De
coding Time Stamp)および表示時刻
PTS(Presentation Time Sta
mp)が記録される。なお、オーディオデータのように
デコードと表示が同時に行われる場合はDTSの格納が
省略される。
The packet is composed of a packet header 42 and a payload 43. The AV data is divided into appropriate sizes from the beginning and stored in the payload 43.
The packet header 42 has an ID (stream I) for identifying the type of data stored in the payload 43.
D) and a time stamp at the time of reproducing data included in the payload, which is described with an accuracy of 90 kHz. The type of data indicated by the ID includes a moving image, audio, and the like. The time stamp includes the decode time DTS (De
coding Time Stamp and display time PTS (Presentation Time Stamp)
mp) is recorded. When decoding and display are performed simultaneously like audio data, storage of DTS is omitted.

【0067】パックは複数のパケットを取りまとめた単
位である。なお本実施の形態の場合は、1パケットが1
パックから構成される。パックは、パックヘッダ41と
パケット(パケットヘッダ42およびペイロード43)
から構成される。
A pack is a unit in which a plurality of packets are collected. In this embodiment, one packet is one packet.
Consists of packs. The pack includes a pack header 41 and a packet (packet header 42 and payload 43).
Consists of

【0068】パックヘッダには、このパック内のデータ
がデコーダバッファに入力される時刻を27MHzの精
度で表記したSCR(System Clock Re
ference)が記録される。
In the pack header, the time at which the data in the pack is input to the decoder buffer is represented by an SCR (System Clock Rewrite) with an accuracy of 27 MHz.
reference) is recorded.

【0069】次に、上述したMPEGシステムストリー
ムをデコードするデコーダについて説明する。
Next, a decoder for decoding the above-mentioned MPEG system stream will be described.

【0070】図5はMPEGシステムデコーダのデコー
ダモデル(P−STD)であるり、図1のデコーダ16
の詳細を示す。51はデコーダ内の規準時刻となるST
C(System Time Clock)を備えたシ
ステム制御部、52はシステムストリームのデコード、
即ち多重化を解くデマルチプレクサ、53はビデオデコ
ーダのビデオバッファ、54はビデオデコーダ、55は
前述したI、PピクチャとBピクチャの間で生じるデー
タ順と表示順の違いを吸収するためにI、Pピクチャを
一時的に格納するリオーダバッファ、56はリオーダバ
ッファにあるI、PピクチャとBピクチャの出力順を調
整するスイッチ、57はオーディオデコーダの入力バッ
ファ、58はオーディオデコーダである。
FIG. 5 shows a decoder model (P-STD) of the MPEG system decoder.
The details are shown below. ST 51 is a reference time in the decoder.
A system control unit having C (System Time Clock) 52 decodes a system stream,
That is, 53 is a demultiplexer for demultiplexing, 53 is a video buffer of a video decoder, 54 is a video decoder, and 55 is I, I, in order to absorb the difference between the data order and the display order occurring between the P picture and the B picture. A reorder buffer for temporarily storing P pictures, 56 is a switch for adjusting the output order of I, P and B pictures in the reorder buffer, 57 is an input buffer of an audio decoder, and 58 is an audio decoder.

【0071】次にMPEGシステムデコーダによる、前
述したMPEGシステムストリームの処理動作を以下説
明する。デマルチプレクサ52には、STC51の時刻
とパックヘッダに記述されているSCRが一致した時
に、当該パックが入力される必要がある。なお、先頭パ
ックのSCRでSTC51は初期化される。デマルチプ
レクサ52は、パケットヘッダ中のストリームIDを解
読し、ペイロードのデータを夫々のストリーム毎のデコ
ーダバッファに転送する。また、パケットヘッダ中のP
TSおよびDTSを取り出す。ビデオデコーダ54は、
STC51の時刻とDTSが一致した時刻にビデオバッ
ファ53からピクチャデータを取り出しデコード処理を
行い、Bピクチャはそのまま表示出力し、I、Pピクチ
ャはそのまま出力せずに一時リオーダバッファ55に格
納する。
Next, the processing operation of the above-described MPEG system stream by the MPEG system decoder will be described. When the time of the STC 51 matches the SCR described in the pack header, the pack needs to be input to the demultiplexer 52. The STC 51 is initialized by the SCR of the first pack. The demultiplexer 52 decodes the stream ID in the packet header and transfers the data of the payload to the decoder buffer for each stream. Also, P in the packet header
Take out TS and DTS. The video decoder 54
At the time when the DTS coincides with the time of the STC 51, the picture data is taken out from the video buffer 53 and subjected to decoding processing. The B picture is displayed and output as it is, and the I and P pictures are stored in the temporary reorder buffer 55 without being output as it is.

【0072】スイッチ56は、図3を用いて前述したデ
コード順番と出力表示順番の異なりを修正する。すなわ
ち、ビデオデコーダ54により出力されるピクチャがB
ピクチャの場合は、ビデオデコーダ54側からの出力を
外部に出力するようにスイッチングし、I、Pピクチャ
の場合は、リオーダバッファ55側からの出力を外部に
出力するようにスイッチングする。
The switch 56 corrects the difference between the decoding order and the output display order described above with reference to FIG. That is, if the picture output by the video decoder 54 is B
In the case of a picture, switching is performed so that the output from the video decoder 54 is output to the outside, and in the case of I and P pictures, switching is performed so that the output from the reorder buffer 55 is output to the outside.

【0073】なお、このデコード順序と出力順序の異な
りの修正のためリオーダされるためIピクチャはデコー
ドと同時に出力することはできない。仮にBピクチャが
存在しないケースを想定した場合であっても、デコード
から出力まで1ピクチャ分、すなわち1ビデオフレーム
周期分出力が遅れることになる。
Since the reordering is performed to correct the difference between the decoding order and the output order, the I picture cannot be output simultaneously with the decoding. Even if it is assumed that there is no B picture, the output from the decoding to the output is delayed by one picture, that is, by one video frame period.

【0074】オーディオデコーダ58は、ビデオデコー
ダ54同様に、STC51の時刻とPTS(オーディオ
の場合DTSはない)が一致した時刻にオーディオバッ
ファ57から1オーディオフレーム分のデータを取り出
しデコードする。
Similarly to the video decoder 54, the audio decoder 58 extracts and decodes one audio frame of data from the audio buffer 57 at the time when the time of the STC 51 and the PTS (there is no DTS for audio) match.

【0075】次に、MPEGシステムストリームの多重
化方法について図6を用いて説明する。図6(a)はビ
デオフレーム、図6(b)はビデオバッファ、図6
(c)はMPEGシステムストリーム、図6(d)はオ
ーディオデータを夫々示している。横軸は各図に共通し
た時間軸を示していて、各図とも同一時間軸上に描かれ
ている。また、ビデオバッファの状態においては、縦軸
はバッファ占有量(ビデオバッファのデータ蓄積量)を
示し、図中の太線はバッファ占有量の時間的遷移を示し
ている。また、太線の傾きはビデオのビットレートに相
当し、一定のレートでデータがバッファに入力されてい
ることを示している。また、一定間隔でバッファ占有量
が削減されているのは、データがデコードされた事を示
している。また、斜め点線と時間軸の交点はビデオフレ
ームのビデオバッファへのデータ転送開始時刻を示して
いる。
Next, a method of multiplexing the MPEG system stream will be described with reference to FIG. FIG. 6A shows a video frame, FIG. 6B shows a video buffer, and FIG.
FIG. 6C shows an MPEG system stream, and FIG. 6D shows audio data. The horizontal axis shows a time axis common to each figure, and each figure is drawn on the same time axis. In the state of the video buffer, the vertical axis indicates the buffer occupancy (the amount of data stored in the video buffer), and the thick line in the figure indicates the temporal transition of the buffer occupancy. The slope of the bold line corresponds to the video bit rate, indicating that data is being input to the buffer at a constant rate. The fact that the buffer occupancy is reduced at regular intervals indicates that data has been decoded. The intersection of the diagonal dotted line and the time axis indicates the start time of data transfer of the video frame to the video buffer.

【0076】(通常のMEPGストリームの課題)上述
した通常のMPEGストリームを利用した静止画カメラ
は後述する課題により実際には製品としては存在しない
と考えられる。しかしながら、課題を説明する便宜上、
これを想定し以下説明する。
(Problem of Normal MPEG Stream) It is considered that the above-described still image camera using the normal MPEG stream does not actually exist as a product due to a problem described later. However, for convenience in explaining the issues,
This will be described below assuming this.

【0077】想定した静止画カメラによるMPEGスト
リームのデコーダによる再生動作と各タイムスタンプ
(STC、PTS、DTS)の関係を、図17、図18
を用いて説明する。なお、デコーダの各構成は図5で示
した構成を参照する。
FIGS. 17 and 18 show the relationship between the reproduction operation of the MPEG stream by the assumed still image camera by the decoder and each time stamp (STC, PTS, DTS).
This will be described with reference to FIG. Note that each configuration of the decoder refers to the configuration shown in FIG.

【0078】図17は静止画カメラで取り込んだデータ
がPC上で再生される動作を説明する図である。図17
(a)はPCのディスプレイに表示される画面を示す。
同図においてPhoto#1とPhoto#2が個別にファイルとして
アイコンで表示されている。Windows95等のGUI(グ
ラッフィックユーザインターフェース)においては、表
示されたファイルをポインティングデバイスであるマウ
ス等でそれぞれクリックすることによって、ファイルの
内容をPCに付随するディスプレイ装置に表示させ、そ
の音声をPCに付随するスピーカから出力させることが
できる。図17(b)はPhoto#1とPhoto#2の内容がそれ
ぞれ出力された状態を示す。
FIG. 17 is a diagram for explaining an operation in which data captured by a still picture camera is reproduced on a PC. FIG.
(A) shows a screen displayed on the display of the PC.
In the figure, Photo # 1 and Photo # 2 are individually displayed as icons as files. In a GUI (graphical user interface) such as Windows 95, by clicking each of the displayed files with a mouse or the like as a pointing device, the contents of the file are displayed on a display device attached to the PC, and the sound is attached to the PC. Can be output from the speaker. FIG. 17B shows a state where the contents of Photo # 1 and Photo # 2 are output.

【0079】図17(b)に示すように、Photo#1のフ
ァイルがクリックされると、静止画としてStill pictur
e#1が画面に表示され、同時にAudio#1がPCのスピーカ
から出力される。また、Photo#2のファイルがクリック
されると、静止画としてStillpicture#2が画面に表示さ
れ、同時にAudio#2がPCのスピーカから出力される。
As shown in FIG. 17B, when the file of Photo # 1 is clicked, a still pictur is displayed as a still image.
e # 1 is displayed on the screen, and at the same time, Audio # 1 is output from the speaker of the PC. When the file of Photo # 2 is clicked, Still picture # 2 is displayed on the screen as a still image, and at the same time, Audio # 2 is output from the speaker of the PC.

【0080】図18は、Photo#1が再生される際の、想
定した静止画カメラのデコーダの動作と各タイムスタン
プの関係を説明する図である。
FIG. 18 is a view for explaining the relationship between the assumed operation of the decoder of the still image camera and each time stamp when Photo # 1 is reproduced.

【0081】図18(a)、(b)はPhoto#1の静止画
であるStill picture#1と音声であるAudio#1がそれぞれ
出力される状態を示す。図18(c)、(d)はStill
picture#1とAudio#1がそれぞれデコードされ出力される
際のオーディオデコーダバッファ57とビデオデコーダ
バッファ53のバッファ占有量の推移をそれぞれ示す。
図18(e)はPhoto#1がMPEGストリームであるス
トリーム#1としてディスクに格納される際のパック配
置及びパックに格納されるそれぞれのタイムスタンプ
(SCR、PTS、DTS)を示す。
FIGS. 18A and 18B show a state where Still picture # 1 as a still image of Photo # 1 and Audio # 1 as audio are output. FIGS. 18C and 18D show stills.
The transition of the buffer occupancy of the audio decoder buffer 57 and the video decoder buffer 53 when the picture # 1 and the audio # 1 are respectively decoded and output are shown.
FIG. 18E shows the pack arrangement when Photo # 1 is stored as an MPEG stream as stream # 1 on the disc and the respective time stamps (SCR, PTS, DTS) stored in the pack.

【0082】なお、説明の便宜上、パック内のパケット
は図示しないが、DTSとPTSはパケット内のパケッ
トヘッダに存在することは前述した通りである。また、
同様に、ビデオパックを4つ、オーディオパックを2つ
としたが、パックのデータ量は2KBにすぎないため、
実際にはビデオパックとオーディオパックとがそれぞれ
100以上の数で存在する。これらは当業者であれば明
らかな事であることは言うまでもない。
For convenience of explanation, the packets in the pack are not shown, but DTS and PTS are present in the packet header in the packet as described above. Also,
Similarly, there are four video packs and two audio packs, but since the data amount of the pack is only 2 KB,
Actually, there are more than 100 video packs and 100 audio packs. Needless to say, these are obvious to those skilled in the art.

【0083】想定した静止画カメラの再生動作の第1の
説明として、最初に図18(e)で示すストリーム#1
を構成する各パックがデマルチプレクサ52に転送され
る動作を説明する。
As a first explanation of the assumed reproduction operation of the still image camera, stream # 1 shown in FIG.
The operation of transferring each of the packs forming the above to the demultiplexer 52 will be described.

【0084】図18(e)に示すようにストリーム#1
は先頭から、ビデオパックV1、ビデオパックV2、オ
ーディオパックA1、ビデオパックV3、ビデオパック
V4、オーディオパックA2の順に、各パックがマルチ
プレクスされた構成を有する。
As shown in FIG. 18 (e), stream # 1
Has a configuration in which each pack is multiplexed in the order of video pack V1, video pack V2, audio pack A1, video pack V3, video pack V4, and audio pack A2 from the top.

【0085】前述したが各パックにはそれぞれ、デマル
チプレクサ52に入力されるタイミングを示すSCR値
がパックヘッダに格納される。図18に示す例の場合、
ビデオパックV1のSCR#1には時刻t1が、ビデオ
パックV2のSCR#2には時刻t2が、オーディオパ
ックA1のSCR#4には時刻t3が、ビデオパックV
3のSCR#3には時刻t4が、ビデオパックV4のS
CR#5には時刻t5が、オーディオパックA2のSC
R#6には時刻t8がそれぞれSCR値として設定され
る。
As described above, in each pack, the SCR value indicating the timing of input to the demultiplexer 52 is stored in the pack header. In the case of the example shown in FIG.
The time t1 is applied to the SCR # 1 of the video pack V1, the time t2 is applied to the SCR # 2 of the video pack V2, the time t3 is applied to the SCR # 4 of the audio pack A1, and the video pack V
The time t4 is set in the SCR # 3 of the video pack V3.
In CR # 5, time t5 is the SC of audio pack A2.
The time t8 is set as an SCR value in R # 6.

【0086】また、ピクチャの先頭パックにはPTSと
DTSが設定される。ビデオパックV1のPTS#1に
は時刻t7が、DTS#1には時刻t6が設定される。
なお、ピクチャの先頭パック以外のビデオパックはPT
SとDTSが同一であるため設定されない。
A PTS and a DTS are set in the head pack of a picture. Time t7 is set in PTS # 1 of the video pack V1, and time t6 is set in DTS # 1.
Note that video packs other than the first pack of pictures are PT
Not set because S and DTS are the same.

【0087】また各オーディオパックにはPTSが設定
される。オーディオパックA1のPTS#1には時刻t
7が、オーディオパックA2のPTS#2には時刻t9
が設定される。なお、オーディオデータの場合、PTS
とDTSは等しいためPTSのみ値が設定され、DTS
は省略される。
A PTS is set for each audio pack. The time t is added to the PTS # 1 of the audio pack A1.
7 is at time t9 in PTS # 2 of audio pack A2.
Is set. In the case of audio data, PTS
And DTS are equal, so only the PTS is set, and the DTS
Is omitted.

【0088】ストリーム#1を構成する各パックは、先
頭パックであるビデオパックV1のSCR#1の値であ
る時刻t1でSTCをリセットした後、各パックのSC
R値が示すタイミングでデマルチプレクサ52に入力さ
れる。
Each pack constituting stream # 1 resets the STC at time t1, which is the value of SCR # 1 of video pack V1, which is the first pack, and then resets the SC of each pack.
The signal is input to the demultiplexer 52 at the timing indicated by the R value.

【0089】すなわち、図18(e)に示すように、最
初はビデオパックV1が時刻t1でデマルチプレクサ5
2に入力され、次いでビデオパックV2が時刻t2で、
次いでオーディオパックA1が時刻t3で、次いでビデ
オパックV3が時刻t4で、次いでビデオパックV4が
時刻t5で、次いでオーディオパックA2が時刻t8
で、それぞれ、デマルチプレクサ52に入力される。各
パックが入力されたデマルチプレクサ52は入力パック
がビデオパックであればビデオバッファ53に出力し、
入力パックがオーディオパックであればオーディオバッ
ファ57に出力する。
That is, as shown in FIG. 18 (e), first, the video pack V1 is demultiplexed by the demultiplexer 5 at time t1.
2 and then the video pack V2 at time t2,
Next, the audio pack A1 is at time t3, the video pack V3 is at time t4, the video pack V4 is at time t5, and then the audio pack A2 is at time t8.
Are input to the demultiplexer 52. The demultiplexer 52 to which each pack is input outputs to the video buffer 53 if the input pack is a video pack,
If the input pack is an audio pack, it outputs to the audio buffer 57.

【0090】次に想定した静止画カメラの再生動作の第
2の説明として、ビデオバッファ53に出力された各ビ
デオパックのデータのデコード及び出力動作を説明す
る。
Next, as a second description of the assumed reproduction operation of the still picture camera, the decoding and output operation of the data of each video pack output to the video buffer 53 will be described.

【0091】図18(c)に示すようにデマルチプレク
サ52から出力された各ビデオパックは、無視できる遅
れはあるが、SCRのタイミングである時刻t1、時刻
t2、時刻t4、時刻t5のタイミングでビデオバッフ
ァ53に蓄積される。静止画Still picture#1はビデオ
パックV1からV4までで構成されるため、ビデオパッ
クV4がビデオバッファ53に蓄積されれば静止画Stil
l picture#1を構成する全てのデータがビデオバッファ
53に蓄積されたことになる。図18(e)に示すよう
にビデオパックV1、V2、V3、V4から構成される
静止画Still picture#1はDTS値として時刻t6を有
する。このため、蓄積されたデータは時刻t6のタイミ
ングでビデオデコーダ54によりデコードされ、ビデオ
バッファのバッファ占有量が減少する。
As shown in FIG. 18C, each video pack output from the demultiplexer 52 has a negligible delay, but at the timings of time t1, time t2, time t4, and time t5, which are SCR timings. It is stored in the video buffer 53. Since still picture Still picture # 1 is composed of video packs V1 to V4, if video pack V4 is stored in video buffer 53, still picture Still
This means that all the data making up picture # 1 has been stored in the video buffer 53. As shown in FIG. 18E, a still picture Still picture # 1 including video packs V1, V2, V3, and V4 has a time t6 as a DTS value. Therefore, the stored data is decoded by the video decoder 54 at the timing of the time t6, and the buffer occupancy of the video buffer is reduced.

【0092】デコードされた各ビデオパックのデータは
Iピクチャを構成し、これは、静止画データであるStil
l picture#1である。デコードされたIピクチャはリオ
ーダリオーダバッファ55に格納され、PTS値である
時刻t7のタイミングで外部に出力される。
The decoded data of each video pack constitutes an I picture, which is a still picture data Stil.
l picture # 1. The decoded I picture is stored in the reorder buffer 55, and is output to the outside at the timing of the time t7, which is the PTS value.

【0093】なお、Still picture#1の表示終了につい
ては、MPEGストリーム上のタイムスタンプとしては
規定されない。次のMPEGストリームが再生開始され
れば消去されるし、また、アプリケーション等の外部か
らのデコーダに対する制御で映像出力を終了することが
一般的である。このため図18に示す例においては、音
声出力が終了した時刻t10以降もStill picture#1が
表示されていることを示している。
Note that the end of the display of Still picture # 1 is not defined as a time stamp on the MPEG stream. Generally, the next MPEG stream is deleted when the reproduction is started, and the video output is generally terminated by controlling an external decoder such as an application. Therefore, the example shown in FIG. 18 indicates that Still picture # 1 is displayed even after time t10 when the audio output ends.

【0094】次に想定した静止画カメラの再生動作の第
3の説明として、オーディオバッファ57に出力された
オーディオパックのデータがデコードされ出力される動
作と各タイムスタンプの関係を説明する。
Next, as a third description of the assumed reproducing operation of the still image camera, the relationship between the operation of decoding and outputting the audio pack data output to the audio buffer 57 and each time stamp will be described.

【0095】図18(d)に示すようにデマルチプレク
サ52から出力された各オーディオパックは時刻t3、
時刻t8のタイミングでオーディオバッファ57に蓄積
されオーディバッファ57の占有量がそれぞれ増加す
る。オーディオデータはビデオデータとは異なり、PT
SとDTSが等しいため、オーディオデコーダ57で各
パックのデータがデコードされると同時に音声出力がな
される。すなわち、オーディオバッファ57に蓄積され
たオーディオパックA1のデータは、PTS値である時
刻t7のタイミングでオーディオデコーダ57によりデ
コードされ音声出力が開始される。また、時刻t8のタ
イミングでオーディオバッファ57に蓄積されたオーデ
ィオパックA2のデータは、PTS値である時刻t9の
タイミングで、オーディオデコード57によりデコード
され音声出力される。
As shown in FIG. 18D, each audio pack output from the demultiplexer 52 is at time t3,
At the time t8, the audio buffer 57 stores the audio buffer 57 and increases the occupancy of the audio buffer 57. Audio data differs from video data in that
Since S and DTS are equal, the audio decoder 57 decodes the data of each pack and outputs audio at the same time. That is, the data of the audio pack A1 stored in the audio buffer 57 is decoded by the audio decoder 57 at the time t7, which is the PTS value, and the audio output is started. The data of the audio pack A2 stored in the audio buffer 57 at the timing of time t8 is decoded by the audio decoder 57 and output as audio at the timing of time t9, which is the PTS value.

【0096】また、MPEGではデコーダの各バッファ
内にデータを蓄積できる時間が限定されている。この所
定時間は動画データの場合1秒と規定されている。
In MPEG, the time during which data can be stored in each buffer of the decoder is limited. This predetermined time is specified as one second in the case of moving image data.

【0097】このため、同時に出力されるビデオデータ
とオーディオデータの転送時刻の差、すなわちSCRの
差は最大で1秒になる。但し、厳密に言えばビデオデー
タのリオーダの分だけ更にずれることもある。
Therefore, the difference between the transfer times of the simultaneously output video data and audio data, that is, the difference between the SCRs is 1 second at the maximum. However, strictly speaking, there may be a further shift by the reorder of the video data.

【0098】(MPEGストリームの課題)本発明者は
長年の研究開発により、上述した通常のMPEGストリ
ームを静止画カメラで利用する際の課題を抽出し整理し
た。
(Problems of MPEG Stream) The inventor of the present invention has extracted and arranged the problems in using the above-described ordinary MPEG stream with a still image camera through many years of research and development.

【0099】ビデオデータと当該ビデオデータと共に再
生されるオーディオデータがマルチプレクスされて生成
されるMPEGシステムストリームは、その、生成後に
共に再生されるオーディオデータを他のオーディオデー
タに変更する編集を行う事は難しい。すなわち、静止画
カメラで静止画と音声を撮影しデータをMPEGストリ
ームとして記録媒体に格納した後は、撮影時の音声を他
の音声に変更する編集を行うことは難しい。
An MPEG system stream generated by multiplexing video data and audio data reproduced together with the video data is edited to change the audio data reproduced together with other audio data after the generation. Is difficult. That is, after a still image and a sound are captured by a still image camera and the data is stored in a recording medium as an MPEG stream, it is difficult to perform editing for changing the sound at the time of shooting to another sound.

【0100】例えば、図17に示す例であれば、Photo#
1は静止画カメラで撮影時に、静止画データであるStill
picture#1とオーディオデータであるAudio#1から構成
されるMPEGストリームとしてディスクに記録され
る。生成されたMPEGストリームは図18(e)に示
すように、ビデオパックとオーディオパックとがマルチ
プレクスされた構成を有する。このため、ユーザが、一
度撮影した後に、Photo#1のオーディオデータをAudio#1
から他のオーディオデータに変更することは難しい。
For example, in the example shown in FIG.
1 is the still image data Still when shooting with the still image camera
It is recorded on the disc as an MPEG stream composed of picture # 1 and audio data Audio # 1. As shown in FIG. 18E, the generated MPEG stream has a configuration in which a video pack and an audio pack are multiplexed. For this reason, after the user once shoots, the audio data of Photo # 1 is transferred to Audio # 1.
It is difficult to change from to other audio data.

【0101】撮影後に音声の組み替え編集を行う方法と
して以下の3つの方法が考えられる。
The following three methods are conceivable as a method of rearranging and editing audio after photographing.

【0102】1) 撮影した静止画データであるビデオ
データに対し予め組み合わせる可能性のあるオーディオ
データを全て組み合わせたMPEGストリームを生成
し、これらを全て記録媒体に格納する方法が考えられ
る。例えば図18で示す例であれば、図18(e)で示
すストリーム#1に加えて、オーディオパックのみを変
更したストリームを別途格納することが考えられる。し
かし、この場合、記録媒体の記録容量には上限があるた
め記録可能なMPEGストリームにも限界がある。また、い
ずれにせよ、静止画に組み合わせる可能性のある全ての
音声をユーザが、その撮影時に決定することは事実上不
可能である。
1) A method is conceivable in which an MPEG stream is generated by combining all of the audio data that may be combined in advance with video data as photographed still image data, and these are all stored in a recording medium. For example, in the case of the example shown in FIG. 18, a stream in which only the audio pack is changed may be separately stored in addition to the stream # 1 shown in FIG. However, in this case, since there is an upper limit on the recording capacity of the recording medium, there is also a limit on the recordable MPEG stream. Also, in any case, it is virtually impossible for the user to determine all sounds that may be combined with a still image at the time of shooting.

【0103】2) 編集時に、MPEGシステムストリ
ームのデコードを行い静止画像データとオーディオデー
タとをそれぞれ取り出し、取り出した静止画データと変
更するオーディオデータを再度システムエンコードし直
す。しかし、この場合は、編集の度にデコードとエンコ
ードを行わなければならず、編集に時間がかかる。また
1つのシステムストリームを全てデコードした状態で格
納するために大きなメモリが静止画カメラに必要とされ
る。
2) At the time of editing, the MPEG system stream is decoded to extract still image data and audio data, respectively, and the extracted still image data and audio data to be changed are system-encoded again. However, in this case, decoding and encoding must be performed each time editing is performed, and editing takes time. In addition, a large memory is required for a still image camera to store one system stream in a decoded state.

【0104】3) 予めビデオストリームとオーディオ
ストリームの2つのストリームに分けて記録媒体に格納
する。そして、再生時に組合せを決定する方法が考えら
れる。この方法であれば、静止画を記録媒体に記録した
後で、追記されたオーディオデータを当該静止画と共に
再生するオーディオデータとして利用することができ
る。
3) A video stream and an audio stream are divided into two streams and stored in a recording medium in advance. Then, a method of determining the combination at the time of reproduction can be considered. According to this method, after the still image is recorded on the recording medium, the added audio data can be used as audio data to be reproduced together with the still image.

【0105】発明者は、この3)を採用した。すなわち
従来のデコーダでディスク上に別々に格納された2つの
MPEGストリームをあたかも1つのストリームのごと
く再生する方法と装置を実現した。
The inventor has adopted the above 3). That is, a method and apparatus for reproducing two MPEG streams separately stored on a disc by a conventional decoder as if they were one stream were realized.

【0106】(本発明のMPEGストリーム)本発明を
実現するためには、上述した様に別々に存在する静止画
像データとオーディオデータの2つのMPEGストリー
ムを従来通り1つのデコーダで再生するために、2つの
MPEGストリームを1つのシステムストリームとして
デコーダに処理させることが必要である。
(MPEG stream of the present invention) In order to realize the present invention, two MPEG streams of still image data and audio data which exist separately as described above are conventionally reproduced by a single decoder. It is necessary for the decoder to process two MPEG streams as one system stream.

【0107】2つのMPEGストリームをあたかも1つ
のMPEGストリームとして処理するうえで一番の課題
は、2つのストリームには、それぞれ独立にタイムスタ
ンプが付与されており、2つのストリームを1つのスト
リームとして連続的に処理した場合、それぞれのストリ
ームに付与されたタイムスタンプの間で不連続等の矛盾
が生じる点にある。
The biggest problem in processing two MPEG streams as if they were one MPEG stream is that each of the two streams is given a time stamp independently, and the two streams are continuously processed as one stream. When processing is performed in a contiguous manner, inconsistency such as discontinuity occurs between the time stamps assigned to the respective streams.

【0108】MPEGストリーム中のタイムスタンプ
は、多重化処理で付けられるが、通常のMPEGストリ
ームの場合、タイムスタンプの初期値(一番最初に付け
られるSCR)に規格上の規定はなく、エンコーダによ
って固有の値をとるのが実状である。 従って、夫々異
なるエンコーダによって作成されたMPEGストリーム
間では、当然のことながらタイムスタンプ間に連続性や
相関性は存在しない。例えば、SCRの初期値を0とす
るエンコーダAによりエンコードしたMPEGストリー
ムをストリームA、SCRの初期値を1000とするエ
ンコーダBによりエンコードしたMPEGストリームを
ストリームBとする。また、ストリームAの最終パック
のSCR値を27000000(27MHz)とする。
ここで(27MHz)は、その前に示された数値が27
MHzのクロックのカウント値であることを示す。スト
リームAとストリームBをあたかも1つのストリームの
ように連続的にデコーダで処理したとする。この場合、
ストリームAの終端からストリームBの先頭にかけてS
CRの不連続が発生し、デコーダはハングアップ等、誤
動作する可能性が極めて高くなる。
[0108] The time stamp in the MPEG stream is added by the multiplexing process. In the case of a normal MPEG stream, the initial value of the time stamp (the first SCR added) is not specified by the standard, and is specified by the encoder. The fact is that it takes a unique value. Therefore, there is no continuity or correlation between the time stamps between the MPEG streams created by the different encoders. For example, an MPEG stream encoded by an encoder A with an initial SCR of 0 is stream A, and an MPEG stream encoded by an encoder B with an SCR initial value of 1000 is stream B. Also, the SCR value of the last pack of stream A is 27000000 (27 MHz).
Here, (27 MHz) indicates that the numerical value indicated before that is 27 MHz.
Indicates that it is a count value of a clock of MHz. It is assumed that stream A and stream B are continuously processed by a decoder as if they were one stream. in this case,
S from the end of stream A to the beginning of stream B
The discontinuity of the CR occurs, and the possibility that the decoder malfunctions such as hang-up becomes extremely high.

【0109】このため、本発明の記録装置では、生成し
ディスクに記録されるシステムストリームのタイムスタ
ンプ(SCR、PTS、DTS)の値を所定値に制限す
る。
For this reason, in the recording apparatus of the present invention, the value of the time stamp (SCR, PTS, DTS) of the system stream generated and recorded on the disc is limited to a predetermined value.

【0110】次に本発明のMPEGストリームのタイム
コードに対する制限値を以下説明する。
Next, the limit value for the time code of the MPEG stream according to the present invention will be described below.

【0111】図11は、静止画データ用システムストリ
ームST1と音声データ用システムストリームST2の
タイムスタンプを説明する図である。
FIG. 11 is a diagram for explaining the time stamps of the still image data system stream ST1 and the audio data system stream ST2.

【0112】図11において、(a)は静止画データ用
システムストリームST1であるビデオオブジェクト
(VOB)を示す。先頭パックには、そのパックヘッダ
にはSCR1が格納され、そのパケットヘッダにはPT
S1、DTS1が格納されることを示している。また最
終パックのパックヘッダにはSCR2が格納されること
が示されている。
In FIG. 11, (a) shows a video object (VOB) which is a system stream ST1 for still image data. In the first pack, SCR1 is stored in the pack header, and PT
S1 and DTS1 are stored. Also, it is shown that SCR2 is stored in the pack header of the last pack.

【0113】(b)は音声データ用システムストリーム
ST2であるビデオオブジェクト(VOB)を示す。先
頭パックには、そのパックヘッダにSCR3が、そのパ
ケットヘッダにはPTS3が格納されることが示されて
いる。
(B) shows a video object (VOB) which is the audio data system stream ST2. The first pack indicates that SCR3 is stored in the pack header and PTS3 is stored in the packet header.

【0114】(c)は再生時に、静止画データ用システ
ムストリームST1と音声データ用システムST2とが
連続してデコーダに入力される状態を説明している。
(C) illustrates a state in which the still image data system stream ST1 and the audio data system ST2 are successively input to the decoder during reproduction.

【0115】本発明においては、静止画データ用システ
ムストリームST1と音声データ用システムストリーム
ST2とを、あたかも1つのシステムストリームとデコ
ーダに処理させるために、静止画データを構成するシス
テムストリームST1の最終パックのSCR2と、オー
ディオデータを構成するシステムストリームST2の先
頭パックのSCR3に下記の式で規定値を設けて制限す
る。
In the present invention, the still image data system stream ST1 and the audio data system stream ST2 are processed as if they were a single system stream and a decoder. And the SCR3 of the first pack of the system stream ST2 constituting the audio data are restricted by providing prescribed values by the following formula.

【0116】 SCR2+Tp ≦ SCR3 (式1)SCR2 + Tp ≦ SCR3 (Formula 1)

【0117】ここで、Tpは1パックをデコーダへ転送
するために要する時間である。すなわち、Tpは、デマ
ルチプレクサ52にひとつのパックが入力開始されてか
ら、入力終了するまでに要する時間である。デマルチプ
レクサ52ではパックは単に振り分けられるだけである
ので、Tpは、バッファ53または57にひとつのパッ
クが入力開始されてから、入力終了するまでに要する時
間である。
Here, Tp is the time required to transfer one pack to the decoder. That is, Tp is the time required from the start of input of one pack to the demultiplexer 52 to the end of input. In the demultiplexer 52, the packs are simply distributed, so Tp is the time required from the start of input of one pack to the buffer 53 or 57 to the end of input.

【0118】(式1)は、SCR3の最小値を制限して
いる。SCR3は通常のMPEG方式であれば、0値に
なるケースが多いが、本発明はこれに(式1)の制限で
求められる値とする。
(Equation 1) limits the minimum value of SCR3. SCR3 is often a value of 0 in the case of a normal MPEG system, but the present invention uses a value obtained by the restriction of (Equation 1).

【0119】これにより、SCR2がSCR3より大き
な値となることを回避し、静止画データ用システムスト
リームと音声データ用システムストリームとをそれぞれ
構成する各パックのSCRが、2つのシステムストリー
ムにまたがって昇順に配されることを保証する。
As a result, it is possible to avoid that SCR2 becomes larger than SCR3, and the SCR of each pack constituting the system stream for still picture data and the system stream for audio data is arranged in ascending order over the two system streams. To be distributed to

【0120】また、(式1)はSCR2とSCR3の差
がTp以上であることを保証する。これにより、静止画
データ用システムストリームの最終パックの転送中に音
声データ用システムストリームの先頭パックの転送タイ
ミングが発生することを回避する。
(Equation 1) also guarantees that the difference between SCR2 and SCR3 is greater than or equal to Tp. This prevents the transfer timing of the first pack of the audio data system stream from occurring during the transfer of the last pack of the still image data system stream.

【0121】なお、パックの転送時間(Tp)は、シス
テムストリームの転送レートを8Mbpsとした場合、
55296(27MHz)になる。また、10.08M
bpsとしたときは43885(27MHz)になる。
The transfer time (Tp) of the pack is as follows when the transfer rate of the system stream is 8 Mbps.
55296 (27 MHz). In addition, 10.08M
When it is set to bps, it becomes 43885 (27 MHz).

【0122】次に、本発明のデコーダは静止画データを
構成するMPEGストリームがデコーダに入力された場
合は、その入力終了後に、STCをリセットせずに次の
音声ストリームの入力を行うように構成される。
Next, the decoder of the present invention is configured such that, when an MPEG stream constituting still picture data is input to the decoder, after the input is completed, the next audio stream is input without resetting the STC. Is done.

【0123】これは、通常、デコーダは1つシステムス
トリーム毎にSTCがリセットされるため、静止画像デ
ータの入力後にSTCがリセットされたのでは、前述し
たストリームの先頭パックのSCRの制限が意味をなさ
なくなるためである。
This is because the decoder normally resets the STC for each system stream, and if the STC is reset after the input of the still image data, the above-mentioned limitation of the SCR of the first pack of the stream means. This is because it will not be done.

【0124】この様に設定したタイムスタンプに基づい
てデコーダが処理を行うため静止画像データとオーディ
オデータを1本のMPEGストリームとして扱うことが
可能となる。すなわち、別々に記録した静止画ストリー
ムと音声ストリームをあたかも1つのシステムストリー
ムとして再生することが可能となる。
Since the decoder performs processing based on the time stamp set as described above, the still image data and the audio data can be handled as one MPEG stream. In other words, it is possible to reproduce a separately recorded still image stream and audio stream as if they were one system stream.

【0125】さらには、PTS1とPTS3は下記に示
すように所定値で等しく設定される。
Further, PTS1 and PTS3 are set equal to a predetermined value as described below.

【0126】 PTS1 = PTS3=所定値 (式2)PTS1 = PTS3 = predetermined value (Equation 2)

【0127】これにより、音声と静止画を同じタイミン
グで出力開始することができる。
Thus, the output of the audio and the still image can be started at the same timing.

【0128】所定値は、例えば、90000(90kH
z)+Tvになる。ここで(90kHz)は、その前に
示された数値が90kHzのクロックのカウント値であ
ることを示す。Tvはビデオのフレーム周期でありNT
SC信号であれば3003、PAL信号であれば360
0になる。
The predetermined value is, for example, 90000 (90 kHz).
z) + Tv. Here, (90 kHz) indicates that the numerical value indicated before that is the count value of the clock of 90 kHz. Tv is the frame period of the video and is NT
3003 for SC signal, 360 for PAL signal
It becomes 0.

【0129】次に以下、上述した(式1)、(式2)及
び、読み出しから約1秒後(90000(90kHz)
+Tv)に静止画と音声が同時に出力されるケースを用
いて、図11の各種タイムスタンプを具体的に説明す
る。
Next, the above (Equation 1) and (Equation 2) and about one second after reading (90000 (90 kHz))
Various time stamps in FIG. 11 will be specifically described using a case where a still image and a sound are simultaneously output at (+ Tv).

【0130】最初に静止画データ用VOBのタイムスタ
ンプについて説明する。
First, the time stamp of the VOB for still picture data will be described.

【0131】(1)静止画データ用VOBの先頭パック
のSCR(SCR1)は0(27MHz)である。
(1) The SCR (SCR1) of the first pack of the VOB for still image data is 0 (27 MHz).

【0132】(2)静止画データ用VOBの先頭パック
のDTS(DTS1)は90000(90kHz)であ
る。なお、静止画データ用VOBは1枚の静止画しか含
まない。
(2) The DTS (DTS1) of the first pack of the VOB for still image data is 90000 (90 kHz). Note that the VOB for still image data includes only one still image.

【0133】(3)静止画データ用VOBの先頭パック
のPTS(PTS1)は93003(90kHz)であ
る。但し、93003はビデオがNTSCの場合であっ
て、ビデオがPALの場合は93600である。これ
は、ビデオのフレーム周期(Tv)がNTSCの場合は
3003であり、ビデオがPALの場合は3600にな
るためである。また、静止画データ用VOBは1枚の静
止画しか含まないため、全てのパックはPTS1が示す
タイミングで同時に出力される。
(3) The PTS (PTS1) of the first pack of the VOB for still image data is 93003 (90 kHz). However, 93003 is the case where the video is NTSC, and 93600 when the video is PAL. This is because the frame period (Tv) of the video is 3003 when the video is PAL, and 3600 when the video is PAL. Further, since the VOB for still image data includes only one still image, all packs are output simultaneously at the timing indicated by PTS1.

【0134】(4)静止画データ用VOBの最終パック
のSCR(SCR2)は27000000(27MH
z)から1パックの転送時間(Tp)を減算した時刻以
下の値を有している。27000000(27MHz)
は基準値と称する。
(4) The SCR (SCR2) of the final pack of the still image data VOB is 27000000 (27 MHz).
It has a value equal to or less than the time obtained by subtracting the transfer time (Tp) of one pack from z). 27000000 (27MHz)
Is referred to as a reference value.

【0135】この基準値は、前述した動画データがデコ
ーダバッファに入力されてからデコードされるまでの最
長時間が1秒(27000000(27MHz))であ
ることを考慮して定められたものである。
This reference value is determined in consideration of the fact that the longest time from when the moving image data is input to the decoder buffer until it is decoded is 1 second (27000000 (27 MHz)).

【0136】すなわち、この動画データの最長蓄積時間
を静止画データでも採用した場合、静止画データ用VO
Bを構成する全てのパックは1秒(27000000
(27MHz))以内にデコーダに転送完了される必要
がある。先頭のパックのSCR(SCR1)が0の場
合、このパックはデコーダに転送後、1秒(27000
000(27MHz))以内にデコードされるため、同
じ静止画データを構成する最終パックのSCR(SCR
2)は上述したように、27000000(27MH
z)から1パックの転送時間(Tp)を減算した値にな
る。
That is, when the longest accumulation time of the moving image data is adopted also for the still image data, the still image data VO
All packs that make up B take 1 second (270,000,000
(27 MHz)). If the SCR (SCR1) of the first pack is 0, this pack is transferred to the decoder for 1 second (27000).
000 (27 MHz)), the SCR (SCR) of the last pack constituting the same still image data
2) is 270,000,000 (27 MH) as described above.
The transfer time (Tp) of one pack is subtracted from z).

【0137】前述したPTSの所定値と、この基準値を
定める意味は、エンコーダの互換である。すなわち、
(式1)、(式2)、所定値、基準値に従ってエンコー
ドした静止画用システムストリーム、オーディオ用シス
テムストリームであれば、いずれのエンコーダで生成さ
れたものであっても、本発明を適用することができる。
The above-described predetermined value of the PTS and the meaning of determining this reference value are compatible with the encoder. That is,
The present invention is applied to any still image system stream or audio system stream encoded according to (Equation 1), (Equation 2), a predetermined value, and a reference value. be able to.

【0138】なお、本実施の形態では、基準値を1秒
(27000000(27MHz))として説明した。
基準値をMaxTとすると以下の式が成立する。
In this embodiment, the reference value has been described as one second (27000000 (27 MHz)).
Assuming that the reference value is MaxT, the following equation is established.

【0139】 SCR2 + Tp ≦ MaxT (式3) SCR3 = MaxT (式4)SCR2 + Tp ≦ MaxT (Equation 3) SCR3 = MaxT (Equation 4)

【0140】次に、オーディオデータ用VOBのタイム
スタンプについて説明する。
Next, the time stamp of the audio data VOB will be described.

【0141】(1)先頭オーディオパックのSCR(S
CR3)は27000000(27MHz)である。こ
れは、先行して入力された静止画データ用VOBに連続
して、(式1)を満たし最短時間でデコーダに入力する
値である。また、静止画のPTS(PTS1)を930
03(90kHz)としたために、音声を同時に出力す
るためには、少なくともSCR値はこれより少ない値と
することが必要になる。
(1) SCR (S
CR3) is 27000000 (27 MHz). This is a value that satisfies (Equation 1) and is input to the decoder in the shortest time, following the previously input still image data VOB. Further, the PTS (PTS1) of the still image is set to 930
Since the frequency is set to 03 (90 kHz), in order to output voice simultaneously, it is necessary to set the SCR value to at least a smaller value.

【0142】(2)先頭オーディオフレームのPTS
(PTS3)は93003(90kHz)である。但
し、93003はビデオがNTSCの場合であって、ビ
デオがPALの場合は93600である。
(2) PTS of the first audio frame
(PTS3) is 93003 (90 kHz). However, 93003 is the case where the video is NTSC, and 93600 when the video is PAL.

【0143】もちろん、(式1)、(式2)を満たすよ
うに静止画像データ用VOBおよびオーディオデータ用
VOBが夫々エンコードされていれば良く、必ずしも前
述した条件の値をそのまま満たす必要はない。
It is needless to say that the still image data VOB and the audio data VOB need only be encoded so as to satisfy (Equation 1) and (Equation 2), and it is not always necessary to satisfy the above-described condition values.

【0144】ビデオがNTSCであり、SCRの初期値
が0ではなく、1秒である27000000(27MH
z)とした場合は下記になる。 SCR1=27000000(=1秒) SCR2≦53944704(=SCR3−Tp) SCR3=54000000(=SCR1+1秒) PTS1=PTS3=183003(=DTS1+30
03) DTS1=180000(=1秒)
The video is NTSC, and the initial value of the SCR is not 0 but 27000000 (27 MHz) which is 1 second.
In the case of z), the following is obtained. SCR1 = 27000000 (= 1 second) SCR2 ≦ 5394704 (= SCR3-Tp) SCR3 = 54000000 (= SCR1 + 1 second) PTS1 = PTS3 = 183003 (= DTS1 + 30)
03) DTS1 = 180000 (= 1 second)

【0145】また、NTSCの場合でSCRの初期値を
0、PTSを1秒とした場合は下記になる。 SCR1=0 SCR2≦26043804(=SCR3−Tp) SCR3=26099100(=1秒−3003×30
0) PTS1=PTS3=90000(=1秒) DTS1=86997(=PTS1−3003)
When the initial value of the SCR is 0 and the PTS is 1 second in the case of NTSC, the following is obtained. SCR1 = 0 SCR2 ≦ 26043804 (= SCR3-Tp) SCR3 = 26099100 (= 1 second−3003 × 30)
0) PTS1 = PTS3 = 90000 (= 1 second) DTS1 = 86997 (= PTS1-3003)

【0146】また、PALの場合で、SCRの初期値を
1秒である27000000(27MHz)とした場合
は下記になる。 SCR1=27000000(=1秒) SCR2≦53944704(=SCR3−Tp) SCR3=54000000(=SCR1+1秒) PTS1=PTS3=183600(=DTS1+36
00) DTS1=180000(=1秒)
In the case of PAL, if the initial value of SCR is 27000000 (27 MHz), which is one second, the following is obtained. SCR1 = 27000000 (= 1 second) SCR2 ≦ 5394704 (= SCR3-Tp) SCR3 = 54000000 (= SCR1 + 1 second) PTS1 = PTS3 = 183600 (= DTS1 + 36)
00) DTS1 = 180000 (= 1 second)

【0147】また、PALの場合で、SCRの初期値を
0、PTSを1秒とした場合は下記になる。 SCR1=0 SCR2≦25864704(=SCR3−Tp) SCR3=25920000(=1秒−3600×30
0) PTS1=PTS3=90000(=1秒) DTS1=86400(=PTS1−3600)
In the case of PAL, when the initial value of the SCR is 0 and the PTS is 1 second, the following is obtained. SCR1 = 0 SCR2 ≦ 25864704 (= SCR3-Tp) SCR3 = 259920000 (= 1 second−3600 × 30
0) PTS1 = PTS3 = 90000 (= 1 second) DTS1 = 86400 (= PTS1-3600)

【0148】また、伝送速度が10.08Mbpsで、
NTSCの場合は下記になる。 SCR1=0 SCR2≦26956115(=SCR3−Tp(=4
3885)) SCR3=27000000(=1秒) PTS1=PTS3=93003(=DTS1+300
3) DTS1=90000(=1秒)
When the transmission speed is 10.08 Mbps,
The case of NTSC is as follows. SCR1 = 0 SCR2 ≦ 26956115 (= SCR3-Tp (= 4
3885)) SCR3 = 27000000 (= 1 second) PTS1 = PTS3 = 93003 (= DTS1 + 300
3) DTS1 = 90000 (= 1 second)

【0149】また、伝送速度が10.08Mbpsで、
PALの場合は下記になる。 SCR1=0 SCR2≦26956115(=SCR3−Tp(=4
3885)) SCR3=27000000(=1秒) PTS1=PTS3=93600(=DTS1+360
0) DTS1=90000(=1秒)
Further, when the transmission speed is 10.08 Mbps,
In the case of PAL, it becomes as follows. SCR1 = 0 SCR2 ≦ 26956115 (= SCR3-Tp (= 4
3885)) SCR3 = 27000000 (= 1 second) PTS1 = PTS3 = 93600 (= DTS1 + 360
0) DTS1 = 90000 (= 1 second)

【0150】次に上述した制限の下設定されたタイムス
タンプを有するMPEGストリームがデコーダで処理さ
れる動作を図19、図20を用いて説明する。なお、デ
コーダの各構成については図5を参照する。
Next, an operation in which an MPEG stream having a time stamp set under the above-described restrictions is processed by a decoder will be described with reference to FIGS. Note that FIG. 5 is referred to for each configuration of the decoder.

【0151】図19は、前述した図18と同様に、Phot
o#1が再生される際の、本発明の静止画カメラのデコー
ダの動作と各タイムスタンプの関係を説明する図であ
る。
FIG. 19 is similar to FIG.
FIG. 8 is a diagram illustrating the relationship between the operation of the decoder of the still image camera of the present invention and each time stamp when o # 1 is reproduced.

【0152】図19(a)、(b)はPhoto#1の静止画
であるStill picture#1と音声であるAudio#1がそれぞれ
出力される状態を示す。図19(c)、(d)はStill
picture#1とAudio#1がそれぞれデコードされ出力される
際のオーディオデコーダバッファ57とビデオデコーダ
バッファ53のバッファ占有量の推移をそれぞれ示す。
図19(e)はPhoto#1がMPEGストリームであるス
トリーム#1とストリーム#2としてディスクに格納さ
れる際のパック配置及びパックに格納されるそれぞれの
タイムスタンプ(SCR、PTS、DTS)を示す。
FIGS. 19A and 19B show a state where Still picture # 1 which is a still image of Photo # 1 and Audio # 1 which is audio are output. FIGS. 19C and 19D show stills.
The transition of the buffer occupancy of the audio decoder buffer 57 and the video decoder buffer 53 when the picture # 1 and the audio # 1 are respectively decoded and output are shown.
FIG. 19E shows the pack arrangement when Photo # 1 is stored as an MPEG stream as stream # 1 and stream # 2 on a disc, and the respective time stamps (SCR, PTS, DTS) stored in the pack. .

【0153】なお、図18と同様にパケット構造の図示
等は省略している。
As in FIG. 18, illustration of the packet structure and the like are omitted.

【0154】本発明の静止画カメラの再生動作の第1の
説明として、最初に図19(e)で示すストリーム#1
とストリーム#2を構成する各パックがデマルチプレク
サ52に転送される動作を説明する。
As a first explanation of the reproducing operation of the still picture camera of the present invention, first, stream # 1 shown in FIG.
The operation of transferring each pack constituting the stream # 2 to the demultiplexer 52 will be described.

【0155】図19(e)に示すようにストリーム#1
は先頭から、ビデオパックV1、ビデオパックV2、ビ
デオパックV3、ビデオパックV4の順に、各パックが
マルチプレクスされた構成を有する。また、ストリーム
#2は先頭から、オーディオパックA1、オーディオパ
ックA2がマルチプレクスされた構成を有する。ここで
着目すべき点は、ストリーム#1はビデオパックのみか
ら構成され、ストリーム#2はオーディオパックのみか
ら構成される点である。
As shown in FIG. 19 (e), stream # 1
Has a configuration in which each pack is multiplexed in the order of video pack V1, video pack V2, video pack V3, and video pack V4 from the top. Also, stream # 2 has a configuration in which audio packs A1 and A2 are multiplexed from the beginning. It should be noted that stream # 1 is composed of only video packs, and stream # 2 is composed of only audio packs.

【0156】また各パックにはSCRが格納される。図
19(e)に示すように、ストリーム#1のビデオパッ
クV1のSCR#1には時刻t1が、ビデオパックV2
のSCR#2には時刻t2が、ビデオパックV3のSC
R#3には時刻t3が、ビデオパックV4のSCR#4
には時刻t4がSCR値として設定される。また、先頭
のビデオパックにはPTS値とDTS値が設定される。
ビデオパックV1のPTS#1には時刻t8が、DTS
#1には時刻t6が設定される。
Each pack stores an SCR. As shown in FIG. 19E, the time t1 is set in the SCR # 1 of the video pack V1 of the stream # 1 and the video pack V2
Time S2 in the SCR # 2 of the video pack V3
In R # 3, the time t3 is the SCR # 4 of the video pack V4.
, The time t4 is set as the SCR value. Further, a PTS value and a DTS value are set in the first video pack.
The time t8 is set in the PTS # 1 of the video pack V1 by the DTS.
Time t6 is set in # 1.

【0157】本実施の形態では、先頭パックのSCR値
である時刻t1は、前述した説明での値と同じく0であ
る。また、最終のビデオパックであるビデオパックV4
のSCR値である時刻t4は、27000000(27
MHz)−Tpである。Tpは前述したようにパック転
送時間であり、55296(27MHz)である。ま
た、ビデオデータはNTSC方式であり、PTS値であ
る時刻t8は93003(90KHz)、DTS値であ
る時刻t6は90000(90KHz)になる。
In the present embodiment, the time t1, which is the SCR value of the first pack, is 0, as in the above description. Also, video pack V4 which is the final video pack
At time t4, which is the SCR value of 27000000 (27
MHz) -Tp. Tp is the pack transfer time as described above, and is 55296 (27 MHz). The video data is in the NTSC format, and the time t8, which is the PTS value, is 93003 (90 KHz), and the time t6, which is the DTS value, is 90000 (90 KHz).

【0158】ストリーム#2のオーディオパックA1の
SCR#5には時刻t7が、オーディオパックA2のS
CR#6には時刻t9がSCR値として設定される。ま
たオーディオパックA1とオーディオパックA2にはP
TS値が設定される。オーディオパックA1のPTS#
5には時刻t8が、オーディオパックA2のPTS#6
には時刻t10が設定される。
At time t7, SCR # 5 of the audio pack A2 in the audio pack A2 of the stream # 2
Time t9 is set as an SCR value in CR # 6. The audio pack A1 and the audio pack A2 have P
The TS value is set. PTS # of audio pack A1
5, the time t8 corresponds to the PTS # 6 of the audio pack A2.
Is set to time t10.

【0159】本実施の形態では、先頭のオーディオパッ
クA1のSCR値である時刻t7は27000000
(27MHz)である。またオーディオパックA1のP
TS値である時刻t8は、ビデオデータのPTS値と同
じであるので93003(90KHz)である。
In this embodiment, the time t7, which is the SCR value of the first audio pack A1, is 27000000.
(27 MHz). In addition, P of audio pack A1
The time t8, which is the TS value, is 93003 (90 KHz) because it is the same as the PTS value of the video data.

【0160】ストリーム#1を構成する各パックは、先
頭パックであるビデオパックV1のSCR#1の値であ
る時刻t1でSTCをリセットした後、各パックのSC
R値が示すタイミングでデマルチプレクサ52に入力さ
れる。
Each pack constituting stream # 1 resets the STC at time t1, which is the value of SCR # 1 of video pack V1, which is the first pack, and then resets the SC of each pack.
The signal is input to the demultiplexer 52 at the timing indicated by the R value.

【0161】すなわち、図19(e)に示すように、最
初はビデオパックV1が時刻t1でデマルチプレクサ5
2に入力され、次いでビデオパックV2が時刻t2で、
次いでビデオパックV3が時刻t3で、次いでビデオパ
ックV4が時刻t4でそれぞれ、デマルチプレクサ52
に入力される。
That is, as shown in FIG. 19 (e), first, the video pack V1 is supplied to the demultiplexer 5 at time t1.
2 and then the video pack V2 at time t2,
Next, the video pack V3 at time t3 and then the video pack V4 at time t4, respectively.
Is input to

【0162】ここで、図18で説明した静止画カメラの
デコード処理と異なる点は、ストリーム#1に次いで、
デコーダのSTCがリセットされることなく、ストリー
ム#2を構成する各パックがそれぞれのSCRが示すタ
イミングでデマルチプレクサ52に入力される点であ
る。
Here, the point different from the decoding processing of the still picture camera described with reference to FIG.
The point is that each pack forming the stream # 2 is input to the demultiplexer 52 at the timing indicated by each SCR without resetting the STC of the decoder.

【0163】図19に示すように、最初はオーディオパ
ックA1が時刻t7でデマルチプレクサ52に入力さ
れ、次いでビデオパックA2が時刻t9で、それぞれ、
デマルチプレクサ52に入力される。
As shown in FIG. 19, first, the audio pack A1 is input to the demultiplexer 52 at time t7, and then the video pack A2 is input at time t9.
The signal is input to the demultiplexer 52.

【0164】ここで着目すべきは、最終のビデオパック
V4のSCR#4と先頭のオーディオパックA1のSC
R#5の間に前述した(式1)の関係が成立することで
ある。すなわち、次の関係が成立する。
It should be noted here that the SCR # 4 of the last video pack V4 and the SC of the first audio pack A1
That is, the above-described relationship of (Equation 1) is established between R # 5. That is, the following relationship is established.

【0165】 SCR#4+Tp ≦ SCR#5 (式1)SCR # 4 + Tp ≦ SCR # 5 (Equation 1)

【0166】このため、ストリーム#1とストリーム#
2の間でSCR値の連続性が保証され、かつ、その間隔
は少なくともパック転送時間以上であることが保証され
ることになり、デコーダはハングアップすることなく2
つのストリームを連続して処理することができる。
Therefore, stream # 1 and stream # 1
2, the continuity of the SCR value is guaranteed, and the interval is guaranteed to be at least equal to or longer than the pack transfer time.
One stream can be processed continuously.

【0167】各パックが入力されたデマルチプレクサ5
2は入力パックがビデオパックであればビデオバッファ
53に出力し、入力パックがオーディオパックであれば
オーディオバッファ57に出力する。
Demultiplexer 5 to which each pack is input
2 outputs to the video buffer 53 if the input pack is a video pack, and outputs to the audio buffer 57 if the input pack is an audio pack.

【0168】次に本発明の静止画カメラの再生動作の第
2の説明として、ビデオバッファ53に出力された各ビ
デオパックのデータのデコード及び出力動作を説明す
る。
Next, as a second explanation of the reproduction operation of the still picture camera of the present invention, the operation of decoding and outputting the data of each video pack output to the video buffer 53 will be described.

【0169】図19(c)に示すようにデマルチプレク
サ52から出力された各ビデオパックは、無視できる遅
れはあるが、SCRのタイミングである時刻t1、時刻
t2、時刻t3、時刻t4のタイミングでビデオバッフ
ァ53に蓄積される。静止画Still picture#1はビデオ
パックV1からV4までで構成されるため、ビデオパッ
クV4がビデオバッファ53に蓄積されれば静止画Stil
l picture#1を構成する全てのデータがビデオバッファ
53に蓄積されたことになる。図19(e)に示すよう
にビデオパックV1、V2、V3、V4を構成するピク
チャのDTS値は時刻t6である。このため、蓄積され
たデータは時刻t6のタイミングでビデオデコーダ54
によりデコードされ、ビデオバッファのバッファ占有量
が減少する。
As shown in FIG. 19 (c), each video pack output from the demultiplexer 52 has a negligible delay, but at the timings of time t1, time t2, time t3, and time t4, which are SCR timings. It is stored in the video buffer 53. Since still picture Still picture # 1 is composed of video packs V1 to V4, if video pack V4 is stored in video buffer 53, still picture Still
This means that all the data making up picture # 1 has been stored in the video buffer 53. As shown in FIG. 19E, the DTS values of the pictures constituting the video packs V1, V2, V3, V4 are at time t6. Therefore, the stored data is transferred to the video decoder 54 at the timing of time t6.
To reduce the buffer occupancy of the video buffer.

【0170】デコードされた各ビデオパックのデータは
Iピクチャを構成し、これは、静止画データであるStil
l picture#1である。デコードされたIピクチャはリオ
ーダバッファ55に格納され、PTS値である時刻t8
のタイミングで外部に出力される。
[0170] The decoded data of each video pack constitutes an I picture, which is composed of still image data Stil.
l picture # 1. The decoded I picture is stored in the reorder buffer 55, and the PTS value t8
Is output to the outside at the timing of.

【0171】次に本発明の静止画カメラの再生動作の第
3の説明として、オーディオバッファ57に出力された
オーディオパックのデータがデコードされ出力される動
作と各タイムスタンプの関係を説明する。
Next, as a third description of the reproducing operation of the still picture camera of the present invention, the relationship between the operation of decoding and outputting the audio pack data output to the audio buffer 57 and each time stamp will be described.

【0172】図19(d)に示すようにデマルチプレク
サ52から出力された各オーディオパックは時刻t7、
時刻t9のタイミングでオーディオバッファ53に蓄積
されオーディバッファ57の占有量がそれぞれ増加す
る。オーディオデータはビデオデータとは異なり、PT
SとDTSが等しいため、オーディオデコーダ57で各
パックのデータがデコードされると同時に音声出力がな
される。すなわち、オーディオバッファ57に蓄積され
たオーディオパックA1のデータは、PTS値である時
刻t8のタイミングでオーディオデコーダ57によりデ
コードされ音声出力が開始される。また、時刻t9のタ
イミングでオーディオバッファ57に蓄積されたオーデ
ィオパックA2のデータは、PTS値である時刻t10
のタイミングで、オーディオデコード57によりデコー
ドされ音声出力される。
As shown in FIG. 19D, each audio pack output from the demultiplexer 52 is output at time t7,
At the time t9, the occupancy of the audio buffer 57 stored in the audio buffer 53 increases. Audio data differs from video data in that
Since S and DTS are equal, the audio decoder 57 decodes the data of each pack and outputs audio at the same time. That is, the data of the audio pack A1 stored in the audio buffer 57 is decoded by the audio decoder 57 at the time t8, which is the PTS value, and the audio output is started. The data of the audio pack A2 stored in the audio buffer 57 at the timing of the time t9 is the PTS value at the time t10.
The audio is decoded by the audio decoder 57 and output as audio at the timing shown in FIG.

【0173】ここで着目すべき点は、静止画データを構
成するストリーム#1とオーディオデータを構成するス
トリーム#2のPTS値が同じ点である。このためスト
リーム#1とストリーム#2は別々にデコーダに入力さ
れるが、PTS値が同じため同時に出力されることにな
る。
The point to be noted here is that the stream # 1 constituting still image data and the stream # 2 constituting audio data have the same PTS value. For this reason, stream # 1 and stream # 2 are separately input to the decoder, but are output simultaneously since the PTS values are the same.

【0174】以上、前述したタイムスタンプの制限値の
下であれば、静止画データのみからなるMPEGストリ
ームと音声データのみからなるMPEGストリームとが
デコーダで連続的に処理され、かつ、同時に音声と映像
表示を行えることが分かる。
As described above, if the time stamp is below the limit value, the MPEG stream consisting of only the still image data and the MPEG stream consisting of only the audio data are continuously processed by the decoder, and at the same time, the audio and the video are simultaneously processed. It can be seen that the display can be performed.

【0175】なお、静止画と音声のMPEGストリーム
が別々にディスクに記録されるため、静止画の撮影後に
同時に出力される音声データを変更することは容易であ
る。
Since the still image and the audio MPEG stream are separately recorded on the disk, it is easy to change the audio data output simultaneously after the still image is captured.

【0176】例えば、図19で説明したStill Picture#
1とAudio#1が撮影時に光ディスクに記録されたデータだ
とする。Still Picture#1と同時に出力する音声を変更
したい場合は、Audio#1であるMPEGストリームと同
様に(式1)、(式2)を満たすタイムスタンプを有す
るMPEGストリームを別途記録すれば良い。Audio#2
を別途、MPEGストリーム#3として追加記録した例
を図20に示す。
For example, the Still Picture # described with reference to FIG.
It is assumed that 1 and Audio # 1 are data recorded on the optical disk at the time of shooting. If it is desired to change the audio output simultaneously with Still Picture # 1, an MPEG stream having a time stamp satisfying (Equation 1) and (Equation 2) may be separately recorded in the same manner as the MPEG stream of Audio # 1. Audio # 2
20 is separately recorded as MPEG stream # 3.

【0177】図示していないが、Still Picture#1であ
るMPEGストリームと同時に再生されるオーディオデ
ータ用MPEGストリームを示す管理情報がディスクに
は記録されている。この管理情報を更新することによ
り、Audio#1の代わりにAudio#2であるMPEGストリー
ムがStill Picture#1であるMPEGストリームと同時
に再生されることになる。
Although not shown, management information indicating an MPEG stream for audio data reproduced simultaneously with the MPEG stream of Still Picture # 1 is recorded on the disc. By updating the management information, the MPEG stream of Audio # 2 is reproduced simultaneously with the MPEG stream of Still Picture # 1 instead of Audio # 1.

【0178】(DVD−RAMの説明)次に前述したM
PEGストリームを記録するのに好適な記録媒体及びそ
の記録フォーマットとしてDVD−RAMを説明する。
(Explanation of DVD-RAM) Next, the M
A DVD-RAM will be described as a recording medium suitable for recording a PEG stream and its recording format.

【0179】近年、書き換え可能な光ディスクの高密度
化が進みコンピュータデータやオーディオデータの記録
に留まらず、画像データの記録が可能となりつつある。
例えば、光ディスクの信号記録面には、従来から凸凹上
のガイド溝が形成されている。
In recent years, the density of rewritable optical discs has been increased, and it is becoming possible to record not only computer data and audio data but also image data.
For example, a guide groove on an uneven surface is conventionally formed on a signal recording surface of an optical disk.

【0180】従来は凸または凹にのみ信号を記録してい
たが、ランド・グループ記録法により凸凹両方に信号を
記録することが可能となった。これにより約2倍の記録
密度向上が実現した。
Conventionally, signals were recorded only on the convex or concave portions. However, signals can be recorded on both convex and concave portions by the land group recording method. As a result, the recording density was approximately doubled.

【0181】また、記録密度を向上させるために有効な
CLV方式(線速度一定記録)の制御を簡易化し実用化
を容易とするゾーンCLV方式なども考案、実用化され
ている。
Further, a zone CLV system which simplifies the control of the CLV system (constant linear velocity recording) effective for improving the recording density and facilitates the practical use has been devised and put into practical use.

【0182】これらの大容量化を目指す光ディスクを用
いて如何に画像データを含むAVデータを記録し、従来
のAV機器を大きく超える性能や新たな機能を実現する
かが今後の大きな課題である。
It is a major task in the future how to record AV data including image data using such optical disks aiming at increasing the capacity and to realize performance and new functions that greatly exceed conventional AV equipment.

【0183】このような大容量で書き換え可能な光ディ
スクの出現により、AVの記録・再生も従来のテープに
代わり光ディスクが主体となることが考えられる。テー
プからディスクへの記録メディアの移行はAV機器の機
能・性能面で様々な影響を与えるものである。
With the advent of such a large-capacity and rewritable optical disk, it is conceivable that AV recording and reproduction will be mainly performed by optical disks instead of conventional tapes. The transition of recording media from tape to disk has various effects on the functions and performance of AV equipment.

【0184】ディスクへの移行において最大の特徴はラ
ンダムアクセス性能の大幅な向上である。仮にテープを
ランダムアクセスする場合、一巻きの巻き戻しに通常数
分オーダーの時間が必要である。これは光ディスクメデ
ィアにおけるシーク時間(数10ms以下)に比べて桁
違いに遅い。従ってテープは実用上ランダムアクセス装
置になり得ない。
The greatest feature in the transition to a disk is a significant improvement in random access performance. In the case of random access to the tape, it usually takes several minutes to rewind one tape. This is orders of magnitude slower than the seek time (several tens of ms or less) in optical disk media. Thus, tape cannot be a random access device in practice.

【0185】このようなランダムアクセス性能によっ
て、従来のテープでは不可能であったAVデータの分散
記録が光ディスクでは可能となった。
With such random access performance, distributed recording of AV data, which was impossible with a conventional tape, has become possible with an optical disc.

【0186】(DVD−RAM上の論理構成)まずDV
D−RAM上の論理構成について図8を用いて説明す
る。図8(a)は、ファイルシステムにより示されるデ
ィスク上のディレクトリ・ファイルが記録領域に保持さ
れている様子を示している。
(Logic Configuration on DVD-RAM) First, DV
The logical configuration on the D-RAM will be described with reference to FIG. FIG. 8A shows a state in which a directory file on the disk indicated by the file system is held in the recording area.

【0187】光ディスクの記録領域は複数の物理セクタ
が内周から外周にかけてスパイラルに配置される。
In the recording area of the optical disk, a plurality of physical sectors are spirally arranged from the inner circumference to the outer circumference.

【0188】光ディスクの物理セクタは内周から外周に
かけて3つの領域をそれぞれ構成する。最内周にはリー
ドイン領域があり、ついで、データ領域、最外周にはリ
ードアウト領域が配置される。各セクタにはアドレス部
とデータ部があり。アドレス部には、セクタの光ディス
ク上の位置を特定するためのアドレス情報と、セクタが
いずれの領域に所属するかを示す識別情報が格納され
る。セクタのデータ部には、それぞれディジタルデータ
が格納される。
The physical sector of the optical disk constitutes three areas from the inner circumference to the outer circumference. There is a lead-in area at the innermost circumference, followed by a data area, and a lead-out area at the outermost circumference. Each sector has an address part and a data part. The address section stores address information for specifying the position of the sector on the optical disk and identification information indicating to which region the sector belongs. Digital data is stored in each data portion of the sector.

【0189】リードイン領域のセクタのデータ部には、
再生装置を初期化するための情報が格納される。典型的
にはサーボを安定させるために必要な規準信号や他のメ
ディアとの識別信号などが記録されている。
In the data portion of the sector in the lead-in area,
Information for initializing the playback device is stored. Typically, a reference signal necessary for stabilizing the servo, an identification signal with another medium, and the like are recorded.

【0190】データ領域のセクタのデータ部には、ディ
スクに格納されるアプリケーションを構成するディジタ
ルデータが記録される。
In the data portion of the sector of the data area, digital data constituting an application stored on the disk is recorded.

【0191】リードアウト領域は、再生装置に対し記録
領域の終了を示す領域である。
[0191] The lead-out area is an area indicating the end of the recording area to the reproducing apparatus.

【0192】データ領域の先頭にはボリューム情報と呼
ばれるファイルシステムを構成する管理情報が記録され
る。ファイルシステムはディスク上の複数のセクタをグ
ループ化して管理するための目次情報である。複数のセ
クタをファイルとして、複数のファイルをディレクトリ
としてグループ化して管理する。本発明の実施の形態で
はISO13346で規定されたファイルシステムを利
用する。
At the head of the data area, management information that constitutes a file system called volume information is recorded. The file system is index information for grouping and managing a plurality of sectors on the disk. Manage by grouping a plurality of sectors as files and a plurality of files as directories. In the embodiment of the present invention, a file system defined by ISO13346 is used.

【0193】本実施の形態では、光ディスクは、図8
(a)に示すディレクトリ・ファイル構造を有する。
In the present embodiment, the optical disk is
It has the directory / file structure shown in FIG.

【0194】DVDレコーダが扱う全てのデータは、図
8(a)に示す様にROOTディレクトリ直下のVID
EO_RTディレクトリ下に置かれる。
As shown in FIG. 8 (a), all data handled by the DVD recorder is VID directly under the ROOT directory.
It is located under the EO_RT directory.

【0195】DVDレコーダが扱うファイルは大きく2
種類に区別され、1つの管理情報ファイルと複数(少な
くとも1つ)のAVファイルである。
The file handled by the DVD recorder is roughly 2
One management information file and a plurality (at least one) of AV files are classified according to types.

【0196】(管理情報ファイル)次に図9(a)を用
いて管理情報ファイルの中身について説明する。
(Management Information File) Next, the contents of the management information file will be described with reference to FIG.

【0197】管理情報ファイル内には、大きく分けてV
OBテーブルとPGCテーブルに区分けされる。VOB
(Video Object)とはMPEGのプログラ
ムストリームであり、PGC(Program Cha
in)はVOB内の任意の部分区間(または全区間)を
一つの論理再生単位とするCellの再生順序を定義す
るものである。言い換えれば、VOBはMPEGとして
意味を持つ一つの単位であり、PGCはプレーヤが再生
を行う一つの単位である。
In the management information file, V
It is divided into an OB table and a PGC table. VOB
(Video Object) is an MPEG program stream, and is a PGC (Program Cham).
in) defines the playback order of the Cell using an arbitrary partial section (or all sections) in the VOB as one logical playback unit. In other words, VOB is one unit having a meaning as MPEG, and PGC is one unit in which a player performs reproduction.

【0198】VOBテーブルは、中にVOB数(Num
ber_of_VOBs)と各VOB情報が記録され、
VOB情報は対応するAVファイル名(AV_File
_Name)、ディスク内でのVOB識別子(VOB_
ID)、AVファイル内でのスタートアドレス(VOB
_Start_Address)、AVファイル内での
終了アドレス(VOB_End_Address)、V
OBの再生時間長(VOB_Playback_Tim
e)、ストリームの属性情報(VOB_Attribu
te)から構成される。
The VOB table contains the number of VOBs (Num
ber_of_VOBs) and each VOB information are recorded,
The VOB information includes a corresponding AV file name (AV_File).
_Name), the VOB identifier (VOB_
ID), the start address (VOB) in the AV file
_Start_Address), the end address (VOB_End_Address) in the AV file, V
OB playback time length (VOB_Playback_Tim)
e), stream attribute information (VOB_Attribute)
te).

【0199】PGCテーブルは、中にPGC数(Num
ber_of_VOBs)と各PGC情報が記録され、
PGC情報はPGC内のCell数(Number_o
f_Cells)と各Cell情報から構成され、Ce
ll情報は対応するVOB_ID、VOB内での再生開
始時刻(Cell_Start_Time)、VOB内
での再生時間(Cell_Playback_Tim
e)、VOB内での再生開始アドレス(Cell_St
art_Address)、VOB内での再生終了アド
レス(Cell_End_Address)と、静止画
使用時に同時に再生する音声データの存在を示すオーデ
ィオフラグ(Audio_Flag)とオーディオ用に
拡張したVOB_ID、Cell_Start_Tim
e、Cell_Playback_Time、Cell
_Start_Address、Cell_End_A
ddressから構成される。
The PGC table contains the number of PGCs (Num
ber_of_VOBs) and respective PGC information are recorded,
The PGC information is the number of cells in the PGC (Number_o).
f_Cells) and each Cell information.
The 11 information includes a corresponding VOB_ID, a reproduction start time in the VOB (Cell_Start_Time), and a reproduction time in the VOB (Cell_Playback_Tim).
e), playback start address in VOB (Cell_St)
art_Address), a reproduction end address in the VOB (Cell_End_Address), an audio flag (Audio_Flag) indicating the presence of audio data to be reproduced simultaneously when using a still image, and VOB_ID and Cell_Start_Tim extended for audio.
e, Cell_Playback_Time, Cell
_Start_Address, Cell_End_A
address.

【0200】ここで着目すべき点は、オーディオフラグ
(Audio_Flag)である。オーディオフラグは
静止画に対し、同時に出力される音声があるか否かを示
している。
The point to be noted here is the audio flag (Audio_Flag). The audio flag indicates whether or not there is audio output simultaneously with respect to the still image.

【0201】(AVファイル)次に、図9(b)を用い
てAVファイルについて説明する。AVファイルは複数
(少なくとも一つ)のVOBから構成され、VOBはデ
ィスク上で連続的に記録され、さらに、同一のAVファ
イルに所属するVOBはディスク上の配置がそれぞれ連
続する。AVファイル内のVOBは前述した管理情報フ
ァイルのVOB情報で管理されている。プレーヤは、最
初に管理情報ファイルにアクセスし、VOBの開始アド
レスおよび終了アドレスを読み出すことで、VOBへの
アクセスが可能になる。また、VOB内は論理的な再生
単位としてCellが定義される。CellはVOBの
部分再生区間(または全区間)であり、ユーザが自由に
設定が可能である。このCellによって、実際のAV
データの操作を行う事無しに簡易な編集を行う事が可能
である。VOBと同様にCellへのアクセス情報は、
管理情報ファイル内のCell情報内で管理されてい
る。プレーヤは、最初に管理情報ファイルにアクセス
し、Cellの開始アドレスおよび終了アドレスを読み
出すことで、Cellへのアクセスが可能になる。
(AV File) Next, an AV file will be described with reference to FIG. An AV file is composed of a plurality (at least one) of VOBs, and the VOBs are recorded continuously on the disk, and the VOBs belonging to the same AV file are arranged continuously on the disk. The VOB in the AV file is managed by the VOB information of the management information file described above. The player first accesses the management information file and reads out the start address and end address of the VOB, thereby making it possible to access the VOB. In the VOB, Cell is defined as a logical reproduction unit. Cell is a partial playback section (or entire section) of the VOB, and can be freely set by the user. With this Cell, actual AV
Simple editing can be performed without performing data manipulation. Like VOB, access information to Cell is
It is managed in the Cell information in the management information file. The player can access the cell by first accessing the management information file and reading the start address and end address of the cell.

【0202】Cellのアドレス情報はVOBを規準と
し、VOBのアドレス情報はAVファイルを規準とする
ため、実際には、Cellのアドレス情報にVOBのア
ドレス情報を加算しAVファイル内でのアドレス情報を
計算して、プレーヤはAVファイルにアクセスを行う。
Since the address information of the cell is based on the VOB and the address information of the VOB is based on the AV file, the address information of the VOB is actually added to the address information of the cell, and the address information in the AV file is actually obtained. After calculating, the player accesses the AV file.

【0203】(静止画像データとオーディオデータのリ
ンク)次に、静止画とオーディオの同期再生を行うため
の仕組みについて、図10を用いて説明する。
(Link Between Still Image Data and Audio Data) Next, a mechanism for synchronously reproducing a still image and audio will be described with reference to FIG.

【0204】図10(a)は、前述した管理情報ファイ
ルの一部である。図10(a)に示す様に静止画像を対
象とするCellは、静止画像データとオーディオデー
タ夫々用のVOBへのアクセス情報(VOB_ID、C
ell_Start_Time、Cell_Playb
ack_Time、Cell_Start_Addre
ss、Cell_End_Address)を有してい
る。
FIG. 10A shows a part of the management information file described above. As shown in FIG. 10A, the Cell for a still image includes VOB access information (VOB_ID, COB) for still image data and audio data, respectively.
cell_Start_Time, Cell_Playb
ack_Time, Cell_Start_Addre
ss, Cell_End_Address).

【0205】オーディオフラグは静止画データと共に再
生されるオーディオデータが存在するか否かを示す。こ
のため、オーディオフラグが1にセットされている場合
は、静止画像データと共に出力されるオーディオデータ
が存在することを示すと共に、オーディオデータ用のV
OBのアクセス情報がCellに存在することを意味す
る。、また、オーディオフラグが0にリセットされてい
る場合は、静止画像データと共に出力されるオーディオ
データが存在しないことを示す。この構成によって静止
画像データとオーディオデータとの関連付けが可能であ
る。
The audio flag indicates whether or not there is audio data to be reproduced together with the still image data. Therefore, if the audio flag is set to 1, it indicates that there is audio data to be output together with the still image data, and the audio data V
This means that the OB access information exists in the Cell. When the audio flag is reset to 0, it indicates that there is no audio data output together with the still image data. With this configuration, it is possible to associate the still image data with the audio data.

【0206】図10(b)は、静止画像データ/オーデ
ィオデータ用AVファイルを示す図である。静止画像デ
ータ/オーディオデータ用AVファイル内は、複数のV
OBが格納されているが、各VOBは静止画像データ用
VOBか、オーディオデータ用VOBのいずれかであっ
て、静止画像データとオーディオデータとがマルチプレ
クスしたVOBが格納されている事は無い。静止画像デ
ータ用VOBは、動画像データ用VOBと異なり、フレ
ーム内圧縮がされたIピクチャ1枚のビデオフレームだ
けから構成され、オーディオデータ用VOBは、全てが
オーディオデータだけから構成される。この様な静止画
像データ用VOBとオーディオデータ用VOBを夫々C
ell情報で参照し、更にPGCで静止画Cellの再
生順序を定義することで、静止画像およびオーディオデ
ータの再生制御情報が構成される。
FIG. 10B shows an AV file for still image data / audio data. In the AV file for still image data / audio data, a plurality of V
Although OBs are stored, each VOB is either a VOB for still image data or a VOB for audio data, and a VOB in which still image data and audio data are multiplexed is never stored. The VOB for still image data is different from the VOB for moving image data, and is composed of only a single I-picture video frame that has been compressed in a frame. The VOB for audio data is composed entirely of only audio data. Such a VOB for still image data and a VOB for audio data are respectively denoted by C
The reproduction control information of the still image and the audio data is configured by referring to the cell information and defining the reproduction order of the still image Cell by the PGC.

【0207】以上により、別々に記録した静止画像デー
タとオーディオデータに対して、参照するCellの再生順
序を定義することにより、静止画像データとオーディオ
データを自由に組み合わせることが可能となる。
As described above, the still image data and the audio data can be freely combined by defining the reproduction order of the referred Cell with respect to the separately recorded still image data and the audio data.

【0208】尚、本実施の形態では、1つのMPEGス
トリームであるVOBに、ビデオデータ用VOBとオー
ディオデータ用VOBがあるとして説明した。しかしな
がら、オーディオデータをビデオデータから分離するこ
とができ、分離したオーディオデータを他のオーディオ
データに置き換えることが可能であれば、データ構造は
これに限られない。例えば、1つのVOBを、ビデオデ
ータ(ビデオストリームパート)と、オーディオデータ
(オーディオストリームパート)から構成してもよい。
この一例を図10(c)に示す。この場合、静止画像デ
ータの部分(Video Part)がVOBの先頭部分に格納さ
れ、続いてオーディオデータの部分(Audio Part)が格納
される。図10(c)は、図8(b)に示すRTR_ST
O.VROのファイルの例が示されている。図11に示
す第1システムストリームST1と図10(c)に示す
静止画像データの部分(Video Part)は、同じ概念のも
のであり、いずれもビデオパートストリームと言う。同
様に図11に示す第2システムストリームST2と図1
0(c)に示すオーディオデータの部分(Audio Part)
は、同じ概念のものであり、いずれもオーディオパート
ストリームと言う。
In this embodiment, it has been described that one VOB, which is an MPEG stream, includes a VOB for video data and a VOB for audio data. However, the data structure is not limited to this as long as the audio data can be separated from the video data and the separated audio data can be replaced with other audio data. For example, one VOB may be composed of video data (video stream part) and audio data (audio stream part).
An example of this is shown in FIG. In this case, the still image data part (Video Part) is stored at the head of the VOB, and then the audio data part (Audio Part) is stored. FIG. 10C shows the RTR_ST shown in FIG.
O. An example of a VRO file is shown. The first system stream ST1 shown in FIG. 11 and the part (Video Part) of the still image data shown in FIG. 10C have the same concept, and both are called video part streams. Similarly, the second system stream ST2 shown in FIG.
Audio data part shown in 0 (c) (Audio Part)
Have the same concept, and are called audio part streams.

【0209】また、上記ファイル構成は図8(b)で示
す構成でも良い。この場合、VIDEO_RTディレク
トリはDVD_RTRディレクトリに相当し、DVD_
RTRディレクトリ直下にはRTR.IFO、RTR_
STO.VRO、RTR_STA.VRO、RTR_MO
V.VROのファイルで構成される。RTR.IFOは
管理情報ファイルに対応するファイルであり、RTR_
STO.VROとRTR_STA.VROは静止画像デ
ータに関係して記録されたファイルである。RTR_S
TO.VROは静止画像データ(Video Part)及び静止
画像データと同時に記録されたオーディオデータ(Audi
o Part)を記録している。RTR_STA.VROは記
録後に編集したオーディオデータ(Audio Part)のみを
記録しており、RTR_STA.VROのオーディオデ
ータはRTR_STO.VROに記録された静止画像デ
ータと関連付けられて記録される。動画像データは静止
画像データとは別にRTR_MOV.VROファイルに
記録される。
[0209] The file structure may be the structure shown in Fig. 8B. In this case, the VIDEO_RT directory corresponds to the DVD_RTR directory,
RTR.IFO, RTR_ directly under the RTR directory
STO.VRO, RTR_STA.VRO, RTR_MO
V. It consists of VRO files. RTR.IFO is a file corresponding to the management information file.
STO. VRO and RTR_STA. VRO is a file recorded in association with still image data. RTR_S
TO. VRO stands for still image data (Video Part) and audio data (Audi) recorded simultaneously with the still image data.
o Part). RTR_STA. VRO records only audio data (Audio Part) edited after recording, and RTR_STA. The VRO audio data is RTR_STO. It is recorded in association with the still image data recorded in the VRO. The moving image data is RTR_MOV. Recorded in VRO file.

【0210】(静止画像データ用VOBとオーディオデ
ータ用VOB)図11を用いて前述したように、静止画
データ用VOBとオーディオデータ用VOBのタイムス
タンプは以下のようになる。
(Still Image Data VOB and Audio Data VOB) As described above with reference to FIG. 11, the time stamps of the still image data VOB and the audio data VOB are as follows.

【0211】SCR1=0 SCR2≦27000000(27MHz)−Tp SCR3=27000000(27MHz) Tp=55296(27MHz) PTS1=PTS3=90000+Tv DTS1=90000SCR1 = 0 SCR2 ≦ 27000000 (27 MHz) −Tp SCR3 = 27000000 (27 MHz) Tp = 55296 (27 MHz) PTS1 = PTS3 = 90000 + Tv DTS1 = 90000

【0212】(DVDレコーダの説明)次に、DVDレ
コーダについて説明する。
(Description of DVD Recorder) Next, a DVD recorder will be described.

【0213】図1は、DVDレコーダのドライブ装置の
ブロック図である。図中の11はディスクのデータを読
み出す光ピックアップ、12はECC(error c
orrecting code)処理部、13はトラッ
クバッファ、14はトラックバッファへの入出力を切り
替えるスイッチ、15はエンコーダ部、16はデコーダ
部、17はディスクの拡大図である。
FIG. 1 is a block diagram of a drive device of a DVD recorder. In the figure, reference numeral 11 denotes an optical pickup for reading data from a disk, and 12 denotes an ECC (error c).
and 13 is a track buffer, 14 is a switch for switching between input and output to and from the track buffer, 15 is an encoder, 16 is a decoder, and 17 is an enlarged view of the disk.

【0214】17に示す様に、DVD−RAMディスク
には、1セクタ=2KBを最小単位としてデータが記録
される。また、16セクタ=1ECCブロックとして、
ECC処理部12でエラー訂正処理が施される。
As shown in FIG. 17, data is recorded on a DVD-RAM disk with 1 sector = 2 KB as a minimum unit. Also, assuming that 16 sectors = 1 ECC block,
The ECC processing unit 12 performs an error correction process.

【0215】13はトラックバッファである。このトラ
ックバッファ13を用いることによりディスク上に離散
配置されたAVデータを途切れることなくデコーダに供
給することが可能になる。図2を用いて説明する。
Reference numeral 13 denotes a track buffer. By using the track buffer 13, it is possible to supply AV data discretely arranged on the disk to the decoder without interruption. This will be described with reference to FIG.

【0216】図2(a)は、ディスク上のアドレス空間
を示す図である。図2(a)に示す様にAVデータが
[a1,a2]の連続領域と[a3,a4]の連続領域
に分かれて記録されている場合、a2からa3へシーク
を行っている間、トラックバッファに蓄積してあるデー
タをデコーダ部へ供給することでAVデータの連続再生
が可能になる。この時の状態を示すのが図2(b)であ
る。
FIG. 2A is a diagram showing an address space on a disk. As shown in FIG. 2A, when AV data is recorded separately in a continuous area of [a1, a2] and a continuous area of [a3, a4], while the seek is performed from a2 to a3, the track is recorded. By supplying the data stored in the buffer to the decoder section, continuous reproduction of AV data becomes possible. FIG. 2B shows the state at this time.

【0217】a1から読み出しを開始したAVデータ
は、時刻t1からトラックバッファへの入力且つトラッ
クバッファからの出力が開始され、トラックバッファへ
の入力レート(Va)とトラックバッファからの出力レ
ート(Vb)のレート差(Va−Vb)の分だけトラッ
クバッファへはデータが蓄積されていく。この状態がa
2(時刻t2)まで継続する。この間にトラックバッフ
ァに蓄積されたデータ量をB(t2)とすると、a3を
読み出し開始できる時刻t3までの間、トラックバッフ
ァに蓄積されているB(t2)を消費してデコーダへ供
給しつづけられれば良い。
The AV data read from a1 starts to be input to the track buffer and output from the track buffer at time t1, and the input rate to the track buffer (Va) and the output rate from the track buffer (Vb). The data is accumulated in the track buffer by the rate difference (Va-Vb). This state is a
2 (time t2). Assuming that the amount of data stored in the track buffer during this time is B (t2), B (t2) stored in the track buffer is consumed and supplied to the decoder until time t3 when reading of a3 can be started. Good.

【0218】言い方を変えれば、シーク前に読み出すデ
ータ量([a1,a2])が一定量以上確保されていれ
ば、シークが発生した場合でも、AVデータの連続供給
が可能である。
In other words, if the data amount ([a1, a2]) to be read before the seek is at least a certain amount, continuous supply of AV data is possible even if a seek occurs.

【0219】本発明においては、デコーダで連続処理さ
れる静止画用システムストリームとオーディオ用システ
ムストリームはディスク上に必ずしも連続して配置され
ない。図20に示すように静止画データ用ストリーム#
1と連続してデコーダで処理されうるオーディオデータ
用ストリームは、ストリーム#2とストリーム#3の2
つ存在する。このため、いずれかしかストリーム#1と
連続してディスク上に配置することはできず、他方は、
ストリーム#1とは不連続なディスク上の領域に配置さ
れることになる。
In the present invention, the still image system stream and the audio system stream which are continuously processed by the decoder are not always arranged continuously on the disc. As shown in FIG. 20, the stream # for still image data
The stream for audio data that can be processed by the decoder consecutively with stream # 1 is stream # 2 and stream # 3.
Exist. For this reason, only one of them can be arranged on the disk continuously with stream # 1, and the other is
The stream # 1 is arranged in a discontinuous area on the disk.

【0220】しかしながら前述したようにDVDレコー
ダは不連続に配置された2つのストリームを途切れるこ
となくデコーダに供給できる。このため、デコーダは連
続して2つのストリームを処理することが可能になり、
図19を用いて説明した動作を行うことができる。
However, as described above, a DVD recorder can supply two streams arranged discontinuously to a decoder without interruption. This allows the decoder to process two streams in succession,
The operation described with reference to FIG. 19 can be performed.

【0221】尚、DVD−RAMからデータを読み出
す、即ち再生の場合の例を説明したが、DVD−RAM
へのデータの書き込み、即ち録画の場合も同様に考える
ことができる。
Although the example of reading data from the DVD-RAM, that is, the case of reproducing, has been described, the DVD-RAM
The same can be considered in the case of writing data to the memory, that is, in the case of recording.

【0222】上述したように、DVD−RAMでは一定
量以上のデータが連続記録さえされていればディスク上
にAVデータを分散記録しても連続再生/録画が可能で
ある。
As described above, in the DVD-RAM, as long as data of a certain amount or more is continuously recorded, continuous reproduction / recording is possible even if AV data is dispersedly recorded on the disk.

【0223】図12はDVDレコーダのブロック図であ
る。
FIG. 12 is a block diagram of a DVD recorder.

【0224】図中、1201はユーザへの表示およびユ
ーザからの要求を受け付けるユーザインターフェース
部、1202は全体の管理および制御を司るシステム制
御部、1203はカメラおよびマイクから構成される入
力部、1204はビデオエンコーダ、オーディオエンコ
ーダおよびシステムエンコーダから構成されるエンコー
ダ部、1205はモニタおよびスピーカから構成される
出力部、1206はシステムデコーダ、オーディオデコ
ーダおよびビデオデコーダから構成されるデコーダ部、
1207はトラックバッファ、1208はドライブであ
る。
In the figure, reference numeral 1201 denotes a user interface unit for displaying to a user and receiving a request from the user; 1202, a system control unit for managing and controlling the entire system; 1203, an input unit comprising a camera and a microphone; An encoder unit including a video encoder, an audio encoder, and a system encoder; an output unit 1205 including a monitor and a speaker; a decoder unit 1206 including a system decoder, an audio decoder and a video decoder;
Reference numeral 1207 denotes a track buffer, and 1208 denotes a drive.

【0225】以上の様に構成されたDVDレコーダにつ
いて、以下、フロチャートである図13、図14、図1
5を用いてDVDレコーダにおける記録動作について説
明する。
The DVD recorder configured as described above will be described below with reference to the flowcharts of FIGS.
5, the recording operation of the DVD recorder will be described.

【0226】ユーザインターフェース部1201が最初
にユーザからの要求を受ける。ユーザインターフェース
部1201はユーザからの要求をシステム制御部120
2に伝え、システム制御部1202はユーザからの要求
を解釈および各モジュールへ処理要求を行う。ユーザか
らの要求が静止画像の撮影および録音であった場合、シ
ステム制御部1202は、エンコーダ部1204にビデ
オフレーム1枚のエンコードと音声のエンコードを要求
する。
First, the user interface unit 1201 receives a request from the user. The user interface unit 1201 receives a request from a user,
2, the system control unit 1202 interprets the request from the user and makes a processing request to each module. If the request from the user is to capture and record a still image, the system control unit 1202 requests the encoder unit 1204 to encode one video frame and encode audio.

【0227】エンコーダ部1204は入力部1203か
ら送られるビデオフレームを1枚だけをビデオエンコー
ドおよびシステムエンコードして、静止画像データ用V
OBを生成し、トラックバッファ1207に送る。(S
1301) 具体的には、次に図14に示すように、エンコーダ部1
204は、各種タイムスタンプ値の初期化を行う。すな
わち、SCRを0にリセットし、PTS値およびDTS
値を前述した夫々の値93003(90kHz)および
90000(90kHz)に初期化し設定する。(S1
401)なお、PALの場合はPTS値として9360
0(90kHz)に初期化し設定する。
The encoder unit 1204 performs video encoding and system encoding of only one video frame sent from the input unit 1203, and outputs the video frame for still image data.
OB is generated and sent to the track buffer 1207. (S
1301) Specifically, as shown in FIG.
204 initializes various time stamp values. That is, the SCR is reset to 0, the PTS value and the DTS
The values are initialized and set to the respective values 93003 (90 kHz) and 90000 (90 kHz) described above. (S1
401) In the case of PAL, the PTS value is 9360
Initialized to 0 (90 kHz) and set.

【0228】静止画像データが記録終了でなければ、エ
ンコーダ部1204は静止画像データをパック・パケッ
ト構造に変換する。(S1404) パック・パケット構造に変換されれば、エンコーダ部1
204はSCR・DTS・PTSのタイムスタンプを算
出し、パック・パケット構造に変換した静止画像データ
に付与する。(S1405)この際、先頭のパックには
SCR値として初期化値である0が設定される。また、
PTS値、DTS値として上記初期化値である9300
3(90kHz)、90000(90kHz)が設定さ
れる。パックが最終パックである場合は、SCRが27
000000(27MHz)から1パック転送時間(T
p)を減算した時刻よりも早い時刻を満たすように強制
的にタイムスタンプを付与する。
If the recording of the still image data is not completed, the encoder 1204 converts the still image data into a packed packet structure. (S1404) If converted into a packed packet structure, the encoder unit 1
Reference numeral 204 denotes a time stamp of SCR / DTS / PTS, which is added to the still image data converted into a pack / packet structure. (S1405) At this time, 0 which is an initialization value is set as the SCR value in the first pack. Also,
9300 which is the above-mentioned initialization value as the PTS value and the DTS value
3 (90 kHz) and 90000 (90 kHz) are set. If the pack is the last pack, the SCR is 27
From 1,000,000 (27 MHz) to 1 pack transfer time (T
A time stamp is forcibly added so as to satisfy a time earlier than the time obtained by subtracting p).

【0229】エンコーダ部1204は静止画像データが
記録終了か判断し(S1402)、記録終了であれば、
システム制御部1202に静止画像データ用VOBの作
成が終了したことを伝え、システム制御部1202はド
ライブ1208を通してトラックバッファ1207に格
納されている静止画像データ用VOBをDVD−RAM
ディスクに記録する。(S1403) 尚、本実施の形態では全データの静止画像用VOBを生
成してから記録するとしたが、生成と並列的に逐次、記
録しても良い。
The encoder unit 1204 determines whether the recording of the still image data is completed (S1402).
The system control unit 1202 informs the system control unit 1202 that the creation of the still image data VOB is completed, and the system control unit 1202 transfers the still image data VOB stored in the track buffer 1207 through the drive 1208 to the DVD-RAM.
Record on disc. (S1403) In this embodiment, VOBs for still images of all data are generated and recorded. However, VOBs for still images may be sequentially recorded in parallel with the generation.

【0230】エンコーダ部1204は静止画像データの
エンコード終了後、オーディオデータの録音があるか否
かを判定し、あると判定した場合は、入力部1203か
ら送られる音声データのオーディオエンコードを開始
し、生成したオーディオデータ用VOBをトラックバッ
ファ1207に順次転送する。(S1302、S130
3)
After the encoding of the still image data is completed, the encoder unit 1204 determines whether or not audio data is recorded. If it is determined that the audio data is recorded, the encoder unit 1204 starts audio encoding of the audio data sent from the input unit 1203, The generated audio data VOB is sequentially transferred to the track buffer 1207. (S1302, S130
3)

【0231】具体的には図15に示すように、エンコー
ダ部1204は、SCR値を27000000(27M
Hz)、PTS値を93003(90kHz)に初期化
する。なお、同時に再生される静止画データがPALの
場合は93600(90kHz)にセットする。(S1
501) オーディオデータが記録終了でなければ、エンコーダ部
1204はオーディオデータをパック・パケット構造に
変換し(S1504)、SCR・PTSのタイムスタン
プを算出し付与する。(S1505)この際、先頭のパ
ックのSCR値は初期値である27000000(27
MHz)になり、PTS値は93003(90kHz)
になる。
More specifically, as shown in FIG. 15, the encoder 1204 sets the SCR value to 27000000 (27M
Hz) and the PTS value is initialized to 93003 (90 kHz). If the still image data to be reproduced at the same time is PAL, it is set to 93600 (90 kHz). (S1
501) If the recording of the audio data has not been completed, the encoder 1204 converts the audio data into a pack / packet structure (S1504), and calculates and adds a time stamp of the SCR / PTS. (S1505) At this time, the SCR value of the leading pack is 27000000 (27
MHz) and the PTS value is 93003 (90 kHz)
become.

【0232】エンコーダ部1204は、オーディオデー
タが記録終了か判断し(S1502)、記録終了であれ
ばシステム制御部1202に伝え、システム制御部12
02はドライブ1208を通してトラックバッファ12
07に格納されているオーディオデータ用VOBをDV
D−RAMディスクに記録する。(S1503) 尚、本実施の形態では、全データのオーディオデータ用
VOBを生成してから記録するとしたが、生成と並列的
に逐次、記録しても良い。
The encoder unit 1204 judges whether the recording of the audio data is completed (S1502). If the recording is completed, the encoder unit 1204 notifies the system control unit 1202 and the system control unit 1212
02 is the track buffer 12 through the drive 1208
07 for the audio data stored in DV.
Record on a D-RAM disk. (S1503) In this embodiment, the audio data VOB of all data is generated and then recorded, but it may be sequentially recorded in parallel with the generation.

【0233】ユーザがストリームの記録を停止する迄、
レコーダは上述した記録方法で静止画像データとオーデ
ィオデータをDVD−RAMに記録する。
Until the user stops recording the stream,
The recorder records the still image data and the audio data on the DVD-RAM by the recording method described above.

【0234】ユーザからのストップ要求は、ユーザイン
ターフェース部1201を通してシステム制御部120
2に伝えられ、システム制御部1202はエンコーダ部
1204に記録停止命令を送り、システム制御部120
2は、ドライブ1208を通してトラックバッファ12
07に格納されている残り全てのVOBをDVD−RA
Mディスクに記録する。
The stop request from the user is sent to the system control unit 120 through the user interface unit 1201.
2, the system control unit 1202 sends a recording stop command to the encoder unit 1204, and the system control unit 1202
2 is the track buffer 12 through the drive 1208
07, all remaining VOBs stored in DVD-RA
Record on M disk.

【0235】一連の動作終了後、システム制御部120
2は前述したVOBテーブルおよびPGCテーブルを含
む図9(a)で示す管理情報ファイルを作成してドライ
ブ1208を通してDVD−RAMディスクに記録をす
る。(S1304) この時にオーディオデータが録音された場合(S130
5)は、オーディオフラグ(Audio_Flag)を
1にセットし(S1306)、オーディオデータの録音
がない場合は0にリセットする。(S1307) さらに、静止画像データ用およびオーディオデータ用の
Cell再生時間(Cell_Playback_Ti
me)を共にオーディオの再生時間に合わせるように管
理情報を設定する。
After the end of a series of operations, the system control unit 120
2 creates the management information file shown in FIG. 9A including the above-described VOB table and PGC table, and records it on the DVD-RAM disc through the drive 1208. (S1304) When audio data is recorded at this time (S130)
In 5), the audio flag (Audio_Flag) is set to 1 (S1306), and is reset to 0 when no audio data is recorded. (S1307) Further, Cell playback time (Cell_Playback_Ti) for still image data and audio data
me) is set to the management information so as to match the audio playback time.

【0236】上述した記録方法によりタイムスタンプを
既定値に付与して静止画像データとオーディオデータを
DVD−RAMに記録していくものとする。
It is assumed that the still image data and the audio data are recorded on the DVD-RAM by adding the time stamp to the predetermined value by the recording method described above.

【0237】次に、図12及びフロチャートである図1
6を用いてDVDレコーダにおける再生装置について説
明する。
Next, FIG. 12 and FIG.
The playback device in the DVD recorder will be described with reference to FIG.

【0238】ユーザインターフェース部1201が最初
にユーザからの要求を受ける。ユーザインターフェース
部1201はユーザからの要求をシステム制御部120
2に伝え、システム制御部1202はユーザからの要求
を解釈および各モジュールへの処理要求を行う。ユーザ
からの要求がディスクの再生であった場合、システム制
御部1202は、ドライブ1208を通して管理情報フ
ァイルから再生順序を示すPGCテーブルを読み出す。
First, the user interface unit 1201 receives a request from the user. The user interface unit 1201 receives a request from a user,
2, the system control unit 1202 interprets the request from the user and makes a processing request to each module. If the request from the user is to play a disc, the system control unit 1202 reads the PGC table indicating the playback order from the management information file via the drive 1208.

【0239】システム制御部1202は、読み出したP
GCテーブルから所定のPGC情報を決定する。システ
ム制御部1202は、決定したPGC情報が示す再生順
序に従い、該当するVOBを再生を行う。具体的にはP
GC情報がセルの再生順序を示し。各セルは、VOB_
ID、VOBの開始アドレスおよび終了アドレスの情報
を有し、これら情報により静止画像データ用VOBへの
アクセスが可能になる。(S1601)
The system control unit 1202 reads the read P
Predetermined PGC information is determined from the GC table. The system control unit 1202 reproduces the corresponding VOB according to the reproduction order indicated by the determined PGC information. Specifically, P
The GC information indicates the order of cell reproduction. Each cell has VOB_
It has information on the ID and the start address and end address of the VOB, and the information enables access to the still image data VOB. (S1601)

【0240】システム制御部1202は、再生される静
止画像データ用Cellに対応するオーディオフラグ
(Audio_Flag)を判定する。(S1602)
The system control unit 1202 determines the audio flag (Audio_Flag) corresponding to the still image data cell to be reproduced. (S1602)

【0241】システム制御部1202はオーディオフラ
グ(Audio_Flag)が1であると判断した場合
は、Cell情報からオーディオ拡張用のVOB情報、
すなわちVOB_ID、VOBの開始アドレスおよび終
了アドレスを読み出すことで、静止画像データ用VOB
と同期再生するオーディオデータ用VOBを読み取る。
(S1603)
If the system control unit 1202 determines that the audio flag (Audio_Flag) is 1, the system control unit 1202 extracts VOB information for audio extension from the Cell information,
That is, by reading out the VOB_ID, the start address and the end address of the VOB, the VOB for still image data is read out.
The audio data VOB to be reproduced synchronously with the audio data is read.
(S1603)

【0242】Cellのアドレス情報はVOBを基準と
し、VOBのアドレス情報はAVファイルを基準とする
ため、実際には、Cellのアドレス情報にVOBのア
ドレス情報を加算しAVファイル内でのアドレス情報を
計算して、プレーヤはDVD−RAMに記録されたAV
データを読み出すことが出来る。(S1604)
Since the address information of the Cell is based on the VOB and the address information of the VOB is based on the AV file, actually, the address information of the VOB is added to the address information of the Cell, and the address information in the AV file is added. After the calculation, the player records the AV recorded on the DVD-RAM.
Data can be read. (S1604)

【0243】尚、オーディオフラグが0の時、すなわち
静止画像データのみの再生である時は、管理情報ファイ
ル内の該当Cell_Playback_Timeで示す時間分、表示を持
続させることになる。
When the audio flag is 0, that is, when only the still image data is reproduced, the display is continued for the time indicated by the corresponding Cell_Playback_Time in the management information file.

【0244】なお、オーディオフラグが1の場合の静止
画像データ用VOBとオーディオデータ用VOBの連続
したデコーダでの処理は、具体的には以下のように処理
される。
Note that, when the audio flag is 1, the processing by the continuous decoder for the still image data VOB and the audio data VOB is specifically performed as follows.

【0245】すなわち、システム制御部1202は、静
止画像データ用VOBを先にトラックバッファ1207
に読み込み、オーディオフラグが1の場合は、オーディ
オデータ用VOBがトラックバッファ1207に読み込
まれる時間を利用して静止画像データ用VOBのデコー
ドをデコーダ部1206に要求する。オーディオデータ
用VOBは読み出し開始後、すぐにデコーダ部1206
にデコード要求を行う。デコーダ部1206はトラック
バッファ1207に格納されているMPEGストリーム
の読み出しと出力部1205へデコードデータを供給す
る。出力部1205は送られてきたデータを規定された
再生時刻にモニタおよびスピーカに出力する。
That is, the system control unit 1202 stores the still image data VOB first in the track buffer 1207.
If the audio flag is 1, the decoder 1206 requests the decoder unit 1206 to decode the still image data VOB using the time during which the audio data VOB is read into the track buffer 1207. Immediately after the reading of the audio data VOB is started, the decoder unit 1206
A decoding request. The decoder unit 1206 reads the MPEG stream stored in the track buffer 1207 and supplies decoded data to the output unit 1205. The output unit 1205 outputs the transmitted data to a monitor and a speaker at a specified reproduction time.

【0246】以上により予め静止画像データを先読みし
てデコードすることによりオーディオデータを読み込み
開始後に、規定された再生時刻で同期して再生すること
が可能である。
As described above, by pre-reading and decoding the still image data in advance, after starting to read the audio data, it is possible to synchronously reproduce the data at a specified reproduction time.

【0247】このとき、重要なことは、静止画像データ
用VOBとオーディオデータ用VOBが前述した”静止
画像データ用VOBおよびオーディオデータ用VOB”
の構成をとっていることによって、デコーダ部1206
は、1枚の静止画像データとオーディオデータから構成
された一つのVOBとして処理することが可能であるこ
とである。
At this time, it is important that the VOB for still image data and the VOB for audio data are the same as the "VOB for still image data and VOB for audio data" described above.
, The decoder unit 1206
Means that it can be processed as one VOB composed of one still image data and audio data.

【0248】なお、本実施の形態では、DVD−RAM
を例に説明をしたが、他のメディアにおいても同様の事
が言え、本発明はDVD−RAMや光ディスクにのみ制
限されるものではない。
In the present embodiment, the DVD-RAM
However, the same applies to other media, and the present invention is not limited only to DVD-RAMs and optical disks.

【0249】また、本実施の形態では、静止画像用シス
テムストリームと同時再生されるストリームとしてオー
ディオストリームを例に説明を行ったが、静止画像用シ
ステムストリームと出力が組み合わせられる情報であれ
ばいずれでも良い。例えば、例えばビットマップデータ
やテキストデータから構成される様な副映像データ用シ
ステムストリームであっても良い。これらの典型的な用
途としては撮影した静止画にオーバラップ表示されるタ
イトル名等のキャプション情報に用いられる。
In this embodiment, an audio stream has been described as an example of a stream that is reproduced simultaneously with a still image system stream. However, any information that can be combined with a still image system stream and an output is used. good. For example, it may be a system stream for sub-picture data such as composed of bitmap data or text data. As a typical use of these, it is used for caption information such as a title name which is overlapped and displayed on a photographed still image.

【0250】また、本実施の形態において、静止画像デ
ータとオーディオデータのリンク情報をCell単位で
持たせたが、1つのVOBを1つのCellとし、VO
B単位で持たせても良い。
In the present embodiment, the link information between the still image data and the audio data is provided in units of cells, but one VOB is set to one cell, and
You may have it by B unit.

【0251】また、本実施の形態において、Cell再
生時間(Cell_Playback_Time)情報
を静止画像データとオーディオデータ間で同一とした
が、必ずしも同一値を有する必要はなく、例えば、オー
ディオデータ用の情報を優先するよう規定し、プレーヤ
が異なるCell再生時間(Cell_Playbac
k_Time)情報を読み出したとき、静止画像データ
用の情報を無視するように振る舞えば良い。
In this embodiment, the cell playback time (Cell_Playback_Time) information is the same between the still image data and the audio data. However, the information does not necessarily have to have the same value. For example, information for audio data is given priority. And the players have different Cell playback times (Cell_Playback).
When reading the (k_Time) information, it is sufficient to act so as to ignore the information for the still image data.

【0252】また、本実施の形態では、静止画像データ
用VOBおよびオーディオデータ用VOBを他のVOB
と分けてAVファイルに記録したが、他のVOBと同一
AVファイル内に記録してもよいし、本発明はAVファ
イルの構成に制限を受けるものではない。
Also, in this embodiment, the VOB for still image data and the VOB for audio data are replaced with another VOB.
And recorded in the AV file separately, but may be recorded in the same AV file as other VOBs, and the present invention is not limited to the configuration of the AV file.

【0253】[0253]

【発明の効果】本発明では、少なくとも静止画像データ
と音声データがパック、パケット構造を有するMPEG
ストリームとして夫々独立して別領域に記録されている
光ディスクにおいて、前記静止画像データ最後のパック
のデコーダバッファへの入力開始時刻(SCR2)と前
記音声データ最初のパックのデコーダバッファへの入力
開始時刻(SCR3)は、1パックを転送するのに要す
る時間(Tp)を用いて下式が成り立つように記録され
ている。
According to the present invention, at least still image data and audio data are packed and MPEG
In an optical disc recorded in a separate area independently as a stream, the input start time (SCR2) of the last pack of the still image data to the decoder buffer and the input start time (SCR2) of the first pack of the audio data to the decoder buffer ( SCR3) is recorded using the time (Tp) required to transfer one pack so that the following equation is satisfied.

【0254】SCR2+Tp ≦ SCR3SCR2 + Tp ≦ SCR3

【0255】この結果、夫々独立して記録されている静
止画像データおよび音声データであっても、あたかも一
つのMPEGストリームとしてデコーダが処理すること
が可能となる効果が得られる。
As a result, even if the still image data and the audio data are recorded independently of each other, the decoder can be processed as if it were one MPEG stream.

【0256】また、前記静止画像データ最初のパックの
デコーダバッファへの入力開始時刻(SCR1)および
前記静止画像データ最後のパックのデコーダバッファへ
の入力開始時刻(SCR2)を SCR1 = 0 SCR2+Tp ≦ 27000000(27MHz) として、前記音声データ最初のパックのデコーダバッフ
ァへの入力開始時刻(SCR3)を SCR3 = 27000000(27MHz) と記録することで、夫々異なるエンコーダで作成された
静止画像データおよび音声データであっても、あたかも
一つのMPEGストリームとしてデコーダが処理するこ
とが可能となる効果が得られる。
The start time (SCR1) of input of the first pack of the still image data to the decoder buffer and the start time (SCR2) of inputting the last pack of the still image data to the decoder buffer are as follows: SCR1 = 0 SCR2 + Tp ≦ 27000000 ( 27 MHz), the input start time (SCR3) of the first pack of the audio data to the decoder buffer is recorded as SCR3 = 27000000 (27 MHz), so that still image data and audio data created by different encoders are obtained. Also, there is an effect that the decoder can process as one MPEG stream.

【0257】また、データの表示開始時刻(PTS1)
と前記音声データの表示開始時刻(PTS3)を同一値
として記録することで、静止画像データと音声データを
同期再生(同時に表示開始)することが可能となる効果
が得られる。
The data display start time (PTS1)
By recording the display start time (PTS3) of the audio data and the audio data as the same value, it is possible to obtain an effect that the still image data and the audio data can be synchronously reproduced (display starts simultaneously).

【0258】また、特に前記静止画像データの表示開始
時刻(PTS1)と前記音声データの表示開始時刻(P
TS3)を PTS1 = PTS3 = 90000(90kH
z)+Tv とすることで、夫々異なるエンコーダで作成された静止
画像データおよび音声データであっても、デコーダで同
期再生することが可能となる効果が得られる。
In particular, the display start time (PTS1) of the still image data and the display start time (P
TS3) PTS1 = PTS3 = 90000 (90 kHz)
By setting z) + Tv, it is possible to obtain an effect that the decoder can synchronously reproduce still image data and audio data created by different encoders.

【0259】また、前記静止画像データの管理情報中に
同期して再生される音声データの存在を示す識別フラグ
(Audio_Flag)を有することで、光ディスク
プレーヤが音声データの有無を識別でき、前記静止画像
データと前記音声データの同期再生が可能となる効果が
得られる。
The management information of the still image data has an identification flag (Audio_Flag) indicating the presence of audio data to be reproduced synchronously, so that the optical disc player can identify the presence or absence of the audio data, and The effect that the synchronous reproduction of the data and the audio data becomes possible is obtained.

【図面の簡単な説明】[Brief description of the drawings]

【図1】 DVDレコーダのドライブ装置ブロック図FIG. 1 is a block diagram of a drive device of a DVD recorder.

【図2】 ディスク上のアドレス空間とトラックバッフ
ァ内データ蓄積量の関係を示す図
FIG. 2 is a diagram showing a relationship between an address space on a disk and a data accumulation amount in a track buffer.

【図3】 MPEGビデオストリームにおけるピクチャ
相関図
FIG. 3 is a picture correlation diagram in an MPEG video stream.

【図4】 MPEGシステムストリームの構成図FIG. 4 is a configuration diagram of an MPEG system stream.

【図5】 MPEGシステムデコーダ(P−STD)の
構成図
FIG. 5 is a configuration diagram of an MPEG system decoder (P-STD).

【図6】 (a)はビデオデータを示す図 (b)はビデオバッファを示す図 (c)はMPEGシステムストリームを示す図 (d)はオーディオデータを示す図6A is a diagram showing video data. FIG. 6B is a diagram showing a video buffer. FIG. 6C is a diagram showing an MPEG system stream. FIG. 6D is a diagram showing audio data.

【図7】ディジタルスティルカメラの静止画像とオーデ
ィオのリンクを示す図
FIG. 7 is a diagram showing a link between a still image and audio of a digital still camera.

【図8】 (a)はディレクトリ構造を示す図 (b)はディスク上の物理配置を示す図8A is a diagram showing a directory structure. FIG. 8B is a diagram showing a physical arrangement on a disk.

【図9】 (a)は管理情報データを示す図 (b)はストリームデータを示す図9A is a diagram showing management information data. FIG. 9B is a diagram showing stream data.

【図10】 (a)は静止画像データおよびオーディオ
データ用管理情報データを示す図 (b)は静止画像データおよびオーディオデータ用スト
リームデータを示す図
10A is a diagram showing still image data and management information data for audio data. FIG. 10B is a diagram showing still image data and stream data for audio data.

【図11】 (a)は静止画像データ用VOBを示す図 (b)はオーディオデータ用VOBを示す図 (c)は合成VOBを示す図11A is a diagram showing a VOB for still image data, FIG. 11B is a diagram showing a VOB for audio data, and FIG. 11C is a diagram showing a composite VOB

【図12】 DVDレコーダの構成図FIG. 12 is a configuration diagram of a DVD recorder.

【図13】 DVDレコーダの記録処理のフローチャー
ト図
FIG. 13 is a flowchart of a recording process of a DVD recorder.

【図14】 DVDレコーダの静止画像データ用VOB
に対する処理のフローチャート図
FIG. 14 VOB for still image data of a DVD recorder
Flow chart of the process for

【図15】 DVDレコーダのオーディオデータ用VO
Bに対する処理のフローチャート図
FIG. 15 VO for audio data of DVD recorder
Flow chart of the process for B

【図16】 DVDレコーダの管理情報ファイルに対す
る処理のフローチャート図
FIG. 16 is a flowchart of processing for a management information file of the DVD recorder.

【図17】 2つの静止画が保存されている状態を示す
説明図
FIG. 17 is an explanatory diagram showing a state in which two still images are stored.

【図18】 従来例に基づき、音声を伴う静止画が再生
される動作を示す説明図
FIG. 18 is an explanatory diagram showing an operation of reproducing a still image with sound based on a conventional example.

【図19】 本発明に基づき、音声を伴う静止画が再生
される動作を示す説明図
FIG. 19 is an explanatory diagram showing an operation of reproducing a still image with sound according to the present invention.

【図20】 本発明に基づき、音声を伴う静止画が再生
される動作の変形例を示す説明図
FIG. 20 is an explanatory diagram showing a modification of the operation of reproducing a still image with sound according to the present invention.

【符号の説明】[Explanation of symbols]

11 光ピックアップ 12 ECC処理部 13 トラックバッファ 14 スイッチ 15 エンコーダ部 16 デコーダ部 41 パックヘッダ 42 パケットヘッダ 43 ペイロード 51 STC 52 デマルチプレクサ 53 ビデオバッファ 54 ビデオデコーダ 55 リオーダバッファ 56 スイッチ 57 オーディオバッファ 58 オーディオデコーダ 1201 ユーザインターフェース部 1202 システム制御部 1203 入力部 1204 エンコーダ部 1205 出力部 1206 デコーダ部 1207 トラックバッファ 1208 ドライブ Reference Signs List 11 optical pickup 12 ECC processing unit 13 track buffer 14 switch 15 encoder unit 16 decoder unit 41 pack header 42 packet header 43 payload 51 STC 52 demultiplexer 53 video buffer 54 video decoder 55 reorder buffer 56 switch 57 audio buffer 58 audio decoder 1201 user Interface unit 1202 System control unit 1203 Input unit 1204 Encoder unit 1205 Output unit 1206 Decoder unit 1207 Track buffer 1208 Drive

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) H04N 5/93 H04N 5/93 G G11B 27/10 Z ──────────────────────────────────────────────────続 き Continued on the front page (51) Int.Cl. 7 Identification symbol FI Theme coat ゛ (Reference) H04N 5/93 H04N 5/93 G G11B 27/10 Z

Claims (21)

【特許請求の範囲】[Claims] 【請求項1】デコーダバッファ(53,57)と、デコ
ーダ(54,58)と、出力部(55,56)とを備え
た再生装置により再生可能な光ディスクであって、該光
ディスクには、 少なくとも1枚のピクチャの静止画像データを含む複数
のユニットから構成されるビデオパートストリーム(S
T1)と、 前記静止画像データと共に再生されるオーディオデータ
を含むひとつまたは複数のユニットから構成されるオー
ディオパートストリーム(ST2)とが記録され、 前記ユニットには、デコード処理および出力に必要な時
刻を示すタイムスタンプ情報が格納され、 前記タイムスタンプ情報には、前記第1のシステムスト
リームの最後の前記ユニットが前記デコーダバッファへ
(53)入力される時刻SCR2と、前記第2のシステ
ムストリームの最初の前記ユニットが前記デコーダバッ
ファ(57)へ入力される時刻SCR3とが含まれ、 これら時刻SCR2、SCR3の間には、次式、 SCR2+Tp ≦ SCR3 ただし、Tpは、デコーダバッファにひとつのユニット
が入力開始されてから、入力終了するまでに要する時間
を示す、が成立することを特徴とする光ディスク。
1. An optical disc reproducible by a reproducing apparatus including a decoder buffer (53, 57), a decoder (54, 58), and an output section (55, 56), wherein the optical disc includes at least A video part stream (S) composed of a plurality of units including still image data of one picture
T1), and an audio part stream (ST2) composed of one or a plurality of units including audio data reproduced together with the still image data are recorded. The unit includes a time required for decoding and output. Time stamp information indicating the time SCR2 at which the last unit of the first system stream is input (53) to the decoder buffer, and the first time of the second system stream. A time SCR3 at which the unit is input to the decoder buffer (57) is included. Between these times SCR2 and SCR3, the following equation is obtained: SCR2 + Tp ≦ SCR3, where Tp is the time at which one unit starts inputting to the decoder buffer. The time required from input to completion of input Optical disc, characterized in that to, is established.
【請求項2】 前記タイムスタンプ情報には、更に前記
ビデオパートストリームの最初のユニットが前記デコー
ダバッファへ入力される時刻SCR1が含まれ、 これら時刻SCR1、SCR2について、次式 SCR1 = 0 SCR2+Tp ≦ 27000000(27MHz) ただし、(27MHz)は、その前に示された数値が2
7MHzのクロックのカウント値であることを示す、が
成立することを特徴とする請求項1記載の光ディスク。
2. The time stamp information further includes a time SCR1 at which the first unit of the video part stream is input to the decoder buffer. For these times SCR1 and SCR2, the following expression SCR1 = 0 SCR2 + Tp ≦ 27000000 (27MHz) However, (27MHz) means that the numerical value shown before that is 2
2. The optical disk according to claim 1, wherein a value indicating a count value of a 7 MHz clock is satisfied.
【請求項3】 前記時刻SCR3について、次式 SCR3 = 27000000(27MHz) が成立することを特徴とする請求項2記載の光ディス
ク。
3. The optical disc according to claim 2, wherein the following equation is satisfied for the time SCR3: SCR3 = 27000000 (27 MHz).
【請求項4】 前記タイムスタンプ情報には、更に前記
ビデオパートストリームが前記出力部(55,56)か
ら出力される時刻PTS1と、前記オーディオパートス
トリームが前記デコーダ(58)から出力される時刻P
TS3とが含まれ、 これら時刻PTS1、PTS3が同一値であることを特
徴とする請求項1から請求項3のいずれか一項に記載の
光ディスク。
4. The time stamp information further includes a time PTS1 at which the video part stream is output from the output unit (55, 56) and a time PTS at which the audio part stream is output from the decoder (58).
4. The optical disc according to claim 1, wherein the time PTS1 and the time PTS3 have the same value.
【請求項5】 前記タイムスタンプ情報には、更に前記
ビデオパートストリームが前記デコーダ(53)により
デコードされるデコード開始時刻DTS1が含まれ、 該時刻DTS1は、次式 DTS1 = 90000(90kHz) ただし、(90kHz)は、その前に示された数値が9
0kHzのクロックのカウント値であることを示す、が
成立することを特徴とする請求項1から請求項4のいず
れか一項に記載の光ディスク。
5. The time stamp information further includes a decoding start time DTS1 at which the video part stream is decoded by the decoder (53). The time DTS1 is expressed by the following equation: DTS1 = 90000 (90 kHz). (90 kHz) means that the value indicated before is 9
The optical disc according to any one of claims 1 to 4, wherein the following condition is satisfied: indicating a count value of a clock of 0 kHz.
【請求項6】前記時刻PTS1、PTS3は、次式 PTS1 = PTS3 = 90000(90kH
z)+Tv ただし、(90kHz)は、その前に示された数値が9
0kHzのクロックのカウント値であることを示し、T
vは、ビデオデータのフレーム周期を示す、が成立する
ことを特徴とする請求項4記載の光ディスク。
6. The times PTS1 and PTS3 are expressed by the following equation: PTS1 = PTS3 = 90000 (90 kHz)
z) + Tv where (90 kHz) is 9
0 kHz clock count value, T
5. The optical disk according to claim 4, wherein v indicates a frame period of video data.
【請求項7】光ディスクには、更に第1、オーディオパ
ートストリームの管理情報(Volume)が記録され、前記
ビデオパートストリームの管理情報中に、該静止画像デ
ータと同期して再生される音声データの存在を示す識別
フラグ(Audio_Flag)が格納されていること
を特徴とする請求項1ないし請求項6のいずれか一項に
記載の光ディスク。
7. The optical disc further records first audio part stream management information (Volume). The management information of the video part stream includes audio data of audio data to be reproduced in synchronization with the still image data. The optical disc according to any one of claims 1 to 6, wherein an identification flag (Audio_Flag) indicating presence is stored.
【請求項8】デコーダバッファ(53、57)と、デコ
ーダ(54、58)と、出力部(55,56)を備えた
再生装置により再生可能な光ディスクに、静止画像デー
タと、該静止画像データと共に再生されるオーディオデ
ータを含むシステムストリームを記録する、光ディスク
記録装置であって、該記録装置は、 エンコーダ(1204)と、 システム制御部(1202)とを有し、 該エンコーダ(1204)は、 少なくとも1枚のピクチャの静止画像データを含む複数
のユニットから構成されるビデオパートストリーム(S
T1)と、 前記静止画像データと共に再生されるオーディオデータ
を含むひとつまたは複数のユニットから構成されるオー
ディオパートストリーム(ST2)とを生成し、 該エンコーダ(1204)は、 前記ユニットに、デコード処理および出力に必要な時刻
を示すタイムスタンプ情報を格納し、 前記タイムスタンプ情報には、前記第1のシステムスト
リームの最後の前記ユニットが前記デコーダバッファ
(53)へ入力される時刻SCR2と、前記第2のシス
テムストリームの最初の前記ユニットが前記デコーダバ
ッファ(57)へ入力される時刻SCR3とが含まれ、 これら時刻SCR2、SCR3の間には、次式、 SCR2+Tp ≦ SCR3 ただし、Tpは、デコーダバッファにひとつのユニット
が入力開始されてから、入力終了するまでに要する時間
を示す、が成立することを特徴とする光ディスク再生装
置。
8. Still image data and said still image data are recorded on an optical disk reproducible by a reproducing apparatus having a decoder buffer (53, 57), a decoder (54, 58), and an output section (55, 56). An optical disk recording apparatus for recording a system stream including audio data reproduced together with the encoder, wherein the recording apparatus has an encoder (1204) and a system control unit (1202). The encoder (1204) A video part stream (S) composed of a plurality of units including still image data of at least one picture
T1), and an audio part stream (ST2) composed of one or more units including audio data reproduced together with the still image data. The encoder (1204) performs decoding processing and Time stamp information indicating a time required for output is stored, and the time stamp information includes a time SCR2 at which the last unit of the first system stream is input to the decoder buffer (53); And the time SCR3 at which the first unit of the system stream is input to the decoder buffer (57). Between these times SCR2 and SCR3, the following equation is obtained: SCR2 + Tp ≦ SCR3 where Tp is stored in the decoder buffer. Input ends after one unit starts inputting An optical disc reproducing apparatus characterized in that the following expression is satisfied:
【請求項9】前記エンコーダは、前記タイムスタンプ情
報として、更に前記ビデオパートストリームの最初のユ
ニットが前記デコーダバッファ(53)へ入力される時
刻SCR1と、前記ビデオパートストリームが前記出力
部(55,56)から出力される時刻PTS1とを格納
し、 これら時刻SCR1、SCR2、PTS1について、次
式 SCR1=0 SCR2≦27000000(27MHz)−Tp PTS1=90000(90KHz)+Tv ただし、(27MHz)は、その前に示された数値が2
7MHzのクロックのカウント値であることを示し、
(90KHz)は、その前に示された数値が90KHz
のクロックのカウント値であることを示し、Tpは、該
ビデオパートストリームの最後のユニットを転送するの
に要する時間を示し、Tvは、ビデオデータのフレーム
周期を示す、が成立することを特徴とする請求項8記載
の光ディスク記録装置。
9. The encoder further includes, as the time stamp information, a time SCR1 at which the first unit of the video part stream is input to the decoder buffer (53), and the video part stream is output to the output unit (55, 56) is stored, and for these times SCR1, SCR2, and PTS1, the following expression is used: SCR1 = 0 SCR2 ≦ 27000000 (27 MHz) −Tp PTS1 = 90000 (90 KHz) + Tv (27 MHz) The number shown earlier is 2
Indicates that it is a count value of a 7 MHz clock,
(90 KHz) means that the numerical value indicated before that is 90 KHz
Tp indicates the time required to transfer the last unit of the video part stream, and Tv indicates the frame period of the video data. 9. The optical disk recording device according to claim 8, wherein:
【請求項10】前記エンコーダは、前記タイムスタンプ
情報として、更に前記オーディオパートストリームが前
記デコーダ(58)から出力される時刻PTS3を格納
し、 これら時刻SCR3、PTS3について、次式 SCR3=27000000(27MHz) PTS3=90000(90KHz)+Tv が成立することを特徴とする請求項9記載の光ディスク
記録装置。
10. The encoder further stores, as the time stamp information, a time PTS3 at which the audio part stream is output from the decoder (58). For these times SCR3 and PTS3, the following equation is used: SCR3 = 27000000 (27 MHz) 10. The optical disk recording apparatus according to claim 9, wherein PTS3 = 90000 (90 KHz) + Tv is satisfied.
【請求項11】前記システム管理部は、第1、オーディ
オパートストリームの管理情報を生成し、前記ビデオパ
ートストリームの管理情報中に、該静止画像データと同
期して再生される音声データの存在を示す識別フラグ
(Audio_Flag)を格納することを特徴とする
請求項8から請求項10のいずれか一項記載の光ディス
ク記録装置。
11. The system management unit first generates management information of an audio part stream, and detects presence of audio data reproduced in synchronization with the still image data in the management information of the video part stream. 11. The optical disk recording apparatus according to claim 8, wherein an identification flag (Audio_Flag) is stored.
【請求項12】前記システム管理部は、前記オーディオ
パートストリームの管理情報中に前記音声データの再生
時間(Cell_Playback_Time)を記録
することを特徴とする請求項8から請求項11のいずれ
か一項記載の光ディスク記録装置。
12. The system management unit according to claim 8, wherein the system management unit records a reproduction time (Cell_Playback_Time) of the audio data in the management information of the audio part stream. Optical disk recording device.
【請求項13】請求項7に記載の光ディスクにを再生す
る再生装置であって、 デコーダバッファ(53、57)と、 デコーダ(54,58)と、 出力部(55、56)と、 システム制御部(51)とを備え、 該システム制御部(51)は、前記識別フラグ(Aud
io_Flag)のセット状態を検出した場合、前記ビ
デオパートストリームの静止画像データと、前記オーデ
ィオパートストリームの音声データを同期再生すること
を特徴とする光ディスク再生装置。
13. A reproducing apparatus for reproducing data from an optical disk according to claim 7, comprising: a decoder buffer (53, 57); a decoder (54, 58); an output section (55, 56); (51), and the system control unit (51) includes the identification flag (Aud).
An optical disc reproducing apparatus characterized in that, when a set state of (io_Flag) is detected, the still image data of the video part stream and the audio data of the audio part stream are synchronously reproduced.
【請求項14】前記システム制御部(51)は、識別フ
ラグ(Audio_Flag)のセット状態を検出した
場合、前記デコーダ(54)により前記ビデオパートス
トリームに記録されている1枚のピクチャの静止画像デ
ータを完全にデコードして出力部(55,56)に送
り、続いて前記デコーダ(58)により前記オーディオ
パートストリームに記憶されている前記音声データをデ
コードすると共に音声の再生をし、該音声の再生の開始
と同時に前記出力部(55,56)からの静止画像デー
タの再生を開始することを特徴とする請求項13記載の
光ディスク再生装置。
14. When the system control section (51) detects the set state of the identification flag (Audio_Flag), the still image data of one picture recorded in the video part stream by the decoder (54). Is completely decoded and sent to an output unit (55, 56). Subsequently, the decoder (58) decodes the audio data stored in the audio part stream and reproduces the audio, and reproduces the audio. 14. The optical disk reproducing apparatus according to claim 13, wherein the reproduction of the still image data from the output section is started simultaneously with the start of the operation.
【請求項15】デコーダバッファ(53、57)と、デ
コーダ(54、58)と、出力部(55,56)を備え
た再生装置により再生可能な光ディスクに、静止画像デ
ータと、該静止画像データと共に再生されるオーディオ
データを含むシステムストリームを記録する、記録方法
であって、 少なくとも1枚のピクチャの静止画像データを含む複数
のユニットから構成されるビデオパートストリーム(S
T1)を記録するステップと、 前記静止画像データと共に再生されるオーディオデータ
を含むひとつまたは複数のユニットから構成されるオー
ディオパートストリーム(ST2)を記録するステップ
と、 前記ユニットに、デコード処理および出力に必要な時刻
を示すタイムスタンプ情報を記録するステップとを有
し、 前記タイムスタンプ情報として、前記第1のシステムス
トリームの最後の前記ユニットが前記デコーダバッファ
(53)へ入力される時刻SCR2と、前記第2のシス
テムストリームの最初の前記ユニットが前記デコーダバ
ッファ(57)へ入力される時刻SCR3とを生成し、 これら時刻SCR2、SCR3の間には、次式、 SCR2+Tp ≦ SCR3 ただし、Tpは、デコーダバッファにひとつのユニット
が入力開始されてから、入力終了するまでに要する時間
を示す、が成立することを特徴とする記録方法。
15. Still image data and said still image data are recorded on an optical disk reproducible by a reproducing apparatus having a decoder buffer (53, 57), a decoder (54, 58), and an output section (55, 56). Recording a system stream including audio data to be reproduced together with a video part stream (S) comprising a plurality of units including still image data of at least one picture.
T1), recording an audio part stream (ST2) including one or a plurality of units including audio data reproduced together with the still image data, and decoding processing and output to the unit. Recording time stamp information indicating a required time, the time SCR2 at which the last unit of the first system stream is input to the decoder buffer (53) as the time stamp information, The first unit of the second system stream generates a time SCR3 which is input to the decoder buffer (57). Between these times SCR2 and SCR3, the following equation is obtained: SCR2 + Tp ≦ SCR3 where Tp is the decoder One unit starts inputting to buffer Recording method characterized by that after shows the time required for the input termination, is established.
【請求項16】前記タイムスタンプ情報として、更に前
記ビデオパートストリームの最初のユニットが前記デコ
ーダバッファへ(53)入力される時刻SCR1と、前
記ビデオパートストリームが前記出力部(55,56)
から出力される時刻PTS1とを生成し、 これら時刻SCR1、SCR2、PTS1について、次
式 SCR1=0 SCR2≦27000000(27MHz)−Tp PTS1=90000(90KHz)+Tv ただし、(27MHz)は、その前に示された数値が2
7MHzのクロックのカウント値であることを示し、
(90KHz)は、その前に示された数値が90KHz
のクロックのカウント値であることを示し、Tpは、該
ビデオパートストリームの最後のユニットを転送するの
に要する時間を示し、Tvは、ビデオデータのフレーム
周期を示す、が成立することを特徴とする請求項15記
載の記録方法。
16. The time stamp information further includes a time SCR1 at which the first unit of the video part stream is input to the decoder buffer (53), and the video part stream is output to the output unit (55, 56).
And the time PTS1 output from the PTC1 is generated. For these times SCR1, SCR2, and PTS1, the following expression is used. The number shown is 2
Indicates that it is a count value of a 7 MHz clock,
(90 KHz) means that the numerical value indicated before that is 90 KHz
Tp indicates the time required to transfer the last unit of the video part stream, and Tv indicates the frame period of the video data. 16. The recording method according to claim 15, wherein the recording method is performed.
【請求項17】前記タイムスタンプ情報として、更に前
記オーディオパートストリームが前記デコーダ(58)
から出力される時刻PTS3を生成し、 これら時刻SCR3、PTS3について、次式 SCR3=27000000(27MHz) PTS3=90000(90KHz)+Tv が成立することを特徴とする請求項16記載の記録方
法。
17. The audio part stream further includes the audio part stream as the time stamp information.
17. The recording method according to claim 16, wherein a time PTS3 output from the PTS3 is generated, and for the times SCR3 and PTS3, the following expression is satisfied: SCR3 = 27000000 (27 MHz) PTS3 = 90000 (90 KHz) + Tv.
【請求項18】更に第1、オーディオパートストリーム
の管理情報を記録するステップを有し、前記ビデオパー
トストリームの管理情報中に、該静止画像データと同期
して再生される音声データの存在を示す識別フラグ(A
udio_Flag)を生成することを特徴とする請求
項15から請求項17のいずれか一項記載の記録方法。
18. The method of claim 1, further comprising the step of recording management information of the audio part stream, wherein the management information of the video part stream indicates the presence of audio data reproduced in synchronization with the still image data. Identification flag (A
18. The recording method according to claim 15, wherein (audio_Flag) is generated.
【請求項19】更に前記オーディオパートストリームの
管理情報中に前記音声データの再生時間(Cell_P
layback_Time)を生成することを特徴とす
る請求項18記載の光ディスク記録装置。
19. A reproduction time (Cell_P) of the audio data in the management information of the audio part stream.
19. The optical disk recording apparatus according to claim 18, wherein (backback_Time) is generated.
【請求項20】請求項7に記載の光ディスクに記録され
たシステムストリームを再生する再生方法であって、 前記1枚のピクチャの静止画像データの管理情報中に、
該静止画像データと同期して再生される音声データの存
在を示す識別フラグ(Audio_Flag)のセット
状態を検出するステップと、 該識別フラグのセット状態の検出に応答して、前記静止
画像データと、前記音声データを同期再生するステップ
を有することを特徴とする光ディスク再生方法。
20. A reproduction method for reproducing a system stream recorded on an optical disk according to claim 7, wherein: in the management information of the still image data of one picture,
Detecting a set state of an identification flag (Audio_Flag) indicating presence of audio data reproduced in synchronization with the still image data; and responding to the detection of the set state of the identification flag, the still image data; An optical disk reproducing method, comprising a step of synchronously reproducing the audio data.
【請求項21】前記同期再生するステップは、前記識別
フラグ(Audio_Flag)のセット状態の検出に
応答して、前記1枚のピクチャの静止画像データを完全
にデコードするステップと、 続いて前記音声データをデコードし、再生するステップ
と、 該音声の再生の開始と同時に、デコードされた静止画像
データの再生を開始することを特徴とする請求項20記
載の光ディスク再生方法。
21. The step of synchronously reproducing comprises, in response to detection of a set state of the identification flag (Audio_Flag), completely decoding still picture data of the one picture; 21. The optical disk reproducing method according to claim 20, wherein the step of decoding and reproducing the audio data and the reproduction of the decoded still image data are started simultaneously with the start of the reproduction of the audio.
JP09647199A 1998-04-08 1999-04-02 Optical disc, recording device and method, and reproducing device and method Expired - Lifetime JP3411232B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP09647199A JP3411232B2 (en) 1998-04-08 1999-04-02 Optical disc, recording device and method, and reproducing device and method

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP10-95661 1998-04-08
JP9566198 1998-04-08
JP09647199A JP3411232B2 (en) 1998-04-08 1999-04-02 Optical disc, recording device and method, and reproducing device and method

Publications (2)

Publication Number Publication Date
JP2000041212A true JP2000041212A (en) 2000-02-08
JP3411232B2 JP3411232B2 (en) 2003-05-26

Family

ID=26436884

Family Applications (1)

Application Number Title Priority Date Filing Date
JP09647199A Expired - Lifetime JP3411232B2 (en) 1998-04-08 1999-04-02 Optical disc, recording device and method, and reproducing device and method

Country Status (1)

Country Link
JP (1) JP3411232B2 (en)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001069924A1 (en) * 2000-03-14 2001-09-20 Matsushita Electric Industrial Co., Ltd. Device and method for reproducing image and voice
JP2001257981A (en) * 2000-03-14 2001-09-21 Matsushita Electric Ind Co Ltd Device and method for reproducing image and voice
JP2001257980A (en) * 2000-03-14 2001-09-21 Matsushita Electric Ind Co Ltd Device and method for reproducing image and audio
JP2001257992A (en) * 2000-03-14 2001-09-21 Matsushita Electric Ind Co Ltd Method and device for reproducing image and voice
JP2001257982A (en) * 2000-03-14 2001-09-21 Matsushita Electric Ind Co Ltd Device and method for reproducing image and voice
KR100499608B1 (en) * 2002-05-23 2005-07-07 엘지전자 주식회사 Method for dubbing audio on rewritable medium
JP2005538603A (en) * 2002-09-05 2005-12-15 エルジー エレクトロニクス インコーポレーテッド RECORDING MEDIUM, RECORDING AND REPRODUCING METHOD OR APPARATUS HAVING PLAYLIST MARK DATA STRUCTURE FOR MANAGING STILL IMAGE REPRODUCTION
JP2006506891A (en) * 2002-11-20 2006-02-23 エルジー エレクトロニクス インコーポレーテッド Recording medium having data structure for managing reproduction of recorded still image, and recording and reproduction method and apparatus therefor
KR100563668B1 (en) * 2001-12-22 2006-03-28 엘지전자 주식회사 Method for recording a dubbing audio on rewritable medium
US7349112B2 (en) 2000-10-26 2008-03-25 Matsushita Electric Industrial Co., Ltd. Printing-object image designation device
US7545407B2 (en) 2001-12-24 2009-06-09 Lg Electronics Inc. Method of recording still pictures onto a recording medium
US7664371B2 (en) 2002-09-06 2010-02-16 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still images recorded thereon and recording and reproducing methods and apparatuses
US7672566B2 (en) 2003-01-20 2010-03-02 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US7734154B2 (en) 2003-02-14 2010-06-08 Lg Electronics Inc. Recording medium having data structure for managing reproduction duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US7747133B2 (en) 2002-09-07 2010-06-29 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still images from a clip file recorded thereon and recording and reproducing methods and apparatuses
US7801421B2 (en) 2003-01-20 2010-09-21 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US7889236B2 (en) 2000-03-14 2011-02-15 Panasonic Corporation Automatic file transmission system
US7907186B2 (en) 2002-01-28 2011-03-15 Lg Electronics Inc. Method of recording still pictures on a recording medium
JP2011187156A (en) * 2004-02-21 2011-09-22 Samsung Electronics Co Ltd Information recording medium with text subtitle data synchronized with av data stored, reproducing method, and device
US8041179B2 (en) 2003-02-24 2011-10-18 Lg Electronics Inc. Methods and apparatuses for reproducing and recording still picture and audio data and recording medium having data structure for managing reproduction of still picture and audio data
US8055117B2 (en) 2003-02-15 2011-11-08 Lg Electronics Inc. Recording medium having data structure for managing reproduction duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8145033B2 (en) 2003-02-05 2012-03-27 Lg Electronics Inc. Recording medium having data structure for managing reproducton duration of still pictures recorded thereon and recording and reproducing methods and apparatuses

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8204358B2 (en) 2000-03-14 2012-06-19 Panasonic Corporation Image and audio reproducing apparatus and method
JP2001257981A (en) * 2000-03-14 2001-09-21 Matsushita Electric Ind Co Ltd Device and method for reproducing image and voice
JP2001257980A (en) * 2000-03-14 2001-09-21 Matsushita Electric Ind Co Ltd Device and method for reproducing image and audio
JP2001257992A (en) * 2000-03-14 2001-09-21 Matsushita Electric Ind Co Ltd Method and device for reproducing image and voice
JP2001257982A (en) * 2000-03-14 2001-09-21 Matsushita Electric Ind Co Ltd Device and method for reproducing image and voice
US7889236B2 (en) 2000-03-14 2011-02-15 Panasonic Corporation Automatic file transmission system
US8446474B2 (en) 2000-03-14 2013-05-21 Panasonic Corporation Automatic file transmission system
US8023007B2 (en) 2000-03-14 2011-09-20 Panasonic Corporation Automatic file transmission system
WO2001069924A1 (en) * 2000-03-14 2001-09-20 Matsushita Electric Industrial Co., Ltd. Device and method for reproducing image and voice
US7231134B2 (en) 2000-03-14 2007-06-12 Matsushita Electric Industrial Co., Ltd. Image and audio reproducing apparatus and method
US7349112B2 (en) 2000-10-26 2008-03-25 Matsushita Electric Industrial Co., Ltd. Printing-object image designation device
KR100563668B1 (en) * 2001-12-22 2006-03-28 엘지전자 주식회사 Method for recording a dubbing audio on rewritable medium
US7496279B2 (en) 2001-12-22 2009-02-24 Lg Electronics Inc. Method of recording dubbing audio data onto a rewritable recording medium
US8295686B2 (en) 2001-12-22 2012-10-23 Lg Electronics Inc. Method of recording dubbing audio data onto a rewritable recording medium
US7545407B2 (en) 2001-12-24 2009-06-09 Lg Electronics Inc. Method of recording still pictures onto a recording medium
US7907186B2 (en) 2002-01-28 2011-03-15 Lg Electronics Inc. Method of recording still pictures on a recording medium
KR100499608B1 (en) * 2002-05-23 2005-07-07 엘지전자 주식회사 Method for dubbing audio on rewritable medium
US7787755B2 (en) 2002-09-05 2010-08-31 Lg Electronics Inc. Recording medium having data structure for managing reproduction of slideshows recorded thereon and recording and reproducing methods and apparatuses
JP2005538603A (en) * 2002-09-05 2005-12-15 エルジー エレクトロニクス インコーポレーテッド RECORDING MEDIUM, RECORDING AND REPRODUCING METHOD OR APPARATUS HAVING PLAYLIST MARK DATA STRUCTURE FOR MANAGING STILL IMAGE REPRODUCTION
US7974516B2 (en) 2002-09-05 2011-07-05 Lg Electronics Inc. Recording medium having data structure of playlist marks for managing reproduction of still images recorded thereon and recording and reproducing methods and apparatuses
US8098978B2 (en) 2002-09-05 2012-01-17 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still images recorded thereon and recording and reproducing methods and apparatuses
US7664371B2 (en) 2002-09-06 2010-02-16 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still images recorded thereon and recording and reproducing methods and apparatuses
US7747133B2 (en) 2002-09-07 2010-06-29 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still images from a clip file recorded thereon and recording and reproducing methods and apparatuses
US7639921B2 (en) 2002-11-20 2009-12-29 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still images recorded thereon and recording and reproducing methods and apparatuses
JP2006506891A (en) * 2002-11-20 2006-02-23 エルジー エレクトロニクス インコーポレーテッド Recording medium having data structure for managing reproduction of recorded still image, and recording and reproduction method and apparatus therefor
US8005346B2 (en) 2002-11-20 2011-08-23 Lg Electronics Inc. Recording medium having data structure for managing reproduction of data recorded thereon and recording and reproducing methods and apparatuses
US7672566B2 (en) 2003-01-20 2010-03-02 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8050538B2 (en) 2003-01-20 2011-11-01 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8532461B2 (en) 2003-01-20 2013-09-10 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8649665B2 (en) 2003-01-20 2014-02-11 Lg Electronics, Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8676037B2 (en) 2003-01-20 2014-03-18 Lg Electronics, Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US7801421B2 (en) 2003-01-20 2010-09-21 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8145033B2 (en) 2003-02-05 2012-03-27 Lg Electronics Inc. Recording medium having data structure for managing reproducton duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US7734154B2 (en) 2003-02-14 2010-06-08 Lg Electronics Inc. Recording medium having data structure for managing reproduction duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8055117B2 (en) 2003-02-15 2011-11-08 Lg Electronics Inc. Recording medium having data structure for managing reproduction duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8041179B2 (en) 2003-02-24 2011-10-18 Lg Electronics Inc. Methods and apparatuses for reproducing and recording still picture and audio data and recording medium having data structure for managing reproduction of still picture and audio data
JP2011187156A (en) * 2004-02-21 2011-09-22 Samsung Electronics Co Ltd Information recording medium with text subtitle data synchronized with av data stored, reproducing method, and device

Also Published As

Publication number Publication date
JP3411232B2 (en) 2003-05-26

Similar Documents

Publication Publication Date Title
US6122436A (en) Optical disc, optical disc recording method and apparatus, and optical disc reproducing method and apparatus
JP3411232B2 (en) Optical disc, recording device and method, and reproducing device and method
JP3356991B2 (en) Optical disc, recording method, recording device, reproducing method, and reproducing device
JP4527164B2 (en) Recording medium, recording apparatus, and reproducing apparatus
JP2002152636A (en) Recording and reproducing device having automatic chapter preparation function
WO2006054590A1 (en) Data processing apparatus
KR101342345B1 (en) Information processing device information processing method and storage medium
JP2002325221A (en) Information recording medium and device for recording and reproducing information on the information recording medium
JP2004088766A (en) Data management apparatus and data management system
JP4313521B2 (en) Information information recording medium, recording apparatus, recording method, reproducing apparatus, reproducing method, and program
US7386553B2 (en) Data processing device
JPH11298845A (en) Optical disk, optical disk recorder and optical disk player
WO2016059761A1 (en) Recording medium, reproduction method, and reproduction device
JP2004005934A (en) Record medium, recorder, reproducing device, recording method, reproducing method and program
JP2002373480A (en) Data-recording method, data recorder and recording medium
US20090129219A1 (en) Recording/Reproducing Apparatus
JP2002334561A (en) Information recording medium, and device for recording and reproducing information to and from information recording medium
JP2002343030A (en) Information recording medium and device for recording and reproducing information in and from information recording medium
JP2002335477A (en) Information recording medium and device for recording/ reproduction information to/from information recording medium
JP2002152666A (en) Recording/reproducing device with chapter generation guide function
WO2006006571A1 (en) Data processing device
JP2006031744A (en) Device for recording and reproducing av data
MXPA99011331A (en) Optical disc, optical disc recording method and apparatus, and optical disc reproducing method and apparatus
JP2005293764A (en) Information recording medium, device and method of recording/reproducing information on recording medium
JP2006033028A (en) Av data recording/reproducing device

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080320

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090320

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100320

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110320

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110320

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120320

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130320

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130320

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140320

Year of fee payment: 11

EXPY Cancellation because of completion of term