WO2003001801A1 - Data transmitting device and method - Google Patents

Data transmitting device and method Download PDF

Info

Publication number
WO2003001801A1
WO2003001801A1 PCT/JP2002/006089 JP0206089W WO03001801A1 WO 2003001801 A1 WO2003001801 A1 WO 2003001801A1 JP 0206089 W JP0206089 W JP 0206089W WO 03001801 A1 WO03001801 A1 WO 03001801A1
Authority
WO
WIPO (PCT)
Prior art keywords
stream
file
data
playlist
information
Prior art date
Application number
PCT/JP2002/006089
Other languages
English (en)
French (fr)
Inventor
Motoki Kato
Original Assignee
Sony Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corporation filed Critical Sony Corporation
Priority to AU2002311318A priority Critical patent/AU2002311318B2/en
Priority to EP02736163A priority patent/EP1408686A4/en
Priority to US10/344,957 priority patent/US7502543B2/en
Priority to KR1020037002349A priority patent/KR100892012B1/ko
Publication of WO2003001801A1 publication Critical patent/WO2003001801A1/ja
Priority to HK04104629A priority patent/HK1062977A1/xx
Priority to US11/894,186 priority patent/US20080112685A1/en
Priority to US12/321,872 priority patent/US20090148123A1/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/10Protecting distributed programs or content, e.g. vending or licensing of copyrighted material ; Digital rights management [DRM]
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/00086Circuits for prevention of unauthorised reproduction or copying, e.g. piracy
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/11Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3027Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327Table of contents
    • G11B27/329Table of contents on a disc [VTOC]
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/907Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/10527Audio or video recording; Data buffering arrangements
    • G11B2020/10537Audio or video recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/60Solid state media
    • G11B2220/65Solid state media wherein solid state memory is used for storing indexing information or metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Definitions

  • the present invention relates to a data transmission apparatus and method, and in particular, to appropriately manage data content and reproduction information recorded on a recording medium even when the content of data recorded on the recording medium is edited.
  • the present invention relates to a data transmission device and a data processing device, and a data processing device and a method. Background art
  • optical disks have been proposed as disk-type information recording media detachable from recording / reproducing devices.
  • Such a recordable optical disk has been proposed as a large-capacity medium of several gigabytes, and is expected to be a medium for recording AV (Andio Visual) signals such as video signals.
  • Sources of digital AV signals recorded on this recordable optical disk include CS digital satellite broadcasting and BS digital broadcasting, and digital terrestrial television broadcasting will be proposed in the future. Have been.
  • digital video signals supplied from these sources are generally subjected to image compression by the MPEG (Moving Picture Experts Group) 2 system.
  • a recording rate specific to the recording apparatus is defined.
  • the digital video signal is decoded, and then the recording is performed with a band limitation.
  • a digital recording method such as the MPEG 1 Video, MPEG 2 Video, DV (Digital Video) method, after being decoded once, it is re-encoded at the recording rate and encoding method specific to the device. Recorded.
  • Such a recording method decodes the supplied bit stream once. Coded, then bandwidth limited and re-encoded for recording, resulting in image quality degradation.
  • the supplied bit stream is not decoded or re-encoded, and The recording method has the least deterioration in image quality.
  • the transmission rate of the image-compressed digital signal exceeds the recording rate of the disc as the recording medium, after decoding by the recording / reproducing device, the transmission rate will be lower than the upper limit of the recording rate of the disc. It is necessary to record the code.
  • the recording rate becomes a fixed rate because the rotating head has a fixed rotational speed.
  • a disk recording device capable of storing data once in a buffer and recording in a burst manner can use the disk capacity as an information recording medium more efficiently.
  • a recording / reproducing device that records a broadcast signal as it is, without decoding or re-encoding, as a digital streamer and uses a disc as a recording medium Is expected to be required.
  • a large amount of data for example, video data and audio data related to a program
  • a single disc can be recorded.
  • Many programs will be recorded in the program.
  • the user needs to perform an operation such as copying the desired data to another disk from among many programs recorded on those disks.
  • the present invention has been made in view of such circumstances, and has been described in the art.
  • the purpose of the present invention is to allow the content of data recorded on a recording medium and the reproduction information to be appropriately managed even when the content of the existing data is copied to another recording medium.
  • a first data transmission apparatus includes: a reading unit that reads a data stream and its management information from a recording medium; and a partial data stream necessary for reproducing a specified reproduction section in the data stream. And a transmission unit that transmits the partial management information determined by the control unit, and a transmission unit that transmits the partial management information determined by the control unit.
  • the transmission unit can further asynchronously transmit the partial management information.
  • the control unit can select whether to transmit the partial data stream asynchronously or synchronously.
  • the data stream is an AV stream
  • the management information includes address information of a discontinuous point of the encoded information in the AV stream, information relating time information and address information in the AV stream, and features in the AV stream.
  • Time information of a typical image can be included.
  • the management information is Clip Information
  • the address information of the discontinuous point is Sequencelnfo and Programlnfo
  • the information relating the time information and the address information is CPI
  • the time information of the characteristic image is ClipMark. You can do it.
  • the management information may further include a PlayList, which is instruction information of a playback section of the AV stream.
  • the transmission unit may further transmit instruction information of a reproduction section of the AV data stream as a partial data stream.
  • the transmission unit can transmit the instruction information of the reproduction section of the AV data stream as a partial data stream without changing the content of the instruction information of the reproduction section of the AV stream.
  • the transmission unit includes a thumbnail associated with the instruction information of the playback section of the AV stream. And a thumbnail image associated with the time information of the characteristic image in the AV stream included in the partial management information data.
  • the AV stream is a data stream in units of a source bucket composed of a transport bucket and its corresponding time stamp.
  • the AV stream as a partial data stream is a data stream of a source packet of the AV stream. Can be a part.
  • the AV stream is a data sequence in units of a source bucket composed of a transport bucket and its corresponding time stamp, and the AV stream as a partial data stream is in units of transport packets. It can be a transport stream.
  • the control unit can switch between data transmission of the AV stream and its management information together or transfer of only the AV stream in real time.
  • a first data transmission method includes a reading step of reading a data stream and its management information from a recording medium, and a data stream corresponding to a partial data stream necessary for reproducing a specified reproduction section. It is characterized by including a determining step of determining the partial management information, a partial data stream, and a transmission step of transmitting the management information determined by the processing of the determining step.
  • the program of the first recording medium of the present invention comprises: a reading step of reading a data stream and its management information from the recording medium; and a part corresponding to a partial data stream necessary for reproducing a specified reproduction section in the data stream. It is characterized by including a determining step of determining management information, a transmission step of transmitting the partial data stream, and the management information determined by the processing of the determining step.
  • the first program according to the present invention includes a reading step of reading a data stream and its management information from a recording medium, and a data stream corresponding to a partial data stream necessary for reproduction of a specified reproduction section in the data stream. And causing the computer to execute a determination step of determining partial management information to be performed, a partial data stream, and a transmission step of transmitting the management information determined by the processing of the determination step.
  • the authentication unit that performs mutual authentication with the device to which the AV stream is transmitted, and the device at the transmission destination conforms to the predetermined format based on the result of the mutual authentication by the authentication unit. If it is found, the AV stream and its management information are transmitted together, and if the result of the mutual authentication by the authentication unit shows that the transmission destination device does not conform to the specified format, only the AV stream And a transmission unit for transmitting the data in real time.
  • a mutual authentication step of performing mutual authentication with an apparatus of a transmission destination of an AV stream, and a result of the mutual authentication by the processing of the authentication step the transmission destination apparatus conforms to a predetermined format. If it is found, the AV stream and its management information are transmitted together, and the result of the mutual authentication by the authentication step processing indicates that the destination device does not conform to the specified format. And a transmission step of transmitting only the AV stream in real time.
  • the program of the second recording medium of the present invention is a program of a data transmission device for transmitting an AV stream, the program comprising: a mutual authentication step for performing mutual authentication with a device to which the AV stream is transmitted; If it is determined from the result of the authentication that the transmission destination device conforms to the predetermined format, the AV stream and its management information are both transmitted as data, and from the result of the mutual authentication by the authentication step processing, Transmitting a real-time transmission of only the AV stream when it is determined that the transmission destination device does not conform to the predetermined format.
  • a second program provides a computer which controls a data transmission device for transmitting an AV stream, a mutual authentication step of mutually authenticating with a device to which the AV stream is transmitted, and a mutual authentication result from the authentication step. If it is determined that the transmission destination device conforms to the specified format, the AV stream and its management information are both transmitted together, and based on the result of the mutual authentication performed by the authentication step, the transmission destination device is transmitted. If you find that your device does not conform to the required format, And a transmission step of transmitting only the AV stream in real time.
  • the first data processing device of the present invention includes a receiving unit that receives a PlayList file, a PlayList file, and a management information file that manages the recorded PlayList. And a recording unit that adds
  • a receiving step of receiving a PlayList file a PlayList is recorded, and information on a newly received PlayList file is added to a management information file for managing the recorded PlayList. And an additional step of performing the operation.
  • the program of the third recording medium of the present invention is a program of a data processing device for receiving an AV stream file and a file reproduced from a recording medium in which a PlayList file for specifying a method of reproducing the AV stream is recorded.
  • a third program of the present invention provides a computer that controls a data processing device that receives a file reproduced from a recording medium on which an AV stream file and a PlayList file that specifies a method of reproducing the AV stream are recorded.
  • a receiving step of receiving the PlayList file and an additional step of recording the PlayList and adding information on the newly received PlayList file to a management information file for managing the recorded PlayList are executed.
  • a second data processing apparatus includes a receiving unit that receives a thumbnail file, and a recording unit that adds data of the received thumbnail file to a recorded thumbnail file.
  • a second data processing method includes a receiving step of receiving a thumbnail file, and an adding step of adding data of the received thumbnail file to a recorded thumbnail file.
  • a program of a fourth recording medium is a program of a data processing device for inputting data to a recording medium on which an AV stream file and a thumbnail file of the AV stream are recorded, wherein the program receives the thumbnail file. Receiving the received thumbnail file and adding the received thumbnail file to the recorded thumbnail file.
  • a computer that controls a data processing device that inputs data to a recording medium on which an AV stream file and a thumbnail file of the AV stream are recorded receives the thumbnail file.
  • a receiving step and an additional step of adding data of the received thumbnail file to the recorded thumbnail file are executed.
  • a partial data stream and partial management information data necessary for reproducing a reproduction section specified in a data stream are provided. Is determined, and the determined partial data stream is transmitted.
  • both the AV stream and its management information data are data. If transmitted and not compliant, only the AV stream is transmitted in real time.
  • a PlayList file is added to the management information file.
  • the recording medium program, and the program according to the present invention the data of the first thumbnail file is added to the second thumbnail file.
  • FIG. 1 is a diagram illustrating volume information.
  • FIG. 2 is a diagram illustrating a directory structure created on a disk.
  • FIG. 3 is a diagram showing the structure of a DVR MPEG-2 transport stream.
  • FIG. 4 is a diagram illustrating the syntax of source-packet.
  • FIG. 5 is a diagram illustrating the syntax of TP_extra_headerO.
  • FIG. 6 is a diagram illustrating a DVR MPEG-2 transport stream recorder model.
  • C is a diagram illustrating a DVR MPEG-2 transport stream player model.
  • FIG. 8 is a diagram showing the syntax of the Clip Information file.
  • FIG. 9 is a diagram illustrating ATC-sequence.
  • FIG. 10 is a diagram for explaining the relationship between ATC discontinuous points and ATC-sequence.
  • FIG. 11 is a diagram illustrating a continuous STC section.
  • FIG. 12 is a diagram illustrating the relationship between STC discontinuities and STC-sequence, and the relationship between STC'sequence and ATC-sequence.
  • FIG. 13 is a diagram illustrating the syntax of SequencelnfoO.
  • FIG. 14 is a diagram illustrating a program-sequence.
  • FIG. 15 is a diagram showing the syntax of ProgramlnfoO.
  • FIG. 16 is a diagram illustrating the syntax of StreamCodinglnfoO.
  • FIG. 17 is a diagram showing stream-coding-type.
  • FIG. 18 is a diagram showing video_format.
  • FIG. 19 is a diagram showing frame-rate.
  • FIG. 20 is a diagram showing display-aspect-ratio.
  • FIG. 21 is a diagram illustrating audio_presentation-type.
  • FIG. 23 is a diagram illustrating the syntax of CPI0.
  • FIG. 24 is a diagram for explaining the EP-map.
  • FIG. 25 is a diagram illustrating a TU-map formed when an AV stream is recorded as a Clip for the first time.
  • FIG. 26 is a diagram illustrating the syntax of the TU-map.
  • FIG. 27 is a diagram for explaining the relationship between PlayListMark and ClipMark.
  • FIG. 28 is a diagram illustrating the syntax of ClipMark.
  • FIG. 29 is a diagram illustrating the syntax of the PlayList file.
  • FIG. 30 is a diagram illustrating the syntax of UIAppInfoPlayList.
  • FIG. 31 is a diagram illustrating the syntax of PlayListO.
  • FIG. 32 is a diagram for describing a PlayList of the EP_map type.
  • FIG. 33 is a diagram illustrating a TU-map type PlayList.
  • FIG. 34 is a view for explaining the relationship between the time information of the PlayList of the EP_map type and the address information in the AV stream file.
  • FIG. 35 is a view for explaining the relationship between the time information of the TU-map type PlayList and the address information in the AV stream file.
  • FIG. 36 is a diagram illustrating the syntax of PlayltemO.
  • FIG. 37 is a diagram illustrating the syntax of PlayListMark.
  • FIG. 38 is a diagram illustrating the syntax of Info.dvr.
  • FIG. 39 is a diagram illustrating the syntax of UIAppInfo Volume.
  • FIG. 40 is a diagram illustrating the syntax of TableOfPlayLists.
  • FIG. 41 is a diagram illustrating the syntax of the thumbnail header information file.
  • FIG. 42 is a diagram illustrating the syntax of a thumbnail picture data file.
  • FIG. 43 is a diagram illustrating a method of storing data in a tn-block.
  • FIG. 44 is a block diagram showing a configuration of the moving image recording / reproducing apparatus.
  • FIG. 45 is a view for explaining the concept of the relationship between the Clip and PlayList when the AV stream is recorded as a new Clip.
  • FIG. 46 is a diagram illustrating the concept of creating a Virtual PlayList.
  • FIG. 47 is a view for explaining the concept of the relationship between the Clip and the Play List when a part of the playback section of the Real PlayList is deleted.
  • FIG. 48 is a view for explaining the concept of the relationship between the Clip, PlayList, and Virtual PlayList when Minimize is edited.
  • FIG. 3 is a diagram illustrating a case where two ATC sequences are formed in p.
  • FIG. 50 is a diagram illustrating the relationship among ATC sequences, STC sequences and program sequences when data of one Clip AV stream is partially deleted.
  • FIG. 51 is a diagram illustrating a relationship between a Clip and a PlayList when a part of a Clip AV stream whose CPI is an EP-map is deleted.
  • FIG. 52 is a diagram for explaining a case where a clip is divided into two when a part of the Clip AV stream is deleted when ATC discontinuity is not allowed in the Clip.
  • FIG. 53 is a view for explaining the relationship between the Clip and the PlayList when a part of the Clip AV stream whose CPI is TU_map is deleted.
  • FIG. 54 is a flowchart illustrating the creation of a Clip AV stream file and a Clip Information file when an AV stream is clipped and newly recorded.
  • FIG. 55 is a flowchart for explaining an operation example of creating a Sequencelnfo when an AV stream is first recorded as a Clip.
  • FIG. 56 is a flowchart for explaining an operation example of creating a Programlnfo.
  • FIG. 57 is a flowchart for explaining an operation example of creating an EP_map.
  • FIG. 58 is a flowchart illustrating a method for creating a Real PlayList.
  • FIG. 59 is a flowchart illustrating a method for creating a Virtual PlayList.
  • FIG. 60 is a flowchart illustrating a PlayList reproducing method.
  • FIG. 61 is a diagram for explaining a case where both the AV stream file and the database file are transferred.
  • Fig. 62 is a diagram for explaining the case where the AV stream is transferred in real time (stream transfer) and the database is transferred as a file.
  • Figure 63 shows a case where only the AV stream is transferred in real time
  • FIG. 64 is a diagram for explaining a case where an AV stream is transferred at a speed for reproducing data in real time when the recording device at the copy destination does not conform to the DVR format.
  • Fig. 65 shows the relationship between the Clip and the PlayList when copying only the PlayList and the necessary Clip part from the copy source (output side playback device) to the copy destination (input side recording device).
  • Fig. 66 is a diagram for explaining the Clip part necessary for playing the PlayList when the PlayList is copied from the copy source (output-side playback device) to the copy destination (input-side recording device). is there.
  • Figure 67 shows how to determine the copy start point of the data before IN_time when copying a PlayList from the copy source (output side playback device) to the copy destination (input side recording device).
  • Fig. 68 explains how to determine the data copy end point after OUT_time when copying a PlayList from a copy source (output-side playback device) to a copy destination (input-side recording device).
  • Fig. 69 shows the relationship between the Clip and PlayList when copying only the PlayList and the necessary Clip part from the copy source (output side playback device) to the copy destination (input side recording device).
  • FIG. 7A is a diagram for explaining a method of changing a Clip when a Clip is partially copied from a copy source (an output-side reproducing device) to a copy destination (an input-side recording device).
  • FIG. 70B is a diagram illustrating a method of changing a Clip when a Clip is partially copied from a copy source (an output-side reproducing device) to a copy destination (an input-side recording device).
  • FIG. 70C is a diagram for explaining a method of changing a Clip when a Clip is partially copied from a copy source (output-side reproducing device) to a copy destination (input-side recording device).
  • FIG. 70D is a diagram for explaining a method of changing a Clip when a Clip is partially copied from a copy source (an output-side reproducing device) to a copy destination (an input-side recording device).
  • Figure 71 shows a copy of the DVR AV stream file and its related files over the digital bus from the copy source (playback device on the output side) to the copy destination (recording device on the input side) via the digital bus.
  • FIG. 3 is a block diagram showing a configuration in the case of performing the operation.
  • Fig. 72 is a flowchart illustrating the process of copying the PlayList from the copy source (the playback device on the output side) to the copy destination (the recording device on the input side). is there.
  • Fig. 73 is a flowchart describing the processing of the Clip on the copy source side when copying the PlayList from the copy source (output side playback device) to the copy destination (input side recording device). It is.
  • FIG. 74 is a flowchart for explaining the processing at the copy destination when the PlayList is copied from the copy source (playback apparatus at the output side) to the copy destination (recording apparatus at the input side).
  • FIG. 75 is a diagram for explaining a case where the AV stream file and the data file are transferred to a recording device via a radio wave.
  • FIG. 76 is a diagram illustrating a case where the AV stream file and the data base file are recorded on different servers, and the files are transferred from each server to a recording medium.
  • FIG. 1 shows a simplified structure of an application format on a recording medium (a recording medium 10 in FIG. 44 described later).
  • This format has two layers, PlayList and Clip, for AV stream management.
  • the Volume Information manages all Clips and PlayLists in the disc.
  • a pair of one AV stream and its attached information is considered as one object, and it is called Clip.
  • An AV stream file is called a Clip AV stream file, and its accompanying information is called a Clip Information file.
  • One Clip AV stream file stores data in which an MPEG2 transport stream is arranged in a structure specified by the DVR (Digital Video Recording) application format.
  • DVR Digital Video Recording
  • Clip Information file is useful for finding address information to start decoding the stream in the Clip AV stream file.
  • PlayList was introduced to allow users to select the desired playback section from the Clip and edit it easily.
  • One PlayList is a set of playback sections in the Clip.
  • One playback section in a Clip is called Playltem, which is represented by a pair of IN and OUT points on the time axis. Therefore, PlayList is a collection of Playltem.
  • PlayList There are two types of PlayList. One is Real PlayList and the other is Virtual PlayList.
  • a Real PlayList is considered to share the stream portion of the Clip it references. That is, the Real PlayList occupies in the disc a data capacity corresponding to the stream portion of the Clip referred to by the Real PlayList.
  • a Real PlayList that automatically refers to the playable range of the entire Clip is automatically created.
  • the data of the stream part of the Clip to which it refers is also deleted.
  • Virtual PlayList does not share Clip data. Virtual Even if PlayList is changed or deleted, Clip does not change anything.
  • PlayList Real PlayList and Virtual PlayList are simply referred to as PlayList.
  • the required directories on the DVR disc are as follows.
  • Figure 2 shows an example of the directory structure on the DVR disc. As shown in the figure, the root directory includes one directory.
  • the "DVR” directory stores the following files.
  • the "info.dvr” file is created under the DVR directory and stores the overall information of the application layer. There must be only one info.dvr under the DVR directory. It is assumed that the file name is fixed to info.dvr. "merm.tidx” and “menu.td at”, and "mark.tidx” and “mark.tdat” are files for storing information about thumbnails.
  • the "DVR" directory includes directories described below.
  • the "PLAYLIST" directory stores two types of PlayList files, Real PlayList and Virtual PlayList.
  • xxxxx.rpls This file stores information related to one Real PlayList. One file is created for each Real PlayList. The file name is "xxxxx.rpls”. Here, "xxxxx” is five numbers from 0 to 9. The file extension must be "rpls”.
  • the "CLIPINF" directory stores one file corresponding to each AV stream file.
  • zzzzz.clpi This file is a Clip Iniomationnle corresponding to one AV stream file (Clip AV stream file or Bridge-Clip AV stream file).
  • the file name f is "zzzzz.clpi", where " ⁇ " is five numbers from 0 to 9.
  • the file extension must be "clpi”.
  • the “STREAM” directory stores AV stream files.
  • "zzzzz.m2ts” This file is an AV stream file handled by the DVR system. This is a Clip AV stream file or a Bridge-Clip AV stream file. The file name is “zzzzz.ni2ts", where “zzz zz" is five numbers from 0 to 9. The file extension must be "m2ts”.
  • the AV stream file must have the structure of the DVR MPEG2 transport stream shown in Figure 3.
  • the DVR MPEG2 transport stream has the following features.
  • the DVR MPEG2 transport stream is composed of an integer number of Aligned units.
  • the size of the aligned unit is 6144 (2048 x 3 bytes).
  • the Aligned unit starts from the first byte of the source packet.
  • Source packets are 192 bytes long.
  • One source packet consists of a TP—extra—header and a transport packet.
  • the TP—extra—header is 4 bytes long, and the transport packet is 188 bytes long.
  • One Aligned un consists of 32 source buckets.
  • the last Aligned unit in the DVR MPEG2 transport stream also consists of 32 source buckets.
  • Figure 4 shows the syntax of the source packet.
  • Transport-packet 0 is a 188-byte MPEG-2 transport bucket specified in ISO / IEC 13818-1.
  • Figure 5 shows the syntax of TP—extra—header.
  • copy—permission—indicator is an integer that indicates the copy limit of the pay mouth of the transport ticket to be transported.
  • arrival—time_stamp is a time stamp indicating the time at which the corresponding transport packet arrives at the decoder (corresponding to the AV decoder 16 in FIG. 44 described later) in the AV stream. This is an integer value that has a value specified by time_st_amp in the following equation (1).
  • FIG. 6 shows a recorder model of the DVR MPEG-2 transport stream (corresponding to the moving image recording / reproducing apparatus 1 in FIG. 44 described later). This is a conceptual model for specifying the recording process. DVR MPEG-2 transport streams must follow this model.
  • the input timing of the MPEG-2 transport stream will be described.
  • the input MPEG2 transport stream is a full transport stream or a partial transport stream.
  • the input MPEG2 transport stream must conform to ISO / IEC13818-1 or ISO / IE C13818-9.
  • the i-th byte of the MPEG2 transport stream is composed of T-STD (ransport stream system target decoder) defined by ISO / IEC 13818-1 (corresponding to the AV decoder 16 in Fig. 44) and the source.
  • the packetizer (source packetizer) 204 (corresponding to the source packetizer 29 in FIG. 44) is input simultaneously at time t (i).
  • the 27 MHz PLL 202 (built-in the control unit 17 in the moving picture recording / reproducing apparatus 1 in FIG. 44) will be described.
  • the 27MHz clock frequency must be locked to the PGR (Program Clock Reference) value of the MPEG-2 transport stream.
  • Arrival time clock counter 203 (in the moving picture recording / reproducing apparatus 1 in FIG. 44, built in the control unit 17), the 27 MHz PLL 202 outputs 27 MHz. This is a binary counter that counts pulses of frequency. Arrival-time-clock (i) is the count value of Arrival time clock counter 203 in Tokii Ut (i).
  • the source bucket sizer 204 will be described.
  • the source bucketizer 204 adds a TP-extra-header to all transport buckets and creates a source packet.
  • Arrival—time—stamp represents the time at which the first byte of the transport packet arrives at both the T-STD 201 and the source bucketizer 204.
  • Arrival time-stamp (k) is the Hatpur value of Arrival-time-clock (k), as shown in equation (1), where k is the first byte of the transport packet. Show the eyes.
  • arrival— time-stamp (k) arrival-time-clock (k)% 2 30 (1)
  • the write buffer (Write Buffer) 205 (built-in the writing unit 32 in the moving image recording / reproducing apparatus 1 of FIG. 44) will be described.
  • Rmax is the input bit rate of the source packet stream from the source bucketizer 204 to the write buffer 205. If the maximum pit rate of the input transport stream is TS—recording—rate, Umax is calculated as follows.
  • Rud is the output bit rate from the write buffer 205 to the DVR drive 206 (in the moving picture recording / reproducing apparatus 1 of FIG. 44, it is built in the writing section 32).
  • the output bit rate of the source bucket stream from the buffer is Rud.
  • the output bit rate from the buffer is zero.
  • the DVR drive 206 transmits each packet from the write buffer 205 to which an ATS corresponding to the arrival time of each bucket to the T-STD 201 has been added to a disk (recording medium 1 in FIG. 44). (Corresponding to 0).
  • Figure 7 shows the DVR MPEG-2 transport stream player model ( Figure 4-4). This corresponds to the moving image recording / reproducing apparatus 1). This is a conceptual model for specifying the regeneration process. DVR MPEG-2 transport streams must follow this model.
  • the read buffer (Read buffer) 2 2 2 (in the moving image recording / reproducing apparatus 1 in FIG. 44, built in the reading unit 11) will be described.
  • Rud is the input bit rate from the DVH drive (DVR drive) 2 2 1 (in the moving picture recording / reproducing apparatus 1 of FIG. 44, incorporated in the reading section 11) to the read buffer 2 2 2.
  • the input bit rate of the source packet stream to the buffer is Rud.
  • the buffer is full, input to the buffer is stopped.
  • Rmax is the output bit rate of the source packet stream from the read buffer 222 to the source depacketizer 222 (corresponding to the source depacketizer 14 in Figure 43). is there.
  • the arrival time clock counter 2 25 is generated by a 27 MHz crystal oscillator (27 MHz X-tal) 2 2 4 (in the moving picture recording / reproducing apparatus 1 shown in FIG. 44, which is built in the control unit 17). This is a binary count that counts pulses at different frequencies.
  • the value is set to the value of the bucket's arrival time stamp. Resets the count value of the bal-time clock counter 2 25.
  • Arrival—time—clock (i) is the count value of the arrival time clock counter 225 at time t (i).
  • the output timing of the MPEG-2 transport stream will be described.
  • the transport packet of that source bucket is extracted from the buffer.
  • FIG. 8 shows the syntax of the Clip Information file.
  • Clip Information file has SequencelnfoO, ProgramlnfoO, CPlO, and ClipMarkO.
  • Sequencelnfo one start — address indicates the start address of SequencelnfoO in units of the relative bytes from the first byte of the zzzzz.clpi file. Relative bytes are counted from zero.
  • ProgramInfo_Start_address indicates the start address of ProgramlnfoO in units of relative bytes from the first byte of the zzzzz.clpi file. Relative bytes are counted from zero.
  • CPI—Start—address indicates the start address of CPI0 in units of relative bytes from the first byte of the zzzzz.clpi file. Relative bytes are counted from zero.
  • ClipMark—Start—address indicates the start address of ClipMarkO in units of relative bytes from the first byte of the zzzzz.clpi file. Relative bytes are counted from zero.
  • SequencelnfoO defines information of ATC-se (juence and STC'sequence in Clip AV stream.
  • ATC-sequence will be described.
  • the time axis created on the basis of the arrival time stamp (ATS) of each source one scan packets constituting the AV stream file is referred to as the Arai Pal timebase is called its clock, and ATC (Arrival Time Clock) c
  • the source bucket sequence that does not include the ATC discontinuity point (the discontinuity point of the arrival time base) is called an ATC-sequence.
  • FIG. 9 is a diagram illustrating ATC-sequence.
  • the Clip When newly recording the input transport stream as a Clip AV stream file, the Clip must not contain ATC discontinuities and has only one ATC-sequence. It is assumed that the ATC discontinuity point is created only when the stream data of the Clip AV stream file is partially deleted by editing or the like. Details of this will be described later.
  • the address where the new ATC starts that is, the start address of the ATC-sequence is stored in SequencelnfoO. This address is indicated by SPN—ATC_start.
  • the ATC-sequence other than the last ATC-sequence in the AV stream file starts from the source packet indicated by the SPN—ATC—start, and the source indicated by the next SPN—ATC—start End with the source bucket immediately before the packet.
  • the last ATC-sequence starts with the source packet pointed to by SPN_ATC-start and ends with the last source packet of the AV stream file.
  • FIG. 10 is a diagram for explaining the relationship between ATC discontinuous points and ATC-sequence.
  • the Clip AV stream file has two ATC discontinuous points and three ATC-sequences.
  • STC-sequence will be described.
  • STC System Time Clock
  • MPEG-2 a system time base clock
  • PCR Program Clock Reference
  • STC value is represented by the count value of a 33-bit binary counter with 90 kHz accuracy.
  • FIG. 11 is a diagram illustrating a continuous STC section.
  • the horizontal axis is Arrival Time Clock (or arrival time base), and the vertical axis is STC (or system time base).
  • STC Arrival Time Clock
  • STC system time base
  • STC increases monotonically, The STC in that section is continuous.
  • STC wrap-around point is not a discontinuity of the STC. STC is continuous even after wraparound.
  • STC discontinuity occurs when the broadcasting station switches the transmission system, when the recording side switches the channel to be recorded, or when the user performs an editing operation.
  • a source packet sequence that does not include STC discontinuities is called an STC-sequence. Note that the same STC value never appears in the same STC sequence. For this reason, the maximum clip length is limited to a wrap-around period (approximately 26 hours) for a 33-bit STC.
  • the address where the new STC starts is stored in SequencelnfoO. This address is indicated by SPN_STC—start.
  • STC-sequence does not straddle the boundary of ATC'sequence.
  • the STC-sequence other than the last STC-sequence in the AV stream file starts from the source bucket indicated by the SPN-STC-start, and starts from the source bucket indicated by the next SPN_STC_start. End with the previous source packet.
  • the last STC-sequence starts with the source packet pointed to by SPN-STC-start and ends with the last source bucket of the AV stream file.
  • FIG. 12 is a diagram illustrating the relationship between STC discontinuities and STC-sequence, and the relationship between STC-sequence and ATC-sequence.
  • the Clip AV stream file has three STCs and three STC-sequences. One ST C'sequence does not cross ATC-sequence boundaries.
  • FIG. 13 shows the syntax of SequencelnfoO.
  • nmn_of—ATC—sequences indicates the number of ATC-sequences in the AV stream file.
  • SPN-ATC-start [atc-id] indicates the address at which the ATC-sequence indicated by ate-id starts on the AV stream file.
  • SPN_ATC_start [atc-id] is a size in unit of source packet number, and is counted starting from zero as the initial value from the first source bucket of the AV stream file.
  • the first SPN_ATC in SequencelnfoO—start [0] is zero. Also, the SPN-ATC-start [atc-id] values entered in SequencelnfoO are listed in ascending order. That is, SPN- ATC-start [atc_id] entered in SequencelnfoO satisfies the following conditions.
  • num-of- STC-sequences [atc-id] Indicates the number of STC-sequences indicated by ate-id and on the ATC-sequence.
  • offset-STC-id [ate-id] indicates the offset value of set-id with respect to the first STC-sequence on the ATC-sequence pointed to by atc-id.
  • offset-STC-id [ate-id] is zero.
  • stc-id corresponding to the STC-sequence on the ATC-sequence pointed to by atc_id is defined by the order described by forloop of stc-id in the syntax, and the value is offset_STC- Start with id [atc—id].
  • the last stcjd of the preceding ATC-sequence and the first stc-id of the following ATC-sequence may have the same value. If these two stc ids have the same value, The same STC value does not appear in two STC-sequences referenced by the value of.
  • offset_STC_id [atc d] is set to a value that satisfies this restriction.
  • PGR—PID [atc—id] [stc_id] is a transport packet that has a valid PCR for the STC-sequence pointed to by stc-id on the ATC-sequence pointed to by ate—id Is the value of the PID.
  • SPN_STC—start [atc—id] [stc—id] indicates the address where the STC-sequence pointed to by stc_id on the ATC'sequence pointed to by ate—id starts on the AV stream file.
  • SPN-STC-start [atc_id] [stc-id] is a size in unit of source bucket number, and is counted from the first source packet of the AV stream file with zero as an initial value.
  • the SPN-STC-start [atc-id] [stc-id] values entered in SequencelnfoO are arranged in ascending order.
  • ate The first SPN—STC—start [atc—id] [stc—id] on the ATC-sequence pointed to by id is greater than or equal to SPN—ATC—start [atc_id ⁇ . That is, the following condition is satisfied.
  • presentation—start one time [ate—id] [stc—idj, ate—id on the ATC-sequence indicated by i id stc—the AV stream on the STC-sequence indicated by the id Presentation of 'Start. Indicating time. This is the presentation time value in units of 45 kHz derived from the STC of the STC-sequence.
  • the playback device moving image recording / playback device 1 in FIG. 44 described later
  • Information for example, the transport packets that carry the video and audio elementary streams, and the video and audio component types (for example, HDTV video and MPEG-2 AAC audio streams).
  • This information is useful for creating a menu screen for explaining the contents of the PlayList, which refers to the AV stream, to the user.
  • the AV decoder 1 of the playback device is used prior to decoding the AV stream. This is useful for setting the initial state of 6 (FIG. 44 described later) and the demultiplexer 15 (FIG. 44 described later). For this reason, the Clip Information file has a Programlnfo to describe the contents of the program.
  • AV stream files storing MPEG2 transport streams may change program content in the file.
  • the PID of the transport bucket that transmits the video elementary stream changes, or the component type of the video stream changes from SDTV to HDTV.
  • Programlnfo stores information on the changing points of the program contents in the AV stream file.
  • FIG. 14 is a diagram for explaining the program-sequence.
  • the Clip AV stream file has three program-sequences.
  • the program-sequence may be across the boundaries of the ATC'sequence; the boundaries of the STC-sequence;
  • Figure 15 shows the syntax of ProgramlnfoO.
  • num— of— program— sequences is the number of nrogra m-sequences in the AV stream file, ⁇ 9
  • SPIN program—sequence—start, the address where program-seq uence opens on the AV stream file.
  • SPN program—sequence—start is a size in units of the source packet number, and is counted from the first source packet of the AV stream file starting from zero.
  • the SPN program—sequence_start values entered in ProgramlnfoO are listed in ascending order.
  • SPN program—sequence—start [It is assumed that this refers to a source packet that has the first PMT of the fe that corresponds to the program—sequence.
  • SPN program_sequence—start records data
  • a recorder (corresponding to the moving picture recording / reproducing apparatus 1 in Fig. 44) is created by analyzing the PSI / SI in the transport stream.
  • SPN__program—sequence—start is the actual PSI / SI change point because the multiplexing stream analyzer 26) needs a delay time to analyze the PSI / SI and detect the change. May be a source packet within a predetermined time from.
  • num—of—streams— ⁇ —ps 3 ⁇ 4 indicates the number of elementary streams that are broadcast in all program-sequences.
  • num-of-groups indicates the number of elementary-stream groups defined in the rogram-sequence. num—of_groups is a value greater than or equal to 1. If the transport stream's PSI / SI has elementary stream group information, num_of—groups is assumed to be greater than or equal to one. Each group makes up one view in a multi 'view' program. stream_ ⁇ > ID [Where the program-map-PID of the program-sequence indicates the PID value for the elementary stream defined in the PMT referenced 9.
  • StreamCodinglnfoO indicates information of an elementary stream pointed by the stream-PID. Details will be described later.
  • num_of_streams_in_group indicates the number of elementary streams included in the elementary stream group.
  • stream_index is the value of s tream_mdex defined by the for-loop in the syntax corresponding to the elementary stream included in the elementary stream group, and is ⁇ .
  • Figure 16 shows the syntax of StreamCodinglnfoO.
  • stream coding—type, which corresponds to this StreamCodinglnfoO.
  • stream Indicates the coding type of the elementary stream pointed to by the PID.
  • video-format indicates the video format of the video stream specified by stream_PID corresponding to this StreamCodinglnfoO.
  • Figure 18 shows the meaning of the values.
  • frame-rate indicates the frame rate of the video stream indicated by the stream JPID corresponding to this StreamCodinglnfoO.
  • Figure 19 shows the meaning of the values.
  • the cc-flag is a flag indicating whether a closed 'caption data (closed caption data) signal is encoded in the video stream pointed to by the stream_PID corresponding to the StreamCodinglnfoO.
  • the original-video-format-flag indicates the power that the original-video-format and original-display-aspect-ratio exist in this StreamCodinglnfoO with a single flag.
  • original-video-format fe This is the original video format before the video stream pointed to by streamJPID corresponding to this StreamCodinglnfoO is encoded. The meaning of the value is the same as in the above video-format.
  • the video stream When transcoding a transport stream in which a multimedia stream (BML stream, subtitles, etc.) is multiplexed along with the video stream, the video stream changes its video format by being re-encoded. (For example, it changes from 1080i to 480i), but the multimedia data stream keeps the original stream. At this time, information mismatch may occur between the new video stream and the multimedia data stream.
  • the parameters related to the display of a multimedia data stream are determined by assuming the video format of the original video stream, but the video stream re-encodes the video stream. This is when the format has changed. In such a case, information on the original video stream is stored in original_video_format and original-display-aspect-ratio.
  • the playback device creates a display image from the new video stream and the multimedia data stream as follows.
  • audio—presentation—type indicates the presentation type of the audio stream pointed to by the Stream—PID for the StreamCoainglnfoO.
  • Figure 21 shows the meaning of the values.
  • sampling-frequency indicates the sampling frequency of the audio stream pointed to by stream-PID.
  • Figure 22 shows the meaning of the values.
  • CPI There are two types of CPI, EP-map and TU-map. If the CPI_type in CPlO is EP_map type, its CPI0 contains EP_map. When the CPI-type in CPI0 is TU-map type, the CPlO includes TU_ma.
  • One AV stream file has one EP_map or one TU_map.
  • EP The map is a list of entry point-to-point (EP) data, extracted from the elementary stream and the transport stream. It has address information to find the location of one point in the AV stream at which entry should start decoding.
  • One EP data consists of a presentation time stamp (PTS) and the AV unit of the access unit corresponding to the PTS. It consists of a pair of data dresses in a trim.
  • PTS presentation time stamp
  • EP_map is used mainly for two purposes. First, it is used to find the data address in the AV stream of the access unit referenced by the presentation timestamp in the PlayList. Second, it is used for fast forward playback and fast reverse playback. When the recording device records the input AV stream, if the syntax of the stream can be analyzed, an EP_map is created and recorded on the disc.
  • the TU_map has a list of time unit (TU) data based on the arrival time of the transport packet input through the digital interface. This gives the relationship between the time of arrival time based and the overnight address in the AV stream.
  • TU time unit
  • Figure 23 shows the syntax of CPI0.
  • length indicates the number of bytes from the byte immediately after this length field to the last byte of CPI0.
  • CPI—type is a 1-bit flag that indicates the CPI type of the Clip.
  • EP_map has the following data for one video stream in the AV stream file.
  • num_EP Entries: Number of entry points for the video stream.
  • EP-map has num-EP-entries number of PTS_EP-start and SPN-EP-start pairs of data.
  • PTS—EP_start Indicates the PTS of the access unit starting from the sequence header in the video stream.
  • SPN_EP_start Access unit referenced by the PTS EP start Indicates the address in the AV stream file of the source socket that contains the first byte of. SPN-EP-start is the size in units of source packet number, and is counted from the first source bucket of the A stream file, starting with zero as the initial value.
  • the EP-map can have the above data for each video stream.
  • Figure 24 shows an example of EP_map.
  • m_PID x in the Clip AV stream
  • k entry points k
  • the figure shows an example of a source packet pointed by SPN_EP_start.
  • the payout following the TP-header of the transport packet in the source packet starts with the PES packet header.
  • SQH sequence header
  • GOPH GOP header
  • I-PICH I-picture header
  • the PTS of the access unit starting from this sequence header is encoded in the PES bucket header.
  • FIG. 25 is a diagram for explaining a TU_map formed when an AV stream is newly recorded as a Clip.
  • the time axis created based on the arrival time of the source packet in one ATC-sequence is divided into predetermined time units. This time unit is called time-unit.
  • FIG. 26 is a diagram illustrating the syntax of TU-map.
  • time unit—size gives the size of one time_unit, which is simply a 45 kHz clock derived from an equivalent time clock with 27 MHz accuracy. Size.
  • offset_arrival_time [atc_id] is the offset time to the first complete time-unit in the ATC'sequence pointed to by ate-id. It is measured in units of 45kHz clock derived from 27MHz accurate arrival time clock.
  • the AV stream file When an AV stream is newly recorded as a Clip, the AV stream file has only one ATC-sequence and offset_arrival_time [atc_id] is zero. When multiple offset_arrival-time [atc_id] are entered in the TU-map, the following conditional expression is satisfied.
  • num-of-time-unit-entries [atc-id] [Where ate-id indicates the number of time_unit entries included in the ATC-sequence.
  • SPN_time_unit_start [atc_id] [i] is the start address of the i-th time_unit in the ATC-sequence pointed to by atc_id. It is counted using the source packet number as a unit and zero as the initial value from the first source packet of the AV stream file.
  • the SPN—time—unit—start value for the current time—unit is equal to the value of the previous SPN—time_unit_start.
  • Entries with SPN—time—unit—start values in the TU_map must be in ascending order.
  • the start time of the i-th time unit in the ATC-sequence indicated by ate-id is TU-start-time [ate-id] [i] defined by the following equation.
  • ClipMarkO defines information of a mark (Mark) in the Clip AV stream. Marks are provided to specify highlights and characteristic times in the Clip.
  • the mark added to the Clip specifies a characteristic scene caused by the content of the AV stream, for example, a CM start point, a CM end point, and a scene change point.
  • the mark set in the Clip is set by the recorder when the AV stream is recorded as a new Clip.
  • the PlayList file has a PlayListMark in order to store the mark set in the PlayList.
  • the mark set in the PlayList is mainly set by the user, for example, a book mark point.
  • Setting a mark in Clip or PlayList is performed by adding a time stamp indicating the time of the mark to ClipMark I PlayListMark. Deletion of a mark is performed by deleting the time stamp of the mark from ClipMark I PlayListMark. Therefore, the AV stream is not changed at all by setting or deleting the mark.
  • FIG. 27 is a diagram showing the relationship between marks set in Clip and marks set in PlayList.
  • the mark stored in the ClipMark of the Clip referenced by the PlayList can be referenced. Therefore, when one Clip is referenced by Real PlayList or multiple Virtual PlayLists, those PlayLists can share the ClipMark of the one Clip, so that mark data can be managed efficiently. it can.
  • Figure 28 shows the ClipMark syntax.
  • makerJD indicates the maker ID of the maker that defines the mark-type.
  • number_of_Clip_marks indicates the number of entries of marks stored in ClipMark.
  • mark_invalid_flag is a 1-bit flag that indicates that this mark has valid information when this value is set to zero, and that indicates that this mark has valid information. This mark indicates that it is invalid.
  • the recorder When the user performs an operation on the user interface to delete an entry for a mark, instead of deleting the entry for that mark from the ClipMark, the recorder changes its mark—invalid—flag value to 1. May be.
  • markjype indicates the type of mark.
  • rei_to_STC_id mark—time—stamp and representative—picture—time—stamp Indicates the stc'id that specifies the STC-sequence where both are located.
  • the value of stc-id is defined in SequencelnfoO.
  • mark_time_stamp represents a point in the Clip AV stream to which a mark is specified, based on the presentation time stamp.
  • entry_ES_PID is set to OxFFFF, the mark is a pointer on the time axis common to all elementary streams in the Clip. If entry—ES_PID is set to a value that is not OxFFFF, entry—ES_PID indicates the value of the PID of the transport packet containing the elementary stream pointed to by the mark.
  • ref_to_thumbnail_index indicates the information of the thumbnail image added to the mark. If the ref—to_thumbnail—index field is not OxFFFF, the mark has a thumbnail image attached to it, which is stored in the mark.tdat file. The image is referenced in the mark.tidx file using the value of thumbnail-index (see below). If the ref—to—thumbnail—index field is OxFFFF, the mark is appended with a thumbnail image. Indicates that there is not.
  • FIG. 29 shows the syntax of the PlayList file.
  • PlayList file has UIAppInfoPlayListO, PlayListO, PlayListMarkO.
  • PlayList_start_address indicates the start address of PlayListO in units of the number of bytes relative to the first byte of the PlayList file. Relative bytes are counted from zero.
  • PlayListMark_start_address indicates the start address of PlayListMarkO in units of relative bytes from the first byte of the PlayList file. Relative bytes are counted from zero.
  • UIAppInfoPlayListO stores the parameters of the user application application for PlayList.
  • FIG. 30 shows the syntax of UIAppInfoPlayListO.
  • ref_to_thumbnail_inde indicates the information of the thumbnail image added to the mark. If the ref—to__thumbnail—index field is not OxFFFF, the mark has a thumbnail image attached to it, which is stored in the menu.tdat file. The image is referenced in the menu.tidx file using the value of thumbnail-index (see below). ref_to__thumbnail—If the index field is OxFFFF, it indicates that no thumbnail image is added to the mark.
  • the other syntax fields indicate the parameters of the user interface application for the PlayList, but are not necessary for describing the embodiment of the present invention, and therefore, detailed description thereof will be omitted.
  • FIG. 31 shows the syntax of PlayListO.
  • lengt indicates the number of bytes from the byte immediately after this length field to the last byte of PlayListO.
  • CPI-type This is a 1-bit flag that indicates the value of the CPI-type of the Clip used by PlayltemO.
  • CPI-type is defined by CPI-type in the Clip Information file.
  • number—of—Playltems indicates the number of PlayltemOs in the PlayListO.
  • the Playltem-id value for PlayltemO is determined by the order in which PlayltemO appears in the for-loop of PlayltemO id in the syntax. Playltem—id starts at 0.
  • Playltem basically contains the following data.
  • connection— condition that indicates the state of the connection between the Playltem on the front side and the current Playltem.
  • FIG. 32 is a view for explaining a PlayList having a CPI_type of EP_map (this is called an EP-map type PlayList).
  • IN-time and OUT-time of Playltem indicate PTS-based time.
  • the IN-time and OUT-time refer to times on the same STC-sequence.
  • To indicate the STC-sequence use “reto— STC-id”.
  • the IN-time and OUT-time are given by the STC'sequence-! Presentation.
  • the presentation is indicated by start-time and presentation-end-time (these information is in Sequencelnfo). Refers to the time within the playback section.
  • FIG. 33 is a view for explaining a PlayList of CPI-type of TU-map (this is called a PlayList of TU_map type).
  • TU Playlte for map type PlayList
  • the IN-time and OUT_time of m refer to the time on the arrival time base. Its IN_time and OUT-time point to the same ATC'sequence time.
  • FIG. 34 is a view for explaining the relationship between the time information of the PlayList of the EP_map type and the address information in the AV stream file.
  • PlayList time information is PTS information of pictures and audio frames in the AV stream file. Then, the EP-map of the Clip Information file and the time information in the Sequencelnfo ifi AV stream are associated with the address in the file.
  • FIG. 35 is a view for explaining the relationship between the time information of the TU-map type PlayList and the address information in the AV stream file.
  • the time information of the PlayList is the arrival time information in the AV stream file.
  • the TU_map of the Clip Information file associates the time information in the AV stream with the address in the file.
  • FIG. 36 shows the syntax of PlayltemO.
  • length indicates the number of bytes from the byte immediately after this length field to the last byte of PlayltemO.
  • Clip_Information file—name indicates the file name of the Clip Information file to be played.
  • connection-condition indicates whether or not the Playltem to be ended and the current Playltem are connected seamlessly.
  • ref_to_STC_id indicates the stc-id of the STC'sequence of the Clip referenced by the Playltem.
  • the value of stc-id is defined in Sequencelnfo.
  • IN_time stores the playback start time of Playltem.
  • OUT_time stores the playback end time of Playltem.
  • FIG. 37 shows the syntax of PlayListMarkO.
  • PlayListMark stores a mark mainly set by the user.
  • length indicates the number of bytes from the byte immediately after this length field to the last byte of PlayListMarkO.
  • PlayList—marks indicates the number of mark entries stored in PlayListMark.
  • invalid_flag is a 1-bit flag that indicates that this mark has valid information when this value is set to zero and that this mark is set to 1 , This mark is invalid.
  • the recorder sets the value of the mark—invalid—flag to 1 May be changed to
  • mark_type indicates the type of mark.
  • mark_name_length indicates the byte length of the mark name indicated in the Mark-name field. The value of this field is 32 or less.
  • ref_to_PlayItem_id indicates the value of ayltemjd that specifies the Playltem where the mark is placed.
  • the value of Playltem-id corresponding to a certain Playltem is defined in PlayListO.
  • mark_time_stamp stores the time stamp indicating the point at which the mark was specified.
  • the mark-time-stamp indicates the time within the playback range specified by IN-time and OUT_time as defined in Play Item indicated by ref-to-Playltem-id.
  • PlayList CPI-type is EP-map type
  • mark-time-stamp is represented using the presentation time stamp as a base
  • mark-time — Stamp is expressed based on the arrival time stamp.
  • entry JES—PID is set to OxFFFF
  • the mark is a pointer to a timeline common to all elementary streams used by PlayList.
  • entry_ES-PID indicates the value of the PID of the transport packet containing the elementary stream pointed to by the mark.
  • the ref—to—thumbnail index indicates the information of the thumbnail image added to the mark. If the ref_to—thumbnail—index field is not OxFFFF, a thumbnail image is appended to the mark, and the thumbnail image is stored in the mark.tdat file. The image is referenced using the value of thumbnail_index in the mark.tidx file (described later).
  • mark_name indicates the name of the mark.
  • the number of bytes indicated by mark_name-length from the left in this field is one valid character, and indicates the name.
  • This single character is encoded in the UIAppInfoPlayList by the method indicated by character-set.
  • the value of the byte following the single valid character in the mark—name field can be any value.
  • TableOfPlayLists Start — address indicates the start address of TableOfPlayListsO in units of relative bytes from the first byte of the info.dvr file. Relative bytes are counted from zero.
  • Figure 39 shows the syntax of UIAppInfoPlayListO.
  • ref—to—thumbnail—index indicates the information of the thumbnail image added to the mark. If the ref_to—thumbnail—index field is not OxFFFF, the mark has a thumbnail image attached to it, which is stored in the menu.tdat file. The image is referenced using the index value in the menu.tidx file (described later). If the ref—to—thumbnail-index field is OxFFFF, a thumbnail image is added to the mark. Indicates that there is not.
  • the other syntax fields indicate the parameters of the user-in-first-out application for the Volume, but are not necessary for describing the embodiment of the present invention, and therefore, detailed description is omitted. .
  • FIG. 40 shows the syntax of TableOfPlayListsO.
  • TableOfPlayListsO stores the file names of PlayList (Real PlayList and Virtual PlayList). All PlayList files recorded on the film (disc) are included in TableOfPlayListO.
  • TableOfPlayListsO indicates the default playback order of PlayList in the volume.
  • length indicates the number of bytes of TableOfPlayListsO from immediately after this length field to the end of TableOfPlayListsO.
  • number_of_PlayLists indicates the number of PlayLists recorded in the volume.
  • PlayList jile The 10th and number of names indicate the file name of PlayList.
  • menu thumbnails that is, information of one picture representing Volume and one picture representing it for each PlayList.
  • the header information of all menu thumbnails is collected and managed in one menu.tidx.
  • Picture data of all menu thumbnails is collected and managed in one menu.tdat.
  • mark.tidx and “mark.tdat” store information about the maximum thumbnail, that is, the picture pointed to by the mark point. Header information of all mark thumbnails added to all Clips and PlayLists in the Volume is collected and managed in one mark.tidx. Picture data of all mark thumbnails is collected and managed in one mark.tdat.
  • the thumbnail picture data is, for example, data obtained by encoding an image using JPEG.
  • FIG. 41 shows the syntax structure of “menu, tidx” and “mark.tidx”.
  • version—number is a four-digit number indicating the version number of this thumbnail header information file.
  • length is the number of bytes from the byte immediately after this length field to the last pile of menu.tidx / mark.tidx.
  • menu.tidx indicates the number of tn—blocks in menu.tdat
  • mark.tidx indicates the number of tn—blocks in mark.tdat. Indicates a number.
  • thumbnail—index represents the index number of the thumbnail information following this thumb nailjndex field. Thumbnails and indexes should not use the value OxFFFF.
  • tnumbnail_index is referenced by ref—to_thumbnail—index in UIApp Into Volume (), UIAppInfoPlayListO.
  • thumbnail-index is referenced by ref-to-thumbnai 1-index in PlayListMarkO and ClipMarkO.
  • ref—to—tn—block—id indicates one tn—block in menu.tdat in the case of menu.tidx, and the tn_block represents the picture data pointed to by thumbnail index. I'm toa.
  • the value of ref-to-tn_block-id refers to the value of tn-biock-id in the syntax of menu.tdat.
  • mark.tid it indicates one tnjblock in mark.tdat, and the tn-block stores the picture data pointed to by thumbnail-index.
  • ref—to_tn—block-id The value of id refers to the value of tn—block_id in the syntax of menu.tdat.
  • picture—byte—size indicates the length in bytes of one encoded thumbnail picture pointed to by thumbnail—index.
  • picture_byte_size must be less than or equal to 1024 * tn_block_size. That is, the recorder must encode data so that the data length of one encoded thumbnail picture is less than or equal to 1024 * tn-block-size.
  • thumbnail—size indicates the number of pixels in the horizontal direction of the thumbnail image that is identified by thumbnail—index.
  • vertical—picture_size indicates the number of pixels in the vertical direction of the encoded thumbnail picture pointed to by thunibnail_index.
  • Figure 42 shows the syntax structure of “menu.tdat” and “mark.tdat.” “Menu.tdat” and “mark.tdat” have the same syntax structure.
  • tn-block is an area where one coded thumbnail picture is stored.
  • the byte length of one thumbnail picture is less than or equal to the size of one tn-block.
  • the first byte of one picture data must match the first byte of tn-block.
  • the size of one tn_block is indicated by tn-block_size in menu.tdat.
  • the size of one tnjblock is indicated by tn-block-size in mark.tdat.
  • Each tnjblock is distinguished by the value of tn-block-id as it appears in the for-loop in the syntax.
  • tn—block—id in menu.tidx is ref to_ in menu.tidx
  • tn block—referenced by id tn-block-id in mark.tidx is referenced by ref_to_tn_block_id in mark.tidx.
  • Thumbnails are added and deleted frequently, so adding and deleting operations must be easy and fast. For this reason, menu.tdat and mark.tdat have a block structure. One picture data is stored in one tn-block.
  • Unused tn_blocks may exist in the tn-block column of menu.tdat and mark.tdat. For example, when deleting a thumbnail, delete the thumbnail index that is entered in the header information file of the thumbnail, and if no changes are made to the thumbnail picture data file, the tn-block column , Unused tn-blocks are created.
  • FIG. 43 is a diagram schematically showing how thumbnail picture data is stored in tnj lock. As shown in the figure, the byte length of one thumbnail picture is less than or equal to the size of one tn-block. There may be unused tn-blocks in the tn-block sequence.
  • FIG. 45 is a diagram illustrating the concept of the relationship between a Clip and PlayList when an AV stream is recorded as a new Clip.
  • a Heal PlayList is created that refers to the playable range of the entire Clip.
  • FIG. 46 is a diagram illustrating the concept of creating a Virtual PlayList.
  • the user By specifying the IN-time and OUT-time from the playback range of the Real PlayList, the user creates a Playltem for the playback section to be viewed and creates a Virtual PlayList.
  • FIG. 47 is a view for explaining the concept of the relationship between the Clip and the Play List when a part of the playback section of the Real PlayList is deleted.
  • Required Clip AV stream Change the Playltem of Real PlayList to refer only to the raw part. Then, unnecessary stream portions of the Clip AV stream are deleted. As shown in FIG. 47, even if the data at the center of the Clip AV stream is deleted, the Clip AV stream file is not divided and is a single file. Even if the data of one Clip AV stream is partially deleted, the remaining data is combined into one Clip AV stream.
  • the user In response to the "delete” operation, the user is asked, "If there is a Virtual PlayList referencing the stream portion of the Clip referenced by the Real PlayList, and if the Real PlayList is deleted, The Virtual PlayList will also be deleted. Is that OK? " Alternatively, instead of deleting the Virtual PlayList, the following "Minimize” operation is performed on the Real PlayList.
  • FIG. 48 is a diagram for explaining the concept of the relationship between the Clip, Real PlayList, and Virtual PI ayList when minimizing is edited. Minimize editing changes the Playltem of the Real Play List so that it refers only to the stream portion of the Clip required for the Virtual PlayList. Then, the stream portion of the Clip unnecessary for the Virtual PlayList is deleted.
  • the Clip AV stream file is not divided, but is a single file. Even if the data of one Clip AV stream is partially deleted, the remaining data part is combined into one Clip AV stream.
  • FIG. 50 shows the relationship between ATC-sequence, STC-sequence, and program-sequence when partially deleting one Clip AV stream.
  • the Clip before editing has only one ATC-sequence, one STC-sequence and one program-sequence. That is, it is assumed that the content of the program-sequence does not change in this Clip. At this time, it is assumed that the AV stream data indicated by the shadow in the figure has been deleted.
  • Clip has three ATC-sequences and three STC-sequences, while the program-sequence remains one.
  • the program-sequence in ATC-sequence borders on the boundary between ATC-sequence and STC-sequence.
  • the offset-STC_id [0] for the first ATC'sequence is set to zero, and the offset-STC-id [l] for the second ATC-sequence is set to one. That is, the stcjd of the last STC-sequence in the first ATC-sequence and the stc-id of the first STC.sequence in the second ATC'sequence have the same value of 1.
  • ATC discontinuities can be created in the Clip AV stream, so if the stream data in the middle part of the Clip AV stream is deleted, the Clip file is split into two. No need. Further, for each ATC sequence, by using the offset-STC-id for the STC-id of the first STC sequence on the ATC sequence, when erasing the partial data of the Clip AV stream file, You do not need to change anything about the unused Virtual PlayList.
  • FIG. 52 shows a diagram where the Clip file is split into two when a part of the Clip AV stream is deleted when ATC discontinuity is not allowed in the Clip.
  • FIG. 4 is a diagram illustrating the relationship between Clip and P1 ayList at that time.
  • ATC discontinuity is not allowed in the Clip, it will be split into two Clip files, Clip-A and Clip-B, after editing. Therefore, it is necessary to change the name of the Clip file referenced by Playltem3 and Playltem4. In other words, when erasing partial data of a Clip AV stream file, it may be necessary to change the contents of a Virtual PlayList that does not use the erased part.
  • FIG. 53 is a diagram illustrating the relationship between the Clip and the PlayList when a part of the Clip AV stream whose CPI is a TU-map is deleted.
  • the Clip before editing has one ATC_sequence.
  • the offset-arrival-time [0] for this ATC'sequence is zero.
  • Playlteml, Playltem2, Playltem3 and Playltem4 of the Virtual PlayList refer to this ATC-sequence.
  • ATC_seq As for uence's AV stream, it is assumed that an AV stream that is not used in any Playltem is deleted.
  • the edited Clip has two ATC-sequences.
  • the offset-arrival-time [0] for the first ATC-sequence is set to zero, and the offset-arrival-time [1] for the second ATC-sequence is set to the value X.
  • the value X is greater than OUT—time2 and less than IN_time3. That is, it is not necessary to change the IN-time and OUT-time values of Playltem3 and Playltem4 of Virtual PlayList after editing.
  • the information recorded on the recording medium 10 constituted by an optical disk is read by the reading unit 11 of the reproducing unit 61.
  • the demodulation unit 12 demodulates the data read from the recording medium 10 by the reading unit 11 and supplies the data to the ECC decoding unit 13.
  • the ECC decoder 13 separates the data supplied from the demodulator 12 into an AV stream and a data base, supplies the AV stream to the source packetizer 14 and controls the database.
  • the source depacketizer 14 depackets the input AV stream and outputs it to the demultiplexer 15.
  • the demultiplexer 15 converts the data supplied from the source debugger 14 into video (V), audio (A), and system data.
  • System (S) data and output to AV decoder 16 and multiplexer 25.
  • the AV decoder 16 decodes the input video data and audio data based on the system data, and outputs a video signal from a terminal 18 and an audio signal from a terminal 19, respectively.
  • the video signal input from the terminal 21 and the audio signal input from the terminal 22 are supplied to the AV encoder 23 of the recording unit 62.
  • the video signal is also supplied to a video analyzer 24.
  • the video signal output from the AV decoder 16 is supplied to the AV encoder 23 and the video analysis unit 24 as necessary, instead of the video signal input from the terminal 21.
  • the AV encoder 23 encodes the input video signal and audio signal, and encodes the encoded video signal (V), audio signal (A), and system data (S) corresponding to the encoder into the multiplexer 25. Output.
  • the video analyzer 24 analyzes the input video signal and outputs the analysis result to the controller 17.
  • a transport stream from a digital interface or a digital TV tuner is input to terminals 33 and multiplexed stream analyzer via switch 27, demultiplexer 15 or further via switch 28. 26 and source bucketizer 29.
  • the multiplexed stream analyzer 26 and the source bucketizer 29 can also supply the signal output from the multiplexer 25 via the switch 28 instead of the signal from the switch 27.
  • the multiplexed stream analyzer 26 analyzes the input signal and outputs the analysis result to the controller 17.
  • the source packetizer 29 packetizes the input signal and supplies it to the ECC encoder 30.
  • the database output from the control unit 17 is also supplied to the ECC encoding unit 30.
  • the ECC encoder 30 adds an error correction code to the input, encodes the input, and outputs the result to the modulator 31.
  • the modulator 31 modulates the data input from the ECC encoder 30 and Output to the writing unit 32.
  • the writing unit 32 executes a process of writing the data input from the modulation unit 31 to the recording medium 10.
  • the control unit 17 has a storage unit 17A for storing various data, manages the format described above, and controls each unit for recording or reproducing data on or from the recording medium 10.
  • a drive 41 is also connected to the control unit 17, and a magnetic disk 51, an optical disk 52, a magneto-optical disk 53, a semiconductor memory 54, or the like is driven.
  • the optical disk 52 can also be used as the recording medium 10.
  • Video signals and audio signals are input from the terminals 21 and 22 of the recording unit 62, respectively.
  • the video signal is input to the video analysis unit 24 and the AV encoder 23.
  • the audio signal is also input to the AV encoder 23.
  • the AV encoder 23 encodes the input video signal and the audio signal, and outputs an encoded video stream (V), an encoded audio stream (A), and system information (S) to the multiplexer 25.
  • the coded video stream (V) is, for example, an MPEG2 video stream
  • the coded audio stream (A) is, for example, an MPEG1 audio stream or a Dolby AC3 (trademark) audio stream.
  • the system information (S) is video / audio coding information (byte size of a coded picture or audio frame, picture coding type, etc.) and time information such as AV synchronization.
  • the multiplexer 25 multiplexes the input stream based on the input system information and outputs a multiplexed stream.
  • the multiplexed stream is, for example, an MPEG2 transport stream or an MPEG2 program stream.
  • the multiplexed stream is input to a multiplexed stream analyzer 26 and a source bucketizer 29.
  • the source bucketizer 29 converts the input multiplexed stream into an Encode into an AV stream composed of source buckets according to the prescription format.
  • the AV stream is added with an error correction code by an ECC (error correction) encoding unit 30, modulated by a modulation unit 31, and input to a writing unit 32.
  • the writing unit 32 records an AV stream file on the recording medium 10 based on a control signal instructed from the control unit 17.
  • a transport stream is input from terminals 33.
  • the instruction information of the recording method is input to the control unit 17 from a terminal 20 as a user interface, and the control unit 17 controls the recording method.
  • the transport stream is input to the multiplexed stream analyzer 26 and the source bucketizer 29. Thereafter, the processing until the AV stream is recorded on the recording medium 10 is the same as the case where the input audio signal and the video signal are encoded and recorded.
  • the input transport stream is input to the demultiplexer 15.
  • the demultiplexer 15 inputs the video stream (V) to the AV decoder 16.
  • the AV decoder 16 decodes the video stream and inputs a reproduced video signal to the AV encoder 23.
  • the AV encoder 23 encodes the input video and inputs the encoded video stream (V) to the multiplexer 25.
  • the audio stream (A) and system information (S) output from the demultiplexer 15 are directly input to the multiplexer 25.
  • the multiplexer 25 multiplexes the input stream based on the input system information, and multiplexes the input stream. Output a stream. Thereafter, the processing until the AV stream is recorded on the recording medium 10 is the same as the case where the input audio video signal is encoded and recorded.
  • the moving picture recording / reproducing apparatus 1 records an AV stream file, and also records application database information related to the file.
  • the abbreviated database information is created by the controller 17.
  • the input information to the control unit 17 includes the moving image feature information from the video analysis unit 24, the AV stream feature information from the multiplexed stream analysis unit 26, and the terminal 20 as a user interface. Is the user's instruction information input from the user.
  • the feature information of a moving image from the video analysis unit 24 is generated by the moving image recording / reproducing device 1 when the moving image recording / reproducing device 1 itself encodes a video signal.
  • the video analysis unit 24 analyzes the content of the input video signal and generates information related to the image of the characteristic mark point in the input video signal.
  • This information is, for example, instruction information of an image of a characteristic mark point such as a program start point, a scene change point, and a CM start / end point in the input video signal. Includes the thumbnail of the image.
  • the instruction information of these images is input to the multiplexer 25 via the control unit 17.
  • the multiplexer 25 When multiplexing the coded picture of the image at the mark point designated by the control unit 17, the multiplexer 25 returns address information on the AV stream of the coded picture to the control unit 17.
  • the control unit 17 stores the characteristic image type in association with the address information of the encoded picture on the AV stream.
  • the feature information of the AV stream from the multiplexed stream analyzer 26 is information related to the encoded information of the AV stream to be recorded, and is generated by the moving picture recording / reproducing apparatus 1. For example, it includes the time stamp and address information of the I picture in the AV stream, STC discontinuity information, program content change information, arrival time and address information, and the like.
  • the time stamp and address information of the I picture in the AV stream are P—The data stored in the map.
  • the STC discontinuity information in the AV stream is the data stored in the above-mentioned Sequencelnfo.
  • the change information of the program contents in the AV stream is data stored in Programlnfo.
  • the arrival time and address information in the AV stream are stored in the TU-map.
  • the multiplexed stream analyzer 26 detects the image of the characteristic mark point in the AV stream, and the type and the address information are detected. Generate This information becomes data stored in the ClipMark.
  • the characteristic information of the AV stream from the multiplexed stream analyzer 26 is stored in the database (Clip Information) of the AV stream.
  • the user's instruction information from the terminal 20 includes designation information of a desired playback section in the AV stream, one character describing the content of the playback section, and a bookmark set by the user to a desired scene. Includes an evening stamp in the AV stream of one quality point. These user instruction information is stored based on the PlayList data base.
  • the control unit 17 includes a database of AV streams (Clip Information), a database of PlayList, management information of recording contents of the recording medium 10 (info.dvr), and thumbnail information. Create These pieces of database information are processed by an ECC (error correction) encoding unit 30 and a modulation unit 31 in the same manner as the AV stream, and are input to the writing unit 32.
  • the writing unit 32 records this database information on the recording medium 10 as abbreviated database information based on the control signal instructed by the control unit 17.
  • the recording medium 10 On the recording medium 10, the AV stream file and the application base information are recorded.
  • control unit 17 sends an application to the reading unit 11 of the playback unit 61. You are instructed to read out the information on the event. Then, the reading unit 11 reads application database information from the recording medium 10, and the database information is controlled by the demodulation unit 12 and the ECC (error correction) decoding unit 13 through processing. Entered in Part 17.
  • the control unit 17 outputs a list of PlayLists recorded on the recording medium 10 to the terminal 20 user interface based on the application database.
  • the user selects a PlayList to be played from the PlayList list, and the PlayList designated to be played is input to the control unit 17.
  • the control unit 17 instructs the reading unit 11 to read an AV stream file required for playing the PlayList. Then, the reading unit 11 reads the AV stream from the recording medium 10, and the AV stream is input to the source debucketizer 14 through the processing of the demodulation unit 12 and the ECC decoding unit 13. You.
  • the source depacketizer 14 converts the application format AV stream of the recording medium into a stream that can be input to the demultiplexer 15.
  • the demultiplexer 15 includes a video stream (V), an audio stream (A), and a system information (S) that constitute a playback section (Playltem) of the AV stream specified by the control unit 17.
  • the AV decoder 16 decodes the video stream and the audio stream, and outputs a reproduced video signal and a reproduced audio signal from terminals 18 and 19, respectively.
  • the control unit 17 When playing a PlayList of the EP-map type selected by the user from a certain time, the control unit 17 reads the data from the address of the I picture having the PTS closest to the specified time. To the reading unit 11 as follows.
  • control unit 17 When playing back the TU-map type PlayList selected by the user halfway from a certain time, the control unit 17 reads the data from the address of the source packet of the nearest neighbor closest to the specified time. Instruct reading unit 11
  • the beginning of the program stored in ClipMark in CliD Information When the user selects a certain mark from the search points and scene change points (for example, this selection operation is performed by displaying the thumbnail image list of the program start point or scene change point stored in ClipMark in the user interface). This is performed by the user selecting a certain image from among the images), and the control unit 17 executes the AV stream from the recording medium 10 based on the contents of the Clip Information. The reading position of the AV stream is determined, and the reading of the AV stream is instructed to the reading unit 11.
  • the reading unit 11 is instructed to read the data from the I picture at the address closest to the address on the AV stream in which the image selected by the user is stored.
  • the reading unit 11 reads data from the specified address, and the read data is input to the demultiplexer 15 through the processing of the demodulation unit 12 and the ECC decoding unit 13, and is input to the AV decoder 16. And the AV data indicated by the address of the picture at the mark point is reproduced.
  • the control unit 17 creates a database of a group (PlayList) of playback sections (Playltem) of the AV stream.
  • the information of the erase section is input to the control unit 17 from the terminal 20 of the user interface.
  • the control unit 17 changes the PlainList database so as to refer to only the necessary AV stream part. Also, it instructs the writing unit 32 to delete unnecessary stream portions of the AV stream. Also, the content of the Clip Information is changed based on the change in the Clip AV stream.
  • control unit 17 Create a database (PlayList) that groups the playback sections (Playltem) of the program, and also need to partially re-encode and re-multiplex the video stream near the connection point of the playback section become.
  • control unit 17 instructs the reading unit 11 to read out the data necessary for reproducing the in-point picture and the out-point picture. Then, the reading unit 11 reads the data from the recording medium 10, and the data is sent to the demultiplexer 15 via the demodulation unit 12, the ECC decoding unit 13, and the source debucketizer 14. Is entered.
  • the control unit 17 analyzes the stream input to the demultiplexer 15, and re-encodes the video stream (changes of picture-coding-type, allocation of the amount of coding bits to be re-encoded) and re-multiplexing. The encoding method is determined, and the method is supplied to the AV encoder 23 and the multiplexer 25.
  • the demultiplexer 15 separates the input stream into a video stream (V), an audio stream (A), and system information (S).
  • the video streams include "data input to the AV decoder 16" and "data input directly to the multiplexer 25".
  • the former data is the data necessary for re-encoding, which is decoded by the AV decoder 16 and the decoded picture is re-encoded by the AV encoder 23 to become a video stream.
  • the latter data is copied from the original stream without re-encoding.
  • the audio stream and system information are input directly to multiplexer 25.
  • the multiplexer 25 multiplexes the input stream based on the information input from the control unit 17, and outputs a multiplexed stream.
  • the multiplexed stream is processed by an ECC (error correction) encoder 30 and a modulator 31 and input to a writing unit 32.
  • the writing unit 32 records the AV stream on the recording medium 10 based on the control signal instructed from the control unit 17.
  • Fig. 54 shows a flowchart of the recording operation of the video recording / playback apparatus 1 for the Clip AV stream file and the related Clip Information file when the AV stream is clipped and newly recorded. Show.
  • step S11 the control unit 17 transmits a transport stream obtained by encoding the AV input from the terminals 21 and 22 or a transport stream from the digital interface of the terminal 33. Create a stream to a file, and create and record a Clip AV stream file.
  • step S12 the control unit 17 creates Clip Info (FIG. 8) for the AV stream file.
  • step S13 the control unit 17 creates a Sequencelnfo (FIG. 13) for the AV stream file.
  • step S14 the control unit 17 creates a Programlnfo (FIG. 15) for the AV stream file.
  • step S15 the control unit 17 creates a CPI (EP-map or TU-map) (FIGS. 24, 25 and 26) for the AV stream file.
  • CPI EP-map or TU-map
  • step S16 the control unit 17 creates a Clip Mark for the AV stream file.
  • step S17 the control unit 17 records a Clip Information file (FIG. 8) in which the above Cliplnfo, Sequencelnfo, Programlnfo, CPI, and ClipMark are stored.
  • steps S11 to S16 actually operate simultaneously.
  • step S31 the control unit 17 sets the first transport packet as the start point of the ATC sequence. That is, SPN ATC start is set. Also, At this time, atc_id and stc_id are also set.
  • step S32 the multiplexed stream analyzer 26 analyzes a PTS of an access unit (for example, a picture or an audio frame) included in the AV stream.
  • an access unit for example, a picture or an audio frame
  • step S33 the multiplexed stream analyzer 26 checks whether a PCR packet has been received. In step S33, if No, the process returns to step S32, and if Yes, the process proceeds to step S34.
  • step S34 the multiplexing stream analysis unit 26 checks whether or not STC discontinuity has been detected. If NO, return to step S32. If YES, go to step S35. In addition, if the PCR packet is the first PCR packet received after the start of recording, the process always proceeds to step S35.
  • step S35 the multiplexed stream analysis unit 26 acquires the number (address) of the transport packet transmitting the first PCR of the new STC.
  • step S36 the control unit 17 acquires the bucket number as the source packet number at which the STC sequence starts. That is, SPN-STC-start is set. Also, a new stc-id is set.
  • step S37 the control unit 17 acquires the PTS of the display start of the STC sequence and the PTS of the display end, and sets them to presentation—start—time or presentation_end—time, respectively. (Fig. 13).
  • step S38 the control unit 17 checks whether the input of the last transport packet has been completed. If No, the process returns to step S32, and if Yes, the process ends.
  • step S51 the multiplexed stream analyzer 26 checks whether a transport packet including PSI / SI has been received.
  • the PSI / SI The sport bucket is, specifically, a PAT, PMT, and SIT packet.
  • the SIT is a transport packet that describes the service information of the partial transport stream specified in the DVB standard.
  • step S52 the multiplexed stream analyzer 26 checks whether the contents of the PSI / SI have changed. In other words, it is checked whether the contents of PAT, PMT, and SIT have changed compared to the contents of each previously received. If the content has not changed, the process returns to step S51. If the content has changed, the process proceeds to step S53. In the case of the first received PSI / SI after the start of recording, the process always proceeds to step S53.
  • step S53 the control unit 17 acquires the number (address) of the transport packet transmitting the new PSI / SI and the content thereof.
  • step S54 the control unit 17 creates Program-sequence information and creates a Programlnfo (FIG. 15).
  • step S55 the control unit 17 checks whether the input of the last transport packet has been completed. If No, the process returns to step S51, and if Yes, the process ends.
  • step S71 the multiplexed stream analyzer 26 sets the PID of the video of the AV program to be recorded. If the transport stream contains multiple videos, each video PID is set.
  • step S72 the multiplexed stream analyzer 26 receives the video transport packet.
  • step S73 the multiplexed stream analyzer 26 checks whether the payload of the transport packet (the data following the bucket header) starts from the first byte of the PES bucket (PES packets are MPEG2 Stipulated Packet, which packetizes the elementary stream). This can be seen by examining the value of "payload_unit—start-indicator" in the transport packet header. If this value is 1, the transport packet payload starts from the first byte of the PES packet. I do. If No in step S73, return to step S72. If Yes, proceed to step S74. In step S74, the multiplexed stream analysis unit 26 starts the PES packet payout from the first byte of the MPEG video sequence-header-code (32-bit code of "0x000001B3"). Find out if you are. If No in step S74, return to step S72. If Yes, proceed to step S75.
  • PES packets are MPEG2 Stipulated Packet, which packetizes the elementary stream. This can be seen by examining the value of
  • control unit 17 sets the current transport packet as an entry point.
  • step S76 the control unit 17 acquires the bucket number of the packet, the PTS of the I picture starting from the sequence_header_code, and the PID of the video to which the entry one point belongs, and creates an EP_map.
  • step S77 the multiplexed stream analyzer 26 determines whether or not the current packet is the last input transport bucket. If it is not the last bucket, return to step S72. If it is the last packet, the processing ends.
  • FIG. 58 shows a flowchart for explaining a method of creating a Real PlayList. This will be described with reference to the block diagram of the moving image recording / reproducing apparatus 1 shown in FIG.
  • step S91 the control unit 17 records a Clip AV stream.
  • step S92 the control unit 17 creates a PlayListO (FIG. 31) including Playltems (FIG. 36) covering the entire playable range of the Clip. If there is an STC discontinuity in the Clip and the PlayListO consists of two or more Playltems, the control unit 17 also determines the connection-condition between the Playltems.
  • a PlayListO (FIG. 31) including Playltems (FIG. 36) covering the entire playable range of the Clip. If there is an STC discontinuity in the Clip and the PlayListO consists of two or more Playltems, the control unit 17 also determines the connection-condition between the Playltems.
  • step S93 the control unit 17 creates UIAppInfoPlayListO.
  • UIAppInfoPlavListO includes information for explaining the contents of PlayList to the user. This implementation In the embodiment, the description is omitted.
  • step S94 the control unit 17 creates a PlayListMark (the description is omitted in the present embodiment).
  • step S95 the control unit 17 creates MakersPrivateData (the description is omitted in the present embodiment).
  • step S96 the control unit 17 records a Real PlayList file.
  • FIG. 59 is a flowchart illustrating a method for creating a Virtual PlayList.
  • step S111 reproduction of one Real PlayList recorded on a disc (recording medium 10) is designated through the user interface. Then, from the playback range of the Real PlayList, a playback section indicated by the IN point and the OUT point is specified through the user interface.
  • step S112 the control unit 17 checks whether or not all the operations of specifying the reproduction range by the user have been completed. If the user selects a section to be played following the specified playback section, the process returns to step S111.
  • step S112 If it is determined in step S112 that the user has completely specified the reproduction range, the process proceeds to step S113.
  • step S113 the user determines the connection state between two playback sections that are continuously played back through the user interface or the controller 17 Is determined.
  • step S114 the user specifies sub-path (audio for dubbing) information through the user interface. If the user does not create a subpath, this step is skipped.
  • the sub-path information is information stored in the Sub-Playltem in the PlayList, but is not necessary for the purpose of the present invention, and thus the description is omitted.
  • step S115 the control unit 17 displays the reproduction range information specified by the user, and connection— Create PlayListO ( Figure 28) based on the condition.
  • step S116 the control unit 17 creates UIAppInfoPlayListO.
  • UIApp InfoPlayListO includes information for explaining the contents of PlayList to the user. The description of this embodiment is omitted.
  • step S117 the control unit 17 creates a PlayListMark (the description is omitted in the present embodiment).
  • step S118 the control unit 17 creates MakersPrivateData (the description is omitted in the present embodiment).
  • step S119 the control unit 17 records the Virtual PlayList file on the recording medium 10.
  • FIG. 60 is a flowchart for explaining a PlayList reproducing method.
  • step S131 the control unit 17 acquires information of the Info.dvr, Clip Information file, PlayList file, and thumbnail file, and displays a list of PlayLists recorded on the disc (recording medium 10). Create a screen and display it on the GUI through the user interface.
  • step S132 the control unit 17 presents information describing the PlayList on the GUI screen based on UIAppInfoPlayList () of each PlayList.
  • step S133 the user instructs reproduction of one PlayList from the GUI screen through the user interface.
  • step S134 the control unit 17 acquires the source packet number having the nearest entry point in time before IN_time from the STC-id of the current Playltem and the PTS of IN-time.
  • step S135 the control unit 17 reads the data of the AV stream from the source packet number having the entry point and supplies the data to the decoder.
  • step S136 if there is a Playltem that is temporally earlier than the current Playltem, the control unit 17 sets the connection process of the display between the previous Playltem and the current Playltem to connection_condition. : X "x
  • step S137 the control unit 17 instructs the AV decoder 16 to start displaying from the picture of the IN_time PTS.
  • step S138 the control unit 17 instructs the AV decoder 16 to continue decoding the AV stream.
  • step S139 the control unit 17 checks whether or not the currently displayed image is an OUTjime PTS image. If No, go to step S140. The current image is displayed in step S140, and the process returns to step S138. If the currently displayed image is a PTS image at OUT_time in step S139, the process proceeds to step S141.
  • step S141 the control unit 17 checks whether the current Playltem is the last Playltem in the PlayList. If No, return to step S 1 3 4. If Yes, the PlayList playback ends.
  • FIGS. 61 and 62 show a case where both the AV stream and its data base are transferred together.
  • FIGS. 63 and 64 show a case where only the AV stream is transferred.
  • Clips and PlayLists are recorded on a copy-unified recording medium (for example, a recording medium 10 in FIG. 71 described later).
  • a PlayList file using one Clip is recorded on the copy source recording medium.
  • Fig. 61 shows that the PlayList and Clip files are transferred from the copy source (the playback device 2 in Fig. 71) to the copy destination (the recording device 3 in Fig. 71), for example, using a digital bus of IEEE1394 (the digital device in Fig. 71).
  • This example shows a case where a file is transferred by Asynchronous transfer via an evening bus 60).
  • the TP—extra Jieader ATS (arrival time stamp) of each source packet of the copied Clip AV stream file is the same as the copy source, and the Clip corresponding to the copied Clip AV stream file
  • the Information file and PlayList file are also copied to the copy destination.
  • Fig. 62 shows the PlayList file and Clip Information file from the copy source (the playback device 2 in Fig. 71) to the copy destination (the recording device 3 in Fig. 71).
  • File transfer by Asynchronous transfer (asynchronous transfer) via the digital bus 60) of 71, and real-time transfer (via isochronous transfer) of the AV stream from the copy source to the copy destination by Isochronous transfer. Stream transfer).
  • the copy source (the playback device 2 in FIG. 71) outputs the Clip AV stream file corresponding to the Clip Information file to the digital bus (digital bus 60 in FIG.
  • the transport packet is output according to the rival time stamp (see the playback model in Fig. 7).
  • the TP—extra—header (ATS) of each source packet is newly added at the copy destination (the recording device 3 in FIG. 71) (a new Clip AV stream file is created at the copy destination).
  • the Clip Information file and PlayList file (data base file) corresponding to the copied Clip AV stream file are also copied to the copy destination.
  • FIGS. 63 and 64 show a case where only the AV stream is transferred.
  • Fig. 63 shows only the AV stream from the copy source (the playback device 2 in Fig. 71) to the copy destination (the recording device 3 in Fig. 71), and the IEEE1394 digital bus (the digital bus 60 in Fig. 71).
  • This shows a case where real-time transfer (stream transfer) is performed by Isochronous transfer via.
  • the copy unit outputs a transport bucket according to the arrival time stamp of each source packet when outputting the AV stream of the playback section specified by the PlayList to the digital bus (the playback model shown in FIG. 7). See).
  • Fig. 64 shows the data transfer at a speed that reproduces only the AV stream in real time when the copy destination recording device (recording device 3 in Fig. 71) does not conform to the DVR format.
  • the AV stream is transferred in real time (stream transfer) from the copy source to the copy destination by IEEE 1394 Isochronous transfer in the same manner as in FIG. 63.
  • the copy destination records the input AV stream using the format of the recording device (recording device 3 in FIG. 71).
  • the copy destination recording device is D-VHS (trademark)
  • the AV stream is recorded in that format.
  • the copy source DVR format is The playback device (the control unit 17 of the playback device 2 in FIG. 71) performs mutual authentication with the copy destination recording device (the control unit 17-2 of the recording device 3 in FIG. 71), and If it is confirmed that the playback device does not conform to the DVR format, the playback device (the control unit 17 of the playback device 2 in FIG. 71) is controlled to transfer the AV stream in real time.
  • FIG. 61 and FIG. 62 can be used.
  • the data stream can be transferred at a higher speed than when data is transferred at a speed for reproducing the data stream in real time.
  • the data inputted by the recording device at the copy destination can be decoded and reproduced in real time.
  • the time required to copy the AV stream is the same as the time required to play back the data in real time.
  • the methods shown in FIGS. 61 and 62 are used by switching according to the purpose as described above.
  • the PlayList covers the entire playback range of one Clip, but as described in FIG. 46, the playback range specified by the PlayList is one. It does not necessarily cover the entirety of one Clip AV stream. This is the same for both Real PlayList and Virtual PlayList.
  • PlayList When transferring to the copy destination, it is better to transfer only the AV stream part necessary for PlayList playback and the data of the Clip referenced by it to the copy destination. That is, as shown in the example of Fig. 65, only the PlayList and the necessary Clip part are copied from the copy source (the playback device 2 in Fig. 72) to the copy destination (the recording device 3 in Fig. 71). I do. In this way, the required free recording capacity on the recording medium at the copy destination (the recording medium 10-2 of the recording device 3 in FIG. 71) can be reduced.
  • a method of determining a Clip AV stream portion necessary for playback of a PlayList when a PlayList is copied from a copy source (an output side playback device) to a copy destination (an input side recording device) will be described.
  • FIG. 66 shows a stream portion necessary for reproducing a PlayList when a PlayList indicates a partial reproduction range of an original AV stream file.
  • the PlayList points to IN-time and OUT-time on the original AV stream.
  • the stream portion required for PlayList playback is the Xth to Yth source packet numbers as shown in the figure. In the following description, an example of how to determine the X and Y points will be described.
  • Fig. 67 is a diagram for explaining a method of determining the data copy start point (X point) before the IN point without analyzing the contents of the AV stream.
  • PlayList points to the IN point on the original AV stream.
  • the EP-map of the AV stream is shown.
  • To decode the picture pointed by the IN point an I picture starting at address ISA2 is required.
  • ⁇ , ⁇ and ⁇ CR packets are required.
  • the time difference between the system time bases of ptsl and pts2 is 100 msec or more, there are PAT, PMT and PCR buckets between addresses ISA1 and ISA2 (at least for SESF, DVB, ATSC, ISDB) ).
  • the X point is determined before address ISA1.
  • the X point must be at the boundary of the align unit.
  • the X-point can be determined in the next step using the EP-map without analyzing the contents of the AV stream by the reproducing apparatus at the copy source.
  • This method is simple because it does not require reading the data of the AV stream to determine the X point and analyzing the contents. However, the AV stream after the X point may leave unnecessary data for the playback of the HayList. If the data of the AV stream is read to determine the X point and its contents are analyzed, data unnecessary for playback of the PlayList can be removed more efficiently.
  • Fig. 68 is a diagram explaining how to determine the data copy end point (point Y) after the OUT point without analyzing the contents of the AV stream.
  • PlayList points to the OUT point on the original AV stream.
  • the EP map of the AV stream is shown.
  • I, P, and B represent an I picture, a P picture, and a B picture, respectively.
  • the numbers represent the display order.
  • the moving image recording / reproducing device 1 transmits picture information (picture coding type) referenced by the OUT-time PTS. , Temporal's reference, etc.).
  • the OUT-time PTS may refer to picture B0 or B1 (this is unknown if the copy source playback device (playback device 2 in FIG. 71) does not analyze the contents of the AV stream).
  • 12 is required to decode pictures B0 and B1.
  • the 12 PTS is greater than the OUT time PTS (OUT—time ⁇ pts4, where pts4 is the 12 PTS).
  • the 12 PTS is larger than the OUT-time PTS, but requires 12 for BO, B1.
  • the Y point is determined after the address ISA5 shown in the figure.
  • ISA5 is the value of SPN_EP—start immediately after ISA4 in the EP—map.
  • the Y point must also be the boundary of the alignment dunette.
  • the copy source playback device (the playback device 2 in FIG. 71) can determine the Y point in the next step using the EP-map without analyzing the contents of the AV stream.
  • This method is simple because it does not require reading the data of the AV stream to determine the Y point and analyzing its contents. However, the AV stream before the point Y may leave unnecessary data for playing the PlayList. If the data of the AV stream is read to determine the Y point and its contents are analyzed, data unnecessary for playback of the PlayList can be removed more efficiently.
  • FIG. 69 shows an example in which a PlayList is copied from a copy source to a copy destination.
  • the Clip AV stream required to play the PlavList is created.
  • FIG. 4 is a diagram for explaining the relationship between the PlayList and PlayList.
  • the CPI of Clip is assumed to be EP-map. Assume that the original Clip has one ATC'sequence and three STC-sequences. The offset-STC-id [0] for this ATC-sequence is zero.
  • stc_id It is assumed that STC'sequence of 2 is used in Playltem4.
  • this PlayList has been copied to another recording medium. That is, as shown in FIG. 69, a Clip composed of a Clip portion necessary for reproducing the PlayList is created.
  • a Clip composed of a Clip portion necessary for reproducing the PlayList is created.
  • the newly created Clip has four ATC-sequences, and each ATC_sequence has one STC'sequence.
  • stc—offset—STC—id [0] of the ATC-sequence containing the STC-sequence whose id 0 was set to zero.
  • the offset-STC-id [0] for the first ATC-sequence is set to zero
  • the offset-STC-id [l] for the second ATO-sequence is set to one. That is, the stc-id of the last STC-sequence in the first ATC-sequence and the stc-id of the first STC'sequence in the second ATC-sequence have the same value of 1.
  • FIG. 7OA to FIG. 70D are examples in which the Clip is partially copied, and are diagrams illustrating a method of changing Sequencelnfo, Programlnfo, CPI (EP-map) and ClipMark at that time.
  • This Clip has one ATC-sequence and two STC'sequences and two program-sequences on each.
  • the start and address of the first STC-sequence and program-sequence are the same, and it is a source bucket number of 0 on the Clip AV stream.
  • the start address of the second STC-sequence and the program-sequence is the same, which is the source bucket number B on the Clip AV stream.
  • FIG. 70A shows the stream data of the shaded portion starting from the source packet number A (A ⁇ B) in FIG. 70A.
  • This shaded portion is a stream portion necessary for the playback section from IN-time to OUT-time of the AV stream.
  • Figure 70B shows the Clip transferred to the copy destination.
  • the Clip transferred to the copy destination has one ATC-sequence and two STC-sequences and two program-sequences on each.
  • the first STC-sequence and program-sequence have the same start address, which is the source packet number of 0 (A-A) on the Clip AV stream.
  • the start address of the second STC-sequence and program-sequence is the same, which is the source packet number (B-A) on the Clip AV stream.
  • FIG. 70C shows the contents of the Clip Information file of the Clip shown in FIG. 70A.
  • this Clip Information file has EP_map and ClipMark as shown in the figure.
  • the data part of the EP_map and ClipMark used by the clip in the shaded part in FIG. 7OA is in the following range.
  • Entry point data with a PTS value of pts (xz) ⁇ OUT_time is required for the Clip in the shaded area in Figure 70A.
  • FIG. 70D shows the contents of the Clip Information file of the Clip shown in FIG. 70B.
  • the EP-map data is created based on the EP_map data used by the shaded Clip in FIG. 70C.
  • the value of the PTS at the entry point is the same, and the value of the source pocket number is deducted from the source packet number A at the start of the copy of the source Clip.
  • the ClipMark data the ClipMark data used by the clip in the shaded portion in FIG. 70C is copied as it is.
  • Fig. 71 1 shows the recording from the reproduction device 2 at the copy source (output side) to the recording at the copy destination (input side).
  • the configuration when transferring an AV stream and its related database to the device 3 and the case where only the AV stream is data-transferred are shown.
  • those having the same block numbers as those in FIG. 44 indicate the same ones.
  • the recording medium 10-2 and the control unit 17-2 of the recording device 3 have the same functions as the recording medium 10 and the control unit 17, respectively.
  • the control unit 11 determines the stream portion of the AV stream necessary for reproducing the PlayList, and instructs the reading unit 11 to read the AV stream data from the recording medium 10. (See Fig. 66, Fig. 67, Fig. 68). In addition, the control unit 17 instructs the reading unit 11 to read a database file (PlayList file, Clip Information file and thumbnail file) related to the PlayList from the recording medium 10.
  • the control unit 17 converts the AV stream data read through the demodulation unit 12 and the ECC decoding unit 13 into an AV stream file through the contact A of the switch 61 as a digital bus interface 50 (In the case of Figure 61).
  • one or more stream portions extracted from one Clip AV stream file are combined into one Clip AV stream file (see FIG. 69).
  • control unit 17 may input the AV stream data read through the demodulation unit 12 and the ECC decoding unit 13 to the source bucketizer 14 through the contact I of the switch 61. ( Figure 62).
  • the source depacket The 14 supplies the transport stream to the digital bus interface 50 according to the arrival time stamp.
  • a database file corresponding to the AV stream data read from the recording medium 10 is input to the memory 51 via the demodulator 12 and the ECC decoder 13.
  • the control unit 17 Based on the data stored in the memory 51, the control unit 17 generates a database (Clip Information file, PlayList file) necessary for reproducing the AV stream file output from the digital bus interface 50. ) (See FIG. 69, FIG. 70A to FIG. 70D).
  • the control unit 17 also creates a Clip corresponding to the AV stream file and a thumbnail file used by the PlayList file to be copied (see step S172 in FIG. 72 described later).
  • control unit 17 instructs to supply the newly created database file (Clip Information file, PlayList file and thumbnail file) from the memory 51 to the digital bus interface 50.
  • database file Create Information file, PlayList file and thumbnail file
  • the bus controller 52 controls file output from the digital interface 50.
  • the control unit 17 instructs the bus controller 52 to output an AV stream and a database related thereto from the digital interface 50.
  • the AV stream and the database related to the AV stream are input to the copy destination recording device 3 via the digital bus 60.
  • the bus controller 57 of the recording device 3 of the copy destination controls file input from the digital bus interface 55. Also, the bus controller 52 and the path controller 57 exchange the file copy control command to control the timing of the data transmission Z reception.
  • the control unit 17-2 of the recording device 3 When input as an AV stream file from the copy source to the digital bus interface 55, the control unit 17-2 of the recording device 3 sends the ECC encoding unit 30 and the modulation unit 3 through the contact A side of the switch 62. 1. After the processing of the writing unit 32, it is instructed to record on the recording medium 10-2.
  • the control unit 17-2 when input from the copy source to the digital bus interface 55 as a transport stream, the control unit 17-2 inputs to the source bucketizer 29 through the contact I side of the switch 62.
  • the source packetizer 29 converts the transport packet into a source packet and outputs the source packet.
  • the control unit 17-2 is configured to record the AV stream composed of the source packet on the recording medium 10-2 through the processing of the ECC encoding unit 30, the modulation unit 31, and the writing unit 32. To instruct.
  • the control unit 17-2 instructs the data base file input to the digital bus interface 55 to be written to the memory 56.
  • the control unit 17-2 reads the data files (Info.dvr file and thumbnail file) recorded on the recording medium 10-2 into the reading unit 11, the demodulation unit 12, and the ECC decoding unit. After the processing in 13 is instructed to read out to the memory 56. Then, the control unit 17-2 updates the Info.dvr file and the thumbnail file in the memory 56. Specifically, a new ayList file name to be recorded is added to the Table OfPlayList of the Info.dvr file at the copy destination, and a new thumbnail to be recorded is added to the thumbnail file at the copy destination (see below). (See steps 222 and S225 in Fig. 74).
  • the control unit 17-2 reads the database file stored in the memory 56, processes the ECC encoding unit 30, the modulating unit 31 and the writing unit 32, and records it on the recording medium 10-2. To instruct.
  • the control unit 17 determines a stream portion of the AV stream necessary for reproducing the PlayList, and issues an instruction to the reading unit 11 to read the AV stream data from the recording medium 10.
  • the control unit 17 includes a demodulation unit 12 and a £ ⁇ (through a decoding unit 13).
  • the read AV stream data is input to the source bucketizer 14 through the contact I side of the switch 61.
  • the source depacketizer 14 supplies the transport bucket to the digital bus interface 50 according to the equivalent time stamp.
  • the digital bus interface 50 transfers transport packets in an asynchronous manner.
  • the control unit 17-2 of the recording device 3 inputs the transport stream input to the digital bus interface 55 to the source bucketizer 29 through the contact I side of the switch 62.
  • the source bucketizer 29 converts the transport packet into a source packet and outputs the source packet.
  • the control unit 17-2 instructs the AV stream composed of the source packet to be recorded on the recording medium 10-2 through the processing of the ECC encoding unit 30, the modulation unit 31 and the writing unit 32. I do.
  • the transport stream is input to the multiplexed stream analyzer 26 through the contact I side of the switch 62.
  • the contents of the processing here are as described in FIG.
  • the control unit 17-2 creates a database file based on the analysis result of the analysis unit 26.
  • the control unit 171-2 saves the database file
  • FIG. 72 is a flowchart for explaining the processing performed by the copy source control unit 17 when the PlayList is copied from the copy source (output-side playback device 2) to the copy destination (input-side recording device 3). It is one.
  • step S170 the AV stream and its related database are Decide whether to transfer and copy, or to transfer and copy only the AV stream overnight. In the former case, the process proceeds to step S171. In the latter case, go to step S175.
  • step S171 the following processing is performed on the Clip.
  • step S172 the following processing is performed on the thumbnail file.
  • step S173 the process of transferring the AV stream file is performed.
  • step S174 the process of transferring the base file is performed.
  • step S170 it is determined that only the AV stream is to be transferred and copied. If the process proceeds to step S175, the AV stream data (S Convert the AV stream (read out in 1 35) into a transport stream and transfer it to the copy destination.
  • FIG. 73 is a flow chart for explaining the details of the process for the Clip in step S171 (see FIGS. 70A to 70D).
  • step S201 the PlayList acquires the display start time and the display end time of the playback section used in the Clip.
  • step S202 the copy start packet (address) and copy end packet (address) on the Clip AV stream corresponding to the above time interval are determined based on the CPI.
  • step S203 the following processing for the CPI is performed.
  • step S204 the following processing for Sequencelnfo is performed.
  • step S205 the following processing for Programlnfo is performed. Update the start bucket number of program-sequence in the AV stream part of the section to be copied.
  • step S206 the following processing for ClipMark is performed. Acquire the Mark entry used by the AV stream part of the section to be copied.
  • step S207 the following processing for file creation is performed.
  • FIG. 74 is a flowchart illustrating a process performed by the copy destination when a PlayList is copied from the copy source (output-side playback device 2) to the copy destination (input-side recording device 3). .
  • step S221 the AV stream and its associated database are Decide whether to transfer and copy or to transfer and copy only the AV stream. In the former case, the process proceeds to step S222. In the latter case, go to step S226.
  • step S222 the process of managing the AV stream file is performed.
  • the input AV stream data is recorded as a Clip AV stream file in the ST REAM directory.
  • step S223 processing for managing the database file is performed. -Record the input PlayList file in the PLAYLIST directory.
  • step S224 processing for Info.dvr is performed.
  • step S225 the thumbnail file is processed.
  • step S221 when it is determined that only the AV stream is to be transferred overnight and copied, and when the process proceeds to step S226, the flow chart explaining the creation of the Real PlayList shown in Fig. 58 is used. Record the transport stream input first, and create a Real PlayList.
  • the AV stream file recorded on the recording medium 10 and the contents of the database file can be appropriately managed, so that the user can select a desired AV stream.
  • the file and its file can be easily copied to another recording medium.
  • a partial playback section of an AV stream file recorded on the recording medium 10 is copied to another recording medium, it is possible to easily create an AV stream file required for reproducing the playback section. Data required for playback of the playback section. Since the base file can be easily created, the user can create an AV stream file and a database file necessary for reproducing a partial playback section of a desired AV stream file. The file can be easily copied to another recording medium.
  • the transmission path used for transferring the file from the copy destination to the copy unit is a digital bus such as IEEE1394 is not limited to this, but as shown in FIG. A radio wave such as a broadcast wave may be used as the transmission path. Also, the copy control command does not need to be the same as the transmission path for file transfer (see Figure 75).
  • the AV stream file and its database file may be transferred from separate recording media to the copy destination.
  • a server on which the AV stream file is recorded and a server on which the database file is recorded are separately prepared, and in response to a copy control command from the recording device 3, The file may be transferred to the recording device 3 from the stream file server and the database file server.
  • the MPEG2 transport stream has been described as an example of a multiplexed stream, but the present invention is not limited to this, and can be applied to a DSS transport stream and an MPEG2 program stream.
  • the series of processes described above can be executed by hardware, but can also be executed by software.
  • a program that constitutes the software is a computer built into dedicated hardware, or a general-purpose personal computer that can execute various functions by installing various programs Installed from a network or a recording medium.
  • this recording medium is a magnetic disk 51 (including a floppy disk) on which a program is recorded, which is distributed separately from the main body of the apparatus to provide a program to a user, and an optical disk.
  • 5 2 CD-ROM (Compact Disk-Read Only Memory), DVD (Digital Versatile Disk), Magneto-Optical Disk 53 (including MD (Mini-Disk)), or Semiconductor Memory 54 It is composed of a ROM or hard disk that stores the program and is provided to the user in a state where it is installed in advance.
  • steps for describing a program to be recorded on a recording medium are not only performed in chronological order according to the order described, but are not necessarily performed in chronological order. Alternatively, it also includes processes that are individually executed.
  • a system refers to an entire device including a plurality of devices.
  • the contents of the AV stream file and its database file recorded on the recording medium can be appropriately managed based on the syntax, the data structure, and the rules. Can easily copy a desired AV stream file and its database file to another recording medium.
  • the data transmission device when a partial playback section of an AV stream file recorded on a recording medium is copied to another recording medium, an AV stream file required for reproducing the playback section can be easily created.
  • the user can easily create a database file necessary for reproducing the relevant playback section, so that the user can obtain the AV stream file and the data base necessary for reproducing the partial playback section of the desired AV stream file. Files can be created, and the files can be easily copied to another recording medium. Also, from the copy unit, Since only the PlayList and the necessary Clip part are copied to the copy destination, the necessary free recording capacity on the copy destination recording medium can be reduced.
  • all contents of the PlayList and Clip of the copy source can be transferred to the copy destination, which is effective. That is, the playback specification information, UIAppInfoPlayList, PlayListMark, and the contents of the thumbnail information set in the copy source PlayList, and the CPI, Sequencelnfo, Programlnfo, ClipMark, and the contents of the thumbnail information set in the copy unit Clip are also stored. This is effective because it can be transferred to the copy destination.
  • the data transmission device of the tenth aspect since the AV stream is file-transferred, data can be transferred at a higher speed than when data is transferred at a speed for reproducing data in real time.
  • the data transmission device of claim 11 since the AV stream is transferred overnight at a speed at which the data is reproduced in real time, the data input by the recording device at the copy destination is transferred in real time. It can be played back by decoding.
  • a data transmission device according to claims 12 and 16, a data transmission method according to claim 17, a recording medium program according to claim 18, and a claim 19.
  • the transmission destination device is, for example, a device conforming to the DVR format
  • data transmission can be performed by the method of the transmission device of the above-mentioned claim (1).
  • the recording device does not conform to the DVR format, the process can be switched so that only the AV stream is transferred at the speed of reproducing the data in real time, so the user can copy the AV stream. Convenience can be improved.
  • the data processing device of claim 20 the data transmission method of claim 21, the recording medium program of claim 22, and the program of claim 23.
  • the input PlayList can be appropriately managed on the recording medium, so that the user can easily understand the contents of the PlavList copied to the recording medium. You can check.
  • the data transmission method of Claim 25 the program of the recording medium of Claim 26, and the program of Claim 27.
  • the input thumbnail can be appropriately managed on the recording medium, so that the user can easily check the contents of the thumbnail copied to the recording medium.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Technology Law (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Description

データ伝送装置および方法 技術分野
本発明はデータ伝送装置および方法に関し、 特に、 記録媒体に記録されている データの内容を編集した場合においても、 記録媒体に記録されているデータ内容、 および、 再生情報を適切に管理することができるようにしたデータ伝送装置およ び方法、 データ処理装置および方法に関する。 背景技術
近年、 記録再生装置から取り外し可能なディスク型の情報記録媒体として、 各 種の光ディスクが提案されつつある。 このような記録可能な光ディスクは、 数ギ ガバイトの大容量メディアとして提案されており、 ビデオ信号等の AV(Andio V isual)信号を記録するメディアとしての期待が高い。 この記録可能な光ディスク に記録するデジタルの AV信号のソ一ス (供給源) としては、 CSデジタル衛星 放送や BSデジタル放送があり、 また、 将来はデジタル方式の地上波テレビジョ ン放送等も提案されている。
ここで、 これらのソースから供給されるデジタルビデオ信号は、 通常 MPEG (Moving Picture Experts Group) 2方式で画像圧縮されているのが一般的で ある。 また、 記録装置には、 その装置固有の記録レートが定められている。 従来 の民生用映像蓄積メディアで、 デジタル放送からのデジタルビデオ信号を記録す る場合、 アナログ記録方式であれば、 デジタルビデオ信号をデコード後、 帯域制 限をして記録が行われる。 あるいは、 MPEG 1 Video, MPEG 2 Video, DV (Digital Video) 方式をはじめとするデジタル記録方式であれば、 1度デコ一 ドされた後に、 その装置固有の記録レート、 かつ符号化方式で再エンコードされ て記録される。
しかしながら、 このような記録方法は、 供給されたビットストリームを 1度デ コードし、 その後で帯域制限や再エンコードを行って記録するため、 画質の劣化 を伴う。 画像圧縮されたデジタル信号の記録をする場合、 入力されたデジタル信 号の伝送レートが記録再生装置の記録レートを超えない場合には、 供給されたビ ットストリームをデコードや再エンコードすることなく、 そのまま記録する方法 が最も画質の劣化が少ない。 ただし、 画像圧縮されたデジタル信号の伝送レート が記録媒体としてのディスクの記録レートを超える場合には、 記録再生装置でデ コード後、 伝送レートがディスクの記録レートの上限以下になるように、 再ェン コードをして記録する必要がある。
また、 入力デジタル信号のビットレー卜が時間により増減する可変レー卜方式 によって伝送されている場合には、 回転へッドが固定回転数であるために記録レ 一卜が固定レートになるテ一プ記録方式に比べ、 1度バッファにデ一夕を蓄積し、 バース卜的に記録ができるディスク記録装置の方が、 情報記録媒体としてのディ スクの容量をより無駄なく利用できる。
以上のように、 デジタル放送が主流となる将来においては、 デ一夕ストリーマ のように放送信号をデジタル信号のまま、 デコードや再エンコードすることなく 記録し、 記録媒体としてディスクを使用した記録再生装置が求められると予測さ れる。
上述したように、 記録媒体の容量が増大することにより、 その記録媒体には、 多くのデータ (例えば、 番組に関する映像データや音声デ一夕など) が記録でき るようになり、 1枚のディスクに多くの番組が記録されることになる。 この時に、 ユーザが、 それらのディスク内に記録されている多くの番組の中から、 所望のデ —夕を別のディスクにコピーする、 といったような操作が必要になる。
しかしながら、 コピー操作が行われた場合、 記録されているデ一夕の内容、 お よび、 再生情報を適切に管理することが困難になる。 発明の開示
本発明はこのような状況に鑑みてなされたものであり、 記録媒体に記録されて いるデータの内容を別の記録媒体にコピーした場合においても、 記録媒体に記録 されているデータの内容、 および、 再生情報を適切に管理することができるよう にすることを目的とする。
本発明の第 1のデ一夕伝送装置は、 データストリ一ムとその管理情報を記録媒 体から読み出す読み出し部と、 データストリームの中で、 指定された再生区間の 再生に必要な部分データストリームに対応する部分管理情報を決定する制御部と、 部分データストリーム、 および、 制御部により決定された部分管理情報を伝送す る伝送部とを備えることを特徴とする。
前記伝送部は、 さらに部分管理情報を、 非同期伝送することができる。
前記制御部は、 部分データストリームを非同期伝送するか、 または同期伝送す るかを選択することができる。
前記データストリームは、 AV ストリームであり、 管理情報は、 AV ストリー ム中の符号化情報の不連続点のアドレス情報、 AVストリーム中の時刻情報とァ ドレス情報を関連づける情報、 および AVストリーム中の特徴的な画像の時刻情 報を含むようにすることができる。
前記管理情報は、 Clip Informationであり、 不連続点のアドレス情報は、 Seq uencelnfo および Programlnfo であり、 時刻情報とアドレス情報を関連づける 情報は、 CPIであり、 特徴的な画像の時刻情報は、 ClipMarkであるようにする ことができる。
前記管理情報は、 AVストリームの再生区間の指示情報である、 PlayListをさ らに含むようにすることができる。
前記伝送部は、 部分デ一タストリームとしての AVデータストリームの再生区 間の指示情報をさらに伝送することができる。
前記伝送部は、 AV ストリームの再生区間の指示情報の内容を変更しないで、 部分データストリームとしての AVデ一タストリームの再生区間の指示情報とし て伝送することができる。
前記伝送部は、 AV ストリームの再生区間の指示情報に関連付けられたサムネ ール画像、 および、 部分管理情報データに含まれる AVストリーム中の特徴的な 画像の時刻情報に関連付けられたサムネ一ル画像をさらに伝送することができる。 前記 AVストリームは、 トランスポートバケツトとそのァライバルタイムス夕 ンプから構成されるソースバケツ卜を単位とするデータ列であり、 部分データス トリームとしての AVストリームは、 AVストリームのソースパケットのデータ 列の部分であるようにすることができる。
前記 AVストリームは、 トランスポートバケツトとそのァライバルタイムス夕 ンプから構成されるソースバケツトを単位とするデータ列であり、 部分データス トリームとしての AVストリ一ムは、 トランスポートパケットを単位とするトラ ンスポートストリームであるようにすることができる。
制御部は、 AVストリームとその管理情報を共にデータ伝送するか、 または A Vストリームだけをリアルタイム転送するかを切り替えることができる。
本発明の第 1のデータ伝送方法は、 データス卜リームとその管理情報を記録媒 体から読み出す読み出しステップと、 データストリームの中で、 指定された再生 区間の再生に必要な部分データストリームに対応する部分管理情報を決定する決 定ステップと、 部分デ一夕ストリーム、 および、 決定ステップの処理により決定 された管理情報を伝送する伝送ステップとを含むことを特徴とする。
本発明の第 1の記録媒体のプログラムは、 データストリームとその管理情報を 記録媒体から読み出す読み出しステップと、 データストリームの中で、 指定され た再生区間の再生に必要な部分データストリームに対応する部分管理情報を決定 する決定ステップと、 部分データストリーム、 および、 決定ステップの処理によ り決定された管理情報を伝送する伝送ステップとを含むことを特徴とする。
本発明の第 1のプログラムは、 データストリームとその管理情報を記録媒体か ら読み出す読み出しステップと、 デ一夕ストリームの中で、 指定された再生区間 の再生に必要な部分デ一タストリームに対応する部分管理情報を決定する決定ス テツプと、 部分デ一夕ストリーム、 および、 決定ステップの処理により決定され た管理情報を伝送する伝送ステップとをコンピュータに実行させる。 本発明の第 2のデータ伝送装置は、 AVストリームの伝送先の装置と相互認証 する認証部と、 認証部による相互認証の結果から、 伝送先の装置が所定のフォー マットに準拠していることが判った場合、 AV ストリームとその管理情報を共に データ伝送するとともに、 認証部による相互認証の結果から、 伝送先の装置が所 定のフォーマットに準拠していないことが判った場合、 AV ストリームだけをリ アルタイム伝送する伝送部とを備えることを特徴とする。
本発明の第 2のデータ伝送方法は、 AVストリームの伝送先の装置と相互認証 する相互認証ステップと、 認証ステップの処理による相互認証の結果から、 伝送 先の装置が所定のフォーマットに準拠していることが判った場合、 AVスト.リー ムとその管理情報を共にデータ伝送するとともに、 認証ステップの処理による相 互認証の結果から、 伝送先の装置が所定のフォーマツ卜に準拠していないことが 判った場合、 AVストリームだけをリアルタイム伝送する伝送ステップとを含む ことを特徴とする。
本発明の第 2の記録媒体のプログラムは、 AV ストリームを伝送するデータ伝 送装置のプログラムであって、 AVストリームの伝送先の装置と相互認証する相 互認証ステップと、 認証ステップの処理による相互認証の結果から、 伝送先の装 置が所定のフォーマットに準拠していることが判った場合、 AVストリームとそ の管理情報を共にデータ伝送するとともに、 認証ステップの処理による相互認証 の結果から、 伝送先の装置が所定のフォ一マツトに準拠していないことが判った 場合、 AVストリームだけをリアルタイム伝送する伝送ステップとを含むことを 特徴とする。
本発明の第 2のプログラムは、 AVストリームを伝送するデータ伝送装置を制 御するコンピュータに、 AV ストリームの伝送先の装置と相互認証する相互認証 ステップと、 認証ステップの処理による相互認証の結果から、 伝送先の装置が所 定のフォーマットに準拠していることが判った場合、 AV ストリームとその管理 情報を共にデ一夕伝送するとともに、 認証ステップの処理による相互認証の結果 から、 伝送先の装置が所定のフォーマットに準拠していないことが判った場合、 AVストリームだけをリアルタイム伝送する伝送ステップとを実行させる。
本発明の第 1のデータ処理装置は、 PlayList ファイルを受信する受信部と、 P layListを記録するとともに、 記録されている PlayListを管理する管理情報ファ ィルに、 新たに受信した PlayList ファイルに関する情報を追加する記録部とを 備えることを特徴とする。
本発明の第 1のデータ処理方法は、 PlayList ファイルを受信する受信ステツ プと、 PlayListを記録するとともに、 記録されている PlayListを管理する管理 情報ファイルに、 新たに受信した PlayList ファイルに関する情報を追加する追 加ステップとを含むことを特徴とする。
本発明の第 3の記録媒体のプログラムは、 AVストリームファイル、 および A Vストリームの再生方法を指定する PlayList ファイルが記録されている記録媒 体から再生されたファイルを受信するデータ処理装置のプログラムであって、 P1 ayList ファイルを受信する受信ステップと、 PlayList を記録するとともに、 記 録されている PlayListを管理する管理情報ファイルに、 新たに受信した PlayLi stファイルに関する情報を追加する追加ステップとを含むことを特徴とする。 本発明の第 3のプログラムは、 AVストリームファイル、 および AVストリ一 ムの再生方法を指定する PlayList ファイルが記録されている記録媒体から再生 されたファイルを受信するデータ処理装置を制御するコンピュータに、 PlayList ファイルを受信する受信ステップと、 PlayList を記録するとともに、 記録され ている PlayListを管理する管理情報ファイルに、 新たに受信した PlayListファ ィルに関する情報を追加する追加ステップとを実行させる。
本発明の第 2のデータ処理装置は、 サムネールファイルを受信する受信部と、 記録されているサムネ一ルファイルに、 受信したサムネールファイルのデータを 追加する記録部とを備えることを特徴とする。
本発明の第 2のデータ処理方法は、 サムネールファイルを受信する受信ステツ プと、 記録されているサムネールファイルに、 受信したサムネールファイルのデ —夕を追加する追加ステップとを含むことを特徴とする。 本発明の第 4の記録媒体のプログラムは、 AVストリームファイル、 および A Vストリームのサムネールファイルが記録される記録媒体に対して、 データを入 力するデータ処理装置のプログラムであって、 サムネールファイルを受信する受 信ステップと、 記録されているサムネールファイルに、 受信したサムネールファ ィルのデ一夕を追加する追加ステップとを含むことを特徴とする。
本発明の第 4のプログラムは、 AVストリームファイル、 および AVストリ一 ムのサムネールファイルが記録される記録媒体に対して、 データを入力するデー 夕処理装置を制御するコンピュータに、 サムネールファイルを受信する受信ステ ップと、 記録されているサムネールファイルに、 受信したサムネールファイルの データを追加する追加ステップとを実行させる。
本発明の第 1のデータ伝送装置および方法、 記録媒体のプログラム、 並びにプ ログラムにおいては、 デ一タストリームの中で指定された再生区間の再生に必要 な部分デ一タストリームおよび部分管理情報データが決定され、 決定された部分 デ一タストリームが伝送される。
本発明の第 2のデータ伝送装置および方法、 記録媒体のプログラム、 並びにプ ログラムにおいては、 伝送先の装置が所定のフォーマツトに準拠している場合、 AV ストりームとその管理情報データがともにデータ伝送され、 準拠していない 場合、 AVストリームだけがリアルタイム伝送される。
本発明の第 1のデータ処理装置および方法、 記録媒体のプログラム、 並びにプ ログラムにおいては、 PlayListファイルが管理情報ファイルに追加される。 本発明の第 2のデータ処理装置および方法、 記録媒体のプログラム、 並びにプ ログラムにおいては、 第 1のサムネールファイルのデータが、 第 2のサムネール ファイルに追加される。 図面の簡単な説明
図 1は、 volume Informationを説明する図である。
図 2は、 ディスク上につくられるディレクトリ構造を説明する図である。 図 3は、 DVR MPEG-2 transport streamの構造を示す図である。
図 4は、 source— packetのシンタクスを示す図である。
図 5は、 TP_extra_headerOのシンタクスを示す図である。
図 6は、 DVR MPEG-2 transport stream recorder model を示す図である c 図 7は、 DVR MPEG-2 transport stream player modelを示す図である。 図 8は、 Clip Information fileのシンタクスを示す図である。
図 9は、 ATC-sequenceについて説明する図である。
図 1 0は、 ATCの不連続点と ATC-sequenceの関係を説明する図である。
図 1 1は、 連続な STC区間について説明する図である。
図 1 2は、 STC の不連続点と STC-sequence の関係、 および STC'sequence と ATC-sequenceの関係を説明する図である。
図 1 3は、 SequencelnfoOのシンタクスを示す図である。
図 1 4は、 program— sequenceを説明する図である。
図 1 5は、 ProgramlnfoOのシンタクスを示す図である。
図 1 6は、 StreamCodinglnfoOのシンタクスを示す図である。
図 1 7は、 stream— coding— typeを示す図である。
図 1 8は、 video_formatを示す図である。
図 1 9は、 frame— rateを示す図である。
図 2 0は、 display— aspect—ratioを示す図である。
図 2 1は、 audio_presentation— typeを示す図である。
図 2 ^ fe, samp丄 ing— frequencyを^:す図である。
図 2 3は、 CPI0のシンタクスを示す図である。
図 2 4は、 EP— mapを説明する図である。
図 2 5は、 AVストリームをはじめて Clip として記録するときにできる TU— mapについて説明する図である。
図 2 6は、 TU— mapのシンタクスを示す図である。
図 2 7は、 PlayListMarkと ClipMarkの関係について説明する図である。 図 2 8は、 ClipMarkのシンタクスを示す図である。
図 2 9は、 PlayList fileのシンタクスを示す図である。
図 3 0は、 UIAppInfoPlayListのシンタクスを示す図である。
図 3 1は、 PlayListOのシンタクスを示す図である。
図 3 2は、 EP_map typeの PlayListについて説明する図である。
図 3 3は、 TU— map typeの PlayListについて説明する図である。
図 3 4は、 EP_map typeの PlayListの時間情報と AVストリームファイルの 中のァドレス情報の関係を説明する図である。
図 3 5は、 TU— map typeの PlayListの時間情報と AVストリームファイルの 中のアドレス情報の関係を説明する図である。
図 3 6は、 PlayltemOのシンタクスを示す図である。
図 3 7は、 PlayListMarkのシンタクスを示す図である。
図 3 8は、 Info.dvrのシンタクスを示す図である。
図 3 9は、 UIAppInfo Volumeのシンタクスを示す図である。
図 4 0は、 TableOfPlayListsのシンタクスを示す図である。
図 4 1は、 サムネールのヘッダ情報ファイルのシンタクスを示す図である。 図 4 2は、 サムネールのピクチャデータファイルのシンタクスを示す図である。 図 4 3は、 tn— blockへのデ一夕の格納方法を説明する図である。
図 4 4は、 動画像記録再生装置の構成を示すブロック図である。
図 4 5は、 AVストリ一ムが新しい Clipとして記録される時の Clipと PlayLi stの関係のコンセプトを説明する図である。
図 4 6は、 Virtual PlayListの作成のコンセプトについて説明する図である。 図 4 7は、 Real PlayListの再生区間の一部分を消去したときの Clip と Play Listの関係のコンセプトを説明する図である。
図 4 8は、 Minimizeの編集をしたときの Clipと PlayList, Virtual PlayList の関係のコンセプトを説明する図である。
図 4 9は、 1つの Clip AVストリームのデータを部分的に消去した時に、 Cli pの中に 2つの ATC— sequencesができる場合を説明する図である。
図 5 0は、 1つの Clip AVストリームのデータを部分的に消去した時の、 AT C一 sequences, STC— sequences およひ program— sequence の関係を E¾明 9- 図 である。
図 5 1は、 CPIが EP— mapである Clip AVストリームの一部分を消去した時 の Clipと PlayListの関係を説明する図である。
図 5 2は、 Clipの中に ATCの不連続を許さない場合において、 Clip AVスト リームの一部分を消去した時に、 Clip が 2つに分かれる場合を説明する図であ る。
図 5 3は、 CPIが TU_mapである Clip AVストリ一ムの一部分を消去した時 の Clipと PlayListの関係を説明する図である。
図 5 4は、 AVストリームを Clipして新しく記録するときの、 Clip AVストリ —ムファイルおよび Clip Information ファイルの作成を説明するフローチヤ一 卜である。
図 5 5は、 はじめに AVストリームを Clipとして記録するときの Sequenceln foの作成の動作例を説明するフローチャートである。
図 5 6は、 Programlnfoの作成の動作例を説明するフローチャートである。 図 5 7は、 EP_mapの作成の動作例を説明するフローチャートである。
図 5 8は、 Real PlayListの作成方法を説明するフローチャートである。
図 5 9は、 Virtual PlayListの作成方法を説明するフローチャートである。 図 6 0は、 PlayListの再生方法を説明するフローチャートである。
図 6 1は、 AV ストリームファイルとデータベースファイルを共にファイル転 送する場合を説明する図である。
図 6 2は、 AV ストリームをリアルタイム転送 (ストリーム転送) し、 データ ベースをファイル転送する場合を説明する図である。
図 6 3は、 AVストリームだけをリアルタイム転送し、 コピー先でデータべ一
'を新たに作成する場合を説明する図である。 図 6 4は、 コピー先の記録装置が DVRフォーマ.ッ卜に準拠したものではない 場合に、 AV ストリームをリアルタイムにデータを再生する速度で転送する場合 を説明する図である。
図 6 5は、 コピー元 (出力側の再生装置) から、 コピー先 (入力側の記録装 置) へ、 PlayListとそれに必要な Clipの部分だけをコピーする場合の Clipと P layListの関係を説明する図である。
図 6 6は、 コピー元 (出力側の再生装置) から、 コピー先 (入力側の記録装 置) へ、 PlayList をコピーする場合に、 その PlayListの再生に必要な Clip の 部分について説明する図である。
図 6 7は、 コピー元 (出力側の再生装置) から、 コピー先 (入力側の記録装 置) へ、 PlayList をコピーする場合に、 IN_time の前のデ一夕のコピー開始点 を決める方法を説明する図である。
図 6 8は、 コピ一元 (出力側の再生装置) から、 コピー先 (入力側の記録装 置) へ、 PlayList をコピーする場合に、 OUT_time の後のデータのコピー終了 点を決める方法を説明する図である。
図 6 9は、 コピー元 (出力側の再生装置) から、 コピー先 (入力側の記録装 置) へ、 PlayListとそれに必要な Clipの部分だけをコピ一する場合の Clipと P layListの関係を説明する図である。
図 7 O Aは、 コピー元 (出力側の再生装置) から、 コピ一先 (入力側の記録装 置) へ、 Clipの部分的にコピーする場合の Clip の変更方法について説明する図 である。
図 7 0 Bは、 コピー元 (出力側の再生装置) から、 コピー先 (入力側の記録装 置) へ、 Clip の部分的にコピーする場合の Clipの変更方法について説明する図 である。
図 7 0 Cは、 コピー元 (出力側の再生装置) から、 コピー先 (入力側の記録装 置) へ、 Clipの部分的にコピーする場合の Clip の変更方法について説明する図 である。 図 7 0 Dは、 コピー元 (出力側の再生装置) から、 コピー先 (入力側の記録装 置) へ、 Clipの部分的にコピーする場合の Clipの変更方法について説明する図 である。
図 7 1は、 コピー元 (出力側の再生装置) から、 コピー先 (入力側の記録装 置) へ、 DVR の AVストリームファイルとそれに関係するデ一夕べ一スフアイ ルを、 ディジタルバス経由でコピーする場合の構成を示すブロック図である。 図 7 2は、 コピー元 (出力側の再生装置) から、 コピ一先 (入力側の記録装 置) へ、 PlayList をコピーする場合の、 コピ一元の処理を説明するフ口一チヤ 一卜である。
図 7 3は、 コピー元 (出力側の再生装置) から、 コピ一先 (入力側の記録装 置) へ、 PlayListをコピ一する場合において、 コピ一元の側の Clip についての 処理を説明するフローチャートである。
図 7 4は、 コピー元 (出力側の再生装置) から、 コピー先 (入力側の記録装 置) へ、 PlayList をコピ一する場合の、 コピ一先の処理を説明するフローチヤ ートである。
図 7 5は、 AVストリ一ムファイルとデ一夕べ一スファイルが、 無線波を経由 して、 記録装置へファイルが転送される場合を説明する図である。
図 7 6は、 AVストリームファイルとデ一夕ベースファイルが、 別々のサーバ に記録されており、 それぞれのサーバから記録媒体へファイルが転送される場合 を説明する図である。 発明を実施するための最良の形態
以下に、 本発明の実施の形態について、 図面を参照して説明する。
図 1は、 記録媒体 (後述する図 4 4の記録媒体 1 0 ) 上のアプリケーションフ ォ一マットの簡単化された構造を示している。 このフォーマットは、 AVストリ ームの管理のために PlayList と Clipの 2個のレイヤをもつ。 そして、 Volume Informationは、 ディスク内のすべての Clipと PlayListの管理をする。 1個の AVストリームと、 それの付属情報のペアを 1個のオブジェクトと考え、 それを Clip と呼ぶ。 AVストリームフアイルは Clip AVストリームファイルと 呼ばれ、 その付属情報は、 Clip Information fileと呼ばれる。
1個の Clip AVストリームファイルは、 MPEG2 トランスポートストリーム を DVR (Digital Video Recording) アプリケーションフォーマットによつて規 定される構造に配置したデ一夕をストアする。
一般に、 コンピュータ等で用いるデータファイルは、 バイト列として扱われる が、 Clip AV ストリームファイルのコンテンツは、 時間軸上に展開され、 PlayL istは、 Clip の中のアクセスポイントを主にタイムスタンプで指定する。 PlayLi stによって、 Clipの中のアクセスポイントのタイムスタンプが与えられた時、 C lip Information file は、 Clip AVストリームファイルの中でストリームのデコ ―ドを開始すべきァドレス情報を見つけるために役立つ。
PlayList は、 Clip の中からュ一ザが見たい再生区間を選択し、 それを簡単に 編集することができることを目的にして導入された。 1つの PlayList は、 Clip の中の再生区間の集まりである。 ある Clip の中の 1つの再生区間は、 Playltem と呼ばれ、 それは、 時間軸上の IN点と OUT点のペアで表される。 それゆえ、 PlayListは、 Playltemの集まりである。
PlayListには、 2つのタイプがぁる。 1つは、 Real PlayListであり、 もう 1 つは、 Virtual PlayListである。
Real PlayList は、 それが参照している Clip のストリーム部分を共有してい るとみなされる。 すなわち、 Real PlayList は、 それが参照している Clip のス トリ一ム部分に相当するデータ容量をディスクの中で占める。 AVストリームが 新しい Clipとして記録される場合、 その Clip全体の再生可能範囲を参照する R eal PlayListが自動的に作られる。 Real PlayListの再生範囲の一部分が消去さ れた場合、 それが参照している Clip のストリーム部分のデータもまた消去され る。
Virtual PlayListは、 Clipのデータを共有していないとみなされる。 Virtual PlayListが変更または消去されたとしても、 Clipは何も変化しない。
なお、 以下の説明においては、 Real PlayListと Virtual PlayListを総称して 単に、 PlayListと呼んでいる。
DVRディスク上に必要なディレクトリは、 次の通りである。
"DVR"ディレクトリを含む rootディレクトリ
"PLAYLIST"ディレクトリ, "CLIPINF"ディレクトリ, "STREAM"ディレク トリおよび" DATA"ディレクトリを含む" DVR"ディレクトリ
root ディレクトリの下に、 これら以外のディレクトリを作っても良いが、 そ れらは、 この DVRアプリケーションフォーマツトでは、 無視される。
図 2に、 DVR ディスク上のディレクトリ構造の例を示す。 同図に示されるよ うに、 rootディレクトリは、 1個のディレクトリを含む。
"DVR" -- DVR アプリケーションフォーマットによって規定されるすべての ファイルとディレクトリは、 このディレクトリの下にストアされなければならな い。
"DVR"ディレクトリは、 次に示すファイルをストァする。 "info.dvr"ファイル は、 DVR ディレクトリの下に作られ、 アプリケーションレイヤの全体的な情報 をストアする。 DVRディレクトリの下には、 ただ一つの info.dvrがなければな らない。 ファイル名は、 info.dvr に固定されるとする。 "merm.tidx"と" menu.td at"、 そして" mark.tidx"と" mark.tdat"は、 サムネールについての情報をストア するためのファイルである。
"DVR"ディレクトリは、 以下に説明するディレクトリを含む。
"PLAYLIST" -- Real PlayList と Virtual PlayList のデータベースファイル は、 このディレクトリの下に置かなければならない。 このディレクトリは、 Pla yListが 1個もなくても存在しなければならない。
"CLIPINF" -- Clipのデ一夕べ一スは、 このディレクトリの下に置かなければ ならない。 このディレクトリは、 Clip が 1個もなくても存在しなければならな い。 "STREAM" -- AVストリームファイルは、 このディレクトリの下に置かなけ ればならない。 このディレクトリは、 AV ストリ一ムファイルが 1個もなくても 存在しなければならない。
"PLAYLIST"ディレクトリは、 2種類の PlayListファイルをストァするもので あり、 それらは、 Real PlayListと Virtual PlayListである。
"xxxxx.rpls" -- このファイルは、 1個の Real PlayList に関連する情報をス トァする。 それぞれの Real PlayList 毎に、 1個のファイルが作られる。 ファ ィル名は、 "xxxxx.rpls"である。 ここで、 "xxxxx"は、 5個の 0から 9まで数字で ある。 ファイル拡張子は、 "rpls"でなければならない。
"yyyyy-vpls" -- このファイルは、 1個の Virtual PlayList に関連する情報を ストアする。 それぞれの Virtual PlayList 毎に、 1個のファイルが作られる。 フアイル名は、 "yyyyy.vpls"である。 ここで、 "yyyyy"は、 5個の 0から 9まで数 字である。 ファイル拡張子は、 "vpls"でなければならない。
"CLIPINF"ディレクトリは、 それぞれの AVストリームファイルに対応して、 1個のファイルをストアする。
"zzzzz.clpi" -- このファイルは、 1個の AVストリームフアイル (Clip AVスト リームファイルまたは Bridge-Clip AVストリームファイル)に対応する Clip In iormationnle である。 ファつリレ名 fま、 "zzzzz.clpi"であり、 こしで、 "ζζζζζ" 、 5個の 0から 9までの数字である。 ファイル拡張子は、 "clpi"でなければならな い。
"STREAM"ディレクトリは、 AVストリームのファイルをストアする。
"zzzzz.m2ts" -- このファイルは、 DVRシステムにより扱われる AVストリー ムファイルである。 これは、 Clip AVストリームファイルまたは Bridge-Clip A V ストリームファイルである。 ファイル名は、 "zzzzz.ni2ts"であり、 ここで" zzz zz"は、 5個の 0から 9までの数字である。 ファイル拡張子は、 "m2ts"でなけれ ばならない。
1個の AVストリームファイルとそれに対応する Clip information file は、 同じ 5個の数字" zzzzz"を使用しなければならない。
その他のディレクトリとファイル名は、 本発明の実施の形態を説明するために 必要ないので、 説明を省略する。
次に、 AV ストリームファイルの構造を説明する。 AV ストリームファイルは 図 3に示す DVR MPEG2 トランスポートストリームの構造を持たなければなら ない。 DVR MPEG2 トランスポートストリームは次に示す特徴を持つ。
DVR MPEG2 トランスポートストリームは、 整数個の Aligned unit から構 成される。
Aligned unitの大きさは、 6144ノ ィト(2048 X 3バイト)である。
Aligned unitは、 ソースパケットの第 1バイト目から始まる。
ソースパケットは、 192 バイト長である。 1個のソースパケットは、 TP— extra— header とトランスポートパケットから成る。 TP— extra— headerは、 4バイト長 であり、 またトランスポートパケットは、 188バイト長である。
1個の Aligned un は、 32個のソースバケツトから成る。
DVR MPEG2 トランスポートストリームの中の最後の Aligned unit も、 ま た 32個のソースバケツトから成る。
最後の Aligned unit が、 入力トランスポートストリームのトランスポートパケ ットで完全に満たされなかった場合、 残りのバイト領域をヌルパケット (PID=0 xlFFF のトランスポートパケット) を持ったソ一スパケットで満たさねばなら ない。
Source packet のシンタクスを図 4に示す。
TP— extra— header ()は、 4バイト長のヘッダである。 また、 transport—packet 0 は、 ISO/IEC 13818-1で規定される 188バイト長の MPEG-2 トランスポ一 トバケツトである。
TP— extra— headerのシンタクスを図 5に示す。
copy— permission— indicator は、 対 J心するトランスポートノ ケットのペイ口一 ドのコピー制限を表す整数である。 arrival— time_stampは、 AVストリームの中で、 対応するトランスポートパケ ットがデコーダ (後述する図 4 4の A Vデコーダ 1 6が対応する) に到着する時 刻を示すタイムスタンプである。 これは、 後述する式 (1)の中で arrivaし time一 st ampによって指定される値を持つ整数値である。
図 6は、 DVR MPEG-2 トランスポートストリームのレコーダモデル (後述す る図 4 4の動画像記録再生装置 1が対応する) を示す。 これは、 レコーディング プロセスを規定するための概念上のモデルである。 DVR MPEG-2 トランスポ一 トストリームは、 このモデルに従っていなければならない。
MPEG-2 トランスポートストリームの入力タイミングについて説明する。
入力 MPEG2 トランスポートストリームは、 フルトランスポートストリ一ム またはパーシャルトランスポ一トストリームである。
入力 MPEG2 トランスポ一トストリ一ムは、 ISO/IEC13818-1 または ISO/IE C13818-9に従っていなければならない。
MPEG2 トランスポートストリームの i番目のバイトは、 T-STD(ISO/IEC 13 818-1で規定される ransport stream system target decoder) 2 0 1 (図 4 4 の AVデコーダ 1 6が対応する) とソースパケッタイザ (source packetizer) 2 0 4 (図 4 4のソースパケッタイザ 2 9が対応する) へ、 時刻 t(i)に同時に入 力される。
27MHz PLL 2 0 2 (図 4 4の動画像記録再生装置 1では、 制御部 1 7に内蔵 されている) について説明する。
27MHzクロックの周波数は、 MPEG-2 トランスポ一トストリームの PGR (P rogram Clock Reference)の値にロックしなければならない。
arrival time clockについ C兌 する。
ァライバルタイムクロックカウン夕 (Arrival time clock counter) 2 0 3 (図 4 4の動画像記録再生装置 1では、 制御部 1 7に内蔵されている) は、 27 MHz PLL 2 0 2が出力する 27MHz の周波数のパルスをカウントするバイナリ —カウンターである。 Arrival—time— clock(i)は、 時亥 U t(i)における Arrival time clock counter 2 0 3のカウント値である。
ソースバケツタイザ 2 0 4について説明する。
ソースバケツタイザ 2 0 4は、 すべてのトランスポートバケツトに TP— extra— headerを付加し、 ソースパケットを作る。
Arrival— time— stamp は、 トランスポートパケットの第 1バイト目が T-STD 2 0 1とソースバケツタイザ 2 0 4の両方へ到着する時刻を表す。 Arrivaし time— s tamp(k)は、 等式 (1)で示されるように、 Arrival— time— clock(k)の廿ンプル値であ り、 ここで、 kはトランスポートパケットの第 1バイト目を示す。
arrival— time一 stamp (k) = arrival一 time一 clock(k)% 230 (1)
ライトバッファ (Write Buffer) 2 0 5 (図 4 4の動画像記録再生装置 1で は、 書き込み部 3 2に内蔵されている) について説明する。
Rmaxは、 ソースバケツタイザ 2 0 4からライトバッファ 2 0 5へのソースパ ケットストリームの入力ビッ卜レー卜である。 入力トランスポ一トストリームの 最大ピットレ一トを TS— recording— rateとすると、 Umaxは次のように計算され る。
Rmax = TS一 recording一 rate X 192/188
Rudは、 ライトバッファ 2 0 5から DVR ドライブ (DVR drive) 2 0 6 (図 4 4の動画像記録再生装置 1では、 書き込み部 3 2に内蔵されている) への出力 ビットレートである。
ライトバッファ 2 0 5が空でない時のバッファからのソースバケツトス卜リー ムの出力ビットレートは Rud である。 バッファが空である時、 バッファからの 出力ビットレ一トはゼロである。
DVR ドライブ 2 0 6は、 T-STD 2 0 1への各バケツ卜の到着時刻に対応する ATS が付加された、 ライトバッファ 2 0 5からの各パケットを、 ディスク (図 4 4の記録媒体 1 0に対応する) に記録する。
図 7は、 DVR MPEG-2 トランスポートストリームのプレーヤモデル (図 4 4 の動画像記録再生装置 1が対応する) を示す。 これは、 再生プロセスを規定する ための概念上のモデルである。 DVR MPEG-2 トランスポ一トストリームは、 こ のモデルに従っていなければならない。
リードバッファ (Read buffer) 2 2 2 (図 4 4の動画像記録再生装置 1では、 読み出し部 1 1に内蔵されている) について説明する。
Rudは、 DVH ドライブ (DVR drive) 2 2 1 (図 4 4の動画像記録再生装置 1では、 読み出し部 1 1に内蔵されている) からリードバッファ 2 2 2への入力 ビットレートである。
リ一ドバッファ 2 2 2がフルでない時のバッファへのソースパケットス卜リー ムの入力ビットレートは Rud である。 バッファがフルである時、 ノ ッファへの 入力は止められる。
Rmax は、 リードバッファ 2 2 2からソースデパケッタイザ (source depack etizer) 2 2 3 (図 4 3のソ一スデパケッタイザ 1 4が対応する) へのソ一スパ ケットストリームの出力ビッ卜レ一卜である。
ァライバルタイムクロックカウンタ (arrival time clock counter) 2 2 5 (図 4 4の動画像記録再生装置 1では、 制御部 1 7に内蔵されている) について 説明する。
ァライバルタイムクロックカウンタ 2 2 5は、 27MHz クリスタル発振器 (27 MHzX-tal) 2 2 4 (図 4 4の動画像記録再生装置 1では、 制御部 1 7に内蔵さ れている) が発生する 27MHzの周波数のパルスをカウントするバイナリ一カウ ン夕一である。
現在のソースパケットが AVストリームファイルの最初のソースバケツトであ るか、 または後述する SequencelnfoOの中で SPN— ATC_start が指すところの ソースバケツトである場合、 そのバケツトの arrival time stamp の値でァライ バルタイムクロックカウンタ 2 2 5のカウント値をリセットする。
Arrival— time— clock(i)は、 時刻 t(i)におけるァライバルタイムクロックカウン タ 2 2 5のカウント値である。 MPEG-2トランスポートストリームの出力タイミングについて説明する。
現在のソースバケツトの arrival— time— stampが arrival— time— clock(i)の LSB 30 ビットの値と等しい時、 そのソースバケツトのトランスポ一トパケッ卜は、 バッファから引き抜かれる。
次に、 AVストリームファイルの再生情報を管理するデ一夕べ一スフォーマツ トについて説明する。
図 8は、 Clip Information file のシンタクスを示す。 Clip Information file は、 SequencelnfoO, ProgramlnfoO, CPlO, ClipMarkOを持つ。
Sequencelnfo一 start— addressは、 zzzzz.clpiフアイルの先頭のバイトからの相 対バイト数を単位として、 SequencelnfoOの先頭アドレスを示す。 相対バイト数 はゼロからカウントされる。
ProgramInfo_Start_addressは、 zzzzz.clpiファイルの先頭のバイトからの相 対バイト数を単位として、 ProgramlnfoOの先頭アドレスを示す。 相対バイト数 はゼロからカウントされる。
CPI— Start— address は、 zzzzz.clpi ファイルの先頭のバイ卜からの相対バイト 数を単位として、 CPI0の先頭アドレスを示す。 相対バイト数はゼロからカウン トされる。
ClipMark— Start— address は、 zzzzz.clpi ファイルの先頭のバイトからの相対 バイト数を単位として、 ClipMarkOの先頭アドレスを示す。 相対バイト数はゼ 口からカウントされる。
その他のシンタクスフィールドは、 本発明の実施の形態を説明するために必要 ないので、 説明を省略する。
SequencelnfoOは、 Clip AV streamの中の ATC-se(juence と STC'sequence の情報を定義する。
ATC-sequence について説明する。 AV ストリームファイルを構成する各ソ一 スパケットの arrival time stamp (ATS) に基づいて作られる時間軸を、 ァライ パルタイムベースと呼び、 そのクロックを、 ATC (Arrival Time Clock)と呼ぶ c そして、 ATC の不連続点 (ァライバルタイムべ一スの不連続点) を含まないソ ースバケツト列を、 ATC-sequenceと呼ぶ。
図 9は、 ATC-sequence について説明する図である。 入力トランスポートスト リームを Clip AVストリームファイルとして新しく記録する時、 その Clipは A TCの不連続点を含んではならず、 ただ 1つの ATC-sequenceを持つ。 ATCの不 連続点は、 編集等によって Clip AVストリームファイルのストリームデ一夕を 部分的に消去した場合にだけ作られることを想定している。 これについての詳細 は後述する。
AVストリームファイルの中で、 新しい ATC が開始するアドレス、 すなわち、 ATC-sequence のスタートアドレスを、 SequencelnfoOにストアする。 このアド レスは、 SPN— ATC_startにより示される。
AVストリームファイルの中にある最後の ATC-sequence以外の ATC-sequenc eは、 その SPN—ATC— startで指されるソースパケットから開始し、 その次の S PN—ATC— startで指されるソースパケットの直前のソースバケツ卜で終了する。 最後の ATC-sequenceは、 その SPN_ATC— startで指されるソースパケットから 開始し、 AVストリームファイルの最後のソースパケットで終了する。
図 1 0は、 ATC の不連続点と ATC-sequence の関係を説明する図である。 こ の例の場合、 Clip AVストリームファイルは、 2個の ATC不連続点を持ち、 3 個の ATC-sequenceを持つ。
STC-sequence について説明する。 STC(System Time Clock)の定義は、 MP EG-2 で規定されている定義に従う。 すなわち、 これは、 トランスポ一トストリ —ムの中の PCR(Program Clock Reference)に基づいて作られる時間軸である システムタイムベースのクロックである。 STC の値は 90kHz精度、 33 ビット 長のバイナリ一カウンタのカウント値で表される。
図 1 1は、 連続な STC区間について説明する図である。 ここで横軸は、 Arriv al Time Clock (またはァライバルタイムベース) であり、 縦軸は STC (また はシステムタイムベース) である。 Case-1 の場合、 STC は単調増加しており、 その区間の STCは連続である。 Case-2の場合、 33ゼットの STCが途中でラッ プアラウンドしている。 STCのラップアラウンド点は STCの不連続ではない。 ラップアラウンドしても STCは連続である。
STC の不連続は、 放送局が伝送系を切り替えた場合、 記録側が記録するチヤ ンネルを切り替えた場合、 ユーザが編集動作を行った場合などに発生する。
STC の不連続点 (システムタイムベースの不連続点) を含まないソースパケ ット列を、 STC-sequence と呼ぶ。 なお、 同じ STC— sequence の中で同じ STC の値は、 決して現れない。 そのために、 Clipの最大時間長を、 33ビットの STC のラップアラウンド周期 (約 26時間) 以下に制限している。
AV ストリームファイルの中で、 新しい STC が開始するアドレス、 すなわち、 STC-sequence のスタートアドレスが、 SequencelnfoOにストアされる。 このァ ドレスは、 SPN_STC— startにより示される。
STC-sequenceは、 ATC'sequenceの境界をまたぐことはない。
AVストリームファイルの中にある最後の STC-sequence以外の STC-sequenc eは、 その SPN—STC— startで指されるソースバケツトから開始し、 その次の S PN_STC_startで指されるソースバケツトの直前のソースパケットで終了する。 最後の STC-sequenceは、 その SPN—STC— startで指されるソースパケットから 開始し、 AVストリームファイルの最後のソースバケツ卜で終了する。
図 1 2は、 STC の不連続点と STC-sequence の関係、 および STC-sequence と ATC-sequence の関係を説明する図である。 この例の場合、 Clip AVストリ ームファイルは、 3個の STCを持ち、 3個の STC-sequenceを持つ。 1つの ST C'sequenceが、 ATC-sequenceの境界をまたぐことはない。
AVストリームが STCの不連続点を持つ場合、 その AVストリームファイルの 中で同じ値の PTS が現れるかもしれない。 そのため、 AV ストリーム上のある 時刻を PTSベースで指す場合、 アクセスポイントの PTSだけではそのポイント を特定するためには不十分である。 PTSに加えて、 その PTSを含むところの S TC-sequenceのィンデックスが必要である。 そのインデックスを STC_idと呼ぶ c 図 1 3は、 SequencelnfoOのシンタクスを示す。
lengthは、 この lengthフィールドの直後のバイトから SequencelnfoOの最後 のパイトまでのバイト数を示す。
nmn_of—ATC— sequencesは、 AVストリ一ムファイルの中にある ATC-sequen ceの数を示す。
SPN— ATC— start[atc— id]は、 AVストリームフアイル上で ate— idによつて指さ れる ATC-sequenceが開始するアドレスを示す。 SPN_ATC_start[atc— id]は、 ソ ースパケット番号を単位とする大きさであり、 AVストリームファイルの最初の ソースバケツトからゼロを初期値としてカウントされる。
SequencelnfoOの中の最初の SPN_ATC— start[0]は、 ゼロである。 また、 Seq uencelnfoOの中でエントリ一される SPN— ATC— start[atc— id]の値は、 昇順に並 んでいる。 すなわち、 SequencelnfoOの中でエントリーされる SPN— ATC—start [atc_id]は、 次の条件を満たす。
SPN—ATC— start [0] = 0
0 < ate— id < num_of_ATC_sequences なる ate— id について、
SPN— ATC— start [ate— id - l] < SPN— ATC— start [ate— id]
num— of— STC—sequences[atc—id]ま、 ate一 id によって旨され ATC-sequence 上にある STC-sequenceの数を示す。
offset— STC— id [ate— id]は、 atc—idによって指される ATC-sequence上にある最 初の STC-sequence に対する set— id のオフセット値を示す。 AVストリームフ アイルを新たに記録する時、 offset— STC— id [ate— id]は、 ゼロである。
atc_idによって指される ATC-sequence上にある STC-sequenceに対応する s tc— idの値は、 シンタクス中の stc— idの forloopによって記述される順番によつ て定義され、 その値は offset_STC— id[atc— id]から開始する。
SequencelnfoOの中で定義される連続する 2個の ATC-sequenceについて、 前 側の ATC-sequenceの最後の stcjd とそれに続く ATC-sequenceの最初の stc —id は、 同じ値でも良い。 もし、 これら 2個の stc id が同じ値の場合、 それら の値で参照される 2個の STC-sequenceの中で同じ STCの値が現れることはな い。
SequencelnfoOの中でエントリ一される stc— id の値は、 昇順に並ばなければ ならない。 offset_STC_id[atc d]は、 この制限を満たすように値がセットされる。
PGR— PID[atc— id][stc_id]は、 ate— id によって指される ATC-sequence 上にあ るところの stc— idによって指される STC-sequence に有効な PCR を持つトラ ンスポートパケッ卜の PIDの値である。
SPN_STC— start[atc— id] [stc— id]は、 ate— id によって指される ATC'sequence 上にあるところの stc_id によって指される STC-sequence が、 AVストリーム ファイル上で開始するアドレスを示す。 SPN—STC— start[atc_id] [stc— id]は、 ソ ースバケツト番号を単位とする大きさであり、 AVストリームファイルの最初の ソ一スパケットからゼロを初期値としてカウントされる。
SequencelnfoOの中でエントリ一される SPN— STC— start[atc— id] [stc— id]の値 は、 昇順に並んでいる。 ate— id によって指される ATC-sequence 上にある最初 の SPN— STC— start[atc— id][stc— id] は、 SPN— ATC— start[atc_id〗以上の値である。 すなわち、 次の条件を満たす。
SPN_ATC_start [atc_id] く二 SPN—STC一 start[atc—id] [0]
presentation— start一 time [ate— id] [stc— idjま、 ate— id によって i=旨される ATC-se quence上にある stc— id によって指される STC-sequence上にある AVストリー ムデ一夕のプレゼンテーション 'スタート.タイムを示す。 これは、 その STC-se quenceの STCから導かれる 45 kHzを単位とするプレゼンテーション'タイム の値である。
presentation— end— time [ate— id] [stc一 id] i1ま、 ate— id によって旨される ATC-seq ue ce上にある stc— id によって指される STC-sequence上にある AVストリー ムデ一夕のプレゼンテーション 'エンド 'タイムを示す。 これは、 その STC-sequ enceの STCから導かれる 45 kHzを単位とするプレゼンテーション 'タイムの 値である。 次に、 ProgramlnfoOについて説明する。 プログラムは、 エレメン夕リストリ —ムの集まりであり、 これらのストリームの同期再生のために、 ただ 1つのシス テムタイムべ一スを共有するものである。
再生装置 (後述する図 4 4の動画像記録再生装置 1 ) にとつて、 AVストリー ムのデコードに先だち、 その AVストリームの内容がわかることは有用である。 この内容とは、 例えば、 ビデオやオーディオのエレメンタリーストリームを伝送 するトランスポートパケットの PID の値や、 ビデオやオーディオのコンポーネ ント種類 (例えば、 HDTV のビデオと MPEG-2 AAC のオーディオストリーム など) などの情報である。
この情報は AVストリームを参照するところの PlayList の内容をユーザ一に 説明するところのメニュー画面を作成するのに有用であるし、 また、 AV ストリ —ムのデコードに先だって、 再生装置の AVデコーダ 1 6 (後述する図 4 4 ) お よびデマルチプレクサ 1 5 (後述する図 4 4 ) の初期状態をセットするために役 立つ。 この理由のために、 Clip Information file は、 プログラムの内容を説明 するための Programlnfoを持つ。
MPEG2 トランスポートストリームをストァしている AVストリームファイル は、 ファイルの中でプログラム内容が変化するかもしれない。 例えば、 ビデオェ レメンタリーストリームを伝送するところのトランスポートバケツ卜の PID が 変化したり、 ビデオストリ一ムのコンポーネント種類が SDTVから HDTVに変 化するなどである。 Programlnfo は、 AVストリームファイルの中でのプログラ ム内容の変化点の情報をス卜ァする。
AV ストリ一ムファイルの中で本フォーマツ卜が規定するプログラム内容が一 定 あるソ一スノヽケッ卜歹!] ¾:、 program-sequenceと H乎 、。
AVストリームファイルの中で、 新しい program-sequenceが開始するァドレ スを ProgramlnfoOにストアする。 このアドレスは、 SPN— program— sequence_s tartにより示される。
AV ストリームファイルの中にある最後の program-sequence 以外の progra m-sequence fま、 その SPN—program— sequence— start で ί旨されるソースパケッ トから開始し、 その次の SPN_pi'ogi'am— sequence— start で指されるソ一スパケ ットの直前のソースバケツ卜で終了する。 最後の program— sequenceは、 その S PN— program— sequence— start で指されるソースパケットから開始し、 AV スト リームファイルの最後のソースパケットで終了する。
図 1 4は、 program-sequence を説明する図である。 この例の場合、 Clip AV ストリームファっリレは 3個の program-sequenceを持つ。
program-sequenceは、 ATC'sequence の; ¾界およひ STC-sequence の境界 またいでも良い。
図 1 5は、 ProgramlnfoOのシンタクスを示す。
lengthは、 この lengthフィールドの直後のバイトから ProgramlnfoOの最後 のバイ卜までのバイト数を示す。
num— of— program— sequences は、 AV ス卜リ一ムファっルの中にめる nrogra m-sequenceの数を τ 9
SPIN— program— sequence— start よ、 AVストリ一ムファっリレ上で program-seq uence が、開台するアドレスを 。 SPN—program— sequence—start は、 ソース パケット番号を単位とする大きさであり、 AV ストリームファイルの最初のソ一 スパケットから、 ゼロを初期値としてカウントされる。 ProgramlnfoOの中でェ ントリーされる SPN—program— sequence_startの値は、 昇順に並んでいる。
SPN—program— sequence—start 【ま、 その program— sequence に ¾ "する fe初の PMT を持つソ一スパケットを指していることを前提とする。 SPN— program_se quence— start は、 データを記録する記録機 (図 4 4の動画像記録再生装置 1が 対応する) がトランスポ一トストリーム中の PSI/SI を解析することによって作 られる。 記録機 (例えば、 図 4 4のビデオ解析部 2 4または多重化ストリ一ム解 析部 2 6 ) が PSI/SI を解析し、 その変化を検出するまでの遅延時間が必要なた めに、 SPN__program— sequence— startは、 実際の PSI/SIの変化点から所定の時 間以内にあるソースパケットを指しても良い。 program— map— PID ま、 その rogram- sequenceに適用できる PMT(program map table)を持つトランスポートバケツトの PIDの値である。
num— of— streams— ιη—ps ¾、 ての program-sequenceの中で疋 されるエレメ ンタリーストリームの数を示す。
num一 of— groups は、 その rogram-sequence の中で定義されるエレメンタリ —ストリームのグループの数を示す。 num— of_groups は、 1以上の値である。 トランスポ一トストリ一ムの PSI/SI がエレメンタリーストリームのグループ情 報を持つ場合、 num_of— groups は、 1以上の値をとることを想定している。 そ れぞれのグループは、 マルチ 'ビュー'プログラム中の 1つのビュ一を構成する。 stream_±>ID 【ま、 その program-sequence の program— map— PID が、参照—9る ところの PMT の中で定義されているエレメンタリーストリームに対する PID の値を示す。
StreamCodinglnfoO は、 前記 stream— PIDで指されるエレメンタリーストリ —ムの情報を示す。 詳細は後述する。
num_of_streams_in_group は、 エレメンタリーストリームのグループが持つ エレメンタリーストリームの数を示す。
stream_index は、 前記ェレメンタリーストリームのグループが持つェレメン 夕リーストリームに対応するところの、 シンタクス中の for-loopで定義される s tream_mdexの値を τ 。
図 1 6は、 StreamCodinglnfoOのシンタクスを示す。
length は、 この length フィールドの直後のバイトから StreamCodinglnfoO の最後のバイトまでのバイ卜数を示す。
stream— coding— type 、 この StreamCodinglnfoOにヌ応 "る stream— PIDで 指されるエレメンタリーストリームの符号化タイプを示す。 値の意味を図 1 7に 示す。
video— formatは、 この StreamCodinglnfoOに対応する stream_PIDで指され るビデオストリームのビデオフォーマツトを示す。 値の意味を図 1 8に示す。 frame— rateは、 この StreamCodinglnfoOに対応する stream JPIDで指される ビデオストリームのフレームレートを示す。 値の意味を図 1 9に示す。
display— aspect— ratio ま、 この StreamCodinglnfoOに对 する stream一 PID で指されるビデオストリームのディスプレイ'ァスぺクト .レシオを示す。 値の意 味を図 2 0に示す。
cc— flagは、 この StreamCodinglnfoOに対応する stream_PIDで指されるビデ ォストリームの中でクローズド 'キヤ,プション (closed caption data)信号が符号 化されているかを示すフラグである。
original一 video— format— flagは、 この StreamCodinglnfoOの中に original— vid eo— formatと original— display— aspect— ratioが、存在する力を示 一フラグでめる。 original一 video— format fe この StreamCodinglnfoOに対応する streamJPID で指されるビデオストリ一ムが符号化される前のオリジナルのビデオフォーマツ トである。 値の意味は、 前記の video— formatと同じである。
original一 display— aspect— ratio vよ、 この StreamCodinglnfoOにヌ T応 9 -る strea m_PID で指されるビデオストリームが符号化される前のオリジナルのディスプ レイ'ァスぺクト 'レシオである。 値の意味は、 前記の display— aspect— ratioと同 じである。
ビデオストリームと共にマルチメディアデ一夕ストリーム (BML ストリーム、 字幕など) が多重化されているトランスポートストリームをトランス.コーディ ングする塲合において、 ビデオストリームは再エンコードされることによって、 そのビデオフォーマットが変化する (例えば、 1080iから 480iへ変化する) が、 マルチメディアデ一夕ストリームはオリジナルのストリームを保つ場合を考える。 この時、 新しいビデオストリームとマルチメディアデ一夕ストリームの間に情 報のミスマッチが生じる場合がある。 例えば、 マルチメディアデ一タストリ一ム の表示に関するパラメータは、 オリジナルのビデオストリームのビデオフォ一マ ッ卜を想定して決められているにもかかわらず、 ビデオストリームの再ェンコ一 ドによって、 そのビデオフォーマツトが変化した場合である。 このような場合、 original_video_format と original一 display—aspect一 ratio に、 オリジナルのビデオストリームに関する情報を保存する。 再生機は、 前記の新し いビデオストリームとマルチメディアデ一タストリームから次のようにして、 表 示画像をつくる。
ヒア才ストリーム ΐίよ、 original— video— format と original— display一 aspect— rati o で示されるビデオフォ一マツ卜にアップ'サンプリングされる。 そのアップ'サ ンプリングされた画像とマルチメディアデ一タストリームが合成されて、 正しい 表示画像をつくる。
audio— presentation— typeは、 しの StreamCoainglnfoOに対 J心^る stream— P IDで指されるオーディオストリームのプレゼンテーション'タイプを示す。 値の 意味を図 2 1に示す。
sampling— frequency は、 しの StreamCoainglnfoOに 心^る stream— PID で指されるオーディオストリームのサンプリング周波数を示す。 値の意味を図 2 2に示す。
次に、 CPI0について説明する。 CPI (Characteristic Point Information)は、
AVストリームの中の再生時間情報とそのファイルの中のァドレスとを関連づけ るためにある。
CPI には 2個のタイプがあり、 それらは EP一 map と TU— mapである。 CPlO の中の CPI_typeが EP_map typeの場合、 その CPI0は EP_mapを含む。 また、 CPI0の中の CPI— typeが TU— map typeの場合、 その CPlOは TU_ma を含む。
1個の AVストリームファイルは、 1個の EP_mapまたは 1個の TU_mapを持 つ。
EP— map は、 エントリ一ポイント(EP)データのリストであり、 それはエレメ ンタリーストリームおよびトランスポートストリームから抽出されたものである。 これは、 AV ストリームの中でデコードを開始すべきエントリ一ポイントの場所 を見つけるためのアドレス情報を持つ。 1つの EPデータは、 プレゼンテーショ ンタイムスタンプ (PTS) と、 その PTS に対応するアクセスュニットの AVス トリ一ムの中のデ一夕ァドレスの対で構成される。
EP_map は、 主に 2つの目的のために使用される。 第 1に、 PlayList の中で プレゼンテーションタイムスタンプによって参照されるアクセスュニッ卜の AV ストリームの中のデータアドレスを見つけるために使用される。 第 2に、 ファー ストフォワード再生やファーストリバース再生のために使用される。 記録装置が、 入力 AVストリ一ムを記録する場合、 そのストリームのシンタクスを解析するこ とができるとき、 EP_mapが作成され、 ディスクに記録される。
TU_map は、 デジタルインタフェースを通して入力されるトランスポートパ ケットの到着時刻に基づいたタイムユニット (TU) データのリストを持つ。 こ れは、 到着時刻ベースの時間と AVストリームの中のデ一夕アドレスとの関係を 与える。 記録装置が、 入力 AVストリームを記録する場合、 そのストリームのシ ンタクスを解析することができないとき、 TU— map が作成され、 ディスクに記 録される。
図 2 3は CPI0のシンタクスを示す。
lengthは、 この lengthフィールドの直後のバイトから CPI0の最後のバイト までのバイト数を示す。
CPI— typeは、 1ビットのフラグであり、 Clipの CPIのタイプを表す。
EP_map は、 AVストリ一ムファイルの中にある 1つのビデオストリームに対 して、 次に示すデータを持つ。
(1) stream— PID : そのビデオストリームを伝送するトランスポートパケット の PIDを示す。
(2) num_EP— entries : そのビデオストリームに対するエントリ一ポイントの 数。 EP— mapは、 num—EP— entriesの数の PTS_EP— startと SPN—EP— startの ペアのデータを持つ。
(3) PTS—EP_start : そのビデオストリームの中で、 シーケンスヘッダから始 まるアクセスュニッ卜の PTSを示す。
(4) SPN_EP_start : 前記 PTS EP start により参照されるアクセスュニット の第 1バイト目を含むソ一スポケッ卜の AVストリームファイルの中でのァドレ スを示す。 SPN—EP— start はソースパケット番号を単位とする大きさであり、 A ストリームファイルの最初のソースバケツトから、 ゼロを初期値としてカウン トされる。
AV ストリームファイルの中に複数のビデオストリームが存在する場合、 EP— mapは各ビデオストリームに対して、 前記のデータを持つことができる。
図 2 4は、 EP_map の例を示す。 ここでは、 Clip AV stream の中に、 strea m_PID=xのビデオストリームがあり、 k個のエントリポイントがある (mrni— E P_entries=k) 。 SPN_EP_start で指されるソースパケットの例を図に示す。 そ のソースパケットの中のトランスポートパケットの TP— header に続くペイ口一 ドは、 PESパケットヘッダから開始する。 それに続いて、 シーケンスヘッダ (S QH) があり、 それに続いて GOPヘッダ (GOPH)があり、 それに続いて I-ピクチ ャヘッダ (I-PICH)がある。 このシーケンスヘッダから始まるアクセスュニット の PTSは、 PESバケツトヘッダの中に符号化されている。
次に、 TU_mapについて説明する。
図 2 5は、 AVストリームを新しく Clip として記録する時にできる TU_map について説明する図である。 1つの ATC-sequence の中にあるソースパケット のァライバルタイムに基づいて作られる時間軸を所定の時間単位で分割する。 こ の時間単位を time-unitと呼ぶ。
各々の time_unitの中に入るところの最初の完全な形のソースバケツトの AV ストリームファイル上でのアドレスを TU_map にストアする。 これらのァドレ スを SPN— time— uni start と呼ぶ。 ATC-sequence の上の時刻は、 TU— start— ti meに基づいて定義される。 これについては SPN_time— unit— startのセマンティ クスで後述する。
図 2 6は、 TU— mapのシンタクスを説明する図である。
time一 unit— sizeは、 1つの time_unitの大きさを与えるものであり、 それは 2 7MHz精度のァライバルタイムクロックから導き出される 45kHzクロックを単 位とする大きさである。
シンタクス中の atc_id の for-loop で使われている num— of— ATC— .sequences の値は、 SequencelnfoOの中で定義されている。
offset_arrival_time [atc_id] は、 ate— idで指される ATC'sequenceの中の最初 の完全な time-unit に対するオフセットの時間である。 これは、 27MHz精度の ァライバルタイムクロックから導き出される 45kHz クロックを単位とする大き さである。
AVストリームを新しく Clipとして記録した時、 その AVストリームファイル はただ 1つの ATC-sequence を持ち、 offset_arrival_time[atc_id]はゼロである。 複数の offset_arrival— time[atc_id]が TU— mapにエントリーされる場合は、 次 の条件式が満たされる。
offset—arrival— time L0] 二- 0
0 < ate— ια < num— of一 ATC— sequences なる ate— idにつ て、
offset一 arrival一 time [ate一 id]
>offset一 arrival—time [ate— id- l]+time— unit
* num一 of— time一 unit— entries [ate— id- 1]
num一 of— time一 unit一 entries[atc— id] 【ま、 ate— id で ί¾され ATC-sequence の 中に含まれる time_unitのェントリー数を示す。
SPN_time_unit_start[atc_id] [i] は、 atc_idで指される ATC-sequence中の i 番目の time_unit の開始するアドレスである。 これはソースパケット番号を単 位とし、 AV ストリームファイルの最初のソースパケットからゼロを初期値とし てカウントされる。
現在の time— unit に入るソースパケットが何もない場合、 現在の time— unit に対する SPN— time— unit— startの値は、 その 1つ前の SPN— time_unit_startの 値と等しい。
TU_map の中の SPN— time— unit— startの値のエントリは、 昇順にならんでい なければならない。 ate— idで指される ATC-sequence中の i番目の time一 unitの開始時刻は、 次式 で定義される TU— start— time [ate— id] [i]である。
TU— start— time [ate— id] [i] -offset— arrival— time [ate一 id] +i * time— unit— size
次に、 ClipMarkOについて説明する。
ClipMarkOは、 Clip AVストリームの中のマーク (Mark) の情報を定義する。 マークは、 Clip の中のハイライトや特徴的な時間を指定するために設けられて いる。 Clip に付加されるマークは、 AVストリームの内容に起因する特徴的なシ —ンを指定する、 例えば、 C M開始点や C M終了点、 またシーンチェンジ点など である。 Clip にセットされるマークは、 AVストリームが新しい Clip として記 録される時に記録器がセットする。 なお、 後で PlayList ファイルの中で説明す るが、 PlayList にセットされるマークをストアするために、 PlayList ファイル は PlayListMark を持つ。 PlayList にセットされるマークは、 主にユーザによ つてセットされる、 例えば、 ブックマ一クゃリジューム点などである。
Clip または PlayListにマークをセットすることは、 マークの時刻を示すタイ ムスタンプを ClipMark I PlayListMark に追加することにより行われる。 また、 マ一クを削除することは、 ClipMark I PlayListMark の中から、 そのマークの タイムスタンプを削除する事で行われる。 従って、 マークのセットや削除により、 AVストリームは何の変更もされない。
図 2 7は、 Clip にセットされるマークと PlayListにセッ卜されるマークの関 係を示す図である。 PlayListを再生する時、 その PlayListが参照する Clipの C lipMarkにストアされているマークを参照する事ができる。 したがって、 1つの Clip を Real PlayListや複数の Virtual PlayListによって参照している場合、 それらの PlayListは、 その 1つの Clipの ClipMarkを共有することができるの で、 マークのデータを効率良く管理することができる。
図 2 8は、 ClipMarkのシンタクスを示す。
length は、 この length フィールドの直後のバイトから ClipMarkOの最後の バイ卜までのバイ卜数を示す。 makerJD は、 その mark— type を定義しているメーカ一のメーカー I Dを示 す。
number_of_Clip_marksは、 ClipMarkの中にストァされているマークのェン トリー数を示す。
mark_invalid_flag は、 1ビットのフラグであり、 この値がゼ口にセットされ ている時、 このマークは有効な情報を持っていることを示し、 また、 この値が 1 にセッ卜されている時、 このマ一クは無効であることを示す。
ユーザーがユーザーィンタフェース上で 1つのマークのェントリーを消去する オペレーションをした時、 記録機は ClipMarkからそのマークのェントリ一を消 去する代わりに、 その mark— invalid— flagの値を 1に変更しても良い。
markjypeは、 マークのタイプを示す。
rei_to_STC_id 、 mark— time— stamp と representative一 picture— time— stam pの両方が置かれているところの STC-sequenceを指定するところの stc'idを示 す。 stc-idの値は、 SequencelnfoOの中で定義される。
mark_time_stamp は、 Clip AVストリームの中でマークが指定されたポイン トをプレゼンテーションタイムスタンプをべ一スとして表す。
entry_ES_PIDが、 OxFFFFにセッ卜されている場合、 そのマークは Clip の 中のすべてのエレメンタリーストリ一ムに共通の時間軸上へのボインタ一である。 entry— ES_PIDが、 OxFFFFでない値にセットされている場合、 entry— ES_PI D は、 そのマークによって指されるところのエレメンタリーストリームを含ん でいるところのトランスポートパケットの PIDの値を示す。
ref _to_thumbnail_index は、 マークに付加されるサムネール画像の情報を示 す。 ref— to_thumbnail— index フィールドが、 OxFFFF でない値の場合、 そのマ 一クにはサムネール画像が付加されており、 そのサムネール画像は、 mark.tdat ファイルの中にストアされている。 その画像は、 mark.tidx ファイルの中で thu mbnail— indexの値を用いて参照される (後述) 。 ref— to— thumbnail— indexフィ 一ルドが、 OxFFFF である場合、 そのマークにはサムネール画像が付加されて いない事を示す。
representative— picture一 time— stamp ま、 mark— time— stamp によって れ るマークを代表する画像のポイントを示すタイムスタンプをストァする。
図 2 9は、 PlayList fileのシンタクスを示す。 PlayList fileは、 UIAppInfoP layListO, PlayListO, PlayListMarkOを持つ。
PlayList_start_address は、 Play List ファイルの先頭のバイトからの相対パ イト数を単位として、 PlayListOの先頭アドレスを示す。 相対バイト数はゼロか らカウントされる。
PlayListMark_start_address は、 PlayList ファイルの先頭のバイトからの相 対バイト数を単位として、 PlayListMarkOの先頭アドレスを示す。 相対バイト 数はゼロからカウントされる。
その他のシンタクスフィールドは、 本発明の実施の形態を説明するために必要 ないので、 説明を省略する。
UIAppInfoPlayListOは、 PlayList についてのュ一ザイン夕一フエ一スアプリ ケ一ションのパラメ一タをストァする。
図 3 0に、 UIAppInfoPlayListOのシンタクスを示す。
ref _to_thumbnail_inde は、 マークに付加されるサムネール画像の情報を示 す。 ref—to__thumbnail— index フィールドが、 OxFFFF でない値の場合、 そのマ —クにはサムネール画像が付加されており、 そのサムネール画像は、 menu.tdat ファイルの中にストアされている。 その画像は、 menu.tidxファイルの中で thu mbnail— indexの値を用いて参照される (後述) 。 ref_to__thumbnail— indexフィ —ルドが、 OxFFFF である場合、 そのマークにはサムネール画像が付加されて いない事を示す。
その他のシンタクスフィールドは、 PlayList についてのユーザインターフエ —スアプリケーションのパラメ一夕を示すものであるが、 本発明の実施の形態を 説明するために必要ないので、 詳細な説明を省略する。
図 3 1は、 PlayListOのシンタクスを示す。 lengt は、 この lengthフィールドの直後のバイトから PlayListOの最後のパ ィ卜までのバイ卜数を示す。
CPI— type: 1ビットのフラグであり、 PlayltemOが使用する Clipの CPI—type の値を示す。 CPI— typeは、 Clip Information fileの CPI— typeで定義される。 number— of—Playltemsは、 PlayListOの中にある PlayltemOの数を示す。
シンタクス中の Playltem一 id の for-loop の中で、 PlayltemOの現れる順番に よって、 その PlayltemOに対する Playltem— id の値が決まる。 Playltem— id は、 0から開始する。
その他のシンタクスフィールドは、 本発明の実施の形態を説明するために必要 ないので、 説明を省略する。
次に、 Playltem について説明する。 1個の Playltem は、 基本的に次のデ一 タを含む。
(l)Playltem が指す Clip のファイル名を指定するための Clip_infoi'mation— file _name0
(2)その Clipの再生区間を特定するための IN_timeと OUT— timeのペア。
(3)PlayListの中で連続する 2個の Playltemについて、 前側の Playltemと現在 の Playltemとの接続の状態を示すところの connection— condition
図 3 2は、 CPI_typeが EP_mapの PlayList (これを EP— map typeの PlayL istと呼ぶ) を説明する図である。 EP— map typeの PlayListの場合、 Playltem の IN— timeと OUT— timeは、 PTSベースの時間を示す。 その IN— timeと OUT —timeは、 同じ STC-sequence上の時刻を指す。 その STC-sequenceを示すため に、 re to— STC— idを用いる。 その IN— timeと OUT— timeは、 その STC'seque nce に し-!疋 'fe c±れる presentation一 start— time と presentation—end— time (これらの情報は Sequencelnfoの中にある) で示される再生区間の中の時間を 指す。
図 3 3は、 CPI— typeが TU— mapの PlayList (これを TU_map typeの Play Listと呼ぶ) を説明する図である。 TU— map typeの PlayList の場合、 Playlte mの IN— time と OUT_timeは、 ァライバルタイムベースの時間を指す。 その I N_timeと OUT— timeは、 同じ ATC'sequence上の時刻を指す。
図 3 4は、 EP_map type の PlayList の時間情報と AV ストリームファイル の中のアドレス情報との関係を説明する図である。 PlayList の時間情報は、 AV ストリームファイルの中のピクチャやオーディオフレームの PTS 情報である。 そして、 Clip Information fileの EP— mapと Sequencelnfo ifi AVストリ一ム の中の時間情報とそのファイルの中のァドレスとを関連づける。
図 3 5は、 TU— map type の PlayList の時間情報と AVストリームファイル の中のアドレス情報との関係を説明する図である。 PlayList の時間情報は、 AV ストリームファイルの中のァライバル 'タイム情報である。 そして、 Clip Infor mation fileの TU_mapが、 AVストリームの中の時間情報とそのファイルの中 のァドレスとを関連づける。
図 3 6は、 PlayltemOのシンタクスを示す。
lengthは、 この lengthフィ一ルドの直後のバイ卜から PlayltemOの最後のバ イトまでのバイト数を示す。
Clip_Information— file— name は、 Playltem力 照する Clip Information file のファイル名を示す。
connection— conditionは、 先 Ϊ了する Playltem と現在の Playltem とが、シ一ム レスに接続されているかどうかの情報を示す。
ref_to_STC_idは、 Playltemが参照する Clipの STC'sequenceの stc-idを示 す。 stc-idの値は、 Sequencelnfoの中で定義されている。
IN_timeは、 Playltemの再生開始時刻をストアする。
OUT_timeは、 Playltemの再生終了時刻をストアする。
Bridge— Clip— Information_file— nameは、 先行する Playltemと? ¾在の Play It emとがシームレスに接続されている場合の再生の補助情報である。
図 3 7は、 PlayListMarkOのシンタクスを示す。 PlayListMarkは前述したよ うに、 主にユーザによってセットされるマークをストァする。 length は、 この length フィ一ルドの直後のバイトから PlayListMarkOの最 後のバイトまでのパイト数を示す。
number_of— PlayList— marksは、 PlayListMarkの中にストアされているマー クのエントリー数を示す。
mark— invalid_flag は、 1ビットのフラグであり、 この値がゼ口にセットされ ている時、 このマークは有効な情報を持っていることを示し、 また、 この値が 1 にセットされている時、 このマークは無効であることを示す。
ュ一ザ一がユーザーィン夕フェース上で 1つのマークのェントリーを消去する ォペレ一ションをした時、 記録機は PlayListMarkからそのマークのェントリー を消去する代わりに、 その mark— invalid— flagの値を 1に変更しても良い。
mark_typeは、 マークのタイプを示す。
mark_name_lengthは、 Mark— nameフィールドの中に示されるマーク名のバ イト長を示す。 このフィールドの値は 32以下である。
ref_to_PlayItem_idは、 マークが置かれているところの Playltemを指定する ところの ayltemjdの値を示す。 ある Playltem に対応する Playltem— idの 値は、 Play ListOにおいて定義される。
mark_time_stamp は、 そのマークが指定されたポイントを示すタイムスタン プをストアする。 mark— time— stampは、 ref— to— Playltem— idで示される Play It emの中で定義されているところの IN一 time と OUT_timeで特定される再生範 囲の中の時間を指す。
PlayListの CPI—typeが EP— map typeの場合、 mark— time— stampは、 プレ ゼンテ一ションタイムスタンプをべ一スとして表され、 また、 CPI一 typeが TU一 map type の場合、 mark— time— stamp はァライバルタイムスタンプをべ一スと して表される。
entry JES—PIDが、 OxFFFFにセットされている場合、 そのマークは PlayLis t によって使用されるすべてのエレメンタリーストリームに共通の時間軸上への ポインターである。 entry_ES— PIDが、 OxFFFFでない値にセットされている場 合、 entry_ES— PIDは、 そのマークによって指されるところのエレメンタリース トリームを含んでいるところのトランスポートパケットの PIDの値を示す。 ref— to— thumbnaiし index は、 マークに付加されるサムネール画像の情報を示 す。 ref_to— thumbnail— index フィールドが、 OxFFFF でない値の場合、 そのマ —クにはサムネール画像が付加されており、 そのサムネール画像は、 mark.tdat ファイルの中にストアされている。 その画像は、 mark.tidx ファイルの中で thu mbnail_indexの値を用いて参照される (後述) 。 ref_to— thumbnail— indexフィ —ルドが、 OxFFFF である場合、 そのマークにはサムネール画像が付加されて いない事を示す。
mark_name は、 マークの名前を示す。 このフィールドの中の左から mark_n ame— length で示されるバイト数が、 有効なキャラクタ一文字であり、 前記名前 を示す。 このキャラクタ一文字は、 UIAppInfoPlayListの中で character— setに よって示される方法で符号化されている。 mark— name フィールドの中で、 それ ら有効なキャラクタ一文字に続くバイトの値は、 どんな値が入っていても良い。 次に、 "info.dvr"ディレクトリについて説明する。 図 3 8は、 "info.dvr"フアイ ルのシンタクスを示す図である。 "info.dvr"ディレクトリは、 UIAppInfo Volume (), TableOfPlayListsOを持つ。
TableOfPlayLists— Start— address は、 info.dvr ファイルの先頭のバイトから の相対バイト数を単位として、 TableOfPlayListsOの先頭アドレスを示す。 相対 バイト数はゼロからカウントされる。
図 3 9に、 UIAppInfoPlayListOのシンタクスを示す。
ref— to— thumbnail— index は、 マークに付加されるサムネール画像の情報を示 す。 ref_to— thumbnail— index フィールドが、 OxFFFF でない値の場合、 そのマ —クにはサムネール画像が付加されており、 そのサムネール画像は、 menu.tdat ファイルの中にストアされている。 その画像は、 menu.tidxファイルの中で thu mbnaiし indexの値を用いて参照される (後述) 。 ref— to— thumbnail一 indexフィ —ルドが、 OxFFFF である場合、 そのマークにはサムネール画像が付加されて いない事を示す。
その他のシンタクスフィールドは、 Volume についてのユーザイン夕一フエ一 スアプリケーションのパラメ一夕を示すものであるが、 本発明の実施の形態を説 明するために必要ないので、 詳細な説明を省略する。
図 4 0は、 TableOfPlayListsOのシンタクスを示す。 TableOfPlayListsOは、 PlayList(Real PlayList と Virtual PlayList)のファイル名をストアする。 ポリ ュ一ム (ディスク) に記録されているすべての PlayListファイルは、 TableOfP layListOの中に含まれる。 TableOfPlayListsOは、 ポリュームの中の PlayList のデフォルトの再生順序を示す。
lengthは、 この lengthフィ一ルドの直後から TableOfPlayListsOの最後まで の TableOfPlayListsOのバイト数を示す。
number_of_PlayListsは、 ポリュームに記録されている PlayList の数を示す。 PlayList jile— nameの 1 0ノ、イトの数字は、 PlayListのファイル名を示す。 次に、 サムネールについての情報をストァするファイルの内容を説明する。 "menu.tidx"と" menu.tdat"は、 メニューサムネール、 すなわち Volumeを代表 する 1つのピクチャおよび PlayList 毎にそれを代表する 1つのピクチャの情報 をストアする。 すべてのメニューサムネールのヘッダ情報は、 1つの menu.tidx に集めて管理される。 すべてのメニューサムネールのピクチャデータは、 1つの menu.tdatに集めて管理される。
"mark.tidx"と" mark.tdat"は、 マ一クサムネール, すなわちマーク点で指され るピクチャについての情報をストアする。 Volume中のすべての Clipおよび Pla yListに付加されているすべてのマークサムネールのヘッダ情報は、 1つの mar k.tidxに集めて管理される。 すべてのマークサムネールのピクチャデータは、 1 つの mark.tdatに集めて管理される。
サムネールのピクチャデータは、 例えば、 画像を J P E Gで符号化したデータ である。
これら 4個のファイルのシンタクスとセマンティクスを説明する。 "menu.tidx"と" mark.tidx"は、 同じシンタクス構造を持つ。 図 4 1は、 "menu, tidx"と "mark.tidx"のシンタクス構造を示す。
version— number は、 このサムネールヘッダ情報ファイルのバージョンナンバ —を示す 4個の数字である。
lengthは、 この lengthフィールドの直後のバイトから menu.tidx/mark.tidx の最後のパイトまでのバイト数である。
number— 01— thumbnails ま、 menu.tidxの場合に【 menu.tdat に 卜ア れ ているサムネールピクチャの数であり、 mark.tidxの場合には mai'k.tdatにスト ァされているサムネ一ルビクチャの数である。
tn— block— size は、 menu.tidx の場合には menu.tdat の中の 1つの tn— block のサイズを示し、 mark.tidxの場合には mark.tdatの中の 1つの tnj lockのサ ィズを示す。 このサイズは、 1024バイトを単位とする大きさである。 例えば、 t n_block_size=lは、 1つの tn— blockのサイズが 1024バイトであることを示す。 1つのサムネールピクチャは、 1つの tn_block の中にストアされなければなら ない。
number— of— tn— blocksば、 menu.tidxの 合には menu.tdatの中にある tn— bl ockの数を示し、 mark.tidx の場合には mark.tdat の中にある tn— blockの数を 示す。
thumbnail— indexは、 この thumb nailjndex フィールドに続くサムネール情 報のインデクス番号を表す。 thumbnaiし index して、 OxFFFF という値を使用 してはならない。
menu.tidxの½合、 tnumbnail_index UIApp Into Volume () , UIAppInfoPla yListO の中の ref— to_thumbnail— indexによって参照される。 mark.tidxの場合、 thumbnail— indexは PlayListMarkOおよび ClipMarkOの中の ref— to— thumbnai 1— indexによつて参照される。
ref— to— tn— block— idは、 menu.tidxの場合には menu.tdat中の 1つの tn— bloc kを示し、 その tn_blockは、 thumbnail indexで指されるピクチャデ一タをス トァしている。 ref—to— tn_block— idの値は、 menu.tdatのシンタクス中の tn— bio ck— idの値を参照する。
mark.tid の場合には mark.tdat中の 1つの tnjblockを示し、 その tn— block は、 thumbnail— indexで指されるピクチャデータをストアしている。 ref— to_tn— block一 idの値は、 menu.tdatのシンタクス中の tn— block_idの値を参照する。 picture— byte— size は、 thumbnail— index で指される 1つの符号化サムネール ピクチャのデ一夕長をバイト単位で示す。 picture_byte_size は、 1024 * tn_bloc k_size の値以下でなければならない。 すなわち、 記録機は 1つの符号化サムネ ールピクチャのデータ長を 1024 * tn— block— sizeの値以下になるように、 符号化 しなければならない。
horizontal— picture— size は、 thumbnail— index で される 号ィ匕サム不一レ ピクチャの水平方向の画素数を示す。
vertical— picture_sizeは、 thunibnail_indexで指される符号化サムネ一ルピク チヤの垂直方向の画素数を示す。
display— aspect— ratioは、 thumbnaiし indexで指される符号化サムネールピク チヤのディスプレイ'ァスぺクト-レシオを示す。
図 4 2は、 "menu.tdat"と'' mark.tdat"のシンタクス構造を示す。 "menu.tdat" と" mark.tdat"は、 同じシンタクス構造を持つ。
tn— block は、 1つの符号化サムネールピクチャがストアされる領域である。 一つのサムネールピクチャのバイト長は、 1つの tn— block の大きさ以下である。 1つのピクチャデータの第一バイト目は、 tn— block の第一バイト目と一致して いなければならない。
menu.tdatの場合、 1つの tn_blockのサイズは menu.tdatの中の tn— block_s izeで示される。 mark.tdatの場合、 1つの tnjblockのサイズは mark.tdatの 中の tn— block— sizeで示される。
各 tnjblockは、 それがシンタクス中の for-loopの中で現れるときの tn— block —idの値で区別される。 menu.tidx中の tn— block— idは、 menu.tidx中の ref to_ tn— block— id によって参照される。 mark.tidx 中の tn— block— id は、 mark.tidx 中の ref_to_tn_block_idによって参照される。
サムネールは頻繁に追加、 削除されるので、 追加操作と部分削除の操作は容易 に高速に実行できなければならない。 この理由のため、 menu.tdatと mark.tdat はブロック構造を有する。 一つのピクチャデータは 1つの tn— block に格納され る。
menu.tdatおよび mark.tdatの tn— block列の中に、 使用されていない tn_blo ck が存在してもよい。 例えば、 あるサムネールの削除をする場合、 サムネール のヘッダ情報ファイルの中にエントリーされている thumbnail一 index を消去し、 サムネールのピクチャデータファイルを何も変更しなかったとき、 tn— block 列 の中に、 使用されていない tn— blockができる。
図 4 3は、 サムネールピクチャデータがどのように tnj lock に格納されるか を模式的に表した図である。 図のように、 一つのサムネールピクチャのバイト長 は、 1つの tn— blockの大きさ以下である。 tn— block列の中に、 使用されていな い tn— blockが存在してもよい。
次に、 PlayList の編集動作のコンセプトについて説明する。 以下の処理は、 ユーザからの操作に基づいて、 例えば、 後述する図 4 4の制御部 1 7により実行 される。
図 4 5は、 AVストリームが新しい Clipとして記録される時の Clipと PlayLi st の関係のコンセプトを説明する図である。 AV ストリームが新しい Clip とし て記録される場合、 その Clip全体の再生可能範囲を参照する Heal PlayListが 作られる。
図 4 6は、 Virtual PlayListの作成のコンセプトについて説明する図である。 ユーザが Real PlayListの再生範囲の中から、 IN-timeと OUT-timeを指定する ことによって、 見たい再生区間の Playltemを作り、 Virtual PlayListをつくる。 図 4 7は、 Real PlayListの再生区間の一部分を消去したときの Clip と Play List の関係のコンセプトを説明する図である。 必要な Clip AVストリームの再 生部分だけを参照するように、 Real PlayListの Playltem を変更する。 そして、 Clip AVストリームの不必要なストリーム部分を消去する。 図 4 7に示すように、 Clip AVストリームの中央部のデータを消去しても、 Clip AVストリームフアイ ルは分割されないで、 1つのファイルである。 1つの Clip AV ストリームのデ 一夕を部分的に消去しても、 残ったデ一夕部分は 1つの Clip AVストリームに まとめられる。
Real PlayList が変更されて、 それが参照する Clip のストリーム部分が消去 された時、 それと同じ Clip を使用している Virtual PlayList が参照する Clip がなくなって、 問題が起きるかもしれない。 そのようなことがないように、 ュ一 ザインターフェースは、 次に示す対策をとるべきである。
その"消去"の操作に対して、 ユーザに 「その Real PlayListが参照している C lipのストリーム部分を参照している Virtual PlayListが存在し、 もし、 その R eal PlayList が消去されると、 その Virtual PlayList もまた消去されることに なるが、 それで良いか?」 と確認、 警告する。 または、 前記 Virtual PlayList を消去する代わりに、 Real PlayList に対して次に示す"ミニマイズ (Minimize)" の操作をする。
図 4 8は、 ミニマイズの編集をしたときの Clip と Real PlayList, Virtual PI ayListの関係のコンセプトを説明する図である。 ミニマイズ編集は、 Real Play Listの Playltemを、 Virtual PlayListに必要な Clipのストリーム部分だけを 参照するように変更する。 そして、 Virtual PlayList にとつて不必要な Clip の ストリーム部分を消去する。
図 4 8に示すように、 Clip AV ストリームの中央部のデ一夕を消去しても、 C lip AVストリームファイルは分割されないで、 1つのファイルである。 1つの Clip AVストリームのデータを部分的に消去しても、 残ったデータ部分は 1つの Clip AVストリームにまとめられる。
次に、 前記のコンセプトに基づいて、 Clip AVストリームのデータを部分的に 消去する場合の Clip Information fileの変化について説明する。 前述したように、 AVストリームを Clipファイルとして新たに記録する時、 そ の Clip は ATC の不連続点を含まず、 ただ 1つの ATC-sequence を持つ。 そし て、 ATCの不連続点は、 編集等によって Clip AVストリームファイルのストリ 一ムデ一夕を部分的に消ました場合にだけ、 作られることを想定している。 すな わち、 図 4 7や図 4 8に示すように、 1つの Clip AVストリームのデータを部 分的に消去して、 残ったデ一夕部分が 1つの Clip AVストリームにまとめられ た時、 その Clip は ATCの不連続点を持ち、 複数の ATC-sequence を持つ。 例 えば、 図 4 9において、 編集前の Clipは ATCの不連続点を含まず、 ただ 1つの ATC-sequenceを持つとする。 そして図に示すように、 Clip AVストリームの中 央部のデータを消去した場合、 編集後の Clipは、 2個の ATC-sequence を持つ。 図 5 0は、 1つの Clip AVストリームのデ一夕を部分的に消去した時の ATC- sequence, STC-sequence およひ program-sequence の ¾係を 1¾ 9-な図でめ る。 編集前の Clipは、 ただ 1つの ATC-sequenceと 1つの STC-sequence と 1 つの program-sequence を持つとする。 すなわち、 この Clip の中では、 progra m-sequence の内容が変化しないとする。 この時、 図に影で示す部分の AVスト リームデータを消去したとする。 編集の結果、 Clipは 3個の ATC-sequence と 3個の STC-sequenceを持つ、 一方、 program-sequenceは 1個のままである。 の program-sequenceは、 ATC-sequence の境界と STC-sequence の境界 ¾:ま たいでいる。
次に、 前記のように Clip AV ストリームのデータが部分的に消去される時の、 Clipと PlayListの関係について説明する。
図 5 1は、 CPIが EP_mapである Clip AVストリ一ムの一部分を消去した時 の Clip.と PlayListの関係を説明する図である。 編集前の Clipは 1個の ATC-se quenceと 3偭の STC-sequenceを持つとする。 この ATC-sequenceについての offset— STC— id[0]はゼロである。 そして、 Clipの中の stc=lである STC'sequen ceは、 Playltem2と Playltem3に使われているとする。 今、 図に示すように st c=lである STC-sequenceの AVストリ一ムデ一夕について、 Playltem2と Pla yltem3に使われていない部分の AVストリームデータを消去したとする。
編集後の Clipは 2個の ATC-sequenceを持ち、 stc— id=lであった STC'seque nceは 2個の STC-sequenceに分かれる。 1番目の ATC'sequenceについての o ffset— STC_id[0]はゼロにセッ卜され、 2番目の ATC-sequenceについての offse t— STC— id[l]は 1にセットされる。 すなわち、 1番目の ATC-sequence の中で最 後の STC-sequenceの stcjd と 2番目の ATC'sequenceの中で最初の STC.se quenceの stc— id は、 同じ値で 1になる。
これにより、 編集後の Virtual PlayListの Playltem3と Hayltem4の ref— to —STC— id の値を変更する必要がない。 Clip AV ストリームファイルの部分的な デ一夕を消去する時に、 その消去部分を使用していない Virtual PlayList につ いては何も変更しなくても良い。
このように、 Clip AVストリームの中に ATC の不連続点を作ることができる ので、 Clip AVストリームのミドル (middle)部分のストリームデ一夕を消去した 場合に、 Clip ファイルを 2個に分割する必要がない。 さらに、 ATCシーケンス 毎に、 その上にある最初の STC シーケンスの STC-id に対する offset— STC— id を用いることにより、 Clip AVストリームファイルの部分的なデ一夕を消去する 時に、 その消去部分を使用していない Virtual PlayList については何も変更し なくて良い。
この効果についての理解を助けるために、 図 5 2は Clipの中に ATCの不連続 を許さない場合において、 Clip AVストリームの一部分を消去した時に、 Clip ファイルが二つに分かれる場合を説明する図であり、 また、 その時の Clip と P1 ayListの関係を説明する図である。
図 5 1と同様にして、 編集前の Clipは 1個の ATC-sequenceと 3個の STC's equenceを持つとする。 この ATC-sequenceについての offset— STC_id[0]はゼロ である。 そして、 Clipの中の stcjd=lである STC-sequenceは、 Playltem2と Playltem3に使われているとする。 今、 図に示すように stc_id=lである STC_se quenceの AVストリ一ムデ一夕について、 Playltem2と Plavltem3に使われて いない部分の AVストリームデータを消去したとする。
Clipの中に ATCの不連続を許さない場合、 編集後は Clip-Aと Clip-Bの 2個 の Clipファイルに分かれる。 そのため、 Playltem3と Playltem4が参照する C lip ファイルの名前を変更する必要がある。 すなわち、 Clip AVストリームファ ィルの部分的なデータを消去する時に、 その消去部分を使用していない Virtual PlayListであっても、 その内容を変更しなければならない場合がある。
Clip の中に ATC の不連続を許さない場合は、 これを許す場合に比べると次の 問題がある。
(1) ディスク中の Clipファイル数が多くなる問題。
これによつて、 ディスクの再生開始時に全ての Clip ファイルを読み出し、 再 生装置 (動画像記録再生装置 1 ) のメモリ (制御部 1 7に内蔵されているメモ リ) にストアする処理にかかる時間が増える問題がある。 また、 ディスク (記録 媒体 1 0 ) 中に記録可能なファイル数の上限をある所定の ί直に決めた時、 編集等 により Clip ファイル数が多くなり、 その数が上限に達してしまい、 ディスク中 にまだ空き領域があるのに記録できなくなる問題が発生する。
(2) Clip AVストリームファイルの部分的なデ一夕を消去した時に、 ディスク中 にある Virtual PlayListの変更にかかる時間が大きい問題。
本発明は、 これらの問題を解決する。 すなわち、 ディスクの再生開始時に全て の Clip ファイルを読み出し、 再生装置のメモリにストアする処理にかかる時間 を小さくできる。 また、 ディスク中に記録可能なファイル数の上限をより小さく 設定できる。 また、 Clip AVストリームファイルの部分的なデータを消去した時 に、 ディスク中にある Virtual PlayListの変更にがかかる時間が小さくなる。 図 5 3は、 CPIが TU— mapである Clip AVストリ一ムの一部分を消去した時 の Clipと PlayListの関係を説明する図である。 編集前の Clipは 1個の ATC_se quenceを持つ。 この ATC'sequenceについての offset— arrival— time [0]はゼロで ある。 Virtual PlayListの Playlteml, Playltem2, Playltem3および Playltem 4は、 この ATC-sequenceを参照しているとする。 今、 図に示すように ATC_seq uenceの AVストリ一ムデ一夕について、 どの Playltemにも使われていない A Vストリームデ一夕を消去したとする。
編集後の Clipは 2個の ATC-sequenceを持つ。 1番目の ATC-sequenceにつ いての offset— arrival— time[0]はゼロにセットされ、 2番目の ATC-sequence に ついての offset— arrival— time [1]は値 X にセットされる。 値 Xは、 OUT— time2 よりも大きく、 IN_time3 よりも小さい。 すなわち、 編集後に Virtual PlayList の Playltem3 と Playltem4の IN—time と OUT— timeの値を変更する必要がな い。
Clip AVストリームファイルの部分的なデータを消去する時に、 その消去部分 を使用していない Virtual PlayListについては何も変更しなくても良い。
TU— map type の PlayList を再生する場合、 再生機は Playltemの IN_time と ATC-sequenceの offset— arrival— timeの値を比較することにより、 その IN_t ime と OUT_timeが指すところの ATC-sequence を見つけることができる。 例 えば、 図 5 3の場合、 Playltem3の IN— time3は 2番目の ATC-sequenceの offs et— arrival— time(=X)よりも大きいので、 Playltem3の IN— time3と OUT— time3 は、 2番目の ATC-sequenceを指すことがわかる。
次に、 DVR アプリケーション構造のデータを記録再生するシステムについて、 図 4 4の動画像記録再生装置 1のブロック図を用いて説明する。
例えば、 光ディスクにより構成される記録媒体 1 0は、 再生部 6 1の読み出し 部 1 1により、 そこに記録されている情報が読み出される。 復調部 1 2は、 読み 出し部 1 1が記録媒体 1 0から読み出したデータを復調し、 ECC復号部 1 3に 供給する。 ECC復号部 1 3は、 復調部 1 2より供給されたデ一夕を、 AVストリ 一ムとデ一夕ベースとに分離し、 AVストリームをソ一スデパケッタイザ 1 4に 供給し、 データベースを制御部 1 7に出力する。
ソースデパケッタイザ 1 4は、 入力された AVストリームをデパッケタイズし、 デマルチプレクサ 1 5に出力する。 デマルチプレクサ 1 5は、 ソースデバケツ夕 ィザ 1 4より供給されたデータをビデオ (V) 、 オーディオ (A) 、 およびシス テム (S ) の各データに分離し、 AVデコーダ 1 6とマルチプレクサ 2 5に出力 する。
AVデコーダ 1 6は、 入力されたビデオデータとオーディオデータを、 システ ムデータに基づいてデコードし、 ビデオ信号を端子 1 8から、 オーディオ信号を 端子 1 9から、 それぞれ出力する。
記録部 6 2の AVエンコーダ 2 3には、 端子 2 1から入力されたビデオ信号と、 端子 2 2から入力されたオーディオ信号が供給される。 ビデオ信号はまた、 ビデ ォ解析部 2 4にも供給される。 AV エンコーダ 2 3とビデオ解析部 2 4には、 端 子 2 1から入力されたビデオ信号の代わりに、 必要に応じて、 AVデコーダ 1 6 が出力したビデオ信号が供給される。
AVエンコーダ 2 3は、 入力されたビデオ信号とオーディオ信号をエンコード し、 エンコードしたビデオ信号 (V) 、 オーディオ信号 (A) 、 およびェンコ一 ドに対応するシステムデータ (S ) を、 マルチプレクサ 2 5に出力する。
ビデオ解析部 2 4は、 入力されたビデオ信号を解析し、 解析結果を制御部 1 7 に出力する。
端子 3 3には、 デジ夕ルインタフエースまたはデジタルテレビチューナからの トランスポートストリームが入力され、 スィッチ 2 7を介して、 デマルチプレク サ 1 5、 またはさらにスィッチ 2 8を介して、 多重化ストリーム解析部 2 6、 お よびソースバケツタイザ 2 9に供給される。 多重化ストリーム解析部 2 6とソー スバケツタイザ 2 9にはまた、 スィッチ 2 8を介してマルチプレクサ 2 5が出力 した信号も、 スィッチ 2 7からの信号に代えて供給可能とされている。
多重化ストリーム解析部 2 6は、 入力された信号を解析し、 解析結果を制御部 1 7に出力する。 ソースパケッタイザ 2 9は、 入力された信号をパケッタイズし、 ECC符号化部 3 0に供給する。 ECC符号化部 3 0には、 制御部 1 7が出力する デ一タベースも供給されている。
ECC 符号化部 3 0は、 入力に誤り訂正符号を付加し、 符号化し、 変調部 3 1 に出力する。 変調部 3 1は、 ECC 符号化部 3 0から入力されたデータを変調し, 書き込み部 3 2に出力する。 書き込み部 3 2は、 変調部 3 1から入力されたデ一 夕を記録媒体 1 0に書き込む処理を実行する。
制御部 1 7は、 各種のデータを記憶する記憶部 1 7 Aを有しており、 上述した フォーマットを管理し、 データの記録媒体 1 0に対する記録または再生のために、 各部を制御する。
制御部 1 7にはまた、 ドライブ 4 1が接続されており、 磁気ディスク 5 1、 光 ディスク 5 2、 光磁気ディスク 5 3、 または半導体メモリ 5 4などがドライブさ れる。
なお、 光ディスク 5 2は、 記録媒体 1 0と兼用することも可能である。
次に記録時の基本的動作について、 動画像記録再生装置 1自身が、 入力オーデ ィォビデオ信号を符号化して記録する場合を例として説明する。
記録部 6 2の端子 2 1と端子 2 2からは、 それぞれビデオ信号とオーディオ信 号が入力される。 ビデオ信号は、 ビデオ解析部 2 4と AVエンコーダ 2 3へ入力 される。 また、 オーディオ信号もまた AVエンコーダ 2 3へ入力される。 AVェ ンコーダ 2 3は、 入力ビデオ信号とオーディオ信号を符号化し、 符号化ビデオス トリーム (V)、 符号化オーディオストリーム (A)、 およびシステム情報 (S)をマル チプレクサ 2 5に出力する。
符号化ビデオストリーム (V)は、 例えば MPEG2 ビデオストリームであり、 符 号化オーディォス卜リーム (A)は、 例えば MPEG1 オーディォストリームやドル ビー AC3 (商標) オーディオストリーム等である。 システム情報 (S)は、 ビデオ オーディオの符号化情報 (符号化ピクチャやオーディオフレームのバイトサイズ、 ピクチャ符号化タイプ等) や AV同期等の時間情報である。
マルチプレクサ 2 5は、 入力ストリームを入力システム情報に基づいて多重化 して、 多重化ストリームを出力する。 多重化ストリームは、 例えば、 MPEG2 ト ランスポートストリームや MPEG2 プログラムストリームである。 多重化スト リームは、 多重化ストリーム解析部 2 6およびソースバケツタイザ 2 9に入力さ れる。 ソースバケツタイザ 2 9は、 入力多重化ストリームを、 記録媒体 1 0のァ プリケーシヨンフォーマツトに従って、 ソースバケツトから構成される AVスト リームに符号化する。 AVストリームは、 ECC (誤り訂正) 符号化部 3 0で誤り 訂正符号が付加され、 変調部 3 1で変調処理されて、 書き込み部 3 2へ入力され る。 書き込み部 3 2は、 制御部 1 7から指示される制御信号に基づいて、 記録媒 体 1 0へ AVストリームファイルを記録する。
次に、 例えば、 図示せぬディジタルインタフェースまたはディジタル TVチュ ーナから入力されるディジタル TV放送等のトランスポートストリームを記録す る場合を説明する。
端子 3 3からはトランスポートストリームが入力される。 入力トランスポート ストリームの記録方法は、 2通りあり、 それらは、 トランスペアレントに記録す る方法と記録ビットレートを下げるなどの目的のために再エンコードをして記録 する方法である。 記録方法の指示情報は、 ユーザイン夕一フェースとしての端子 2 0から制御部 1 7へ入力され、 制御部 1 7が記録方法を制御する。
入力トランスポートストリ一ムをトランスペアレントに記録する場合、 トラン スポ一トストリ一ムは、 多重化ストリーム解析部 2 6およびソースバケツタイザ 2 9に入力される。 これ以後、 記録媒体 1 0へ AVストリームが記録されるまで の処理は、 上述の入力オーディオ信号とビデオ信号を符号化して記録する場合と 同じである。
入力トランスポ一トストリ一ムを再ェンコ一ドして記録する場合、 入カトラン スポートストリームは、 デマルチプレクサ 1 5へ入力される。 デマルチプレクサ 1 5は、 ビデオストリーム (V)を AVデコーダ 1 6へ入力する。 AVデコーダ 1 6 は、 ビデオストリームを復号し、 再生ビデオ信号を AVエンコーダ 2 3へ入力す る。 AVエンコーダ 2 3は、 入力ビデオを符号化し、 符号化ビデオストリーム (V) をマルチプレクサ 2 5へ入力する。
一方、 デマルチプレクサ 1 5から出力されるオーディオストリーム (A)とシス テム情報 (S)は、 ダイレクトにマルチプレクサ 2 5へ入力される。 マルチプレク サ 2 5は、 入力ストリームを、 入力システム情報に基づいて多重化して、 多重化 ストリームを出力する。 これ以後、 記録媒体 1 0へ AVストリームが記録される までの処理は、 上述の入力オーディオビデオ信号を符号化して記録する場合と同 じである。
この動画像記録再生装置 1は、 AVストリームファイルを記録すると共に、 そ のファイルに関係するアプリケーションデータベース情報もまた記録する。 アブ リケーシヨンデータベース情報は、 制御部 1 7により作成される。 制御部 1 7へ の入力情報は、 ビデオ解析部 2 4からの動画像の特徴情報、 多重化ストリーム解 析部 2 6からの AVストリームの特徴情報、 およびユーザィン夕フエ一スとして の端子 2 0から入力されるユーザの指示情報である。
ビデオ解析部 2 4からの動画像の特徴情報は、 動画像記録再生装置 1自身がビ デォ信号を符号化する場合において、 動画像記録再生装置 1により生成されるも のである。 ビデオ解析部 2 4は、 入力ビデオ信号の内容を解析し、 入力動画像信 号の中の特徴的なマーク点の画像に関係する情報を生成する。 この情報は、 例え ば、 入力ビデオ信号の中のプログラムの開始点、 シ一ンチェンジ点、 CMのスタ ート ·エンド点などの特徴的なマーク点の画像の指示情報であり、 また、 これに は、 その画像のサムネールも含まれる。 これらの画像の指示情報は、 制御部 1 7 を介して、 マルチプレクサ 2 5へ入力される。
マルチプレクサ 2 5は、 制御部 1 7から指示されるマーク点の画像の符号化ピ クチャを多重化した時に、 その符号化ピクチャの AVストリーム上でのァドレス 情報を制御部 1 7に返す。 制御部 1 7は、 特徴的な画像の種類と、 その符号化ピ クチャの AVストリーム上でのァドレス情報を関連付けて記憶する。
多重化ストリーム解析部 2 6からの AVストリームの特徴情報は、 記録される AVストリームの符号化情報に関係する情報であり、 これらは動画像記録再生装 置 1により生成される。 例えば、 AVストリームの中における I ピクチャのタイ ムスタンプとアドレス情報、 STC の不連続情報、 プログラム内容の変化情報、 ァライバルタイムとァドレス情報、 などが含まれる。
AVストリーム内の I ピクチャのタイムスタンプとァドレス情報は、 上述の E P— mapにストアされるデータとなる。 AVストリーム内の STCの不連続情報は、 上述の Sequencelnfo にストアされるデ一夕となる。 AV ストリーム内のプログ ラム内容の変化情報は、 Programlnfo にストアされるデータとなる。 また、 AV ストリーム内のァライバルタイムとアドレス情報は、 上述の TU— map にストア される。
また、 多重化ストリーム解析部 2 6は、 端子 3 3から入力されるトランスポー トストリームをトランスペアレントに記録する場合、 AV ストリームの中の特徴 的なマーク点の画像を検出し、 その種類とアドレス情報を生成する。 この情報は、 ClipMarkにストァされるデータとなる。
多重化ストリーム解析部 2 6からの AVストリ—ムの特徴情報は、 AVストリ —ムのデータベース(Clip Information)にストアされるものである。
端子 2 0からのユーザの指示情報には、 AV ストリームの中のお好みの再生区 間の指定情報, その再生区間の内容を説明するキャラクタ一文字、 ユーザがお好 みのシーンにセッ卜するブックマ一クゃリジユーム点の AVストリームの中の夕 ィムスタンプなどが含まれる。 これらのユーザの指示情報は、 PlayList のデ一 夕ベースにストァされるものである。
制御部 1 7は、 前記入力情報に基づいて、 AVストリームのデータベース (Cli p Information) , PlayList のデータべ一ス、 記録媒体 1 0の記録内容の管理情 報 (info.dvr)、 およびサムネール情報を作成する。 これらのデータベース情報は、 AVストリームと同様にして、 ECC (誤り訂正) 符号化部 3 0、 変調部 3 1で処 理されて、 書き込み部 3 2へ入力される。 書き込み部 3 2は、 制御部 1 7から指 示される制御信号に基づいて、 このデータベース情報を、 記録媒体 1 0へ、 アブ リケーシヨンデータベース情報として記録する。
次に、 再生時の基本的な動作について説明する。
記録媒体 1 0には、 AV ストリームファイルとアプリケ一ションデ一夕ベース 情報が記録されている。
はじめに制御部 1 7は、 再生部 6 1の読み出し部 1 1に対して、 アプリケーシ ヨンデ一夕べ一ス情報を読み出すように指示する。 そして、 読み出し部 1 1は、 記録媒体 1 0からアプリケーションデータべ一ス情報を読み出し、 そのデータべ ース情報は、 復調部 1 2 , ECC (誤り訂正) 復号部 1 3の処理を経て、 制御部 1 7へ入力される。
制御部 1 7は、 アプリケーションデータべ一スに基づいて、 記録媒体 1 0に記 録されている PlayList の一覧を、 端子 2 0のユーザインターフェースへ出力す る。 ュ一ザは、 PlayListの一覧から再生したい PlayListを選択し、 再生を指定 された PlayListが制御部 1 7へ入力される。 制御部 1 7は、 その PlayListの再 生に必要な AVストリームファイルの読み出しを読み出し部 1 1に指示する。 そ して、 読み出し部 1 1は、 記録媒体 1 0からその AV ストリームを読み出し、 A Vストリ一ムは復調部 1 2 , ECC 復号部 1 3の処理を経て、 ソース ·デバケツ タイザ 1 4へ入力される。
ソース ·デパケッタイザ 1 4は、 記録媒体のアプリケ一ションフォ一マツトの AV ストリームを、 デマルチプレクサ 1 5へ入力できるストリームに変換する。 デマルチプレクサ 1 5は、 制御部 1 7により指定された AVストリームの再生区 間 (Playltem)を構成するビデオス卜リーム (V)、 オーディォストリ一ム (A)、 およ びシステム情報 (S)を AVデコーダ 1 6へ入力する。 AVデコーダ 1 6は、 ビデオ ストリームとオーディォストリ一ムを復号し、 再生ビデオ信号と再生オーディォ 信号を、 それぞれ端子 1 8と端子 1 9から出力する。
ュ一ザによって選択された EP— mapタイプの PlayListをある時間から途中再 生する場合、 制御部 1 7は、 指定された時間にもっとも近い PTS を持つ I ピク チヤのアドレスからデ一夕を読み出すように読み出し部 1 1へ指示する。
また、 ユーザによって選択された TU— mapタイプの PlayListをある時間から 途中再生する場合、 制御部 1 7は、 指定された時間にもっとも近いァライバル夕 ィムのソースパケットのアドレスからデータを読み出すように読み出し部 1 1へ 指示する。
さらに、 CliD Information の中の ClipMark にストアされている番組の頭出 し点やシーンチェンジ点の中から、 ユーザがあるマークを選択した時 (例えば、 この選択動作は、 ClipMark にストアされている番組の頭出し点やシーンチェン ジ点のサムネール画像リストをユーザインタフエ一スに表示して、 ュ一ザが、 そ の中からある画像を選択することにより行われる) 、 制御部 1 7は、 Clip Infor mation の内容に基づいて、 記録媒体 1 0からの AVストリームの読み出し位置 を決定し、 その AVストリームの読み出しを読み出し部 1 1へ指示する。
すなわち、 ユーザが選択した画像がストアされている AVストリーム上でのァ ドレスに最も近いァドレスにある Iピクチャからのデ一夕を読み出すように読み 出し部 1 1へ指示が出される。 読み出し部 1 1は、 指定されたアドレスからデー 夕を読み出し、 読み出されたデータは、 復調部 1 2, ECC 復号部 1 3の処理を 経て、 デマルチプレクサ 1 5へ入力され、 AV デコーダ 1 6で復号されて、 マー ク点のピクチャのァドレスで示される AVデータが再生される。
次に、 ユーザが、 AVストリームの編集をする場合を説明する。
ユーザが、 記録媒体 1 0に記録されている AVストリームの再生区間を指定し て新しい再生経路を作成したい場合、 ユーザインタフェースの端子 2 0から、 再 生区間のイン点とアウト点の情報が制御部 1 7へ入力される。 制御部 1 7は、 A Vストリームの再生区間 (Playltem)をグループ化したもの (PlayList) のデータ ベースを作成する。
ユーザが、 記録媒体 1 0に記録されている AVストリームの一部を消去したい 場合、 ユーザインタフェースの端子 2 0から、 消去区間の情報が制御部 1 7へ入 力される。 制御部 1 7は、 必要な AVストリーム部分だけを参照するように Pla yList のデータベースを変更する。 また、 AV ストリームの不必要なストリーム 部分を消去するように、 書き込み部 3 2に指示する。 また、 Clip AVストリーム の変化に基づいて、 その Clip Information の内容を変更する。
ユーザが、 記録媒体 1 0に記録されている AVストリームの再生区間を指定し て新しい再生経路を作成したい場合であり、 かつそれぞれの再生区間をシームレ スに接続したい場合の動作を説明する。 この場合、 制御部 1 7は、 AVス卜リー ムの再生区間 (Playltem)をグループ化したもの (PlayList) のデータべ一スを作 成し、 さらに、 再生区間の接続点付近のビデオストリームの部分的な再ェンコ一 ドと再多重化が必要になる。
まず、 ュ一ザイン夕フェースとしての端子 2 0から、 再生区間のイン点のピク チヤとアウト点のピクチャの情報が制御部 1 7へ入力される。 制御部 1 7は、 読 み出し部 1 1に、 イン点のピクチャとアウト点のピクチャを再生するために必要 なデ一夕の読み出しを指示する。 そして、 読み出し部 1 1は、 記録媒体 1 0から そのデータを読み出し、 そのデ一夕は、 復調部 1 2, ECC 復号部 1 3、 ソ一 ス ·デバケツタイザ 1 4を経て、 デマルチプレクサ 1 5へ入力される。 制御部 1 7は、 デマルチプレクサ 1 5へ入力されたストリームを解析して、 ビデオスト リームの再エンコード方法 (picture— coding— type の変更、 再エンコードする符 号化ビット量の割り当て) と再多重化方法を決定して、 その方法を AVェンコ一 ダ 2 3とマルチプレクサ 2 5へ供給する。
次に、 デマルチプレクサ 1 5は、 入力されたストリームをビデオストリーム (V)、 オーディオストリーム (A)、 およびシステム情報 (S)に分離する。 ビデオス 卜リームは、 「AV デコーダ 1 6へ入力されるデ一夕」 と、 「マルチプレクサ 2 5へ直接入力されるデータ」 がある。 前者のデータは、 再エンコードするために 必要なデ一夕であり、 これは AVデコーダ 1 6で復号され、 復号されたピクチャ は、 AVエンコーダ 2 3で再エンコードされて、 ビデオストリームになる。 後者 のデータは、 再エンコードをしないで、 オリジナルのストリームからコピ一され るデータである。 オーディオストリームとシステム情報は、 マルチプレクサ 2 5 に直接入力される。
マルチプレクサ 2 5は、 制御部 1 7から入力された情報に基づいて、 入力スト リームを多重化し、 多重化ストリームを出力する。 多重化ストリームは、 ECC (誤り訂正) 符号化部 3 0、 変調部 3 1で処理されて、 書き込み部 3 2へ入力さ れる。 書き込み部 3 2は、 制御部 1 7から指示される制御信号に基づいて、 記録 媒体 1 0へ AVストリームを記録する。 次に、 図 5 4は、 AV ストリームを Clip をして新しく記録するときの、 Clip AVストリームファイルと、 それに関連する Clip Information ファイルの、 動 画像記録再生装置 1の記録動作のフ口一チャートを示す。
ステップ S 1 1で、 制御部 1 7は、 端子 2 1および 2 2から入力される AV入 力をエンコードして得たトランスポートストリーム、 または端子 3 3のデイジ夕 ルインタフェースから入力されるトランスポートストリームをファイル化して、 Clip AVストリームファイルを作成して記録する。
ステップ S 1 2で、 制御部 1 7は上記 AVストリームファイルについての Clip Info (図 8 ) を作成する。
ステップ S 1 3で、 制御部 1 7は上記 AVストリームファイルについての Seq uencelnfo (図 1 3 ) を作成する。
ステップ S 1 4で、 制御部 1 7は上記 AVストリームファイルについての Pro gramlnfo (図 1 5 ) を作成する。
ステップ S 1 5で、 制御部 1 7は上記 AVストリームファイルについての CPI (EP-mapまたは TU-map) (図 2 4、 図 2 5および図 2 6 ) を作成する。
ステップ S 1 6で、 制御部 1 7は上記 AVストリームファイルについての Clip Markを作成する。
ステップ S 1 7で、 制御部 1 7は上記 Cliplnfo, Sequencelnfo, Programlnfo, CPI, および ClipMarkがストァされた Clip Informationファイル (図 8 ) を 記録する。
なお、 ここでは各処理を時系列に説明したが、 ステップ S 1 1からステップ S 1 6は、 実際には同時に動作するものである。
次に、 AV ストリームを Clip をして新しく記録するときの、 Sequencelnfo (図 1 3 ) の作成の動作例を、 図 5 5のフローチャートを用いて説明する。 この 処理は、 図 4 4の多重化ストリーム解析部 2 6で行われる。
ステップ S 3 1において、 制御部 1 7は最初のトランスポートパケットを AT C シーケンスの開始点とする。 すなわち、 SPN ATC startが設定される。 また、 このとき、 atc_idと stc_idも設定される。
ステップ S 3 2において、 多重化ストリーム解析部 2 6は AVストリームに含 まれるアクセスユニット (例えば、 ピクチャやオーディオフレーム) の PTS を 解析する。
ステップ S 3 3において、 多重化ストリーム解析部 2 6は PCRパケットが受 信されたかどうかを調べる。 ステップ S 3 3において、 No の場合はステップ S 3 2へ戻り、 Yesの場合はステップ S 3 4へ進む。
ステツプ S 3 4において、 多重化ストリ一ム解析部 2 6は STC の不連続が検 出されたか否かを調べる。 NO の場合は、 ステップ S 3 2へ戻る。 YES の場合 は、 ステップ S 3 5へ進む。 なお、 記録開始後、 最初に受信された PCRパケッ 卜の場合は、 必ずステップ S 3 5へ進む。
ステップ S 3 5において、 多重化ストリーム解析部 2 6は、 新しい STC の最 初の PCRを伝送するトランスポートパケットの番号 (ァドレス)を取得する。 ステップ S 3 6において、 制御部 1 7は上記バケツト番号を STC シーケンス の開始するソースパケット番号として取得する。 すなわち、 SPN—STC— start が 設定される。 また、 ことのき、 新たな stc— idが設定される。
ステップ S 3 7において、 制御部 1 7は STCシーケンスの表示開始の PTSと 表示終了の PTSを取得し、 それぞれ、 presentation— start— time、 または presen tation_end— timeに設定し、 それらに基づいて、 Sequencelnfo (図 1 3 ) を作成 する。
ステップ S 3 8において、 制御部 1 7は最後のトランスポートパケットが入力 終了したかどうかを調べる。 No の場合は、 ステップ S 3 2へ戻り、 Yes の場合 は処理を終了する。
Programlnfo (図 1 5 ) の作成の動作例を図 5 6のフローチャートを用いて説 明する。 この処理は図 4 4の多重化ストリーム解析部 2 6で行われる。
ステップ S 5 1において、 多重化ストリーム解析部 2 6は PSI/SI を含むトラ ンスポートパケットが受信されたかどうかを調べる。 ここで、 PSI/SI のトラン スポートバケツトは、 具体的には、 PAT, PMT, SIT のパケットである。 SIT は、 DVB 規格で規定されているパーシャルトランスポートストリームのサ一ビス情 報が記述されているトランスポートパケットである。 ステップ S 5 1において、 Noの場合はステップ S 5 1へ戻り、 Yesの場合はステップ S 5 2へ進む。
ステップ S 5 2において、 多重化ストリーム解析部 2 6は、 PSI/SI の内容が 変わつたかを調べる。 すなわち、 PAT,PMT,SIT のそれぞれの内容が、 以前に受 信したそれぞれの内容と比べて変化したかどうかが調べられる。 内容が変化して いない場合は、 ステップ S 5 1へ戻る。 内容が変化した場合は、 ステップ S 5 3 へ進む。 なお、 記録開始後、 最初に受信された PSI/SI の場合は、 必ずステップ S 5 3へ進む。
ステップ S 5 3において、 制御部 1 7は新しい PSI/SI を伝送するトランスポ ―トパケットの番号 (ァドレス)とその内容を取得する。
ステップ S 5 4において、 制御部 1 7は Program-sequence の情報を作成し、 Programlnfo (図 1 5 ) を作成する。
ステップ S 5 5において、 制御部 1 7は最後のトランスポートパケットが入力 終了したかどうかを調べる。 No の場合は、 ステップ S 5 1へ戻り、 Yes の場合 は処理を終了する。
次に EP_map (図 2 4 ) の作成の動作例を、 図 5 7のフローチヤ一トを用い て説明する。 この処理は図 4 4の多重化ストリーム解析部 2 6で行われる。
ステップ S 7 1で多重化ストリーム解析部 2 6は、 記録する AVプログラムの ビデオの PID をセットする。 トランスポートストリームの中に複数のビデオが 含まれている場合は、 それぞれのビデオ PIDがセットされる。
ステップ S 7 2で多重化ストリーム解析部 2 6は、 ビデオのトランスポートパ ケットを受信する。
ステップ S 7 3で多重化ストリーム解析部 2 6は、 トランスポートパケットの ペイロード (バケツトヘッダ一に続くデータ部) が PES バケツ卜の第 1バイト 目から開始しているかを調べる (PES パケットは、 MPEG2 で規定されている パケットであり、 エレメンタリーストリームをパケット化するものである) 。 こ れは、 トランスポートパケットヘッダにある "payload_unit— start— indicator"の 値を調べることによりわかり、 この値が 1 である場合、 トランスポートバケツ 卜のペイロードが PES パケッ卜の第 1バイト目から開始する。 ステップ S 7 3 で Noの場合は、 ステップ S 7 2へ戻り、 Yesの場合は、 ステップ S 7 4へ進む。 ステップ S 7 4で多重化ストリーム解析部 2 6は、 PES パケッ卜のペイ口一 ドが、 MPEG ビデオの sequence— header— code(32 ビット長で" 0x000001B3"の 符号)の第 1バイト目から開始しているかを調べる。 ステップ S 7 4で No の場 合は、 ステップ S 7 2へ戻り、 Yesの場合は、 ステップ S 7 5へ進む。
ステップ S 7 5へ進んだ場合、 制御部 1 7は現在のトランスポートパケットを エントリーポイントとする。
ステップ S 7 6で制御部 1 7は、 上記パケットのバケツト番号と上記 sequenc e_header_code から開始する I ピクチャの PTS とそのエントリ一ポイントが属 するビデオの PIDを取得し、 EP_mapを作成する。
ステップ S 7 7で、 多重化ストリーム解析部 2 6は、 現在のパケットが最後に 入力されるトランスポ一トバケツトであるかどうかを判定する。 最後のバケツト でない場合、 ステップ S 7 2へ戻る。 最後のパケットである場合、 処理を終了す る。
図 5 8は、 Real PlayList の作成方法を説明するフローチャートを示す。 図 4 4の動画像記録再生装置 1のブロック図を参照しながら説明する。
ステップ S 9 1で、 制御部 1 7は Clip AVストリームを記録する。
ステップ S 9 2で、 制御部 1 7は上記 Clip の全ての再生可能範囲をカバーす る Playltem (図 3 6 ) からなる PlayListO (図 3 1 ) を作成する。 Clip の中に STC不連続点があり、 PlayListOが 2つ以上の Playltemからなる場合は、 制御 部 1 7は Playltem間の connection— conditionもまた決定する。
ステップ S 9 3で、 制御部 1 7は UIAppInfoPlayListOを作成する。 UIAppIn foPlavListOは PlayListの内容をユーザーへ説明するための情報を含む。 本実施 の形態ではその説明を省略する。
ステップ S 9 4で、 制御部 1 7は PlayListMarkを作成する (本実施の形態で はその説明を省略) 。
ステップ S 9 5で、 制御部 1 7は MakersPrivateData を作成する (本実施の 形態ではその説明を省略) 。
ステップ S 9 6で、 制御部 1 7は Real PlayListファイルを記録する。
このようにして、 新規に Clip AVストリームを記録する毎に、 1つの Real P layListフアイルが作られる。
図 5 9は、 Virtual PlayListの作成方法を説明するフローチャートである。 ステップ S 1 1 1で、 ユーザ一インターフェースを通して、 ディスク (記録媒 体 1 0 ) に記録されている 1つの Real PlayList の再生が指定される。 そして、 その Real PlayList の再生範囲の中から、 ユーザーインターフェースを通して、 IN点と OUT点で示される再生区間が指定される。
ステップ S 1 1 2で、 制御部 1 7はユーザ一による再生範囲の指定操作がすべ て終了したか調べる。 ユーザーが上記指示した再生区間に続けて再生する区間を 選ぶ場合はステップ S 1 1 1へ戻る。
ステップ S 1 1 2でユーザーによる再生範囲の指定操作がすべて終了したと判 定された場合は、 ステップ S 1 1 3へ進む。
ステップ S 1 1 3で、 連続して再生される 2つの再生区間の間の接続状態 (con nection— condition)を、 ユーザ一がユーザ一イン夕フエ一スを通して決定するか、 または制御部 1 7が決定する。
ステップ S 1 1 4で、 ユーザーインタフェースを通して、 ユーザーがサブパス (アフレコ用オーディオ)情報を指定する。 ユーザーがサブパスを作成しない場合 はこのステップの処理はスルーされる。 サブパス情報は、 PlayListの中の SubP layltem にストアされる情報であるが、 本発明の趣旨に必要ないので説明を省略 する。
ステップ S 1 1 5で、 制御部 1 7はユーザ一が指定した再生範囲情報、 および connection— conditionに基づいて、 PlayListO (図 2 8 ) を作成する。
ステップ S 1 1 6で、 制御部 1 7は UIAppInfoPlayListOを作成する。 UIApp InfoPlayListOは PlayListの内容をユーザ一へ説明するための情報を含む。 本実 施の形態ではその説明を省略する。
ステップ S 1 1 7で、 制御部 1 7は PlayListMarkを作成する (本実施の形態 ではその説明を省略) 。
ステップ S 1 1 8で、 制御部 1 7は MakersPrivateData を作成する (本実施 の形態ではその説明を省略) 。
ステップ S 1 1 9で、 制御部 1 7は Virtual PlayList ファイルを記録媒体 1 0に記録する。
このようにして、 記録媒体 1 0に記録されている Real PlayList の再生範囲 の中から、 ユーザ一が見たい再生区間を選択してその再生区間をグループ化した もの毎に、 1つの Virtual PlayListファイルが作られる。
図 6 0は PlayListの再生方法を説明するフローチャートである。
ステップ S 1 3 1で、 制御部 1 7は Info.dvr, Clip Information file, PlayLis t file およびサムネールファイルの情報を取得し、 ディスク (記録媒体 1 0 ) に 記録されている PlayListの一覧を示す GUI画面を作成し、 ユーザーイン夕フエ ースを通して、 GUIに表示する。
ステップ S 1 3 2で、 制御部 1 7はそれぞれの PlayListの UIAppInfoPlayLi st()に基づいて、 PlayListを説明する情報を GUI画面に提示する。
ステップ S 1 3 3で、 ユーザーインタフェースを通して、 GUI画面上からュ 一ザ一が 1つの PlayListの再生を指示する。
ステップ S 1 3 4で、 制御部 1 7は現在の Playltemの STC-idと IN— timeの PTS から、 IN_time より時間的に前で最も近いエントリーポイントのあるソ一 スパケット番号を取得する。
ステップ S 1 3 5で、 制御部 1 7は上記エントリーポイントのあるソースパケ ット番号から AVストリームのデータを読み出し、 デコーダへ供給する。 ステップ S 1 3 6で、 現在の Playltemの時間的に前の Playltemがあった場 合は、 制御部 1 7は、 前の Playltem と現在の Playltem との表示の接続処理を connection— condition ίこ ¾:つ" "し xつ。
ステップ S 1 3 7で、 制御部 1 7は、 AVデコーダ 1 6に IN_timeの PTSの ピクチャから表示を開始するように指示する。
ステップ S 1 3 8で、 制御部 1 7は、 AVデコーダ 1 6に AVストリ一ムのデ コードを続けるように指示する。
ステップ S 1 3 9で、 制御部 1 7は、 現在表示の画像が、 OUTjime の PTS の画像か否かを調べる。 No の場合は、 ステップ S 1 4 0へ進む。 ステップ S 1 4 0で現在の画像を表示して、 ステップ S 1 3 8へ戻る。 ステップ S 1 3 9で現 在表示の画像が OUT_timeの PTSの画像の場合はステツプ S 1 4 1へ進む。 ステップ S 1 4 1で、 制御部 1 7は、 現在の Playltemが PlayList の中で最 後の Playltem かを調べる。 No の場合はステップ S 1 3 4へ戻る。 Yes の場合 は、 PlayListの再生を終了する。
このようなシンタクス、 データ構造、 規則に基づく事により、 記録媒体 1 0に 記録されているデ一夕の内容、 再生情報などを適切に管理することができ、 もつ て、 ユーザが再生時に適切に記録媒体に記録されているデータの内容を確認した り、 所望のデータを簡便に再生できるようにすることができる。
次に、 本発明の AVストリームファイルとデータベースファイルが記録されて いる記録媒体から、 ディジタルバス経由で、 別の記録媒体へ AVストリームファ ィルとデータベースファイルをファイルコピーする方法を説明する。
まず、 本方法の目的を説明するために、 AV ス卜リームとそのデ一夕ベースを 共にデ一夕転送する場合と、 AVストリームだけをデータ転送する場合の違いを 説明する。
図 6 1、 図 6 2は、 AVストリームとそのデ一夕ベースを共にデ一夕転送する 場合を示す。 一方、 図 6 3、 図 6 4は、 AVストリームだけをデータ転送する場 合を示す。 コピ一元の記録媒体 (例えば、 後述する図 7 1の記録媒体 1 0 ) には、 Clip と PlayList が記録されている。 説明を簡単化するために、 いま、 1個の Clip (Clip Information file と Clip AV stream file) を使用している PlayListフ アイルがコピー元の記録媒体に記録されているとする。
図 6 1は、 当該 PlayListと Clipのファイルを、 コピー元 (図 7 1の再生装置 2 ) からコピー先 (図 7 1の記録装置 3 ) へ、 例えば、 IEEE1394 のディジタ ルバス (図 7 1のディジ夕ルバス 6 0 ) を経由して、 Asynchronous (ァシンク 口ナス) 転送によって、 ファイル転送する場合を示す。 この場合、 コピ一された Clip AV stream fileの各ソースパケットの TP— extra Jieader の ATS (ァライ バルタイムスタンプ) は、 コピー元と同じであり、 また、 コピーされた Clip AV stream fileに対応する Clip Information fileと PlayListファイルもコピー先 へコピーされる。
また、 図 6 2は、 PlayList file と Clip Information fileのファイルを、 コピ —元 (図 7 1の再生装置 2 ) からコピー先 (図 7 1の記録装置 3 ) へ、 IEEE13 94 のディジタルバス (図 7 1のディジタルバス 6 0 ) を経由して、 Asynchrono us (ァシンクロナス) 転送によって、 ファイル転送し、 AV ストリームを、 コピ 一元からコピ一先へ、 Isochronous (ァイソクロナス) 転送によって、 リアル夕 ィム転送 (ストリーム転送) する場合を示す。
この場合、 コピー元 (図 7 1の再生装置 2 ) は、 Clip Information file に対 応する Clip AV stream fileをディジタルバス (図 7 1のディジタルバス 6 0 ) へ出力する時に、 各ソースパケットのァライバルタイムスタンプに従って、 トラ ンスポートパケットを出力する (図 7の再生モデルを参照) 。 各ソースパケット の TP— extra— header(ATS)は、 コピー先 (図 7 1の記録装置 3 ) で新たに付加さ れる (コピー先で新たに Clip AV stream fileが作られる) 。 また、 コピーされ た Clip AV stream fileに対応する Clip Information fileと PlayListファイル (デ一夕ベースファイル) もコピー先へコピーされる。
図 6 1または図 6 2の場合、 コピー元の PlayListと Clipの内容を全て、 コピ 一先へ転送することができるので、 有効である。 すなわち、 コピ一元の PlayLis tにセットされていた再生指定情報, UIAppInfoPlayList, PlayListMark サム ネール情報の内容など、 また、 コピー元の Clipにセットされていた CPI, Sequ encelnfo, Programlnfo, ClipMark, サムネール情報の内容などを、 コピー先へ 転送することができるので、 有効である。
一方、 図 6 3、 図 6 4は、 AVストリームだけをデータ転送する場合を示す。 図 6 3は、 AV ストリームだけを、 コピー元 (図 7 1の再生装置 2 ) からコピ —先 (図 7 1の記録装置 3 ) へ、 IEEE1394 のディジタルバス (図 7 1のディ ジタルバス 6 0 ) を経由して、 Isochronous (ァイソクロナス) 転送によって、 リアルタイム転送 (ストリーム転送) する場合を示す。 この場合、 コピ一元は、 PlayListが指定する再生区間の AVストリ一ムをディジタルバスへ出力する時に、 各ソースパケットのァライバルタイムスタンプに従って、 トランスポ一トバケツ トを出力する (図 7の再生モデルを参照) 。 コピー先の側から見ると、 ディジタ ル放送のトランスポートストリームを記録する場合と同じ状態であり、 入力され た AVストリームが新たに、 Clipとして記録される。 すなわち、 各ソースバケツ 卜の TP一 extraJieader(ATS)は、 コピー先で新たに付加される。 また、 当該 Clip の再生範囲をカバーする Real PlayList ファイルが新たに作られる (デ一夕べ ースファイルは、 コピー元で新たに作られ、 コピー元のものとは異なる) 。
また、 図 6 4は、 コピー先の記録装置 (図 7 1の記録装置 3 ) が D V Rフォ一 マットに準拠したものでない場合に、 AV ストリームだけをリアルタイムにデ一 夕を再生する速度でデータ転送する場合を説明する図である。
この場合も、 図 6 3の場合と同様にして、 AV ストリームを、 コピー元からコ ピー先へ、 IEEE 1394の Isochronous (ァイソクロナス) 転送によって、 リアル タイム転送 (ストリーム転送) する。 コピ一先では、 その記録装置 (図 7 1の記 録装置 3 ) のフォーマットを用いて、 入力された AVストリームを記録する。 例 えば、 コピー先の記録装置が、 D— V H S (商標) の場合は、 そのフォ一マット で AVストリームを記録する。 このように、 コピー元の D V Rフォーマットに準 拠した再生装置 (図 7 1の再生装置 2の制御部 1 7 ) が、 コピー先の記録装置 (図 7 1の記録装置 3の制御部 1 7— 2 ) と相互認証を行い、 前記記録装置が D V Rフォーマツトに準拠していないことが確認された場合には、 前記再生装置 (図 7 1の再生装置 2の制御部 1 7 ) は、 AVストリームをリアルタイム転送す るように制御される。
図 6 3または図 6 4の場合、 コピー元の PlayListと Clipの内容を全て、 コピ —先へ転送することができないので、 問題がある。 すなわち、 コピー元の PlayL ist にセットされていた再生指定情報, UIAppInfoPlayList, PlayListMark, サ ムネール情報の内容など、 また、 コピー元の Clip にセットされていた CPI, Se quencelnfo, Programlnfo, ClipMark, サムネール情報の内容などを、 コピー先 へ転送することができない。 一方、 図 6 1または図 6 2の場合は、 コピー元の P layListと Clipの内容を全て、 コピー先へ転送することができる。
コピー先の記録装置が、 本実施の形態で説明している D V Rフォーマツトに準 拠している場合、 図 6 1と図 6 2のどちらでも使用することができる。
図 6 1の方法は、 AVストリームをファイル転送するので、 リアルタイムにデ 一夕を再生する速度でデータ転送する場合よりも高速にデ一夕を転送することが できる。 しかし、 コピー先の記録装置で入力されるデータを、 リアルタイムにデ コードして再生することは難しい。
一方、 図 6 2の方法は、 AVストリームをリアルタイムにデータを再生する速 度でデータ転送するので、 コピー先の記録装置で入力されるデータをリアルタイ ムにデコードして再生することができる。 しかし、 AVストリームのコピーにか かる時間は、 リアルタイムにデ一夕を再生する場合と同じ時間が必要である。 図 6 1と図 6 2の方法は、 上記のように目的別に切り替えて使用するものである。 図 6 1と図 6 2の例は、 PlayListがーつの Clipの再生範囲の全体をカバ一し ている場合であるが、 図 4 6で説明したように、 PlayList が指定する再生範囲 は、 一つの Clip AVストリームの全体をカバーするとは限らない。 これは、 Re al PlayListおよび Virtual PlayListのどちらの場合も同様である。 PlayListを コピー先へ転送するときは、 PlayListの再生に必要な AVストリーム部分とそれ が参照する Clip のデータだけを、 コピー先へ転送するようにした方が良い。 す なわち、 図 6 5の例のように、 コピー元 (図 7 2の再生装置 2 ) から、 コピー先 (図 7 1の記録装置 3 ) へ、 PlayList とそれに必要な Clipの部分だけをコピー する。 このようにすれば、 コピー先の記録媒体 (図 7 1の記録装置 3の記録媒体 1 0 - 2 ) 上に必要な空き記録容量を小さくできる。
コピー元 (出力側の再生装置)から、 コピー先 (入力側の記録装置)へ、 PlayList をコピーする場合に、 その PlayListの再生に必要な Clip AVストリームの部分 を決める方法について説明する。
図 6 6は、 ある PlayListが、 オリジナルの AVストリームファイルの部分的 な再生範囲を指示している時に、 その PlayList の再生に必要なストリーム部分 を示す。
当該 PlayListは、 ォリジナル AVストリ一ム上の IN— timeと OUT— timeを指 しているとする。 この場合、 PlayList の再生に必要なストリーム部分は、 図に 示すようにソースパケット番号の X番目から Y番目までである。 以下の説明では、 この X点と Y点を決める方法の例を説明する。
図 6 7は、 AV ストリームの内容を解析することをしないで、 IN 点の前のデ —夕のコピー開始点 (X点) を決める方法を説明する図である。 PlayList はォ リジナル AVストリ一ム上の IN点を指す。 また、 その AVストリームの EP— ma p を図示する。 IN 点が指すピクチャをデコードするためには、 アドレス ISA2 から開始する Iピクチャが必要である。 また、 X点の後で、 ΡΑΤ,ΡΜΤおよび Ρ CRパケットが必要である。 SPN_EP— start=ISAlの PTSは ptslであり、 SPN _EP_start=ISA2の PTSは pts2である。 ptslと pts2のシステムタイムベース の時間差が 100 msec以上ならば、 アドレス ISA1と ISA2の間には PAT, PMT および PCR バケツ卜が存在する (少なくとも、 SESF, DVB, ATSC, ISDB の 場合はそうである) 。 したがって、 X点はアドレス ISA1の前に決められる。 そ して、 X点はァラインドュニットの境界でなければならない。 コピー元の再生装置は、 AV ストリームの内容を解析することをしないで、 X 点を EP— mapを使用して次のステップで決めることができる。
( S 1 ) システムタイムベース上で IN timeの PTSに最も近く、 かつそれより も過去の表示時刻の PTSの値を持つ SPN_EP— startを見つける。
( S 2 ) ステップ S 1で見つけた SPN—EP— startの PTSの値よりも少なくとも 100 msec過去の表示時刻の PTSの値を持つ SPN— EP_startを見つける。
( S 3 ) X点は、 ステップ S 2で見つけた SPN—EP— start よりも前に決められ る。 そして、 X点はァラインドユニットの境界でなければならない。
この方法は、 X点を決めるために AVストリームのデータを読み出し、 その内 容を解析することを必要としないので、 簡単である。 しかし、 X点より後の AV ストリームは、 その HayList の再生には不要なデ一夕を残してしまう場合があ る。 もし、 X点を決めるために AVストリームのデ一夕を読み出し、 その内容を 解析するならば、 その PlayList の再生には不要なデータをより効率良く除去で きる。
図 6 8は、 AV ストリームの内容を解析することをしないで、 OUT 点の後の データのコピー終了点 (Y点) を決める方法を説明する図である。 PlayList は オリジナル AVストリーム上の OUT点を指す。 また、 その AVストリームの EP —map を図示する。 SPN_EP— start=ISA4から開始するビデオシーケンスは次に 示すものであることを前提とする。
12 BO Bl P5. . .
ここで、 I,P,Bはそれぞれ I ピクチャ, Pピクチャそして B ピクチャを表す。 数字は表示順序を表す。 この処理において、 記録装置が AVストリームの内容を 解析しない場合、 動画像記録再生装置 1 (図 7 1の記録装置 3 ) は、 OUT— time の PTS が参照するところのピクチャの情報 (ピクチャコーディングタイプ、 テ ンポラル'レファレンスなど) がわからない。 OUT—timeの PTSはピクチャ B0 または B1を参照しているかもしれない (コピー元の再生装置 (図 7 1の再生装 置 2 ) が AVストリームの内容を解析しない場合、 このことはわからない) 、 こ の場合、 ピクチャ B0,B1をデコードするためには 12が必要である。 12の PTS は OUT timeの PTSよりも大きい (OUT— time < pts4, ここで pts4は 12の P TSである) 。 12の PTSは OUT— timeの PTSよりも大きいが、 BO, B1のため に 12が必要である。
したがって、 Y点は図に示すアドレス ISA5 の後ろに決められる。 ISA5 は、 EP— map の中で ISA4の直後にある SPN_EP— startの値である。 Y点はまたァ ラインドュニッ卜の境界でなければならない。
コピー元の再生装置 (図 7 1の再生装置 2 ) は、 AVストリームの内容を解析 することをしないで、 Y点を EP— map を使用して次のステップで決めることが できる。
( S 1 ) システムタイムベース上で OUT timeの PTSに最も近く、 かつそれよ りも未来の表示時刻の PTSの値を持つ SPN—EP— startを見つける。
( S 2 ) ステップ S 1で見つけた SPN—EP— start の直後にある SPN— EP_start を見つける。
( S 3 ) Y 点は、 ステップ S 2で見つけた SPN_EP—start よりも後ろに決めら れる。 そして、 Y点はァラインドユニットの境界でなければならない。
この方法は、 Y点を決めるために AVストリームのデータを読み出し、 その内 容を解析することを必要としないので、 簡単である。 しかし、 Y点より前の AV ストリームは、 その PlayList の再生には不要なデータを残してしまう場合があ る。 もし、 Y点を決めるために AVストリームのデータを読み出し、 その内容を 解析するならば、 その PlayList の再生には不要なデ一夕をより効率良く除去で さる。
次に、 前記のように、 コピー元から、 コピー先へ、 PlayList をコピーする場 合に、 その PlayListの再生に必要な Clip AVストリームを作成した場合の、 C1 ip Informationファイルと PlayListの関係について説明する。
図 6 9は、 コピー元から、 コピー先へ、 PlayList をコピーする場合の例であ り、 その PlavListの再生に必要な Clip AVストリームを作成したときの、 Clip と PlayListの関係を説明する図である。 ここで、 Clipの CPIは EP— mapであ るとする。 オリジナルの Clipは 1個の ATC'sequence と 3個の STC-sequence を持つとする。 この ATC-sequenceについての offset一 STC— id[0]はゼロである。 そして、 Clip の中で、 stc— id=0の STC-sequenceは、 Playltemlに使われてお り、 stc— id=lである STC-sequenceは、 Playltem2と Playltem3に使われてお り、 stc_id=2である STC'sequenceは、 Playltem4に使われているとする。
今、 この PlayList を別の記録媒体にコピーしたとする。 すなわち、 これによ り、 図 6 9に示したように、 この PlayListの再生に必要な Clipの部分から成る Clip が作られる。 このように、 コピー元において、 1個の Clip AVストリ一ム から取り出された一つ以上のストリーム部分は、 コピー先でも 1個の Clip AV ストリームにコンパインされる。 そして、 新たに作られた Clipは 4個の ATC-s equenceを持ち、 それぞれの ATC_sequenceは 1個の STC'sequenceを持つ。 stc— id=0であった STC-sequenceが含まれる ATC-sequenceの offset— STC— id [0]はゼロにセットされる。 また、 stc_id=lであった STC-sequenceは 2個の ST C-sequence に分かれる。 1番目の ATC-sequence についての offset一 STC—id[0] はゼ口にセットされ、 2番目の ATOsequenceについての offset一 STC— id[l]は 1 にセットされる。 すなわち、 1番目の ATC-sequenceの中で最後の STC-sequen ceの stc— id と 2番目の ATC-sequenceの中で最初の STC'sequenceの stc— id は、 同じ値で 1になる。 また、 stc— id=2であった STC-sequenceが含まれる AT C-sequenceの offset— STC— id[0]は 2にセットされる。
これにより、 コピーする PlayListの Playlteml, Playltem2, Playltem3と P layltem4の ref_to_STC_idの値を変更する必要がない。 ある PlayListを別の記 録媒体にコピーする場合、 この PlayListの再生に必要な Clipの部分から成る C lipを作成したときに、 PlayListの内容については何も変更しなくても良い。
このように、 Clip AVストリームの中に ATC の不連続点を作ることができる ので、 PlayListの再生に必要な Clip のストリームデータを部分的に取り出す場 合に、 Clip ファイルを分割する必要がない。 さらに、 ATC シーケンス毎に、 そ の上にある最初の STC シーケンスの STC-idに対する offset— STC— idを用いる ことにより、 PlayListの再生に必要な Clip の部分から成る Clip を作成したと きに、 PlayListの内容については何も変更しなくても良い。
次に、 前記のように、 Clip を部分的にコピーする場合の Clipの変更方法につ いて説明する。 図 7 O A乃至図 7 0 Dは、 Clip を部分的にコピーする場合の例 であり、 その時の Sequencelnfo, Programlnfo, CPI(EP— map)および ClipMark の変更方法を説明する図である。
図 7 0 Aに示す Clipが、 コピー元に記録されているとする。 この Clipは、 1 個の ATC-sequenceを持ち、 その上にそれぞれ 2個の STC'sequenceと progra m-sequenceがある。 1番目の STC-sequence と program -sequenceの開始 ,ド レスは同じであり、 それは Clip AVストリーム上で 0のソースバケツト番号で ある。 2番目の STC-sequenceと program-sequenceの開始ァドレスは同じであ り、 それは Clip AVストリーム上で Bなるソースバケツト番号である。
今、 図 7 0 Aのソースパケット番号 A (A< B ) から始まる付影部分のストリ ームデータをコピーするとする。 この付影部分は、 AVストリームの IN—timeか ら OUT—time の再生区間に必要なストリーム部分である。 コピー先に転送され る Clipを図 7 0 Bに示す。 コピー先に転送される Clipは、 1個の ATC-sequenc eを持ち、 その上にそれぞれ 2個の STC-sequenceと program-sequenceがある。 1番目の STC-sequenceと program-sequenceの開始アドレスは同じであり、 そ れは Clip AV ストリーム上で 0 (A— A) のソースパケット番号である。 2番 目の STC-sequenceと program-sequenceの開始ァドレスは同じであり、 それは Clip AVストリーム上で (B— A) なるソースパケット番号である。
図 7 0 Cは、 図 7 0 Aに示す Clipの Clip Information fileの内容を示す。 上 記の説明のように、
SPN_ATC_start[0] = 0
SPN_STC_start[0] = 0, SPN_STC_start[l] = B
SPN— program— sequence— start [0〗 = 0, SPN一 program— sequence start [l J = B
である。
また、 この Clip Information file が、 図示するような EP_mapと ClipMark を持つとする。 この中で、 図 7 O Aの付影部分の Clipが使用する EP_mapと C lipMarkのデータ部分は次の範囲である。
EP_mapにおいては、
IN—time<pts、xa),
pts(xz)<OUT_time の PTS の値を持つエントリーポイントのデータが、 図 7 0 Aの付影部分の Clipに必要である。
ClipMarkにおいては、
IN一 time<pts(F),
pts(Q)<OUT_time
の PTSの値を持つマークのデータが、 図 7 O Aの付影部分の Clipに必要である。 図 7 0 Dは、 図 7 0 Bに示す Clipの Clip Information fileの内容を示す。 上 記の説明のように、
SPN_ATC_start[0] = 0
SPN一 STC— start[0] = 0, SPN_STC_start[l] = B-A
SPN一 program— sequence— start [0] = 0, SPN一 program— sequence— starUl] = B-A
である。
また、 EP— mapのデータは、 図 7 0 Cにおいて斜線部分の Clipが使用する E P_map のデータを元にして作成される。 すなわち、 エントリーポイントの PTS の値は同じであり、 ソースポケット番号の値は、 コピー元の Clip のコピーの開 始ソースパケット番号 Aが差し引かれる。 また、 ClipMark のデータは、 図 7 0 Cにおいて付影部分の Clipが使用する ClipMarkのデータがそのままコピーさ れる。
図 7 1は、 コピー元 (出力側) の再生装置 2から、 コピー先 (入力側) の記録 装置 3へ、 AV ストリームとそれに関係するデータベースを転送する場合、 およ び、 AV ストリームだけをデータ転送する場合の構成を示す。 図中で、 図 4 4と 同じブロック番号がついているものは同じものであることを示す。 また、 記録装 置 3の記録媒体 1 0— 2と制御部 1 7— 2は、 それぞれ記録媒体 1 0と制御部 1 7と同じ働きをするものである。
はじめに、 AVストリームとそれに関係するデータベースを共に転送する場合 を説明する。
まず、 再生装置 2の記録媒体 1 0に記録されている所望の PlayList を記録装 置 3の記録媒体 1 0— 2へコピーすることを指示する情報が、 図示しないユーザ —インタフェースを通して、 コピー制御コマンドに乗って、 再生装置 2へ入力さ れる。 このコマンドは、 ディジタルバスインタフェース 5 0、 バスコントローラ 5 2を経由して、 制御部 1 7へ入力される。
制御部 1 Ίは、 上記 PlayList の再生に必要な AVストリ一ムのストリーム部 分を決定し、 その AVストリームデ一夕を記録媒体 1 0から読み出すように、 読 み出し部 1 1に指示を出す (図 6 6、 図 6 7、 図 6 8参照) 。 また、 制御部 1 7 は、 上記 PlayList に関係するデータべ一スファイル (PlayListファイル、 Clip Information file とサムネールファイル) を記録媒体 1 0から読み出すように、 読み出し部 1 1に指示を出す。
制御部 1 7は、 復調部 1 2、 E C C復号部 1 3を経て読み出された前記 AVス トリームデ一夕を、 スィッチ 61 の接点 A側を通して、 AV ストリ一ムファイル として、 ディジタルバスインタフェース 5 0へ供給するように指示する (図 6 1 の場合) 。 ここで、 1個の Clip AVストリームファイルから取り出された一つ 以上のストリーム部分は、 1 個の Clip AVストリームファイルにコンバインさ れる (図 6 9参照) 。
または、 制御部 1 7は、 復調部 1 2、 E C C復号部 1 3を経て読み出された前 記 AVストリームデータを、 スィツチ 61の接点 I側を通して、 ソ一スデバケツ タイザ 14へ入力しても良い (図 6 2の場合) 。 この場合、 ソースデパケッタイ ザ 14 は、 ァライバルタイムスタンプに従って、 トランスポ一トストリ一ムをデ イジタルバスインタフェース 5 0へ供給する。
一方、 記録媒体 1 0から読み出された AVストリームデ一夕に対応するデータ ベースファイルが、 復調部 1 2、 E C C復号部 1 3を経て、 メモリ 5 1へ入力さ れる。 制御部 1 7は、 メモリ 5 1にあるデ一夕を元にして、 ディジタルバスイン 夕フェース 5 0から出力される上記の AVストリームファイルの再生に必要なデ —タベース (Clip Information ファイル, PlayList ファイル) を作成する (図 6 9、 図 7 0 A乃至図 7 0 D参照) 。 また、 制御部 1 7は、 上記の AVストリー ムファイルに対応する Clipとコピーする PlayListファイルが使用するサムネー ルファイルを作成する (後述の図 7 2のステップ S 1 7 2参照) 。
そして、 制御部 1 7は、 上記新たに作成されたデータベースファイル (Clip I nformation ファイル, PlayList フアイルとサムネールファィル) をメモリ 5 1 からディジタルバスィンタフェース 5 0へ供給するように指示する。
バスコントローラ 5 2は、 ディジタルインタフェース 5 0からのファイル出力 を制御する。 制御部 1 7は、 バスコントローラ 5 2に対して、 ディジタルパスィ ンタフェース 5 0から、 AVス卜リームとそれに関係するデータべ一スを出力す るように指示する。
前記 AVストリームとそれに関係するデータベースは、 ディジタルバス 6 0を 経由して、 コピー先の記録装置 3へ入力される。
コピー先の記録装置 3のバスコントローラ 5 7は、 ディジタルバスインタフエ ース 5 5からのファイル入力を制御する。 また、 バスコントロ一ラ 5 2とパスコ ン卜ローラ 5 7は、 ファイルのコピー制御コマンドを交換して、 デ一夕伝送 Z受 信のタイミングを制御する。
記録装置 3の制御部 1 7— 2は、 コピー元からディジタルバスインタフェース 5 5へ、 AV ストリームファイルとして入力される場合、 スィッチ 6 2の接点 A 側を通して、 E C C符号化部 3 0、 変調部 3 1、 書き込み部 3 2の処理を経て、 記録媒体 1 0 — 2に記録するように指示する。 または、 制御部 1 7— 2は、 コピー元からディジタルバスイン夕フェース 5 5 へ、 トランスポートストリームとして入力される場合、 スィッチ 6 2の接点 I側 を通して、 ソースバケツタイザ 29へ入力する。 ソースパケッタイザ 29 は、 ト ランスポートパケットをソースパケット化して出力する。 制御部 1 7— 2は、 ソ ースパケットから成る AVストリームを、 E C C符号化部 3 0, 変調部 3 1、 書 き込み部 3 2の処理を経て、 記録媒体 1 0— 2に記録するように指示する。
また、 制御部 1 7— 2は、 ディジタルバスインターフェース 5 5へ入力される デ—夕ベースファイルを、 メモリ 5 6へ書きこむように指示する。
また、 制御部 1 7— 2は、 記録媒体 1 0— 2に記録されているデータべ一スフ アイル (Info.dvrファイルとサムネールファイル) を、 読み出し部 1 1、 復調部 1 2 , E C C復号部 1 3の処理を経て、 メモリ 5 6へ読み出すように指示する。 そして、 制御部 1 7— 2は、 メモリ 5 6にある Info.dvr ファイルとサムネー ルファイルを更新する。 具体的には、 コピー先にある Info.dvrファイルの Table OfPlayListに、 新たに記録する ayListファイル名を追加し、 また、 コピ一先 にあるサムネールファイルに新たに記録するサムネールを追加する (後述の図 7 4のステップ 2 2 4, S 2 2 5参照) 。
制御部 1 7— 2は、 メモリ 5 6にあるデータベースファイルを読み出して、 E C C符号化部 3 0 , 変調部 3 1、 書き込み部 3 2の処理を経て、 記録媒体 1 0— 2に記録するように指示する。
このようにして、 再生装置 2から、 記録装置 3へ、 AV ストリームとそれに関 係するデータべ一スをデータ転送してコピ一する場合の処理を行う。
次に、 再生装置 2がコピ一先へ AVストリームだけを転送する場合を説明する。 これは、 コピ一先の記録装置 3が、 D V Rフォ一マットに準拠していない場合に おける、 再生装置 2のトランスポートストリームの再生動作と考えられる。
制御部 1 7は、 上記 PlayList の再生に必要な AVストリ一ムのストリーム部 分を決定し、 その AVストリームデータを記録媒体 1 0から読み出すように、 読 み出し部 1 1に指示を出す。 制御部 1 7は、 復調部 1 2、 £〇(復号部1 3を経 て読み出された前記 AVストリ一ムデータを、 スィツチ 61の接点 I側を通して、 ソ一スデバケツタイザ 14へ入力する。 ソースデパケッタイザ 14 は、 ァライバ ルタイムスタンプに従って、 トランスポートバケツ卜をディジタルバスィン夕フ エース 5 0へ供給する。 ディジタルバスインタフェース 5 0は、 トランスポート パケットをァイソクロナス転送する。
また、 記録装置 3へ AVストリームだけが転送される場合を説明する。 これは、 コピー元の再生装置 2が、 D V Rフォーマツ卜に準拠していない場合における、 記録装置 3のトランスポートストリームの記録動作と考えられる。
記録装置 3の制御部 1 7— 2は、 ディジタルバスィン夕一フェース 5 5へ入力 されるトランスポートストリームを、 スィッチ 6 2の接点 I側を通して、 ソース バケツタイザ 29へ入力する。 ソ一スバケツタイザ 29 は、 トランスポ一トパケ ットをソースパケット化して出力する。 制御部 1 7— 2は、 ソースパケットから 成る AVストリームを、 E C C符号化部 3 0, 変調部 3 1、 書き込み部 3 2の処 理を経て、 記録媒体 1 0— 2に記録するように指示する。
また、 スィッチ 6 2の接点 I側を通して、 トランスポートストリームは多重化 ストリーム解析部 26へ入力される。 ここでの処理の内容は、 前述の図 4 4で説 明したとおりである。 制御部 1 7— 2 は、 解析部 26での解析結果に基づいて、 データベースファイルを作成する。 制御部 1 7一 2 は、 デ一タベースファイルを
E C C符号化部 3 0, 変調部 3 1、 書き込み部 3 2の処理を経て、 記録媒体 1 0 一 2に記録するように指示する。
このようにして、 再生装置 2から AVストリームだけをデータ転送する場合の 処理、 また、 再生装置 3へ AVストリームだけがデータ転送される場合の処理を 行う。
図 7 2は、 コピー元 (出力側の再生装置 2 )から、 コピー先 (入力側の記録装置 3 )へ、 PlayList をコピーする場合の、 コピー元の制御部 1 7が行う処理を説明 するフローチヤ一トである。
ステップ S 1 7 0で、 AV ストリームとそれに関係するデータベースをデータ 転送してコピーする場合と、 AV ストリームだけをデ一夕転送してコピーする場 合かを決める。 前者の場合は、 ステップ S 1 7 1へ進む。 後者の場合は、 ステツ プ S 1 7 5へ進む。
ステップ S 1 7 1で、 Clipについての次の処理を行う。
·当該 PlayListの再生に必要な Clip' AVストリームの部分を決定する (図 6 6 、 図 6 7、 図 6 8参照) 。
•上記決定した AVストリーム部分が使用する Clip Information ファイルを作 成する (図 7 O A乃至図 7 0 D参照) 。
ステップ S 1 7 2で、 サムネールファイルについての次の処理を行う。
·当該 PlayListが使用するメニュ一サムネールを含むファイルを作成する。
•当該 PlayListおよび上記決定した AVストリーム部分が、 使用するマークサ ムネールを含むファイルを作成する。
ステップ S 1 7 3で、 AVストリームファイルの転送の処理を行う。
'上記 Clip の処理で決定したストリーム部分の AVストリームデータをコピー 先へ転送する (図 6 9参照) 。
ステップ S 1 7 4で、 デ一夕ベースファイルの転送の処理を行う。
•上記 PlayListファイルをコピ一先へ転送する。
•上記 Clipの処理で作成した Clip Informationファイルをコピー先へ転送する c •上記ステップ S 1 7 2で作成したサムネールファイルをコピ一先へ転送する。 ステップ S 1 7 0で、 AV ストリームだけをデータ転送してコピ一すると判定 され、 ステップ S 1 7 5へ進む場合、 図 6 0に示す PlayList の再生を説明する フローチャートで読み出される AVストリームデータ(S 1 3 5で読み出す AVス トリ一ムデ一夕)を、 トランスポートストリーム化して、 コピー先へ転送する。 図 7 3は、 上記ステップ S 1 7 1の Clip についての処理の詳細を説明するフ 口一チャートである (図 7 0 A乃至図 7 0 D参照) 。
ステップ S 2 0 1で、 PlayListが、 当該 Clipの中で使用する再生区間の表示 開始時刻および表示終了時刻を取得する。 ステップ S 2 0 2で、 上記時間区間に対応する Clip AVストリーム上のコピ —開始パケット (アドレス) とコピー終了パケット (アドレス) を CPI に基づ いて決定する。
ステップ S 2 0 3で、 CPIについての次の処理を行う。
·コピーする区間の AVストリーム部分が使用する CPI エントリ一を取得する c
• CPIのエントリーポイントのソースバケツト番号の値を、 コピーする AVスト リーム部分の中でのソースバケツト番号の値へ変更する。
ステップ S 2 0 4で、 Sequencelnfoについての次の処理を行う。
•コピ一する区間の AVストリ一ム部分における ATC-sequenceの開始パケット 番号を更新する。
•コピーする区間の AVストリーム部分における STC-sequenceの開始バケツト 番号を更新する。
•コピ一する区間の AVストリーム部分における ATCシーケンス上にある STC- sequence に対する STC-idの値が変わらないように offset_STC_id を更新する。 ステップ S 2 0 5で、 Programlnfo についての次の処理を行う。 コピ一する 区間の AVストリーム部分における program-sequenceの開始バケツト番号を更 新する。
ステップ S 2 0 6で、 ClipMark についての次の処理を行う。 コピーする区間 の AVストリ一ム部分が使用する Markェントリーを取得する。
ステップ S 2 0 7で、 ファイル作成についての次の処理を行う。
•コピーする区間の AVストリーム部分をコンバインして Clip AV stream file にする。
• Clip Information fileを作成 I"る。
図 7 4は、 コピー元 (出力側の再生装置 2 )から、 コピー先 (入力側の記録装置 3 )へ、 PlayList をコピーする場合の、 コピー先が行う処理を説明するフローチ ャ一トである。
ステップ S 2 2 1で、 AV ストリームとそれに関係するデータベースをデータ 転送してコピーする場合と、 AVストリームだけをデータ転送してコピーする場 合かを決める。 前者の場合は、 ステップ S 2 2 2へ進む。 後者の場合は、 ステツ プ S 2 2 6へ進む。
ステップ S 2 2 2で、 AVストリームファイルの管理の処理を行う。
入力された AVストリームデ一夕を Clip AVストリームファイルとして、 ST REAMディレクトリへ記録する。
ステップ S 2 2 3で、 データべ一スファイルの管理についての処理を行う。 -入力された PlayListファイルを PLAYLISTディレクトリへ記録する。
•入力された Clip Information ファイルを CLIPINFディレクトリへ記録する。 ステップ S 2 2 4で、 Info.dvrについての処理を行う。
入力された PlayListファイルをコピー先にある Info.dvrの TableOfPlayListに 追加する。
ステップ S 2 2 5で、 サムネールファイルについての処理を行う。
入力されたサムネールファイルにエントリーされているサムネールデータを、 コ ピー先にあるサムネールファイルへ追加する。
ステップ S 2 2 1で、 AVストリームだけをデ一夕転送してコピ一すると判定 され、 ステップ S 2 2 6へ進む場合、 図 5 8に示す Real PlayList の作成を説 明するフ口一チャートによって、 コピ一先に入力されるトランスポートストリ一 ムを記録して、 Real PlayListを作成する。
このようなシンタクス、 データ構造、 規則に基づく事により、 記録媒体 1 0に 記録されている AVストリームファイルとそのデータベースファイルの内容を適 切に管理することができ、 もって、 ユーザが所望の AVストリームファイルとそ のデ一夕べ一スフアイルを別の記録媒体に簡便にコピーできるようにすることが できる。
また、 記録媒体 1 0に記録されている AVストリームファイルの部分的な再生 区間を別の記録媒体にコピーする場合に、 当該再生区間の再生に必要な AVスト リームファイルを簡便に作成することができ、 当該再生区間の再生に必要なデ一 夕ベースファイルを簡便に作成ことができるので、 もって、 ユーザが、 所望の A Vストリームファイルの部分的な再生区間の再生に必要な AVストリームフアイ ルとデータべ一スフアイルを作成することができ、 それらフアイルを別の記録媒 体に簡便にコピーできるようにすることができる。
なお、 図 7 1の説明では、 コピー先からコピ一元へのファイル転送に用いる伝 送路が、 IEEE1394 等のディジタルバスの場合を説明したが、 これに限らず、 図 7 5に示すように、 放送波等の無線波を伝送路としてもよい。 また、 コピー制 御のコマンドは、 ファイル転送用の伝送路と同じである必要はない (図 7 5参 照) 。
また、 AV ストリームファイルとそのデータベースファイルが別々の記録媒体 から、 コピ一先に転送されてもよい。 図 7 6に示すように、 AV ストリームファ ィルが記録されているサーバーとデータベースファイルが記録されているサーバ —が別々に用意されており、 記録装置 3からのコピー制御コマンドに対して、 A Vストリームファイルサ一バーとデータべ一スファイルサーバーから、 ファイル が記録装置 3へ転送されるようにしても良い。
なお、 本実施の形態は、 多重化ストリームとして MPEG2 トランスポ一トス トリームを例にして説明しているが、 これに限らず、 DSS トランスポ一トスト リームや MPEG2 プログラムストリームについても適用することが可能である。 上述した一連の処理は、 ハードウェアにより実行させることもできるが、 ソフ トウエアにより実行させることもできる。 この場合、 そのソフトウェアを構成す るプログラムが、 専用のハードウェアに組み込まれているコンピュータ、 または、 各種のプログラムをィンストールすることで、 各種の機能を実行することが可能 な、 例えば汎用のパーソナルコンピュータなどに、 ネットワークや記録媒体から ィンストールされる。
この記録媒体は、 図 4 4に示すように、 装置本体とは別に、 ユーザにプロダラ ムを提供するために配布される、 プログラムが記録されている磁気ディスク 5 1 (フロッピディスクを含む) 、 光ディスク 5 2 (CD-ROM(Compact Disk-Read Only Memory),DVD(Digital Versatile Disk)を含む) 、 光磁気ディスク 5 3 (M D (Mini-Disk) を含む) 、 もしくは半導体メモリ 5 4などよりなるパッケ ージメディアにより構成されるだけでなく、 装置本体に予め組み込まれた状態で ユーザに提供される、 プログラムが記録されている ROMやハードディスクなど で構成される。
なお、 本明細書において、 記録媒体に記録されるプログラムを記述するステツ プは、 記載された順序に沿って時系列的に行われる処理はもちろん、 必ずしも時 系列的に処理されなくとも、 並列的あるいは個別に実行される処理をも含むもの である。
また、 本明細書において、 システムとは、 複数の装置により構成される装置全 体を表すものである。 産業上の利用可能性
以上のように、 本発明によれば、 シンタクス、 データ構造、 規則に基づくこと により、 記録媒体に記録されている AVストリームファイルとそのデータベース ファイルの内容を適切に管理することができ、 もって、 ユーザが所望の AVスト リームファイルとそのデータベースファイルを別の記録媒体に簡便にコピーでき るようにすることができる。
特に、 請求の範囲第 1項のデータ伝送装置、 請求の範囲第 1 3項のデ一夕伝送 方法、 請求の範囲第 1 4項の記録媒体のプログラム、 および請求の範囲第 1 5項 のプログラムによれば、 記録媒体に記録されている AVストリームファイルの部 分的な再生区間を別の記録媒体にコピーする場合に、 当該再生区間の再生に必要 な AVストリームファイルを簡便に作成することができ、 当該再生区間の再生に 必要なデータベースファイルを簡便に作成ことができるので、 もって、 ユーザが、 所望の AVストリームファイルの部分的な再生区間の再生に必要な AVストリー ムファイルとデータべ一スファイルを作成することができ、 それらファイルを別 の記録媒体に簡便にコピ一できるようにすることができる。 また、 コピ一元から、 コピー先へ、 PlayList とそれに必要な Clipの部分だけをコピーするので、 コピ 一先の記録媒体上に必要な空き記録容量を小さくできる。
請求の範囲第 4項乃至第 7項、 および第 9項のデータ伝送装置によれば、 コピ 一元の PlayListと Clipの内容を全て、 コピ一先へ転送することができるので、 有効である。 すなわち、 コピー元の PlayList にセットされていた再生指定情報, UIAppInfoPlayList, PlayListMark, サムネール情報の内容など、 また、 コピ 一元の Clip にセットされていた CPI, Sequencelnfo, Programlnfo, ClipMark, サムネール情報の内容などを、 コピー先へ転送することができるので、 有効であ る。
請求の範囲第 1 0項のデータ伝送装置によれば、 AVストリームをファイル転 送するので、 リアルタイムにデータを再生する速度でデータ転送する場合よりも 高速にデ一夕を転送することができる。
請求の範囲第 1 1項のデータ伝送装置によれば、 AVストリームをリアルタイ ムにデータを再生する速度でデ一夕転送するので、 コピー先の記録装置で入力さ れるデ一タをリアルタイムにデコ一ドして再生することができる。
請求の範囲第 1 2項と第 1 6項のデータ伝送装置、 請求の範囲第 1 7項のデー 夕伝送方法、 請求の範囲第 1 8項の記録媒体のプログラム、 および請求の範囲第 1 9項のプログラムによれば、 伝送先の装置が、 例えば、 D V Rフォーマットに 準拠したものである場合は、 上記請求の範囲第 1項の伝送装置の方法でデータ伝 送することができ、 コピー先の記録装置が D V Rフォーマットに準拠したもので ない場合は、 AVストリームだけをリアルタイムにデータを再生する速度でデー 夕転送するように、 処理を切り替えることができるので、 ユーザーの AVストリ 一ムのコピー操作の利便性を向上できる。
請求の範囲第 2 0項のデータ処理装置、 請求の範囲第 2 1項のデータ伝送方法、 請求の範囲第 2 2項の記録媒体のプログラム、 および請求の範囲第 2 3項のプロ グラムによれば、 入力された PlayList を適切に記録媒体上で管理することがで き、 もって、 ユーザが記録媒体にコピーされた PlavList の内容をわかりやすく 確認できる。
請求の範囲第 2 4項のデータ処理装置、 請求の範囲第 2 5項のデータ伝送方法、 請求の範囲第 2 6項の記録媒体のプログラム、 および請求の範囲第 2 7項のプロ グラムによれば入力されたサムネールを適切に記録媒体上で管理することができ、 もって、 ユーザが記録媒体にコピーされたサムネールの内容をわかりやすく確認 できる。

Claims

請求の範囲
1 . データストリームとその管理情報を記録媒体から読み出す読み出し部と、 前記デ一タストリームの中で、 指定された再生区間の再生に必要な部分データ ストリームに対応する部分管理情報を決定する制御部と、
前記部分デ一タストリ一ム、 および、 前記制御部により決定された部分管理情 報を伝送する伝送部と
を備えることを特徴とするデータ伝送装置。
2 . 前記伝送部は、 さらに前記部分管理情報を、 非同期伝送する
ことを特徴とする請求の範囲第 1項に記載のデータ伝送装置。
3 . 前記制御部は、 前記部分データストリームを非同期伝送するか、 または同 期伝送するかを選択する
ことを特徴とする請求の範囲第 1項に記載のデータ伝送装置。
4 . 前記デ一夕ストリームは、 AVストリ一ムであり、
前記管理情報は、
前記 AVストリーム中の符号化情報の不連続点のァドレス情報、
前記 AVストリーム中の時刻情報とアドレス情報を関連づける情報、 および 前記 AVストリーム中の特徴的な画像の時刻情報
を含む
ことを特徴とする請求の範囲第 1項に記載のデータ伝送装置。
5 . 前記管理情報は、 Clip Informationであり、
前記不連続点のアドレス情報は、 Sequencelnfoおよび Programlnfoであり、 前記時刻情報とアドレス情報を関連づける情報は、 CPIであり、
前記特徴的な画像の時刻情報は、 ClipMarkである
ことを特徴とする請求の範囲第 4項に記載のデ一夕伝送装置。
6 . 前記管理情報は、 前記 AVストリームの再生区間の指示情報である、 Play Listをさらに含む
ことを特徴とする請求の範囲第 5項に記載のデータ伝送装置。
7 . 前記伝送部は、 前記部分デ一夕ストリームとしての前記 AVデータストリ ームの再生区間の指示情報をさらに伝送する
ことを特徴とする請求の範囲第 4項に記載のデータ伝送装置。
8 . 前記伝送部は、 前記 AVストリームの再生区間の指示情報の内容を変更し ないで、 前記部分デ一夕ストリームとしての前記 AVデータストリームの再生区 間の指示情報として伝送する
ことを特徴とする請求の範囲第 7項に記載のデータ伝送装置。
9 . 前記伝送部は、 前記 AVストリームの再生区間の指示情報に関連付けられ たサムネール画像、 および、 前記部分管理情報データに含まれる AVストリーム 中の特徴的な画像の時刻情報に関連付けられたサムネール画像をさらに伝送する ことを特徴とする請求の範囲第 4項に記載のデータ伝送装置。
1 0 . 前記 AVストリームは、 トランスポートパケットとそのァライバルタイ ムスタンプから構成されるソースバケツトを単位とするデータ列であり、
前記部分データストリームとしての AVストリームは、 前記 AVストリームの ソースパケットのデ一夕列の部分である、
ことを特徴とする請求の範囲第 4項に記載のデータ伝送装置。
1 1 . 前記 AVストリームは、 トランスポートパケットとそのァライパルタイ ムスタンプから構成されるソースパケッ卜を単位とするデ一夕列であり、
前記部分データストリームとしての AVストリームは、 トランスポートバケツ トを単位とするトランスポ一トストリ一ムである
ことを特徴とする請求の範囲第 4項に記載のデータ伝送装置。
1 2 . 制御部は、 前記 AVストリームとその管理情報を共にデータ伝送するか、 または前記 AVストリームだけをリアルタイム転送するかを切り替える
ことを特徴とする請求の範囲第 4項に記載のデータ伝送装置。
1 3 . デ一タストリ一ムとその管理情報を記録媒体から読み出す読み出しステ ップと、
前記データストリームの中で、 指定された再生区間の再生に必要な部分データ ストリームに対応する部分管理情報を決定する決定:
前記部分デ一夕ストリーム、 および、 前記決定ステップの処理により決定され た管理情報を伝送する伝送ステップと
を含むことを特徴とするデータ伝送方法。
1 4 . データストリームとその管理情報を記録媒体から読み出す読み出しステ ップと、
前記データストリームの中で、 指定された再生区間の再生に必要な部分データ ストリームに対応する部分管理情報を決定する決定ステップと、
前記部分データストリーム、 および、 前記決定ステップの処理により決定され た管理情報を伝送する伝送ステップと
を含むことを特徴とするコンピュータが読み取り可能なプログラムが記録され ている記録媒体。
1 5 . デ一夕ストリームとその管理情報を記録媒体から読み出す読み出しステ ップと、
前記データストリームの中で、 指定された再生区間の再生に必要な部分データ ストリームに対応する部分管理情報を決定する決定ステップと、
前記部分データストリーム、 および、 前記決定ステップの処理により決定され た管理情報を伝送する伝送ステップと
をコンピュータに実行させるプログラム。
1 6 . AVストリームを伝送するデータ伝送装置において、
前記 AVストリ一ムの伝送先の装置と相互認証する認証部と、
前記認証部による前記相互認証の結果から、 前記伝送先の装置が所定のフォー マットに準拠していることが判った場合、 前記 AVストリ一ムとその管理情報を 共にデ一夕伝送するとともに、 前記認証部による前記相互認証の結果から、 前記 伝送先の装置が前記所定のフォーマツ卜に準拠していないことが判った場合、 前 記 AVストリームだけをリアルタイム伝送する伝送部と
を備えることを特徴とするデ一夕伝送装置。
1 7 . AVストリームを伝送するデータ伝送装置のデータ伝送方法において、 前記 AVストリームの伝送先の装置と相互認証する相互認証ステップと、 前記認証ステップの処理による前記相互認証の結果から、 前記伝送先の装置が 所定のフォーマツトに準拠していることが判った場合、 前記 AVストリームとそ の管理情報を共にデータ伝送するとともに、 前記認証ステップの処理による前記 相互認証の結果から、 前記伝送先の装置が前記所定のフォーマツ卜に準拠してい ないことが判つた場合、 前記 AVストリームだけをリアルタイム伝送する伝送ス テツプと
を含むことを特徴とするデ一タ伝送方法。
1 8 . AVストリームを伝送するデ一夕伝送装置のプログラムであって、 前記 AVストリームの伝送先の装置と相互認証する相互認証ステップと、 前記認証ステップの処理による前記相互認証の結果から、 前記伝送先の装置が 所定のフォ一マツトに準拠していることが判った場合、 前記 AVストリームとそ の管理情報を共にデ一夕伝送するとともに、 前記認証ステップの処理による前記 相互認証の結果から、 前記伝送先の装置が前記所定のフォーマツトに準拠してい ないことが判つた場合、 前記 AVストリームだけをリアルタイム伝送する伝送ス テツプと
を含むことを特徴とするコンピュータが読み取り可能なプログラムが記録され ている記録媒体。
1 9 . AVストリームを伝送するデータ伝送装置を制御するコンピュータに、 前記 AVストリームの伝送先の装置と相互認証する相互認証ステップと、 前記認証ステップの処理による前記相互認証の結果から、 前記伝送先の装置が 所定のフォーマットに準拠していることが判った場合、 前記 AVストリームとそ の管理情報を共にデータ伝送するとともに、 前記認証ステップの処理による前記 相互認証の結果から、 前記伝送先の装置が前記所定のフォーマツトに準拠してい ないことが判った場合、 前記 AVストリームだけをリアルタイム伝送する伝送ス テツプと を実行させるプログラム。
2 0 . AVストリームファイル、 および前記 AVストリームの再生方法を指定 する PlayList ファイルが記録されている記録媒体から再生された前記ファイル を受信するデータ処理装置において、
前記 PlayListフアイルを受信する受信部と、
前記 PlayListを記録するとともに、 記録されている PlayListを管理する管理 情報ファイルに、 前記新たに受信した PlayList ファイルに関する情報を追加す る記録部と
を備えることを特徴とするデータ処理装置。 .
2 1 . AVストリ一ムファイル、 および前記 AVストリームの再生方法を指定 する PlayList ファイルが記録されている記録媒体から再生された前記ファイル を受信するデータ処理装置のデータ処理方法において、
前記 PlayListファイルを受信する受信ステップと、
前記 PlayListを記録するとともに、 記録されている PlayListを管理する管理 情報ファイルに、 前記新たに受信した PlayList ファイルに関する情報を追加す る追加ステップと
を含むことを特徴とするデータ処理方法。
2 2 . AVストリームファイル、 および前記 AVストリームの再生方法を指定 する PlayList ファイルが記録されている記録媒体から再生された前記ファイル を受信するデータ処理装置のプログラムであって、
前記 PlayListファイルを受信する受信ステップと、
前記 PlayListを記録するとともに、 記録されている PlayListを管理する管理 情報ファイルに、 前記新たに受信した PlayList ファイルに関する情報を追加す る追加ステップと
を含むことを特徴とするコンピュータが読み取り可能なプログラムが記録され ている記録媒体。
2 3 . AVストリームファイル、 および前記 AVストリームの再生方法を指定 する PlayList ファイルが記録されている記録媒体から再生されたファイルを受 信するデータ処理装置を制御するコンピュータに、
前記 PlayListフアイルを受信する受信ステツプと、
前記 PlayListを記録するとともに、 記録されている PlayListを管理する管理 情報ファイルに、 前記新たに受信した PlayList ファイルに関する情報を追加す る追加ステップと
を実行させるプログラム。
2 4 . AVストリームファイル、 および前記 AVストリームのサムネールファ ィルが記録される記録媒体に対して、 データを入力するデータ処理装置において、 サムネールファイルを受信する受信部と、
記録されているサムネールファイルに、 受信したサムネールファイルのデ一夕 を追加する記録部と
を備えることを特徴とするデータ処理装置。
2 5 . AVストリームファイル、 および前記 AVストリームのサムネールファ ィルが記録される記録媒体に対して、 データを入力するデータ処理装置のデータ 処理方法において、
サムネールファイルを受信する受信ステップと、
記録されているサムネールファイルに、 受信したサムネールファイルのデータ を追加する追加ステップと
を含むことを特徴とするデータ処理方法。
2 6 . AVストリームファイル、 および前記 AVストリームのサムネールファ ィルが記録される記録媒体に対して、 データを入力するデータ処理装置のプログ ラムであって、
サムネールファイルを受信する受信ステップと、
記録されているサムネールファイルに、 受信したサムネールファイルのデ一夕 を追加する追加ステップと
を含むことを特徴とするコンピュータが読み取り可能なプログラムが記録され ている記録媒体。
2 7 . AVストリームファイル、 および前記 AVストリームのサムネールファ ィルが記録される記録媒体に対して、 データを入力するデータ処理装置を制御す るコンピュータに、
サムネールファイルを受信する受信ステップと、
記録されているサムネールファイルに、 受信したサムネールファイルのデ一夕 を追加する追加ステップと
を実行させるプログラム。
PCT/JP2002/006089 2001-06-22 2002-06-19 Data transmitting device and method WO2003001801A1 (en)

Priority Applications (7)

Application Number Priority Date Filing Date Title
AU2002311318A AU2002311318B2 (en) 2001-06-22 2002-06-19 Data transmitting device and method
EP02736163A EP1408686A4 (en) 2001-06-22 2002-06-19 DEVICE AND METHOD FOR DATA TRANSMISSION
US10/344,957 US7502543B2 (en) 2001-06-22 2002-06-19 Data transmission apparatus and data transmission method
KR1020037002349A KR100892012B1 (ko) 2001-06-22 2002-06-19 데이터 전송장치 및 방법
HK04104629A HK1062977A1 (en) 2001-06-22 2004-06-28 Data transmitting device and method
US11/894,186 US20080112685A1 (en) 2001-06-22 2007-08-20 Data transmission apparatus and data transmission method
US12/321,872 US20090148123A1 (en) 2001-06-22 2009-01-27 Data transmission apparatus and data transmission method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2001189744A JP4409792B2 (ja) 2001-06-22 2001-06-22 データ伝送装置および方法、記録媒体並びにプログラム
JP2001-189744 2001-06-22

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US11/894,186 Division US20080112685A1 (en) 2001-06-22 2007-08-20 Data transmission apparatus and data transmission method
US12/321,872 Division US20090148123A1 (en) 2001-06-22 2009-01-27 Data transmission apparatus and data transmission method

Publications (1)

Publication Number Publication Date
WO2003001801A1 true WO2003001801A1 (en) 2003-01-03

Family

ID=19028621

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2002/006089 WO2003001801A1 (en) 2001-06-22 2002-06-19 Data transmitting device and method

Country Status (10)

Country Link
US (3) US7502543B2 (ja)
EP (1) EP1408686A4 (ja)
JP (1) JP4409792B2 (ja)
KR (1) KR100892012B1 (ja)
CN (3) CN1874243A (ja)
AU (1) AU2002311318B2 (ja)
HK (1) HK1062977A1 (ja)
SG (1) SG152035A1 (ja)
TW (1) TWI255421B (ja)
WO (1) WO2003001801A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008130117A1 (en) * 2007-04-19 2008-10-30 Dreamer Co., Ltd. Method for providing data application based on disk media reproduction apparatus

Families Citing this family (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3932476B2 (ja) * 2001-06-28 2007-06-20 ソニー株式会社 情報提供システム、情報処理装置および方法、記録媒体、並びにプログラム
US20030099461A1 (en) * 2001-11-27 2003-05-29 Johnson Carolynn Rae Method and system for video recording compilation
KR20040000290A (ko) 2002-06-24 2004-01-03 엘지전자 주식회사 고밀도 광디스크의 멀티 경로 데이터 스트림 관리방법
CN100378854C (zh) 2002-06-24 2008-04-02 Lg电子株式会社 具有用于管理记录在其上面的多个再现路径视频数据的再现的数据结构的记录介质及其记录和再现方法及装置
CN101350215B (zh) 2002-06-24 2012-08-29 Lg电子株式会社 记录和再现用于视频数据的再现的数据结构的方法及装置
KR100631245B1 (ko) * 2002-09-05 2006-10-02 엘지전자 주식회사 슬라이드쇼의 재생을 관리하기 위한 데이터 구조를 갖는기록 매체, 그에 따른 기록 및 재생 방법 및 장치
JP4520853B2 (ja) * 2002-09-06 2010-08-11 エルジー エレクトロニクス インコーポレイティド 停止映像の再生を管理するためのデータ構造を有する記録媒体、それによる記録及び再生方法及び装置
JP4547260B2 (ja) * 2002-09-07 2010-09-22 エルジー エレクトロニクス インコーポレイティド クリップファイルからの停止映像再生を管理するためのデータ構造を有する記録媒体、それによる記録及び再生方法及び装置
EP1563503A4 (en) * 2002-11-20 2009-08-12 Lg Electronics Inc RECORDING MEDIUM HAVING A DATA STRUCTURE FOR REPRODUCING DATA RECORDED THEREIN AND RECORDING AND REPRODUCING METHODS AND APPARATUSES
EP1595253A4 (en) * 2003-01-20 2009-09-30 Lg Electronics Inc RECORDING MEDIUM COMPRISING A DATA STRUCTURE FOR MANAGING THE REPRODUCTION OF MEDIA RECORDED STILL IMAGES AND REPRODUCTIVE METHODS AND DEVICES
US8050538B2 (en) 2003-01-20 2011-11-01 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8145033B2 (en) * 2003-02-05 2012-03-27 Lg Electronics Inc. Recording medium having data structure for managing reproducton duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US7734154B2 (en) * 2003-02-14 2010-06-08 Lg Electronics Inc. Recording medium having data structure for managing reproduction duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8055117B2 (en) 2003-02-15 2011-11-08 Lg Electronics Inc. Recording medium having data structure for managing reproduction duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
KR100871527B1 (ko) 2003-02-19 2008-12-05 파나소닉 주식회사 기록매체, 재생장치, 기록방법, 컴퓨터 프로그램을 기록한 컴퓨터 판독가능한 기록매체, 재생방법
US8041179B2 (en) * 2003-02-24 2011-10-18 Lg Electronics Inc. Methods and apparatuses for reproducing and recording still picture and audio data and recording medium having data structure for managing reproduction of still picture and audio data
RU2369919C2 (ru) 2003-02-28 2009-10-10 Эл Джи Электроникс Инк. Носитель записи со структурой данных для управления воспроизведением в произвольном порядке/с перемешиванием записанных на нем видеоданных и способы и устройства записи и воспроизведения
KR100619009B1 (ko) 2003-03-28 2006-08-31 삼성전자주식회사 재생 장치
KR100954999B1 (ko) * 2003-06-02 2010-04-27 엘지전자 주식회사 고밀도 광디스크의 부가 콘텐츠 데이터 관리 및 재생방법
JP5133313B2 (ja) * 2003-10-10 2013-01-30 シャープ株式会社 再生装置、ビデオデータの再生方法、制御プログラム、及びコンテンツ記録媒体
CN101833968B (zh) * 2003-10-10 2012-06-27 夏普株式会社 内容再现装置和内容再现方法
JP3913215B2 (ja) * 2003-12-26 2007-05-09 キヤノン株式会社 記録再生装置、情報記録再生システム、情報記録再生方法、及びコンピュータ読み取り可能な記録媒体
CN101630523B (zh) 2004-02-23 2015-07-22 索尼株式会社 数据处理方法、数据处理装置
JP2005251313A (ja) * 2004-03-04 2005-09-15 Toshiba Corp 情報記録再生装置および情報記録再生方法
JP4779340B2 (ja) 2004-03-29 2011-09-28 ソニー株式会社 データ処理方法、データ処理装置、および情報記録媒体、並びにコンピュータ・プログラム
CN100499780C (zh) * 2004-03-29 2009-06-10 索尼株式会社 数据处理方法和设备
US20060167574A1 (en) * 2004-06-08 2006-07-27 Takashi Kawakami Data transmission system, data transmission method, and data transmission program
US7444664B2 (en) * 2004-07-27 2008-10-28 Microsoft Corp. Multi-view video format
JP2006073173A (ja) * 2004-08-03 2006-03-16 Canon Inc 情報記録再生装置及び方法
ATE511314T1 (de) * 2004-08-31 2011-06-15 Panasonic Corp Verfahren und vorrichtung zur kodierung bewegter bilder
JP4151640B2 (ja) * 2004-10-22 2008-09-17 ソニー株式会社 画像表示方法、画像表示プログラムおよび編集装置
KR20060066627A (ko) * 2004-12-13 2006-06-16 엘지전자 주식회사 컨텐트의 암호/해독을 위한 키를 기록하고 사용하는 방법및 장치와 그 방법에 의해 키가 기록되어 있는 기록매체
EP1825470A4 (en) * 2004-12-13 2009-04-29 Lg Electronics Inc METHOD AND DEVICE FOR WRITING AND USING KEYS FOR ENCRYPTING / DECALKING A CONTENT AND KEY WRITTEN BY THE PROCESS SAVING THE RECORDING MEDIUM
KR20060066626A (ko) * 2004-12-13 2006-06-16 엘지전자 주식회사 컨텐트의 암호/해독을 위한 키를 기록하고 사용하는 방법및 장치와 그 방법에 의해 키가 기록되어 있는 기록매체
AU2005317447A1 (en) * 2004-12-13 2006-06-22 Lg Electronics Inc. Method and apparatus for writing and using keys for encrypting/decrypting a content and a recording medium storing keys written by the method
WO2006080194A1 (ja) 2005-01-26 2006-08-03 Sharp Kabushiki Kaisha 情報記録再生装置及び情報記録媒体
EP1862008A2 (en) * 2005-02-18 2007-12-05 Koninklijke Philips Electronics N.V. Method of mutltiplexing auxiliary data in an audio/video stream
JP4634201B2 (ja) * 2005-04-01 2011-02-16 パナソニック株式会社 情報ネットワークシステムおよび情報機器
KR100657314B1 (ko) * 2005-05-04 2006-12-20 삼성전자주식회사 멀티미디어 스트리밍 송신 장치 및 방법
JPWO2006126679A1 (ja) 2005-05-27 2008-12-25 三洋電機株式会社 データ記録装置、及びデータ記録装置におけるデータファイルの送信方法
JP4244045B2 (ja) * 2005-09-08 2009-03-25 ソニー株式会社 記録装置および方法、並びにプログラム
US8018609B2 (en) * 2005-09-13 2011-09-13 Sony Corporation Information processing device, information recording medium manufacturing device, information recording medium, methods therefore, and computer program
US20070103558A1 (en) * 2005-11-04 2007-05-10 Microsoft Corporation Multi-view video delivery
JP2007179273A (ja) * 2005-12-27 2007-07-12 Sony Corp ファイル転送システム、ファイル記憶装置、ファイル記憶方法及びプログラム
JP4719053B2 (ja) * 2006-03-31 2011-07-06 株式会社東芝 エントリポイントを用いた再生方法およびこの方法を用いる記録再生装置
JP4779797B2 (ja) 2006-05-10 2011-09-28 ソニー株式会社 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
JP4513780B2 (ja) * 2006-05-10 2010-07-28 ソニー株式会社 情報処理装置及び情報処理方法、並びにコンピュータ・プログラム
JP4591405B2 (ja) 2006-05-10 2010-12-01 ソニー株式会社 情報処理装置及び情報処理方法、並びにコンピュータ・プログラム
KR100835528B1 (ko) * 2006-07-06 2008-06-04 호서대학교 산학협력단 구간정보를 이용한 멀티미디어 콘텐츠의 스트리밍 방법 및그 스트리밍 단말기
JP4656021B2 (ja) * 2006-08-10 2011-03-23 ソニー株式会社 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
KR101228114B1 (ko) * 2007-01-24 2013-02-01 삼성전자주식회사 Ts 프로그램 정보 편집 장치 및 방법, 그리고 이를이용한 ts 녹화 장치
JP2008294638A (ja) * 2007-05-23 2008-12-04 Sony Corp 伝送システム、記録装置、伝送方法、記録方法、およびプログラム
US8340507B2 (en) 2007-05-31 2012-12-25 Panasonic Corporation Recording medium, playback apparatus, recording method, program, and playback method
TW200910330A (en) * 2007-08-20 2009-03-01 Intervideo Digital Technology Corp Method and computer readable recording medium for building a play interface
JP5012537B2 (ja) * 2008-01-30 2012-08-29 パナソニック株式会社 情報記録再生装置、方法、及びプログラム
JP2009259307A (ja) * 2008-04-14 2009-11-05 Panasonic Corp 半導体集積回路、情報記録装置、及び、情報記録媒体
US20090323719A1 (en) * 2008-06-26 2009-12-31 Ya-Ching Yang Methods and apparatus for transforming first transport stream of first format into second transport stream of second format by emulating arrival time stamp information
JP4770910B2 (ja) * 2008-11-04 2011-09-14 株式会社日立製作所 データ記録方法および記録媒体、再生装置
US9060187B2 (en) 2008-12-22 2015-06-16 Netflix, Inc. Bit rate stream switching
JP4924633B2 (ja) * 2009-02-27 2012-04-25 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
EP2469854B1 (en) * 2009-08-19 2018-10-10 Panasonic Corporation Content uploading system, content uploading method, and content transmitting/receiving device
JP2010044860A (ja) * 2009-11-25 2010-02-25 Toshiba Corp デジタルav情報記録媒体とこの媒体を用いる記録/再生方法および記録/再生装置
JP5537290B2 (ja) * 2010-06-30 2014-07-02 日立コンシューマエレクトロニクス株式会社 記録装置/方法/媒体、再生装置/方法
KR20120012301A (ko) * 2010-07-30 2012-02-09 삼성전자주식회사 디지털 방송에서의 확장 방송 서비스 송수신 방법 및 장치
JP2011170963A (ja) * 2011-04-11 2011-09-01 Toshiba Corp デジタルav情報記録媒体とこの媒体を用いる記録/再生方法および記録/再生装置
JP2011229177A (ja) * 2011-06-24 2011-11-10 Hitachi Ltd 記録媒体、記録方法、及び再生方法
US9179156B2 (en) * 2011-11-10 2015-11-03 Intel Corporation Memory controller for video analytics and encoding
CN102768844B (zh) * 2012-03-31 2017-06-13 新奥特(北京)视频技术有限公司 一种音频码流拼接的方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001060381A (ja) 1999-08-24 2001-03-06 Sharp Corp 録画データ編集装置
JP2002056651A (ja) * 2000-04-21 2002-02-22 Sony Corp 記録装置および方法、再生装置および方法、記録媒体、プログラム、並びに記録媒体
JP2002152665A (ja) * 2000-11-08 2002-05-24 Toshiba Corp プレイリスト作成ガイド機能付き記録再生装置
JP2002158971A (ja) * 2000-04-21 2002-05-31 Sony Corp 情報処理装置および方法、記録媒体、プログラム、並びに記録媒体

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5262875A (en) * 1992-04-30 1993-11-16 Instant Video Technologies, Inc. Audio/video file server including decompression/playback means
US5623690A (en) * 1992-06-03 1997-04-22 Digital Equipment Corporation Audio/video storage and retrieval for multimedia workstations by interleaving audio and video data in data file
ATE194247T1 (de) * 1992-09-03 2000-07-15 Sony Corp Datenaufzeichnungsgerät und -verfahren
CN1160955C (zh) * 1995-10-09 2004-08-04 松下电器产业株式会社 数据发送装置及数据发送方法
JP3761623B2 (ja) * 1996-03-18 2006-03-29 パイオニア株式会社 情報記録媒体、情報記録装置及び方法並びに情報再生装置及び方法
CN1135481C (zh) * 1996-09-27 2004-01-21 松下电器产业株式会社 视频数据可择一重放的多媒体流生成方法和光盘创作系统
US5953008A (en) * 1996-10-01 1999-09-14 Nikon Corporation Source file editing apparatus
US6487364B2 (en) * 1997-09-17 2002-11-26 Matsushita Electric Industrial Co., Ltd. Optical disc, video data editing apparatus, computer-readable recording medium storing an editing program, reproduction apparatus for the optical disc, and computer-readable recording medium storing a reproduction program
JPH1198460A (ja) 1997-09-17 1999-04-09 Matsushita Electric Ind Co Ltd 光ディスクの再生方法及び再生装置
US6034746A (en) * 1997-10-27 2000-03-07 International Business Machines Corporation System and method for inserting data into a digital audio/video data stream
JP3597690B2 (ja) 1998-01-21 2004-12-08 株式会社東芝 デジタル情報記録再生システム
JP3383580B2 (ja) * 1998-05-15 2003-03-04 株式会社東芝 情報記憶媒体と情報記録再生装置と方法
KR100466496B1 (ko) * 1998-08-07 2005-01-13 가부시키가이샤 히타치세이사쿠쇼 기록매체, 기록장치, 재생장치, 기록방법, 및 컴퓨터가 읽기가능한 기록매체
DE69938231T2 (de) 1998-10-14 2009-03-05 Sony Corp. Datenübertragungsgerät ,datenübertragungsverfahren und datenaufzeichnungsmedium
KR100657237B1 (ko) * 1998-12-16 2006-12-18 삼성전자주식회사 데이터열간의 연속 재생을 보장하기 위한 부가 정보 생성 방법
EP1084494B1 (en) * 1999-03-01 2008-08-13 Koninklijke Philips Electronics N.V. A method of storing a real time stream of information signals on a disc like record carrier
JP4221803B2 (ja) * 1999-03-02 2009-02-12 ソニー株式会社 記憶再生装置及び記憶再生方法
EP1139347A3 (en) * 1999-03-09 2004-10-06 Matsushita Electric Industrial Co., Ltd. Information recording medium, apparatus and method for recording or reproducing the recording medium
DE60000013T2 (de) * 1999-04-02 2002-05-02 Matsushita Electric Ind Co Ltd Optische Platte, Aufzeichnungs- und Wiedergabeanordnung
JP2000322873A (ja) 1999-05-10 2000-11-24 Matsushita Electric Ind Co Ltd 情報記録媒体、情報記録方法、情報記録装置、情報再生方法、および情報再生装置
JP2001016549A (ja) * 1999-06-29 2001-01-19 Sony Corp データ記録再生システム及びその再生方法並びにそのプログラムを格納した記憶媒体
EP1126708A1 (en) * 1999-08-27 2001-08-22 Kabushiki Kaisha Toshiba System for interconnecting devices through analog line
JP4389365B2 (ja) * 1999-09-29 2009-12-24 ソニー株式会社 トランスポートストリーム記録装置および方法、トランスポートストリーム再生装置および方法、並びにプログラム記録媒体
JP4328989B2 (ja) * 1999-11-24 2009-09-09 ソニー株式会社 再生装置、再生方法、並びに記録媒体
EP2546833A3 (en) 2000-04-21 2014-08-20 Sony Corporation Information processing apparatus, method and computer program
CN1186930C (zh) 2000-04-21 2005-01-26 索尼公司 记录设备和方法、再现设备和方法
WO2001082611A1 (fr) * 2000-04-21 2001-11-01 Sony Corporation Procede et appareil de traitement d'informations, support enregistre, et programme

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001060381A (ja) 1999-08-24 2001-03-06 Sharp Corp 録画データ編集装置
JP2002056651A (ja) * 2000-04-21 2002-02-22 Sony Corp 記録装置および方法、再生装置および方法、記録媒体、プログラム、並びに記録媒体
JP2002158971A (ja) * 2000-04-21 2002-05-31 Sony Corp 情報処理装置および方法、記録媒体、プログラム、並びに記録媒体
JP2002152665A (ja) * 2000-11-08 2002-05-24 Toshiba Corp プレイリスト作成ガイド機能付き記録再生装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP1408686A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008130117A1 (en) * 2007-04-19 2008-10-30 Dreamer Co., Ltd. Method for providing data application based on disk media reproduction apparatus
US9325932B2 (en) 2007-04-19 2016-04-26 Sk Planet Co., Ltd. Method for providing data application based on disk media reproduction apparatus

Also Published As

Publication number Publication date
JP4409792B2 (ja) 2010-02-03
KR100892012B1 (ko) 2009-04-07
US20040213552A1 (en) 2004-10-28
US7502543B2 (en) 2009-03-10
TWI255421B (en) 2006-05-21
EP1408686A1 (en) 2004-04-14
EP1408686A4 (en) 2007-10-17
HK1062977A1 (en) 2004-12-03
JP2003006979A (ja) 2003-01-10
CN1465182A (zh) 2003-12-31
KR20030024888A (ko) 2003-03-26
SG152035A1 (en) 2009-05-29
CN1310508C (zh) 2007-04-11
US20090148123A1 (en) 2009-06-11
CN101902655A (zh) 2010-12-01
CN1874243A (zh) 2006-12-06
CN101902655B (zh) 2013-04-17
AU2002311318B2 (en) 2007-03-22
US20080112685A1 (en) 2008-05-15

Similar Documents

Publication Publication Date Title
JP4409792B2 (ja) データ伝送装置および方法、記録媒体並びにプログラム
US7474840B2 (en) Data recording apparatus for managing content when content is deleted
KR100875782B1 (ko) 정보 처리 장치와 방법, 및 기록 매체
KR100806432B1 (ko) 정보 처리 장치 및 방법, 프로그램과 기록 매체
KR100746821B1 (ko) 정보 처리 장치와 방법, 기록매체
WO2001082608A1 (fr) Appareil et procede de traitement des informations, programme et support enregistre
JP2002158974A (ja) 情報処理装置および方法、記録媒体、プログラム、並びに記録媒体
JP2002158971A (ja) 情報処理装置および方法、記録媒体、プログラム、並びに記録媒体
JP2002158965A (ja) 情報処理装置および方法、記録媒体、プログラム、並びに記録媒体
JP2002157859A (ja) 情報処理装置および方法、記録媒体、並びにプログラム
RU2273109C2 (ru) Способ и устройство обработки информации, программа и носитель записи
JP2006216227A (ja) データ受信装置および方法
JP2006302498A (ja) データ受信装置および方法
ZA200110323B (en) Information processing apparatus and method, program, and recorded medium.

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AU CN ID IN KR SG US

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE TR

WWE Wipo information: entry into national phase

Ref document number: 184/MUMNP/2003

Country of ref document: IN

WWE Wipo information: entry into national phase

Ref document number: 2002736163

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2002311318

Country of ref document: AU

WWE Wipo information: entry into national phase

Ref document number: 1020037002349

Country of ref document: KR

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 028024699

Country of ref document: CN

WWP Wipo information: published in national office

Ref document number: 1020037002349

Country of ref document: KR

WWE Wipo information: entry into national phase

Ref document number: 10344957

Country of ref document: US

WWP Wipo information: published in national office

Ref document number: 2002736163

Country of ref document: EP

WWG Wipo information: grant in national office

Ref document number: 2002311318

Country of ref document: AU