WO2006121049A1 - データ処理装置 - Google Patents

データ処理装置 Download PDF

Info

Publication number
WO2006121049A1
WO2006121049A1 PCT/JP2006/309330 JP2006309330W WO2006121049A1 WO 2006121049 A1 WO2006121049 A1 WO 2006121049A1 JP 2006309330 W JP2006309330 W JP 2006309330W WO 2006121049 A1 WO2006121049 A1 WO 2006121049A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
management information
stream
data
reproduction
Prior art date
Application number
PCT/JP2006/309330
Other languages
English (en)
French (fr)
Inventor
Kiyonori Kido
Original Assignee
Matsushita Electric Industrial Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co., Ltd. filed Critical Matsushita Electric Industrial Co., Ltd.
Priority to JP2007528289A priority Critical patent/JPWO2006121049A1/ja
Priority to US11/913,919 priority patent/US20080152302A1/en
Priority to EP06746161A priority patent/EP1887796A4/en
Publication of WO2006121049A1 publication Critical patent/WO2006121049A1/ja

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327Table of contents
    • G11B27/329Table of contents on a disc [VTOC]
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/40Combinations of multiple record carriers
    • G11B2220/45Hierarchical combination of record carriers, e.g. HDD for fast access, optical discs for long term storage or tapes for backup
    • G11B2220/455Hierarchical combination of record carriers, e.g. HDD for fast access, optical discs for long term storage or tapes for backup said record carriers being in one device and being used as primary and secondary/backup media, e.g. HDD-DVD combo device, or as source and target media, e.g. PC and portable player
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/781Television signal recording using magnetic recording on disks or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/907Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/7921Processing of colour television signals in connection with recording for more than one processing mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal

Definitions

  • the present invention relates to a technique for recording a stream of digital broadcasting or the like on a recording medium, and a technique for reproducing a recorded stream power video.
  • Video / audio formats, program layout information, etc. used for digital broadcasting in Japan are defined in “ARIB STD— BIO (June 19, 1997 1. 0) formulated by the Radio Industry (ARIB).
  • ARIB STD— BIO June 19, 1997 1. 0
  • ARIB Radio Industry
  • ARIB standards such as The ARIB standard specifies MPEG-2 Transport Stream (TS) as a system layer multiplexing format for video, audio, and so on.
  • TS MPEG-2 Transport Stream
  • ES video “audio and other elementary” streams
  • SI ZPSI program sequence information
  • SIZPSI also includes additional information (program information) such as the program name that can be obtained only with multiplexed information.
  • ESs can be multiplexed in TS
  • a program including a plurality of audio ESs such as Japanese and English, a multi-view sports program having a plurality of video ESs, and the like can be realized. It can be said that such a program including multiple audio ESs and video ESs has a wider range of expression than a program that does not include one ES.
  • the number of ESs has to be increased in order to enable more diverse playback, without changing the number of video and audio that can be output by the number of ESs. From the viewpoint of the amount of data, etc., this effectively expands the range of expression effectively.
  • Patent Document 1 is intended to enable reproduction in various modes more than the number of multiplexed ESs.
  • the configuration for the above is disclosed.
  • a broadcast station creates and transmits information (multi-view automatic switching table) instructing switching of an ES to be reproduced.
  • the user equipment switches to the ES specified during playback based on the multi-view automatic switching table.
  • the ES to be viewed is switched at the timing designated by the broadcast station, so that it is possible to reproduce video and the like in an output mode that is more than the number of ESs.
  • management information related to the stream is often recorded at the same time as recording only the stream.
  • the table disclosed in Patent Document 1 described above can be regarded as one piece of management information.
  • management information it is possible to add additional information such as titles, define arbitrary playback procedures, and set entry points for jump playback.
  • time information and address information it is possible to improve random access performance and to perform special playback such as fast forward and fast reverse and slow playback.
  • the format of the management information is defined by a standard corresponding to the type of recording medium.
  • the format of management information is specified in the DVD Video Recording standard (DVD-VR standard) for DVD-RAM and DVD-RZRW, and the Blu-ray Rewritable standard (hereinafter BD-) for Blu-ray Disc. RE standard).
  • DVD-VR standard DVD Video Recording standard
  • BD- Blu-ray Rewritable standard
  • the format of management information is regulated by another standard for semiconductor media such as SD cards.
  • Patent Document 1 Japanese Patent Application Laid-Open No. 2002-314960
  • a playlist can be used, for example, to define a playback path within a single ES or across different ESs of different programs, but playback across different ESs of a single program. A route cannot be defined. Therefore, the conventional playlist cannot solve the inconvenience described above.
  • One of the objects of the present invention is that when there are a plurality of data streams of the same type that are alternatively played back, the user plays back which data stream at the start of playback of the content and during Z playback. It is to be able to specify easily.
  • another object of the present invention is to enable the user to easily grasp the content reproduction mode based on each data stream and the content reproduction mode set by the user, thereby enabling a reliable selection. That is.
  • a data processing device of the present invention includes a receiving unit that receives a multiplexed stream of content, A process for analyzing the multiplexed stream and writing it to a recording medium is performed, and a recording control unit that outputs an instruction to write the multiplexed stream after processing to the recording medium, and the analysis result of the multiplexed stream And a management information generating unit that generates management information necessary for reproducing the content.
  • the multiplexed stream includes a plurality of data streams of the same type that are alternatively played back.
  • the management information generating unit adds, as the management information, selection information that specifies which data stream of the plurality of data streams is to be played back, and the recording control unit is configured to manage the management data An instruction to further write information on the recording medium is output.
  • the management information generating unit adds, as the selection information, identification information for identifying the selected data stream, and start point information indicating a reproduction start point in the identified data stream to the management information. May be.
  • the management information generation unit may further generate end point information indicating a reproduction end point in the identified data stream, and store the end point information in the management information.
  • the management information generation unit may generate a plurality of the selection information and add the selection information to the management information.
  • the management information generating unit For reproduction of the content after the first time, the management information generating unit identifies identification information for identifying the first data stream and a start for identifying the first time as the reproduction start point The point information is generated as the first selection information, and for the reproduction of the content after the second time after the first time, the second data stream different from the first data stream is identified. Information and start point information that identifies the second time as the reproduction start point may be generated as second selection information.
  • the management information generation unit may generate the start point information based on a reproduction start point instructed by a user power.
  • the management information generation unit may generate the start point information based on a predetermined reproduction start point.
  • the data processing device includes an instruction receiving unit that receives a deletion instruction related to deletion of a designated reproduction path, and a specified reproduction path among the plurality of data streams based on the deletion instruction. Included in the corresponding data stream and the management information And a recording control unit that outputs an instruction to delete the information related to the designated reproduction path from the recording medium.
  • a recording medium records a stream file including a multiplexed stream of contents and a management information file including management information necessary for reproducing the contents.
  • the multiplexed stream is multiplexed with a plurality of data streams of the same type that are alternatively reproduced, and the management information includes the content based on any one of the plurality of data streams. Contains selection information that identifies whether to play.
  • a data processing device includes a reproduction control unit that reads the management information file and the stream file from the recording medium, and extracts the selection information from the read management information file.
  • a management information analysis unit that instructs extraction of the identified data stream; a separation unit that separates the data stream from the multiplexed stream based on the instruction; and the content based on the separated data stream And a decoder for reproducing.
  • the management information includes identification information for identifying the first data stream, and start point information for identifying the first time as the reproduction start point. Identification information for specifying a second data stream different from the first data stream for reproduction of the content after the second time after the first time, and as the first selection information, and Starting point information specifying the second time as the reproduction starting point is included as second selection information, and the management information analysis unit is configured to perform the first selection information and the second selection information based on the first selection information.
  • the extraction of the first data stream may be instructed from the first time to the second time, and the extraction of the second data stream may be instructed after the second time.
  • the data processing apparatus further includes a graphic control unit that generates a signal for displaying the video on an external device based on the control information, and the management information analysis unit Outputs control information indicating the presence of a plurality of playback paths based on the first selection information and the second selection information, and the graphic control unit is configured to output each of the plurality of playback paths based on the control information. Outputs signals for displaying images corresponding to You can do it.
  • the data processing apparatus of the present invention is used for content editing.
  • the content is recorded in advance on a recording medium as a multiplexed stream, and the multiplexed stream includes a plurality of data streams of the same type that are alternatively reproduced.
  • the data processing device generates an instruction receiving unit that receives an instruction to select one of the plurality of data streams from a user, selection information that specifies the selected data stream as a reproduction target, and the management information And a management information generation unit that outputs as
  • the instruction receiving unit further receives an instruction for specifying a playback start point
  • the management information generation unit includes identification information for specifying the selected data stream, and a start point indicating the start point. Information may be generated as the selection information.
  • the data processing apparatus may further include a recording control unit that outputs an instruction to record the selection information on the recording medium.
  • the data processing apparatus may further include a memory for holding the selection information.
  • the instruction receiving unit may receive an instruction to select a data stream and an instruction to specify a playback start point multiple times, and the management information generation unit may generate multiple selection information.
  • the data processing apparatus further includes a graphic control unit that generates a signal for displaying video on an external device based on the control information.
  • the management information generation unit includes Based on the selection information, it outputs control information indicating the order of the data stream to be played back and the playback section of each data stream, and the graphic control unit is based on the control information! / You can also output a video signal indicating the playback section.
  • ES data streams
  • ES selection information indicating whether to select is added as management information. Since the playback device automatically plays back the ES specified by the ES selection information during playback of the multiplexed stream, the user does not need to repeatedly select the ES after the selection.
  • FIG. 1 is a diagram showing a functional block configuration of a BD recorder 100 with a built-in hard disk drive according to the present embodiment.
  • FIG. 2 is a diagram showing a functional block configuration of a digital tuner 201a and a TS processing unit 204 related to recording processing.
  • FIG. 3 is a diagram showing a configuration of functional blocks of a TS processing unit 204 and a decoder 206 related to reproduction processing.
  • FIG. 4 (a) to (e) are diagrams showing the relationship between a transport stream and a tape AV stream related to the recording process of the recorder 100.
  • FIG. 5 is a diagram showing a recording area of a BD 205a and its directory Z file structure.
  • FIG. 6 is a diagram schematically showing a plurality of ESs included in a clip AV stream 85.
  • FIG. 7] (a) to (d) are diagrams showing the relationship between management information and stream data.
  • FIG. 8 is a diagram showing information (entries) stored in a playlist file 83 and its data structure.
  • FIG. 9 is a flowchart showing the procedure of recording processing.
  • FIG. 10 is a flowchart showing a procedure for generating a playlist.
  • FIG. 11 (a) is a diagram showing the relationship between a real Z virtual playlist that defines the default ES designation mark and multiple video ESs, and (b) is a playlist that includes the default ES designation mark for video.
  • FIG. 6 is a diagram showing an example of a list display screen 510 when there is a message.
  • FIG. 12 (a) is a diagram showing the relationship between a real Z virtual playlist that defines the default ES designation mark and multiple audio ESs. (B) is a playlist that includes the default ES designation mark related to audio. FIG. 6 is a diagram showing an example of a list display screen 510 when there is a message.
  • FIG. 13 is a diagram showing an example of switching to an arbitrary ES at an arbitrary timing.
  • FIG.14 (a) is a diagram showing an example of the graphical user interface (GUI) displayed on the editing screen, and (b) is a diagram showing the correspondence between the ES to be edited and the default ES designation mark. It is.
  • GUI graphical user interface
  • FIG. 15 is a diagram showing a functional block configuration of a TS processing unit 204 for realizing the editing process shown in FIG. Explanation of symbols
  • the data processing apparatus will be described as an optical disk recorder with a built-in hard disk drive.
  • a management information file indicating stream data and a reproduction procedure is recorded.
  • standards such as DVD-VR and BD-RE are established according to the recording target media.
  • BD Blu-ray disc
  • stream data is recorded in the MPEG-2 transport stream (TS) format. Because TS is used, even digital broadcast streams containing multiple ESs can be recorded as is, with little modification.
  • a plurality of elementary streams (ES) of the same type are multiplexed in the TS of a single content (one broadcast program or the like), and these are alternatively played back.
  • Type indicates video, audio, subtitles, and the like.
  • the same type of ES means, for example, that there are multiple video ESs.
  • “reproduce content” means that video, audio, subtitles, and the like are output based on at least one ES regardless of whether the types are the same or different.
  • the optical disc recorder has a receiving unit for receiving a TS of content. Then, the received TS of the necessary program is taken out to generate a partial TS and sent to the TS processing unit.
  • the TS processing unit analyzes the TS and records it on a recording medium (such as an optical disk or hard disk). A process for writing is performed, and the stream file is written to the recording medium.
  • the TS processing unit generates management information related to the content playback path based on the analysis result.
  • the TS processing unit includes a management information generation unit and a recording control unit.
  • the management information generation unit adds, as management information, selection information that specifies which ES of the plurality of ESs is to be used for content playback.
  • the recording control unit further records the management information as a management information file on the recording medium.
  • the user can specify from which ES (angle 1, 2, 3) of a plurality of videos of a sports program to start playback.
  • the user can specify the power to start playback from any ES of the multiple audio ES (Japanese, English, Chinese) of the movie.
  • the recording control unit adds selection information indicating which ES is designated as management information.
  • the management information with the selection information added is generated at the time of recording and stored in the recording medium.
  • the user can start playback from the ES specified for video, audio, etc. from the first viewing of the recorded program.
  • FIG. 1 shows a functional block configuration of the recorder 100.
  • the recorder 100 has a BD205a and a hard disk 205b as recording media.
  • the recorder 100 includes a digital tuner 201a and an analog tuner 201b, an AD converter 202, an MPEG-2 encoder 203, a TS processing unit 204, an MPEG-2 decoder 206, a graphic input U control 207, With memory 208, A CPU node 213, a network control unit 214, an instruction receiving unit 215, an interface (IZF) unit 216, a memory card control unit 217, and a system control unit 250 are included.
  • the optical disc 205a is described in the recorder 100. However, the optical disc 205a can be detached from the recorder 100 and is not a component of the recorder 100 itself.
  • the digital tuner 201a receives a digital signal including one or more programs from an antenna (not shown).
  • the MPEG-2 transport stream (TS) to be sent contains a mixture of multiple program packets.
  • a transport stream containing multiple program packets is called a "full TS".
  • the full TS also includes various control packets (for example, PSI packets such as program table packets and program correspondence table packets, SI packets) necessary to extract data of a specific program from a plurality of programs. .
  • the digital tuner 201a selects a channel, extracts a packet of a selected channel and a necessary control packet from the full TS, performs predetermined processing, and outputs it as a “partial TS”.
  • the digital tuner 201a also outputs control information (stream information) related to the partial TS acquired when the partial TS is generated.
  • the procedure for extracting a packet of a desired channel from the full TS is as follows. Let X be the program number (channel number) of the desired program. First, the program schedule packet (PAT-TSP) is searched from the full TS. Since the packet ID (PID) of the program guide packet is always given 0, it is only necessary to search for a packet having that value.
  • the program table in the program table packet stores each program number and the PID of the program correspondence table packet (PMT-TSP) of each program corresponding to the program number. As a result, the packet ID (PID) of the program correspondence table PMT corresponding to the program number X can be specified.
  • Program correspondence table PMT PID is XX.
  • the program correspondence table PMT stores the PID of a TS packet that stores the information of each program and the video / audio information that constitutes each program to be viewed.
  • the video information PID for program number X is XV
  • the audio information PID is XA.
  • PSI Program Specific Information
  • SI Service Information
  • the PSI packet is a packet generically including a program table packet (PAT-TSP) and a program correspondence table packet (PMT-TSP).
  • PAT-TSP program table packet
  • PMT-TSP program correspondence table packet
  • the SI packet is a packet that contains the contents of the program included in the full TS, data describing the schedule Z timing, etc., and uniquely defined extended information (these are also called “program sequence information”). is there.
  • full TS there are 20-30 types of data included in SI packets. Of these data, only the data important for playback of the partial TS is extracted, and one SIT packet is generated and multiplexed in the partial TS.
  • information partial transport stream descriptor
  • indicating that the stream is a partial TS is stored in the SIT packet. It is common practice to multiplex SIT packets within a partial TS. This is for consistency with the European Z Japan digital broadcasting regulations (DVBZARIB).
  • the analog tuner 201b receives an analog signal from an antenna (not shown), selects a channel based on the frequency, and extracts a necessary program signal.
  • the program video and audio signals are output to the AD converter 202.
  • the AD converter 202 digitally converts the input signal and supplies it to the MPEG-2 encoder 20 3.
  • the MPEG-2 encoder 203 (hereinafter referred to as “encoder 203”) compresses the supplied analog broadcast digital data into the MPEG-2 format and converts it into a transport stream. Generated and input to the TS processing unit 204. This process continues until the encoder 203 receives a recording end instruction.
  • the encoder 203 has a noffer (not shown) or the like that temporarily holds a reference picture or the like in order to perform the compression code. When viewing is performed simultaneously, the encoder 203 inputs the transport stream to the MPEG-2 decoder 206.
  • the TS processing unit 204 receives a partial TS when recording a moving image, generates a clip AV stream (ClipAV stream), and records it on the BD 205a and Z or the HDD 205b.
  • a clip AV stream is a data stream having a format for recording on the BD 205a.
  • the clip AV stream is composed of a plurality of “source packets”, and the “source packet” is generated by adding a predetermined header to each TS packet constituting the partial TS.
  • Figs. 4 (a) to (e) This will be described later with reference.
  • the format of the stream recorded on the HDD 205b is also a clip AV stream for convenience.
  • the TS processing unit 204 controls the playback of the BD 205a and the like along with the generation of the clip AV stream, generates management information for managing various stored data positions, and records it on the BD 205a. To do.
  • the TS processing unit 204 reads the clip AV stream and management information from the BD 205a and Z or the HDD 205b, generates a partial TS based on the management information and the clip AV stream, and generates MPEG-2. Output to decoder 206.
  • the TS processing unit 204 may operate to exchange management information and a tap AV stream with a memory card control unit 217, which will be described later. As a result, the TS processing unit 204 records a program on the memory card 112. The recorded program can be reproduced from the memory card 112. The TS processing unit 204 also mediates data transfer when copying, moving, and the like of management information and clip AV streams between various recording media.
  • the TS processing unit 204 is described as writing data into or reading data from the BD 205a and Z or the HDD 205b, but this is for convenience of description. Stream writing and reading to and from the BD 205a and HDD 205b are actually performed by a controller (not shown) provided in each drive device along with disk rotation and head movement. The TS processing unit 204 transmits and receives data to such a controller, and data writing and reading are realized.
  • the MPEG-2 decoder 206 (hereinafter referred to as “decoder 206”) analyzes the supplied partial TS to obtain MPEG-2 compression code data. Then, the compressed and encoded data is decompressed and converted into uncompressed data, and supplied to the graphic control unit 207. In addition, the decoder 206 can convert not only the compressed code data of the MPEG-2 standard, but also still image data according to the JPEG standard into uncompressed data.
  • the graphic control unit 207 is connected to a memory 208 for internal calculation, and can realize an on-screen display (OSD) function. For example, the graphic controller 20 7 can synthesize various menu images and video and output them to the DA converter 209.
  • the DA converter 209 converts the input OSD composite image and audio data into analog signals and outputs them.
  • the output destination is, for example, a TV (not shown).
  • the CPU bus 213 is a path for transmitting signals in the recorder 100 and is connected to each functional block as shown in the figure. In addition, the CPU bus 213 is connected to each component of a system control unit 250 described later.
  • the network control unit 214 is an interface for connecting the recorder 100 to the network 101 such as the Internet, and is, for example, a terminal and a controller compliant with the Ethernet (registered trademark) standard.
  • the network control unit 214 transmits and receives data via the network 101.
  • This data is, for example, program guide data relating to broadcast programs and software program update data for controlling the operation of the recorder 100.
  • the instruction receiving unit 215 is a light receiving unit that receives infrared light from an operation button provided on the main body of the recorder 100 or a remote controller.
  • the instruction receiving unit 215 receives, for example, an instruction from the user to start recording, stop Z, start playback of the recorded program, stop Z, and the like, a notification of a scheduled recording and a broadcast date and time of a program to be reserved, a channel, etc. Instructs which ES will be set as the default ES, which will be described later.
  • An interface (IZF) unit 216 controls a connector for the recorder 100 to communicate with other devices and its communication.
  • the IZF unit 216 includes, for example, a USB 2.0 standard terminal, an IEE E1394 standard terminal, and a controller that enables data communication according to each standard, and can exchange data in a manner compliant with each standard.
  • the recorder 100 is connected to a PC, a camcorder (not shown) or the like via a USB 2.0 standard terminal, and a digital noise vision tuner or camcorder (not shown) via a terminal of the IEEE1394 standard terminal. Etc.) etc.
  • the memory card control unit 217 is a controller for controlling the data communication between the recorder 100 and the memory card 112 and the slot for loading the memory card 112 into the recorder 100.
  • the memory card control unit 217 reads a still image data file, a moving image data file, and the like from the loaded memory card 112 and transmits them to the CPU bus 213.
  • the system control unit 250 controls the overall processing including the signal flow in the recorder 100. To do.
  • the system control unit 250 includes a program ROM 210, a central control unit (CPU) 211, and a RAM 212. Each is connected to the CPU bus 213.
  • the software ROM 210 stores a software program for controlling the recorder 100.
  • the CPU 211 controls the overall operation of the recorder 100.
  • the CPU 211 reads out and executes the computer program to generate a control signal for realizing the processing specified by! / Based on the program, and outputs it to each component via the CPU bus 213.
  • the process defined based on the program is, for example, a reception process, a recording process, a reproduction process, an editing process, etc., which will be described later.
  • the memory 212 has a work area for storing data necessary for the CPU 211 to execute the program.
  • the CPU 211 reads the program from the program ROM 210 to the random access memory (RAM) 212 using the CPU bus 213, and executes the program.
  • RAM random access memory
  • the computer program is recorded on a recording medium such as a CD-ROM and distributed to the factory, or transmitted through an electric communication line such as the Internet.
  • a computer system configured using a PC or the like can be operated as a data processing device having functions equivalent to those of the recorder 100 according to the present embodiment.
  • FIG. 1 shows a recorder 100 having a plurality of functions such as a reception function, a recording function, and a reproduction function. However, each function is independent, and a signal transmission / reception equivalent to the configuration in FIG. 1 is performed. If possible, these may be realized as a plurality of devices.
  • tuners 201a and 20 lb, a decoder 206, a graphic control unit 207, and a DAC 209 can be provided as functions of a TV (not shown).
  • the HDD 205b can be provided as a single device. Then, the TV, recorder, and HDD 205b may be connected by, for example, IEEE1394.
  • FIG. 2 shows a functional block configuration of the digital tuner 201a and the TS processing unit 204 related to the recording process.
  • the digital tuner 201 a has a tuner unit 251 and a demultiplexer 252.
  • TS processing The unit 204 includes a management information generation unit 253 and a recording control unit 254.
  • the tuner unit 251 of the digital tuner 201a receives a digital broadcast wave and extracts a full TS. Thereafter, the demultiplexer 252 generates a partial TS including the data of the program to be recorded from the full TS, and sends it to the recording control unit 254.
  • the demultiplexer 252 also outputs control information (stream information) related to the partial TS acquired when the partial TS is generated. That is, the demultiplexer 252 extracts stream information such as SIZPSI and ES feature points in the stream simultaneously with the conversion to the partial TS, and sends it to the management information generation unit 253. As a result, the management information generation unit 253 generates management information storing stream information.
  • the recording control unit 254 records the received partial TS and management information on the recording medium 205a. It should be noted that the recording control unit 254 generates a clip AV stream by performing a process of adding a predetermined extension header rather than writing the partial TS itself to the BD 205a, and writes the stream to the BD 205a. Details of this process will be described later with reference to FIG.
  • FIG. 3 shows a configuration of functional blocks of the TS processing unit 204 and the decoder 206 related to the reproduction process.
  • the reproduction control unit 255 reads a management information file from the recording medium 205a.
  • the management information analysis unit 256 controls the reproduction control unit 255 to read the partial TS in accordance with the read management information, and inputs the partial TS to the demultiplexer 257.
  • the management information analysis unit 256 performs packet identifier (PID) setting and the like to the demultiplexer 257, and instructs the separation of the TS bucket having the PID.
  • PID packet identifier
  • the demultiplexer 257 separates and extracts only the TS packet in the partial TS having the set packet identifier, and outputs it.
  • PID settings are made for video, audio, subtitles, etc.
  • the ES separated by the demultiplexer 257 is input to the video decoder 258, the audio decoder 259, and the data decoder 260 corresponding to each ES.
  • the management information analysis unit 256 instructs the decoders 258 to 260 to perform decoding. That Based on the instruction, the video decoder 258 decodes the video ES, the audio decoder 259 decodes the audio ES, and the data decoder 260 decodes the caption ES.
  • Each decoder 258, 259, 260 decodes each and outputs it as a digital signal.
  • the management information analysis unit 256 When a plurality of ESs are included in the TS, one type of video and one type of audio are extracted and reproduced and output if output to a normal TV or the like. If there is data such as subtitles, selection and decoding are performed in the same way.
  • the management information analysis unit 256 resets the PID to the demultiplexer 257 and instructs ES separation. In addition, the management information analysis unit 256 instructs each of the decoders 258 to 260 to perform decoding. After that, TS packets with the reconfigured PID are extracted, and different ESs are decoded.
  • FIGS. 4A to 4E show the relationship between the transport stream and the tap AV stream related to the recording process of the recorder 100.
  • FIG. 4 (a) shows a partial TS 71 generated from the full TS 70 by the digital tuner 201a. Since the partial TS 71 is a stream obtained by extracting some packets from a continuous full TS, the packets exist discretely in time. The packet interval is adjusted by the full TS transmission side and satisfies the conditions necessary for proper decoding in the decoder. This “condition” means MPEG—
  • the T-STD (TS System Target Decoder) buffer memory specified as an ideal model of 2TS is a condition defined in the MPEG standard in order to prevent overflow and underflow.
  • the partial TS 71 includes, for example, a TS packet related to the program X.
  • FIG. 4 (c) shows a clip AV stream 72.
  • source packets are continuously arranged.
  • Each source packet has a source packet number (SPN) # 1,
  • FIG. 4 (d) shows the data structure of the source packet 73.
  • the data length of the source packet 73 is fixed at 192 bytes. That is, each source packet 73 is configured by adding a 4-byte TP header header 74 before a 188-byte TS packet 75.
  • the source packetizer generates a source packet by adding a TP Xestra header 74 before the TS packet constituting the partial TS.
  • FIG. 4 (e) shows the data structure of the TP eXtra header 74.
  • the TP eXtra header 74 is also composed of a 2-bit copy permission indicator (CPI) 76 and a 30-bit arrival time stamp ATS77.
  • the copy permission indicator (CPI) 76 stipulates the number of copies of the entire clip AV stream 72 or a part of the clip AV stream 72 (0 times (copy not possible) Z1 time only, no Z restriction, etc.).
  • Arrival time stamp ATS77 describes the time with 90kHz accuracy.
  • the clip AV stream 72 shown in FIG. 4 (c) is recorded on the BD 205a or the like, for example, with a set of 32 source buckets (6 KB) as one unit. Such a unit is called an aid unit.
  • the reason why the aligned unit is specified is that the BD205a has one sector of 2KB, so it is possible to secure alignment with the sector in units of 32 source packets.
  • the clip AV stream can be recorded on the HDD 205b, it can be recorded with the same data structure. However, since the HDD 205b is generally not removed from the recorder 100 and loaded into other devices, data may be recorded using its own data structure.
  • FIG. 5 shows the recording area of the BD 205a and its directory Z file structure.
  • the BD 205a has a gathered file area 81-1 and a real-time data area 812.
  • the recording capacity of the gathered 'file area 81-1 is several hundred megabytes. Gathered 'F In the aisle area 81-1, a file (database file) of management information for managing playback of a clip AV stream is recorded. As shown in Figure 5, there are multiple types of database files. As the database file, there are, for example, a management file 82 (Info, bdav), Plage ⁇ Finore 83 (01001. rpls, 10000. In the playlist file 83, a playlist indicating the playback order, a playlist mark, and the like are described.
  • the clip information file 84 includes STC sequences, ATC sequences, sequence information indicating continuous sections such as “Programlnfo”, and entries for random access and special playback such as an entry point map (“EP MAP”). Point information is listed.
  • the database file recorded in the gathered file area 81-1 is accessed frequently. Therefore, the gathered file area 81-1 can be efficiently accessed and is provided in the middle part of the recording area of the BD 205a.
  • the database file is indispensable for reproducing a moving image stream such as a clip AV stream, and an error in recorded contents causes a serious failure. Therefore, the database file is backed up on the same BD205a.
  • the recording capacity of the real-time data area 81-2 is 23 to 27 gigabytes.
  • a stream file of the clip AV stream is recorded in the “real time” data area 81-2.
  • a clip AV stream file 85 (01000.m2ts) is recorded.
  • the effects of stream file playback errors are local, while continuous reading must be ensured. Therefore, write processing is performed with an emphasis on those who guarantee continuous reading rather than reducing the occurrence of errors.
  • the clip AV stream file 85 is recorded in a continuous area (a continuous logical sector) of 12 Mbytes at a minimum. This minimum recording data size is called an “extent”.
  • the DV stream can be recorded in the real-time 'data area 81-2, the following description will be made assuming that the clip AV stream is recorded.
  • FIG. 6 schematically shows a plurality of ESs included in the clip AV stream 85.
  • the clip AV stream file 85 has a plurality of ESs for video, audio, and subtitles.
  • ES V1 to V3 with different viewpoints (angles) 1 to 3 are included.
  • each subtitle ES of different subtitles Japanese Z English Z ⁇ ⁇ ⁇
  • each audio ES Al ⁇ A3 of different audio (Japanese Z English Z Chinese) (S1, S2 ⁇ ⁇ ⁇ ⁇ ) including.
  • each ES is assigned a different ES PID value.
  • Figure 6 shows an example of PIDs assigned to each ES.
  • an ES with an ES PID value of 0x01 is stored in a TS packet having the same value as a PID value, and writing and reading are performed.
  • other methods may be employed as long as the recorder 100 can reliably extract the TS packet storing the ES data to be reproduced.
  • Figures 7 (a) to 7 (d) show the relationship between management information and stream data.
  • Figures 7 (a) to (c) are management information
  • Figure 7 (d) is stream data.
  • Figure 7 (a) shows the playlist table described in the management file 82 (Info, bdav). That is, the management file 82 stores a playlist file name table for specifying a playlist existing on the BD205a.
  • the “play list” is information that defines a playback path that spans part or all of one or more clip AV streams.
  • FIG. 7 (b) shows a playlist described in the playlist file 83 (extension: rplsZvpls).
  • Playlists can be classified into real playlists and virtual playlists.
  • the real playlist is, for example, a playlist generated by the recorder 100 when the stream data is recorded for the first time, and specifies from the beginning to the end of the moving image as a playback path.
  • the virtual playlist is a playlist set by the user for the recorded stream data, and an arbitrary position and section desired by the user are designated.
  • Each section of the playlist is defined in each play item in the playlist. That is, in the play item, a start time (In-time) corresponding to the reproduction start position and an end time (Out-time) corresponding to the reproduction end position are described.
  • the start time and end time are described by a presentation time stamp (PTS) that specifies the playback display time of the video frame and the playback output time of the audio frame.
  • PTS presentation time stamp
  • the number of play items is arbitrary
  • a plurality of play items can be provided in one virtual playlist, and each play item can be described to specify a different video stream.
  • FIG. 7 (c) shows a time / address conversion table (EP-map) 84 described in the clip information file 84 (extension: clpi).
  • the conversion table (EP-map) 84 is a table in which the playback time of the clip AV stream is associated with the address where the data played back at that time is stored.
  • the address in the clip AV stream storing the data to be played at that time from the start time (In-time) and end time (Out-time) specified in the play item Can be specified.
  • the principle of conversion using this conversion table 84 will be described in detail later with reference to FIGS.
  • FIG. 7 (d) shows a moving picture stream stored in the clip AV stream file 85 (extension: m2ts).
  • each of the files “01000. m2ts” and “02000. m2ts” is a clip AV stream file.
  • one clip information file is provided for one clip AV stream file.
  • a pair of a clip AV stream file and a clip information file is called a clip.
  • ES selection is used to specify the ES (default ES) to be played first.
  • Information "is introduced.
  • ES selection information for specifying a default ES for each play item (and STC sequence, program sequence) is added as part of the management information.
  • an elementary stream PID hereinafter referred to as ES PID
  • component tags defined in broadcasting standards such as the ARIB standard can also be used.
  • mark information in a standard such as a conventional BD-RE is used.
  • BD-RE a playlist mark corresponds to mark information.
  • the playlist mark is stored in the playlist file 83.
  • FIG. 8 shows information (entries) stored in the playlist file 83 and its data structure.
  • a playlist mark (PlayListMark) entry 90 corresponding to the playlist mark is defined.
  • a mark type (mark_type) field 91 indicates the type of mark.
  • mark time stamp mark one time-stamp
  • ES-PID ES selection information
  • mark—type field 91 indicates the type of mark.
  • bookmarks, resume marks, etc. are defined as mark types.
  • a default ES designation mark (Default—ES-mark) is defined as a new type. For example, 0x03 is defined as the value.
  • Table 1 shows the relationship between the number specified in the mark tab field 91 and the mark.
  • the default ES designation mark corresponds to the ES selection information described above.
  • Default ES designation marker The playback section up to the next default ES designation mark is played with the ES corresponding to the ES PID specified in the ES—PID field 93 selected as the default.
  • Default ES designation mark can be set at the beginning for audio, video, subtitles, etc.
  • the functions of other marks in Table 1 are as follows.
  • the resume mark indicates the point at which playback resumes and is set when playback is interrupted. This mark is provided to start the interruption position force regeneration. Bookmarks are, for example, user favorite It is provided as a mark that specifies the start point of the scene. Skip marks are provided to skip the program until the end of the program. There are other chapter marks, but details are omitted.
  • the mark-time-stamp field 92 describes information for specifying the playback point of the ES to be played back.
  • the reproduction output timing is described by the time (mark type stamp) on the STC time axis. Since the play list file 83 can specify a plurality of play items, the play item ID (Playltem-id) specifies which play item is targeted.
  • the mark type stamp 92 described above is handled as playback position information together with the play item ID.
  • the ES selection information (ES—PID) field 93 describes ES selection information for specifying an ES to be selected.
  • ES—PID ES selection information
  • BD—RE 1.0 a field for specifying an ES PID value is defined in the data structure, and corresponds to the field force 3 ⁇ 4S selection information (ES—PID) field 93.
  • the default ES designation mark is defined as a playlist mark, for example, the ES-PID value specified by the ES-PID value or component tag specified by the user in the area indicated as "reserved” in FIG. Specify a value.
  • the point at which ES is to be switched is set as playback position information.
  • the recording medium with the default ES designation mark contains information that specifies the ES at the time of playback, so it is possible to prevent differences in the default ES among devices, and the user can set any ES as the default. It is also possible to specify as. For example, if an ES selection information that indicates English audio and a default ES designation mark that includes playback position information that indicates the beginning of the playlist are recorded, English audio is selected as the default when the playlist is played. To be interpreted as
  • playlist marks can be specified in units of playlists, it is possible to define playlists having different default ES information. For example, multiple ES One stream can be defined as multiple programs with different default ESs. For example, prepare multiple playlists that refer to the same clip, set the default ES designation mark so that one playlist defaults to Japanese audio, and set another language audio as the default for another playlist. Set the default ES designation mark. By setting in this way, it is possible to define multiple virtual programs with different audio ES.
  • the method for defining the default ES designation mark described above is an example, and different data structures may be used as long as the same information is included.
  • the mark-type field it is possible to identify by the character string specified in the mark-name field.
  • the default ES for each type of video 'audio' subtitles, etc., or sequence information that defines those sets is used as a new table. You may define it.
  • the information for indicating the section in which the default ES should be performed may be position information such as a playlist mark, or may be a section designation by a start position and an end position.
  • time information such as a display time stamp (PTS) and the number of fields may be used, or stream address information such as a sector and a packet count may be used. Of these, at least one may be included.
  • PTS display time stamp
  • PlayList O also exists in the playlist file 83. This corresponds to the “playlist” described above.
  • PlayList play items (Playltem) 1, 2,... are described.
  • Each play item includes the name of the clip information file to be played (Clip—Information—file—name), an identifier for identifying the STC (ref—to—STC—id), and the start time (In— time), end time (Out- ti m e) and the like are stored.
  • FIG. 9 shows a recording process procedure.
  • the digital tuner 201a receives a digital broadcast wave (full TS) and generates a partial TS related to a specific program.
  • a clip AV stream is generated from the TS processing 204 recording [1], 254, and a noisoret TS force, and recorded as a clip AV stream file on the BD 205a.
  • the management information generation unit 253 of the TS processing unit 204 analyzes the partial TS and generates a database file (management file, playlist file, clip information file, etc.) regarding the management information.
  • the recording control unit 254 records the generated database file on the BD 205a.
  • FIG. 10 shows the procedure of the playlist generation process.
  • the management information generation unit 253 determines whether or not the ES (default ES) to be reproduced first is specified. When it is not specified, the process proceeds to step S112, and when it is specified, the process proceeds to step S113.
  • step S112 the management information generation unit 253 receives information for specifying the default ES from the user at the time of recording or reservation setting.
  • the default ES is specified based on a user instruction. In other words, it is assumed that the user manually specifies the default ES.
  • the user can know the presence of a plurality of ESs by notification from the recorder 100 or the like.
  • a SI packet included in a digital broadcast wave stores a table describing information on an electronic program guide (EPG). Therefore, the recorder 100 can identify in advance whether a program to be recorded includes multiple ESs by acquiring and analyzing the SI packet at the time of recording or setting a reservation. Recorder 100 should indicate this result to the user and receive instructions from the user to determine which ES is the default ES! /. For example, when recording a movie, if both English audio Z subtitle and Japanese audio Z subtitle can be selected, the user specifies English audio as the default ES for audio. However, for subtitles, Japanese subtitles are specified as the default ES. As another example, when recording a baseball broadcast, if both the catcher-side camera image and the center-side camera image can be selected, the user specifies the center-side camera image as the default ES.
  • EPG electronic program guide
  • the ES selection information related to the default ES specified by the user at the time of reservation setting constitutes reservation information together with information such as the date and time of scheduled recording and the channel.
  • the reservation information is stored in, for example, the RAM 212 (or flash ROM) of the recorder 100, and the default ES is set based on the ES selection information at the time of reservation recording.
  • step S113 the management information generating unit 253 describes a numerical value (0x03) indicating a default ES designation mark in the mark type (mark-type) field 91 of the playlist.
  • step S114 the management information generating unit 253 describes the ES PID value corresponding to the default ES in the ES-PID field 93 of the playlist.
  • step S115 the management information generation unit 253 describes the time stamp of the head portion of the default ES in the mark-time-stamp field 92.
  • the “first part” is a picture (frame or field) that is displayed first for video, an audio frame that is output first for audio, and a character string that is displayed first for subtitles.
  • step S116 the management information generating unit 253 describes information on other fields of the playlist mark 90 shown in FIG. 8 and other entries (PlayList entry, Playltem entry, etc.) of the playlist file.
  • the recorder 100 can record a program on the BD 205a and also record ES selection information for designating the ES to be played first as part of the management information.
  • FIG. 11 (a) shows the relationship between a real Z virtual playlist that defines the default ES designation mark and a plurality of video ESs.
  • Each playlist has a mark type (mark—type) field of 91. This field contains a numerical value (0x03) indicating the default ES designation mark.
  • the real playlist file (01001.rpls) includes ES selection information that specifies ES (VI) of angle 1 as the default ES. Specifically, “0x050” is described in the ES PID field 93 corresponding to the playlist mark of the real playlist. This number corresponds to the ES PID value “0x050” of the Ang Nore 1 ES (V1)!
  • the two virtual playlist files (02002. vpls and 10000. vpls) include ES selection information that designates ESs (V2, V3) of angles 2 and 3 as default ESs. Specifically, “0x051” and “0x052” are described in each ES PID field 93. These numbers correspond to ES—PID values “0x051” and “0x052” of ES (V2, V3) at angles 2 and 3, respectively.
  • playback control section 255 shown in FIG. 3 first reads management information and sends it to management information analysis section 256.
  • the management information analysis unit 256 extracts the default ES designation mark based on the mark-type field 91 from the playlist mark entry 90 force. Based on the ES selection information (ES—PID) field 93, which ES is to be reproduced is specified, and a read instruction is sent to the reproduction control unit 255 together with the ES—PID value of the ES. Further, the management information analysis unit 256 specifies the reproduction start position of the ES based on the time stamp indicated in the mark time stamp (mark-time-stamp) field 92! /.
  • the above processing is performed for each type of playback target included in content such as video, audio and subtitles.
  • a read instruction or the like is sent to the reproduction control unit 255, and a stream including all data is read.
  • the management information analysis unit 256 sets the PID added to the TS packet in the demultiplexer 257 for each type.
  • the demultiplexer 257 can demultiplex the clip AV stream read by the playback control unit 255 and extract various types of TS packets.
  • ES-PID value defined as the ES selection information is arbitrary.
  • FIG. 11 (b) shows an example of the list display screen 510 when there is a playlist including a default ES designation mark related to video. This screen is displayed on a TV (not shown) connected to the recorder 100, for example.
  • Fig. 11 (a) there are three playlists including the default ES designation mark (01001. vpls, 02002. vpls, 10000. vpls).
  • the management information analysis unit 256 specifies a default ES designation mark for each playlist. Then, the management information analysis unit 256 instructs the demultiplexer 257 to separate and extract each ES, and Instructs 258 to 260 to decode each ES.
  • the management information analysis unit 256 sends control information indicating the existence of a plurality of playback paths to the graphic control unit 207.
  • the graphic control unit 207 sets the display position so that thumbnail screens 1 to 3 corresponding to the ES to which the default ES designation mark is added are displayed side by side on the output destination TV. A display signal capable of such display is output.
  • video based on each ES is displayed on these screens. The user can confirm each video as a selectable playback path.
  • the thumbnail screen may be a still image or a moving image.
  • “Angle 1” indicating which ES is displayed can be displayed below each thumbnail screen.
  • Such a character string is described in a part of each playlist information by the recorder 100 at the time of recording.
  • the recorder 100 describes a character string such as “angle 1” in, for example, the PlayList—name field provided in the playlist file 83 in FIG. 8 or the mark name (mark_name) field in the playlist mark entry 90. can do.
  • the user While viewing the TV screen 510, the user designates a thumbnail screen to be played back, for example, using a remote controller (not shown) attached to the recorder 100. Then, the recorder 100 starts playback of the ES set as the default ES. By introducing the default ES designation mark, the ES that is initially played back will be constant regardless of the device used, and differences in default selection can be eliminated.
  • the recorder 100 according to the present embodiment generates and records ES selection information that automatically selects a default ES during recording unless otherwise specified by the user.
  • the thumbnails displayed on the display screen 510 and the video displayed in a reduced size are different among the programs 1 to 3.
  • a single clip AV stream file 85 is displayed as if there are multiple programs.
  • the video displayed when playback is actually started is also different.
  • the user can select another ES included in one program with the feeling of selecting a completely different program. In this way, based on the default ES designation mark, even if the thumbnail screen is displayed for each mark or as a simple list, the playback and management operations for programs containing multiple ESs are very intuitive. Become.
  • ES selection information is defined in management information different from the stream. Therefore, even when the ES selection information is changed later, it is not necessary to modify the data in the stream, and the processing amount can be greatly reduced.
  • This configuration is completely different from Patent Document 1 in which information (multi-view automatic switching table) for instructing switching of ES to be reproduced is described in the stream.
  • FIG. 12 (a) shows the relationship between a real Z virtual playlist that defines the default ES designation mark and a plurality of audio ESs.
  • Each playlist has a mark type (mark—type) field of 91. This field contains a numerical value (0x03) indicating the default ES designation mark.
  • the real playlist file (01001.rpls) includes ES selection information that designates the Japanese speech ES (A1) as the default ES. “0x100” is described in the ES PID field 93 corresponding to the play list mark of the real play list. This number corresponds to the ES—PID value “0x100” of ES (VI) at angle 1! /.
  • Two virtual playlist files (02002. vpls and 10000. vpls) are available for English audio ES (A2) and Chinese audio E Contains ES selection information that specifies S (A3) as the default ES.
  • “0x101” and “0x102” are described. These numbers correspond to the ES—PID values “0x101” and “0x102” for ESs (V2, V3) at Angles 2 and 3, respectively.
  • FIG. 12 (b) shows an example of the list display screen 510 when there is a playlist including a default ES designation mark related to audio.
  • the recorder 100 displays thumbnail screens 1 to 3 corresponding to each playlist side by side, but the thumbnail screens 1 to 3 may be the same. However, it can be distinguished by a character string provided on each thumbnail screen.
  • the data fields for storing such character strings are the PlayList-name field, the mark-name field, etc., as in the previous example.
  • the default ES may be automatically determined by the recorder 100.
  • the management information generation unit 253 specifies the ES designated by the broadcast station as the default ES.
  • the management information generation unit 253 identifies the ES designated by the broadcasting station in the SIZPSI information in the stream as the default ES.
  • the management information generation unit 253 automatically sets the default ES designation mark that identifies the ES specified in the component tag as the default ES. You can generate it! /
  • FIG. 11 and FIG. 12 the video and the audio are described separately. However, since the designation of the video ES and the designation of the audio ES can be performed independently, the example in FIG. 11 and the example in FIG. 12 can be mixed.
  • the default ES can be specified as described above.
  • this extension alone cannot support ES switching at any point in the play item or program sequence.
  • the user may switch between multiple views as appropriate according to the desired scene.
  • the default ES designation mark it is possible to specify which ES to start playback based on. The ES cannot be switched after playback starts.
  • the BD-RE standard is further expanded to switch the ES to be played back at an arbitrary point.
  • a process for switching will be described.
  • the user can define the ES switching timing and the ES specification after switching.
  • FIG. 13 shows an example when switching to an arbitrary ES at an arbitrary timing.
  • the clip AV stream 301 includes a video ES1 (302), a video ES2 (303), a video ES3 (304), and power.
  • the management information generating unit 253 of the recorder 100 defines a plurality of ES switching points 305, 306, 307, 308, and 309.
  • the ES switching point is specified as, for example, the elapsed playback time of video with respect to the beginning of the clip AV stream 301 or information corresponding to the time.
  • the management information generating unit 253 provides a plurality of default ES designation marks in the playlist file 83.
  • the default ES designation mark is defined to point to the beginning of the selected ES.
  • ES ES identification information
  • mark time—stamp value
  • a playback point 305 shown in Fig. 13 is a default ES designation mark for designating the ES to be reproduced first.
  • the next ES switching point 306 is defined as a default ES designation mark in which the ES-PID value corresponding to the ES2 after switching and the time stamp of the ES2 picture corresponding to that time are described.
  • the definitions of the other switching points 307, 308, and 309 are the same as the definition of the ES switching point 306.
  • the default ES designation mark that defines the playback points 305 and 306 to 309 has exactly the same data structure, and only differs depending on whether it indicates the beginning or middle of the time stamp power 3 ⁇ 4S to be described.
  • TS processing section 204 and decoder 206 start playback from video 3 corresponding to video ES3, and then to video ES2 at each switching point. Play the corresponding video 2, and continue playback while switching video 3, video 1 and video 3 in order.
  • the management information analysis unit 256 includes a plurality of default ES designation markers in the management information. Can be recognized. In addition, for each of them, it is possible to obtain an ES-PID value and a mark-time-stamp value in which the time stamp of the ES picture corresponding to the time to be reproduced is described. Therefore, the playback control unit 255 and the demultiplexer 257 are instructed to start playback from the ES3 initially. After that, when it is recognized that the playback switching point 306 has been reached based on the mark-time-stamp value, ES2 playback is started based on the ES-PID value from that time. Subsequently, the specified ES is played back at the time specified by the default ES designation mark by the same procedure.
  • Fig. 14 (a) shows an example of the graphical user interface (GUI) displayed on the editing screen
  • Fig. 14 (b) shows the correspondence between the ES to be edited and the default ES designation mark.
  • GUI graphical user interface
  • Fig. 14 (b) shows the correspondence between the ES to be edited and the default ES designation mark.
  • the user instructs an arbitrary ES switching point (switching time) to the TS620 including the three types of images ES621, 622, and 623 shown in Fig. 14 (b). Instruct the video ES to be played as well. As a result, the video ES that is played back in the section up to the next switching point is specified. By specifying multiple ES switching points and video ES for one content, the video is played back by switching to the video at the desired angle at the user's desired time.
  • the editing screen 601 is divided into various areas, and thumbnail images and GUI items are displayed. First, in the thumbnail areas 602, 603, and 604, the video of each video ES is displayed in parallel as a moving image.
  • an image based on the video ES to be reproduced is displayed at the position of the cursor 611 among the three types of video ES.
  • This video ES is the video ES specified at the previous switching point.
  • the third video is specified at the position of the cursor 611. Therefore, the thumbnail in the representative thumbnail area 609 The same image as that shown in the nail area 604 is displayed large!
  • Buttons 605 to 607 are provided corresponding to the respective images ES1 to ES3.
  • the user operates the instruction receiving unit 215 while confirming the editing screen 601 at the start of video playback and during playback, and sends an instruction to select a button having a desired angle.
  • the corresponding video ES is selected at the playback timing at which the instruction is sent.
  • the video continues to be played back based on that video ES until the next different video ES is selected.
  • the button is selected a total of five times including the beginning of the program, and as a result, five ES switching points are set.
  • the selection order of the buttons 605 to 607 is button 607, button 606, button 607, button 605 and button 607.
  • the ES switching points are set as shown in Fig. 14 (b) [631, 632, 633, 634, 635]. In this way, in the playback zone f3 ⁇ 464 1, 642, 643, 644, 645, video 3, video 2, video 3, video 1, video 3 are selected and played respectively.
  • Line 610 visually represents the flow of video switching. With 5 ES switching points, each video 1-3 is played back in the order and timing shown on line 610.
  • FIG. 15 shows a functional block configuration of TS processing section 204 for realizing the editing process shown in FIG.
  • the TS processing unit 204 includes a management information generating unit 253, a recording control unit 254, and a reproduction control unit 255.
  • the management information generation unit 253 has not only the function described in relation to FIG. 2, but also the function of the management information analysis unit 256 described in relation to FIG. On the other hand, the recording control unit 254 and the reproduction control unit 255 have the same functions as described with reference to FIGS. [0151]
  • the playback control unit 255 and the management information generation unit 253 perform the same processing as the playback control unit 255 and the management information analysis unit 256 shown in FIG. 3, and the clip AV stream recorded in the BD 205a and its management information Is read.
  • This clip AV stream includes a plurality of video ESs corresponding to angles.
  • the decoder 206 decodes each video ES and outputs each video to the graphic control unit 207.
  • the graphic control unit 207 adjusts the display position so that each video is displayed in the thumbnail areas 602, 603, and 604 shown in FIG. Adjust the display position so that one video is displayed in the representative thumbnail area 609.
  • the video displayed in the representative thumbnail area 609 is selected at the position of the cursor 611 and corresponds to the video ES!
  • the management information generation unit 253 specifies which video is to be played back from which position based on the user's button input, and generates ES selection information for each button input.
  • the management information generation unit 253 describes the generated ES selection information in the management information read from the BD 205a. More specifically, the management information generating unit 253 provides a default ES designation mark corresponding to each switching point in the playlist mark entry 90 in the playlist file 83. The management information to which the default ES designation mark is added is sent to the recording control unit 254 and the CPU 211.
  • the recording control unit 254 updates the management information on the BD 205a based on the management information.
  • the CPU 211 receives and analyzes the management information, and generates control information for displaying a list of the forces that each video ES is played in which order and for which section length.
  • the control information is sent to the graphic control unit 207.
  • the graphic control unit 207 outputs a signal for displaying the line 610 in FIG. 14A based on the control information. As a result, the line 610 is displayed on an external display device connected to the recorder 100, such as a television screen.
  • the edit screen 601 shown in FIG. 14 (a) is merely an example. It is not always necessary to have all the areas and GUI items, and the arrangement is arbitrary. For example, in order to display video images in parallel on the thumbnail screen, the processing capability for seamless playback of each thumbnail screen and the capacity to store the data obtained by the decoding process are available. A buffer is required. However, depending on the type of video, there may be no problem even if you do not have such hardware or software. For example, if the editing target is a video that does not need to be switched frequently, such as a multi-story program, there is no particular problem even if all ESs are not displayed as thumbnails. After one ES playback is finished, if you can display the video of another ES, you can select.
  • the present invention can be applied regardless of the type of broadcast or the type of recording medium as long as a plurality of the same type of elementary streams to be selectively reproduced is included in one program.
  • the recorder 100 when the configuration of the recorder 100 according to the present embodiment is used, it is possible to record in the DVD instead of the BD 205a.
  • the stream format that can be recorded on DVD is MPE G-2 program stream, not TS. Therefore, the recorder should decode the partial TS to generate a digital signal such as video Z audio, and perform the digital signal strength ES encoding to generate an MPEG-2 program stream!
  • the switching point of the default ES is set by the recorder 100 when the program is recorded or when the program recorded by the recorder 100 is edited.
  • the present invention can be applied even if the recording device and the device for setting the switching point of the default ES are not the same.
  • the recorder 100 can set a default ES switching point for a program recorded on a recording medium writable by another device and a content recorded on a reproduction-only recording medium such as a package medium.
  • an entry for the default ES designation mark can be added to the existing management information. Therefore, if the default ES designation mark is added to the management information of programs recorded on writable recording media (RAM media such as DVD-RAM and BD-RE), a switching point for any default ES can be set. it can. It does not matter whether the recording was done by the recorder 100 or by other equipment.
  • ROM media such as DVD-R and BD-ROM
  • the default ES designation mark for the management information on the media is not available. Appending and overwriting are impossible.
  • the default ES designation mark information and video information need not be recorded on the same medium.
  • ROM media management information may be copied to the HDD 205 b of the recorder 100 and default ES designation mark information may be added to the management information. It is also possible to record only the default ES designation mark that is the difference without copying the management information.
  • the recording destination of the default ES designation mark may be a memory other than the HDD, for example, the RAM 212, the nonvolatile program ROM 210, or the like. This allows you to set an arbitrary default ES switching point for content recorded on ROM media.
  • recorder 100 stores an ID for uniquely identifying each ROM medium and information on a default ES designation mark in association with each other. As a result, even if the user removes the ROM media from the recorder 100 and then inserts it again, the default ES switching point set up to that point can be used as it is.
  • a data processing apparatus for recording a program records a program (for example, a digital broadcast program) including a plurality of ESs of the same type that are alternatively played back, on a recording medium such as an optical disc,
  • the user can receive an instruction from which ES to start playback for the program.
  • the data processing apparatus Based on the received instruction, the data processing apparatus records information specifying the ES to be reproduced first on the recording medium. The information specifies the beginning of the ES to be played first.
  • the data processing device provides ES switching patterns that span multiple ESs that are uniquely defined by the user by providing information that specifies not only the beginning of the ES but also the middle of the ES as the playback start point. can do.
  • the switching pattern can also be reproduced at any time by recording the above information on the recording medium.
  • Multi-view program including a plurality of ESs, information specifying ES to be reproduced first, recording medium recording ES switching information, and the like, and data processing device for reproducing such recording medium power ES According to this, it becomes easy to manage playback of a program including a plurality of ESs.

Abstract

 択一的に再生される同じ種別のデータストリームが複数存在するときにおいて、コンテンツの再生開始時および/または再生中に、ユーザがどのデータストリームを再生するかを容易に指定できるようにする。  データ処理装置は、コンテンツの多重化ストリームを受信する受信部と、多重化ストリームを解析して記録媒体に書き込むための処理を行って処理後の多重化ストリームを記録媒体に書き込む指示を出力する記録制御部と、多重化ストリームの解析結果に基づいて、コンテンツの再生に必要な管理情報を生成する管理情報生成部とを備えている。多重化ストリームは択一的に再生される同じ種別の複数のデータストリームを含んでいる。管理情報生成部は、複数のデータストリームのうちのいずれのデータストリームに基づいてコンテンツを再生するかを特定する選択情報を管理情報に付加する。記録制御部は、管理情報を記録媒体にさらに書き込む指示を出力する。

Description

明 細 書
データ処理装置
技術分野
[0001] 本発明は、デジタル放送等のストリームを記録媒体に記録する技術、および、記録 されたストリーム力 映像等を再生する技術に関する。
背景技術
[0002] 日本のデジタル放送に用いられる映像 ·音声フォーマット、番組配列情報等は、社 団法人電波産業界 (ARIB)によって策定された「ARIB STD— BIO (平成 9年 6月 19日 1. 0版策定)」等の ARIB規格に準拠している。 ARIB規格では、映像、音声等 に関するシステム層の多重化フォーマットとして、 MPEG— 2トランスポートストリーム( TS)を指定している。
[0003] DVD等の蓄積メディア向けの記録フォーマットとして用いられてきた MPEG— 2プ ログラムストリーム (PS)と比較すると、 TSにはより多くの情報を多重化できる。例えば 、複数の映像'音声等のエレメンタリ'ストリーム (ES)を多重化して一つのストリームに することが可能である。また、複数の ESの組として定義された番組 (Program)を多 重化して 1つのストリームにすることもできる。多重化された ESは、同じく TS中に多重 化されている SI ZPSIと呼ばれる番組配列情報によって識別される。なお、 SIZPSI には、多重化情報だけでなぐ番組名等の付加的な情報 (番組情報)も含まれている
[0004] TSには種々の ESを多重化し得るため、日本語と英語など複数の音声 ESを含む番 組、複数の映像 ESを持つマルチビューのスポーツ番組等を実現できる。このような 複数の音声 ESや映像 ESを含む番組は、各 1つの ESし力含まない番組と比較すると 表現の幅が広がっているといえる。しかし出力可能な映像、音声が各 ESの数に制限 されている点において変わることはなぐさらに多様な再生を可能にするためには ES の数を増やさざるを得ない。データ量等との観点力 すると、これでは必ずしも効果 的に表現の幅を広げて 、るとは 、えな 、。
[0005] 特許文献 1は、多重化されている ESの数以上の多様な態様で再生を可能にするた めの構成を開示している。具体的には、特許文献 1は、再生すべき ESの切り替えを 指示する情報 (マルチビュー自動切替テーブル)を放送局が自ら作成して送信する。 ユーザ側の機器は、マルチビュー自動切替テーブルに基づいて、再生中に指定さ れた ESに切り替える。この技術によれば、放送局に指定されたタイミングで視聴対象 の ESが切り替えられるため、見かけ上、 ESの数以上の出力態様で映像等の再生が 可會 になる。
[0006] 番組をデジタル記録するに際しては、ストリームのみを記録するだけではなぐその ストリームに関する管理情報も同時に記録することが多い。上述の特許文献 1に開示 されているテーブルは、管理情報の一つと捉えることができる。管理情報を利用すれ ば、タイトル等の付加情報の付与、任意の再生手順の定義、飛び込み再生のための エントリーポイントの設定等が可能になる。また、時間情報とアドレス情報をあわせて 管理することで、ランダムアクセス性能の向上や、早送り'早戻しやスロー再生等の特 殊再生も可能になる。
[0007] 管理情報の形式は、記録媒体の種類に応じた規格にぉ 、て規定されて 、る。例え ば管理情報の形式は、 DVD— RAMや DVD— RZRWに対しては DVD Video Recording規格(DVD— VR規格)において規定され、 Blu— ray Discに対しては Blu-ray Rewritable規格(以下 BD— RE規格)において規定されている。また、 S Dカード等の半導体メディアに対してもさらに別の規格によって管理情報の形式が規 定されている。
特許文献 1 :特開 2002— 314960号公報
発明の開示
発明が解決しょうとする課題
[0008] 現在、複数の ESを含む番組を録画し、管理情報を利用して再生等を行うことは可 能ではあるが、既存の規格の枠内では視聴者 (ユーザ)が利用可能な再生設定に関 する自由度は低い。その理由は、既存の規格の多くは従来のアナログ放送の記録を 想定して策定されており、マルチビュー番組に代表されるような複数の ESを含む番 組の記録を想定して 、な 、ためである。
[0009] これは、デジタル放送の TS記録を想定する規格 (BD—RE規格)に関しても同様 である。すなわち複数の ESを含む番組を録画して再生すると、機器によって最初に 再生される ESが相違する可能性がある。機器がどの ESを再生するかは任意だから である。また、当初再生される ESとは異なる ESを再生するためには、ー且再生を開 始し、その後ユーザが手動により ESを切り替える必要がある。これでは、再生を行う たびに同じ操作が必要となり、非常に不便である。特に、映像および音声等のそれぞ れにつ 、て ESが複数含まれて ヽる場合には、それぞれ好みの ESを選択しなければ ならない。このような点を考慮すると、複数の ESを含む番組を録画しても、その利点 を十分に活かせて 、るとは 、えな 、。
[0010] また、複数の ESを含む番組の開始時のみならず、その途中の任意のタイミングで E Sを切り替えた 、としても、ユーザが再生中に手動操作によって切り替える他はな!/、。 そして、好みの切り替えパターンは保存されないため、同じパターンで繰り返しその 番組を視聴したとしても、再生のたびに同じ操作が必要であり、不便である。
[0011] なお「プレイリスト」という概念を利用して、再生経路を規定する技術はすでに存在し ている。し力し、プレイリストは、例えば 1つの ES内、または異なる番組の異なる ESに またがった再生経路を規定する際に利用することは可能であるが、 1つの番組の異な る ESにまたがった再生経路を規定することはできない。よって従来のプレイリストでは 上述した不便さを解決することはできない。
[0012] さらに、複数の ESを切り替えて再生するということが想定されていないため、番組に 複数の ESが含まれて 、ることが分かりやすくユーザに伝えられて!/、な 、。すなわち、 ユーザの管理上、複数の ESがあるかどうかの情報がわ力りにくく不便である。
[0013] 本発明の目的のひとつは、択一的に再生される同じ種別のデータストリームが複数 存在するときにおいて、コンテンツの再生開始時および Zまたは再生中に、ユーザが どのデータストリームを再生するかを容易に指定できるようにすることである。また、本 発明の他の目的は、各データストリームに基づくコンテンツの再生態様、および、ュ 一ザが設定したコンテンツの再生態様を、ユーザが容易に把握できるようにして確実 な選択を可能にすることである。
課題を解決するための手段
[0014] 本発明のデータ処理装置は、コンテンツの多重化ストリームを受信する受信部と、 前記多重化ストリームを解析して記録媒体に書き込むための処理を行 、、処理後の 前記多重化ストリームを前記記録媒体に書き込む指示を出力する記録制御部と、前 記多重化ストリームの解析結果に基づいて、前記コンテンツの再生に必要な管理情 報を生成する管理情報生成部とを備えている。前記多重化ストリームは択一的に再 生される同じ種別の複数のデータストリームを含んでいる。前記管理情報生成部は、 前記複数のデータストリームのうちのいずれのデータストリームに基づいて前記コンテ ンッを再生するかを特定する選択情報を前記管理情報として付加し、前記記録制御 部は、前記管理情報を前記記録媒体にさらに書き込む指示を出力する。
[0015] 前記管理情報生成部は、前記選択情報として、選択された前記データストリームを 特定する識別情報、および、特定された前記データストリームにおける再生開始点を 示す開始点情報を前記管理情報に付加してもよい。
[0016] 前記管理情報生成部は、識別された前記データストリームにおける再生終了点を 示す終了点情報をさらに生成し、前記管理情報に格納してもよい。
[0017] 前記管理情報生成部は、前記選択情報を複数生成して、前記管理情報に付加し てもよい。
[0018] 前記管理情報生成部は、第 1時刻以降の前記コンテンツの再生に対しては、第 1 データストリームを特定する識別情報、および、前記第 1時刻を前記再生開始点とし て特定する開始点情報を第 1選択情報として生成し、前記第 1時刻より後の第 2時刻 以降の前記コンテンツの再生に対しては、前記第 1データストリームとは異なる第 2デ 一タストリームを特定する識別情報、および、前記第 2時刻を前記再生開始点として 特定する開始点情報を、第 2選択情報として生成してもよい。
[0019] 前記管理情報生成部は、ユーザ力 指示された再生開始点に基づいて、前記開 始点情報を生成してもよい。
[0020] 前記管理情報生成部は、予め定められた再生開始点に基づいて、前記開始点情 報を生成してもよい。
[0021] 前記データ処理装置は、指定された再生経路の削除に関する削除指示を受け取 る指示受信部と、前記削除指示に基づいて、前記複数のデータストリームのうち、指 定された前記再生経路に対応するデータストリーム、および、前記管理情報に含まれ る指定された前記再生経路に関する情報を、前記記録媒体から削除する指示を出 力する記録制御部とをさらに備えて 、てもよ 、。
[0022] 本発明による記録媒体には、コンテンツの多重化ストリームを含むストリームファイル と、前記コンテンツの再生に必要な管理情報を含む管理情報ファイルとが記録される 。前記多重化ストリームには択一的に再生される同じ種別の複数のデータストリーム が多重化されており、前記管理情報には前記複数のデータストリームのうちのいずれ のデータストリームに基づいて前記コンテンツを再生するかを特定する選択情報が含 まれている。
[0023] 本発明によるデータ処理装置は、前記記録媒体から前記管理情報ファイルおよび 前記ストリームファイルを読み出す再生制御部と、読み出された前記管理情報フアイ ルから前記選択情報を取り出し、前記選択情報によって特定されたデータストリーム の抽出を指示する管理情報解析部と、前記指示に基づいて、前記多重化ストリーム から前記データストリームを分離する分離部と、分離された前記データストリームに基 づ 、て前記コンテンツを再生するデコーダとを備えて 、る。
[0024] 前記管理情報は、第 1時刻以降の前記コンテンツの再生に対しては、第 1データス トリームを特定する識別情報、および、前記第 1時刻を前記再生開始点として特定す る開始点情報を第 1選択情報として含み、かつ、前記第 1時刻より後の第 2時刻以降 の前記コンテンツの再生に対しては、前記第 1データストリームとは異なる第 2データ ストリームを特定する識別情報、および、前記第 2時刻を前記再生開始点として特定 する開始点情報を第 2選択情報として含んでおり、前記管理情報解析部は、前記第 1選択情報および前記第 2選択情報に基づいて、前記第 1時刻から前記第 2時刻ま では前記第 1データストリームの抽出を指示し、前記第 2時刻以降は前記第 2データ ストリームの抽出を指示してもよ 、。
[0025] 前記データ処理装置は、制御情報に基づ!/、て、映像を外部機器にぉ 、て表示す るための信号を生成するグラフィック制御部をさらに備えており、前記管理情報解析 部は、前記第 1選択情報および前記第 2選択情報に基づいて、複数の再生経路の 存在を示す制御情報を出力し、前記グラフィック制御部は、前記制御情報に基づい て前記複数の再生経路の各々に対応する映像を並べて表示するための信号を出力 してちよい。
[0026] 本発明のデータ処理装置は、コンテンツの編集に用いられる。前記コンテンツは多 重化ストリームとして予め記録媒体に記録されており、前記多重化ストリームは択一的 に再生される同じ種別の複数のデータストリームを含んでいる。前記データ処理装置 は、ユーザから、前記複数のデータストリームのうちのひとつを選択する指示を受け 取る指示受信部と、選択されたデータストリームを再生対象として指定する選択情報 を生成し、前記管理情報として出力する管理情報生成部とを備えている。
[0027] 前記指示受信部は、再生の開始点を特定する指示をさらに受け取り、前記管理情 報生成部は、選択された前記データストリームを特定する識別情報、および、前記開 始点を示す開始点情報を、前記選択情報として生成してもよ 、。
[0028] 前記データ処理装置は、前記選択情報を前記記録媒体に記録する指示を出力す る記録制御部をさらに備えていてもよい。
[0029] 前記データ処理装置は、前記選択情報を保持するメモリをさらに備えていてもよい
[0030] 前記指示受信部は、データストリームを選択する指示および再生の開始点を特定 する指示をそれぞれ複数回受け取り、前記管理情報生成部は、前記選択情報を複 数生成してもよ ヽ。
[0031] 前記データ処理装置は、制御情報に基づ!/、て、外部機器で映像を表示するための 信号を生成するグラフィック制御部をさらに備えており、前記管理情報生成部は、前 記選択情報に基づ 、て、再生されるデータストリームの順序および各データストリー ムの再生区間を示す制御情報を出力し、前記グラフィック制御部は、前記制御情報 に基づ!/、て、前記順序および再生区間を示す映像の信号を出力してもよ 、。
発明の効果
[0032] 本発明によれば、映像、音声、データ等の種別ごとに複数のデータストリーム (ES) が多重化されている多重化ストリームに関し、種別ごとに、再生開始時にどの ESをデ フォルトとして選択すべきかを示す ES選択情報を管理情報として付加する。再生装 置は、多重化ストリームの再生時に ES選択情報によって特定された ESを自動的に 再生するため、ユーザはその選択後は繰り返し ESを選択する必要はなくなる。 図面の簡単な説明
[図 1]本実施形態によるハードディスクドライブ内蔵 BDレコーダ 100の機能ブロックの 構成を示す図である。
[図 2]デジタルチューナ 201aおよび記録処理に関する TS処理部 204の機能ブロック の構成を示す図である。
[図 3]再生処理に関する TS処理部 204およびデコーダ 206の機能ブロックの構成を 示す図である。
[図 4] (a)〜(e)は、レコーダ 100の記録処理に関連するトランスポートストリームとタリ ップ AVストリームとの関係を示す図である。
[図 5]BD205aの記録領域と、そのディレクトリ Zファイル構造を示す図である。
[図 6]クリップ AVストリーム 85に含まれる複数の ESを模式的に示す図である。
[図 7] (a)〜 (d)は、管理情報とストリームデータとの関係を示す図である。
[図 8]プレイリストファイル 83に格納される情報 (エントリ)およびそのデータ構造を示 す図である。
[図 9]録画処理の手順を示すフローチャートである。
[図 10]プレイリストの生成処理の手順を示すフローチャートである。
[図 11] (a)はデフォルト ES指定マークを規定したリアル Zバーチャルプレイリストと、 複数の映像 ESとの関係を示す図であり、 (b)は映像に関するデフォルト ES指定マー クを含むプレイリストが存在するときの一覧表示画面 510の例を示す図である。
[図 12] (a)はデフォルト ES指定マークを規定したリアル Zバーチャルプレイリストと、 複数の音声 ESとの関係を示す図であり、 (b)は音声に関するデフォルト ES指定マー クを含むプレイリストが存在するときの一覧表示画面 510の例を示す図である。
[図 13]任意のタイミングで任意の ESに切り替えるときの例を示す図である。
[図 14] (a)は編集画面に表示されたグラフィカル ·ユーザ ·インターフェース(GUI)の 例を示す図であり、 (b)は編集対象の ESとデフォルト ES指定マークとの対応関係を 示す図である。
[図 15]図 14に示す編集処理を実現するための TS処理部 204の機能ブロックの構成 を示す図である。 符号の説明
100 HDD内蔵 BDレコーダ
112 メモリカード
114 BD
201a デジタルチューナ
201b アナログチューナ
202 ADコンバータ
203 MPEG— 2エンコーダ
204 TS処理部
205a BD
205b HDD
206 MPEG— 2デコーダ
207 グラフィック制御部
208 メモリ
209 DAコンバータ
210 プログラム ROM
211 CPU
212 RAM
213 CPUバス
214 ネットワーク制御部
215 指示受信部
216 インターフェース (IZF)部
217 メモリカード制御部
250 システム制御部
251 チューナ部
252 デマノレチプレクサ
253 管理情報生成部
254 記録制御部 255 再生制御部
256 管理情報解析部
257 デマルチプレクサ
258 ビデオデコーダ
259 オーディオデコーダ
260 データデコーダ
発明を実施するための最良の形態
[0035] 以下、添付の図面を参照して、本発明によるデータ処理装置の実施形態を説明す る。本実施形態においては、データ処理装置はハードディスクドライブを内蔵した光 ディスクレコーダであるとして説明する。光ディスクには、ストリームデータと再生手順 等を示した管理情報ファイルが記録される。このようなストリームデータとそれに対応 する管理情報を記録するためのフォーマットとしては、記録対象のメディアに応じて D VD— VRや BD— RE等の規格が策定されている。本実施形態においては、「光ディ スク」として Blu— rayディスク(BD)を想定し、 BD— RE規格を利用した記録を例に挙 げて説明する。 BD— RE規格では、ストリームデータを MPEG— 2トランスポートストリ ーム (TS)フォーマットで記録する。 TSを用いているため、複数の ESを含むデジタル 放送ストリームであっても、ほとんど手を加えずにそのまま記録することが可能である
[0036] 本実施形態においては、単一のコンテンツ(1放送番組など)の TSには、同じ種別 のエレメンタリストリーム (ES)が複数多重化されており、それらは択一的に再生される とする。「種別」とは、映像、音声および字幕などを示す。「同じ種別の ES」とは、例え ば映像の ESが複数含まれていることを意味する。本実施形態において、「コンテンツ を再生する」とは、種別が同じか異なっているかを問わず、少なくとも 1つの ESに基づ いて映像、音声、字幕などが出力されていることを言う。
[0037] まず本実施形態による光ディスクレコーダの概要を説明する。
[0038] 光ディスクレコーダは、コンテンツの TSを受信する受信部を有している。そして受信 した TS力 必要な番組のパケットを取り出してパーシャル TSを生成し、 TS処理部に 送る。 TS処理部は、その TSを解析して記録媒体 (光ディスク、ハードディスクなど)に 書き込むための処理を行い、ストリームファイルとして記録媒体に書き込む。あわせて
、TS処理部は解析結果に基づいてコンテンツの再生経路に関する管理情報を生成 する。
[0039] TS処理部の構成および動作をより具体的に説明すると、 TS処理部は管理情報生 成部および記録制御部を含んでいる。管理情報生成部は、複数の ESのうちのいず れの ESに基づいてコンテンツを再生するかを特定する選択情報を管理情報として付 加する。そして記録制御部は、その管理情報を管理情報ファイルとして記録媒体にさ らに記録する。例えば、ユーザは、スポーツ番組の複数の映像の ES (アングル 1、 2、 3)のうちどの ESから再生を開始するかを指定することができる。または、ユーザは、 映画の複数の音声の ES (日本語、英語、中国語)の ESのうちどの ESから再生を開 始する力を指定することもできる。記録制御部は、どの ESを指定するかを示す選択 情報を管理情報として付加する。ユーザが録画予約時などにどの ESを指定する力を 設定しておくと、その選択情報が付加された管理情報が録画時に生成され、記録媒 体に格納される。この結果、ユーザは録画した番組を初めて視聴する時から、映像、 音声等に関して指定した ESから再生を開始することができる。
[0040] 以下、図 1から図 3を参照しながら、本実施形態によるハードディスクドライブ内蔵 B Dレコーダ 100 (以下「レコーダ 100」と記述する)の具体的な構成を説明する。図 1は 、レコーダ 100の機能ブロックの構成を示す。レコーダ 100は、記録媒体として BD20 5aおよびハードディスク 205bを有して!/、る。
[0041] レコーダ 100は、デジタルチューナ 201aおよびアナログチューナ 201bと、 ADコン ノータ 202と、 MPEG— 2エンコーダ 203と、 TS処理部 204と、 MPEG— 2デコーダ 206と、グラフィック帘 U御咅 207と、メモリ 208と、
Figure imgf000012_0001
CPUノ ス 213 と、ネットワーク制御部 214と、指示受信部 215と、インターフェース (IZF)部 216と、 メモリカード制御部 217と、システム制御部 250とを含む。なお、図 1には、光ディスク 205aがレコーダ 100内に記載されているが、光ディスク 205aはレコーダ 100から取 り外し可能であり、レコーダ 100自体の構成要素ではない。
[0042] 以下、各構成要素の機能を説明する。デジタルチューナ 201aは、アンテナ(図示 せず)から 1以上の番組が含まれるデジタル信号を受け取る。デジタル信号として伝 送される MPEG— 2トランスポートストリーム (TS)には複数の番組のパケットが混在し ている。複数の番組のパケットを含むトランスポートストリームは"フル TS"と呼ばれる 。フル TSには、複数の番組のうちから特定の番組のデータを抽出するために必要な 種々の制御パケット (例えば番組表パケット、番組対応表パケット等の PSIパケット、 S Iパケット)も含まれている。デジタルチューナ 201aは、選局を行ってフル TSから選局 された番組のパケットおよび必要な制御パケットを取り出し、所定の処理を加えて"パ 一シャル TS"として出力する。またデジタルチューナ 201aは、パーシャル TSの生成 時に取得したパーシャル TSに関する制御情報 (ストリーム情報)も出力する。
[0043] フル TSから所望のチャンネルのパケットを取り出す手順は以下のとおりである。い ま、希望の番組の番組番号 (チャンネル番号)を Xとする。まずはじめに、フル TSから 番組表パケット(PAT— TSP)が検索される。番組表パケットのパケット ID (PID)には 、必ず 0が与えられているので、その値を有するパケットを検索すればよい。番組表 パケット内の番組表には、各番組番号と、その番組番号に対応する各番組の番組対 応表パケット(PMT— TSP)の PIDが格納されている。これにより、番組番号 Xに対応 する番組対応表 PMTのパケット ID (PID)を特定できる。番組対応表 PMTの PIDを XXとする。
[0044] 次に、 PID=XXが付された番組対応表パケット(PMT— TSP)を抽出すると、番組 番号 Xに対応する番組対応表 PMTが得られる。番組対応表 PMTには、番組ごと〖こ 、視聴の対象として各番組を構成する映像 ·音声情報等が格納された TSパケットの P IDが格納されている。例えば、番組番号 Xの映像情報の PIDは XVであり、音声情報 の PIDは XAである。このようにして得られた映像情報を格納したパケットの PID (=X V)と、音声情報を格納したパケットの PID (=XA)とを利用して、フル TSから特定の 番組に関する映像 .音声のパケットを抽出できる。
[0045] なお、フル TSからパーシャル TSを生成する際には、必要な映像 ·音声情報を格納 したパケットを取り出すだけでなく、 PSI (Program Specific Information)バケツ トおよび SI (Service Information)パケットも抽出し、変更する必要がある。 PSIパ ケットとは、番組表パケット(PAT— TSP)および番組対応表パケット(PMT— TSP) 等を総称するパケットである。 PSIパケットを修正する理由は、フル TSとパーシャル T Sとでは含まれる番組数等が異なるため、番組表および番組対応表をパーシャル TS に適合させる必要が生じる力もである。一方、 SIパケットとは、フル TSに含まれる番 組の内容、スケジュール Zタイミング等を記述するデータ、独自に定義された拡張情 報 (これらは「番組配列情報」とも呼ばれる)等を含むパケットである。フル TSでは SI パケットに含まれるデータは 20〜30種類にも上る。これらのデータのうち、パーシャ ル TSの再生等に関して重要なデータのみが抽出されて 1つの SITパケットが生成さ れ、パーシャル TS内に多重化される。またパーシャル TSでは、 SITパケットにはその ストリームがパーシャル TSであることを示す情報(partial transport stream des criptor)が格納されている。パーシャル TS内に SITパケットを多重化することは慣用 されている。これは、欧州 Z日本のデジタル放送規定 (DVBZARIB)との整合性の ためである。
[0046] アナログチューナ 201bは、アンテナ(図示せず)からアナログ信号を受け取り、周波 数に基づ 、て選局を行って必要な番組の信号を取り出す。そして番組の映像および 音声信号を ADコンバータ 202に出力する。
[0047] ADコンバータ 202は入力された信号をデジタル変換して MPEG— 2エンコーダ 20 3に供給する。 MPEG— 2エンコーダ 203 (以下「エンコーダ 203」と記述する)は、録 画の開始指示を受け取ると、供給されたアナログ放送のデジタルデータを MPEG— 2形式に圧縮符号ィ匕してトランスポートストリームを生成し、 TS処理部 204に入力す る。この処理は、エンコーダ 203が録画の終了指示を受け取るまで継続される。ェン コーダ 203は圧縮符号ィ匕を行うために、参照ピクチャ等を一時的に保持するノッファ (図示せず)等を有している。なお、同時に視聴が行われる際には、エンコーダ 203 はトランスポートストリームを MPEG— 2デコーダ 206に入力する。
[0048] TS処理部 204は、動画の記録時にはパーシャル TSを受け取り、クリップ AVストリ ーム(ClipAVストリーム)を生成し、 BD205aおよび Zまたは HDD205bに記録する 。クリップ AVストリームとは、 BD205aに記録するための形式を有するデータストリー ムである。クリップ AVストリームは複数の「ソースパケット」力 構成されており、「ソー スパケット」はパーシャル TSを構成する各 TSパケットに所定のヘッダを付カ卩して生成 される。なお、クリップ AVストリームを生成する際の処理の詳細は、図 4 (a)〜(e)を 参照しながら後述する。本実施形態においては、 HDD205bに記録されるストリーム の形式も便宜的にクリップ AVストリームであるとする。
[0049] また、 TS処理部 204は、クリップ AVストリームの生成とともにそのストリームを BD20 5aの再生などを制御し、格納された各種のデータ位置を管理するための管理情報を 生成し、 BD205aに記録する。
[0050] TS処理部 204は、動画の再生時には、 BD205aおよび Zまたは HDD205bからク リップ AVストリームおよび管理情報を読み出し、それらの管理情報およびクリップ AV ストリームに基づいてパーシャル TSを生成し、 MPEG— 2デコーダ 206に出力する。
[0051] TS処理部 204は、後述するメモリカード制御部 217との間でも管理情報およびタリ ップ AVストリームを授受するように動作してもよぐこの結果、メモリカード 112に番組 を録画し、録画された番組をメモリカード 112から再生することもできる。また TS処理 部 204は、各種の記録媒体間で管理情報およびクリップ AVストリームのコピー、ムー ブ等を行う際にもデータの転送を仲介する。
[0052] TS処理部 204のさらに具体的な構成および動作は、後に図 2、図 3および図 10を 参照しながら詳述する。なお、本明細書では、 TS処理部 204が BD205aおよび Zま たは HDD205bにデータを書き込み、またはそれらからデータを読み出すとして説明 しているが、これは説明の便宜のためである。 BD205aや HDD205bに対するストリ ームの書き込みや読み出しは、実際には、ディスクの回転、ヘッドの移動とともに各々 のドライブ装置に設けられたコントローラ(図示せず)が行っている。 TS処理部 204は そのようなコントローラに対して指示を送り、データを授受することによって、データの 書き込みおよび読み出しが実現される。
[0053] MPEG— 2デコーダ 206 (以下「デコーダ 206」と記述する)は、供給されたパーシ ャル TSを解析して MPEG— 2圧縮符号ィ匕データを取得する。そして、その圧縮符号 化データを伸長して非圧縮データに変換し、グラフィック制御部 207に供給する。ま た、デコーダ 206は、 MPEG— 2規格の圧縮符号ィ匕データのみならず、例え «JPE G規格に従った静止画データも非圧縮データに変換することができる。グラフィック制 御部 207には内部演算用のメモリ 208が接続されており、オン'スクリーン 'ディスプレ ィ(On Screen Display ;OSD)機能を実現できる。例えば、グラフィック制御部 20 7は種々のメニュー画像と映像とを合成して DAコンバータ 209に出力することができ る。 DAコンバータ 209は、入力された OSD合成画像および音声データをアナログ変 換して出力する。出力先は、例えば TV (図示せず)である。
[0054] CPUバス 213はレコーダ 100内の信号を伝送する経路であり、図示されるように各 機能ブロックと接続されている。また、 CPUバス 213には、後述するシステム制御部 2 50の各構成要素も接続されて 、る。
[0055] ネットワーク制御部 214は、レコーダ 100をインターネット等のネットワーク 101に接 続するためのインターフェイスであり、例えば、イーサネット(登録商標)規格に準拠し た端子およびコントローラである。ネットワーク制御部 214は、ネットワーク 101を介し てデータを授受する。このデータは、例えば放送番組に関する番組表のデータや、 レコーダ 100の動作を制御するためのソフトウェアプログラムの更新データである。
[0056] 指示受信部 215は、レコーダ 100の本体部に設けられた操作ボタン、または、リモ ートコントローラ力もの赤外線を受光する受光部である。指示受信部 215は、ユーザ から、例えば録画の開始 Z停止、録画した番組の再生の開始 Z停止等の指示や、 予約録画の指示と予約録画を行う番組の放送日時、チャンネルなどの通知、および 、後述する、どの ESをデフォルト ESとして設定するか等の指示を与える。
[0057] インターフェース(IZF)部 216は、レコーダ 100が他の機器と通信するためのコネ クタおよびその通信を制御する。 IZF部 216は、例えば USB2. 0規格の端子、 IEE E1394規格の端子および各規格によるデータ通信を可能とするコントローラを含み、 各規格に準拠した方式でデータを授受することができる。例えば、レコーダ 100は、 USB2. 0規格の端子を介して PCや、カムコーダ(図示せず)等と接続され、 IEEE1 394規格の端子の端子を介してデジタルノヽイビジョンチューナや、カムコーダ(図示 せず)等と接続される。
[0058] メモリカード制御部 217は、メモリカード 112をレコーダ 100に装填するためのスロッ ト、および、レコーダ 100とメモリカード 112との間のデータ通信を制御するコントロー ラである。メモリカード制御部 217は、装填されたメモリカード 112から静止画データ ファイル、動画データファイル等を読み出して、 CPUバス 213に伝送する。
[0059] システム制御部 250は、レコーダ 100内の信号の流れを含む全体的な処理を制御 する。システム制御部 250は、プログラム ROM210と、中央制御ユニット(CPU) 211 と、 RAM212とを有している。それぞれは CPUバス 213に接続されている。プロダラ ム ROM210にはレコーダ 100を制御するためのソフトウェアプログラムが格納されて いる。
[0060] CPU211は、レコーダ 100の全体の動作を制御する。 CPU211は、コンピュータプ ログラムを読み出して実行することにより、プログラムに基づ!/、て規定される処理を実 現するための制御信号を生成し、 CPUバス 213を介して各構成要素に出力する。プ ログラムに基づいて規定される処理とは、たとえば後述の受信処理、記録処理、再生 処理および編集処理等である。
[0061] メモリ 212は、 CPU211がプログラムを実行するために必要なデータを格納するた めのワーク領域を有する。例えば、 CPU211は、 CPUバス 213を使用してプログラム ROM210からプログラムをランダムアクセスメモリ(RAM) 212に読み出し、そのプロ グラムを実行する。
[0062] コンピュータプログラムは、 CD— ROM等の記録媒体に記録して巿場に流通され、 または、インターネット等の電気通信回線を通じて伝送される。これにより、 PC等を利 用して構成されたコンピュータシステムを、本実施形態によるレコーダ 100と同等の 機能を有するデータ処理装置として動作させることができる。
[0063] なお図 1は、受信機能、記録機能、再生機能等の複数の機能を有するレコーダ 10 0を示しているが、各機能は独立しており、図 1の構成と同等の信号の授受が可能で あれば、これらは複数の装置として実現してもよい。例えば、チューナ 201aおよび 20 lb、デコーダ 206、グラフィック制御部 207および DAC209を TV (図示せず)の機能 として設けることができる。また、 HDD205bを単独の機器として設けることもできる。 そして、 TV、レコーダおよび HDD205bを、例えば IEEE1394によって接続すれば よい。
[0064] 次に、図 2を参照しながら、デジタルチューナ 201aの機能および記録処理に関す る TS処理部 204の機能をより詳細に説明する。図 2は、デジタルチューナ 201aおよ び記録処理に関する TS処理部 204の機能ブロックの構成を示す。デジタルチュー ナ 201aは、チューナ部 251と、デマルチプレクサ 252とを有している。また、 TS処理 部 204は、管理情報生成部 253および記録制御部 254を有して 、る。
[0065] デジタルチューナ 201aのチューナ部 251はデジタル放送波を受信し、フル TSを 取り出す。その後デマルチプレクサ 252は、フル TSから録画対象の番組のデータを 含むパーシャル TSを生成し、記録制御部 254に送る。またデマルチプレクサ 252は 、パーシャル TSの生成時に取得したパーシャル TSに関する制御情報 (ストリーム情 報)も出力する。すなわちデマルチプレクサ 252は、パーシャル TSへの変換と同時 に、ストリーム中の SIZPSIや ES特徴点等のストリーム情報を抽出し、管理情報生成 部 253に送る。その結果、管理情報生成部 253はストリーム情報を格納した管理情 報を生成する。
[0066] 記録制御部 254は、受け取ったパーシャル TSおよび管理情報を、記録媒体 205a に記録する。留意すべきは、記録制御部 254はパーシャル TS自体を BD205aに書 き込むのではなぐ所定の拡張ヘッダを付加する処理を行ってクリップ AVストリーム を生成し、そのストリームを BD205aに書き込む。この処理の詳細は図 4を参照しなが ら後述する。
[0067] 次に図 3を参照しながら、再生処理に関する TS処理部 204の機能およびデコーダ 206の機能をより詳細に説明する。
[0068] 図 3は、再生処理に関する TS処理部 204およびデコーダ 206の機能ブロックの構 成を示す。再生時は、まず、再生制御部 255によって記録媒体 205aから管理情報 のファイルが読み出される。管理情報解析部 256は、読み出された管理情報に従つ て、再生制御部 255に対してパーシャル TSの読み込み制御を行い、パーシャル TS をデマルチプレクサ 257へ入力する。同時に、管理情報解析部 256はデマルチプレ クサ 257に対して、パケット識別子 (PID)設定等を行い、その PIDを有する TSバケツ トの分離を指示する。その指示と PID設定とに基づいて、デマルチプレクサ 257は設 定されたパケット識別子を有するパーシャル TS内の TSパケットのみを分離抽出して 、出力する。なお、 PID設定は映像、音声、字幕等のそれぞれについて行う。
[0069] デマルチプレクサ 257によって分離された ESは、それぞれの ESに応じたビデオデ コーダ 258、オーディオデコーダ 259、データデコーダ 260へと入力される。管理情 報解析部 256は、各デコーダ 258〜260に対してデコードを行うよう指示する。その 指示に基づいて、ビデオデコーダ 258は映像 ESをデコードし、オーディオデコーダ 2 59は音声 ESをデコードし、データデコーダ 260は字幕 ESをデコードする。各デコー ダ 258、 259、 260はそれぞれをデコードしてデジタル信号として出力する。
[0070] TS中に複数の ESが含まれている場合、通常の TV等に出力する場合であれば、 1 種類の映像および 1種類の音声を取り出し再生出力する。字幕等のデータが存在す れば、同様に選択およびデコードが行われる。ユーザ力 ¾Sの切り替え要求を出すと 、管理情報解析部 256はデマルチプレクサ 257に対して PIDを再設定して ESの分 離を指示する。また管理情報解析部 256は、各デコーダ 258〜260に対してデコー ドを行うよう指示する。するとその後は、再設定後の PIDを有する TSパケットが抽出さ れ、異なる ESがデコードされる。
[0071] 1つの番組に同じ種別の ESが複数存在する場合、例えばアングルに応じた複数の 映像 ESが存在する場合であっても、各アングルの ESのデータは、 ESごとに異なる P IDが割り当てられた TSパケットに格納されている。よって、 PIDを利用すると特定の アングルの ESのみを抽出できる。これは、音声および字幕についても全く同じである
[0072] 次に、図 4および 5を参照しながら、データ構造およびファイル構造の観点から、 TS 処理部 204の記録処理および記録後の BD205aを説明する。
[0073] 図 4 (a)〜(e)は、レコーダ 100の記録処理に関連するトランスポートストリームとタリ ップ AVストリームとの関係を示す。参考のため、図 4 (a)にフル TS70を示している。 フル TS70は、 TSパケットが連続して配置されており、例えば 3つの番組 X, Yおよび Zのデータを含む。図 4 (b)は、デジタルチューナ 201aによってフル TS70から生成さ れたパーシャル TS 71を示す。パーシャル TS 71は、連続したフル TSから一部のパ ケットを取り出したストリームであるため、パケットが時間的に離散して存在している。 このパケットの間隔は、フル TSの送信側によって調整されており、デコーダにおいて デコードが適正に行われるために必要な条件を満たす。この「条件」とは、 MPEG—
2TSの理想モデルとして規定された T— STD (TSシステムターゲットデコーダ; TS System Target Decoder)のバッファメモリがオーバーフローおよびアンダーフロ 一を引き起こさな 、ために MPEG規格上定められた条件である。 [0074] パーシャル TS71は、例えば番組 Xに関する TSパケットを含んでいる。
[0075] 図 4 (c)は、クリップ AVストリーム 72を示す。クリップ AVストリーム 72は、ソースパケ ットが連続して配列されている。各ソースパケットは、ソースパケット番号(SPN) # 1、
2、 3 · · ·で区別される。
[0076] 図 4 (d)は、ソースパケット 73のデータ構造を示す。ソースパケット 73のデータ長は 192バイトに固定されている。すなわち、各ソースパケット 73は、 188バイトの TSパケ ット 75の前に、 4バイトの TPェクストラヘッダ 74を付カ卩して構成されている。ソース'パ ケタイザは、パーシャル TSを構成する TSパケットの前に TPェクストラヘッダ 74を付 加することにより、ソースパケットを生成している。
[0077] 図 4 (e)は、 TPェクストラヘッダ 74のデータ構造を示す。 TPェクストラヘッダ 74は、 2ビットのコピー許可インジケータ(CPI) 76と、 30ビットの到着タイムスタンプ ATS77 と力も構成されている。コピー許可インジケータ(CPI) 76は、そのビット値に応じて、 クリップ AVストリーム 72の全部または一部のコピー回数(0回(コピー不可) Z1回の み Z制限なし等)を規定している。到着タイムスタンプ ATS77には、 90kHz精度で 時刻が記述される。
[0078] なお、図 4 (c)に記載されたクリップ AVストリーム 72は、例えば 32個のソースバケツ トの集合(6KB)を 1つの単位として BD205a等に記録される。このような単位をァライ ンド ·ユニットという。ァラインド 'ユニットを規定する理由は、 BD205aが 1セクタ 2KB であるため、 32ソースパケットの単位でセクタとのァライメントが確保できるためである
[0079] 次に、図 5を参照しながら、クリップ AVストリームがどのように BD205a上に記録さ れるかを説明する。なお、クリップ AVストリームは HDD205bにも記録され得るため、 同様のデータ構造によって記録することができる。ただし、 HDD205bは一般にレコ ーダ 100から取り外されて他の機器に装填されることはないため、独自のデータ構造 によってデータを記録してもよ 、。
[0080] 図 5は、 BD205aの記録領域と、そのディレクトリ Zファイル構造を示す。 BD205a は、ギャザード ·ファイル領域 81 - 1とリアルタイム ·データ領域 81 2とを有する。
[0081] ギャザード 'ファイル領域 81—1の記録容量は数百メガバイトである。ギャザード 'フ アイル領域 81— 1には、クリップ AVストリームの再生等を管理する管理情報のフアイ ル(データベースファイル)が記録される。図 5に示すように、データベースファイルは 複数種類存在している。データベースファイルとして、例えば管理ファイル 82 (Info, bdav)、プレイジス卜フアイノレ 83 (01001. rpls、 10000. vpls)、クリップ' f青報フアイノレ 84 (01000. clpi)が存在する。プレイリストファイル 83には、再生順序を示す Playlt emや、プレイリストマーク等が記載されている。クリップ情報ファイル 84には、 STCシ 一ケンスや、 ATCシーケンス、 "Programlnfo"等の連続区間を示すシーケンス情報 や、エントリポイントマップ("EP MAP")のようなランダムアクセスや特殊再生のため のエントリーポイント情報が記載されて 、る。
[0082] ギャザード ·ファイル領域 81 - 1に記録されるデータベースファイルはアクセスされ る頻度が高い。よって、ギャザード 'ファイル領域 81—1は効率的にアクセスが可能な 、 BD205aの記録領域の中間部に設けられている。また、データベースファイルはク リップ AVストリーム等の動画ストリームを再生するために必須であり、記録内容の誤り は重大な障害を引き起こす。そのため、データベースファイルは同じ BD205a上にバ ック ップされる。
[0083] 一方、リアルタイム ·データ領域 81—2の記録容量は 23〜27ギガバイトである。リア ルタイム'データ領域 81—2には、クリップ AVストリームのストリームファイルが記録さ れる。例えばクリップ AVストリームファイル 85 (01000. m2ts)が記録される。先のデ ータベースファイルと異なり、ストリームファイルの再生誤りの影響は局所的であり、そ の一方、連続的な読み出しを確保する必要がある。よって、誤りの発生を低減するよ りも、連続読み出しを保証する方に重点をおいた書き込み処理が行われる。具体的 には、クリップ AVストリームファイル 85は最小で 12Mバイトの連続領域 (連続した論 理セクタ)に記録される。この最小の記録データサイズは「エクステント」と呼ばれる。 なお、リアルタイム 'データ領域 81—2には、 DVストリームを記録することもできるが、 以下ではクリップ AVストリームが記録されているとして説明する。
[0084] 図 6は、クリップ AVストリーム 85に含まれる複数の ESを模式的に示す。クリップ AV ストリームファイル 85は、映像、音声および字幕について、それぞれ複数の ESを有し て 、る。例えばクリップ AVストリームファイル 85が映画を録画したファイルであるとす ると、異なる視点(アングル) 1〜3の ES (V1〜V3)を含んでいる。同様に、異なる音 声(日本語 Z英語 Z中国語)の各音声 ES (Al〜A3)を含み、異なる字幕 (日本語 Z 英語 Z · · ·)の各字幕 ES (S 1、 S2 · · · )を含む。上述のように、各 ESには異なる ES PID値が割り当てられている。図 6には、各 ESに関連して割り当てられた PIDの例を 示している。なお、説明の便宜のため、本実施形態においては ES PID値が 0x01 の ESは同じ値を PID値として有する TSパケットに格納され、書き込みおよび読み出 しが行われるとして説明する。ただし、レコーダ 100が、再生すべき ESのデータを格 納した TSパケットを確実に抽出できるのであれば、他の方法を採用してもよい。
[0085] ここで、図 7を参照しながら、上述の管理ファイル 82、プレイリストファイル 83、クリツ プ情報ファイル 84およびクリップ AVストリームファイル 85相互の関係を説明する。図 7 (a)〜(d)は、管理情報とストリームデータとの関係を示す。図 7 (a)〜(c)が管理情 報であり、図 7 (d)がストリームデータである。図 7 (a)は管理ファイル 82 (Info, bdav) に記述されるプレイリストのテーブルを示す。すなわち、管理ファイル 82には、 BD20 5a上に存在するプレイリストを特定するプレイリストファイル名のテーブルが格納され ている。ここで「プレイリスト」とは、 1以上のクリップ AVストリームの一部または全部に 跨る再生経路を規定した情報である。
[0086] 図 7(b)は、プレイリストファイル 83 (拡張子: rplsZvpls)に記述されるプレイリストを 示す。プレイリストは、リアルプレイリストおよびバーチャルプレイリストに分類できる。リ アルプレイリストは、例えば初めてストリームデータが記録されたときにレコーダ 100に よって生成されるプレイリストであり、再生経路として動画の最初から最後までが指定 される。一方、バーチャルプレイリストは、記録されたストリームデータに対してユーザ が設定したプレイリストであり、ユーザの希望する任意の位置および区間が指定され る。
[0087] プレイリストの各区間は、プレイリスト内の各プレイアイテムにおいて規定される。す なわち、プレイアイテムには、再生開始位置に対応する開始時刻(In— time)および 再生終了位置に対応する終了時刻(Out— time)が記述される。開始時刻および終 了時刻は、映像のフレームの再生表示時刻や音声のフレームの再生出力時刻を特 定するプレゼンテーションタイムスタンプ (PTS)によって記述される。通常、記録直後 のリアルプレイリストではプレイアイテムは 1つだけ設けられ、動画の最初と最後の時 刻が指定される。一方、バーチャルプレイリストではプレイアイテムの数は任意である
。 1つのバーチャルプレイリストに複数のプレイアイテムを設け、各プレイアイテムが異 なる動画ストリームを指定するように記述することもできる。
[0088] 図 7 (c)はクリップ情報ファイル 84 (拡張子: clpi)に記述される時間 ·アドレス変換テ 一ブル(EP— map) 84を示す。変換テーブル(EP— map) 84は、クリップ AVストリー ムの再生時刻と、その時刻に再生されるデータが格納されたアドレスとを対応付けた テーブルである。この変換テーブル 84を利用することにより、プレイアイテムにおいて 指定される開始時刻(In— time)および終了時刻(Out— time)から、その時刻に再 生すべきデータが格納されたクリップ AVストリームにおけるアドレスを特定することが できる。なお、この変換テーブル 84を利用した変換の原理は、後に図 13から図 15を 参照しながら詳述する。
[0089] 図 7 (d)は、クリップ AVストリームファイル 85 (拡張子: m2ts)に格納される動画ストリ ームを示す。この図では、ファイル" 01000. m2ts"および" 02000. m2ts"の各々 力クリップ AVストリームファイルである。
[0090] 図 7 (c)および(d)に示すように、 BD205a上では、 1つのクリップ AVストリームファ ィルに対して 1つのクリップ情報ファイルが設けられる。クリップ AVストリームファイルと 、クリップ情報ファイルの対は、クリップ (Clip)と呼ばれる。
[0091] 本実施形態では、映像、音声、字幕等の各々につ 、て複数の ESが存在するとき( 図 6)において、最初に再生する ES (デフォルト ES)を指定するために「ES選択情報 」を導入する。本実施形態においては、プレイアイテム(および STCシーケンス、プロ グラムシーケンス)毎にデフォルト ESを指定する ES選択情報を管理情報の一部とし て付加する。 ES選択情報としては、エレメンタリストリーム PID (以下 ES PID)が考 えられる。または、より高い抽象度で考えると、 ARIB規格等の放送規格で定義され ているコンポーネントタグ等も使用可能である。
[0092] ES選択情報として、本実施形態においては従来の BD— RE等の規格におけるマ ーク情報を利用する。 BD— REでは、プレイリストマークがマーク情報に相当する。プ レイリストマークは、プレイリストファイル 83に格納されている。 [0093] 図 8は、プレイリストファイル 83に格納される情報(エントリ)およびそのデータ構造を 示す。プレイリストファイル 83には、プレイリストマークに対応するプレイリストマーク(P layListMark)エントリ 90が規定されて 、る。
[0094] プレイリストマークエントリ 90には、マークタイプ(mark_type)フィールド 91、マー クタイムスタンプ(mark一 time— stamp)フィールド 92、 ES選択情報(ES— PID)フ ィールド 93等が規定されている。 mark— typeフィールド 91はマークの種別を示す。 BD— RE規格では、マークの種別として、ブックマーク、リジュームマーク等が定義さ れている。本実施形態では、新たな種別として、デフォルト ES指定マーク (Default —ES— mark)を定義する。例えば、 0x03をその値として定義する。表 1は、マークタ イブフィールド 91に指定される数値とマークとの関係を示す。
[0095] [表 1]
Figure imgf000024_0001
[0096] デフォルト ES指定マークは、上述の ES選択情報に対応する。デフォルト ES指定マ 一タカ 次のデフォルト ES指定マークまでの再生区間は、 ES— PIDフィールド 93に おいて指定された ES PIDに対応する ESがデフォルトとして選択され、再生される。 デフォルト ES指定マークは、音声、映像、字幕等について、先頭に各 1つ設定できる
[0097] なお表 1の他のマークの機能は以下のとおりである。リジュームマークは再生再開 点を示し、再生を一旦中断したときに設定される。このマークはその中断位置力 再 生を開始するために設けられている。ブックマークは、例えばユーザがお気に入りの シーンの開始点を指定するマークとして設けられる。スキップマークは、そのポイント 力もプログラムの最後まで、プログラムをスキップするために設けられる。なお、他にも チャプターマーク等が存在するが、詳細は省略する。
[0098] mark— time— stampフィールド 92は、再生する ESの再生点を特定する情報が記 述される。例えば mark— time— stampフィールド 92では、再生出力のタイミングが STC時間軸の時刻(マークタイプスタンプ)〖こよって記述される。なお、プレイリストフ アイル 83には複数のプレイアイテムを規定することができるため、プレイアイテム ID ( Playltem— id)にどのプレイアイテムを対象とするかを指定する。上述のマークタイ プスタンプ 92はプレイアイテム IDとともに再生位置情報として取り扱われる。
[0099] ES選択情報 (ES— PID)フィールド 93は、選択の対象とする ESを特定する ES選 択情報が記述される。 BD— RE 1. 0では、そのデータ構造中に ES PID値を指定 するためのフィールドが規定されており、そのフィールド力 ¾S選択情報 (ES— PID) フィールド 93に相当する。
[0100] プレイリストマークとしてデフォルト ES指定マークが定義されると、例えば図 8中の" r eserved"と示す領域に、ユーザが指定した ES—PID値またはコンポーネントタグに よって指定された ES— PID値を指定する。そしてプレイアイテム IDとマークタイムスタ ンプ 92には、 ESを切り替えたい点を、再生位置情報として設定する。
[0101] デフォルト ES指定マークが記録された記録媒体は、再生時の ESを指定する情報 を含むため、機器間によるデフォルト ESの違いを防ぐことができ、さらには、ユーザが 任意の ESをデフォルトとして指定することも可能となっている。例えば、英語音声を 示す ES選択情報と、プレイリスト先頭を示す再生位置情報を含んだデフォルト ES指 定マークが記録されている場合、該プレイリストの再生時は、英語音声をデフォルトと して選択するとして解釈される。
[0102] 以上のようなプレイリストマークを用いる方法であれば、従来の規格との互換性を維 持しつつ、対応機器では、 ES自動選択機能が働くような ES選択情報定義が可能と なる。
[0103] プレイリストマークは、プレイリスト単位で指定することが可能であるため、異なるデフ オルト ES情報を持つプレイリストを定義することが可能である。例えば、複数の ESを 含む一つのストリームを、各デフォルト ESの異なる複数の番組として定義することが 可能である。例えば、同じクリップを参照するプレイリストを複数用意し、ひとつのプレ イリストは日本語音声をデフォルトとするようなデフォルト ES指定マークを設定し、別 のプレイリストには他言語音声をデフォルトとするようデフォルト ES指定マークを設定 する。このように設定することで、音声 ESの異なる複数の仮想的な番組を定義するこ とちでさる。
[0104] なお、上記で説明したデフォルト ES指定マークの定義方法は、一つの例であり、同 等の情報を含んでいるのであれば、異なるデータ構造をとつてもよい。例えば、 mark —typeフィールドの代わりに、 mark— nameフィールドに指定した文字列によって識 別する等も方法も考えられる。なお、上述のプレイアイテムへのフィールド追加や、デ フォルト ES指定マークを用いる他にも、映像 '音声'字幕などの種別毎のデフォルト E S、またはそれらの組を定義したシーケンス情報を新たなテーブルとして定義してもよ い。また、デフォルト ESをすべき区間を示すための情報は、プレイリストマークのよう な位置情報であってもよいし、開始位置と終了位置による区間指定でもよい。また、 位置情報は、表示時刻スタンプ(Presentation Time Stamp; PTS)やフィールド 数等の時刻情報を用いてもよいし、セクタやパケットカウント等のストリームのアドレス 情報を用いてもよい。これらのうち、少なくとも一方が含まれていればよい。
[0105] なお、プレイリストファイル 83内には PlayList Oとして示すエントリも存在する。これ が上述の「プレイリスト」に対応する。プレイリスト情報(PlayList)の下位には、プレイ アイテム (Playltem) 1、 2· · ·が記述される。各プレイアイテムには再生対象となるタリ ップ情報ファイルのファイル名(Clip— Information— file— name)、 STCを特定す るための識別子 (ref— to— STC— id)、開始時刻(In— time)、終了時刻(Out— ti me)等が格納される。
[0106] 上記で説明した BD— REでの実現方法以外にも、管理情報とストリームがあわせて 記録されている記録媒体であれば、同様のことが実現できる。例えば、プレイリストを プログラム(Program)、プレイアイテム(Playltem)をセル(CELL)、プレイリストマー クをエントリポイント(Entry Point)等と読み替えていけば、 DVD— VR形式でも同 等のことが実現できる。その他のデータ形式でも同様である。 [0107] 次に、図 9および図 10を参照しながら、レコーダ 100のデジタル放送番組を録画す る処理を説明する。録画処理の結果、 BD205a上には図 5に示すファイル構造で種 々のファイルが記録される。
[0108] 図 9は、録画処理の手順を示す。ステップ S101において、デジタルチューナ 201a はデジタル放送波(フル TS)を受信し、特定の番組に関するパーシャル TSを生成す る。ステップ S 102にお!/ヽて、 TS処理咅 204の記録帘1』御咅 254ίま、ノ ーシャノレ TS力 らクリップ AVストリームを生成し、クリップ AVストリームファイルとして BD205aに記録 する。ステップ S103において、 TS処理部 204の管理情報生成部 253は、パーシャ ル TSを解析して、管理情報に関するデータベースファイル (管理ファイル、プレイリス トファイル、クリップ情報ファイル等)を生成する。記録制御部 254は、生成されたデー タベースファイルを BD205aに記録する。
[0109] 次に、図 10を参照しながら、上述のステップ S103に関連するプレイリストファイルの 生成処理を説明する。図 10は、プレイリストの生成処理の手順を示す。ステップ S 11 1において、管理情報生成部 253は、初めに再生すべき ES (デフォルト ES)が特定 されている力否かを判断する。特定されていないときはステップ S112に進み、特定さ れて 、るときはステップ S 113に進む。
[0110] ステップ S112では、管理情報生成部 253は、録画時または予約設定時にユーザ から、デフォルト ESを特定する情報を受け取る。本実施形態においては、デフォルト ESの特定はユーザの指示に基づいて行われるとしている。すなわちユーザは手動 でデフォルト ESを特定するとして説明する。
[0111] ユーザは複数の ESの存在をレコーダ 100からの通知等によって知ることができる。
例えばデジタル放送波(フル TS)に含まれる SIパケットには、電子番組表 (EPG)に 関する情報等を記述したテーブルが格納されている。よって、レコーダ 100は録画時 または予約設定時に SIパケットを取得し解析することにより、録画対象となる番組に 複数の ESが含まれているかを事前に特定できる。レコーダ 100は、この結果をユー ザに示して、どの ESをデフォルト ESとするかの指示をユーザ力 受け取ればよ!/、。 例えば映画を録画する時には、英語音声 Z字幕および日本語音声 Z字幕の双方が 選択可能であれば、ユーザは、音声に関してはデフォルト ESとして英語音声を特定 し、字幕に関してはデフォルト ESとして日本語字幕を特定する。他の例として、野球 中継を録画する時には、キャッチャー側カメラの映像およびセンター側カメラの映像 の双方が選択可能であれば、ユーザは、デフォルト ESとしてセンター側カメラの映像 を特定する。
[0112] なお、予約設定時にユーザによって特定されたデフォルト ESに関する ES選択情 報は、予約録画を行う日時、チャンネル等の情報とともに、予約情報を構成する。予 約情報は、例えばレコーダ 100の RAM212 (またはフラッシュ ROM)に保持され、予 約録画時にその ES選択情報に基づくデフォルト ESの設定が行われる。
[0113] ステップ S113において、管理情報生成部 253は、プレイリストのマーク種別(mark —type)フィールド 91に、デフォルト ES指定マークを示す数値(0x03)を記述する。 ステップ S114において、管理情報生成部 253は、プレイリストの ES—PIDフィールド 93に、デフォルト ESに対応する ES PID値を記述する。ステップ S115において、管 理情報生成部 253は、デフォルト ESの先頭部分のタイムスタンプを、 mark— time— stampフィールド 92に記述する。「先頭部分」は、映像に関しては最初に表示される ピクチャ(フレームまたはフィールド)、音声に関しては最初に出力される音声フレー ム、字幕に関しては最初に表示される文字列である。ステップ S116において、管理 情報生成部 253は、図 8に示すプレイリストマーク 90の他のフィールドの情報や、プ レイリストファイルの他のエントリ(PlayListエントリ、 Playltemエントリ等)を記述する
[0114] 以上の処理により、レコーダ 100は BD205aに番組を録画するとともに、最初に再 生される ESを指定する ES選択情報を管理情報の一部として記録することができる。
[0115] 図 11 (a)は、デフォルト ES指定マークを規定したリアル Zバーチャルプレイリストと 、複数の映像 ESとの関係を示す。各プレイリストのマーク種別(mark— type)フィー ルド 91〖こは、デフォルト ES指定マークを示す数値 (0x03)が記述されている。
[0116] リアルプレイリストファイル(01001. rpls)は、アングル 1の ES (VI)をデフォルト ES として指定する ES選択情報を含む。具体的には、リアルプレイリストのプレイリストマ ークに対応する ES PIDフィールド 93には" 0x050"が記述されている。この数値は 、アングノレ 1の ES (V1)の ES PID値" 0x050"に対応して!/ヽる。 [0117] 一方、 2つのバーチャルプレイリストファイル(02002. vplsおよび 10000. vpls)は 、アングル 2および 3の ES (V2、 V3)をデフォルト ESとして指定する ES選択情報を 含む。具体的には、各 ES PIDフィールド 93には、 "0x051"および" 0x052"が記 述されている。これらの数値は、それぞれアングル 2および 3の ES (V2、 V3)の ES— PID値" 0x051"および" 0x052"に対応している。
[0118] コンテンツ再生時においては、図 3に示す再生制御部 255は、まず管理情報を読 み出して管理情報解析部 256に送る。管理情報解析部 256は、プレイリストマークェ ントリ 90力ら、マークタイプ(mark— type)フィールド 91に基づ!/、てデフォルト ES指 定マークを抽出する。そして、 ES選択情報 (ES— PID)フィールド 93に基づいてどの ESを再生の対象とすべきかを特定し、その ESの ES— PID値とともに読み出し指示 を再生制御部 255に送る。さらに管理情報解析部 256は、マークタイムスタンプ (mar k— time— stamp)フィールド 92に示されたタイムスタンプに基づ!/、て、その ESの再 生開始位置を特定する。上述の処理を、映像、音声および字幕等のコンテンツに含 まれる再生対象の種別ごとに行う。その結果、全ての種別について、再生制御部 25 5に読み出し指示等が送られ、全てのデータを含むストリームが読み出される。同時 に管理情報解析部 256は、各種別について、 TSパケットに付加された PIDをデマル チプレクサ 257に設定する。その結果、デマルチプレクサ 257は再生制御部 255に よって読み出されたクリップ AVストリームを逆多重化して、各種別の TSパケットを抽 出することができる。
[0119] なお、図 11 (a)に示すように、 ESの数と同じ数のプレイリストファイルを設ける必要 はない。例えば、リアルプレイリストのみを設けてもよぐ ES選択情報として規定する E S— PID値は任意である。
[0120] 図 11 (b)は、映像に関するデフォルト ES指定マークを含むプレイリストが存在する ときの一覧表示画面 510の例を示す。この画面は、例えば、レコーダ 100に接続され た TV (図示せず)に表示される。図 11 (a)に示すようにデフォルト ES指定マークを含 むプレイリストは 3つ存在する(01001. vpls, 02002. vpls, 10000. vpls)。管理情 報解析部 256は、各プレイリストのデフォルト ES指定マークを特定する。そして管理 情報解析部 256は、デマルチプレクサ 257に各 ESの分離抽出を指示し、かつデコ ーダ 258〜260に各 ESのデコードを指示する。さらに管理情報解析部 256は、複数 の再生経路の存在を示す制御情報をグラフィック制御部 207に送る。グラフィック制 御部 207は、制御情報を受けて、デフォルト ES指定マークが付加された ESに対応 するサムネイル画面 1〜3が、出力先の TVにおいて並べて表示されるように表示位 置を設定し、そのような表示が可能な表示信号を出力する。その結果、 TVにおいて は、これらの画面には各 ESに基づく映像が表示される。ユーザは、選択可能な再生 経路として各映像を確認することができる。
[0121] サムネイル画面は静止画像であってもよいし動画であってもよい。さらに各サムネィ ル画面の下にはどの ESであるかを示す「アングル 1」等も表示することができる。この ような文字列は、録画時にレコーダ 100によって各プレイリスト情報の一部に記述さ れている。例えばレコーダ 100は、「アングル 1」等の文字列を、例えば図 8のプレイリ ストファイル 83内に設けられた PlayList— nameフィールドや、プレイリストマークェン トリ 90内のマーク名(mark_name)フィールドに記述することができる。
[0122] ユーザは、 TV画面 510を見ながら、例えばレコーダ 100付属のリモコン(図示せず )によって再生を開始したいサムネイル画面を指定する。すると、レコーダ 100はデフ オルト ESとして設定された ESの再生を開始する。デフォルト ES指定マークを導入す ることにより、どの機器を用いて再生しても当初に再生される ESは一定になり、デフォ ルト選択の違い等を排除できる。本実施形態によるレコーダ 100は、ユーザから特に 指定がない場合は、記録時に自動的にデフォルト ESを選択するような ES選択情報 を生成し記録する。
[0123] 図 11 (b)のサムネイル画面 1〜3によれば、表示画面 510中のサムネイル表示や縮 小表示される動画は各番組 1〜3の間では異なっている。ユーザから見れば、一つの クリップ AVストリームファイル 85があた力も複数の番組が存在するかのように表示さ れる。そして、実際に再生を開始したときに表示される映像も異なる。このような GUI によって、ユーザは、全くの別番組を選択する感覚で、 1つの番組に含まれる他の E Sを選択することが可能となる。このように、デフォルト ES指定マークに基づいて、マ ークごとにサムネイル画面を表示し、または単なるリストとして表示した場合であっても 、複数 ESを含む番組の再生 ·管理の操作が非常に直感的になる。 [0124] なお、従来においても、バーチャルプレイリストを利用して 1以上のストリームの複数 の再生区間および Zまたは複数ストリームにまたがる再生区間とその再生順序とを規 定すると、一つのストリームに対して複数の仮想的な番組を提示することは可能であ つた。一方、本実施形態によるプレイリストは複数の ESから特定の ESを選択するた めの ES選択情報を有しているため、従来のバーチャルプレイリストとは異なる点に留 意されたい。
[0125] また本実施形態においては、ストリームとは別の管理情報中に ES選択情報を規定 している。よって、後に ES選択情報を変更する際でもストリーム中のデータを改変す ることは不要であり、処理量を大幅に減らすことができる。この構成は、再生すべき E Sの切り替えを指示する情報 (マルチビュー自動切替テーブル)がストリーム内に記述 される特許文献 1とは全く異なるといえる。
[0126] 図 11に示す例のように GUIを用いると種々の応用が可能である。例えば、番組の アングル 3をデフォルト ESとして指定するバーチャルプレイリストファイル(10000. vp Is)を削除することによって、アングル 3の ESのみをクリップ AVストリームファイル 85か ら削除する等の ES単位の編集のためのインターフェースを提供することも可能となる 。不要な ESを削除することは、記録媒体の空き容量を増やすことにつながるため、こ のような機能は非常に有用である。
[0127] 上述の説明は、映像 ESが複数存在するときのプレイリストおよび一覧表示画面の 例である。次に図 12 (a)および (b)を参照しながら、音声 ESが複数存在するときのプ レイリストおよび一覧表示画面の例を説明する。
[0128] 図 12 (a)は、デフォルト ES指定マークを規定したリアル Zバーチャルプレイリストと 、複数の音声 ESとの関係を示す。各プレイリストのマーク種別(mark— type)フィー ルド 91〖こは、デフォルト ES指定マークを示す数値 (0x03)が記述されている。
[0129] リアルプレイリストファイル (01001. rpls)は、 日本語音声 ES (A1)をデフォルト ES として指定する ES選択情報を含む。リアルプレイリストのプレイリストマークに対応す る ES PIDフィールド 93には" 0x100"が記述されている。この数値は、アングル 1の ES (VI)の ES— PID値" 0x100"に対応して!/、る。 2つのバーチャルプレイリストファ ィル(02002. vplsおよび 10000. vpls)は、英語音声 ES (A2)および中国語音声 E S (A3)をデフォルト ESとして指定する ES選択情報を含む。各 ES PIDフィールド 9 3には、 "0x101"および" 0x102"が記述されている。これらの数値は、それぞれアン グル 2および 3の ES (V2、 V3)の ES—PID値" 0x101"および" 0x102"に対応して いる。
[0130] 図 12 (b)は、音声に関するデフォルト ES指定マークを含むプレイリストが存在する ときの一覧表示画面 510の例を示す。レコーダ 100は、各プレイリストに対応するサム ネイル画面 1〜 3を並べて表示するが、サムネイル画面 1〜 3は同じであつてもよい。 ただし、各サムネイル画面の設けられた文字列によって区別することができる。そのよ うな文字列を格納するデータフィールドは、先の例と同様、 PlayList— nameフィー ルド、マーク名(mark— name)フィールド等である。
[0131] 上述の映像、音声等について、デフォルト ESの特定はレコーダ 100によって自動 的に行われてもよ 、。例えば上述した特許文献 1におけるマルチビュー自動切換え テーブル等を用いて、管理情報生成部 253は放送局によって指定された ESをデフ オルト ESとして特定する。または管理情報生成部 253は、ストリーム中の SIZPSI情 報において放送局によって指定された ESをデフォルト ESとして特定する。さらに、 A RIB規格では視聴時にデフォルトで選択すべき ESのコンポーネントタグが規定され ているため、管理情報生成部 253は、コンポーネントタグにおいて指定された ESを デフォルト ESとして特定したデフォルト ES指定マークを自動的に生成してもよ!/、。
[0132] なお、図 11および図 12では、映像と音声とをそれぞれ分けて説明した。しかし、映 像 ESの指定および音声 ESの指定は独立して行うことができるため、図 11の例と図 1 2の例とを混在させることもできる。
[0133] BD—RE規格を拡張すると、上述のようにデフォルト ESを指定することができる。た だし、この拡張のみでは、プレイアイテムやプログラムシーケンス中の任意点での ES 切り替えには対応できな ヽ。例えば 3種類のカメラ視点の映像 ESを含むスポーツ番 組を想定すると、ユーザは好みのシーンに応じて複数のビューを適宜切り替えた ヽ 場合も存在する。デフォルト ES指定マークを設けるとどの ESに基づいて再生を開始 するかを指定することは可能である力 再生開始後の ESの切替はできない。
[0134] そこで、 BD—RE規格をさらに拡張して、任意の点において再生対象の ESを切り 替えるための処理を説明する。 ESを切り替えるタイミングおよび切り替え後の ESの指 定はユーザが定義できる。
[0135] 図 13は、任意のタイミングで任意の ESに切り替えたときの例を示す。クリップ AVス トリーム 301には、映像 ES1 (302)と、映像 ES2 (303)と、映像 ES3 (304)と力 ^含ま れているとする。
[0136] このようなクリップ AVストリーム 301に対し、レコーダ 100の管理情報生成部 253は 、複数の ES切り替え点 305、 306、 307、 308、 309を定義する。 ES切り替え点は、 たとえばクリップ AVストリーム 301の先頭を基準とした、映像の再生経過時刻または その時刻に対応する情報として特定される。
[0137] 管理情報生成部 253は、プレイリストファイル 83内に複数のデフォルト ES指定マー クを設ける。これまでの説明では、デフォルト ES指定マークは選択された ESの先頭 を指し示すように定義されるとした。し力しここでは、 ESの途中を指し示すように各デ フォルト ES指定マークを定義すればよい。より具体的には、デフォルト ES指定マーク として、切り替え後の ESを特定する ESの識別情報 (ES— PID値)と、どの点力 切り 替えるかの情報(mark— time— stamp値)の組を規定すればよ!ヽ。
[0138] 例えば、図 13に示す再生点 305は、最初に再生すべき ESを指定するためのデフ オルト ES指定マークであり、映像 ES3に対応する ES— PID値と、先頭ピクチヤのタイ ムスタンプが記述されている。次の ES切り替え点 306は、切り替え後の ES2に対応 する ES— PID値と、その時刻に対応する ES2のピクチャのタイムスタンプが記述され たデフォルト ES指定マークとして定義される。他の切り替え点 307、 308、 309の定 義も ES切り替え点 306の定義と同様である。再生点 305と 306〜309とを規定する デフォルト ES指定マークは全く同じデータ構造であり、記述するタイムスタンプ力 ¾S の先頭を示すか途中を示すかが相違するのみである。
[0139] このようなクリップ AVストリーム 301および ES切り替え点により、 TS処理部 204およ びデコーダ 206は、映像 ES3に対応する映像 3から再生を開始し、その後各切り替 え点において、映像 ES2に対応する映像 2を再生し、順に映像 3、映像 1、映像 3を 切り替えながら再生を継続する。
[0140] 具体的には、管理情報解析部 256は、管理情報中に複数のデフォルト ES指定マ ークが存在することを認識できる。併せて、その各々について、 ES— PID値と、再生 すべき時刻に対応する ESのピクチャのタイムスタンプが記述された mark— time— s tamp値を取得できる。よって、当初は ES3から再生を開始するよう再生制御部 255 およびデマルチプレクサ 257に指示する。その後、 mark— time— stamp値に基づ いて再生切り替え点 306に至ったことを認識すると、その時刻から、 ES— PID値に基 づいて ES2の再生を開始する。以後、同様の手順により、デフォルト ES指定マーク によって指定された時刻において、指定された ESが再生される。
[0141] 次に、レコーダ 100が複数の ESを含む番組を録画した後に、ユーザがそのレコー ダ 100を利用して、その番組の任意の再生位置に ES切り替え点を設定する編集処 理を説明する。複数の ESを含む番組のクリップ AVストリームは BD205aに蓄積され て 、るとするが、 HDD205bに蓄積されて!、てもよ!/、。
[0142] 図 14 (a)は編集画面に表示されたグラフィカル.ユーザ'インターフェース(GUI)の 例を示し、図 14 (b)は編集対象の ESとデフォルト ES指定マークとの対応関係を示す 。例えば、レコーダ 100がユーザの指示に基づいて映像編集処理を行うための「編 集モード」に移行すると、レコーダ 100は図 14 (a)に示す編集画面 601を表示する。
[0143] 図 14 (a)の GUI例では、図 14 (b)に示す 3種類の映像 ES621、 622、 623を含む TS620に対し、ユーザは任意の ES切り替え点 (切り替え時刻)を指示するとともに、 その点力も再生すべき映像 ESを指示する。これにより、その切り替え点力も次の切り 替え点までの区間に再生される映像 ESが特定される。 1つのコンテンツに対してュ 一ザが複数の ES切り替え点と映像 ESとを指定することにより、ユーザが希望する時 刻に希望するアングルの映像に切り替えられて映像が再生される。
[0144] 編集画面 601は種々の領域に区画され、サムネイル映像や GUI項目が表示される 。まずサムネイル領域 602、 603、 604には各映像 ESの映像がそれぞれ動画で並列 的に表示される。
[0145] 図 14 (a)の代表サムネイル領域 609には、 3種類の映像 ESのうち、カーソル 611の 位置にお 、て再生される映像 ESに基づく映像が表示される。この映像 ESは直前の 切り替え点において指定された映像 ESである。図 14 (a)の例では、カーソル 611の 位置では 3番目の映像が指定されている。よって、代表サムネイル領域 609にはサム ネイル領域 604に示された映像と同じ映像が大きく表示されて!ヽる。
[0146] ボタン 605〜607は、それぞれの映像 ES1〜3に対応して設けられている。ユーザ は、映像再生開始時および再生中に編集画面 601を確認しながら指示受信部 215 を操作して、希望するアングルのボタンを選択する指示を送る。この結果、指示を送 つた再生タイミングで、対応する映像 ESが選択される。一旦映像 ESが選択されると、 次に異なる映像 ESが選択されるまでは、その映像 ESに基づいて映像が再生され続 ける。
[0147] 図 14 (a)の例では、番組先頭を含め合計 5回ボタンが選択されており、その結果、 5つの ES切り替え点が設定されている。ボタン 605〜607の選択順序は、ボタン 607 、ボタン 606、ボタン 607、ボタン 605およびボタン 607である。 ES切り替え点は、図 14 (b)【こ示す, 631、 632、 633、 634、 635【こ設定される。これ【こより、再生区 f¾64 1、 642、 643、 644、 645では、それぞれ映像 3、映像 2、映像 3、映像 1、映像 3力選 択されて再生される。ライン 610は、映像切り替わりの流れを視覚的に表現している。 5つの ES切り替え点により、各映像 1〜3はライン 610に示される順序およびタイミン グで再生される。
[0148] 図 14 (b)の最下段には、複数の切り替え点に対応する、デフォルト ES指定マーク( プレイリストマーク) 0〜4がそれぞれ示されて!/、る。各プレイリストマークのマーク種別 (mark_type)フィールド 91には、デフォルト ES指定マークを示す数値(0x03)が 記述されている。また、 mark— time— stampフィールド 92にはその時刻を示すタイ ムスタンプが記述される。そして、 ES選択情報 (ES— PID)フィールド 93には切り替 え後の映像 ESの ES— PID値が記述される。
[0149] 図 15は、図 14に示す編集処理を実現するための TS処理部 204の機能ブロックの 構成を示す。 TS処理部 204は、管理情報生成部 253、記録制御部 254および再生 制御部 255を有している。
[0150] 管理情報生成部 253は、図 2に関連して説明した機能のみならず、図 3に関連して 説明した管理情報解析部 256の機能も有している。一方、記録制御部 254および再 生制御部 255については、図 2および図 3を参照しながら説明した機能と同じである [0151] 再生制御部 255および管理情報生成部 253は、図 3に示す再生制御部 255およ び管理情報解析部 256と同じ処理を行い、 BD205aに記録されたクリップ AVストリー ムおよびその管理情報を読み出す。このクリップ AVストリームは、アングルに応じた 複数の映像 ESを含んでいる。デコーダ 206は、各映像 ESをデコードしてそれぞれの 映像をグラフィック制御部 207に出力する。
[0152] グラフィック制御部 207は、 CPU211からの制御情報に基づいて、図 14に示すサ ムネイル領域 602、 603、 604において各映像が表示されるように表示位置を調整す るとともに、さらにそのうちのひとつの映像が代表サムネイル領域 609に表示されるよ うに表示位置を調整する。代表サムネイル領域 609に表示される映像は、カーソル 6 11の位置にお 、て選択されて 、る映像 ESに対応して!/、る。
[0153] 一方、管理情報生成部 253は、ユーザのボタン入力に基づいてどの映像をどの位 置から再生すべきかを特定し、ボタン入力ごとに ES選択情報を生成する。管理情報 生成部 253は、生成した ES選択情報を BD205aから読み出した管理情報に記述す る。より詳しくは、管理情報生成部 253は、各切り替え点に対応するデフォルト ES指 定マークをプレイリストファイル 83内のプレイリストマークエントリ 90に設ける。デフォ ルト ES指定マークが追加された管理情報は、記録制御部 254および CPU211に送 られる。
[0154] 記録制御部 254はその管理情報に基づいて、 BD205a上の管理情報を更新する 。 CPU211はその管理情報を受け取って解析し、各映像 ESがどの順序でどれだけ の区間長だけ再生される力を一覧表示するための制御情報を生成する。その制御情 報はグラフィック制御部 207に送られる。グラフィック制御部 207は、制御情報に基づ いて図 14 (a)のライン 610を表示するための信号を出力する。この結果、レコーダ 10 0と接続された外部の表示機器、たとえばテレビの画面上にライン 610が表示される
[0155] 図 14 (a)に示す編集画面 601は一例に過ぎない。必ずしも全ての領域および GUI 項目を備えている必要はなぐまたその配置も任意である。例えば、サムネイル画面 に並列的に動画映像を表示するためには、各サムネイル画面を途切れなく再生する ための処理能力や、復号ィヒ処理によって得られたデータを蓄積できる容量を持つバ ッファが必要である。ただし、映像の種類によっては、そのようなハードウェアまたはソ フトウエアを持たなくても問題ない場合もある。例えば編集対象が、マルチストーリー 番組のような頻繁に切り替える必要がない映像であれば、全ての ESを動画によりサ ムネイル表示しなくても特に問題はないと考えられる。 1つの ES再生が終了した後、 他の ESの映像を表示できれば選択はできる力もである。
[0156] 本実施形態においては、デジタル放送の番組を BD205aに録画することを想定し て説明した。しかし、 1つの番組に択一的に再生される同種類のエレメンタリストリーム が複数含まれていれば、その放送の種類や記録媒体の種類を問わず、本発明を適 用できる。
[0157] 例えば、本実施形態によるレコーダ 100の構成を利用すると、 BD205aに代えて D VDに記録することもできる。 DVDに記録可能なストリーム形式は、 TSではなく MPE G— 2プログラムストリームである。よってレコーダは、パーシャル TSをデコードして映 像 Z音声等のデジタル信号を生成し、そのデジタル信号力 ESエンコードを行って MPEG - 2プログラムストリームを生成すればよ!、。
[0158] これまでの説明では、番組の録画時、または、レコーダ 100によって録画した番組 の編集時に、レコーダ 100によってデフォルト ESの切り替え点が設定されるとした。し かし、本発明は、録画を行った機器とデフォルト ESの切り替え点を設定する機器とが 同一でなくても適用できる。たとえばレコーダ 100は、他の機器によって書き込み可 能な記録媒体に録画された番組や、パッケージメディアなどの再生専用記録媒体に 記録されたコンテンツに対しても、デフォルト ESの切り替え点を設定できる。
[0159] すなわち、 BD— RE規格のフォーマットを用いて説明したように、既存の管理情報 にはデフォルト ES指定マークのエントリを追記できる。したがって、書き込み可能な記 録媒体(DVD— RAMや BD— RE等の RAMメディア)に録画された番組の管理情 報に、デフォルト ES指定マークを追記すれば、任意のデフォルト ESの切り替え点を 設定できる。録画がレコーダ 100によって行われた力、他の機器によって行われたか は問題ではない。
[0160] 一方、再生専用記録媒体(たとえば DVD— Rや BD— ROM等の ROMメディア)に は情報を追記できないため、媒体上の管理情報に対するデフォルト ES指定マークの 追記や上書きは不可能である。しかし、デフォルト ES指定マークの情報と、映像情報 とが同じメディア上に記録されている必要はない。例えば、レコーダ 100の HDD205 bに ROMメディアの管理情報をコピーし、その管理情報にデフォルト ES指定マーク の情報を追記すればよい。なお、管理情報をコピーせずに差分となるデフォルト ES 指定マークのみを記録してもよ 、。
[0161] デフォルト ES指定マークの記録先は、 HDD以外のメモリ、たとえば RAM212、不 揮発性のプログラム ROM210等であってもよい。これにより、 ROMメディアに記録さ れたコンテンツに対しても、任意のデフォルト ESの切り替え点を設定できる。
[0162] なお、レコーダ 100が、各 ROMメディアを一意に識別する IDとデフォルト ES指定 マークの情報とを関連付けて保存しておくことが好ましい。これにより、ユーザが RO Mメディアをレコーダ 100から取り出し、その後再び挿入したとしても、それまで設定 されたデフォルト ESの切り替え点をそのまま利用できる。
産業上の利用可能性
[0163] 本発明による、番組を録画するデータ処理装置は、択一的に再生される同種類の 複数の ESを含む番組 (例えばデジタル放送番組)を、光ディスクなどの記録媒体録 画して、その番組に対してユーザからどの ESから再生を開始するかの指示を受け取 ることができる。データ処理装置は、受け取った指示に基づいて、最初に再生すべき ESを指定する情報をその記録媒体に記録する。その情報は、最初に再生すべき ES の先頭を指定している。
[0164] また、データ処理装置は、 ESの先頭のみならず ESの途中を再生開始点として指 定する情報を設けることにより、ユーザが独自に定義した、複数の ESにまたがる ES 切り替えパターンを規定することができる。その切り替えパターンも、上述の情報を記 録媒体に記録することによっていつでも再現可能である。
[0165] 複数の ESを含むマルチビュー番組、最初に再生すべき ESを指定する情報、 ESの 切り替え情報等を記録した記録媒体、および、そのような記録媒体力 ESを再生す るデータ処理装置によれば、複数の ESを含む番組の再生'管理が容易になる。

Claims

請求の範囲
[1] コンテンツの多重化ストリームを受信する受信部と、
前記多重化ストリームを解析して記録媒体に書き込むための処理を行い、処理後 の前記多重化ストリームを前記記録媒体に書き込む指示を出力する記録制御部と、 前記多重化ストリームの解析結果に基づいて、前記コンテンツの再生に必要な管 理情報を生成する管理情報生成部と
を備え、前記多重化ストリームは択一的に再生される同じ種別の複数のデータストリ ームを含んでおり、
前記管理情報生成部は、前記複数のデータストリームのうちのいずれのデータスト リームに基づいて前記コンテンツを再生するかを特定する選択情報を前記管理情報 として付加し、
前記記録制御部は、前記管理情報を前記記録媒体にさらに書き込む指示を出力 する、データ処理装置。
[2] 前記管理情報生成部は、前記選択情報として、選択された前記データストリームを 特定する識別情報、および、特定された前記データストリームにおける再生開始点を 示す開始点情報を前記管理情報に付加する、請求項 1に記載のデータ処理装置。
[3] 前記管理情報生成部は、識別された前記データストリームにおける再生終了点を 示す終了点情報をさらに生成し、前記管理情報に格納する、請求項 2に記載のデー タ処理装置。
[4] 前記管理情報生成部は、前記選択情報を複数生成して、前記管理情報に付加す る、請求項 2に記載のデータ処理装置。
[5] 前記管理情報生成部は、
第 1時刻以降の前記コンテンツの再生に対しては、第 1データストリームを特定する 識別情報、および、前記第 1時刻を前記再生開始点として特定する開始点情報を第 1選択情報として生成し、
前記第 1時刻より後の第 2時刻以降の前記コンテンツの再生に対しては、前記第 1 データストリームとは異なる第 2データストリームを特定する識別情報、および、前記 第 2時刻を前記再生開始点として特定する開始点情報を、第 2選択情報として生成 する、請求項 4に記載のデータ処理装置。
[6] 前記管理情報生成部は、ユーザ力 指示された再生開始点に基づいて、前記開 始点情報を生成する、請求項 2から 5のいずれかに記載のデータ処理装置。
[7] 前記管理情報生成部は、予め定められた再生開始点に基づいて、前記開始点情 報を生成する、請求項 2から 5の 、ずれかに記載のデータ処理装置。
[8] 指定された再生経路の削除に関する削除指示を受け取る指示受信部と、
前記削除指示に基づいて、前記複数のデータストリームのうち、指定された前記再 生経路に対応するデータストリーム、および、前記管理情報に含まれる指定された前 記再生経路に関する情報を、前記記録媒体から削除する指示を出力する記録制御 部と
をさらに備えた請求項 1に記載のデータ処理装置。
[9] コンテンツの多重化ストリームを含むストリームファイルであって、前記多重化ストリ 一ムには択一的に再生される同じ種別の複数のデータストリームが多重化されている 、ストリームファイルと、
前記コンテンツの再生に必要な管理情報を含む管理情報ファイルであって、前記 管理情報には、前記複数のデータストリームのうちのいずれのデータストリームに基 づ 、て前記コンテンツを再生する力を特定する選択情報が含まれて 、る、管理情報 ファイルと
が記録された記録媒体。
[10] 請求項 9に記載の記録媒体から前記管理情報ファイルおよび前記ストリームフアイ ルを読み出す再生制御部と、
読み出された前記管理情報ファイルから前記選択情報を取り出し、前記選択情報 によって特定されたデータストリームの抽出を指示する管理情報解析部と、 前記指示に基づいて、前記多重化ストリームから前記データストリームを分離する 分離部と、
分離された前記データストリームに基づいて前記コンテンツを再生するデコーダと を備えたデータ処理装置。
[11] 前記管理情報は、 第 1時刻以降の前記コンテンツの再生に対しては、第 1データストリームを特定する 識別情報、および、前記第 1時刻を前記再生開始点として特定する開始点情報を第 1選択情報として含み、かつ、
前記第 1時刻より後の第 2時刻以降の前記コンテンツの再生に対しては、前記第 1 データストリームとは異なる第 2データストリームを特定する識別情報、および、前記 第 2時刻を前記再生開始点として特定する開始点情報を第 2選択情報として含んで おり、
前記管理情報解析部は、前記第 1選択情報および前記第 2選択情報に基づ 、て、 前記第 1時刻から前記第 2時刻までは前記第 1データストリームの抽出を指示し、前 記第 2時刻以降は前記第 2データストリームの抽出を指示する、請求項 10に記載の データ処理装置。
[12] 制御情報に基づいて、映像を外部機器において表示するための信号を生成するグ ラフィック制御部をさらに備えており、
前記管理情報解析部は、前記第 1選択情報および前記第 2選択情報に基づ 、て、 複数の再生経路の存在を示す制御情報を出力し、
前記グラフィック制御部は、前記制御情報に基づ 、て前記複数の再生経路の各々 に対応する映像を並べて表示するための信号を出力する、請求項 10に記載のデー タ処理装置。
[13] コンテンツの編集に用いられるデータ処理装置であって、
前記コンテンツは多重化ストリームとして予め記録媒体に記録されており、前記多 重化ストリームは択一的に再生される同じ種別の複数のデータストリームを含んでお り、
ユーザから、前記複数のデータストリームのうちのひとつを選択する指示を受け取る 指示受信部と、
選択されたデータストリームを再生対象として指定する選択情報を生成し、前記管 理情報として出力する管理情報生成部と
を備えた、データ処理装置。
[14] 前記指示受信部は、再生の開始点を特定する指示をさらに受け取り、 前記管理情報生成部は、選択された前記データストリームを特定する識別情報、お よび、前記開始点を示す開始点情報を、前記選択情報として生成する、請求項 13に 記載のデータ処理装置。
[15] 前記選択情報を前記記録媒体に記録する指示を出力する記録制御部をさらに備 えた、請求項 14に記載のデータ処理装置。
[16] 前記選択情報を保持するメモリをさらに備えた、請求項 14に記載のデータ処理装 置。
[17] 前記指示受信部は、データストリームを選択する指示および再生の開始点を特定 する指示をそれぞれ複数回受け取り、
前記管理情報生成部は、前記選択情報を複数生成する、請求項 14に記載のデー タ処理装置。
[18] 制御情報に基づ!/、て、外部機器で映像を表示するための信号を生成するグラフィ ック制御部をさらに備えており、
前記管理情報生成部は、前記選択情報に基づいて、再生されるデータストリームの 順序および各データストリームの再生区間を示す制御情報を出力し、
前記グラフィック制御部は、前記制御情報に基づいて、前記順序および再生区間 を示す映像の信号を出力する、請求項 17に記載のデータ処理装置。
PCT/JP2006/309330 2005-05-10 2006-05-09 データ処理装置 WO2006121049A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2007528289A JPWO2006121049A1 (ja) 2005-05-10 2006-05-09 データ処理装置
US11/913,919 US20080152302A1 (en) 2005-05-10 2006-05-09 Data Processing Device
EP06746161A EP1887796A4 (en) 2005-05-10 2006-05-09 DATA PROCESSING DEVICE

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005-136858 2005-05-10
JP2005136858 2005-05-10

Publications (1)

Publication Number Publication Date
WO2006121049A1 true WO2006121049A1 (ja) 2006-11-16

Family

ID=37396557

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2006/309330 WO2006121049A1 (ja) 2005-05-10 2006-05-09 データ処理装置

Country Status (4)

Country Link
US (1) US20080152302A1 (ja)
EP (1) EP1887796A4 (ja)
JP (1) JPWO2006121049A1 (ja)
WO (1) WO2006121049A1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010124221A (ja) * 2008-11-19 2010-06-03 Canon Inc 録画装置およびその制御方法
JP2010166352A (ja) * 2009-01-16 2010-07-29 Funai Electric Co Ltd ダビング装置
JP2012143015A (ja) * 2012-05-02 2012-07-26 Dowango:Kk ストリーミングコンテンツ再生装置および方法、プログラム
JP2017017740A (ja) * 2016-09-08 2017-01-19 シャープ株式会社 放送システム
WO2018016294A1 (ja) * 2016-07-20 2018-01-25 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
CN109690674A (zh) * 2016-09-08 2019-04-26 索尼公司 信息处理装置、信息处理方法和程序

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7827491B2 (en) * 2006-05-12 2010-11-02 Tran Bao Q Systems and methods for video editing
KR20100053339A (ko) * 2008-11-12 2010-05-20 삼성전자주식회사 휴대단말기의 방송 데이터 재생 방법 및 장치
JP2012147223A (ja) * 2011-01-12 2012-08-02 Funai Electric Co Ltd 放送記録装置、及び、放送記録方法
JP7215415B2 (ja) * 2017-05-31 2023-01-31 ソニーグループ株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
KR102188270B1 (ko) * 2018-07-06 2020-12-09 엘지전자 주식회사 360 비디오 데이터의 서브픽처 기반 처리 방법 및 그 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0832887A (ja) * 1994-07-15 1996-02-02 Toshiba Corp デジタル放送送受信装置
JP2002216460A (ja) * 2001-01-16 2002-08-02 Matsushita Electric Ind Co Ltd 情報記録媒体
JP2002314960A (ja) 2001-04-16 2002-10-25 Matsushita Electric Ind Co Ltd マルチビュー放送サービスシステム及び、それに関する、装置または方法または記録媒体またはプログラム

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0146127B1 (ko) * 1994-11-26 1998-09-15 구자홍 디지탈 에치디티브이용 브이씨알의 변속재생 장치
US5691986A (en) * 1995-06-07 1997-11-25 Hitachi America, Ltd. Methods and apparatus for the editing and insertion of data into an encoded bitstream
JP3484834B2 (ja) * 1995-07-28 2004-01-06 ソニー株式会社 データ符号化/復号化方法および装置
JP3491401B2 (ja) * 1995-08-02 2004-01-26 ソニー株式会社 データ符号化装置および方法、並びに、データ復号化装置および方法
US5844478A (en) * 1996-05-31 1998-12-01 Thomson Consumer Electronics, Inc. Program specific information formation for digital data processing
US5754651A (en) * 1996-05-31 1998-05-19 Thomson Consumer Electronics, Inc. Processing and storage of digital data and program specific information
JP4292654B2 (ja) * 1999-03-19 2009-07-08 ソニー株式会社 記録装置および方法、再生装置および方法、並びに記録媒体
WO2001082611A1 (fr) * 2000-04-21 2001-11-01 Sony Corporation Procede et appareil de traitement d'informations, support enregistre, et programme
KR100795255B1 (ko) * 2000-04-21 2008-01-15 소니 가부시끼 가이샤 정보 처리 장치 및 방법, 프로그램과 기록 매체
KR20020097454A (ko) * 2001-06-21 2002-12-31 엘지전자 주식회사 멀티채널 스트림 기록장치 및 방법과, 그에 따른 기록매체
JP3954473B2 (ja) * 2002-10-01 2007-08-08 パイオニア株式会社 情報記録媒体、情報記録装置及び方法、情報再生装置及び方法、情報記録再生装置及び方法、記録又は再生制御用のコンピュータプログラム、並びに制御信号を含むデータ構造
JP4588968B2 (ja) * 2002-10-01 2010-12-01 パイオニア株式会社 情報記録媒体、情報記録装置及び方法、情報再生装置及び方法、情報記録再生装置及び方法、記録又は再生制御用のコンピュータプログラム、並びに制御信号を含むデータ構造
EP1609143A4 (en) * 2003-03-07 2007-10-31 Samsung Electronics Co Ltd INFORMATION STORAGE MEDIUM CONTAINING MULTI-CHANNEL DATA, STORAGE APPARATUS AND ITS READER
JP3908691B2 (ja) * 2003-04-28 2007-04-25 株式会社東芝 情報記録媒体、録画前処理方法、情報記録方法、情報再生方法、情報記録装置および情報再生装置
JP2004350042A (ja) * 2003-05-22 2004-12-09 Canon Inc 記録装置および記録方法、再生装置および再生方法、並びに記憶媒体

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0832887A (ja) * 1994-07-15 1996-02-02 Toshiba Corp デジタル放送送受信装置
JP2002216460A (ja) * 2001-01-16 2002-08-02 Matsushita Electric Ind Co Ltd 情報記録媒体
JP2002314960A (ja) 2001-04-16 2002-10-25 Matsushita Electric Ind Co Ltd マルチビュー放送サービスシステム及び、それに関する、装置または方法または記録媒体またはプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP1887796A4

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010124221A (ja) * 2008-11-19 2010-06-03 Canon Inc 録画装置およびその制御方法
US8787734B2 (en) 2008-11-19 2014-07-22 Canon Kabushiki Kaisha Recording apparatus for recording program content transmitted in broadcast signal and control method thereof
JP2010166352A (ja) * 2009-01-16 2010-07-29 Funai Electric Co Ltd ダビング装置
JP2012143015A (ja) * 2012-05-02 2012-07-26 Dowango:Kk ストリーミングコンテンツ再生装置および方法、プログラム
CN109478412A (zh) * 2016-07-20 2019-03-15 索尼公司 信息处理设备、信息处理方法和程序
WO2018016294A1 (ja) * 2016-07-20 2018-01-25 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
JPWO2018016294A1 (ja) * 2016-07-20 2019-05-09 ソニー株式会社 情報処理装置、および情報処理方法、並びにプログラム
CN109478412B (zh) * 2016-07-20 2021-07-16 索尼公司 信息处理设备、信息处理方法和程序
JP7031589B2 (ja) 2016-07-20 2022-03-08 ソニーグループ株式会社 情報処理装置、および情報処理方法、並びにプログラム
US11395018B2 (en) 2016-07-20 2022-07-19 Sony Corporation Information processing apparatus, information processing method, and program
JP2017017740A (ja) * 2016-09-08 2017-01-19 シャープ株式会社 放送システム
CN109690674A (zh) * 2016-09-08 2019-04-26 索尼公司 信息处理装置、信息处理方法和程序
CN109690674B (zh) * 2016-09-08 2021-05-11 索尼公司 信息处理装置、信息处理方法和程序
US11259074B2 (en) 2016-09-08 2022-02-22 Sony Corporation Information processing device, and information processing method, and program

Also Published As

Publication number Publication date
EP1887796A1 (en) 2008-02-13
JPWO2006121049A1 (ja) 2008-12-18
EP1887796A4 (en) 2010-09-15
US20080152302A1 (en) 2008-06-26

Similar Documents

Publication Publication Date Title
US7912352B2 (en) Playback apparatus, program and playback method
KR100892012B1 (ko) 데이터 전송장치 및 방법
JP4770601B2 (ja) 情報処理装置および情報処理方法、プログラム、並びに、プログラム格納媒体
US8369682B2 (en) Reproduction device, recording method and playback method
WO2006121049A1 (ja) データ処理装置
JPWO2006030767A1 (ja) データ処理装置
WO2005117432A1 (ja) 番組録画装置および番組録画方法
JP4542546B2 (ja) データ処理装置
WO2002099804A1 (fr) Appareil d'enregistrement, support d'enregistrement, appareil de reproduction, programme et procede connexes
JP4957142B2 (ja) 再生装置、再生方法および再生プログラム
US20040165865A1 (en) Method and apparatus for recording/reproducing graphic and subtitle data on/from a high-density recording medium
JP2012074105A (ja) 記録装置/方法/媒体、再生装置/方法
JP2012074106A (ja) 記録装置/方法/媒体、再生装置/方法
JP2007129368A (ja) 情報記録装置およびその方法
JP2006338751A (ja) ネットワーク対応型情報記録再生装置及びその制御方法
WO2012123982A1 (ja) 記録装置/方法/媒体、再生装置/方法
JP2008199528A (ja) 情報処理装置および情報処理方法、プログラム、並びに、プログラム格納媒体
JP2008199527A (ja) 情報処理装置および情報処理方法、プログラム、並びに、プログラム格納媒体
WO2013031307A1 (ja) 記録装置/方法/媒体、再生装置/方法
JP4821456B2 (ja) 情報処理装置および情報処理方法、プログラム、データ構造、並びに記録媒体
JP2012015671A (ja) 記録装置/方法/媒体、再生装置/方法
JP2008052836A (ja) 情報処理装置および情報処理方法、プログラム、並びに、プログラム格納媒体
JP2003132628A (ja) 情報記録再生装置
WO2012123981A1 (ja) 記録装置/方法/媒体、再生装置/方法
WO2013031299A1 (ja) 記録装置/方法/媒体、再生装置/方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2007528289

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 11913919

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2006746161

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: RU

WWP Wipo information: published in national office

Ref document number: 2006746161

Country of ref document: EP