WO2008029640A1 - Method and device for playing video data of high bit rate format by player suitable to play video data of low bit rate format - Google Patents

Method and device for playing video data of high bit rate format by player suitable to play video data of low bit rate format Download PDF

Info

Publication number
WO2008029640A1
WO2008029640A1 PCT/JP2007/066449 JP2007066449W WO2008029640A1 WO 2008029640 A1 WO2008029640 A1 WO 2008029640A1 JP 2007066449 W JP2007066449 W JP 2007066449W WO 2008029640 A1 WO2008029640 A1 WO 2008029640A1
Authority
WO
WIPO (PCT)
Prior art keywords
bit rate
video data
information
format
navigation information
Prior art date
Application number
PCT/JP2007/066449
Other languages
English (en)
French (fr)
Inventor
Yasushi Miyake
Chia Chin Ooi
Ettikan Kandasamy Karuppiah
Pek Yew Tan
Original Assignee
Panasonic Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corporation filed Critical Panasonic Corporation
Priority to US12/438,026 priority Critical patent/US20100166387A1/en
Priority to EP07792978A priority patent/EP2061241A4/en
Priority to JP2008533095A priority patent/JPWO2008029640A1/ja
Publication of WO2008029640A1 publication Critical patent/WO2008029640A1/ja

Links

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537—Optical discs
    • G11B2220/2541—Blu-ray discs; Blue laser DVR discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537—Optical discs
    • G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
    • G11B2220/2566—DVDs belonging to the minus family, i.e. -R, -RW, -VR

Definitions

  • the present invention relates to a method and apparatus for reproducing video data of a high bit rate format by a player suitable for reproducing video data of a low bit rate format.
  • the present invention relates more particularly to the prediction of navigation information used for seamless AV media playback in many formats.
  • the present invention particularly provides transcoded AV media that achieves real-time streaming for networked computing devices and is required by a digital media player (DMP) between disparate computing devices.
  • DMP digital media player
  • An apparatus and a method for enabling offline playback of a video are provided.
  • Each computing device supports different AV media formats.
  • the prediction of navigation information of the digital media server (DMS) is activated. For example, both continuous and discontinuous AV media after user editing are supported by the prediction of navigation information.
  • DMS digital media server
  • DMS consumer electronics
  • DMP digital versatile disc
  • the first information is AV media including an AV stream.
  • the second information is navigation information including navigation information necessary to play back AV media in either the normal playback mode or trick play mode.
  • the navigation information is defined by each AV media format and includes playback time and AV media position mapping information. Using navigation information, trick play modes such as seek, fast forward and rewind can be achieved.
  • each AV media format has a well-defined structure of AV media and navigation information.
  • One common example is a DVD format that defines a video object block (VOB) and an information format (IFO) as AV media and navigation information files, respectively.
  • VOB video object block
  • IFO information format
  • Patent Document 2 US Published Patent Publication No. 2004 / 0054689A1 Specification
  • Patent Document 3 European Patent Publication No. 1524855A1 Specification
  • Patent Document 4 European Patent Publication No. 0920203A2 Specification
  • Patent Document 5 US Published Patent Publication No. 2003 / 0021587A1 Specification
  • the existing solutions can achieve backward compatibility and interoperability between networked computing devices, some disadvantages remain.
  • the existing solution transcodes the requested AV media and generates the corresponding navigation information based on the transcoded AV media! Therefore, storage space must be allocated to different AV media formats so that navigation information can be generated based on the requested AV format. In this case, especially when the AV media is very long and the number of AV media stored in the DMS is large, a lot of memory and storage devices are consumed.
  • the second drawback is that it takes time to transcode the entire AV media, so that rendering of requested navigation information to DMP is delayed. This is because the desired navigation information can be generated only after transcoding of all AV media is completed.
  • existing solutions avoid the real-time playback of streamed AV media in DMP, where navigation information must be waited for before it becomes available, and AV media must be requested. ! /
  • other solutions provide AV media access interoperability without the use of navigation information.
  • trick play mode cannot be realized, only normal playback is possible with DMP.
  • the present invention relates to prediction of navigation information used for seamless playback of multi-format AV media.
  • the present invention is particularly useful for networked com- binations.
  • An apparatus and method in a DMS that enables off-line playback of transcoded AV media required by a heterogeneous computing device that supports the AV media format, eg, digital media player (DMP) between home appliances .
  • DMP digital media player
  • the present invention has an intelligent mechanism to address the above drawbacks.
  • the present invention transcodes only the range of the requested AV media, stores it in the temporary media storage device, and transcodes the AV media.
  • DMP Dynamic Multimedia Protocol
  • the present invention predicts navigation information based on original navigation information rather than transcoded AV media. Predictive navigation information can be generated with negligible delay without parsing the transcoded AV media, helping to achieve real-time AV playback with DMP.
  • Predictive navigation information may be generated prior to transcoding video data in a high bit rate format into video data in a low bit rate format.
  • Transcoding of video data may be performed in real time. So viewers
  • Transcoding of video data is performed for each section.
  • the memory size can be small enough to transcode a segment.
  • FIG. 1 shows a simple heterogeneous communication network with many computing devices.
  • FIG. 2A is a block diagram showing a DMS showing various subsystems, hardware components, and software components.
  • FIG. 2B is a block diagram showing DMP in which playback of transcoded AV media is realized with the aid of navigation information prediction.
  • FIG. 3A is a communication chart showing a data flow between DMS and DMP.
  • FIG. 3B A diagram showing steps for creating predicted navigation information.
  • FIG. 5 is a communication chart showing predicted navigation information and a data flow for transcoded AV media between DMS and DMP supporting different AV media formats.
  • FIG. 6 is a block diagram illustrating a DMS including a navigation information prediction subsystem and an AV media transcoding manager that enables real-time streaming and playback.
  • FIG. 7 is a flowchart illustrating the steps performed by the DMS to predict navigation information.
  • FIG. 8 is a flow chart illustrating the steps performed by the DMS to transcode the original AV media to an AV media format compatible with the requesting DMP.
  • FIG. 9 is a diagram showing steps for generating a range mapping table based on original navigation information and predicted navigation information.
  • FIG. 11 is a diagram showing steps of how the padding subsystem works for transcoded AV media.
  • FIG. 12 is a flowchart showing steps performed by the DMS during navigation information prediction for a discontinuous stream.
  • Embodiments of the present invention include AV media streaming and playback via DMS (Digital Media Sano) and DMP (Digital Media Player), network or offline AV media playback that require an AV media transcoder. It relates to media retrieval methods based on the prediction of navigation information for both non-contiguous and AV media, and range mapping between two streams of different formats. Embodiments of the present invention also relate to a padding subsystem for ensuring consistency of predicted stream size and transcoded stream size. The present invention more particularly relates to an apparatus, system, and method for navigation information prediction provided by a DMS that enables offline or real-time playback of AV media transcoded in a requesting DMP. About.
  • Figure 2A shows a DMS 200, a Blu-ray disc recorder in the living room, that can reproduce high-quality pictures on a monitor screen.
  • Figure 2B shows a DMP300 DVD-VR player with a display device placed in the bedroom that can reproduce a standard quality picture on the monitor screen.
  • DMS200 and DMP300 are Connected by the system.
  • DMS200 stores movies Ml in high quality picture format.
  • a Blu-ray Disc recorder a very clear and highly accurate picture is displayed. If a movie Ml is sent over the home network to the DMS200 power, etc.
  • the DMP300 will convert the movie Ml into a standard quality picture format that creates less accurate pictures. Downconvert. As will be understood from the above, when the movie Ml is played in the bedroom by the DMP300, the picture is not as accurate as the picture played in the living room. Down-conversion of the movie Ml can be performed on either DMS200 or DMP300. In the example described below, down-conversion is performed with DMS200. In order to transmit the movie Ml from the DMS 200 to the DMP 300, the data is transmitted in packets at a data rate transfer rate controlled by the controller.
  • FIG. 3A a diagram of data transmission between DMS 200 and DMP 300 is shown.
  • Viewer power in the bedroom Suppose you want to watch the movie Ml stored in the DMP300 in the living room.
  • the DMP 300 sends a predicted navigation information request 486 to the DMS 200.
  • the DMS 200 Upon receipt of the predicted navigation information request 486, the DMS 200 prepares the predicted navigation information 912 based on the original navigation information 902 and the conversion condition table 1004 shown in FIG. 3B.
  • Navigation information is also called index information or IFO.
  • the original navigation information 902 included as metadata in the content of the movie Ml is a list of playback times and byte positions, more specifically, a list of presentation timestamps, and It contains a corresponding list of byte positions in the original AV media.
  • the original navigation information 902 described above is applicable to a Blu-ray Disc recorder having a bit rate of DMS200, ie 20 Mbps (this number is just an example), but DMP300, ie 10 Mbps (this number is (It is just an example) DVD with bit rate—not applicable to VR players!
  • the original navigation information 902 is converted into predictive navigation information 912 that can be applied to the DMP 300, that is, the DVD-VR player, using the conversion condition table 1004.
  • the conversion condition table 1004 includes a bit rate, a size, a frame rate, a key frame interval, a system stream format, an audio elementary stream format, and a video elementary stream format. , Including various AV media attributes.
  • information specific to the original AV media and information power S and attributes specific to the target AV media are described as! /.
  • the original AV media information is information necessary for operating the DMS200 of the Blu-ray Disc recorder
  • the target AV media information is used for operating the DMP200 of the DVD-VR player. Necessary information.
  • the bit rate of the original AV media is 20 Mbps
  • the bit rate of the target AV media is 10 Mbps
  • the size of the original AV media is 16: 9.
  • HD with screen ratio target AV media size is D1 with a screen width to height ratio of 3: 2
  • the frame rate of both media is 29.97
  • both The key frame interval of the media is 15, and the system stream format of the original media is a transport stream.
  • the conversion condition table 1004 is prepared and stored in the DMS 200.
  • the new device Device information is sent to the DMS200, and the new device information is added to the conversion condition table 1004.
  • bit rate is an attribute necessary for the present invention.
  • the original navigation information is converted into predictive navigation information using the bit rate information.
  • bit rate information In general, the following relationship can be given:
  • the DMS 200 when the DMS 200 prepares the predicted navigation information, the DMS 200 sends or distributes the predicted navigation information to the DMP 300 as the navigation information distribution 484.
  • the predicted navigation information is stored 488 in the storage device.
  • the DMP 300 reads the predicted navigation information of the movie Ml and sends a transcoded AV media request 482 to the DMS 200. For example, if a portion of the movie Ml of 0.00—0.50 seconds is requested, the DMP 300 creates a 0-599 byte transcoded AV media stream request. Such a request for the data size of the transcoded AV media stream is changed to a request in the time domain, ie, 0.00 to 0.50 seconds. Requests in the time domain are sent to the DMP 300 as a transcoded AV media request 482.
  • a portion of the measured byte movie Ml in the original AV media is detected.
  • a portion is 0 to 1199 bytes. Therefore, in the DMS 200, a part (0 to 1199 bytes) of power in the original AV media is used and converted for conversion from the BD-RE format to the DVD-VR format.
  • the transcoded part of a DVD-VR format movie Ml has a data size of less than 599 bytes, which is about half of 1200 nots, or about half the data size of the same part of a movie Ml in BD-RE format. Have.
  • the transcoded partial force of the movie VR in the DVD-VR format which is about 599 bytes of data, is transmitted to the DMS 200 force, etc. as a transcoded AV media distribution 480.
  • the transcoded portion of the movie Ml in DVD-VR format is used for playback on the screen for the requested time of 0.00-0.50 seconds.
  • the DMP 300 may then create another transcoded AV media stream request from 600 to 1499 bytes for the subsequent portion of the movie Ml.
  • A2 In DMS 200, convert the original navigation information into predictive navigation information. This predictive navigation information can be applied to low bit rate format video data.
  • the DMP 300 requests a section of video data in the low bit rate format in the low bit rate byte information based on the prediction navigation information!
  • This low bit rate byte information includes the start byte position and end byte position of a section of video data in the low bit rate format for playback by the DMP 300.
  • the low bit rate byte information is converted into time domain information including a start time and an end time for reproduction.
  • This high bit rate byte information includes the start byte position and end byte position of a section of video data in the high bit rate format.
  • high bit rate corresponds to the original AV media bit rate
  • low bit rate is not limited force S, thereto corresponding to the target AV media bit rate. That is, in the present invention, conversion from a low bit rate to a high bit rate or vice versa is possible.
  • steps (A6), (A7), and (A8) are performed in DMS200, but it is described that step (A6) can be performed in DMP300.
  • the transcoded AV media request 482 may be high bit rate information obtained in step (A6) rather than in the time domain request.
  • Step (A8) can also be performed in DMP300.
  • step (A5) described as being performed in the DMP 300 can also be performed in the DMS 200.
  • the transcoded AV media request 482 may be the low bit rate information obtained in step (A4) rather than the request in the time domain.
  • the video data stored in the DMS 200 is transferred for each segment and reproduced by the DMP 300.
  • the present invention can be applied to a player provided with a storage device suitable for reproducing video data in a low bit rate format and for storing video data in a high bit rate format.
  • Such players The following steps are performed for playback by:
  • (B2) Convert the original navigation information into predictive navigation information that can be applied to video data in the low bit rate format.
  • the low bit rate byte information includes a start byte position and an end byte position of a section of video data in a low bit rate format for reproduction by a player.
  • the high bit rate byte information includes a start byte position and an end byte position of a section of video data in a high bit rate format.
  • Such a player has the advantage of being able to play video data having a higher bit rate than the player can process.
  • FIG. 1 illustrates a sample communication network 102 that connects a number of computing devices 104 via a network connection 116, such as either 802.11 or Ethernet (registered trademark), either wired or wireless. It is described.
  • a network connection 116 such as either 802.11 or Ethernet (registered trademark), either wired or wireless. It is described.
  • Each of these combining devices has its own internal media storage device 106 and portable A media storage device 114 and a processing unit 112 are provided.
  • the processing unit 112 may be a software executable processor or an LSI processor that performs a specific function.
  • These computing devices may have different functions and purposes in the network with different capabilities, device forms, and mobile behavior.
  • the internal media storage device 106 includes the range map generated during the navigation information prediction, and the power including the AV media 108, the conversion condition table, and the navigation information 110 for the AV media. Absent.
  • the format of navigation information 110 and AV media 108 are supported by the computing device on which they reside.
  • the AV media generated for the requesting DMP and its navigation information are also removed from the internal media storage device 106 to avoid wasting storage capacity.
  • a portable media storage device 114 is provided that allows each computing device to copy predictive navigation information and original AV media for offline playback on other computing devices. May have.
  • the navigation information is necessary for playing back AV media.
  • the content of the navigation information includes the format-dependent AV structure size, presentation time, AV structure address, presentation time mapping to the AV structure address, and other AV media attributes.
  • Two examples of navigation information are IFO for DVD-VR format and clip information and actual playlist for BD-RE format.
  • the AV structure address is the offset or byte position of the AV structure from the beginning of the AV media for the presentation time.
  • the AV structure or AV media addresses described elsewhere in this document are the same as the addresses used in this paragraph.
  • Each computing device in the network acts as a DMS and has access to AV media stored in other networked conversing devices with a navigation information prediction subsystem, You can play back.
  • the computing device may also copy DMS power, etc. predicted navigation information for offline playback.
  • DMS is a new AV format It provides backward compatibility so that the requesting DMP can play back the AV media stored in the DMS! /.
  • FIG. 2A shows the components within the DMS of the present invention.
  • the DMS 200 includes various subsystems, hardware components, and software components, and basically a CPU 201 and an AV decoder 210 capable of decoding video data in a high bit rate format.
  • AV decoder 210 may be included as a function of CPU 201.
  • functions of the CPU 201 will be described.
  • the media renderer 202 fulfills the functions and capabilities of DMP, such as supported AV formats, by creating navigation information and AV media compatible with DMP based on the DMP request.
  • media renderer 202 is comprised of four subsystems: transcoder subsystem 204, navigation information subsystem 206, range mapping subsystem 220, and padding subsystem 222.
  • the transcoder subsystem 204 transcodes AV media from and to different formats, including MPEG video, MPEGES, MPEGTS, or MPEGPS.
  • the transcoder subsystem 204 can transcode the entire AV media or only a range or a section of the AV media based on the range specified in the signal requested by the DMP. In the case of only one range or segment, the range of the encoded stream is based on the range required by the DMP. Different formats of AV media have different AV data structures, so different formats have different ranges for one original media.
  • the range mapping subsystem 220 provides a corresponding range between the range of the originator AV media format and the range of the requested AV media format.
  • the padding subsystem 222 then plays a role in ensuring consistency between the predicted stream size and the transcoded stream size, which is the appropriate AV playback based on the predicted navigation information. Is important to guarantee.
  • the navigation information prediction subsystem 206 plays a role of predicting and generating navigation information for an AV media format compatible with the requesting DMP.
  • Navigation information prediction is in a format compatible with the requesting DMP. Performed before transcoding the Rigid AV media.
  • the result of the navigation information prediction subsystem 206 is navigation information that is compatible with the AV media format required by the DMP.
  • the media directory 212 operating the media directory service, it is necessary to determine the AV media type based on the requesting DMP.
  • the media directory includes both AV media 2 24 and navigation information 226 stored in the file system 218 for different media types.
  • the navigation information includes, but is not limited to, AV data size, AV bit rate, presentation time, discontinuity information, and AV stream information.
  • Media directory node 232 classifies AV media and navigation information according to the AV format.
  • media type 1 is a DVD-VR device compliant PS and IFO file
  • media type 2 is a BD-RE device compliant TS and its navigation information file.
  • a particular DVD—VR device can only access DMS tri-level 2 / directory level 3.
  • the media directory can be either a pre-configured fixed directory or a dynamically created directory that exists before sending the AV media or navigation information file to the requesting device.
  • the content transfer subsystem 214 is responsible for determining whether a request originates from a remote combining device or portable media storage device.
  • Server application 216 together with remote content transfer subsystem 208 and network interface control subsystem 230, handles content transfer to the requesting DMP in the network.
  • the local content transfer subsystem 228 is responsible for transferring content between the internal media storage device 106 and the portable media storage device 114.
  • an AV decoder 210 such as an MPEG decoder may be present.
  • Figure 6 presents a more detailed example of the interaction between modules in the DMS 200.
  • the DMP is a network capability or portable
  • the media storage device must be a computing device with one or the other. If it has network capability, the DMP requests access to AV media in the DMS via the communication network. If a portable media storage device is provided, the DMP performs offline playback based on the predicted navigation information and the original AV media copied from the DMS. Offline play knock is performed in a DMP that has the ability to transcode the copied original AV media. The DMP transcodes the copied original AV media into a target AV media format that can be played back in the DMP based on the copied prediction navigation information together with the conversion condition table.
  • the DMP 300 is basically a DVD player including a CPU 301, an AV decoder 314 capable of decoding video data in a low bit rate format, and a display device 318.
  • the functions of the CPU 301 will be described below.
  • the AV decoder 314 can be included as one function of the CPU 301.
  • Numerous functional subsystems include a content transfer subsystem 316 and a media directory 320 that includes both AV media 306 and navigation information 308 categorized by the media directory handler 322 within the file system 304. And a display device 318.
  • the DMP communicates with the DMS over the network and requests predictive navigation information and AV media from the DMS.
  • DMP obtains predictive navigation information and AV media copied from the DMS via portable media storage.
  • the content transfer subsystem 316 can send media to or from the DMS via the network if the request signal comes from the DMS, or via the portable media storage device if the request signal comes from a portable media storage device. Handle forwarding.
  • AV decoder 314 is responsible for rendering the AV media obtained from content transfer subsystem 316 for presentation on display device 318.
  • FIG. 4 illustrates a communication flow between a DMS portable media storage device 496 and an internal media storage device 498 to illustrate this process.
  • the DMS stores the original AV media 490 and the original navigation information 492 in its internal media storage device 498.
  • the DMS also includes a navigation information prediction subsystem 206 to create predictive navigation information.
  • the navigation information prediction subsystem 206 in the DMS is based on the original navigation information 492 stored in its internal media storage device 498.
  • predicted navigation information 494 is generated.
  • the predicted navigation information 494 is delivered to the requesting portable media storage device 496 via a transmission line 484, along with the range map generated during the navigation information prediction, 488 stored in portable media storage.
  • the portable media storage device 496 is then a copy of the original AV media corresponding to the copied predicted navigation information 478 to allow offline playback on another combination device bundled with the portable media storage slot. May require 48 2.
  • the conversion condition table also needs to be copied to the portable media storage device. In order to determine the transcoder input parameters, conversion condition information is required in the transcode of the copied original AV media.
  • the requested original AV media is delivered 480 to the requesting portable media storage device 496, the AV media is stored in the portable media storage device 496.
  • the DMP may initiate a request 506 for the desired navigation information from the DMS power, and then initiate AV playback.
  • the S Based on the DMP request, the S generates the requested predicted navigation information 518 based on the original navigation information 526 that is immediately available in the DMS, if not available! Since the required navigation information necessary to operate the transcoding of the requested AV media can be created, the requesting DMP can receive the requested navigation information 520 in real time.
  • the generated predicted navigation information is sent to the DMP.
  • the DMP Based on the received navigation information 520, the DMP sends an AV media request 510 to the DMS and activates stream playback by specifying the desired range of AV media 532.
  • the transcoder subsystem 204 searches only the specified range of the original AV media 530, which does not transcode the entire original AV media, and transcodes it to the required AV format 528.
  • the transcoded AV media is then delivered 512 to the requesting DMP, which initiates playback 534 of the transcoded AV image via its display device 318.
  • Trick Play 536 eg, fast forward, skip
  • the DMP must initiate a request to the DMS to specify the AV media range that corresponds to the selected trick play mode 514.
  • the transcoding process is then invoked at the DMS to transcode only the requested range of AV media and then delivered 516 to the DMP.
  • the DMP Upon receiving the requested range of transcoded AV media, the DMP plays back the desired trick play image 538. Normal mode and trick play mode force selected by the DMP and specified in the AV media request directed to the desired coverage force DMS of the AV media for playback.
  • FIG. 6 illustrates a more detailed embodiment of the interaction between the media renderer 600 in the DMS 688 and the DMP 690.
  • the navigation information generator 694 is activated so as to prepare the desired navigation information.
  • Condition information 614 The navigation information generator 694 requests an original navigation information request 604 from the original navigation information source storage device 698. The requested navigation information is then communicated 606 to the navigation information generator 694.
  • the navigation information generator 694 also requests the original AV media if it needs to retrieve information from the original AV media.
  • the requested original AV media is then delivered 610 to the navigation information generator 694.
  • the navigation information generator 694 requests 612 conversion condition information that can be obtained from the transcode manager 692, and then sends the requested conversion condition information 614 to the navigation information generator 694.
  • the navigation information generator 694 predicts the content of the desired navigation information and sends the newly generated navigation information 616 to the DMP 690.
  • the range map information generated while preparing the predicted navigation information is stored 628 in the DMS range map information storage 682. Range map information 682 is used by both transcoding manager 692 and padding handler 684.
  • the DMP 690 When the DMP 690 receives the requested predicted navigation information 616, the DMP 690 initiates an AV media range request 618 to play based on the content of the predicted navigation information 616.
  • transcode manager 692 Upon receipt of request 618 specifying the range of AV media in the desired format, transcode manager 692 is launched to determine the corresponding range of original AV media that need to be searched for transcoding. It is done.
  • the transcode manager 692 requests 630 range map information from the range map information store 682.
  • the range map information is retrieved and passed on to transcode manager 692.
  • the transcoder manager 692 retrieves only the corresponding requested range of the original AV media 620 from the media stream storage device 696 including both continuous and discontinuous streams.
  • transcoding manager 692 transcodes the original AV media 622 in this range to a format supported by DMP690. Then the match between the predicted stream size and the transcoded stream size In order to determine whether padding is necessary to maintain the performance, the transcoded AV media 624 is distributed to padding No. 684 along with the range map information 632 obtained from the range map information storage device 682. The Finally, it is delivered 626 to the requesting DMP690, padded, transcoded AV media power if necessary. According to the present invention, a memory and a storage device with lower consumption are realized as compared with the case where a larger storage device is required to transcode the entire AV medium.
  • FIG. 7 illustrates the detailed flow of the navigation information prediction subsystem 798 in the DMS.
  • the source for generating the predicted navigation information is the original navigation information and conversion condition table for the original AV media.
  • the navigation information subsystem parses and collects necessary information from the original navigation information and the conversion condition table in step 796.
  • the prediction subsystem obtains both the original stream information and the target stream information from the conversion condition table.
  • the original stream information includes a discontinuity flag, a recording time, a character set, and the like
  • the conversion condition information includes an AV media bit rate, a frame rate, a key frame interval, and stream sizes of both the original stream and the target stream.
  • the presentation time stamp and the corresponding address in the original stream are extracted.
  • step 790 a check is made to determine if there is a change between the original stream bit rate and the target stream bit rate based on the conversion condition information. If the target stream has a bit rate different from the original stream bit rate, then in step 788, the size of each AV data structure in the requested format is predicted and accumulated based on the presentation time interval and the target bit rate. It is calculated. If it does not have a different bit rate, at step 786, for each AV data structure, between the original stream address and the target stream address based on a presentation time interval that does not change after the transcoding process. Mapping is performed. Hereinafter, referring to FIG. The mapping process between the original stream address and the target stream address is described in detail.
  • Steps 788 and 786 are repeated until the last AV data structure to be examined after mapping each AV data structure is completed in step 784.
  • the new AV media strength is predicted from the accumulated AV data structure of the predicted size.
  • the predicted navigation information power is generated based on the parsed information! /.
  • DMP may initiate AV media playback when the requested predictive navigation information is received from the DMS.
  • Figure 8 shows transcoding that works with padding handler 684 when necessary.
  • FIG. 7 shows the advanced steps performed by manager 692; These steps are implemented as instructions that are stored in the computer readable memory unit of the system and executed by the processor.
  • transcode manager 692 Upon receiving a DMP request for AV media that can be activated either in normal mode or in a specific trick play mode in step 812, transcode manager 692 in step 814 requests the requested range. Transcodes AV media. The range of the original AV media is obtained based on the range map information generated during the prediction of the navigation information!
  • the present invention provides a transform for the DMS to meet the predicted size indicated in the predicted navigation information. Provides control to the DMS to adjust the size of the AV media in the coded range.
  • steps 820, 824, and 826 when the transcoding process is complete, after transcoding, the transcoded AV data size force is checked against the predicted AV data size to determine the next process. In this case, the DMS itself has knowledge of the predicted AV media size recorded in the navigation information. There are three possible cases. That is, first, the transcoded AV data size is exactly equal to the predicted AV data size826.
  • the transcoded AV data size is larger than the predicted AV data size824.
  • the predicted AV data size is larger than the transcoded AV data size. Big! /, 820. If the transcoded AV data size is exactly equal to the predicted AV data size 826, at step 816, the DMS streams the transcoded AV media to the DMP in real time. If the transcoded AV data size is greater than the predicted AV data size 824, in step 828, the DMS checks the AV media to verify that the transcoded AV media size is less than or equal to the predicted AV media size. Re-transcode.
  • transcoder input parameters for example by lowering the target AV bit rate or by using higher DCT coefficients in the MPEG stream format.
  • the retranscoded AV media is then rechecked against the expected AV media size by repeating steps 826, 824, and 820. This is to confirm that the transcoded AV data size is not larger than the predicted AV data size. Finally, the transcoded AV data size is smaller than the predicted AV data size! /, If 820, first, in step 830, the size difference is determined, and then in step 822, the transcoded AV data size is determined.
  • a pada da aka is exactly the expected size.
  • the transcoded AV media is streamed to the DMP in real time at step 816 after transcoding and padding or retranscoding if necessary. Consistency between the AV media and the corresponding navigation information is achieved. This is important to ensure proper playback in DMP.
  • the transcoding manager is responsible for transcoding the range of AV media requested by the DMP in step 812 based on the navigation information generated by the navigation information prediction subsystem 206.
  • the playback mode which can be either normal playback mode or trick play mode, the requested range of AV media is specified in the request initiated by the DMP. All the steps illustrated in Figure 8 are repeated until the connection between DMS688 and DMP690 is terminated.
  • range map information is consistent with AV media requests by DMP. It is important to determine the range of the original AV media and the target AV media to match.
  • the range map information is generated based on two types of information: presentation time stamp and corresponding address or position in the AV media. The mapping of the presentation time stamp to the corresponding location in the AV media serves as a reference for the decoder to present the corresponding portion of the AV media at a specific presentation time.
  • FIG. 9 illustrates an example of how the range map information 90 8 can be generated based on both the original navigation information 902 and the predicted navigation information 912!
  • the presentation time stamp and AV media position are shown in seconds and bytes, respectively!
  • the original AV data offset or byte position 914 from the beginning of the original AV media corresponding to the presentation timestamp can be retrieved from the original navigation information 902.
  • predicting the requested navigation information during 906 for example While calculating the stream range based on the stream bit rate and the presentation interval, the offset or byte position 920 of the target AV data from the beginning of the target AV media corresponding to the presentation time stamp is derived.
  • the range map information 908 can be created by matching the address of the AV media that serves as a reference.
  • Another important source for predicting navigation information is the conversion Condition table 10 04.
  • the conversion condition table is used by the DMS to predict the content of navigation information requested by the DMP.
  • the DMS refers to the conversion condition table 1044 to obtain the target bit rate and other transcoding parameters necessary for predicting the requested navigation information 912.
  • Figure 10 shows an example of a conversion condition table.
  • the conversion condition table includes conversion condition information for both the original AV media and the target AV media.
  • Conversion condition information is audio / AV media attributes 1008 are included, such as AV media format including video bit rate, frame rate, key frame interval, system and elementary list levels, and the length of both original AV media 1002 and target AV media 1006.
  • AV media attributes 1008 are included, such as AV media format including video bit rate, frame rate, key frame interval, system and elementary list levels, and the length of both original AV media 1002 and target AV media 1006.
  • the AV data presentation time stamp and corresponding as the size of the AV data structure for the presentation interval changes from the size of the original AV data structure. Address mapping is changed.
  • the navigation information and example of the range map in Fig. 9 and Fig. 10 are described.
  • the conversion condition table 1004 is particularly useful as a source for the navigation information prediction subsystem 206 when predicting the target AV media size.
  • the mapping between the presentation time stamp in the AV media and the corresponding address is based on the presentation time value that must be edited when each AV media is changed.
  • the AV position is calculated based on the target bit rate.
  • Bit rate represents the total size of AV media in bits that are presented within a time interval. Thus, for example, when the bit rate decreases, the AV position for each presentation time also decreases to a lower offset.
  • the relationship between bit rate and AV position is a proportional relationship.
  • Consistency between predictive navigation information and transcoded AV media must be maintained to ensure proper playback in DMP! /.
  • the requested AV media is transcoded, created in the requested format, and then predicted and indicated in the predicted navigation information referenced by the transcoded AV media size power DMP.
  • DMS must ensure that it is consistent with the determined AV media size.
  • FIG. 11 shows an example of the process of steps 812, 814, 820, 830, and 822 of FIG. 8 when the transcoded AV media size is smaller than the predicted AV media size.
  • the padding handler 1104 serves to compare the size of the transcoded AV data 1116 with the size of the predicted AV data 1102 indicated in the request. Based on the difference 1120 between the two sizes, the padding size 1124 is determined. This is equivalent to a size difference 1120 between the predicted AV media size and the range of transcoded AV media sizes. Padding 1124 is added to the end of the transcoded stream 1122 to ensure consistency of the required predicted AV media size. If the difference is zero, no padding is required.
  • FIG. 12 is a flowchart 1200 illustrating the high level steps performed by the navigation information prediction subsystem 206, particularly for discontinuous AV media.
  • the navigation information prediction subsystem 206 receives the conversion condition information from the conversion condition table at step 1204 and the original at step 1206. While the necessary information is retrieved from the navigation information, the original AV media is inspected in step 1208 to determine whether it has a discontinuity. For example, check for discontinuity flags. If a discontinuity exists in the stream, the solution power to predict and generate navigation information for the discontinuous stream is applied at step 12010. The DMS then generates the predicted navigation information requested at step 1212 and sends it to the requesting DMP at step 1214 or copies it to the requesting portable media storage device.
  • FIG. 13 shows an example of a detailed flow of a solution for a discontinuous stream in the present invention using a BD-RE device such as DMS and a DVD-VR such as DMP.
  • BD-RE device
  • DMP DVD-VR
  • discontinuities occur in the stream of many playback items (Playltem).
  • the discontinuity information can be retrieved from the BD-RE navigation information file.
  • OUT TIME which represents the presentation item's presentation end time, for two consecutive playback items, and the presentation of the playback item to be played after that It can be interpreted that a discontinuity occurs whenever IN — TIME, which means the start time of the tessellation, is not equal.
  • step 1302 the two consecutive playback items IN-TIME and OUT-TIME are examined to determine if a discontinuity exists. If no discontinuity is found in the AV media 1304, the predicted navigation information is updated in step 1322. If a discontinuity is found in the AV media 1306, the types of discontinuities detected in the AV media are identified in steps 1308, 1310, and 1312. According to the BD-RE specification, discontinuities in the BD-RE stream are classified into four scenarios, and the solution for the identified scenario is applied. For discontinuities due to the deletion of a very small portion of the stream, a portion of the AV media to be deleted remains in the BD-RETS.
  • PES of AV media PES (packeted elementary stream) PTS to erase this part of the stream while predicting navigation information and then transcoding TS to the desired AV media format (Presentation Timestamp) Power Coordinated in step 1314 in conjunction with the navigation information prediction process in step 1322.
  • Discontinuities due to changes in the system clock or presentation time at step 1310 eg, channel switching by broadcaster or user editing
  • system time information step 1318 after which a new VOB is created at step 1320.
  • the number of VOBs depends on the number of playback items in the original AV media. For example, if there are 5 playback items with this kind of discontinuity in the TS, the number of VOBs should be 5.
  • step 1322 the predicted navigation information is updated in step 1322 to include discontinuous information.
  • step 1312 a discontinuity is detected in the user-defined playlist, the presentation of all clips combined in the user-defined playlist before steps 1318, 1320 and 1322 are performed.
  • bridge clip information must first be extracted in step 1316.
  • the present invention is used in a method and apparatus for reproducing video data in a high bit rate format by a player suitable for reproducing video data in a low bit rate format.

Description

明 細 書
低ビットレートフォーマットのビデオデータ再生に適したプレヤーにより高 ビットレートフォーマットのビデオデータを再生する方法及び装置
技術分野
[0001] 本発明は、低ビットレートフォーマットのビデオデータ再生に適したプレヤーにより 高ビットレートフォーマットのビデオデータを再生する方法及び装置に関する。本発 明は、より詳細には、多くのフォーマットのシームレス AVメディアプレイバックに使用 されるナビゲーシヨン情報の予測に関する。本発明は、特に、ネットワーク接続された コンピューティングデバイスのためのリアルタイムストリーミングを達成し、かつ異種コ ンピューティングデバイスの間のディジタルメディアプレヤー（DMP)によって要求さ れた、トランスコードされた AVメディアのオフラインプレイバックを可能にする装置及 び方法を提供する。それぞれのコンピューティングデバイス力 異なる AVメディアフ ォーマットをサポートする。オリジナル AVメディアフォーマットを DMPによって要求さ れた AVメディアフォーマットにトランスコードする前に、ディジタルメディアサーバ（D MS)のナビゲーシヨン情報の予測が起動される。たとえばユーザ編集後の、連続及 び不連続 AVメディアの両方が、ナビゲーシヨン情報の予測によってサポートされる。 背景技術
[0002] 最近のネットワーキング技術の進歩により、家電（CE)製品及びノヽンドヘルドデバイ スなどの、ネットワーク接続されたコンピューティングデバイス間の通信が可能となつ た。ホームネットワークにおいて、ディジタル多用途ディスク（DVD)レコーダなどのネ ットワーク家電製品が広く行き渡つており、これらのそれぞれが、 DMS又は DMPの いずれか又はその両方として機能し得る。これらのデバイスは、局所的に格納されて いる AVメディアをプレイバックする場合もあれば、ネットワークストリーミングを介して 他のデバイス内の離れた所に格納されている AVメディアをプレイバックする場合もあ る。たとえば、 DMSは、 DMP要求があり次第、その記憶装置内に格納されている A Vメディアを DMPにストリーミングする。
[0003] 他方、ディジタル放送の高い普及率、及びブルーレイディスク（Blu— ray Disc) ( BD)フォーマットなどの新しい AVメディアフォーマットの出現により、 AVメディアフォ 一マットの数が増加してきている。このため、 DMPによってサポートされていない DM Sの AVメディアフォーマットを DMPでプレイバックしょうとすると、フォーマットの互換 性がないことに気づく。具体的には、 DVD— VRデバイスは、局所的に又は離れた 所に格納されている DVD— VRメディアをプレイバックし得る。しかし、これらのデバイ スは、 BDフォーマットなどの、新しい AVメディアフォーマットをサポートしていない。し たがって、たとえ、ネットワークストリーミングにより又は Secure Digital (SD)カード などのポータブルメディア記憶装置からコピーすることにより、 DVD— VRデバイスに BDメディアを首尾良く取得し得たとしても、この DVD— VRデバイスは、 BDメディア をプレイバックすることができない。ポータブルメディア記憶装置は、格納されている ポートされ得る。メディアデバイス力 サポートされている種類の AVメディアフォーマ ットのプレイバックのみに制限されることのないよう、ネットワーク接続されたコンビユー ティングデバイス間の後方互換性及びインタオペラビリティが必要である。
映画のストリーミングについては、 DVD— VRメディアのプレイバックを達成するに は、いくつかのコンピューティングデバイス、たとえば DVD—VRデバイスに 2種類の 情報が必要である。第 1の情報は、 AVストリームを含む AVメディアである。しかし、 A Vメディアだけでは、 DMPは、 AVメディアが始めから終わりまで単に連続して再生さ れるだけの、通常のプレイバックモードを達成し得るに過ぎない。第 2の情報は、通常 のプレイバックモード又はトリックプレイモード（trick play mode)のいずれかで、 A Vメディアをプレイバックするのに必要なナビゲーシヨン情報を含むナビゲーシヨン情 報である。ナビゲーシヨン情報は、それぞれの AVメディアフォーマットによって定義さ れ、プレイバック時間及び AVメディアの位置のマッピング情報を含む。ナビゲーショ ン情報を用いて、シーク、早送り、及び巻戻しなどのトリックプレイモードが達成され得 る。特に、それぞれの AVメディアフォーマットは、 AVメディア及びナビゲーシヨン情 報の、明確に定義された構造を有する。 1つの共通の例として、それぞれ AVメディア 及びナビゲーシヨン情報ファイルとして、ビデオオブジェクトブロック (VOB)及び情報 フォーマット（IFO)を定義する DVDフォーマットがある。 [0005] 特許文献 1：米国特許公報第 6463445B1号明細書
特許文献 2 :米国公開特許公報第 2004/0054689A1号明細書
特許文献 3：欧州公開特許公報第 1524855A1号明細書
特許文献 4：欧州特許公報第 0920203A2号明細書
特許文献 5 :米国公開特許公報第 2003/0021587A1号明細書
発明の開示
発明が解決しょうとする課題
[0006] 既存の解決方法により、たとえネットワーク接続されたコンピューティングデバイス間 の後方互換性及びインタオペラビリティが実現できたとしても、やはりいくつかの欠点 が残る。第 1に、既存の解決方法は、要求された AVメディアをトランスコードし、そのト ランスコードされた AVメディアに基づ!/、て、これに対応するナビゲーシヨン情報を生 成する。したがって、要求された AVフォーマットに基づいてナビゲーシヨン情報を生 成し得るよう、異なる AVメディアフォーマットに記憶空間を割り当てなければならない 。この場合、特に AVメディアが非常に長ぐかつ DMS内に格納されている AVメディ ァの数が大きいと、メモリ及び記憶装置が多く消費される。
[0007] 第 2の欠点は、 AVメディア全体をトランスコードするのに時間力 Sかかるため、要求さ れたナビゲーシヨン情報の DMPへのレンダリングが遅延することである。何故なら、 全 AVメディアのトランスコードが完了した後に初めて、所望のナビゲーシヨン情報が 生成され得るからである。この結果、既存の解決方法は、ナビゲーシヨン情報が利用 可能になるのを待ってから、 AVメディアを要求しなければならない、 DMPでのストリ 一ミングされた AVメディアのリアルタイムプレイバックを回避して!/、る。これとは異なり 、他の解決方法は、ナビゲーシヨン情報を利用することなぐ AVメディアアクセスのィ ンタオペラビリティを実現している。しかし、トリックプレイモードが実現され得ないので 、 DMPでは通常のプレイバックのみが可能となる。
課題を解決するための手段
[0008] 本発明は、マルチフォーマット AVメディアのシームレスプレイバックに使用されるナ ビグーシヨン情報の予測に関する。本発明は、特に、ネットワーク接続されたコンビュ なる AVメディアフォーマットをサポートする異種コンピューティングデバイス、たとえば 家電製品間のディジタルメディアプレヤー（DMP)によって要求されるトランスコード された AVメディアのオフラインプレイバックを可能にする、 DMSにおける装置及び 方法を提供する。
[0009] 本発明は、上記の欠点に対処するためのインテリジェントメカニズムを有する。記憶 装置が多く消費されるという課題を回避するために、本発明では、要求された AVメ ディアの範囲のみをトランスコードして、一時メディア記憶装置内に格納し、トランスコ ードされた AVメディアを DMPに送る。これは、特にネットワーク家電の間で大量の A Vメディアが交換され得る家電ネットワーク内の、リソースが制限されたコンビユーティ ングデバイスにとって重要である。本発明は、トランスコードされた AVメディアではな ぐオリジナルナビゲーシヨン情報に基づいて、ナビゲーシヨン情報を予測する。トラン スコードされた AVメディアをパーズすることなぐ無視できる程の遅延で、予測ナビゲ ーシヨン情報が生成され得るので、リアルタイム AVプレイバックを DMPで達成する助 けとなる。
発明の効果
[0010] 予測ナビゲーシヨン情報は、高ビットレートフォーマットのビデオデータを低ビットレ ートフォーマットのビデオデータにトランスコードする前に生成され得る。
[0011] ビデオデータのトランスコードは、リアルタイムに行われ得る。したがって、視聴者は
、待ち時間なしでビデオを観ることができる。
[0012] ビデオデータのトランスコードは、区分毎に行われる。したがって、メモリサイズは、 1 区分をトランスコードするのに十分な、小さいサイズとなり得る。
図面の簡単な説明
[0013] [図 1]多くのコンピューティングデバイスを備えた、簡単な異種通信ネットワークを示す 図である。
[図 2A]様々なサブシステム、ハードウェア構成部品、及びソフトウェア構成部品を示 す DMSを示すブロック図である。
[図 2B]ナビゲーシヨン情報予測の助けにより、トランスコードされた AVメディアのプレ ィバックが実現される DMPを示すブロック図である。 [図 3A]DMSと DMPとの間のデータフローを示す通信チャートである。
園 3B]予測ナビゲーシヨン情報を作成するステップを示す図である。
園 4]オフライン AVメディア用の内部記憶装置とポータブル記憶装置との間のデータ フローを示す通信チャートである。
[図 5]異なる AVメディアフォーマットをサポートする DMSと DMPとの間の、予測ナビ ゲーシヨン情報及びトランスコードされた AVメディア用のデータフローを示す通信チ ヤートである。
[図 6]リアルタイムストリーミング及びプレイバックを可能にする、ナビゲーシヨン情報予 測サブシステム及び AVメディアトランスコードマネージャを含む DMSを示すブロック 図である。
[図 7]ナビゲーシヨン情報を予測するために DMSによって遂行されるステップを例示 するフローチャートである。
[図 8]要求側の DMPとの互換性がある AVメディアフォーマットにオリジナル AVメディ ァをトランスコードするために DMSによって遂行されるステップを例示するフローチヤ ートである。
[図 9]オリジナルナビゲーシヨン情報及び予測ナビゲーシヨン情報に基づいて範囲マ ッビングテーブルを生成するステップを示す図である。
園 10]ナビゲーシヨン情報予測に使用される変換条件テーブルの一例を示す図であ
[図 11]トランスコードされた AVメディアに対してパディングサブシステムが如何に働く かのステップを示す図である。
[図 12]不連続ストリームのためのナビゲーシヨン情報予測中に DMSによって遂行さ れるステップを示すフローチャートである。
園 13]ナビゲーシヨン情報を予測している間の不連続の課題を識別し、解決するステ ップを示すフローチャートである。
符号の説明
102 通信ネットワーク 106 内部メディア記憶装置
108 AVメディア
110 ナビゲーシヨン情報
112 処理ユニット
114 ポータブルメディア記憶装置
116 ネットワーク接続
200 DMS
201 CPU
204 トランスコーダサブシステム
206 ナビゲーシヨン情報予測サブシステム
208 遠隔コンテント転送サブシステム
210 AV復号器
212 メディアディレクトリ
214 コンテント転送サブシステム
216 サーバアプリケーション
218 フアイノレシステム
220 囲マッピングサブシステム
222 パディングサブシステム
224 AVメディア
226 ナビゲーシヨン情報
228 ローカルコンテント転送サブシステム
230 ネットワークインターフェース制御サブシステム
232 メディアディレクトリ/ヽンドラ
300 DMP
301 CPU
304 ファイルシステム
306 AVメディア 308 ナビゲーシヨン情報
314 AV復号器
316 コンテント転送サブシステム
318 表示デバイス
320 メディアディレクトリ
322 メディアディレクトリハンドラ
発明を実施するための最良の形態
[0015] 特定の図を参照しながら、本発明について例示した図面を用いて、本発明の実施 形態を補足する。また同じ例については、特定の図中の特定の例に含まれるものと する。
[0016] 以下、添付図を参照しながら、本発明の好ましい実施形態について記述する。図 中の同様の参照符号は、同一の動作及びオペレーションを遂行する同一の構成部 品を表すことに留意されたい。
[0017] 本発明の実施形態は、 AVメディアトランスコーダを必要とする DMS (ディジタルメ ディアサーノ ）及び DMP (ディジタルメディアプレヤー）、ネットワーク又はオフライン AVメディアプレイバックを介した AVメディアストリーミング及びプレイバック、連続及 び不連続 AVメディアの両方のためのナビゲーシヨン情報の予測、及び異なるフォー マットの 2つのストリームの間の範囲マッピングに基づくメディア検索方法に関係する 。本発明の実施形態はまた、予測ストリームサイズ及びトランスコードされたストリーム サイズの整合性を確実にするためのパディングサブシステムに関する。本発明は、よ り詳細には、要求側の DMPにおいてトランスコードされた AVメディアのオフライン又 はリアルタイムプレイバックを可能にする DMSによって提供されるナビゲーシヨン情 報予測の、装置、システム、及び方法に関する。
[0018] 第 1に、本発明を特定の一例について記述する。図 2Aは、モニタ画面に高品質の ピクチャを再現し得る、居間に置かれたブルーレイディスクレコーダである DMS 200 を示している。図 2Bは、モニタ画面に標準的な品質のピクチャを再現し得る、寝室に 置かれた、表示デバイスを備えた DVD— VRプレヤーである DMP300を示している 。図 1に示されているように、 DMS200及び DMP300は、ホームネットワークシステ ムによって接続される。 DMS200には、高品質のピクチャフォーマットの映画 Mlが 格納されている。 DMS200、即ちブルーレイディスクレコーダにより映画 Mlが居間 で再生される場合、非常にクリアかつ高精度のピクチャが表示される。映画 Mlが、ホ ームネットワークを通じて、 DMS200力、ら DMP300に、即ち DVD— VRプレヤーに 送信される場合、 DMP300は、それ程高精度でないピクチャを作成する標準的な品 質のピクチャフォーマットに映画 Mlをダウンコンバートする。上記より理解されるであ ろうが、 DMP300により映画 Mlが寝室で再生される場合、ピクチャは、居間で再生 されるピクチャほど高精度ではない。映画 Mlのダウンコンバートは、 DMS200又は DMP300のいずれかで実施され得る。以下に記載した例においては、ダウンコンパ ートは DMS200で実施される。映画 Mlを DMS200から DMP300に送信するため 、データは、コントローラによって制御されるデータ量の転送速度で、パケットで送信 される。
[0019] 図 3Aを参照すると、 DMS200と DMP300との間のデータ伝送の図が示されてい る。寝室にいる視聴者力 居間に置かれた DMP300内に格納されている映画 Mlを 見たいと思った場合を想定する。まず第一に、 DMP300が、予測ナビゲーシヨン情 報要求 486を DMS200に送る。予測ナビゲーシヨン情報要求 486を受信すると、 D MS200は、図 3Bに示されている、オリジナルナビゲーシヨン情報 902及び変換条件 テーブル 1004に基づいて予測ナビゲーシヨン情報 912を準備する。ナビゲーシヨン 情報は、索引情報又は IFOとも呼ばれる。
[0020] 図 3Aについて述べると、映画 Mlのコンテント内にメタデータとして含まれているォ リジナルナビゲーシヨン情報 902は、再生時間及びバイト位置のリスト、より詳細には 、プレゼンテーションタイムスタンプのリスト、及びこれに対応する、オリジナル AVメデ ィァ内のバイトの位置のリストを含んでいる。たとえば、データの全くの始めから 0. 5 秒の時間が経過するまでに、 1200バイトのデータが存在する。したがって、始めから 0. 5秒のピクチャを見るためには、データストリームの始めから測定された 1200バイ トから開始したピクチャのフレームを復号する必要がある。始めからカウントされた 1. 5秒から、始めからカウントされた 2. 0秒までの、映画の一部分を見たいと思った場合 、始めから測定された 4500バイトから開始して、始めから測定された 5999バイトまで のデータストリームの一部分が使用されるべきである。
[0021] 上記に説明したオリジナルナビゲーシヨン情報 902は、 DMS200、即ち 20Mbps ( この数は、単なる一例である）のビットレートを有するブルーレイディスクレコーダには 適応できるが、 DMP300、即ち 10Mbps (この数は、単なる一例である）のビットレー トを有する DVD— VRプレヤーには適応できな!/、ことに留意された!/、。
[0022] 本発明によれば、オリジナルナビゲーシヨン情報 902は、変換条件テーブル 1004 を使用して、 DMP300、即ち DVD— VRプレヤーに適応できる予測ナビゲーシヨン 情報 912に変換される。
[0023] 図 3Bに示されているように、変換条件テーブル 1004は、ビットレート、サイズ、フレ ームレート、キーフレーム間隔、システムストリームフォーマット、オーディオエレメンタ リストリームフォーマット、及びビデオエレメンタリストリームフォーマットなどの、様々な AVメディア属性を含む。変換条件テーブル 1004内には、オリジナル AVメディアに 特有の情報及びターゲット AVメディアに特有の情報力 S、属性のそれぞれにつ!/、て記 載されている。本明細書においては、オリジナル AVメディアの情報とは、ブルーレイ ディスクレコーダの DMS200を操作するのに必要な情報であり、ターゲット AVメディ ァの情報とは、 DVD— VRプレヤーの DMP200を操作するのに必要な情報である。
[0024] 変換条件テーブル 1004によれば、オリジナル AVメディアのビットレートは 20Mbps であり、ターゲット AVメディアのビットレートは 10Mbpsであり、オリジナノレ AVメディア のサイズは、画面幅対高さが 16 : 9の画面比率を有する HDであり、ターゲット AVメ ディアのサイズは、画面幅対高さが 3 : 2の画面比率を有する D1であり、両方のメディ ァのフレームレートは 29. 97であり、両方のメディアのキーフレーム間隔は 15であり、 オリジナノレ AVメディアのシステムストリームフォーマットはトランスポートストリームであ
、オリジナノレ AVメディアのオーディオエレメンタリストリームフォーマットは AC3であり 、ターゲット AVメディアのオーディオエレメンタリストリームフォーマットは LPCMであ り、両方のメディアのビデオエレメンタリストリームフォーマットは MPEG2であることが 示されている。変換条件テーブル 1004は、準備されて、 DMS200内に格納されて いる。新しいデバイスがホームネットワークシステムに接続されると、その新しいデバイ スの情報が DMS200に送られ、変換条件テーブル 1004内にその新しいデバイスの 情報が追加される。
[0025] 変換条件テーブル 1004においては、ビットレートは、本発明に必要な属性である。
他の属性は省くことができる。
[0026] 本発明によれば、オリジナルナビゲーシヨン情報は、ビットレート情報を使用して、 予測ナビゲーシヨン情報に変換される。一般に、以下の関係が与えられ得る。
[0027] (オリジナル AVメディア内の位置）：（ターゲット AVメディア内の位置） したがって、
(ターゲット AVメディア内の位置） = (オリジナル AVメディア内の位置） が得られる。
[0028] たとえば、始めから 0· 5秒後に、ターゲット AVメディア内の（バイトの）位置が、 式 1200x (10/20) = 600
で計算され得る。同様に、図 3Bに示されているように、予測ナビゲーシヨン情報を取 得するために、異なる時間のターゲット AVメディア内の位置が計算される。
[0029] 再び図 3Aについて述べると、 DMS200は、予測ナビゲーシヨン情報を準備すると 、ナビゲーシヨン情報配信 484として、予測ナビゲーシヨン情報を DMP300に送る又 は配信する。 DMP300においては、予測ナビゲーシヨン情報は、記憶装置内に格納 されている 488。
[0030] その後、ユーザが寝室で映画 Mlを観たいと思った場合、ユーザは再生信号を入 力する。 DMP300は、再生信号に応答して、映画 Mlの予測ナビゲーシヨン情報を 読み取り、トランスコードされた AVメディア要求 482を DMS200に送る。たとえば、 0 . 00—0. 50秒の映画 Mlの部分が要求された場合、 DMP300は、 0〜599バイト のトランスコードされた AVメディアストリーム要求を作成する。トランスコードされた AV メディアストリームのデータサイズのこのような要求は、時間領域、つまり 0. 00〜0. 5 0秒内の要求に変更される。時間領域内の要求は、トランスコードされた AVメディア 要求 482として、 DMP300力、ら DMS200に送信される。次いで、 DMS200におい て、時間領域要求及びオリジナルナビゲーシヨン情報 902を使用して、オリジナル A Vメディア内の測定されたバイトの映画 Mlの一部分が検出される。この場合、このよ うな一部分は、 0〜； 1199バイトである。したがって、 DMS200において、オリジナル AVメディア内の一部分（0〜； 1199バイト）力 BD— REフォーマットから DVD—VR フォーマットへの変換のために使われて処理される。 DVD—VRフォーマットの映画 Mlのトランスコードされた部分は、 1200ノイトの約半分、つまり BD— REフォーマツ トの映画 Mlの同じ部分のデータサイズの約半分である、 599バイト以下のデータサ ィズを有する。
[0031] 次いで、約 599バイトのデータである、 DVD—VRフォーマットの映画 Mlのトランス コードされた部分力 トランスコードされた AVメディア配信 480として、 DMS200力、ら DMP300へと送信される。次いで、 DMP300において、 DVD—VRフォーマットの 映画 Mlのトランスコードされた部分は、 0. 00—0. 50秒の要求された時間の画面で の再生に使用される。
[0032] その後、 DMP300は、映画 Mlのその後の部分のための、 600〜； 1499ノ イトの別 のトランスコードされた AVメディアストリーム要求を作成することがある。
[0033] 上記より明らかなように、低ビットレートフォーマットのビデオデータの再生に適した プレヤー、 DMP300により、 DMS200内に格納されている高ビットレートフォーマット のビデオデータを再生するために、以下のステップが行われる。
(A1) DMS200内の高ビットレートフォーマットのビデオデータから、オリジナルナビ ゲーシヨン情報を読み取る。
(A2) DMS 200においてオリジナルナビゲーシヨン情報を予測ナビゲーシヨン情報 に変換する。この予測ナビゲーシヨン情報は、低ビットレートフォーマットのビデオデ ータに適応できる。
(八3) 0^ 3200カ、ら0^^300に予測ナビゲーション情報を送る。
(A4) DMP300により、予測ナビゲーシヨン情報に基づ!/、て、低ビットレートバイト情 報内の低ビットレートフォーマットのビデオデータの一区分を要求する。この低ビットレ ートバイト情報は、 DMP300による再生のための低ビットレートフォーマットのビデオ データの一区分の開始バイト位置及び終了バイト位置を含む。 (A5)予測ナビゲーシヨン情報に基づ!/、て、低ビットレートバイト情報を、再生のため の開始時間及び終了時間を含む時間領域情報に変換する。
(A6)予測ナビゲーシヨン情報及びオリジナルナビゲーシヨン情報に基づ!/、て、時間 領域情報を高ビットレートバイト情報に変換する。この高ビットレートバイト情報は、高 ビットレートフォーマットのビデオデータの一区分の開始バイト位置及び終了バイト位 置を含む。
(A7)高ビットレートバイト情報に基づいて、 DMS200内に格納されているビデオデ ータから、高ビットレートフォーマットのビデオデータの一区分を検索する。
(A8) DMS200において高ビットレートフォーマットのビデオデータの一区分を低ビ ットレートフォーマットのビデオデータの一区分にトランスコードする。
(A9)低ビットレートフォーマットのビデオデータの一区分を DMS200から DMP300 に送る。
[0034] 本発明の一例では、高ビットレートはオリジナル AVメディアビットレートに対応し、低 ビットレートはターゲット AVメディアビットレートに対応する力 S、これに限定されるもの ではない。すなわち、本発明では、低ビットレートから高ビットレートへの変換、又はそ の逆の変換も可能である。
[0035] 上述した実施形態においては、ステップ（A6)、 (A7)、及び (A8)は、 DMS200内 で行われるが、ステップ（A6)は DMP300内で行われ得ると説明されている。この場 合、トランスコードされた AVメディア要求 482は、時間領域内の要求ではなぐステツ プ (A6)で得られた高ビットレート情報であり得る。また、ステップ (A8)は、 DMP300 内で行われ得る。
[0036] さらに、 DMP300内で行われると説明したステップ（A5)は、 DMS200内でも行わ れ得る。この場合、トランスコードされた AVメディア要求 482は、時間領域内の要求 ではなぐステップ (A4)で得られた低ビットレート情報であり得る。
[0037] 上述した実施形態においては、 DMS200内に格納されているビデオデータは、区 分毎に転送され、 DMP300によって再生される。本発明は、低ビットレートフォーマツ トのビデオデータ再生に適した、かつ高ビットレートフォーマットのビデオデータを格 納するための記憶装置が設けられた、プレヤーに適用され得る。このようなプレヤー により再生するために、以下のステップが行われる。
(B1)高ビットレートフォーマットのビデオデータから、オリジナルナビゲーシヨン情報 を養冗み取る。
(B2)オリジナルナビゲーシヨン情報を、低ビットレートフォーマットのビデオデータに 適応できる予測ナビゲーシヨン情報に変換する。
(B3)予測ナビゲーシヨン情報に基づ!/、て、低ビットレートバイト情報内の低ビットレー トフォーマットのビデオデータの一区分を要求する。前記低ビットレートバイト情報は、 プレヤーにより再生するための低ビットレートフォーマットのビデオデータの一区分の 開始バイト位置及び終了バイト位置を含む。
(B4)予測ナビゲーシヨン情報及びオリジナルナビゲーシヨン情報に基づ!/、て、低ビ ットレートバイト情報を高ビットレートバイト情報に変換する。前記高ビットレートバイト 情報は、高ビットレートフォーマットのビデオデータの一区分の開始バイト位置及び終 了バイト位置を含む。
(B5)高ビットレートバイト情報に基づ!/、て、記憶装置から高ビットレートフォーマットの ビデオデータの一区分を検索する。
(B6)高ビットレートフォーマットのビデオデータの一区分を低ビットレートフォーマット のビデオデータの一区分にトランスコードする。
[0038] 低ビットレートフォーマットのビデオデータの一区分の開始バイト位置及び終了バイ ト位置のそれぞれに (低ビットレート) / (高ビットレート）を掛けることにより、ステップ（
B4)が達成され得る。 （復号器 314のない） DMS200と DMP300とを組み合わせる ことにより、このようなプレヤーが構築され得る。
[0039] このようなプレヤーは、プレヤーが処理し得るビットレートより高いビットレートを有す るビデオデータを再生し得るという利点を有する。
[0040] 以下、本発明についてより詳細に説明する。
[0041] 図 1は、ワイヤード又はワイヤレスのいずれかの、 802· 11又はイーサネット（登録商 標）などのネットワーク接続 116を介して、多くのコンピューティングデバイス 104を接 続する通信ネットワーク 102のサンプルについて記述している。これらのコンビユーテ イングデバイスのそれぞれが、それ自身の内部メディア記憶装置 106と、ポータブル メディア記憶装置 114と、処理ユニット 112とを備える。処理ユニット 112は、特定の 機能を遂行する、ソフトウェア実行可能プロセッサ又は LSIプロセッサであり得る。こ れらのコンピューティングデバイスは、ネットワークにおいて、異なる能力、デバイス形 態、及び移動式の振る舞いを有する、異なる機能及び目的を有することがある。
[0042] 内部メディア記憶装置 106は、ナビゲーシヨン情報予測中に生成される範囲マップ と共に、 AVメディア 108、変換条件テーブル、及び AVメディア用のナビゲーシヨン 情報 110を含む力 これらに制限されるものではない。ナビゲーシヨン情報 110のフ ォーマット及び AVメディア 108は、これらが常駐しているコンピューティングデバイス によってサポートされる。要求側の DMPのために生成される AVメディア及びそのナ ビグーシヨン情報は、記憶容量の浪費を回避するために、内部メディア記憶装置 106 力も取り外される。内部メディア記憶装置 106以外に、それぞれのコンピューティング デバイスが、他のコンピューティングデバイスでのオフラインプレイバックのために予 測ナビゲーシヨン情報及びオリジナル AVメディアをコピーできるようにするポータブ ノレメディア記憶装置 114を備えることがある。
[0043] ナビゲーシヨン情報は、 AVメディアをプレイバックするのに必要である。ナビゲーシ ヨン情報のコンテンツは、フォーマットに依存する AV構造のサイズ、プレゼンテーショ ン時間、 AV構造のアドレス、プレゼンテーション時間の AV構造のアドレスへのマツ ビング、及び他の AVメディア属性を含む。ナビゲーシヨン情報の 2例に、 DVD—VR フォーマットのための IFO、及び BD— REフォーマットのためのクリップ情報及び実際 の再生リストがある。 AV構造のアドレスとは、当該プレゼンテーション時間のための A Vメディアの始めからの AV構造のオフセット又はバイト位置であることに留意された い。本文献の他の箇所に述べた AV構造の又は AVメディアのアドレスは、この段落 で使用されたアドレスと同じである。
[0044] ネットワーク内のそれぞれのコンピューティングデバイスは、 DMSとして働き、かつ ナビゲーシヨン情報予測サブシステムを備えた、ネットワーク接続された他のコンビュ 一ティングデバイス内に格納されている AVメディアにアクセスし、プレイバックするこ と力できる。さらに、コンピューティングデバイスはまた、オフラインプレイバックのため に DMS力、ら予測ナビゲーシヨン情報をコピーし得る。 DMSは、新しい AVフォーマツ トをサポートしてレ、な!/、要求側の DMPが、 DMS内に格納されて!/、る AVメディアをプ レイバックできるよう、後方互換性機能を提供する。図 2Aは、本発明の DMS内の構 成部品を示している。 DMS200は、様々なサブシステム、ハードウェア構成部品、及 びソフトウェア構成部品、及び基本的に、 CPU201、及び高ビットレートフォーマット のビデオデータを復号することができる AV復号器 210を含む。 AV復号器 210は、 C PU201の 1つの機能として含まれ得る。以下、 CPU201の機能について説明する。
[0045] メディアレンダラ 202は、 DMP要求に基づいて、ナビゲーシヨン情報及び DMPと 互換性がある AVメディアを作成することにより、サポートされた AVフォーマットなどの DMPの機能及び能力を満たす役割を果たす。例示的実施形態においては、メディ アレンダラ 202は、 4つのサブシステム、即ちトランスコーダサブシステム 204、ナビゲ ーシヨン情報サブシステム 206、及び範囲マッピングサブシステム 220、及びパディン グサブシステム 222から構成される。
[0046] トランスコーダサブシステム 204は、 MPEGビデオ、 MPEGES、 MPEGTS、又は MPEGPSを含む、異なるフォーマットから及び異なるフォーマットに、 AVメディアをト ランスコードする。トランスコーダサブシステム 204は、 DMPから要求された信号内で 指定された範囲に基づいて、 AVメディア全体、又は AVメディアの一範囲又は一区 分のみをトランスコードすることができる。一範囲又は一区分のみの場合は、符号化 されるストリームの範囲は、 DMPによって要求される範囲に基づく。異なるフォーマツ トの AVメディアは異なる AVデータ構造を有するので、異なるフォーマットは、 1つの オリジナルメディアについて異なる範囲を有する。したがって、範囲マッピングサブシ ステム 220は、オリジナノレ AVメディアフォーマットの範囲と要求された AVメディアフォ 一マットの範囲との間の、これに対応する範囲を提供する。次に、パディングサブシス テム 222は、予測ストリームサイズとトランスコードされたストリームサイズとの間の整合 性を確実にする役割を果たしており、これは、予測ナビゲーシヨン情報に基づぐ適 切な AVプレイバックを保証するのに重要である。
[0047] 他方、ナビゲーシヨン情報予測サブシステム 206は、要求側の DMPと互換性があ る AVメディアフォーマットのためのナビゲーシヨン情報を予測し、生成する役割を果 たす。ナビゲーシヨン情報の予測は、要求側の DMPと互換性があるフォーマットにォ リジナル AVメディアをトランスコードする前に行われる。ナビゲーシヨン情報予測サブ システム 206の結果は、 DMPによって要求された AVメディアフォーマットと互換性が あるナビゲーシヨン情報である。
[0048] メディアディレクトリサービスを動作するメディアディレクトリ 212においては、要求側 の DMPに基づいて AVメディアタイプを判断する必要がある。メディアディレクトリは、 異なるメディアタイプについてファイルシステム 218内に格納されている AVメディア 2 24及びナビゲーシヨン情報 226の両方を含む。ナビゲーシヨン情報は、 AVデータサ ィズ、 AVビットレート、プレゼンテーション時間、不連続情報、及び AVストリーム情報 を含むが、これらに制限されるものではない。メディアディレクトリノヽンドラ 232は、 AV フォーマットに従って AVメディア及びナビゲーシヨン情報を分類する。たとえば、メデ ィァタイプ 1は、 DVD— VRデバイス準拠の PS及び IFOファイルであり、メディアタイ プ 2は、 BD— REデバイス準拠の TS及びそのナビゲーシヨン情報ファイルである。メ ディアディレクトリ 212管理の一例として、ある特定の DVD— VRデバイスは、 DMS トリレベル 2/ディレクトリレベル 3のみにアクセスできる。メディアディレクトリは、予め 構成された固定ディレクトリ、又は AVメディア又はナビゲーシヨン情報ファイルを要求 側のデバイスに送る前に存在する動的に作成されたディレクトリのいずれかであり得
[0049] コンテントを転送するために、コンテント転送サブシステム 214は、遠隔コンビユーテ イングデバイス又はポータブルメディア記憶装置から要求が発信されるかどうかを判 断する役割を果たす。サーバアプリケーション 216は、遠隔コンテント転送サブシステ ム 208及びネットワークインターフェース制御サブシステム 230と共に、ネットワーク内 の要求側の DMPへのコンテント転送を取り扱う。他方、ローカルコンテント転送サブ システム 228は、内部メディア記憶装置 106とポータブルメディア記憶装置 114との 間でコンテントを転送する役割を果たす。最後に、 DMSが局所的に AVメディアをプ レイバックできる場合、 MPEG復号器などの AV復号器 210が存在することがある。 図 6は、 DMS200内のモジュール間の相互作用のより詳細な例を提示している。
[0050] 本発明の DMSと共に働くためには、 DMPは、ネットワーク能力又はポータブルメ ディア記憶装置のレ、ずれかを備えたコンピューティングデバイスでなければならなレ、 。ネットワーク能力を備えている場合には、 DMPは、通信ネットワークを介して DMS 内の AVメディアにアクセスするよう要求する。ポータブルメディア記憶装置を備えて いる場合には、 DMPは、 DMSからコピーされた、予測ナビゲーシヨン情報及びオリ ジナル AVメディアに基づいて、オフラインプレイバックを遂行する。オフラインプレイ ノ ックは、コピーされたオリジナル AVメディアをトランスコードする能力を有する DMP において遂行される。 DMPは、変換条件テーブルと共に、コピーされた予測ナビゲ ーシヨン情報に基づいて、コピーされたオリジナル AVメディアを DMP内で再生可能 なターゲット AVメディアフォーマットにトランスコードする。
[0051] DMPの一例が図 2Bに表されている。 DMP300は、基本的に、 CPU301と、低ビ ットレートフォーマットのビデオデータを復号することが可能な AV復号器 314と、表示 デバイス 318とを備えた DVDプレヤーである。以下、 CPU301の機能について説明 する。 AV復号器 314は、 CPU301の 1つの機能として含まれ得る。
[0052] 数々の機能サブシステムには、コンテント転送サブシステム 316と、ファイルシステ ム 304内で、メディアディレクトリハンドラ 322によって分類された、 AVメディア 306及 びナビゲーシヨン情報 308の両方を含むメディアディレクトリ 320と、表示デバイス 31 8とが含まれる。リアルタイム AVメディアストリーミング及びプレイバックについては、 D MPは、ネットワークを介して DMSと通信し、 DMSから予測ナビゲーシヨン情報及び AVメディアを要求する。オフラインプレイバックについては、 DMPは、ポータブルメ ディア記憶装置を介して DMSからコピーされた、予測ナビゲーシヨン情報及び AVメ ディアを取得する。コンテント転送サブシステム 316は、要求信号が DMSから来る場 合はネットワークを介して、又は要求信号がポータブルメディア記憶装置から来る場 合はポータブルメディア記憶装置を介して、 DMSへの又は DMSからのメディア転送 を取り扱う。 AV復号器 314は、表示デバイス 318でプレゼンテーションするために、 コンテント転送サブシステム 316から得られた AVメディアをレンダリングする役割を果 たす。
[0053] DMS力、らの DMPによる予測ナビゲーシヨン情報及び AVメディアの取得は、 2つの 異なる方法で行われ得る。第 1に、予測ナビゲーシヨン情報及びオリジナル AVメディ ァは、ポータブルメディア記憶装置を介して DMPでのオフラインプレイバックを可能 にするよう DMSからコピーされ得る。
[0054] 図 4は、このプロセスを例示するための、 DMSのポータブルメディア記憶装置 496 と内部メディア記憶装置 498との間の通信の流れを示している。図 2Aに示されてい るように、 DMSは、その内部メディア記憶装置 498内に、オリジナル AVメディア 490 及びオリジナルナビゲーシヨン情報 492を格納する。 DMSは、予測ナビゲーシヨン情 報を作成するためにナビゲーシヨン情報予測サブシステム 206も備える。予測ナビゲ ーシヨン情報 486のためにポータブルメディア記憶装置 496から要求を受信すると、 DMS内のナビゲーシヨン情報予測サブシステム 206は、その内部メディア記憶装置 498内に格納されているオリジナルナビゲーシヨン情報 492に基づいて、予測ナビゲ ーシヨン情報 494を生成する。
[0055] 以下、図 7、図 9、図 10、図 12、及び図 13に基づいて、ナビゲーシヨン情報の予測 の詳細について詳しく述べる。要求されたナビゲーシヨン情報が作成されると、予測 ナビゲーシヨン情報 494は、要求側のポータブルメディア記憶装置 496に伝送路を 介して配信され 484、ナビゲーシヨン情報予測中に生成された範囲マップと共に、ポ ータブルメディア記憶装置内に格納される 488。ポータブルメディア記憶装置 496は 、その後、ポータブルメディア記憶装置スロットと共にバンドルされた別のコンビユーテ イングデバイスでのオフラインプレイバックを可能にするよう、コピーされた予測ナビゲ ーシヨン情報 478に対応するオリジナル AVメディアのコピーを要求することがある 48 2。変換条件テーブルはまた、ポータブルメディア記憶装置にコピーされる必要があ る。トランスコーダ入力パラメータを判断するために、変換条件情報が、コピーされた オリジナル AVメディアのトランスコード中に必要となる。要求されたオリジナル AVメ ディアが要求側のポータブルメディア記憶装置 496に配信される 480と、 AVメディア は、ポータブルメディア記憶装置 496内に格納される。
[0056] 代替形態として、 DMPが、通信ネットワークを介して、 DMS内に格納されている A Vメディア 530をプレイバックしようとした時には必ず、図 5に例示されている通信の流 れカ DMS502と DMP504との間に発生する。第 1に、 DMPは、 DMS力、ら所望の ナビゲーシヨン情報の要求 506を始動し、その後 AVプレイバックを開始し得る。 DM Sは、 DMP要求に基づいて、利用可能でない場合には、 DMS内で即座に利用可 能なオリジナルナビゲーシヨン情報 526に基づ!/、て、要求された予測ナビゲーシヨン 情報 518を生成する。要求された AVメディアのトランスコードを動作する必要なぐ 予測ナビゲーシヨン情報が作成され得るので、要求側の DMPは、要求されたナビゲ ーシヨン情報 520をリアルタイムで受信し得る。次に、 508で、生成された予測ナビゲ ーシヨン情報が DMPに送られる。
[0057] DMPは、受信されたナビゲーシヨン情報 520に基づいて、 AVメディア要求 510を DMSに送り、 AVメディアの所望の範囲を指定することにより、ストリームプレイバック を起動する 532。トランスコーダサブシステム 204は、オリジナル AVメディア全体をト ランスコードするのではなぐオリジナル AVメディア 530の指定された範囲のみを検 索し、要求された AVフォーマットにトランスコードする 528。次いで、トランスコードさ れた AVメディアは、要求側の DMPに配信され 512、これにより、その表示デバイス 3 18を介して、トランスコードされた AV画像のプレイバックが始まる 534。トリックプレイ 536 (たとえば早送り、スキップ）を望む場合には、 DMPは、 DMSに対して、選択さ れたトリックプレイモードに対応する AVメディアの範囲を指定する要求を始動しなけ ればならない 514。次いで、 AVメディアの要求された範囲のみをトランスコードするよ う、トランスコードプロセスが DMSで起動され、次いで、 DMPに配信される 516。 DM Pは、要求された範囲のトランスコードされた AVメディアを受信すると、所望のトリック プレイ画像 538をプレイバックする。通常のモード及びトリックプレイモード力 DMP によって選択され、プレイバックのための AVメディアの所望の範囲力 DMSに向け られた AVメディア要求において指定される。
[0058] 図 5の通信の流れに基づき、図 6は、 DMS688内のメディアレンダラ 600と DMP6 90との間の相互作用の、より詳細な実施形態を例示している。 DMS688力 SDMP69 0からナビゲーシヨン情報要求 602を受信した時には必ず、所望のナビゲーシヨン情 報を準備するよう、ナビゲーシヨン情報ジェネレータ 694が起動される。予測ナビグー シヨン情報の生成に必要な、 3つのソースがある。即ち、オリジナルナビゲーシヨン情 報ソース 698、 DMSの記憶装置内に連続及び不連続 AVメディアの両方を含むオリ ジナル AVメディア 696、及びトランスコードマネージャ 692によって提供される変換 条件情報 614である。ナビゲーシヨン情報ジェネレータ 694は、オリジナルナビゲー シヨン情報ソース記憶装置 698から、オリジナルナビゲーシヨン情報要求 604を要求 する。次いで、要求されたナビゲーシヨン情報は、ナビゲーシヨン情報ジェネレータ 6 94に酉己信される 606。ナビゲーシヨン情報ジェネレータ 694はまた、オリジナル AVメ ディアから情報を検索する必要がある場合には、オリジナル AVメディアを要求する 6 08。次いで、要求されたオリジナル AVメディアは、ナビゲーシヨン情報ジェネレータ 6 94に配信される 610。同時に、ナビゲーシヨン情報ジェネレータ 694は、トランスコー ドマネージャ 692から得られ得る変換条件情報を要求し 612、次いで、要求された変 換条件情報 614をナビゲーシヨン情報ジェネレータ 694に送る。
[0059] これらの 3つのソースに基づき、ナビゲーシヨン情報ジェネレータ 694は、所望のナ ビグーシヨン情報のコンテンツを予測し、新しく生成されたナビゲーシヨン情報 616を DMP690に送る。同時に、予測ナビゲーシヨン情報を準備している間に生成された 範囲マップ情報が、 DMSの範囲マップ情報記憶装置 682内に格納される 628。範 囲マップ情報 682は、トランスコードマネージャ 692及びパディングハンドラ 684の両 方によって使用される。
[0060] DMP690が要求された予測ナビゲーシヨン情報 616を受信すると、 DMP690は、 予測ナビゲーシヨン情報 616のコンテンツに基づいて再生するための AVメディアの 範囲の要求 618を開始する。所望のフォーマットの AVメディアの範囲を指定する要 求 618を受信すると、トランスコードのために検索することが必要な、これに対応する 範囲のオリジナル AVメディアを判断するよう、トランスコードマネージャ 692が起動さ れる。第 1に、トランスコードマネージャ 692は、範囲マップ情報記憶装置 682から範 囲マップ情報を要求する 630。範囲マップ情報は、検索され、トランスコードマネージ ャ 692に酉己信される。範囲マップ情報 634に基づき、トランスコーダマネージャ 692は 、連続及び不連続ストリームの両方を含むメディアストリーム記憶装置 696から、オリ ジナル AVメディア 620のこれに対応する要求された範囲のみを検索する。 AVメディ ァ 622の範囲が得られると、トランスコードマネージャ 692は、この範囲のオリジナル AVメディア 622を、 DMP690によってサポートされるフォーマットにトランスコードす る。次いで、予測ストリームサイズとトランスコードされたストリームサイズとの間の整合 性を維持するのにパデイングが必要力、どうかを判断するよう、範囲マップ情報記憶装 置 682から得られた範囲マップ情報 632と共に、トランスコードされた AVメディア 624 がパディングノ、ンドラ 684に配信される。最後に、必要な場合にはパディングされた、 トランスコードされた AVメディア力 要求側の DMP690に配信される 626。本発明に より、 AVメディア全体をトランスコードするのに、より大きい記憶装置が必要な場合と 比較して、より低消費のメモリ及び記憶装置が実現される。
[0061] ナビゲーシヨン情報内の最も重要なデータは、プレゼンテーション時間とこれに対 応する AVメディアのアドレス又は位置との間のマッピングである。図 7は、 DMS内の ナビゲーシヨン情報予測サブシステム 798の詳細な流れを例示している。予測ナビゲ ーシヨン情報を生成するためのソースは、オリジナル AVメディアのためのオリジナル ナビゲーシヨン情報及び変換条件テーブルである。
[0062] ナビゲーシヨン情報サブシステムは、第 1に、ステップ 796で、オリジナルナビゲー シヨン情報及び変換条件テーブルから必要な情報をパーズし、収集する。予測サブ システムは、ステップ 794で、変換条件テーブルからオリジナルストリーム情報及びタ ーゲットストリーム情報の両方を取得する。オリジナルストリーム情報は、不連続フラグ 、記録時間、文字セットなどを含み、変換条件情報は、 AVメディアビットレート、フレ ームレート、キーフレーム間隔、及びオリジナルストリーム及びターゲットストリームの 両方のストリームサイズを含む。ステップ 796及び 794でパーズされた情報から、ステ ップ 792で、プレゼンテーションタイムスタンプ及びオリジナルストリーム内のこれに対 応するアドレスが抽出される。ステップ 790で、変換条件情報に基づき、オリジナルス トリームビットレートとターゲットストリームビットレートとの間に変更があるかどうかを判 断するための検査が行われる。ターゲットストリームがオリジナルストリームビットレート とは異なるビットレートを有する場合、ステップ 788で、要求されたフォーマットのそれ ぞれの AVデータ構造のサイズが、プレゼンテーション時間間隔及びターゲットビット レートに基づいて予測され、累算される。異なるビットレートを有していない場合、ステ ップ 786で、トランスコードプロセスの後でも変わらないプレゼンテーション時間間隔 に基づいて、それぞれの AVデータ構造について、オリジナルストリームアドレスとタ ーゲットストリームアドレスとの間のマッピングが行われる。以下、図 9を参照しながら、 オリジナルストリームアドレスとターゲットストリームアドレスとの間のマッピングプロセス について詳しく述べる。それぞれの AVデータ構造のマッピング後に検査される最後 の AVデータ構造がステップ 784で完了するまで、ステップ 788及び 786が繰り返さ れる。最後に、ステップ 782で、新しい AVメディア長力 累算された予測サイズの AV データ構造から予測される。次いで、ステップ 780で、予測ナビゲーシヨン情報力 パ ーズされた情報に基づ!/、て生成される。
図 6についての記述において詳しく述べたように、要求された予測ナビゲーシヨン情 報が DMSから受信されると、 DMPは、 AVメディアプレイバックを始動し得る。オリジ ナルストリームサイズとターゲットストリームサイズとの間の整合性が如何に維持される かについてのより良いピクチャを提供するために、図 8は、必要な場合にパディング ハンドラ 684と共同して働くトランスコードマネージャ 692によって遂行される高度なス テツプを示す図である。これらのステップは、システムのコンピュータ読取可能メモリュ ニット内に格納されており、かつプロセッサによって実行される、命令として実施され る。ステップ 812で、通常のモード又は特定のトリックプレイモードのいずれかによつ て起動され得る、 AVメディアのための DMP要求を受信すると、トランスコードマネー ジャ 692は、ステップ 814で、要求された範囲の AVメディアをトランスコードする。ナ ビグーシヨン情報を予測して!/、る間に生成された範囲マップ情報に基づ!/、て、オリジ ナル AVメディアの範囲が得られる。 DMPに送られる AVメディアのサイズが予測スト リームサイズとの整合性を有することを確実にするために、本発明は、 DMSについて 、予測ナビゲーシヨン情報内に示された予測サイズを満たすよう、トランスコードされ た範囲の AVメディアのサイズの調整に対する制御を DMSに提供する。ステップ 820 、 824、及び 826で、トランスコードプロセスが完了すると、トランスコード後、次のプロ セスを判断するよう、トランスコードされた AVデータサイズ力 予測された AVデータ サイズに対して検査される。この場合、 DMS自体が、ナビゲーシヨン情報内に記録さ れた予測 AVメディアサイズについての知識を有する。 3つのケースが考えられる。即 ち、第 1に、トランスコードされた AVデータサイズが予測 AVデータサイズに全く等し い 826。第 2に、トランスコードされた AVデータサイズが予測 AVデータサイズより大 きい 824。第 3に、予測 AVデータサイズがトランスコードされた AVデータサイズより 大き!/、820。トランスコードされた AVデータサイズが予測 AVデータサイズに全く等し い場合 826、ステップ 816で、 DMSは、トランスコードされた AVメディアを DMPにリ アルタイムにストリーミングする。トランスコードされた AVデータサイズが予測 AVデー タサイズより大きい場合 824、ステップ 828で、 DMSは、トランスコードされた AVメデ ィァサイズが予測された AVメディアサイズ以下であることを確認するよう、 AVメディア を再トランスコードする。このことは、トランスコーダ入力パラメータを設定することによ り、たとえばターゲット AVビットレートを下げることにより又は MPEGストリームフォー マットにより高い DCT係数を使用することにより行われ得る。次いで、再トランスコード された AVメディアは、ステップ 826、 824、及び 820を繰り返すことにより、予測 AVメ ディアサイズに対して再び検査される。これは、トランスコードされた AVデータサイズ が予測 AVデータサイズより大きくないことを確認するためである。最後に、トランスコ ードされた AVデータサイズが予測 AVデータサイズより小さ!/、場合 820、第 1にステ ップ 830で、サイズ差が判断され、その後ステップ 822で、トランスコードされた AVデ 一タのパディンダカ 予測されるサイズと全く等しくなる。すべての場合において、トラ ンスコードされた AVメディアは、必要な場合にはトランスコード及びパディング又は 再トランスコードの後に、ステップ 816で、リアルタイムに DMPにストリーミングされる。 AVメディアとこれに対応するナビゲーシヨン情報との間の整合性が達成される。これ は、 DMPでの適切なプレイバックを確実にするのに重要である。
[0064] トランスコードマネージャは、ナビゲーシヨン情報予測サブシステム 206によって生 成されたナビゲーシヨン情報に基づいて、ステップ 812で、 DMPによって要求された AVメディアの範囲をトランスコードする役割を果たす。通常のプレイバックモード又は トリックプレイモードのいずれかであり得るプレイバックモードにより、要求された範囲 の AVメディアが、 DMPによって始動された要求において指定される。 DMS688と D MP690との間の接続が終了するまで、図 8に例示されているすべてのステップが繰 り返される。
[0065] 要求された AVメディアフォーマットのためのナビゲーシヨン情報を予測している間、 DMS内のナビゲーシヨン情報予測サブシステム 206によって採用される、 2、 3のス テツプがある。とりわけ、範囲マップ情報の生成は、 DMPによる AVメディア要求に一 致するよう、オリジナル AVメディア及びターゲット AVメディアの範囲を判断するのに 重要である。範囲マップ情報は、 2種類の情報、即ちプレゼンテーションタイムスタン プ及び AVメディア内のこれに対応するアドレス又は位置に基づいて生成される。 A Vメディア内のこれに対応する位置へのプレゼンテーションタイムスタンプのマツピン グは、特定のプレゼンテーション時間に AVメディアのこれに対応する部分をプレゼン テーシヨンするために復号器のための基準として役立つ。図 9は、範囲マップ情報 90 8がオリジナルナビゲーシヨン情報 902及び予測ナビゲーシヨン情報 912の両方に基 づレ、て如何に生成され得るかにつ!/、ての一例を例示して!/、る。この例にお!/、ては、 プレゼンテーションタイムスタンプ及び AVメディア位置は、それぞれ、秒及びバイトで 示されて!/、る。プレゼンテーションタイムスタンプに対応するオリジナル AVメディアの 始めからのオリジナル AVデータのオフセット又はバイト位置 914は、オリジナルナビ ゲーシヨン情報 902から検索され得る。同じプレゼンテーションタイムスタンプを、それ ぞれ 916及び 918で、オリジナルナビゲーシヨン情報及び予測ナビゲーシヨン情報の 両方内の基準として利用することにより、要求されたナビゲーシヨン情報を予測してい る 906間に、たとえばストリームビットレート及びプレゼンテーション間隔に基づいてス トリーム範囲を計算している間に、プレゼンテーションタイムスタンプに対応するター ゲット AVメディアの始めからのターゲット AVデータのオフセット又はバイト位置 920 が導き出される。 2つのナビゲーシヨン情報 902及び 912から、基準として役立つす ト AVメディアのアドレスとを一致させることにより、範囲マップ情報 908が作成され得 ナビゲーシヨン情報を予測するための別の重要なソースは、変換条件テーブル 10 04である。変換条件テーブルは、 DMPによって要求されたナビゲーシヨン情報のコ ンテンッを予測するよう、 DMSによって使用される。 DMSは、変換条件テーブル 10 04を参照して、要求されたナビゲーシヨン情報 912を予測するのに必要な、ターゲッ トビットレート及び他のトランスコードパラメータを取得する。図 10は、変換条件テープ ルの一例を表している。変換条件テーブルは、オリジナル AVメディア及びターゲット AVメディアの両方の変換条件情報から構成される。変換条件情報は、オーディオ/ ビデオビットレート、フレームレート、キーフレーム間隔、システム及びエレメンタリスト リームレベルを含む AVメディアフォーマット、及びオリジナル AVメディア 1002及び ターゲット AVメディア 1006の両方の長さなどの、 AVメディア属性 1008を含む。たと えば、オリジナル AVメディアがより低いビットレートでダウンコンバートされた場合に は、プレゼンテーション間隔のための AVデータ構造のサイズがオリジナル AVデータ 構造のサイズから変わるにつれて、 AVデータのプレゼンテーションタイムスタンプ及 びこれに対応するアドレスのマッピングが変更される。図 9及び図 10のナビゲーショ ン情報及び範囲マップの例について述べると、 20Mbpsのオリジナノレビットレート力 0Mbpsだけ減少して 10Mbpsとなった場合には、 AVメディアのサイズは、ビットレー トの減少により、トランスコード後に減少される。変換条件テーブル 1004は、特にター ゲット AVメディアサイズを予測する際のナビゲーシヨン情報予測サブシステム 206の ソースとして役立つ。
[0067] AVメディア内のプレゼンテーションタイムスタンプとこれに対応するアドレスとの間 のマッピングは、それぞれの当該 AVメディアを変更する時には必ず編集しなければ ならないプレゼンテーション時間値に基づく。 AV位置は、ターゲットビットレートに基 づいて計算される。ビットレートは、時間間隔内でプレゼンテーションされる、ビットの AVメディアの総サイズを表す。したがって、たとえば、ビットレートが減少した場合に は、それぞれのプレゼンテーション時間の AV位置も、より低いオフセットに減少する 。ビットレートと AV位置との間の関係は比例関係である。
[0068] DMPでの適切なプレイバックを確実にするために、予測ナビゲーシヨン情報とトラ ンスコードされた AVメディアとの間の整合性が維持されなければならな!/、。本発明に おいては、要求された AVメディアをトランスコードし、要求されたフォーマットに作成 した後、トランスコードされた AVメディアサイズ力 DMPが参照する予測ナビゲーシ ヨン情報内で予測され示される、要求された AVメディアサイズとの整合性を有するこ とを、 DMSは確実にしなければならない。
[0069] 図 11は、トランスコードされた AVメディアサイズが予測 AVメディアサイズより小さい 場合の、図 8のステップ 812、 814、 820、 830、及び 822のプロセスの例を示してい る。トランスコードされるオリジナル AVメディアの範囲 1126が DMSによって決まると 、このオリジナル AVメディアの範囲は、トランスコードするため 1118でトランスコーダ 11 12に送られる。トランスコードプロセス 1112が完了すると、パディングハンドラ 110 4が、トランスコードされた AVデータ 1116のサイズと要求内に示されている予測 AV データ 1102のサイズとを比較する役割を果たす。 2つのサイズの間の差 1120に基 づいて、パディングサイズ 1124が決まる。これは、予測 AVメディアサイズ及びトラン スコードされた AVメディアサイズの範囲の間のサイズ差 1120と等価である。要求さ れた予測 AVメディアサイズの整合性を確実にするよう、トランスコードされたストリー ム 1122の最後に、パディング 1124が追加される。差がゼロであった場合、パディン グの必要はない。
[0070] 上記に記述したように、ナビゲーシヨン情報予測サブシステム 206は、連続及び不 連続 AVメディアの両方をサポートする。図 12は、特に不連続 AVメディアのためのナ ビゲーシヨン情報予測サブシステム 206によって遂行される、高度なステップを例示 するフローチャート 1200である。 DMP又はポータブルメディア記憶装置のいずれか 力もステップ 1202でナビゲーシヨン情報の要求を受信すると、ナビゲーシヨン情報予 測サブシステム 206は、ステップ 1204で変換条件テーブルから変換条件情報を、及 びステップ 1206でオリジナルナビゲーシヨン情報から必要な情報を検索して!/、る間 に、オリジナル AVメディアがステップ 1208で不連続を含む力、どうかを検査する。たと えば、不連続フラグを検査する。不連続がストリーム内に存在した場合、不連続ストリ ームのためのナビゲーシヨン情報を予測し生成するための解決方法力 ステップ 121 0で適用される。次に、 DMSは、ステップ 1212で要求された予測ナビゲーシヨン情 報を生成し、ステップ 1214で、要求側の DMPにこれを送る、又は要求側のポータブ ノレメディア記憶装置にこれをコピーする。
[0071] 図 13は、 DMSなどの BD— REデバイス及び DMPなど DVD— VRを用いた、本発 明における不連続ストリームのための解決方法の詳細な流れの一例を表している。 B D— REの仕様に基づいて、多くの再生項目（Playltem)のストリーム内で不連続が 発生する。不連続情報は、 BD— REナビゲーシヨン情報ファイルから検索され得る。 再生リストファイルにおいて、 2つの連続する再生項目の、再生項目のプレゼンテー シヨン終了時間を意味する OUT TIMEと、その後に再生する再生項目のプレゼン テーシヨン開始時間を意味する IN— TIMEとが等しくない時には必ず不連続が起き ると解釈され得る。ステップ 1302で、不連続が存在するかどうかを判断するために、 2つの連続的な再生項目の IN— TIME及び OUT— TIMEが検査される。 AVメディ ァ 1304内に不連続が発見されな力 た場合には、ステップ 1322で、予測ナビゲー シヨン情報が更新される。また、 AVメディア 1306内で不連続が発見された場合には 、ステップ 1308、 1310、及び 1312で、 AVメディア内で検出された不連続の種類が 識別される。 BD— REの仕様によれば、 BD— REストリーム内の不連続は、 4つのシ ナリオに分類され、識別されたシナリオのための解決方法が適用される。非常に小さ い部分のストリームの削除による不連続については、削除されるべき AVメディアの一 部分が、 BD— RETS内に留まっている。ナビゲーシヨン情報を予測し、その後、所望 の AVメディアフォーマットに TSをトランスコードしている間に、ストリームのこの部分を 消去するために、 AVメディアの PES (パケット化されたエレメンタリストリーム）の PTS (プレゼンテーションタイムスタンプ）力 ステップ 1322でのナビゲーシヨン情報予測 プロセスと合わせて、ステップ 1314で調整される。何故なら、不連続ストリーム部分は トランスコードされないからである。ステップ 1310でのシステムクロック又はプレゼンテ ーシヨン時間の変更（たとえば、放送局によるチャネル切換又はユーザ編集）による 不連続については、システム時間情報力 ステップ 1318で得られ、その後、ステップ 1320で新しい VOBが作成される。 VOBの数は、オリジナル AVメディア内の再生項 目の数に依存する。たとえば、 TS内にこの種の不連続を有する再生項目の数が 5つ である場合、 VOBの数は、 5であるべきである。次いで、この後、不連続情報を含む よう、ステップ 1322で予測ナビゲーシヨン情報が更新される。最後に、ステップ 1312 で、ユーザ定義再生リスト内で不連続が検出された場合、ステップ 1318、 1320、及 び 1322が遂行される前に、ユーザ定義再生リスト内で組み合わせられるすべてのク リップのプレゼンテーション時間間隔を検索するよう、ブリッジクリップ情報力 第 1に ステップ 1316で抽出されなければならない。
産業上の利用可能性
本発明は、低ビットレートフォーマットのビデオデータ再生に適したプレヤーにより 高ビットレートフォーマットのビデオデータを再生する方法及び装置において使用さ
tt990/L00Zdr/lDd 83 0t96蘭 OOZ OAV

Claims

請求の範囲
[1] 低ビットレートフォーマットのビデオデータの再生に適したプレヤーにより、記憶装 置内に格納されている高ビットレートフォーマットのビデオデータを再生する方法であ つて、
前記高ビットレートフォーマットのビデオデータから、オリジナルナビゲーシヨン情報 を読み取ることと、
前記オリジナルナビゲーシヨン情報を、前記低ビットレートフォーマットのビデオデー タに適応できる予測ナビゲーシヨン情報に変換することと、
前記予測ナビゲーシヨン情報に基づいて、低ビットレートバイト情報内の前記低ビッ トレートフォーマットのビデオデータの一区分を要求することとを含み、前記低ビットレ ートバイト情報が、前記プレヤーにより再生するために前記低ビットレートフォーマット のビデオデータの前記一区分の開始バイト位置及び終了バイト位置を含み、 さらに、前記予測ナビゲーシヨン情報及び前記オリジナルナビゲーシヨン情報に基 づレ、て、前記低ビットレートバイト情報を高ビットレートバイト情報に変換することを含 み、前記高ビットレートバイト情報力 s、前記高ビットレートフォーマットのビデオデータ の前記一区分の開始バイト位置及び終了バイト位置を含み、
さらに、前記高ビットレートバイト情報に基づいて、前記記憶装置から前記高ビットレ ートフォーマットのビデオデータの前記一区分を検索することと、
前記高ビットレートフォーマットのビデオデータの前記一区分を前記低ビットレートフ ォーマットのビデオデータの一区分にトランスコードすることとを含む方法。
[2] 低ビットレートフォーマットのビデオデータの再生に適したプレヤーにより、記憶装 置内に格納されている高ビットレートフォーマットのビデオデータを再生する装置であ つて、
前記高ビットレートフォーマットのビデオデータから、オリジナルナビゲーシヨン情報 を読み取ることと、
前記オリジナルナビゲーシヨン情報を、前記低ビットレートフォーマットのビデオデー タに適応できる予測ナビゲーシヨン情報に変換することと、
前記予測ナビゲーシヨン情報に基づいて、低ビットレートバイト情報内の前記低ビッ トレートフォーマットのビデオデータの一区分を要求することとを含み、前記低ビットレ ートバイト情報が、前記プレヤーにより再生するために前記低ビットレートフォーマット のビデオデータの前記一区分の開始バイト位置及び終了バイト位置を含み、 さらに、前記予測ナビゲーシヨン情報及び前記オリジナルナビゲーシヨン情報に基 づレ、て、前記低ビットレートバイト情報を高ビットレートバイト情報に変換することを含 み、前記高ビットレートバイト情報力 前記高ビットレートフォーマットのビデオデータ の前記一区分の開始バイト位置及び終了バイト位置を含み、
さらに、前記高ビットレートバイト情報に基づいて、前記記憶装置から前記高ビットレ ートフォーマットのビデオデータの前記一区分を検索することと、
前記高ビットレートフォーマットのビデオデータの前記一区分を前記低ビットレートフ ォーマットのビデオデータの一区分にトランスコードすることとを含むオペレーションを fiうことカ可倉な CPU (201、 301)と、
前記低ビットレートフォーマットのビデオデータを復号するための復号器（314)とを 備えた装置。
[3] 低ビットレートフォーマットのビデオデータの再生に適したプレヤー（DMP)により、 サーバ（DMS)の記憶装置内に格納されている高ビットレートフォーマットのビデオデ ータを再生する方法であって、
前記サーバ内の前記高ビットレートフォーマットのビデオデータから、オリジナルナ ビグーシヨン情報を読み取ることと、
前記オリジナルナビゲーシヨン情報を、前記サーバ内の前記低ビットレートフォーマ ットのビデオデータに適応できる予測ナビゲーシヨン情報に変換することと、
前記予測ナビゲーシヨン情報を前記プレヤーに転送することと、
前記プレヤーにより、前記予測ナビゲーシヨン情報に基づいて、低ビットレートバイト 情報内の前記低ビットレートフォーマットのビデオデータの一区分を要求することとを 含み、前記低ビットレートバイト情報力 前記プレヤーにより再生するために前記低ビ ットレートフォーマットのビデオデータの前記一区分の開始バイト位置及び終了バイト 位置を含み、
さらに、前記予測ナビゲーシヨン情報及び前記オリジナルナビゲーシヨン情報に基 づレ、て、前記低ビットレートバイト情報を高ビットレートバイト情報に変換することを含 み、前記高ビットレートバイト情報力 前記高ビットレートフォーマットのビデオデータ の前記一区分の開始バイト位置及び終了バイト位置を含み、
さらに、前記高ビットレートバイト情報に基づいて、前記サーバ内の前記記憶装置 力、ら前記高ビットレートフォーマットのビデオデータの前記一区分を検索することと、 前記高ビットレートフォーマットのビデオデータの前記一区分を前記低ビットレートフ ォーマットのビデオデータの一区分にトランスコードすることとを含む方法。
[4] 前記低ビットレートバイト情報を前記変換することが、前記低ビットレートバイト情報 を、前記高ビットレートバイト情報にさらに変換される時間領域情報に変換することを 含む請求項 3に記載の方法。
[5] 前記予測ナビゲーシヨン情報及び前記オリジナルナビゲーシヨン情報に基づいて 範囲マップ情報を生成することをさらに含み、前記範囲マップ情報が、低ビットレート バイト情報及びこれに対応する高ビットレートバイト情報を含む請求項 3に記載の方 法。
[6] 前記低ビットレートフォーマットのビデオデータの前記一区分のパディングをさらに 有する請求項 3に記載の方法。
[7] 変換条件情報を生成することをさらに含み、前記変換条件情報が、少なくとも、前 記高ビットレートフォーマットのビデオデータの属性である高ビットレートと、前記低ビ ットレートフォーマットのビデオデータの属性である低ビットレートとを含む請求項 3に 記載の方法。
[8] 前記高ビットレートフォーマットのビデオデータ力 BD— REフォーマットのビデオデ ータである請求項 3に記載の方法。
[9] 前記低ビットレートフォーマットのビデオデータ力 DVD—VRフォーマットのビデオ データである請求項 3に記載の方法。
[10] 前記ナビゲーシヨン情報が、索引情報である請求項 3に記載の方法。
[11] 前記ナビゲーシヨン情報力 IFOである請求項 3に記載の方法。
[12] 低ビットレートフォーマットのビデオデータの再生に適したプレヤー（DMP)により、 サーバ（DMS)の記憶装置内に格納されている高ビットレートフォーマットのビデオデ ータを再生する装置であって、
前記サーバ内の前記高ビットレートフォーマットのビデオデータから、オリジナルナ ビグーシヨン情報を読み取ることと、
前記オリジナルナビゲーシヨン情報を、前記サーバ内の前記低ビットレートフォーマ ットのビデオデータに適応できる予測ナビゲーシヨン情報に変換することと、
前記予測ナビゲーシヨン情報を前記プレヤーに転送することとを含むオペレーショ ンを行うことが可能な、前記サーバ内に設けられた第 1の CPU (201)と、
前記プレヤーにより、前記予測ナビゲーシヨン情報に基づいて、低ビットレートバイト 情報内の前記低ビットレートフォーマットのビデオデータの一区分を要求することを含 むオペレーションを行うことが可能な、前記プレヤー内に設けられた第 2の CPU (30 1)とを備え、
前記低ビットレートバイト情報力 前記プレヤーにより再生するために前記低ビットレ ートフォーマットのビデオデータの前記一区分の開始バイト位置及び終了バイト位置 を含み、
前記第 1の CPU及び前記第 2の CPUの少なくとも 1つが、
前記予測ナビゲーシヨン情報及び前記オリジナルナビゲーシヨン情報に基づいて、 前記低ビットレートバイト情報を高ビットレートバイト情報に変換することを含むオペレ ーシヨンを行うことが可能であり、前記高ビットレートバイト情報力 前記高ビットレート フォーマットのビデオデータの前記一区分の開始バイト位置及び終了バイト位置を含 み、
前記第 1の CPUが、
前記高ビットレートバイト情報に基づいて、前記サーバ内の前記記憶装置から前記 高ビットレートフォーマットのビデオデータの前記一区分を検索することを含むオペレ ーシヨンを行うことが可能であり、
前記第 1の CPU及び前記第 2の CPUの少なくとも 1つが、
前記高ビットレートフォーマットのビデオデータの前記一区分を前記低ビットレートフ ォーマットのビデオデータの一区分にトランスコードすることを含むオペレーションを 行うことが可能である装置。
[13] 前記低ビットレートバイト情報を変換する前記オペレーション力 前記第 1の CPUに よって行われる請求項 12に記載の装置。
[14] トランスコードする前記オペレーション力 前記第 1の CPUによって行われる請求項
12に記載の装置。
[15] 前記低ビットレートバイト情報を変換する前記オペレーション力 前記低ビットレート ノ イト情報を、前記高ビットレートバイト情報にさらに変換される時間領域情報に変換 することを含む請求項 12に記載の装置。
[16] 前記第 1の CPU及び前記第 2の CPUの少なくとも 1つ力 前記予測ナビゲーシヨン 情報及び前記オリジナルナビゲーシヨン情報に基づレ、て、範囲マップ情報を生成す るオペレーションを行うことが可能であり、前記範囲マップ情報が、低ビットレートバイ ト情報及びこれに対応する高ビットレートバイト情報を含む請求項 12に記載の装置。
[17] 前記第 1の CPU及び前記第 2の CPUの少なくとも 1つ力 前記低ビットレートフォー マットのビデオデータの前記一区分のパデイングのオペレーションを行うことが可能 である請求項 12に記載の装置。
[18] 前記第 1の CPU及び前記第 2の CPUの少なくとも 1つが、変換条件情報を生成す るオペレーションを行うことが可能であり、前記変換条件情報が、少なくとも、前記高 ビットレートフォーマットのビデオデータの属性である高ビットレートと、前記低ビットレ ートフォーマットのビデオデータの属性である低ビットレートとを含む請求項 12に記載 の装置。
[19] 前記高ビットレートフォーマットのビデオデータ力 BD— REフォーマットのビデオデ ータである請求項 12に記載の装置。
[20] 前記低ビットレートフォーマットのビデオデータ力 DVD—VRフォーマットのビデオ データである請求項 12に記載の装置。
[21] 前記ナビゲーシヨン情報が、索引情報である請求項 12に記載の装置。
[22] 前記ナビゲーシヨン情報が、 IFOである請求項 12に記載の装置。
PCT/JP2007/066449 2006-09-05 2007-08-24 Method and device for playing video data of high bit rate format by player suitable to play video data of low bit rate format WO2008029640A1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US12/438,026 US20100166387A1 (en) 2006-09-05 2007-08-24 Method and apparatus for playing video data of high bit rate format by a player capable of playing video data of low bit rate format
EP07792978A EP2061241A4 (en) 2006-09-05 2007-08-24 METHOD AND DEVICE FOR REPRODUCING VIDEO DATA OF A HIGH-BIT RATE FORMAT THROUGH A PLAYBACK DEVICE SUITABLE FOR REPRODUCING VIDEO DATA OF A LOW-BITRATE FORMAT
JP2008533095A JPWO2008029640A1 (ja) 2006-09-05 2007-08-24 低ビットレートフォーマットのビデオデータ再生に適したプレヤーにより高ビットレートフォーマットのビデオデータを再生する方法及び装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006240281 2006-09-05
JP2006-240281 2006-09-05

Publications (1)

Publication Number Publication Date
WO2008029640A1 true WO2008029640A1 (en) 2008-03-13

Family

ID=39157075

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2007/066449 WO2008029640A1 (en) 2006-09-05 2007-08-24 Method and device for playing video data of high bit rate format by player suitable to play video data of low bit rate format

Country Status (4)

Country Link
US (1) US20100166387A1 (ja)
EP (1) EP2061241A4 (ja)
JP (1) JPWO2008029640A1 (ja)
WO (1) WO2008029640A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012120146A (ja) * 2010-11-30 2012-06-21 Gemtec Technology Co Ltd マルチメディアファイルを編集する方法およびシステム
JP5930562B1 (ja) * 2015-04-08 2016-06-08 西日本電信電話株式会社 動画表示支援プログラムおよび動画表示支援装置

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8688665B2 (en) * 2008-10-03 2014-04-01 Motorola Mobility Llc Collaborative transcoding
CN102450014B (zh) 2009-03-31 2017-07-14 茨特里克斯系统公司 用于质量感知视频优化的方法和视频优化器
US9749713B2 (en) * 2009-10-15 2017-08-29 Citrix Systems, Inc. Budget encoding
WO2012112928A2 (en) * 2011-02-18 2012-08-23 Aereo, Inc. Fast binding of a cloud based streaming server structure
US9271003B2 (en) * 2011-04-15 2016-02-23 Opera Software Ireland Limited Real-time audio or video transcoding
CN108769693B (zh) 2011-06-10 2022-07-08 拜特移动网络创新有限责任公司 质量感知视频优化中的宏块级自适应量化
US20140063339A1 (en) * 2012-09-04 2014-03-06 Google Inc. In Browser Muxing and Demuxing For Video Playback
US9712867B2 (en) * 2013-09-16 2017-07-18 Avago Technologies General Ip (Singapore) Pte. Ltd. Application specific policy implementation and stream attribute modification in audio video (AV) media
CN104754366A (zh) * 2015-03-03 2015-07-01 腾讯科技（深圳）有限公司 音视频文件直播方法、装置和系统
JP6558667B2 (ja) * 2017-03-28 2019-08-14 パナソニックＩｐマネジメント株式会社 コンテンツ配信システム、再生装置、及び、コンテンツ配信方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0920203A2 (en) 1995-09-29 1999-06-02 Matsushita Electric Industrial Co., Ltd. Method and device for seamlessly reproducing a bit stream containing noncontinuous system time information
US6463445B1 (en) 1999-08-27 2002-10-08 Sony Electronics Inc. Multimedia information retrieval system and method including format conversion system and method
US20030021587A1 (en) 2001-07-27 2003-01-30 Keishi Sugimoto Digital video recording/reproduction apparatus and program therefor
US20040036800A1 (en) * 2002-08-23 2004-02-26 Mitsuharu Ohki Picture processing apparatus, picture processing method, picture data storage medium and computer program
US20040054689A1 (en) 2002-02-25 2004-03-18 Oak Technology, Inc. Transcoding media system
WO2004057869A1 (ja) * 2002-12-20 2004-07-08 Matsushita Electric Industrial Co., Ltd. データストリームのフォーマット変換方法およびそのための記録方法
EP1524855A1 (en) 2002-07-11 2005-04-20 Matsushita Electric Industrial Co., Ltd. Av data conversion device and method
JP2005151173A (ja) * 2003-11-14 2005-06-09 Sharp Corp 動画像記録再生装置、動画像再生装置および動画像再生方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5614940A (en) * 1994-10-21 1997-03-25 Intel Corporation Method and apparatus for providing broadcast information with indexing
US7720354B2 (en) * 2001-01-04 2010-05-18 Apple Inc. Embedded access information for digital versatile disc (DVD) independent of DVD player software
JP4235382B2 (ja) * 2001-12-28 2009-03-11 株式会社エヌ・ティ・ティ・ドコモ コンテンツサーバ、コンテンツデータの配信方法、プログラムおよび記録媒体
US8015584B2 (en) * 2002-10-18 2011-09-06 Seachange International, Inc. Delivering interactive content to a remote subscriber
JP2004357275A (ja) * 2003-05-07 2004-12-16 Nec Corp 映像記録装置、記録媒体、映像記録方法及びプログラム
US20080031597A1 (en) * 2004-07-12 2008-02-07 Etsuto Nakatsu Stream Recording/Reproducing Apparatus
KR20070101840A (ko) * 2004-09-10 2007-10-17 코닌클리케 필립스 일렉트로닉스 엔.브이. 광 디스크 재생 방법 및 장치

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0920203A2 (en) 1995-09-29 1999-06-02 Matsushita Electric Industrial Co., Ltd. Method and device for seamlessly reproducing a bit stream containing noncontinuous system time information
US6463445B1 (en) 1999-08-27 2002-10-08 Sony Electronics Inc. Multimedia information retrieval system and method including format conversion system and method
US20030021587A1 (en) 2001-07-27 2003-01-30 Keishi Sugimoto Digital video recording/reproduction apparatus and program therefor
US20040054689A1 (en) 2002-02-25 2004-03-18 Oak Technology, Inc. Transcoding media system
EP1524855A1 (en) 2002-07-11 2005-04-20 Matsushita Electric Industrial Co., Ltd. Av data conversion device and method
US20040036800A1 (en) * 2002-08-23 2004-02-26 Mitsuharu Ohki Picture processing apparatus, picture processing method, picture data storage medium and computer program
WO2004057869A1 (ja) * 2002-12-20 2004-07-08 Matsushita Electric Industrial Co., Ltd. データストリームのフォーマット変換方法およびそのための記録方法
JP2005151173A (ja) * 2003-11-14 2005-06-09 Sharp Corp 動画像記録再生装置、動画像再生装置および動画像再生方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2061241A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012120146A (ja) * 2010-11-30 2012-06-21 Gemtec Technology Co Ltd マルチメディアファイルを編集する方法およびシステム
JP5930562B1 (ja) * 2015-04-08 2016-06-08 西日本電信電話株式会社 動画表示支援プログラムおよび動画表示支援装置

Also Published As

Publication number Publication date
US20100166387A1 (en) 2010-07-01
EP2061241A4 (en) 2010-07-21
EP2061241A1 (en) 2009-05-20
JPWO2008029640A1 (ja) 2010-01-21

Similar Documents

Publication Publication Date Title
WO2008029640A1 (en) Method and device for playing video data of high bit rate format by player suitable to play video data of low bit rate format
KR101868280B1 (ko) 정보 처리 장치, 정보 처리 방법 및 컴퓨터 판독 가능한 기록 매체
JP5444476B2 (ja) コンテンツデータ生成装置、コンテンツデータ生成方法、コンピュータプログラムおよび記録媒体
US9756364B2 (en) Streaming method and apparatus operating by inserting other content into main content
JP2008005254A (ja) サーバ装置、クライアント装置、コンテンツ再生システム、コンテンツ処理方法及びプログラム
JP2008502198A (ja) ストレージ装置間のコンテンツの転送
JP4170545B2 (ja) 映像表示システムおよびこのシステムで用いられる端末装置
JP2008262686A (ja) 同報通信データを記録するための方法、および、装置
JPWO2005117432A1 (ja) 番組録画装置および番組録画方法
KR100744594B1 (ko) 콘텐츠 재생 시스템, 재생 장치, 재생 방법 및 분배 서버
US20100246666A1 (en) Bluflex: flexible, true, live video streaming on blu-ray platforms
JP4315914B2 (ja) 画像再生装置及び画像再生方法
JP5135147B2 (ja) 動画ファイル送信サーバおよびその動作制御方法
JP2008085934A (ja) リモート映像再生システムおよびレジューム再生方法
JP2015501018A5 (ja)
JP2006262437A (ja) 映像配信システム
JP4213697B2 (ja) 動画ストリームの画像再生装置及び方法
JP2003046928A (ja) ネットワーク映像再生方法および圧縮映像データ復号再生装置
JP5899738B2 (ja) 情報処理システム、情報処理装置及び情報処理プログラム
JP5144771B2 (ja) 画像処理装置、画像再生装置、画像記録装置、画像処理方法、画像再生方法、及び画像記録方法
JP2008301250A (ja) コンテンツ再生システムおよびコンテンツ再生方法
JP4882534B2 (ja) トランスコードシステム
JP4005505B2 (ja) 情報記録媒体のプログラム仕様情報提供方法
JP2007336206A (ja) 映像記録装置および映像データ転送装置
JP2005110052A (ja) データ伝送装置及びデータ伝送方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 07792978

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2008533095

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 2007792978

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 12438026

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE