CN1685721A - 再现装置、再现方法、再现程序以及记录介质 - Google Patents

再现装置、再现方法、再现程序以及记录介质 Download PDF

Info

Publication number
CN1685721A
CN1685721A CNA2003801001641A CN200380100164A CN1685721A CN 1685721 A CN1685721 A CN 1685721A CN A2003801001641 A CNA2003801001641 A CN A2003801001641A CN 200380100164 A CN200380100164 A CN 200380100164A CN 1685721 A CN1685721 A CN 1685721A
Authority
CN
China
Prior art keywords
data
button
pictorial
subhead
pictorial data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2003801001641A
Other languages
English (en)
Other versions
CN100466713C (zh
Inventor
浜田俊也
加藤元树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN1685721A publication Critical patent/CN1685721A/zh
Application granted granted Critical
Publication of CN100466713C publication Critical patent/CN100466713C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B19/00Driving, starting, stopping record carriers not specifically of filamentary or web form, or of supports therefor; Control thereof; Control of operating function ; Driving both disc and head
    • G11B19/02Control of operating function, e.g. switching from recording to reproducing
    • G11B19/022Control panels
    • G11B19/025'Virtual' control panels, e.g. Graphical User Interface [GUI]
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327Table of contents
    • G11B27/329Table of contents on a disc [VTOC]
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42646Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438Window management, e.g. event handling following interaction with the user interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/00086Circuits for prevention of unauthorised reproduction or copying, e.g. piracy
    • G11B20/0021Circuits for prevention of unauthorised reproduction or copying, e.g. piracy involving encryption or decryption of contents recorded on or reproduced from a record carrier
    • G11B20/00485Circuits for prevention of unauthorised reproduction or copying, e.g. piracy involving encryption or decryption of contents recorded on or reproduced from a record carrier characterised by a specific kind of data which is encrypted and recorded on and/or reproduced from the record carrier
    • G11B20/00492Circuits for prevention of unauthorised reproduction or copying, e.g. piracy involving encryption or decryption of contents recorded on or reproduced from a record carrier characterised by a specific kind of data which is encrypted and recorded on and/or reproduced from the record carrier wherein content or user data is encrypted
    • G11B20/00528Circuits for prevention of unauthorised reproduction or copying, e.g. piracy involving encryption or decryption of contents recorded on or reproduced from a record carrier characterised by a specific kind of data which is encrypted and recorded on and/or reproduced from the record carrier wherein content or user data is encrypted wherein each title is encrypted with a separate encryption key for each title, e.g. title key for movie, song or data file
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • G11B2020/1264Formatting, e.g. arrangement of data block or words on the record carriers wherein the formatting concerns a specific kind of data
    • G11B2020/1288Formatting by padding empty spaces with dummy data, e.g. writing zeroes or random data when de-icing optical discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/21Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
    • G11B2220/213Read-only discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/21Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
    • G11B2220/215Recordable discs
    • G11B2220/216Rewritable discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2562DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N11/00Colour television systems
    • H04N11/06Transmission systems characterised by the manner in which the individual colour picture signal components are combined
    • H04N11/20Conversion of the manner in which the individual colour picture signal components are combined, e.g. conversion of colour television standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8211Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a sound signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal
    • H04N9/8244Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal involving the use of subcodes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/87Regeneration of colour television signals
    • H04N9/8715Regeneration of colour television signals involving the mixing of the reproduced video signal with a non-recorded signal, e.g. a text signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

本发明涉及再现装置、再现方法、再现程序以及记录介质,其中对于预先记录内容的大容量圆盘形记录介质,实现具有高度灵活性的用户界面。与作为效果声音的声音数据相应的按钮图象数据、以及用于声音数据和图象数据的控制命令与流多路复用,并记录在盘上。从盘再现的剧本储存在缓冲器104中。图象数据和声音数据储存在缓冲器105中。根据剧本从缓冲器105读取图象数据,并且扩展到图形平面133。另外,从缓冲器105读取相应的声音数据,并且由声音播放器106D再现。当按钮图象根据按钮状态变化而改变时,再现效果声音。结果,实现更有效的用户界面。

Description

再现装置、再现方法、 再现程序以及记录介质
技术领域
本发明涉及允许用户互动操作记录在大容量记录介质如蓝光盘上的程序的再现装置、再现方法、再现程序和记录介质。
背景技术
近年来,已经提出蓝光盘标准,作为可从记录和再现装置拆分的可记录盘类型记录介质的标准。蓝光盘标准规定一种具有12cm直径记录介质和0.1mm厚覆盖层的盘。蓝光盘标准使用波长405nm的蓝紫色激光和数值孔径0.85的物镜。蓝光盘标准实现最大27GB(千兆字节)的记录容量。结果,日本的BS数字高清晰度广播节目可记录两个小时或更长时间,并且图象质量不下降低。
对于记录在可记录光盘上的AV(音频/视频)信号的源(提供源),使用模拟信号如常规模拟电视广播以及数字信号如数字电视广播,其中,数字电视广播例如为BS数字广播。蓝光盘标准已经建立一种用于记录这些广播的AV信号的方法。
对于当前蓝光盘标准的派生标准,正在开发其上预记录电影、音乐等的只再现记录介质。已经广泛使用DVD(数字多用途盘),作为其上预记录电影或音乐的圆盘形记录介质。根据蓝光盘标准的只再现光盘与常规DVD有很大的不同,并且在大记录容量和高传输速度方面优于常规DVD,其中,高传输速度允许以高质量记录高清晰度图象长达两个小时或更长时间。
当前蓝光盘标准既未规定用于在屏幕上显示盘中视频内容列表的方法,也未规定允许用户移动列表上光标并选择他或她希望从该列表再现的视频内容的用户界面功能。这些功能通过记录和再现装置主单元而实现,所述主单元向和从蓝光盘记录和再现视频内容。因而,即使从相同的记录介质再现视频内容,内容列表屏幕的布局也取决于所用的记录和再现装置,并且也取决于用户界面。因而,用户不容易使用蓝光盘。因此,必需允许只再现盘显示盘(内容)制造商已经设计的菜单屏幕等,并且该显示不依赖于再现装置。
在再现视频内容的同时显示选择屏幕的多故事功能一般称作互动功能。为了实现互动功能,对于盘制造商,必需创建他或她对视频内容指定再现顺序和分支的剧本,用程序语言、脚本语言等描述该剧本,并且在盘上记录所述剧本。再现装置一方读取并执行剧本。结果,再现装置再现视频内容,并且显示允许用户选择制造商所指定视频内容分支的选择屏幕。
当前蓝光盘标准(蓝光盘可重写格式版本1.0)既未规定用于组织内容制造商所指定的菜单屏幕和分支选择屏幕的方法,也未规定用于描述用户输入处理的方法。目前,难以根据制造商所指定的剧本,以与再现装置的制造和模型无关的兼容性从蓝光盘再现视频内容。
对于只再现盘,制造商一方希望允许用户选择由多架照相机拍摄物体的角度之一的多角度功能,从而,用户能以他或她喜欢的角度来观看物体。因而,需要提供此种功能。
对于只再现盘,用于显示小标题的功能是基本的。然而,当前蓝光盘标准未规定描述小标题的功能。
前面的互动功能已经例如在DVD(数字多用途盘)标准中实现。在DVD视频中,在再现运动图象的同时,例如用遥控指挥器来调用菜单屏幕。通过选择在菜单屏幕上显示的按钮,用户可执行用于改变当前正再现场景的处理。DVD标准还规定用于显示小标题的功能。该功能允许用户从日语小标题切换到英语小标题,反之亦然,其中,所述日语和英语小标题事先已经准备。另外,DVD视频还具有多角度功能。
在DVD的情况下,菜单屏幕由固定的子图组成。当调用菜单屏幕时,以子图结合运动图象的方式显示菜单屏幕。日本专利特开平出版号HEI 10-308924描述一种用于结合子图数据和运动图象数据并在可记录DVD上记录所结合数据的结构。
接下来,简单描述根据相关技术参考文献的菜单屏幕实例。在用再现装置从DVD再现电影主要部分之前,显示菜单屏幕。通常,在菜单屏幕上布置多个按钮。每个按钮被分配预定的操作。当用户选择按钮并使所选按钮的操作被执行时,执行分配给所选按钮的操作。当用户选择按钮“电影主要部分”并且使所选按钮的操作被执行时,执行分配给所选按钮的操作。结果,从DVD再现电影主要部分。
用户用遥控指挥器(以下称作遥控器)操作分配给下、下、左和右方向的按键(方向键),以便选择在菜单屏幕上显示的一个按钮。随后,使用OK键,用户使分配给所选按钮的操作被执行。每个按钮具有三个状态,它们是正常状态(未选状态)、选择状态和执行状态。为了允许用户容易区分它们,它们具有不同的图象和颜色。通常,只有一个按钮处于选择状态或执行状态。
在DVD视频中,用两种称作子图和加亮区的数据显示每一个按钮。图1示出根据相关技术参考文献的DVD菜单屏幕300的实例。菜单屏幕300称作“标题菜单”。菜单屏幕300具有三个分别代表“电影主要部分播放”、“附带图象(bonus picture)”和“声音设置”的按钮301A、301B和301C。在图1所示实例中,“电影主要部分播放”按钮301A的外框的颜色已经从原始颜色改变。这表示“电影主要部分播放”按钮301A已经处于选择状态。
在此状态下,当用户操作遥控器上的方向键时,例如如图2A、图2B和图2C所示,他或她可使另一按钮处于选择状态。与图1所示情形相似,已选按钮的外框颜色与未被选择的其它按钮(未选按钮)的外框颜色不同。在图1所示状态下,当用户操作布置在遥控器上的OK按钮时,如图3所示,“电影主要部分播放”按钮301A的颜色改变为代表执行状态的颜色。随后,清除菜单屏幕300,并且再现电影主要部分。前面是DVD视频的按钮的基本操作。
图1所示菜单屏幕300由三种类型的数据组成,它们是背景图象310、子图311和加亮区312。背景图象310是预先记录在DVD上的内容主要部分的静止图象、运动图象等。
如图5所示,子图311具有一个位图图象、四个颜色信息(A0,B0,C0和D0)和坐标(X,Y)。位图图象用每个象素两位的信息表示。坐标(X,Y)代表子图311的显示开始位置。每个颜色信息A0,B0,C0和D0是由一组R(红)、G(绿)和B(蓝)数据组成的单色信息数据。每种颜色R、G和B具有八位信息。位图图象具有每个象素两位的信息。在两位中,从每个象素的前述四色信息(A0,B0,C0和D0)中选择一位。颜色信息还具有透明度数据。子图311可具有背景图象310透明的区域。子图311左上角的显示位置用相对于背景图象310的坐标(X,Y)代表。
子图311可具有代表显示开始时间和显示结束时间的信息以及使视觉效果如淡入和淡出作用到子图311上的命令。
在DVD视频中,不能同时显示多个位图图象。因而,其上布置图1所示多个按钮的菜单屏幕300用一个较大的位图图象显示,该位图图象具有三个如图4B所示的按钮图象。在图4B所示子图311的位图图象中,当按钮301A、301B和301C外的区域被指定为透明区域并且子图311与背景图象310结合时,在按钮301A、301B和301C显示区域的外部,背景图象310变为透明。
加亮区312是用于把子图311所用四种颜色改变为其它四种颜色的信息。如图5所示,对于颜色信息,加亮区312具有选择状态的颜色信息(A1,B1,C1和D1)和执行状态的颜色信息(A2,B2,C2和D2)。这些颜色信息是用八位的RGB代表的四色信息,每一个都与前面的子图311相同。
加亮区312具有颜色变化区域的一组坐标。颜色变化范围不局限于全部子图311,而可以是子图311中一部分四方形区域。子图311中由加亮区312改变颜色的四方形区域的数量与用户可以选择的按钮数量相对应。每个四方形区域的显示位置用其左上角和右下角位置的坐标(X,Y)代表。例如,与按钮301A相对应的加亮区312A的位置用坐标(X1,Y1)和(X1′,Y1′)代表。这分别应用到与按钮301B和301C相对应的加亮区312B和312C上。
例如,在加亮区312A中,背景图象310中由坐标(X1,Y1)和(X1′,Y1′)表示的区域的颜色信息(A0,B0,C0,D0)改变成指定为选择状态颜色的颜色信息(A1,B1,C1,D1)。此时,背景图象310的颜色信息A0改变为加亮区312A的颜色信息A1。同样,背景图象310的颜色信息B0改变为颜色信息B1。颜色信息C0改变为颜色信息C1。颜色信息D0改变为颜色信息D1。
接着,描述加亮区312A的颜色变化实例,该变化与结合图1、图2A、图2B、图2C和图3所述的菜单屏幕300上按钮301A的状态变化相对应。假设当按钮301A处于未选状态时,按钮301A的框架、前表面和字符分别以颜色信息B0、颜色信息C0和颜色信息D0显示。当按钮301A处于选择状态时,按钮301A的框架颜色B0改变为与加亮区312A选择状态相对应的颜色信息B1。此时,前表面颜色C0和字符颜色D0不变。随后,当按钮301A处于执行状态时,按钮301A的前表面颜色C0改变为颜色信息C1,其中,前表面颜色C0是选择状态的颜色。此时,作为选择状态颜色的框架颜色B1和字符颜色D0不变。
当正常再现DVD视频的图象时,显示与背景图象310相应的图象。当再现具有小标题的电影时,用于再现电影主要部分的背景图象310与用于显示小标题的子图311被结合并显示。
然而,子图311、代表选择状态的加亮区312和代表执行状态的加亮区312每一个最多只能使用四种颜色。因而,相关技术的问题是:不能显示具有许多颜色的子图。
由于加亮区312只改变子图311的颜色,因此,按钮的字符在选择状态和执行状态中不能改变。另外,不能实现改变按钮形状的效果。因而,相关技术不能实现增强的用户界面。
由于使用与子图311相同的机构显示小标题和按钮,因此,不能独立地控制和显示小标题和按钮。另外,不能执行用于设定和结合小标题和按钮的透明度并显示所结合图象的结合处理。
当调用菜单屏幕时,停止作为其背景再现的运动图象数据。因而,即使实现此互动功能,实现此功能的用户界面的灵活性也下降。
由于在所述标准中未规定用于产生与小标题显示和变化同步的效果声音的机构,因此,相关技术的问题是不能与小标题同步地产生效果声音。
由于所述标准未规定用于产生按钮效果声音的机构,其中,所述效果声音例如为当用户使按钮处于选择状态时产生的效果声音以及当用户在按钮的选择状态中操作OK键时产生的点击声,因此,相关技术的问题是难以实现增强的用户界面。
当实现具有高度灵活性的用户界面时,它在很大程度上受到按钮的绘图速度和更新速度以及对用户输入的响应的影响。因而,需要估计它们的图象解码器模型。
在前面,效果声音不是与在运动图象平面上显示的运动图象或静止图象同步再现的声音数据(例如,与运动图象配对记录的声音),而是与小标题和按钮的显示控制同步再现的音频数据。
发明内容
本发明的目的是提供允许对大容量只再现光盘实现具有高度灵活性的用户界面的再现装置、再现方法、再现程序和记录介质。
本发明的另一目的是提供允许对大容量只再现光盘实现增强用户界面的再现装置、再现方法、再现程序和记录介质。
为解决前面的问题,本发明的第一方面是一种用于再现内容数据的再现装置,包括:输入部件,该部件用于输入非实时流和实时流,非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕,实时流至少包含运动图象数据和小标题数据;代码存储部件,该部件用于储存由输入部件输入的程序代码;图象数据存储部件,该部件用于储存由输入部件输入的图象数据;第一结合部件,该部件用于结合解码的运动图象数据和解码的小标题数据,在解码的运动图象数据中,输入部件输入的运动图象数据被解码,并且,在解码的小标题数据中,输入部件输入的小标题数据被解码;以及第二结合部件,该部件根据储存在代码存储部件中的程序代码而结合储存在图象数据存储部件中的解码的图象数据与由第一结合部件结合的运动图象和小标题数据的结合数据。
本发明的第二方面是一种用于再现内容数据的再现方法,包括以下步骤:输入非实时流和实时流,非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕,实时流至少包含运动图象数据和小标题数据;在代码存储部件中储存在输入步骤中输入的程序代码;在图象数据存储部件中储存在输入步骤中输入的图象数据;结合解码的运动图象数据和解码的小标题数据,在解码的运动图象数据中,在输入步骤中输入的运动图象数据被解码,并且,在解码的小标题数据中,在输入步骤中输入的小标题数据被解码;以及根据储存在代码存储部件中的程序代码而结合储存在图象数据存储部件中的解码的图象数据与在第一结合步骤中结合的运动图象和小标题数据的结合数据。
本发明的第三方面是一种使计算机执行用于再现内容数据的再现方法的再现程序,该再现方法包括以下步骤:输入非实时流和实时流,非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕,实时流至少包含运动图象数据和小标题数据;在代码存储部件中储存在输入步骤中输入的程序代码;在图象数据存储部件中储存在输入步骤中输入的图象数据;结合解码的运动图象数据和解码的小标题数据,在解码的运动图象数据中,在输入步骤中输入的运动图象数据被解码,并且,在解码的小标题数据中,在输入步骤中输入的小标题数据被解码;以及根据储存在代码存储部件中的程序代码而结合储存在图象数据存储部件中的解码的图象数据与在第一结合步骤中结合的运动图象和小标题数据的结合数据。
本发明的第四方面是一种已经记录再现程序的记录介质,此再现程序使计算机执行用于再现内容数据的再现方法,该再现方法包括以下步骤:输入非实时流和实时流,非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕,实时流至少包含运动图象数据和小标题数据;在代码存储部件中储存在输入步骤中输入的程序代码;在图象数据存储部件中储存在输入步骤中输入的图象数据;结合解码的运动图象数据和解码的小标题数据,在解码的运动图象数据中,在输入步骤中输入的运动图象数据被解码,并且,在解码的小标题数据中,在输入步骤中输入的小标题数据被解码;以及根据储存在代码存储部件中的程序代码而结合储存在图象数据存储部件中的解码的图象数据与在第一结合步骤中结合的运动图象和小标题数据的结合数据。
本发明的第五方面是一种其上记录内容数据的圆盘形记录介质,其中,在记录介质上记录非实时流和实时流,非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕,实时流至少包含运动图象数据和小标题数据,以及,其中,根据程序代码而结合解码的图象数据与运动图象数据和小标题数据的结合数据,在解码的图象数据中,对已被再现并储存在图象数据存储部件中的图象数据进行解码,在后一结合数据中,运动图象数据已被再现和解码,小标题数据已被再现和解码。
如上所述,根据本发明的第一、第二、第三和第四方面,输入非实时流和实时流。非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕。实时流至少包含运动图象数据和小标题数据。在代码存储部件和图象数据存储部件中储存输入的程序代码和图象数据。解码的运动图象数据和解码的小标题数据被结合为运动图象数据和小标题数据的结合数据,在解码的运动图象数据中,输入的运动图象数据被解码,在解码的小标题数据中,输入的小标题数据被解码。根据储存在代码存储部件中的程序代码而结合储存在图象数据存储部件中的解码的图象数据与运动图象数据和小标题数据的结合数据。因而,当再现运动图象数据时,容易在不同的时间显示使用相同图象数据的操作屏幕。
根据本发明的第五方面,在记录介质上记录非实时流和实时流。非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕。实时流至少包含运动图象数据和小标题数据。根据程序代码而结合解码的图象数据与运动图象数据和小标题数据的结合数据,在解码的图象数据中,对已被再现并储存在图象数据存储部件中的图象数据进行解码,其中,运动图象数据已被再现和解码,小标题数据已被再现和解码。因而,当再现运动图象数据时,容易在不同的时间显示使用相同图象数据的操作屏幕。
附图说明
图1为示出根据相关技术参考文献的DVD菜单屏幕实例的示意图;图2A、图2B和图2C为示出其选择状态由遥控器操作改变的按钮状态的示意图;图3为示出以下状态的示意图:通过OK按钮的操作,按钮颜色改变为代表执行状态的颜色;图4A、图4B和图4C为示出根据相关技术参考文献的菜单屏幕的结构实例的示意图;图5为示出根据相关技术参考文献的子图的数据结构实例的示意图;图6为示出用于指定AV流文件再现顺序的机构的示意图;图7为示出剪辑AV流、剪辑信息、剪辑、播放项目和播放列表的关系的UML图;图8为描述用于从多个播放列表查询相同剪辑的方法的示意图;图9为描述记录在记录介质上的文件的管理结构的示意图;图10为示出描述文件“info.bdav”的结构实例的语法的示意图;图11为示出描述块UIAppInfoBDAV()的结构实例的语法的示意图;图13为示出描述文件“xxxx.rpls”和“yyyyy.vpls”的结构实例的语法的示意图;图14为示出描述块UIAppInfoPlayList()的结构实例的语法的示意图;图15为示出描述块PlayList()的结构实例的语法的示意图;图16为示出描述块PlayItem()的结构实例的语法的示意图;图17为描述桥接剪辑的示意图;图18为示出描述块PlayListMark()的结构实例的语法的示意图;图19为示出描述文件“zzzzz.clpi”的结构实例的语法的示意图;图20为示出用作根据本发明实施例的图象显示系统的平面结构实例的示意图;图21为示出运动图象平面、小标题平面和图形平面的分辨率和可显示颜色的实例的示意图;图22为示出结合运动图象平面、小标题平面和图形平面的结构实例的框图;图23为示出调色板的输入和输出数据的实例的示意图;图24为示出保留在调色板中的调色板表的实例的示意图;图25为示出在图形平面上显示的菜单屏幕的实例的示意图;图26为示出剧本的内部结构实例的示意图;图27为示出剧本的内部结构实例的示意图;图28为描述剧本结构种类的示意图;图29A、图29B和图29C为描述播放列表的结构种类的示意图;图30为描述标题和章节的示意图;图31为描述BD虚拟播放器模型的示意图;图32A、图32B和图32C为示出由BD虚拟播放器唯一定义的事件的实例的示意图;图33A、图33B、图33C、图33D、图33E、图33F、图33G和图33H为示出根据本发明实施例的为BD虚拟播放器定义的命令的实例的示意图;图34A、图34B、图34C、图34D、图34E、图34F、图34G、图34H、图34I和图34J为示出根据本发明实施例的为BD虚拟播放器定义的命令的实例的示意图;图35A和图35B为用剧本命令示出BD虚拟播放器的大概操作的流程图,其中,所述剧本命令把原始命令描述为叙述语言;图36A和图36B为描述根据播放列表的再现操作的流程图;图37A和图37B为示出剧本分级结构的实例的示意图;图38为示出记录在盘上的剧本结构的实例的示意图;图39为示出构成剧本所需的文件列表的示意图;图40为示出在剧本记录在盘上的情况下的目录结构实例的示意图;图41为示出脚本文件描述的更实用实例的示意图;图42为示出脚本文件描述的更实用实例的示意图;图43为示出HTML文件描述的更实用实例的示意图;图44为示出脚本文件描述的更实用实例的示意图;图45为描述记录在记录介质上的文件的管理结构的示意图;图46为示出描述剧本文件(scenario.hdmv)的结构实例的语法的示意图,其中,剧本文件描述剧本;图47为示出描述块Autoplay()的结构实例的语法的示意图;图48为示出描述块Scenario()的结构实例的语法的示意图;图49为示出描述块entrylist.data的结构实例的语法的示意图;图50为示出描述块AppInfo()的结构实例的语法的示意图;图51为示出描述块ScenarioEntry()的结构实例的语法的示意图;图52为示出描述文件xxxxx.mpls的结构实例的语法的示意图;图53为示出描述块PLCpntrolInfo()的结构实例的语法的示意图;图54为示出字段PL_Playback_type的值及其意义的示意图;图55示出字段PL_random_access_mode的值及其意义的示意图;图56为示出描述块PlayList()的结构实例的语法的示意图;图57为示出描述块PlayItem()的结构实例的语法的示意图;图58为示出字段PI_random_access_mode的值及其意义的示意图;图59为示出字段still_mode的值及其意义的示意图;图60为示出字段is_seamless_angle_change的值及其意义的示意图;图61为示出描述块SubPlayItem()的结构实例的语法的示意图;图62为示出字段is_repeat_flag的值及其意义的示意图;图63为示出在时基上主要路径和和子路径之间关系的示意图;图64为示出描述文件zzzzz.clpi的结构实例的语法的示意图;图65为示出描述块ClipInfo()的结构实例的语法的示意图;图66为示出字段application_type的值及其意义的示意图;图67为示出描述块SequenceInfo()的结构实例的语法的示意图;图68为示出描述块ProgramInfo()的结构实例的语法的示意图;图69为示出描述块StreamCodingInfo()的结构实例的语法的示意图;图70为示出描述块CPI()的结构实例的语法的示意图;图71为示出字段CPI_type的值及其意义的示意图;图72为示出描述块EP_map_for_one_stream_PID()的结构实例的语法的示意图;图73A、图73B和图73C为示出播放器解码器的结构实例的功能框图;图74为示出所显示按钮的状态变化实例的示意图;图75为描述对象种类的示意图;图76A、图76B和图76C为示出根据本发明实施例的图形对象的数据结构实例的示意图;图77为示出图形对象被划分并包含在PES数据包内的状态的示意图;图78为示出图形对象解码器模型的结构实例的功能框图,其中,所述解码器模型对图形对象进行解码;图79A、图79B、图79C和图79D为示出存储数据量的实例的示意图,其中,所述数据量在图形对象输入缓冲器、PNG解码器、对象缓冲器和平面缓冲器中是变化的;图80为描述平面的数据传输速度的示意图;图81A和图81B为描述窗口定义的示意图;图82A和图82B为描述窗口定义的示意图;图83为示出描述图形对象的结构实例的语法的示意图;图84为示出描述块GlobalPaletteTable()的结构实例的语法的示意图;图85A和图85B为示出命令组DispCmds(i)的显示控制命令列表的实例的示意图;图86A和图86B示出描述命令set_display_box(x1,y1,x2,x2)和命令set_clipping_box(a1,b1,a2,b2)的示意图;图87为描述坐标轴的定义的示意图;图88为描述命令组DispCmds(i)以及所显示图形对象的变化的实例的示意图;图89A、图89B、图89C和图89D为示出逐渐显示小标题的淡入实例的示意图;图90A和图90B为示出作为小标题的PNG图象在平面上运动的实例的示意图;图91A和图91B为示出所显示小标题卷动的实例的示意图;图92A和图92B为示出指定代表一部分PNG图象的框架的实例的示意图,其中,所述框架在PNG图象上运动,并且其位置在平面上运动;图93为示出以下图形对象的数据结构实例的示意图,在所述图形对象中,声音数据分配给按钮图象;图94为示出以下数据的管理结构实例的示意图,在所述数据中,未在图形对象中布置声音数据;图95为示出在图形对象中布置声音数据的方法的实例的示意图;以及,图96为更实用地描述在图形对象中未布置声音数据的情况下声音数据再现的示意图。
具体实施方式
下面,描述本发明的实施例。根据本发明的实施例,基于蓝光盘标准(蓝光盘可重写格式版本1.0),而实现只再现盘所需的功能如互动功能和多角度功能,其中,该标准是用于记录和再现数据的标准。
本说明书具有以下结构。
1.BD-RE格式的概述
2.BD-ROM格式的概述
2-1.关于平面
2-2.菜单屏幕
2-3.关于剧本
2-4.剧本的种类
2-5.关于虚拟播放器模型
2-6.关于命令
2-7.关于命令的执行
2-8.关于语法
2-9.解码器模型
2-10.关于按钮
2-11.关于图形的传输速度
2-12.关于图形对象
2-13.关于效果声音
2-14.其它
1.BD-RE格式的概述
首先,为便于理解本发明,描述在“蓝光盘可重写格式版本1.0第3部分音频视频规范”中规定的管理结构,该管理结构用于预先记录在蓝光盘上的内容即AV(音频/视频)数据。在以下描述中,管理结构称作BDAV格式。
已根据编码系统如MPEG(运动图象专家组)视频或MPEG音频编码并根据MPEG-2系统多路复用的位流称作剪辑AV流(或简单AV流)。通过在用于蓝光盘的“蓝光盘可重写格式版本1.0第2部分”中所定义的文件系统,剪辑AV流作为文件而记录在盘上。此文件称作剪辑AV流文件(或简单AV流)。
剪辑AV流文件是文件系统上的管理单元。因而,不能说剪辑AV流文件是用户容易理解的管理单元。从用户方便的观点出发,把以下信息记录为数据库是必需的,所述信息为:用于结合已被划分成多个剪辑AV流文件的视频内容并再现结合视频内容所需的信息;只再现一部分剪辑AV流文件所需的信息;用于平滑地执行特殊再现和搜索再现所需的信息;等等。作为蓝光盘标准的“蓝光盘可重写格式1.0版第3部分”规定此数据库。
图6示意性地示出用于指定全部AV流文件中的一部分、仅排列其所希望部分、并再现排列部分的机构。在图6中,播放列表(PlayList)导致指定部分或全部AV流文件,并且只有其所希望的部分被再现。当用户再现内容时,他或她以播放列表为单位选择它。播放列表是一个用户隐含地期望连续再现内容的视频/音频单元。
最简单的播放列表结构由一个AV流文件组成,该AV流文件从记录内容开始,直到停止记录为止。除非编辑AV流文件,否则它变为一个播放列表。
播放列表由表示将被再现的AV流文件的信息组成,并且设置指定AV流文件的再现开始位置和再现停止位置的再现起点和再现停止点。一对再现起点信息和再现停止点信息称作播放项目(PlayItem)。播放列表由一组播放项目组成。当再现播放项目时,再现从播放项目引用的一部分AV流文件。
如上所述,剪辑AV流是视频数据和音频数据已按MPEG2 TS(传输流)格式多路复用的位流。与剪辑AV流有关的信息作为剪辑信息而记录到文件中。
一组剪辑AV流文件和具有相应剪辑信息的剪辑信息文件被处理为一个对象,并且称作剪辑。剪辑是一个由剪辑AV流和剪辑信息组成的对象。
文件一般处理为字节的序列。剪辑AV流文件的内容在时基上扩展。在时基上有规律地指定剪辑中的入口点。当给出对预定剪辑的访问点的印时戳时,剪辑信息文件可用于寻找地址信息,从该地址读取剪辑AV流文件中的数据。
用卷信息管理记录在一张盘上的所有播放列表和剪辑。
图7示出表示前述剪辑AV流、剪辑信息(流属性)、剪辑、播放项目和播放列表之间关系的UML(标准建模语言)图。一个播放列表与一个或多个播放项目关联。一个播放项目与一个剪辑关联。一个剪辑可与多个起点和/或终点不同的播放项目关联。从一个剪辑引用一个剪辑AV流文件。从一个剪辑引用一个剪辑信息文件。一个剪辑AV流文件与一个剪辑信息文件以一对一的关系相关联。采用此种定义的结构,可通过只再现任何部分,不必改变剪辑AV流文件,就可非破坏性地指定再现顺序。
如图8所示,可从多个播放列表引用相同的剪辑。在图8所示实例中,从两个播放列表2和3引用剪辑1。在图8中,剪辑1的水平方向代表时基。播放列表2引用剪辑1的区域a至f,该区域包括商业消息区域b和c以及场景e。播放列表3引用剪辑1的区域d至g,该区域包括场景e。当指定播放列表2时,可再现剪辑1的区域a至f。当指定播放列表3时,可再现剪辑1的区域d至g。
接着,结合图9来描述记录在记录介质上的文件管理结构,该结构在“蓝光盘可重写格式1.0版第3部分”中规定。文件以目录结构分级管理。在记录介质上创建一个目录(图9所示实例中的根目录)。在该目录下,通过一个记录和再现系统来管理文件。
在根目录下,放置目录BDAV。如图9所示,可放置多个目录,如目录BDAV、BDAV1、BDAV2、...、BDAVn。在以下描述中,多个目录BDAV、BDAV1、BDAV2、...和BDAVn用目录BDAV代表。只描述代表性的目录BDAV。
在目录BDAV下,放置以下六种类型的文件。
(1)info.bdav
(2)menu.tidx,mark.tidx
(3)menu.tdt1,menu.tdt2,mark.tdt1,mark.tdt2
(4)#####.rpls,#####.vpls
(5)%%%%%.clpi
(6)*****.m2ts
在类型(4)的文件“#####.rpls”和“#####.vpls”中,“#####”代表任何数字。在类型(5)的文件“%%%%%.clpi”中,“%%%%%”代表任何数字。在类型(6)的文件“*****.m2ts”中,“*****”代表文件“*****.m2ts”与文件“%%%%%.clpi”以一对一关系对应的数字。数字“*****”可与数字“%%%%%”相同。
类型(1)的文件“info.bdav”是具有全部目录BDAV信息的文件。类型(2)的文件“menu.tidx”和“mark.tidx”是具有缩略图信息的文件。类型(3)的文件“menu.tdt1”、“menu.tdt2”、“mark.tdt1”和“mark.tdt2”是具有缩略图的文件。这些文件的扩展名“tdt1”和“tdt2”代表在这些文件中的缩略图的数据是否已被加密。
类型(4)的文件“#####.rpls”和“#####.vpls”是具有播放列表信息的文件。文件“#####.rpls”和“#####.vpls”放在目录PLAYLIST之下,目录PLAYLIST则放在目录BDAV之下。
类型(5)的文件“%%%%%.clpi”是具有剪辑信息的文件。文件“%%%%%.CLP”放在目录CLIPINF之下,目录CLIPINF则放在目录BDAV之下。类型(6)的文件“*****.m2ts”是具有剪辑AV流的剪辑AV流文件。剪辑AV流文件与文件名数字为“*****”的一个剪辑信息文件“%%%%%.clpi”相关联。文件“*****.m2ts”放在目录STREAM之下,目录STREAM则放在目录BDAV之下。
下面,详细描述每个文件。类型(1)的文件“info.bdav”只是一个放在目录BDAV之下的文件。图10示出描述文件“info.bdav”的结构实例的语法。该语法用C语言的叙述方法进行表述,其中,C语言用作计算机的程序叙述语言。C语言应用于表示其它语法的附图中。
在图10中,文件“info.bdav”划分为与功能相对应的块。字段type_indicator描述字符串“BDAV”,字符串“BDAV”表示该文件是“info.bdav”。字段version_number代表文件“info.bdav”的版本。块UIAppInfoBDAV()描述与放在目录BDAV之下的信息有关的信息。块TableOfPlayList()描述与播放列表排列有关的信息。块MakersPrivateData()描述记录和再现装置的制作者的唯一信息。
在文件“info.bdav”的开头描述代表各个块起点的地址。例如,字段TableOfPlayLists_Start_address用文件中的相对字节数代表块“TableOfPlayList()”的起始位置。
图11示出描述块UIAppInfoBDAV()的结构实例的语法。字段length表示就在字段length之后直到块UIAppInfoBDAV()结束之前的字节长度。字段BDAV_character_set代表在块UIAppInfoBDAV()的字段BDAV_name中描述的字符序列的字符集。对于字符集,可选择ASCII、或Unicode等。
标记BDAV_protect_flag描述是否无条件地允许用户观看放在目录BDAV下的内容。当标记已经设定为“1”并且用户已输入正确的PIN(个人标识号)时,允许他或她观看放在目录BDAV下的内容。相反,当标记BDAV_protect_flag已经设定为“0”时,即使用户不输入他或她的PIN,也允许他或她观看放在目录BDAV下的内容。
在字段PIN中描述个人标识号PIN。个人标识号PIN例如由四位数字组成,每个数字位的范围从0到9。个人标识号PIN代表在再现控制有效时需要的个人标识号。个人标识号PIN的数字例如根据ISO(国际标准化组织)/IEC(国际电工技术委员会)646标准进行编码。
利用在块UIAppInfoBDAV()中描述的前述信息来规定对目录BDAV的再现限制。如后面所描述的,用在文件“#####.rpls”和“#####.vpls”中所述块UIAppInfoPlayList()内定义的标记playback_control_flag来规定对每个播放列表的再现限制。
在实例中,为了恢复再现放在目录BDAV下的内容,可使用恢复功能。恢复功能允许以指定的优先级再现内容的播放列表。假设在用户想从最后的停止位置恢复再现内容时使用恢复功能。
在图11中,标记resume_valid_flag描述恢复功能为有效/无效。当该标记的值设定为“0”时,恢复功能无效。当该标记的值设定为“1”时,恢复功能有效。此时,字段resume_PlayList_file_name所指定的播放列表被处理成优先再现的播放列表。
字段ref_to_menu_thumbnail_index是描述缩略图号的区域,该缩略图号标识代表目录BDAV的缩略图。在蓝光盘标准中,代表目录BDAV的静止图象称作菜单缩略图。具有在字段ref_to_menu_thumbnail_index中描述的索引thumbnail_index的缩略图是目录BDAV的菜单缩略图。
字段BDAV_name_length代表在字段BDAV_name中描述的目录BDAV的名称的字节长度。在字段BDAV_name_length中表示的字节长度对于字段BDAV_name的字符串是有效的,其中,该字符串表示目录BDAV的名称。在由字段BDAV_name_length代表的有效字符串之后的其余字节序列可具有任意值。
图12示出描述块TableOfPlayLists()的结构实例的语法。字段number_of_PlayLists代表放在目录BDAV下的播放列表的数量。播放列表的数量称作循环变量。在字段number_of_PlayLists之后是“for”语句循环。“for”语句描述由字段PlayList_file_name代表的播放列表。在播放列表表格显示屏等上显示播放列表。用字段PlayList_file_name中的文件名如“#####.rpls”和“#####.vpls”来指定播放列表。
如上所述,文件“#####.rpls”和“#####.vpls”放在目录PLAYLIST之下。这些文件以一对一关系与各个播放列表相对应。
图13示出描述文件“xxxx.rpls”和“yyyyy.vpls”的结构实例的语法。在图13中,文件“xxxx.rpls”和“yyyyy.vpls”每一个都具有与功能信息相应的块。字段type_indicator描述代表文件的字符串。字段version_number代表文件的版本。
块UIAppInfoPlayList()描述播放列表的属性信息。块PlayList()描述与组成该播放列表的播放项目有关的信息。块PlayListMark()描述与增加到播放列表上的标志有关的信息。块MakersPrivateData()描述已经记录播放列表文件的装置的制作者唯一信息。字段PlayList_start_adress、字段PlayListMark_start_adress和MakersPrivateData_start_adress放在每个文件“#####.rpls”和“#####.vpls”的开头。这些字段把相应块的起始地址描述为32位的地址信息。
由于在每个文件“#####.rpls”和“#####.vpls”的开头描述每个块的起始地址,因此,可在每个块之前和/或在每个块之后放置任意长度的数据padding_word。然而,块UIAppInfoPlayList()的开始位置固定在从每个文件“#####.rpls”和“#####.vpls”开始的第320字节处,其中,块UIAppInfoPlayList()是每个文件“#####.rpls”和“#####.vpls”的第一块。
图14示出描述块UIAppInfoPlayList()的结构实例的语法。块UIAppInfoPlayList()描述与播放列表有关的各种类型的属性信息。属性信息不直接用于再现播放列表。字段PlayList_character_set描述与播放列表有关的字符串信息的字符集。
标记playback_control_flag描述是否根据个人标识号PIN而限制信息的显示和播放列表的再现。当标记playback_control_flag的值例如为“1”时,除非用户输入正确的个人标识号PIN,否则不能显示诸如播放列表的缩略图信息,也不能再现该播放列表。标记write_protect_flag是删除禁止标记。必须构造用户界面,从而当标记write_protect_flag的值为“1”时,用户不能轻易地删除播放列表。标记is_played_flag描述播放列表已被再现。标记is_edited_flag描述播放列表已被编辑。
字段time_zone表示记录播放列表的时区。字段record_time_and_date表示记录播放列表时的日期和时间。字段PlayList_duration表示播放列表的再现持续时间。
字段maker_ID和maker_model_code描述用于识别最近更新播放列表的记录装置的制造者和模型的信息。字段maker_ID和maker_model_code例如为数字。字段channel_number表示所记录的剪辑AV流的频道号。字段channel_name表示频道名。字段channel_name_length表示在字段channel_name中描述的频道名的长度。在字段channel_name中,具有字段channel_name_length中所述长度的字符串是有效的。字段PlayList_name表示具有在字段PlayList_name_length中所述值的有效长度的播放列表名。字段PlayList_detail描述具有在字段PlayList_detail_length中所述值的有效长度的播放列表的详细信息。
图15示出描述块PlayList()的结构实例的语法。字段length描述就在字段length之后直到块PlayList()结束之前的字节长度。字段PL_CPI_type描述播放列表的CPI(特征点信息)的类型。字段number_of_PlayItems描述组成播放列表的播放项目的数量。字段number_of_SubPlayItems描述用于添加到播放列表中的后记录音频(子播放项目)的播放项目的数量。简而言之,当播放列表满足预定的条件时,播放列表可具有子播放项目。
块PlayItem()描述播放项目的信息。块SubPlayItem()描述子播放项目的信息。
图16示出描述块PlayItem()的结构实例的语法。字段Clip_Information_file_name描述剪辑信息文件(即,具有扩展名clpi的文件)的文件名的字符串,其中,剪辑信息文件与播放项目所引用的剪辑具有一对一的关系。剪辑信息文件是具有扩展名“clpi”的文件。
字段Clip_codec_identifier描述播放项目所引用的剪辑的编码系统。在此实例中,字段Clip_codec_identifier固定为值“M2TS”。字段connection_condition描述此播放项目如何连接到下一播放项目的信息。字段connection_condition描述是否可无缝地再现播放项目。
字段ref_to_STC_id指定播放项目所引用的剪辑的序列STC_sequence。序列STC_sequence是蓝光盘标准的独特结构。该结构表示PCR(程序时钟基准)在时基上连续的范围,其中,PCR是MPEG2TS(传输流)的基准。剪辑中唯一的数字STC_id分配给序列STC_sequence。在序列STC_sequence中,由于可定义连续的时基,因此可唯一地指定播放项目的开始时间和结束时间。每个播放项目的起点和终点应该存在于相同的序列STC_sequence中。字段ref_to_STC_id描述具有数字STC_id的序列STC_sequenee。
字段IN_time和OUT_time分别描述在序列STC_sequence中播放项目的起点和终点的印时戳pts(presentation_time_stamp)。
块BridgeSequenceInfo()描述与桥接剪辑(Bridge_Clip)有关的信息。如图17所示,桥接剪辑是在实现无缝再现播放项目的功能时创造的位流。通过在前一播放项目和当前播放项目的边界上再现桥接剪辑,而不再现原始位流,两个播放项目可无缝再现。
图18示出描述块PlayListMark()的结构实例的语法。块PlayListMark()具有描述标志信息的数据结构。标志是描述播放列表的时间的结构。利用标志,可实现用于设置播放列表搜索点的功能、以及用于把播放列表划分为章节的功能等等。图象在图形平面(在后面描述)上的显示开始和显示结束的计时可用标志来指定。
字段length描述就在字段length之后直到块PlayListMark()结束之前的字节长度。字段number_of_PlayList_marks描述播放列表中标志的数量。一个“for”语句循环表示一个标志的信息。标记mark_invalid_flag描述该标志是否有效。当标记mark_invalid_flag的值为“0”时,它描述该标志有效。当标记mark_invalid_flag的值为“1”时,它描述:尽管该标志的信息存在于数据库中,但该标志是对用户透明的无效标记。
字段mark_type描述标志的类型。有以下标志:表示作为播放列表缩略图(代表性图象)的图象的位置的标志;表示再现恢复位置的恢复标志;表示搜索点的章节标志;表示将被跳过和再现的区域的跳过标志;表示图形图象的读取开始时间的标志;表示图形图象的显示开始时间的标志;表示图形图象的显示停止时间的标志;等等。
字段mark_name_length表示字段mark_name(在后面描述)的数据长度。字段maker_ID描述创建标志的记录装置的制造者。字段maker_ID用于标识制造者的专有标志。字段ref_to_PlayItem_id描述哪个播放项目具有标志所指定的时间。字段mark_time_stamp表示标志所指定的时间。
字段entry_ES_PID描述增加标志的基本流(即,标志是否增加到图象数据和/或声音数据被编码的流)。字段ref_to_menu_thumbnail_index和字段ref_to_mark_thumbnail_index描述在视觉上表示标志的缩略图。缩略图例如为在标志所指定时间提取出的静止图象。
当标志在时基上具有长度时,使用字段duration。当使用跳过标志时,字段duration描述执行跳过的持续时间。
字段makers_information是描述制造者专有信息的区域。字段mark_name是用于描述分配给标志的名称的区域。在前面的字段mark_name_length中描述标志的大小。
图19示出描述文件“%%%%%.clpi”的结构实例的语法。如上所述,文件“%%%%%.clpi”放在目录CLIPINF之下。为每个AV流文件(文件“*****.m2ts”)创建文件“%%%%%.clpi”。文件“%%%%%.clpi”具有与功能信息相对应的块。字段type_indicator描述代表文件的字符串。字段version_number描述文件的版本。
块ClipInfo()描述与剪辑有关的信息。块SequenceInfo()描述与PCR的间断点有关的信息,其中,PCR表示MPEG2系统的传输流的时间基准。块ProgramInfo()描述与MPEG2系统的程序有关的信息。块CPI()描述与表示AV流中特征部分的特征点信息CPI有关的信息。块ClipMark()描述表示增加到剪辑上的搜索索引点以及商业起点和/或终点的标志信息。块MakersPrivateData()描述记录装置制造者的专有信息。
表示文件“%%%%%.clpi”中每个块开始的地址信息描述为字段SequenceInfo_start_address、ProgramInfo_start_address、CPI_start_address、ClipMark_start_address和MakersPrivateData_start_address。
由于BDAV格式具有前述的数据结构,因此,利用由播放项目组成的播放列表,可以用户认可的再现单元来管理记录在盘上的内容,其中,所述播放项目描述剪辑AV流中将被再现部分的起点和终点的集合。
2.BD-ROM格式的概述
接下来,描述本发明的实施例。根据本发明,为只再现盘(BD-ROM:蓝光盘-只读存储器)格式扩充前述的BDAV格式。扩充BDAV格式称作BDMV格式。
下面,描述实现用于盘中内容的菜单屏幕的平面结构。增加允许内容制造商一方指定播放列表再现顺序的剧本结构。对于剧本结构,描述实现作为只再现盘特征的功能如静止(暂停)、随机混合再现、多角度等所必需的数据以及用于储存此数据的方法。
2-1.关于平面
根据本发明的实施例,使用图20所示的平面结构。在最后侧(底部)显示运动图象平面10。运动图象平面10处理由播放列表所指定的图象(主要是运动图象数据)。在运动图象平面10上方显示小标题平面11。小标题平面11处理在再现运动图象的同时所显示的小标题数据。在最前面显示图形平面12。图形平面12处理用于菜单屏幕的字符数据以及用于按钮的图形数据如位图数据。一个显示屏幕由这三个平面组成。
在本发明实施例与常规DVD视频之间的差别是:用于小标题、菜单屏幕、按钮等的子图分离为小标题平面11和图形平面12,从而,独立控制小标题和按钮。在常规DVD视频中,诸如菜单屏幕和按钮的图形以及小标题由相同的机构控制。它们在相同的平面上显示。可同时显示的位图图象的数量限制为一。因而,在DVD视频中,不能同时显示多个位图图象。相反,根据本发明,由于分别为小标题和图形单独布置小标题平面11和图形平面12,因此,可解决DVD的前述问题。
可以认为,小标题平面11和图形平面12是“蓝光盘可重写格式1.0版第3部分”的扩充部分。
可单独显示运动图象平面10、小标题平面11和图形平面12。运动图象平面10、小标题平面11和图形平面12具有如图21所示的分辨率和显示颜色。运动图象平面10具有1920象素×1080行的分辨率、每个象素16位的数据长度、YCbCr(4:2:2)的颜色系统,这里,Y代表亮度信号,并且Cb和Cr代表色差信号。YCbCr(4:2:2)是具有每个象素8位的亮度信号Y和每个信号8位的色差信号Cb和Cr的颜色系统。利用色差信号Cb和Cr的两个水平象素,组成一个颜色数据的数据。
小标题平面11具有1920象素×1080行的分辨率、每个象素8位的取样深度、以及使用256色调色板的8位颜色变换地址的颜色系统。
图形平面12具有1920象素×1080行的分辨率、每象素8位的取样深度、以及使用256色调色板的8位颜色变换地址的颜色系统。
在前面描述中,小标题平面11和图形平面12具有使用256色调色板的8位颜色变换地址的颜色系统。然而,小标题平面11和图形平面12不局限于这些实例。可通过改变取样深度和增加调色板的颜色数量而增加颜色的数量。当取样深度为12位时,可与调色板一起使用的颜色数量为4096。当取样深度为24位时,可以使用YCbCr(4:4:4)和RGB(4:4:4),其中,每个象素都具有颜色信息。
图形平面12和小标题平面11可以在256级上进行α混合。当图形平面12和小标题平面11与另一平面结合时,透明度可设置为256级。可对每个象素设置透明度。在以下描述中,透明度α在(0≤α≤1)的范围内表示,在这,透明度α=0表示完全透明;透明度=1表示完全不透明。
小标题平面11处理例如PNG(可移植网络图形)格式的图象数据。同样,图形平面12可处理PNG格式的图象数据。在PNG格式中,一个象素的取样深度在从1位到16位的范围内。当取样深度为8位或16位时,可增加α频道,即每个象素分量的透明度信息(称作α数据)。当取样深度为8位时,透明度可在256级内指定。利用α频道的透明度信息,执行α混合。可使用最大256色的调色板图象。可用索引号来表示所准备调色板的组元(索引)。
小标题平面11和图形平面12所处理的图象数据不局限于PNG格式。可替换地,可以使用:例如根据JPEG系统进行压缩编码的图象数据;已进行扫描宽度压缩的图象数据;或未进行压缩编码的位图数据。
图22示出参照图20和图21结合三个平面的结构实例。运动图象平面10的运动图象数据提供给422/444转换电路20。422/444转换电路20把运动图象数据的颜色系统从YCbCr(4:2:2)转换为YCbCr(4:4:4),并且把转换数据输入到乘法器21中。可在422/444转换电路20和乘法器21之间布置分辨率转换电路,以便转换运动图象数据的分辨率。
小标题平面11的图象数据输入到调色板22中。调色板22输出RGB(4:4:4)的图象数据。当对图象数据指定α混合的透明度时,从调色板22输出指定的透明度α1(0≤α1≤1)。
图23示出调色板22的输入/输出数据的实例。调色板22保留调色板信息作为例如与PNG格式文件相应的表格。索引号称作从调色板22输入的8位数据的图象数据的地址。根据索引号,输出每一个都由8位数据组成的RGB(4:4:4)数据。另外,从调色板22获得表示透明度的α频道数据。
图24示出调色板22所具有的调色板表的实例。256色索引值[0x00]至[0xFF](这里,[0x]代表十六进制记数法)被分配三原色值R、G和B以及透明度α,其中,每个透明度α由8位表示。调色板22根据输入的PNG格式图象数据而查询调色板表,并且根据图象数据指定的索引值而输出每个象素的R、G和B颜色数据(RGB数据)和8位透明度α。调色板26也具有与调色板22相似的调色板表。
从调色板22输出的RGB数据提供给RGB/YCbCr转换电路29。RGB/YCbCr转换电路29把RGB数据转换为亮度信号Y以及色差信号Cb和Cr(以下,它们一起称作YCbCr数据),其中,每个色差信号都是8位。这是因为所述平面的数据应该以共同的数据格式结合。数据统一为YCbCr数据,它是运动图象数据的数据格式。
从RGB/YCbCr转换电路29输出的YCbCr数据和透明度数据α1输入到乘法器23。可在RGB/YCbCr转换电路29和乘法器23之间布置分辨率转换电路,以便转换YCbCr数据的分辨率。乘法器23使输入的YCbCr数据乘以透明度数据α1。相乘的结果输入到加法器24的一个输入端。乘法器23使YCbCr数据的每一个亮度信号Y和色差信号Cb和Cr乘以透明度数据α1。透明度数据α1的补数(1-α1)提供给乘法器21。
乘法器21使从422/444转换电路20输入的运动图象数据乘以透明度数据α1的补数(1-α1)。相乘的结果输入到加法器24的另一个输入端。加法器24对乘法器21和乘法器23的相乘结果进行相加。因而,结合运动图象平面10和小标题平面11。加法器24的相加结果输入到乘法器25。
与小标题平面11相同,从调色板表26输出RGB(4:4:4)数据,作为图形平面12的图象数据,并且输入到RGB/YCbCr转换电路27中。当图形平面12的图象数据的颜色系统是RGB(4:4:4)时,它转换为YCbCr(4:4:4),并且从RGB/YCbCr转换电路27输出。从RGB/YCbCr转换电路27输出的YCbCr数据输入到乘法器28。可在RGB/YCbCr转换电路27和乘法器28之间布置分辨率转换电路,以便转换YCbCr数据的分辨率。
当α混合的透明度已被指定为调色板26的索引值时,从调色板26输出指定的透明度α2(0≤α2≤1)。透明度数据α2提供给乘法器28。乘法器28使从RGB/YCbCr转换电路27输入的YCbCr数据的每一个亮度信号Y和色差信号Cb和Cr乘以透明度数据α2。乘法器28的相乘结果输入到加法器29的一个输入端。透明度数据α2的补数(1-α2)提供给乘法器25。
乘法器25使加法器24的相加结果乘以透明度数据α2的补数(1-α2)。乘法器25的相乘结果输入到加法器27的另一个输入端。加法器27对乘法器25和乘法器28的相乘结果进行相加。从而,把图形平面12与运动图象平面10和小标题平面11的结合结果结合在一起。
当小标题平面11和图形平面12的无图象区域的透明度α指定为0(α=0)时,在这些平面11和12下方的平面变为透明。结果,运动图象平面10上的运动图象数据可显示为小标题平面11和图形平面12的背景。
图22所示结构可通过硬件或软件来实现。
在前面描述中,图形平面12具有1920象素×1080行的分辨率以及利用256色调色板的8位颜色变换地址颜色系统。然而,应该指出,图形平面12的分辨率和颜色数量不局限于前述实例。
例如,图形平面12可具有960象素×540行的分辨率和24位的取样深度,其中,每个象素对于RGB的每种颜色具有8位的颜色信息,并且,每个象素具有8位α数据。在此情况下,可用颜色数量变得比前面的256色大很多。结果,图象的丰富性增加。由于象素数量减少,因此,平面的重写速度不减小。当图形平面12用于自然图象和高速动画时,它是有效的。
在此实例中,象素数量是前面实例1920象素×1080行的1/4。另一方面,由于每个象素的数据量增加4倍,从8位到32位,图形平面12总的数据量不改变。因而,通过改变使用帧存储器的方法,不必使用附加存储器就可容易实现此实例。
另外,由于对RGB的每种颜色分配8位颜色信息,因此,可显示的颜色数量是足够的。因而,可省略图22所示调色板22。图形平面12上的图象数据直接输入到RGB/YCbCr转换电路27中。不通过RGB/YCbCr转换电路27,就可提取α-数据α2,并提供给乘法器28。
相反,与图形平面12结合的运动图象平面10和小标题平面11中每一个的分辨率是1920象素×1080行。当实际显示图象时,其分辨率为1/4的图形平面12的一个象素对运动图象平面10或小标题平面11上的4个象素2象素×2行进行重复显示。在调整可见分辨率之后,结合运动图象平面10和小标题平面11。
利用指定的前述平面,可显示只再现盘标准所需的菜单屏幕和按钮。当在菜单屏幕上选择按钮时,再现与该按钮相应的播放列表。此时,与播放列表链接有关的信息应该已经记录在盘上。菜单屏幕将在后面的第2-2节中描述。定义播放列表链接的剧本将在第2-3和2-4节中描述。
2-2关于菜单屏幕
可在图形平面12上显示提示用户执行操作的屏幕,如菜单屏幕。图25示出在图形平面12上显示的菜单屏幕60的实例。在菜单屏幕60上,在特定位置显示字符和图象。利用所述字符和图象,可布置允许用户选择新操作的“链接”和“按钮”。
“链接”描述利用字符串或图象数据对预定文件的访问方法。当用户例如用定位器件在屏幕上指定字符串或图象数据时,他或她可根据用字符串或图象数据指定的访问方法而访问预定文件。“按钮”具有三种类型的图象数据,它们代表正常状态、选择状态以及用于“链接”的按下状态。当用户指定一个按钮图象时,图象数据根据他或她已操作的状态而改变,从而,他或她容易识别按钮的当前状态。
当用户指定“链接”或“按钮”时,他或她用鼠标在屏幕上移动光标,并在“链接”的字符串或图象上或在“按钮”的图象上点击鼠标按钮(按几次鼠标按钮)。可用除鼠标之外的其它定点器件来执行相同的操作。可替换地,利用遥控器或键盘的按键操作,用户可指定“链接”或“按钮”。此时,用户用预定的按键如方向键来选择他或她所希望的“链接”或“按钮”,并且用OK键等指定所选的“链接”或“按钮”。
在图25所示实例中,在显示于图形平面12上的菜单屏幕60的上部显示作为图象数据的标题61。在标题61之后是作为链接的选项62A、62B、62C和62D。当用户例如通过遥控器的按键操作而选择并指定选项62A、62B、62C和62D中的一个时,访问链接到所指定选项的文件。
在菜单屏幕60的更下位置上,显示按钮64和65。利用按钮64和65,可显示小标题,并且可例如从英语和日语中选择选择输出声音的语言。当以前述方式操作按钮64和65时,访问用于显示它们的设置屏幕的文件,并且显示预定的屏幕。
在菜单屏幕60的左下部分,显示描述项目选择方法的字符串63。在图形平面12上显示字符串63。
为了显示如图25所示的菜单屏幕60,需要任何用于描述屏幕显示方法和链接信息等的叙述语言。尽管对于描述蓝光盘的菜单屏幕有许多类型的叙述语言,但只解释两种类型的叙述语言。
(1)用于小标题和按钮的原始显示控制命令增加到命令系统上的叙述语言,其中,在所述命令系统中,DVD视频导航命令被改变和扩充。此叙述语言的命令称作原始命令。
(2)HTML(超文本链接标示语言),它是广泛用于因特网的WWW(万维网)和ECMA脚本中的叙述语言,其中,ECMA脚本是与HTML具有高度亲合力的脚本语言。
2-3关于剧本
在前述蓝光盘的菜单屏幕60上,利用图象数据、字符串、按钮等显示表格,如播放列表。期望的是:当指定具体播放列表时,从盘中读取并再现指定的播放列表。
在图25所示实例中,在菜单屏幕60上显示播放列表的表格。实际上,菜单屏幕60的图象和声音以及根据菜单屏幕60上选择项产生的图象和声音由多个播放列表组成。当组成一个菜单项的多个播放列表相关联时,可以实现划分故事的机构。当故事被划分时,可以实现以下功能:使故事内容根据用户选择而改变的多故事功能;根据播放器所指定语言而自动再现正确语言的自动语言再现功能;以及使场景根据用户的年龄而改变的父母功能。
尽管这些功能对于记录的盘特别有效,但是,它们未在当前的蓝光盘标准中规定,该标准的主要目的是记录/再现电视节目。
在以下描述中,排列多个播放列表的结构称作剧本。图26示出使用原始命令的剧本70的内部结构实例。剧本70具有多个播放列表73A-73M。另外,剧本70具有两个用图形平面12显示分支选择屏幕的部分(屏幕80A和80B)。屏幕80A具有用于显示分支选择屏幕的图形数据74A和播放列表73C。同样,屏幕80B具有用于显示分支选择屏幕的图形数据74B和播放列表73J。
剧本指定播放列表和显示时刻的安排,在所述显示时刻上,在图形平面12上显示播放列表。播放列表在图形平面12上的显示时刻可用增加到在图形平面上显示的图象中的显示控制命令来指定。
在图26所示实例中,菜单屏幕60与剧本70的屏幕80A相对应。菜单屏幕60上的选项(如选项62A)由图形74A组成。当在菜单屏幕60上指定选项62A时,再现与该选项对应的播放列表73D。
在图26所示剧本70中,当把盘装入到播放器中时,再现播放列表73A。在再现播放列表73A之后,再现播放列表73B。在再现播放列表73B之后,再现播放列表73C。结果,读取图象数据74A,并且显示提示用户选择故事分支的屏幕80A。
在显示屏幕80A之后,根据用户选择而分支故事。在图26所示实例中,当执行第一选择时,显示屏幕80A。随后,连续再现播放列表73D、73E、和73F。结果,完成剧本70的再现。在再现播放列表73F之后,再次显示主菜单屏幕(例如,前述的菜单屏幕60)。
当在屏幕80A上执行第二选择时,在显示屏幕80A之后,再现播放列表73G。在预定时刻在播放列表73G中设定标志。当再现播放列表73B时,根据再现装置的设定、用户的另一剧本或在分支选择屏幕上的选择,在该标志位置分支播放列表73G或者全部再现。当再现全部播放列表73G时,在再现播放列表73G之后,连续再现播放列表73M和73I。随后,再现播放列表73J。
当在该标志位置分支播放列表73G时,连续再现播放列表73K和73L。在再现播放列表73L之后,从已经设置在播放列表73I中的标志位置恢复再现。
在播放列表73J中,读取图形数据74B。显示提示用户选择故事分支的屏幕80B。在屏幕80B上的第一选择中,再现播放列表73F。在屏幕80B的第二选择中,从已经设置在播放列表73K中的标志位置再现播放列表73K。
当再现剧本时,根据播放器对播放列表执行的命令序列(程序),而执行与检测标志、用户输入和播放器的操作变化相应的操作。
下面,结合图27,描述使用HTML和ECMA脚本作为叙述语言的剧本结构。在图27中,为简单起见,用相似的参考号指示与图26中相似的部分,并且省略它们的描述。
图27所示的剧本70′具有与图26所示剧本70相同的菜单和分支。剧本70′可以与剧本70相同的方式前进。剧本70′具有多个播放列表73A-73M。剧本70′具有两个在图形平面12上显示分支选择屏幕的部分(屏幕80A和80B)。
屏幕80A具有用于分支选择屏幕的图形数据74A和播放列表73C。屏幕80B具有用于分支选择屏幕的图形数据74B和播放列表73J。剧本70′指定播放列表和显示时刻的安排,在所述显示时刻上,在图形平面12上显示播放列表。播放列表在图形平面12上的显示时刻可用在播放列表中放置的标志而指定。
根据事件驱动模型而检测标志、用户输入和播放器的操作变化。当开始再现播放列表时,完成播放列表的再现,在再现播放列表的同时检测标志,或者,用户通过遥控器的按键操作输入的数据,发生事件。当程序具有在发生事件时执行的事件处理器时,通过播放器执行事件所希望的操作。
图27所示剧本70′具有两个事件处理器71和72。在它们中,事件处理器71是全局事件处理器,它描述对所有剧本70都有效的事件处理器。
即使正在再现播放列表73A-73M中的任一个,当按下遥控器上的菜单按钮时,也显示用于剧本表格的菜单屏幕60。接下来,描述对菜单屏幕60的播放列表的再现处理操作。在此情况下,与以下事件相对应的事件处理器描述为全局事件处理器71,其中,所述事件为在按下遥控器菜单按钮时发生的并且作为导致菜单屏幕60的播放列表被处理的命令。
事件处理器72是仅在再现预定播放列表时或在显示预定用户输入屏幕时执行的局部事件处理器。例如,当用户指定在屏幕80A上显示的作为分支选择屏幕的链接时,通过描述作为局部事件处理器的命令而实现用于再现另一播放列表的操作,其中,所述命令导致根据指定链接的事件而再现播放列表。
事件处理器的此定义用ECMA脚本描述。ECMA脚本是根据JavaScript(注册商标)的交叉平台脚本语言。ECMA脚本由ECMA(欧洲计算机制造商协会)规定。ECMA脚本与HTML文档具有高度的亲合力,并且允许定义唯一的对象。
2-4.剧本的种类
如后面所描述的,在BDVM目录中定义一个剧本。一个剧本由一个或多个播放列表组成。结合图28、图29A、图29B和图29C描述剧本的种类。基于播放列表的连接,剧本的结构可大致分为三种类型:(1)单个播放列表;(2)顺序播放列表;(3)多播放列表,如图28所示。
类型(1)的单个播放列表是由图29A所示一个播放列表组成的剧本。对于单个播放列表,可定义时间线。在剧本再现过程中没有中断。当单个播放列表的内容是电影时,在装入盘之后,只再现电影主要部分。
类型(2)的顺序播放列表是由多个直线排列的且没有分支的播放列表组成的剧本,如图29B所示。播放列表按以下方式排列:一个播放列表的结尾连接到下一播放列表的开头。在顺序播放列表中,可为每个播放列表定义时间线。当顺序播放列表的内容是电影时,剧本由菜单屏幕和电影主要部分组成。在装入盘之后,执行使菜单屏幕显示的播放列表。当在菜单屏幕上指定再现电影主要部分时,执行下一播放列表并且再现电影主要部分。
类型(3)的多播放列表是具有播放列表分支和播放列表连接的剧本。在多播放列表中,不定义通过贯穿所有播放列表的时间线,相反,而是在每个播放列表中定义时间线。利用多播放列表,可实现根据用户输入而改变再现内容的互动功能和游戏功能。当多播放列表的内容是电影时,可以实现多角度功能,该功能允许用户从对相同场景的各个拍摄角度选择希望的角度。
在只再现介质中,对BDVM目录定义一个剧本。然而,必须允许用户识别更小单位的剧本。不过,播放列表的单位不总是与用户可识别的单位一致。当一个播放列表描述三部电影时,必需允许用户看见每部电影的搜索点。与播放列表结构独立的搜索点(入口点)称作标题和/或章节。
下面结合图30描述标题和章节。标题表示剧本中的任一个再现起点。在图30所示实例中,标题1放在播放列表470A的开头。标题2放在播放列表470D的中间。在播放列表470A开头之后直到标题2之前的区域是标题1。章节是细分标题的单位。也把章节看作是再现起点。标题1细分为章节。在图30所示实例中,标题1具有章节1、2和3。因而,标题1细分为三个部分。如图30所示,标题和章节每一个都可放在播放列表的中间。
2-5.关于虚拟播放器模型
下面,讨论根据剧本描述而操作的再现装置的模型。模型再现装置称作BD(蓝光盘)虚拟播放器。BD虚拟播放器的结构定义称作BD虚拟播放器模型。
下面结合图31描述BD虚拟播放器模型。在盘装入到BD虚拟播放器30中之后,它从盘上读取以本发明所定义剧本叙述语言描述的剧本,作为PBC程序40,并且根据剧本的描述进行操作。
BD虚拟播放器30从根据本发明实施例定义的圆盘形记录介质再现数据。BD虚拟播放器30是计算机环境如个人计算机中的对象。计算机环境不局限于通用个人计算机。相反,计算机环境包括与专用再现装置和/或记录和再现装置合作的软件环境,其中,所述装置从根据本发明实施例定义的圆盘形记录介质再现数据。以下,根据本发明实施例定义的圆盘形记录介质称作盘。
BD虚拟播放器30大致有两种状态A和B。在状态A中,BD虚拟播放器30再现播放列表和图形。在状态B中,BD虚拟播放器30停止再现播放列表和图形。通过对BD虚拟播放器30对象的命令,而执行从一个状态到另一状态的改变并且指定一个状态中的下一操作。
状态A具有多个操作。状态A中的操作有:高速再现;变速再现,如逆向再现;以及特殊再现,如从盘中的任意时间开始的跳转再现。当显示图形平面12的数据时,限制BD虚拟播放器30的变速再现和特殊再现。
PBC(重放控制)程序40与记录在盘上的剧本相对应。如后面所描述的,剧本描述对记录在盘上的播放列表的再现方法以及对菜单屏幕的显示方法。PBC程序40和BD虚拟播放器30通过API(应用编码接口)41交换命令,以便再现记录在盘上的播放列表。
实际上,当改变BD虚拟播放器30的状态时,PBC程序40使必需的信息通过API 41传送到公共参数32,其中,公共参数32定义为BD虚拟播放器30的专用存储器。使用在PBC程序40和BD虚拟播放器30之间通过API 41直接互换的命令直接设置公共参数32的值,或者使用通过API 41执行的播放器命令31间接设置公共参数32的值。
根据本发明的实施例,在事件驱动模型下控制BD虚拟播放器30。在BD虚拟播放器30操作的同时,发生各种事件。当用户执行按键输入或操作遥控器或发生计时器中断时,通过硬件/OS(操作系统)50产生事件。事件发送给BD虚拟播放器30。可替换地,当在再现的播放列表中检测标志时,产生事件。进而,通过BD虚拟播放器30本身产生事件,例如,检测播放器操作改变的状态。
在BD虚拟播放器模型中定义发生事件的类型。当事件发生时,执行与该事件相应的事件处理器。结果,执行在播放器标准中所规定的操作。
BD虚拟播放器30的中断事件大致分为:(1)在正被再现的内容中发生的事件;(2)通过用户中断而发生的事件;(3)因播放器状态改变而发生的事件。
在正被再现的内容中发生的事件(1)是预定的中断。无论在什么时候再现内容,都在相同的时间发生事件(1)。在BD虚拟播放器30再现播放列表的同时,当在盘上经过播放列表中描述的标志所指定的时间时,在BD虚拟播放器30中发生标志检测中断。当由脚本指定计时器时,在指定时间或在脚本所指定计时器设定时间之后10秒钟发生计时器中断事件。
作为用户中断的事件(2)是不能预测它的发生及其发生时间的事件。当用户操作遥控器的按键时,发生中断事件。在此情况下,由于在用户执行按键操作时它是不确定的,因此,事先不能获得所述计时。
因BD虚拟播放器30的状态变化而发生的事件(3)是导致通知声音或小标题流变化的事件。当播放器的状态从对内容的再现状态改变为停止状态或相反时,发生此事件。因播放器的状态变化而发生的事件可与事件(1)或事件(2)一起发生,其中,事件(1)在正被再现的内容中发生,事件(2)因用户的中断事件而发生。对于导致通知声音或小标题流变化的事件实例,当发生用户对遥控器按键操作的中断事件时,声音或小标题流发生变化。结果,由于BD虚拟播放器30的状态变化,因此,发生通知状态变化的事件。
当HTML和ECMA脚本用作叙述语言时,使用图形平面12的显示控制描述为HTML(超文本链接标示语言)4.0文档或XHTML(扩展HTML)文档。对于图形平面12的显示屏幕的事件,使用HTML4.0内置事件。如果需要除HTML 4.0内置事件之外的事件,就可用ECMA脚本来描述它们。
当结合使用HTML格式和ECMA脚本时,如果事件发生,就根据在文档中是否存在由事件的组元(element)属性所指定的事件处理器而执行处理。当存在事件处理器时,执行该事件处理器。当不存在事件处理器时,判断在文档中是否存在全局事件处理器。从而,如果在文档中存在全局事件处理器,就执行事件处理器。当文档不用脚本语言描述事件处理器时,BD虚拟播放器30执行为事件准备的缺省事件处理。
事件处理器可描述为HTML文档的组元属性或ECMA脚本的方法captureEvents。
下面描述用HTML文档描述事件处理器的方法。例如,可以使用在HTML 4.0中规定的内置事件的事件onload、事件onunload、事件onclick、事件onkeypress。这些事件每一个都描述为标签组元的属性。
当用户代理结束一对标签<FRAMESET></FRAMESET>所定义的一个窗口或所有框架时,发生事件onload。当显示菜单屏幕时,发生事件onload。
窗口是浏览器应用程序根据HTML的规定而显示HTML文件的单元。框架用于在一个窗口的分区中显示多个HTML文件。框架内的HTML文件以及框架本身被称作框架。事件onload属性可与组元BODY和组元FRAMESET一起使用。
当用户代理从一个窗口或一个框架除去一个HTML文档时发生事件onunload。事件onunload属性可与组元BODY和组元FRAMESET一起使用。
当用定点器件等对准一个组元时,发生事件onclick。例如,当执行鼠标按钮的点击操作时,发生事件onclick。事件onclick属性几乎可与HTML 4.0的任何组元一起使用。
当在组元上按下按键或从组元释放按键时,发生事件onkeypress。例如,在屏幕上由特定组元定义并且置于选择状态的区域内,当在键盘上按下预定键或按下遥控器的按键时,发生事件onkeypress。事件onkeypress属性几乎可与HTML 4.0的任何组元一起使用。
由于不能用前述HTML的事件充分控制BD虚拟播放器30的操作,因此必须定义原始事件。图32A、图32B和图32C示出在BD虚拟播放器30中定义的原始事件的实例。在HTML文档中用ECMA脚本描述所述事件。对于指定事件处理器的属性名,在事件名的开头增加“on”。
当倒数计时器的值变为“0”时或当正数计时器变为预定值时,发生事件TimerFired。当再现停止或暂停时,发生事件PlayStopped和事件PlayStilled。当释放暂停状态时,发生事件StillReleased。当用户临时停止再现时并且当用户释放再现的暂停状态时,发生事件PlayPaused和事件PauseReleased。当开始再现时,发生事件PlayStarted。当检测将被重复再现的区域的开头时,发生事件PlayRepeated。
当子图(小标题)流的显示/不显示状态改变时,发生事件SPDisplayStatusChanged。当将被再现的音频流和视频流改变时,分别发生事件SelectedAudioChanged和事件VideoStopped。
当检测到剧本的开始和结束时,分别发生事件ScenarioStarted和事件ScenarioEnded。当检测播放列表的开始和结束时,分别发生事件PlayListStarted和事件PlayListEnded。当检测播放项目的开始和结束时,分别发生事件PlayItemStarted和事件PlayItemEnded。
当在再现播放列表的同时检测标志时,发生事件MarkEncountered。当例如在图形平面12上显示图象数据时,使用此事件。在公共参数32中描述所检测标志的类型和数量。
当按下布置在屏幕上的按钮时,发生事件ButtonPressed。例如,当通过键盘操作或鼠标的点击操作而虚拟按下布置在图形平面12上的按钮时,发生事件ButtonPressed。
当开始有效期时,发生事件ValidPeriodStarted。当指定选择链接的有效期时,可使用此事件。当有效期结束时,发生事件ValidPeriodEnded。当强制执行链接时,可使用此事件。
当按下遥控器的按键时,发生事件KeyPressed。按下键的类型由事件处理器的“switch”语句等确定。
当原始命令用作剧本叙述语言时,执行剧本所必需的事件被定义为语言。因而,当用原始命令描述剧本时,与使用通用ECMA脚本的情况不同,不必定义适于在程序中执行剧本的事件。
2-6.关于命令
BD虚拟播放器30具有命令。利用这些命令定义:BD虚拟播放器30的操作和状态;对与视频流、音频流和子图(在小标题平面11上的图象数据)有关的信息的检索和控制;用于公共参数32的操作;用于计时器和按键输入中断的处理;以及对在图形平面12上处理的图象数据的控制。
这些命令内置于图31中所述BD虚拟播放器30的API 41中。根据PBC程序40的描述,通过API 41来调用这些命令。根据这些命令而控制对BD虚拟播放器30的盘的再现。后面描述PBC程序40的真实实例。
在使用原始命令作为剧本叙述语言的情况和使用HTML和ECMA脚本的情况之间,BD虚拟播放器30所拥有的命令稍微不同。首先,结合图33A、图33B、图33C、图33D、图33E、图33F、图33G和图33H,描述在使用原始命令作为剧本叙述语言的情况下的命令。
下面描述用于指定再现起始位置的命令。命令LinkPlayList(playListNumber)导致开始“playListNumber”所指定的播放列表的再现。命令LinkPlayItem(playListNumber,playItemNumber)导致开始指定播放列表的指定播放项目的再现。“playItemNumber”是其值从“0”开始的“PlayItem_id”。当指定“playItemNumber”为值“0”时,从头开始再现该播放项目所属的播放列表。
命令Link(position)(object)导致当前位置在剧本中移动。此命令导致当前位置移动到相邻的播放列表、播放项目或章节。参数“position”是“prev”、“next”、“top”、“Parent”或“tail”之一。参数“object”描述参数“object”所代表的对象(播放列表、播放项目、或章节)的移动方法。
命令Exit导致停止剧本的再现。在此情况下,不保留标准寄存器的值。命令RSM导致调用储存在播放器存储器中的恢复信息,设置寄存器,并且开始剧本再现。
下面描述用于获得播放器状态的命令。命令getMenuDescriptionLanguage()导致获得用于显示菜单的语言。命令getScenarioNumber()、命令getPlayListNumber()和命令getChapterNumber()导致分别获得正被再现的剧本编号、播放列表编号和章节号。命令getPlaySupport()导致获得播放器的版本信息。
下面描述用于视频流的命令。命令getVideoStreamAvailability()导致获得描述是否包含指定视频流的信息。命令setVideoStreamNumber()描述将被解码的视频流。命令getVideoStreamNumber()导致获得正被选择视频流的编号。视频流的属性例如是编码系统、分辨率、纵横比、在纵横比为4∶3的情况下的显示模式、以及是/否存在隐藏字幕。命令setAngleNumber()描述角度编号。命令getAngleNumber()描述导致获得正被选择的角度编号。命令getMaxVideoStreams()导致获得位流的最大数量。
下面描述用于音频流的命令。命令getAudioStreamAvailability()导致获得描述是否包含指定音频流的信息。命令getAudioStreamLanguage()描述导致获得与指定音频流的语言有关的信息。命令getAudioStreamStatus()导致获得指定音频流的状态。命令setAudioStreamStatus()导致指定所指定音频流的状态。音频流的状态例如为再现或不再现。命令getAudioStreamAttribute()导致获得指定音频流的属性。
接着描述用于子图流(小标题数据)的命令。命令getSPStreamAvailability()导致获得描述是否包含指定子图流的信息。命令getSPStreamLanguage()导致获得在指定子图流中使用的语言。命令getSPDisplaystatus()导致获得指定子图流的显示状态。命令setSPDisplaystatus()导致指定子图流的显示状态。子图流的显示状态例如为它的显示开/关状态。命令getSPStreamAttribute()导致获得指定子图流的属性。子图流的属性例如为4∶3纵横比和宽屏。
下面描述用于公共参数32的命令。在图中,这些命令用寄存器读/写表示。命令ClearReg()导致初始化BD虚拟播放器30的存储器区域的所有寄存器。命令setReg()导致对指定寄存器设置一个值。命令getReg()导致从指定寄存器读取一个值。
接着描述用于计时器的命令。命令sleep()导致在指定时间停止处理。命令setTimeout()导致在经过指定时间之后执行功能或处理。命令setInterval()导致以指定间隔执行处理。以毫秒为单位指定用于计时器的命令。命令clearTimer()导致停止指定注册计时器ID的处理。命令pauseTimer()导致临时停止具有注册计时器ID的计时器。命令resumeTimer()导致具有指定注册计时器ID的计时器从暂停状态恢复。
对于用于效果声音的命令,命令playSoundEffect(sound_id)导致再现指定的效果声音。
当在后述的后命令区域和按钮命令区域中描述在图33A、图33B、图33C、图33D、图33E、图33F、图33G和图33H中例示的命令时,可实现跳转到预定播放列表。除了这些在图33A、图33B、图33C、图33D、图33E、图33F、图33G和图33H中示出的命令之外,可定义其它命令。
接下来结合图34A、图34B、图34C、图34D、图34E、图34F、图34G、图34H、图34I和图34J,描述使用HTML和ECMA脚本作为剧本叙述语言的命令。
下面描述用于播放器操作的命令。命令playScenario(ScenarioNumber,[scenarioTime])导致再现“ScenarioNumber”所指定的剧本。“ScenarioNumber”是表示描述剧本结构的文件的位置的URI(统一资源标识符)。命令playPlayList(playListNumber)导致再现“playListNumber”所指定的播放列表。命令playChapterMark(playListNumber,chapterNumber)导致从“chapterNumber”指定的章节再现由“playListNumber”指定的播放列表。命令playPlayItem(playListNumber,playltemNumber)导致从“playItemNumber”指定的播放项目再现由“playListNumber”指定的播放列表。“playItemNumber”是“playItem_id”。当“playItemNumber”指定为值“0”时,从头开始再现该播放项目所属的播放列表。
命令play(position)(object)导致当前位置移动到相邻的播放列表或播放项目。参数“position”是“prev”、“next”、“top”、“goUp”和“tail”之一。参数“object”描述移动对象(播放列表、播放项目、或章节)的移动方法。
命令stop()导致停止剧本的再现。在此情况下,不保留标准寄存器的值。命令resume()导致从最后的停止位置恢复再现。命令playSoundEffect()导致再现所选的效果声音。
下面描述用于播放器状态的命令。命令getmenuDescriptionLanguage()导致获得所显示菜单的语言。命令getScenarioNumber()、命令getPlayListNumber()和命令getChapterNumber()导致分别获得正被再现的剧本编号、播放列表编号和章节号。
下面描述用于视频流的命令。命令setVideoStreamNumber()描述将被解码的视频流。命令getVideoStreamNumber()、命令getVideoStreamStatus()和命令getVideoStreamAttr()导致分别获得正被再现的视频流的视频流编号、状态和属性。视频流的属性例如是编码系统、分辨率、纵横比、在纵横比为4∶3的情况下的显示模式、以及是/否存在隐藏字幕。命令setAngleNumber()描述角度编号。命令getAngleNumber()导致获得已被选择的角度编号。命令getMaxVideoStreams()导致获得视频流的最大数量。
下面描述用于音频流的命令。命令getAudioStreamAvailability()导致获得描述是否包含指定音频流的信息。命令getAudioStreamLanguage()导致获得与指定音频流的语言有关的信息。命令getAudioStreamStatus()导致获得指定音频流的状态。命令setAudioStreamStatus()导致指定所指定音频流的状态。音频流的状态例如为音频流是否再现。命令getAudioStreamAttribute()导致获得指定音频流的属性。
接着描述用于子图流(小标题数据)的命令。命令getSPStreamAvailability()导致获得描述是否包含指定子图流的信息。命令getSPStreamLanguage()导致获得在指定子图流中使用的语言。命令getSPDisplaystatus()导致获得子图流的显示状态。命令setSPDisplaystatus()描述子图流的显示状态。子图流的显示状态例如为是否显示子图流。命令getSpStreamAttribute()导致获得指定子图流的属性。子图流的属性例如为是否以4∶3纵横比或以宽屏显示子图流。
下面描述用于公共参数32的命令。在图34A、图34B、图34C、图34D、图34E、图34F、图34G、图34H、图34I和图34J中,用于公共参数32的命令表示为用于寄存器读/写的命令。命令ClearReg()导致初始化BD虚拟播放器30的存储器区域的所有寄存器。命令setReg()导致对指定寄存器设置一个值。命令getReg()导致从指定寄存器读取一个值。
接着描述用于计时器的命令。命令sleep()导致在指定时间停止处理。命令setTimeout()导致在经过指定时间之后执行功能或处理。命令setInterval()导致以指定时间间隔执行处理。以毫秒为单位指定用于计时器的命令。命令clearTimer()导致停止具有指定注册计时器的处理。命令pauseTimer()导致临时停止具有指定注册ID的计时器。命令resumeTimer()导致具有指定注册计时器ID的计时器从暂停状态恢复。
对于用于键盘输入的命令,命令getPressedKey()导致获得已经输入(按下)的按键类型。
下面,描述用于图形的命令。命令loadGraphics(htmlfile,ID)导致读取“htmlfile”指定的文件,并且该文件在不显示状态下扩展到图形平面12。对扩展图形图象分配“ID”,并且用后述的命令查询此“ID”。命令showGraphics(ID)导致显示用前述命令loadGraphics(htmlfile,ID)在图形平面12上扩展的图象。命令hideGraphics(ID)导致隐藏由“ID”指定的图象。
下面描述其它命令。命令random(input Number num)导致产生随机数1到“num”。通过唯一定义产生随机数。命令catchEvent(eventname,eventhandler)导致当发生“eventname”指定的事件时执行“eventhandler”所指定的功能。
2-7.关于命令的执行
下面描述如上述定义的命令的执行。首先,描述原始命令用作剧本叙述语言的情形。当原始命令用作剧本叙述语言时,剧本具有两个包括程序的命令区,所述程序具有导致操作播放器的命令。所述两个区域称作全局命令区和局部命令区。
全局命令区具有对整个剧本都有效的程序。例如,全局命令区描述以下程序,当盘装入到播放器中时该程序导致播放器初始化参数,并且跳转到组成菜单屏幕的播放列表。局部命令区描述用于播放列表的程序。局部命令分为四种类型的命令:前命令、播放项目命令、后命令和按钮命令。
图35A和图35B用剧本示出BD虚拟播放器30的大致操作,其中,所述剧本把原始命令描述为叙述语言。图35A示出BD虚拟播放器30的盘装入操作的实例。如上所述,为后述的BDMV目录创建一个剧本。当盘装入到播放器中并接着对盘执行初次访问时(步骤S30),初始化寄存器,即公共参数32(步骤S31)。在下一步骤S32中,从盘读取程序,并且执行它。初次访问表示以下操作:例如当盘装入到播放器中时,第一次对盘执行再现。
在盘装入到播放器中时被初次读取和执行的命令组(一个程序)被称为全局命令。全局命令例如描述广告图象(预告片)和跳转命令,其中,跳转命令跳转到组成菜单屏幕的播放列表。播放器根据所述命令而再现播放列表。
图35B示出当用户在播放器处于停止状态的同时例如按下播放键时,播放器30的操作实例。此操作与在图31中描述的BD虚拟播放器30从状态B到状态A的状态变化相对应。在停止状态(步骤S40)中,用户例如用遥控器使BD虚拟播放器30以再现模式操作(UOP:用户操作)。结果,初始化寄存器(即,公共参数32)(步骤S41)。在下一步骤S42中,BD虚拟播放器30进入播放列表再现阶段。
下面,结合图36A和图36B描述在播放列表再现阶段中播放列表的再现。图36A示出播放列表由单个播放项目组成的实例。播放列表具有前命令区、播放项目命令区、以及描述各个程序的后命令区。在播放列表再现阶段中,执行前命令区的前命令(步骤S10)。在执行前命令之后,播放器进入对组成该播放列表的播放项目的播放项目再现阶段(步骤S11)。在播放项目再现阶段中,再现由播放项目指定起点和终点的流(步骤S110)。当已经再现所述流直到终点时,执行播放项目命令(步骤S111)。在执行播放项目命令之后,执行后命令区的后命令(步骤S12)。结果,已经再现播放列表。
后命令一般为跳转命令,跳转命令描述跳转到下一个再现的播放列表或组成菜单屏幕的播放列表。当没有跳转命令时,播放器进入停止状态(图31B所示的状态B)。
图36B示出播放列表描述多个播放项目的实例。在此情况下,播放列表具有前命令区、播放项目命令区、以及描述各个程序的后命令区。当播放列表描述多个播放项目时,播放项目命令区描述以时间顺序排列的播放项目的播放项目流和播放项目命令。
当播放列表描述多个播放项目时,在播放列表再现阶段中,执行前命令(步骤S10)。在下一播放项目再现阶段中,从每个播放项目的起点向终点再现流,并且对每个播放项目执行播放项目命令。在图36B所示实例中,再现第一播放项目流(步骤S110-1)。随后,执行相应的播放项目命令(步骤S111-1)。随后,执行第二播放项目流(未示出)(步骤S110-2)。执行相应的播放项目命令(步骤S111-2)。这些操作的重复次数为播放项目的数量。在再现最后的播放项目流(步骤S110-n)和执行相应的播放项目命令(步骤S111-n)之后,结束播放项目再现阶段。在结束播放项目再现阶段之后,执行后命令(步骤S12)。结果,结束播放列表再现阶段。
根据本发明的实施例,可以分层考虑在BD虚拟播放器30上执行的剧本、播放列表和播放项目。换句话说,如图37A所示,在BD虚拟播放器层600之下放置一个剧本层601。在剧本层601之下放置具有一个或多个播放列表的播放列表层602。在播放列表层602之下放置播放项目(PI)层603。每个播放列表具有一个或多个播放项目。
在此分层结构中,BD虚拟播放器通过剧本层601执行播放列表和播放项目。因而,当在剧本中描述播放列表的控制命令时,可容易实现播放列表的分支等。这应用到图37B所示的播放项目上。
接着,描述HTML和ECMA脚本用作剧本叙述语言的实例。在以下中,描述PBC程序40更实用的实例,其中,PBC程序40使用HTML和ECMA脚本作为剧本叙述语言。
当用HTML和ECMA脚本描述剧本时,为一个剧本创建一个脚本文件。当在图形平面12上显示菜单屏幕60时,为一个屏幕创建一个HTML文件。脚本文件和HTML文件分别具有扩展名“js”和“html”。这些扩展名区分这两种类型的文件。在盘装入到驱动器中时初次执行的脚本程序文件例如具有“startup.js”的固定文件名。
下面,举例讨论具有图38所示剧本结构的盘。此盘具有两个剧本Scenario000和Scenario001。剧本Scenario000导致显示菜单屏幕91,菜单屏幕91具有与所显示剧本Scenario001的链接按钮。当该盘装入到再现装置中时,显示菜单屏幕91。当点击菜单屏幕91上的按钮92时,再现剧本Scenario001。在再现剧本Scenario001之后,再次显示菜单屏幕91。
图39示出图38所示结构需要的文件列表的实例。在此实例中,需要六个文件,它们是文件“startup.js”、文件“Scenario000.js”、文件“000.html”、文件“00000.rpls”、文件“Scenario001.js”和文件“00001.rpsi”。
在这些文件中,文件“Scenario000.js”是描述剧本Scenario000结构信息的脚本文件。文件“Scenario000.js”描述菜单屏幕91,即剧本列表屏幕,的结构信息。文件“000.html”是描述菜单屏幕91的布局信息的HTML文件。文件“00000.rpls”是显示为菜单屏幕91背景的播放列表文件。文件“Scenario001.js”是描述剧本Scenario001结构信息的脚本文件。文件“00001.rpls”是描述根据剧本Scenario001再现的播放列表信息的播放列表文件。
在图39中,省略根据播放列表文件“00000.rpls”和“00001.rpls”再现的内容文件(剪辑信息文件“%%%%%.clip”和AV流文件“*****.m2ts”)  。
根据图40所示目录结构,在盘上记录图39所示的每个文件。文件“startup.js”就放在目录BDAV之下。目录SCRIPT放在目录BDAV之下。在目录SCRIPT下放置描述剧本结构信息的脚本文件(如“Scenario000.js”)和HTML文件(如文件“000.html”)。
图41-44示出脚本文件和HTML文件的实用叙述实例。图41为文件“startup.js”的叙述实例。文件“startup.js”定义记录在盘上的剧本数量及其名称。方法playScenario(“Scenario000”)导致调用文件“Scenario000.js”并再现剧本Scenario000。当再现剧本Scenario000时,显示菜单屏幕91。
图42为文件“Scenario000.js”的描述实例。当发生用“on”定义功能并描述方法catchEvent()的事件(参见图32A、图32B和图32C)时,执行在该功能中定义的内容。在图42所示实例中,指定描述菜单屏幕91布局信息的HTML文件“000.html”。控制菜单屏幕91在图形平面12上的读取时刻和显示时刻。另外,方法playPlayList(“00000.rpls”)导致再现播放列表“00000.rpls”。
文件“Scenario000.js”在运动图象平面10上显示播放列表“00000.rpls”的运动图象。另外,文件“Scenario000.js”导致在以下标志时刻在图形平面12上显示菜单屏幕91,其中,所述标志是在再现播放列表“00000.rpls”的同时检测的。
图43为文件“000.html”的叙述实例。在标签<styletype=“text/css”>和</style>所包围的部分中,描述“menu”和“scenario000”所引用的图象在菜单屏幕91上的布局信息。在图43所示实例中,在屏幕上用绝对坐标描述布局信息。用图象名“menu”引用的图象数据在距屏幕上端200象素且距屏幕左端800象素的位置上,显示为宽200象素且高50象素的图象。同样,用图象名“scenario”引用的图象数据在距屏幕上端700象素且距屏幕左端700象素的位置上,显示为宽400象素且高100象素的图象。
在标签<script type=“text/javascript”>和</script>所包围的部分中,定义用于鼠标操作的事件处理器onMoverhandler(f)、onMounthandler(f)和onMclickhandler(f)。在图43所示实例中,作为按钮图象的图象数据“201.png”、“200.png”和“202.png”与事件处理器onMoverhandler(f)、onMounthandler(f)和onMclickhandler(f)相关联。另外,事件处理器onMclickhandler(f)导致再现剧本文件“Scenario001.js”。
在标签<body>和</body>所包围的部分中,描述在菜单屏幕91的图形平面12上显示的图象数据。描述与在标签<styletype=“text/css”>和</style>所包围部分中描述的图象名相对应的图象数据的文件名(“100.png”和“200.png”)。当根据定点器件如鼠标的操作而对图象名“Scenario000”引用的图象数据发生事件onMouseover、onMouseout和onclick时,分别执行事件处理器onMoverhandler(f)、onMouthandler(f)和onMclickhandler(f)。
事件onMouseover是当在指定区域放置光标时发生的事件。事件onMouseout是当光标离开指定区域时发生的事件。事件onclick是当在指定区域中放置光标的同时执行预定操作时发生的事件,所述预定操作例如为定点器件如鼠标的点击操作。
图44为文件“Scenario001.js”的叙述实例。功能functionUOPControl()定义以下操作:在再现剧本文件“Scenario001.js”的同时,如果按下遥控器的菜单键,就再现用于显示菜单屏幕91的剧本Scenario000。功能function playListEnded()定义以下操作:当已经再现剧本文件“Scenario001.js”的播放列表时,再现用于显示菜单屏幕91的Scenario000。剧本文件“Scenario001.js”导致再现播放列表“00001.rpls”。
下面描述在图41-图44中示出的操作。当盘装入到再现装置中时,从盘读取文件“startup.js”。从文件“startup.js”调用文件“Scenario000.js”。当执行在文件“Scenario000.js”中描述的剧本“Scenario000”时,根据图42所示的描述,在运动图象平面10上显示播放列表的运动图象。
在与播放列表“00000.rpls”中所述标志相应的时间调用文件“000.html”。根据文件“000.html”的叙述,在图形平面12上扩展并显示菜单屏幕91,其中,菜单屏幕91显示剧本表格。菜单屏幕91还由一个剧本,即剧本“Scenario000”组成。
在菜单屏幕91上,放置字符串如“menu”的图象文件“100.png”和字符串如“Scenario0001”的图象文件“200.png”。在图形平面12上放置这些图象文件,并且显示这些字符串。在作为图形平面12背景显示的运动图象平面10上,显示播放列表“00000.rpls”的运动图象。在相同屏幕上叠加和显示运动图象平面10上的播放列表“00000.rpls”的运动图象和图形平面12上的文件“000.html”的菜单屏幕91。结果,以运动图象的背景显示菜单屏幕91。
此时,对图形平面12上的屏幕(菜单屏幕91)指定预定的透明度。可在运动图象平面10的运动图象上透明显示菜单屏幕91。在此实例中,在播放列表“00000.rpls”的开头和结尾描述标志。当再现播放列表“00000.rpls”时,显示菜单屏幕91。在再现播放列表“00000.rpls”之后,清除菜单屏幕91。
在菜单屏幕91上,显示可由遥控器的用户按键操作移动的光标。当光标与图象文件“200.png”叠加时,发生在文件“000.html”中所定义的事件Mouseover。当事件Mouseover发生时,执行与事件onMouseover相对应的事件处理器onMovehandler(),以便表示聚焦到图象文件“200.png”的状态。当执行事件处理器onMovehandler()时,用图象文件“201.png”取代图象文件“200.png”。图象文件“201.png”是其颜色与图象文件“200.png”不同的按钮图象等。
当在图象文件“201.png”上放置光标时,如果用户通过遥控器的预定键而执行点击操作,就执行与事件onclick相对应的事件处理器onMclickhandler()。结果,图象文件“201.png”用图象文件“202.png”取代,图象文件“202.png”表示已经选择图象文件“201.png”的状态。图象文件“201.png”是虚拟表示按钮按下状态的按钮图象。
当在文件“000.html”中描述与事件“focused”和“clicked”相对应的事件处理器时,实现具有响应用户输入的互动功能的菜单屏幕。
当在菜单屏幕91上点击按钮图象“Scenario0001”时,执行用于剧本“Scenario0001”的再现处理。当执行文件“Scenario000.js”时,再现剧本“Scenario0001”。如图44所示,调用在文件“Scenario001.js”中描述的方法playPlayList(“00001.rpls”)。结果,再现播放列表“00001.rpls”。
在已经再现播放列表“00001.rpls”之后,发生播放列表再现结束事件PlayListEnded()。与该事件相应的事件处理器playScenario(“Scenario000.js”)导致再现剧本“Scenario000.js”。在此实例中,在已经再现剧本“Scenario001.js”之后,再次显示菜单屏幕91。
在再现剧本“Scenario001.js”的同时,即使操作“keyID”所指定的键,也再现剧本“Scenario000.js”并显示菜单屏幕91。
在图41-图44中示出的HTML和ECMA脚本的叙述仅仅是实例。换句话说,本发明不局限于这些实例。HTML和ECMA脚本在它们的叙述中具有灵活性。因而,即使部分改变HTML和ECMA脚本,也可实现相似的操作。
2-8.关于语法
下面,描述在原始命令用作剧本叙述语言的情况下的文件语法。首先,描述用于向盘上记录命令和数据库的方法,所述命令和数据库描述剧本。图45示出在原始命令用作剧本叙述语言的情况下的文件管理结构的实例。
在盘上创建一个根目录。通过一个再现系统管理根目录下的部分。在根目录下,放置目录BDMV。如图9所示,可在根目录下放置多个目录BDMV。
在目录BDMV下,放置两个文件“scenario.hdmv”和“entrylist.data”。另外,放置多个目录“PLAYLIST”、“CLIPINF”和“STREAM”。
图46示出描述文件“scenario.hdmv”的结构实例的语法。文件“scenario.hdmv”是在执行初次访问时(即当装入盘时),初次读取和执行的文件。文件“scenario.hdmv”具有文件标识码(字段type_indicator)和版本号(字段version_number)。在版本号之后是功能数据块。
字段type_indicator具有32位的数据长度。字段type_indicator具有描述文件是“scenario.hdmv”的预定字符串。字段version_number具有用于版本号的32位数据长度。字段Scenario_start_address具有用于无符号整数的32位数据长度,无符号整数的值用距文件“scenario.hdmv”开头的相对数量的字节而表示块Scenario()的位置。
块Autoplay()从文件的第41字节(固定位置)开始。块Autoplay()描述在执行初次访问(初次执行盘的再现,例如装入盘)时执行的程序。在块Autoplay()之后是任意数量的插入字(padding_word),所述插入字允许在块之后形成间隔。
图47示出图46所示块Autoplay()的结构实例的语法。字段length具有用于无符号整数的32位数据长度。字段length描述就在字段length结束之后直到块Autoplay()结束之前的数据字节长度。字段number_of_commands描述在它后面的字段command(i)的数量。字段command(i)具有如图33A、图33B、图33C、图33D、图33E、图33F、图33G和图33H所示的32位数据长度。字段command(i)描述一组播放器参数和命令,所述命令例如为对指定播放列表的再现开始命令以及计算命令。
块Scenario()描述以上解释的“Scenario”。块Scenario()描述与播放列表的再现顺序以及每个播放列表的局部命令区有关的信息。
图48示出块Scenario()的结构实例的语法。块Scenario()是定义剧本信息即播放列表之间链接的块。块Scenario()描述与前面描述的前命令、后命令和播放项目命令有关信息以及这些命令本身。块Scenario()具有用于与在此描述命令有关的信息字段的区域以及用于这些前命令、后命令和播放项目命令的区域。
字段length描述表示就在字段length结束之后直到块Scenario()结束之前的字节长度的值。字段number_of_PlayLists描述组成剧本的播放列表的数量。在字段number_of_PlayLists之后是每个播放列表的数据。在for循环中,每个播放列表的数据重复循环计数器i所指定的次数,i的最大值用字段number_of_PlayLists表示。
字段Pre_Command_start_id描述命令表中前命令的开始编号(在再现播放列表之前执行前命令)。字段Pre_Command_start_id中所述编号描述for循环中的循环计数器j,其中,该for循环用于描述字段PI_Command(i),在后面描述。同样,字段Post_Command_start_id描述命令表中后命令的开始编号(在再现播放列表之后执行后命令)。字段Post_Command_start_id中所述编号描述for循环中的循环计数器j,其中,该for循环用于描述字段PL_Command(j),在后面描述。
字段Number_of_Pre_Commands描述组成程序的前命令的数量。前命令在再现播放列表之前执行。同样,字段Number_of_Post_Commands描述组成程序的后命令的数量。后命令在再现播放列表之后执行。在后述命令表中描述这些程序。
字段Number_of_PlayItems描述组成播放列表的播放项目数量。字段PI_Command_start_id表示命令表中播放项目命令的开始编号。播放项目命令在再现播放项目之后执行。在字段PI_Command_start_id中描述的编号描述后述命令表中的循环计数器j。字段Number_of_PI_Commands描述播放项目命令的数量,所述命令在再现播放项目之后执行。在再现播放项目之后执行在字段PI_Command_start_id所述位置之后到字段Number_of_PI_Commands中所述命令数量之前的命令。
字段Number_of_PL_Commands描述命令表中在字段Number_of_PL_Commands之后的命令数量。命令表具有描述字段PL_Command(j)的for循环。命令表中的命令被分配数字j。在描述命令表的for循环中,数字j与循环计数器j相对应。字段PL_Command(j)描述一个命令。从前述字段Pre_Command_start_id、字段Post_Command_start_id和字段PI_Command_start_id中查询数字j。
图49示出描述文件“entrylist.data”的数据结构实例的语法。文件“entrylist.data”描述文件标识码(字段type_indicator)、版本号(字段version_number)和块开始地址(字段ScenarioEntry_start_address)。在块开始地址之后是功能数据块。
字段type_indicator具有用于预定字符串的32位数据长度,其中,该预定字符串描述标题和菜单的入口点。字段version_number具有用于版本号的32位数据长度。字段ScenarioEntry_start_address具有用于无符号整数值的32位数据长度,无符号整数值用距字段“entrylist.data”开头的相对数量的字节来描述块ScenarioEntry()的开始位置。
图50示出描述块AppInfo()的结构实例的语法。字段length具有用于无符号整数的32位数据长度,该无符号整数描述就在字段length结束之后直到块AppInfo()结束之前的字节长度。字段BDMV_name_character_set描述用于后述字段BDMV_name的字符集。字段PIN_valid_flag描述当执行再现时是否应该设置个人标识号。当该设置有效时,在字段PIN_valid_flag之前的字段PIN描述个人标识号。字段BDMV_name_length描述在字段BDMV_name_length之后的字段BDMV_name的有效部分长度。字段BDMV_name是描述其中放置文件“entrylist.data”的目录BDMV的名称的区域。以文本格式描述目录BDMV的名称。字段BDMV_name具有255字节的固定数据长度。目录BDMV的描述名称长度为在从字段BDMV_name开始之后的字段BDMV_name_length中所述的长度。
图51示出描述块ScenarioEntry()的结构实例的语法。块ScenarioEntry()描述剧本的搜索点。如上所述,为目录BDMV创建一个剧本。剧本链接放在目录BDMV下的多个播放列表,以便定义播放列表的再现顺序。当用户看剧本时,剧本不总是看起来象一个图象单元或一个声音单元,而似乎是它由多个“标题”组成。
当在一张盘上记录三部电影时,在盘上只存在一个定义电影再现顺序的剧本。然而,用户看它们就象有三个标题记录在盘上。可替换地,显示三个标题的列表。由于包括允许用户选择一个标题的标题菜单,他或她看它们就象记录有四个标题。由于用户把菜单屏幕看作是一个图象单元或一个声音单元,因此,根据本发明的实施例,菜单屏幕被处理成一种类型的标题。
由于定义播放列表链接的剧本单元与用户把数据识别为图象和音频的单元不同,因此,必需在剧本中定义搜索点。剧本中的搜索点称为标题入口。块ScenarioEntry()描述标题入口的信息。
返回到图51,字段length具有用于无符号整数的32位数据长度,该无符号整数描述就在字段length之后直到块ScenarioEntry()结束之前的字节长度。字段name_character_set描述在字段name_character_set后面的字段TopMenu_name和字段Title_name的字符集。
下一块Top menu PL()描述播放列表或播放列表组的入口点,其中,播放列表或播放列表组构成当用户按下遥控器的标题菜单键时显示的菜单。一个剧本具有一个顶级菜单。顶级菜单用于例如向用户提供标题。可放置子菜单,作为顶级菜单的下层菜单,其中,在所述子菜单上,用户可设置音频和小标题。子菜单也称作流设置菜单。
简而言之,字段flags是描述顶级菜单属性信息的区域。字段TopMenu_ref_to_PlayList_file_name描述组成顶级菜单的播放列表或作为播放列表组的入口的播放列表。字段TopMenu_ref_to_PlayItem_id描述播放项目编号,其中,在字段TopMenu_ref_to_PlayList_file_name中描述的播放列表中,顶级菜单从此播放项目编号开始。当从头开始再现播放列表时,字段TopMenu_ref_to_PlayItem_id的值为“0”。字段TopMenu_name_length表示分配给顶级菜单的名称的长度。字段TopMenu_name描述分配给顶级菜单的名称的字符串。
块Top Menu PL()描述与标题有关的信息。字段number_of_Titles描述就在字段number_of_Titles后面的for循环中的标题搜索点(标题入口)的数量。简而言之,字段flags是描述与标题有关的属性信息的区域。字段Title_ref_to_PlayList_file_name描述包括标题入口的播放列表的文件名。当从字段Title_ref_to_PlayList_file_name中所述播放列表的多个播放项目开始标题时,使用字段Title_ref_to_PlayItem_id。字段Title_name_length描述分配给标题的名称的长度。字段Title_name描述分配给标题的名称的字符串。
描述与子菜单有关的信息。在“Stream Setup Menu”(流设置菜单)之后是组成每个播放项目的流设置菜单(即子菜单)的播放列表或播放列表组的入口点。流设置菜单可用于每个播放列表,以例如选择声音、小标题或角度。例如,当按下图25所示按钮64和65时,子菜单显示为屏幕。
字段number_of_PlayLists描述用于流设置菜单的播放列表的数量。字段number_of_PlayLists的值用作就在字段number_of_PlayLists后面的for循环的循环次数。简而言之,字段SSMenu_flags是描述与流设置菜单有关的属性信息的区域。字段SSMenu_ref_to_PlayList_file_name描述组成流设置菜单的播放列表或作为播放列表组入口的播放列表。字段SSMenu_ref_to_PlayItem_id描述播放项目编号,其中,在字段SSMenu_ref_to_PlayList_file_name中描述的播放列表中,流设置菜单从此播放项目编号开始。当从头开始再现播放列表时,字段SSMenu_ref_to_PlayItem_id的值为“0”。
图52示出描述文件“xxxxx.mpls”的结构实例的语法。在图52中,文件“xxxxx.mpls”具有信息的功能块。字段type_indicator描述文件的字符串。字段version_number描述文件的版本。字段PlayList_start_address和PlayListMark_start_address把相应块的开始地址描述为具有32位数据长度的地址信息。
块PLControlInfo()描述与播放列表有关的属性信息。块PlayList()描述与组成播放列表的播放项目有关的信息。块PlayListMark()描述添加到播放列表的标志的信息。
在文件“xxxxx.mpls”中,由于在块PLControlInfo()、PlayList()和PlayListMark()开始地址之后是这些块,因此,可在每个块之前和/或之后放置所需长度的插入数据padding_word。第一块PLControlInfo()的开始位置固定为从文件开始的第41字节。
图53示出描述块PLControlInfo()的结构实例的语法。块PLControlInfo()描述与播放列表有关的各种类型的属性信息,所述信息不是再现播放列表所直接需要的。字段PlayList_character_set描述与播放列表有关的字符串信息的字符集。
字段PL_playback_type描述如图54所示的值。字段PL_playback_type描述播放列表是顺序再现的有规律播放列表、其播放项目随机再现的播放列表、或是其播放项目混合再现的播放列表。在播放列表单元中指定随机混合。一个播放列表不应描述有规律再现的播放项目和随机混合的播放项目组。当盘为只再现记录介质时,制造商可指定随机再现或混合再现。此时,需要这些信息。
字段playback_count描述当播放列表是随机再现播放列表或混合再现播放列表时播放项目的再现次数。字段playback_count描述随机再现的或混合再现的播放项目的数量。
字段PL_UOP_mask_table()描述与用户操作限制有关的信息。当在再现播放列表的同时禁止用户执行操作如重放、快进、快退等时,正确地描述此区域。当在字段PL_UOP_mask_table()中描述正确值时,即使执行快进操作等,也可防止跳过报警通知、版权通知等。
字段PL_random_access_mode描述如图55所示的值。字段PL_random_access_mode描述是否可执行随机访问,在随机访问中,从另一播放列表跳转再现播放列表的任何位置。当有盘制造商希望用户看到的播放列表时,字段PL_random_access_mode的值设定为[0x1]。当跳转再现此播放列表时,禁止快进操作、快退操作、随时再现等。此时,从头开始再现播放列表。当盘是只再现记录介质时,可在其上记录用户将看到的场景和预先警告,其中,所述场景例如为内容制造公司的徽标。字段PL_random_access_mode描述对变速再现操作等禁止跳过这些场景所需的信息。字段PL_UOP_mask_table()描述在再现播放列表的同时对用户操作播放器的限制。相反,PL_random_access_mode描述对用户从另一播放列表跳转再现当前播放列表的限制。
字段PlayList_duration描述播放列表的再现持续时间。字段PlayList_name描述具有有效长度的播放列表名称,有效长度的值在字段PlayList_name_length中描述。字段PlayList_detail描述与具有有效长度的播放列表有关的详细信息,其中,有效长度的值在字段PlayList_detail_length中描述。
图56示出描述块PlayList()的结构实例的语法。字段length描述就在字段length之后直到块PlayList()结束之前的字节长度。字段number_of_PlayItems描述组成播放列表的播放项目的数量。字段number_of_subPlayItems描述与主要播放项目一起再现的辅助播放项目(子播放项目)的数量。
块PlayItem()描述播放项目的信息。块subPlayItem()描述子播放项目的信息。
图57示出块PlayItem()的结构实例的语法。字段Clip_Information_file_name描述与剪辑相应的剪辑信息文件(扩展名“clpi”)的文件名字符串,其中,播放项目以一对一的关系引用所述剪辑。
字段Clip_codec_identifier描述播放项目所引用剪辑的编码系统。根据实施例,字段Clip_codec_identifier描述固定值“M2TS2”。换句话说,根据实施例,播放项目所引用剪辑的编码系统固定为值“M2TS”所代表的系统。
标记is_multi_angle描述播放项目是否具有多角度结构。
字段connection_condition是描述播放项目和下一播放项目以何种方式连接的信息。字段connection_condition描述播放项目是否可无缝再现。
字段ref_to_STC_id描述在播放项目所引用剪辑中的序列STC_sequence。序列STC_sequence具有蓝光盘标准的唯一结构,该结构描述:作为MPEG2TS(传输流)的时基基准的PCR(程序时钟基准)表示连续范围。序列STC_sequence描述在剪辑中唯一的编号STC_id。由于可在序列STC_sequence中定义连续的时基,因此,可唯一地指定播放项目的开始时间和结束时间。换句话说,每个播放项目的起点和终点应该存在于相同的序列STC_sequence中。字段ref_to_STC_id描述具有数字STC_id的序列STC_sequence。
字段IN_time和OUT_time分别描述在序列STC_sequence中播放项目的起点和终点的印时戳pts(presentation_time_stamp)。
字段PI_UOP_mask_table()描述与对用户操作限制有关的数据。即使用户执行此限制操作,播放器也不应响应它。为了在显示菜单屏幕的同时限制快进操作,在字段PI_UOP_mask_table()中描述与限制此种操作有关的数据。
对每个播放项目描述字段PI_UOP_mask_table()。字段PI_UOP_mask_table()描述具有与前述块PLControlInfo()的字段PL_UOP_mask_table()相同的对象的信息,该信息描述与播放列表的再现有关的信息。可在播放列表或播放项目中禁止用户操作。根据播放列表信息与播放项目信息的OR操作的结果,在播放项目再现过程中,禁止用户操作。
简而言之,字段PID_filter()是描述播放项目所再现的流的优先级的表格。
字段PI_random_access_mode描述如图58所示的值。字段PI_random_access_mode描述是否可对播放项目任意位置的跳转再现执行随机访问。当有盘制造商一方希望用户看到的播放列表时,在字段PI_random_access_mode中描述[0x1]。因而,当开始播放项目的再现时,可禁止用户执行快进操作、退绕操作、或随时再现操作等。
字段still_mode描述在开始再现播放项目之后是否临时停止再现。字段still_mode描述如图59所示的值。当字段still_mode的值是[0x1]时,它描述在下一字段still_mode所述的时间内,临时停止播放项目的再现。因而,象放映幻灯片一样,以预定时间间隔连续地显示静止图象。在此情况下,每个静止图象是播放项目。除了设置指定时间,在字段still_mode中还可描述用于非指定时间的设置(暂停设置),在此时间内,在用户输入数据之前停止再现。当字段still_mode的值是[0x2]时,可执行暂停设置。
当前述标记is_multi_angle的值例如为“1”时,播放项目是多角度播放项目。在“Angle”之后,增加与多角度有关的信息。
字段number_of_angles描述角度的数量。字段is_seamless_angle_change描述如图60所示的值。字段is_seamless_angle_change描述是否已经在盘上记录每个角度,从而,每个角度都可无缝再现。
下一for循环描述与组成角度的剪辑有关的信息。for循环中的字段Clip_Information_file_name描述与每个剪辑相应的剪辑信息文件(扩展名“clpi”)的字段名字符串,其中,播放项目以一对一的关系引用每个剪辑。字段ref_to_STC_id描述在播放项目所引用的每个剪辑的序列STC_sequence。
与不是角度播放项目的常规播放项目相同,已经在块Playltem()的前半部分中定义与值angle_id=0相应的角度。在for循环中定义在值angle_id=1之后的角度。for循环不包含与值angle=0相应的角度。
图61示出描述块SubPlayItem()的结构实例的语法。字段length描述就在字段length之后直到块SubPlayItem()结束之前的字节长度。字段Clip_Information_file_name描述与剪辑相应的剪辑信息文件(扩展名“clpi”)的文件名字符串,其中,子播放项目以一对一的关系引用所述剪辑。
字段Clip_codec_identifier描述子播放项目所引用的剪辑的编码系统。根据实施例,字段Clip_codec_identifier固定为值“M2TS”。
字段is_repeat_flag描述如图62所示的值。字段is_repeat_flag是描述是否不与主播放项目(主路径)同步地重复再现子播放项目。当字段is_repeat_flag的值为“1”时,重复再现子播放项目,直到不与其同步地再现主播放项目为止。当字段is_repeat_flag的值为“0”时,与主播放项目同步地再现一次子播放项目。
如果子播放项目是仅用于音频的子播放项目,那么,当在字段is_repeat_flag中描述“1”时,就可再现BGM(背景音乐)。
字段SubPlayItem_type描述子播放项目具有什么特征。例如,当字段SubPlayItem_type的值为“1”时,它描述子播放项目是仅用于音频的子播放项目。
字段ref_to_STC_id描述播放项目所引用的剪辑的序列STC_sequence。字段SubPlayItem_IN_time和字段SubPlayItem_OUT_Time描述在序列STC_sequence中子播放项目的起点和终点的印时戳pts(presentation_time_stamp)。
当前述字段is_repeat_flag的值为“0”并且它表示与主播放项目同步地再现子播放项目时,字段sync_PlayItem_id和字段sync_start_PTS_of_PlayItem描述子播放项目从何时与主播放项目同步再现。
如图63所示,字段sync_PlayItem_id描述主路径的播放项目(PlayItem=1)。字段sync_start_PTS_of_PlayItem描述主播放项目中开始再现子播放项目的时间(t1)。字段SubPlayItem_IN_time和字段SubPlayItem_OUT_time描述再现子播放项目点击的时间。
图64示出描述文件“zzzzz.clpi”的结构实例的语法。在图53中,文件“zzzzz.clpi”具有信息的功能块。字段type_indicator描述文件的字符串。字段version_number描述文件的版本。字段SequenceInfo_start_address、字段ProgramInfo_start_address、字段CPI_start_address、以及字段ClipMark_start_address描述各个块的开始位置。
图65示出块ClipInfo()的结构实例的语法。字段length描述就在字段length之后直到块ClipInfo()结束之前的长度。
字段application_type描述剪辑AV流(扩展名“m2ts”)如何多路复用。字段application_type描述如图66所示的值。字段application_type描述剪辑AV流是普通视频流还是适用于静止图象的已被多路复用的流。
更具体地,在实例中,字段application_type的值为“1”,并且它描述相应剪辑AV流的文件遵循根据本实施例的BDMV传输流的规则。利用剪辑AV流,再现普通运动图象。
当字段application_type的值为“2”时,它描述相应剪辑AV流的文件遵循静止图象的BDMV传输流的规则,其中,静止图象与音频的再现同步。剪辑AV流是例如根据MPEG2格式的文件。在剪辑AV流中,已经多路复用视频数据和音频数据。视频数据具有以下结构:MPEG2的I图象布置为静止图象。结果,可在音频的时基上,象放映幻灯片一样再现静止图象。此种再现称作时基幻灯片演示。
当字段application_type的值为“3”时,它描述相应剪辑AV流的文件遵循静止图象的BDMV传输流的规则,其中,静止图象的再现与音频不同步。音频数据和视频数据构造为不同的文件。在再现音频数据的同时,按以任意间隔或用户所指定间隔改变静止图象的方式显示视频数据。视频数据可例如按MPEG2的I图象布置为静止图象的方式构造。此种再现称作目录幻灯片演示。
当字段application_type的值为“0”时,相应的剪辑AV流不遵循BDMV传输流的规则。
假设适于显示静止图象的多路复用允许易于实现诸如静止图象幻灯片演示的应用。在此应用中,当一个静止图象与叠加的小标题和图形数据封装-多路复用时,容易阅读它们。
当静止图象以与普通运动图象相同的方式与小标题和图形数据多路复用时,与静止图象一起显示的小标题与前一静止图象的图象数据多路复用(即发生所谓的多路复用相位差)。结果,除非长时间读取流数据,否则不能显示叠加有小标题和图形数据的静止图象。
根据本发明的实施例,用于视频数据和小标题的图形数据包含在MPEG-2系统标准的TS(传输流)包中。一个TS数据包由188个字节组成。划分前述视频数据和图形数据,以使它们包含在TS数据包中。当与特定静止图象数据(称作图象P1)相应的小标题数据包在下一静止图象(称作图象P2)的数据包之后时,为了显示与图象P1相应的小标题,应该已经读取图象P2的数据。
当特定的静止图象只与有关的小标题和图形多路复用(封装)时,可创建不受其它数据影响的流。当对每幅静止图象重复此操作并连接流时,可得到一个其中每幅静止图象数据(与有关的小标题和图形数据)串联的流。以此方式多路复用的流称作静止图象BDMV流。
有两种类型的静止图象BDMV流,它们是时基幻灯片演示和目录幻灯片演示。根据实施例,两种类型的区域在于字段application_type的数值不同。
当静止图象与有关的小标题和图形数据被封装和记录时,提高静止图象被改变和再现的可访问性。
回到图65,字段Clip_stream_type描述剪辑AV流的类型。字段Clip_stream_type的值可固定为“1”,它表示在只再现盘标准中的普通剪辑。字段TS_recording_rate描述剪辑AV流的记录速率,以字节/秒为单位。字段num_of_source_packets描述包含在剪辑AV流中的数据包的数量。字段BD_system_use和块TS_type_info_block()与本发明无关。省略这些描述。
图67示出描述块SequenceInfo()的结构实例的语法。字段length描述就在字段length之后直到块SequenceInfo()结束之前的字节长度。字段num_of_ATC_sequence描述已经在连续的时间周期内记录的序列ATC_sequence的数量。当使用只再现介质时,由于序列ATC_sequence的数量为“1”,因此,省略字段num_of_ATC_sequence的描述。字段SPN_ATC_start用数据包编号描述序列ATC_sequence的开头。当序列ATC_sequence的数量为“1”时,序列ATC_sequence的开头与剪辑AV流文件的开头一致。因而,字段SPN_ATC_start的值为“0”。
字段num_of_STC_sequence描述序列ATC_sequence的序列STC_sequence的数量。当使用只再现介质时,由于序列STC_sequence的数量为“1”,因此省略其描述。字段offset_STC_id描述固定值“0”。字段PCR_PID描述TS数据包的PID,其中,TS数据包具有MPEG2TS的PCR(程序时钟基准)。字段SPN_STC_start描述用数据包编号描述序列STC_sequence的开头。当序列STC_sequence的数量为“1”时,由于字段SPN_STC_start与剪辑AV流文件的开头一致,因此,字段SPN_STC_start的值为“0”。字段presentation_start_time和字段presentation_end_time描述剪辑AV流的有效范围。可从播放项目引用在字段presentation_start_time和字段presentation_end_time中描述的范围。
图68示出描述块ProgramInfo()的结构实例的语法。可记录介质的块ProgramInfo()的语法结构可应用到只再现介质上。由于在块ProgramInfo()没有新结构,因此,省略详细描述。在块ProgramInfo()中,作为限制,可在字段num_of_program_sequences中描述值“1”并在字段num_of_groups中描述值“1”。
图69示出描述块StreamCodingInfo()的结构实例的语法。与块ProgramInfo()相同,块StreamCodingInfo()具有与可记录介质相似的语法结构。对于视频数据,块StreamCodingInfo()描述视频数据格式、帧频和纵横比的属性信息。对于音频数据,块StreamCodingInfo()描述取样频率等的属性信息。当可记录介质的语法结构应用到只再现介质上时,如图69所示,必需在块StreamCodingInfo()上增加描述小标题和音频流语言的字段。当根据播放器的设置而选择最适合的音频和小标题语言时,此信息是有效的。
图70示出描述块CPI()的结构实例的语法。通常,在编码流中,如已进行帧间压缩的MPEG流,可在有限的位置上,如GOP(图象组)的开头,对流进行解码。CPI(特征点信息)是数据库,该数据库是与数据解码开始位置有关的信息集。数据库与文件的再现时间和地址相关。CPI把描述数据解码开始位置的信息制成表格。
当随时再现数据时,通过用再现时间查询作为此种数据库的CPI时,可获得文件中再现位置的地址。由于此地址是可对数据解码的开头,因此,播放器可从它读取数据并且迅速地显示图象。
在CPI中描述数据解码开始位置(在此实例中,GOP的开始位置),并且称作EP(入口点)入口。
字段CPI_type描述CPI的类型。字段CPI_type描述如图71所示的值。根据本发明,字段CPI_type的类型描述只再现介质的CPI。实际上,字段CPI_type的值为“8”,它描述BDMV的EP入口映射(EP_map_type_for_BDMV)。
图72示出描述只再现介质EP入口的块EP_map的数据结构实例的语法,换句话说,块EP_map即为前述字段CPI_type的EP_map_type_for_BDMV()。映射EP_map是使用于GOP开始位置的文件的再现时间与地址相关联的表格。在图72所示实例中,创建数据库,作为使用于GOP开始位置的MPEG的PTS(表现印时戳)和SPN(源数据包编号)相关联的表格。SPN表示与自文件开头的字节地址相应的源数据包编号。
用于可记录介质的映射EP_map的结构与用于只再现介质的映射EP_map的结构几乎相同。根据实施例,为了减少数据量并加速搜索,为各个值执行粗略搜索和精细搜索。因而,映射EP_map的内部结构划分为两个与粗略搜索和精细搜索相应的for循环。从而,用于再现型盘的映射EP_map比“使GOP的第一I图象的PTS与文件中地址相关联”的简单表格更复杂。
字段EP_fine_table_start_address描述用于精细搜索的表格的位置。下一for循环描述用于粗略搜索的表格。该for循环描述字段PTS_EP_coarse和SPN_EP_coarse。字段ref_to_EP_fine_id描述从粗略搜索查询的用于精细搜索的表格编号。字段PTS_EP_coarse和SPN_EP_coarse描述PTS和SPN的更高位。
在该for循环之后是插入字。在插入字之后是描述字段PTS_EP_fine和SPN_EP_fine的for循环。另外,此for循环描述标记is_angle_change_point和字段I_end_position_offset。标记is_angle_change_point描述:当剪辑AV流具有多角度结构时,每个EP点是否与角度可变点相对应。
2-9.解码器模型
图73A、图73B和图73C为示出根据本发明实施例的播放器解码器100的结构实例的功能框图。播放器解码器100对从装入到驱动器(未示出)中的盘再现的数据进行解释,输出AV流,并且允许用户互动地操作输出AV流。
播放器解码器100的所有操作由CPU(中央处理单元)(未示出)控制。播放器解码器100各个部分的流和数据流由CPU监视和控制。
假设:除非另外说明,否则由播放器解码器100执行用原始命令描述的剧本。
当盘装入到驱动器(未示出)中时,如上所述,再现文件“scenario.hdmv”和文件“entrylist.data”。根据文件“scenario.hdmv”和文件“entrylist.data”的描述,从盘读取其它需要的文件,从而再现记录在盘上的内容。例如,根据文件“scenario.hdmv”和文件“entrylist.data”的描述,从盘读取在运动图象平面10上显示的运动图象数据、在小标题平面11和图形平面12上显示的图象数据、以及播放列表文件等等。
在以下描述中,在从盘读取的这些数据之间,应该连续处理的流,如运动图象数据、子图(小标题数据)和声音数据,称作实时流。相反,不需要连续处理的非实时数据,如剧本文件和播放列表文件,称作存储对象。存储对象储存在存储器等中,并且在其上扩展。储存在存储器中的存储对象在需要时进行扩展。
播放器解码器100具有两个输入频道系统:频道(1)和频道(2)。存储对象输入到输入频道(1)的输入端101。实时流输入到输入频道(2)的输入端202。可替换地,存储对象可输入到输入端202。根据实施例,输入到输入端202的实时流和一部分存储对象例如为MPEG2 TS。
输入到输入端101的存储对象不局限于从盘读取的数据。例如,播放器解码器100设置有网络连接功能。此时,通过网络获得的存储对象输入到输入端101。用于按钮图象的图象数据、以及新剧本数据等通过网络获得,并从输入端101输入。可替换地,诸如小标题数据的数据通过网络获得,并从输入端101输入,其中,小标题数据被处理成实时流。
输入到输入端202的实时流不局限于MPEG2TS。只要实时流能以数据包为单位进行传输并且与视频数据、音频数据、静止图象数据等多路复用,就可输入具有其它格式的流。此时,后述PID滤波器110用作对视频数据、音频数据、静止图象数据等进行多路分离的多路分离器。
当驱动器中盘的转速例如增加两倍并且盘的读取传输速率增加时,基于分时而执行从盘对两个驱动器频道系统(1)和(2)的读取操作。
下面,描述输入频道系统(1)。输入到输入端101的存储对象输入到开关电路102。当输入ECMA脚本或HTML文件等的程序代码作为存储对象时,开关电路102选择输出端102A。输入的程序代码储存在代码缓冲器104中。
当输入作为存储对象的图象数据时,开关电路102选择输出端102B。结果,输入的图象数据输入到开关电路103。当输入到输入端202的实时流不包含在小标题平面11或图形平面12上显示的图象数据时,开关电路103选择输入端103A。从开关电路102输入的图象数据储存在内容缓冲器105中。
同样,当在输入到输入端202的实时流中包含在小标题平面11或图形平面12上显示的图象数据时,开关电路103选择输入端103B。结果,图象数据储存在内容缓冲器105中。在必要时,读取储存在代码缓冲器104和内容缓冲器105中的存储对象,并且提供给多媒体引擎106。
储存在内容缓冲器105中的存储对象的图象数据还通过开关电路107和108分别提供给图形解码器A 116和图形解码器B 117。
多媒体引擎106包括XML分析器106A、脚本解释器106B和图形渲染器106C。多媒体引擎106可由独立的硬件组成。可替换地,多媒体引擎106可通过CPU(未示出)执行的预定程序的过程来实现。
XML分析器106A具有分析XML(可扩展标记语言)文档的功能。另外,XML分析器106A还可分析HTML文档。XML分析器106A分析的HTML文档转换为可由播放器解码器100执行的格式。脚本解释器106B分析ECMA脚本,并且把它转换为可由播放器解码器100执行的格式。图形渲染器106C对图象数据进行解码,并且获得可在小标题平面11和图形平面12上扩展的格式。
多媒体引擎106用缓冲器109的工作存储器执行用于XML分析器106A、脚本解释器106B和图形渲染器106C的过程。例如,XML分析器106A和脚本解释器106B使用缓冲器109的代码缓冲器109a。图形渲染器106C使用缓冲器109的图形缓冲器109D。缓冲器109进一步包括字体缓冲器109B和树形缓冲器109C,其中,字体缓冲器109B储存用于显示字符串的字体数据,树形缓冲器109C以分层树形结构储存XML分析器106A对HTML文档的分析结果。
当例如使用HTML文档和ECMA脚本的组合作为剧本叙述语言时,从代码缓冲器104读取ECMA脚本,并且根据ECMA脚本的描述而用于多媒体引擎106。如果必要,多媒体引擎106从代码缓冲器104读取另一ECMA脚本和HTML文档,并且从内容缓冲器105读取图象数据。储存在代码缓冲器104和内容缓冲器105中的数据可一直储存在代码缓冲器104和内容缓冲器105中,直到所述数据不需要为止。因而,如果必要,可重复地读取储存在代码缓冲器104和内容缓冲器105中的数据。
另外,多媒体引擎106对多种类型的输入数据执行多路分离处理、以及JavaVM(Java(注册商标)虚拟机器)功能等。而且,多媒体引擎106从遥控器、或点击器件等接收用户的输入,并且根据用户的输入而执行处理。用户的输入提供给在后面描述的图形解码器A 116、图形解码器B 117、音频解码器118、MPEG视频解码器120和系统解码器121。
图形渲染器106C处理的图象数据分别通过开关电路130和131而提供给小标题平面132和图形平面133。在此实例中,假设提供给小标题平面132和图形平面133的图象数据具有PNG格式。图象数据提供给平面132和133的时间由多媒体引擎106控制。
小标题平面132和图形平面133分别与前述的小标题平面11和图形平面12相对应。运动图象平面134与前述运动图象平面10相对应。小标题平面132、图形平面133和运动图象平面134中的每一个都例如由帧存储器组成。
多媒体引擎106向后述表现处理器155提供控制信号,该信号选择运动图象平面134、小标题平面132、和图形平面133中的一个。同样,多媒体引擎106向后述表现处理器157提供控制音频流输出的控制信号。
下面描述输入频道(2)的系统。作为MPEG2TS输入给输入端202的实时流提供给PID滤波器110。PID滤波器110从MPEG2TS传输流提取PID(数据包标识符),并且检测传输包中所包含的流的属性。PID滤波器110根据所述流的属性而把输入的实时流分离成与每个传输包相应的系统。
当传输包是其中包含存储对象的图象数据的数据包时,传输包临时储存在缓冲器TBn 11A中。在预定时间读取传输包,并且通过已经选择的输入端103B输入到开关电路103中。随后,传输包通过开关电路103而储存在内容缓冲器105中。
当PID滤波器110根据PID而确定传输包包含子图数据时,传输包临时储存在缓冲器TBn 111B和缓冲器Bn 112B中。在预定时间读取传输包,并且通过已经选择的输入端107B输入到开关电路107中。传输包通过开关电路107而提供给图形解码器A 116。
图形解码器A 116从提供的传输包除去头部信息,对包含在传输包中的子图数据进行解码,并且获得用于小标题等的图象数据。图象数据输入到开关电路130的输入端130B,并且通过开关电路130而扩展到小标题平面132。
当通过网络获得小标题数据并接着输入到输入端101时,小标题数据通过开关电路102和开关电路103而储存在内容缓冲器105中。选择开关电路107的输入端107A。结果,小标题数据从内容缓冲器105提供给图形解码器A 116。
当PID滤波器110根据PID而确定传输包包含图形数据时,传输包临时储存在缓冲器TBn 111C和缓冲器Bn 112C中。在预定时间读取传输包,并且通过已经选择的输入端108B输入到开关电路108中。传输包通过开关电路108而提供给图形解码器B 117。
图形解码器B 117从提供的传输包除去头部信息,对包含在传输包中的图形数据进行解码,并且获得图形数据。图象数据在预定时间输入到开关电路131的输入端131B,并且通过开关电路131而扩展到图形平面133。
图形解码器A 116的功能与图形解码器B 117的功能没有很大的不同。这意味着有两个独立操作的图形解码器系统。换句话说,讨论可对小标题数据和图形数据单独解码。在实际实施时,基于分时而使用高速图形解码器,就好象有两个虚拟图形解码器系统存在。
当PID滤波器110根据PID而确定传输包包含音频数据时,传输包临时储存在缓冲器TBn 111D和缓冲器Bn 112D中。在预定时间读取传输包,并且提供给音频解码器118。包含在传输包中的音频数据例如根据基于MPEG的系统进行压缩编码。
音频解码器118还例如具有线性PCM(脉冲编码调制)音频解码器119。音频解码器118从输入的传输包除去头部信息,对包含在传输包中的压缩编码音频数据进行解码,并且获得线性PCM音频数据。
从音频解码器118输出的线性PCM音频数据输入到用于音频的表现处理器157。在表现处理器157中,在多媒体引擎106的控制下,在线性PCM音频数据上增加声音效果,并接着从输出端158获得该声音效果。
当PID滤波器110根据PID而确定传输包包含运动图象数据时,传输包临时储存在缓冲器TBn 111E、缓冲器MBn 113和缓冲器EBn114中,在预定时间读取传输包,并且提供给MPEG视频解码器120。包含在传输包中的运动图象数据已例如根据MPEG2系统进行压缩编码。
MPEG视频解码器120从提供的传输包除去头部信息,对已根据MPEG2系统压缩编码的运动图象数据进行解码,并且获得基带运动图象数据。
从MPEG视频解码器120输出的运动图象数据输入到开关电路124的输入端124A。另外,运动图象数据通过缓冲器123输入到开关电路124的输入端124B。在开关电路124中,在预定时间选择输入端124A和124B。输出的运动图象数据的运动图象平面134上扩展。
当PID滤波器110根据PID而确定传输包包含系统信息时,传输包通过缓冲器TBn 111F和Bsys115提供给系统解码器121。系统解码器121从提供的传输包除去头部信息,并且从它提取系统信息。系统信息例如提供给CPU(未示出)。
小标题平面132上的图象数据提供给与前面的调色板22相应的调色板150。调色板具有256色。用索引查询调色板。输出RGB数据。另外,提取透明度数据α1。RGB数据通过与前述RGB/YCbCr转换电路29相应的RGB/YCbCr转换电路151而转换为YCbCr数据。YCbCr数据和透明度数据α1提供给表现处理器155。
图形平面133上的图象数据提供给与前述调色板26相应的调色板152。调色板具有256色。用索引查询调色板。结果,输出RGB数据。另外,提取透明度数据α2。RGB数据通过与前述RGB/YCbCr转换电路27相应的RGB/YCbCr转换电路153而转换为YCbCr数据。YCbCr数据和透明度数据α2提供给表现处理器155。
运动图象平面134的输出通过上/下转换器154提供给表现处理器155。
上/下转换器154是转换图象分辨率的电路。上/下转换器154例如把具有高分辨率的HD(高清晰度)图象转换为具有标准分辨率的SD(标准清晰度)图象。
表现处理器155使用在图22中描述的小标题平面11(小标题平面132)的图象数据的透明度数据α1与图形平面12(图形平面133)的透明度数据α2而执行α混合处理。
表现处理器155根据已设置到小标题平面132的图象数据上的透明度α1而结合运动图象平面134的图象数据与小标题平面132上的图象数据。另外,表现处理器155根据已设置到图形平面133的图象数据上的透明度α2而把已结合运动图象平面134和小标题平面132的图象数据与图形平面133的图象数据结合在一起。从输出端156获得以下图象数据,该数据已结合图形平面133的图象数据、小标题平面132的图象数据(小标题数据)和图形平面134的图象数据。
表现处理器155可基于实时而执行图象数据的效果处理。
在前面的描述中,图形解码器A 116把小标题解码成子图数据,并且把解码数据提供给小标题平面11。应该指出,可用其它方法提供小标题。例如,小标题可作为字符代码如文本数据而提供。通过查询储存在字体缓冲器109B中的字体数据,字符代码转换为用于字符串的位图数据
字体数据例如从盘再现,并作为存储对象而输入到输入端101。随后,字体数据通过开关电路102储存到代码缓冲器104中。随后,字体数据从代码缓冲器104通过多媒体引擎106而提供字体缓冲器109B。
用于小标题的字符代码例如从盘再现,从输入端101输入作为存储对象,并且通过开关电路102和103而储存在内容缓冲器105中。随后,字符代码从输入端202输入,作为实时流,并且通过PID滤波器110和缓冲器TBn 11A而提供给开关电路103,而且储存在内容缓冲器105中。从内容缓冲器105读取字符代码并提供给多媒体引擎106。
字符代码的显示时间由程序控制。多媒体引擎106根据在字符代码显示时刻显示的字符代码而查询字体缓冲器109B,并且选择相应的字体数据。当字符代码为[0x41]、[0x42]、[0x43]、...(这里,在十六进制记数法中,在[0x]之后是数字值)时,选择用于字符[A]、[B]、[C]、...的字体数据。基于字体数据而改变文本风格和字形,以便产生具有程序所指定尺寸的位图数据(称作渲染)。
产生的位图数据通过开关电路130而提供给小标题平面132。这是因为小标题应该与运动图象平面134上的运动图象同步。
字符代码可由取代多媒体引擎106和系统CPU的专用硬件进行渲染。字符代码引用的字体数据不局限于从盘再现的字体数据。可替换地,字体数据可通过网络获得。字体数据可预先储存在播放器硬件的ROM(只读存储器)中。用户能选择字体数据的类型。
当提供小标题作为字符代码时,所显示小标题的数据量比作为图象数据提供的小标题数据的数据量少很多。
在前面描述中,播放器解码器100的每个部分都由硬件组成。然而,本发明不局限于此实例。例如,播放器解码器100可通过软件处理来实现。在此情况下,播放器解码器100可在计算机上操作。播放器解码器100可由硬件和软件的组合来实现。例如,音频解码器118和MPEG视频解码器120可由硬件组成。播放器解码器100的其余部分可由软件组成。
在记录介质如CD-ROM(紧凑盘-只读存储器)上记录以下程序并随盘提供,所述程序使计算机执行只由软件或由硬件和软件组合构成的播放器解码器100。CD-ROM装入到计算机的CD-ROM驱动器中。记录在CD-ROM上的程序安装到计算机中。结果,可在计算机上执行前述处理。由于计算机的结构众所周知,因此,省略其描述。
2-10.关于按钮
下面描述根据本发明实施例的用户界面。图74为示出显示在图形平面12上的按钮的状态变化实例的示意图。有两种按钮显示状态,它们是:在屏幕上显示按钮的按钮显示状态;以及在屏幕上不显示按钮的按钮不显示状态。按钮不显示状态改变为按钮显示状态。在清除按钮之后,按钮显示状态改变为按钮不显示状态。进一步地,按钮显示状态具有三种状态:正常状态、选择状态和执行状态。按钮显示状态可在三种状态之间变化。在三种状态之间按钮显示状态可按一个方向改变。
接下来,结合图25详细描述按钮显示状态的状态变化。当盘装入到播放器或当用户按下遥控器的菜单键时,显示菜单屏幕60。当显示菜单屏幕60时,按钮62A、62B、62C、63D、64、和65的按钮显示状态从不显示状态改变为显示状态。通常,按钮62A、62B、62C、63D、64、和65中的一个已经置于选择状态。现在,假设按钮62A置于选择状态,而其它按钮置于正常状态。
当用户例如操作遥控器的箭头键时,一个按钮(如按钮62A)从正常状态改变为选择状态。另外,按钮62A从选择状态改变为正常状态。光标根据用户的操作而移动。当用户操作遥控器的OK键时,按钮62B从选择状态改变为执行状态。结果,执行分配给按钮62B的播放器操作。
如上所述,用使用原始命令的编程语言和诸如ECMA脚本的脚本语言描述播放器操作。播放器操作的程序和脚本记录在盘上。播放器操作的程序和脚本可作为独立文件记录在盘上。可替换地,对于后面描述的图形对象,播放器操作的程序和脚本可与剪辑AV流文件多路复用。播放器操作的程序和脚本通过网络下载到播放器的内存或存储器件中。
下面描述构成此菜单屏幕的按钮图象数据以及与图象数据有关的控制信息的数据结构。现在,考虑除运动图象之外显示的小标题和图形(静止图象),其中,运动图象组成记录在盘上的内容主要部分。显示在屏幕上的组元如小标题和图形被认为是对象。对象的类型分为三种类型:小标题、同步图形和异步图形。
小标题与运动图象同步显示,就象电影的小标题一样。小标题是与用户例如通过遥控器的输入无关的图象组元。图形是可接受用户输入的图象组元,如菜单屏幕上的按钮。图形分为两种类型:同步图形和异步图形。同步图形是与运动图象同步的图象组元。同步图形例如为分支选择屏幕,其中,在再现内容主要部分的同时,在特定时刻显示分支选择屏幕。异步图形为与正在再现的内容主要部分不同步显示的图象组元。异步图形的实例为:当盘装入到播放器中时初次显示的菜单屏幕;以及根据用户输入而显示的屏幕。由在JavaVM上操作的Java应用程序显示的图象组元与根据浏览器软件上HTML文件的叙述而显示的图象组元是异步图形。
在运动图象平面10上显示的每个图象组元与主要图象的关系中,与主要图象同步地显示小标题和同步图形。因而,小标题和同步图形是同步类型。另一方面,由于异步图形不与主要图象同步显示,因此,它们是其名称所隐含的异步类型。
可根据平面而对小标题和图形进行分类。在小标题平面11上显示小标题。在图形平面12上显示同步和异步图形。
由于在显示主要运动图象的同时显示小标题和同步图形,因此,优选它们具有公共数据结构。具有公共数据结构的小标题和同步图形以下称作图形对象。由于图形对象总是与正在再现的运动图象同步显示,因此,当它们与运动图象多路复用时,它们容易被处理。
图76A、图76B和图76C示出根据本发明实施例的图形对象200的数据结构实例。如图76A所示,图形对象200由四个区域组成:图形对象头部201、显示控制命令表202、PNG数据区203和声音数据区204。
在以下实例中,假设被处理为图形对象200的图象数据具有PNG格式并且图象数据为PNG图象数据。可替换地,图形对象200可以是:另一格式图象数据,如具有JPEG格式的位图数据;根据扫描宽度压缩方法压缩的图象数据;或不进行压缩编码的位图数据。为方便起见,图象数据表述为PNG图象、或PNG图象数据等。
在图76A、图76B和图76C中,图形对象头部201描述表示图形对象200的属性的信息。图形对象200的属性例如为:图形对象200的数据大小;图形对象200所具有的PNG图象数量;用于图形对象200所共同使用的PNG图象数据的调色板数据;以及标识图形对象200的标识信息。标识信息例如为唯一分配给每个图形对象200的编号。图形对象头部201进一步描述另一信息。
显示控制命令表202描述控制PNG图象显示所必需的信息,如图形对象200所具有的PNG图象的显示位置及其显示开始时间和显示结束时间。
PNG数据区203描述已根据PNG格式压缩编码的图象数据(该图象数据以下称作PNG数据)。PNG数据区203可具有多个PNG数据203A、203B、...、203n。在PNG数据区203中描述的PNG数据的数量在图形对象头部201中描述。
假设在PNG数据区203中描述的多个PNG数据203A、203B、...、203N是强相关的图象,如一组用于构成动画的多个静止图象或所显示按钮的三种状态的图象。当这些PNG数据203A、203B、...、203N分组为一个图形对象时,PNG图象容易被处理。
后面描述声音数据区204。
图形对象200具有描述图形对象200显示时间的时间信息。在实时流作为MPEG2TS传输的实例中,在MPEG2(运动图象专家组2)中定义的pts(表现印时戳)用作时间信息。pts是被再现的输出的时间管理信息。pts由90kHz的时钟测量,作为具有33位长度的值。当MPEG系统的基准解码器的STC(系统时钟)与pts一致时,再现相应的访问单元并输出。可在pts代表的时间之后显示一个图形对象200。在pts代表的时间之后,用显示控制命令开启和关闭图形对象200的显示。由于用显示控制命令管理图形对象200的显示,因此,在关闭图形对象200的显示之后,可显示相同的图形对象200。
图76B示出小标题的图形对象200的实例。PNG数据区203描述小标题的图象,作为PNG数据(1)203A-1。当图形对象200是小标题时,图形对象200只需要PNG数据(1)203A-1。当在显示控制命令表202上增加使显示属性(透明度、显示颜色等)改变的命令时,不需改变PNG数据(1)A-1本身就可改变PNG数据(1)A-1的显示。
通过在显示控制命令表202上增加使PNG数据(1)A-1的透明度改变的显示控制命令,例如可对小标题增加特殊效果,如不改变图象内容的淡入/淡出。当执行淡入/淡出时,不必改变PNG数据(1)本身。同样,通过在显示控制命令表202上增加使PNG数据(1)A-1所引用的调色板数据改变的显示控制命令,可只改变显示颜色,而不必改变PNG数据(1)A-1本身。
当对小标题应用诸如图象变化的动画的效果时,在一个图形对象200中描述与动画的各个动作相应的多个PNG数据(2)B-1、PNG数据(3)C-1、PNG数据(4)D-1、...,用图76B中示出的虚线表示。另外,在一个图形对象200中,不同语言小标题如日语小标题和英语小标题的PNG数据可描述为PNG数据(1)A-1、PNG数据(2)B-1、...。
图76C示出组成按钮的图形对象200的实例。如上所述,按钮具有三种类型的状态:正常状态、选择状态和执行状态。可用与三种类型状态相应的不同图象显示按钮。当用与三种类型状态相应的不同图象显示按钮时,必需准备三个按钮图象的数据。三个按钮图象的数据被处理为一个图形对象200。图形对象200的PNG数据区203描述PNG数据203A-2、203B-2和203C-3,其中,利用这些数据分别显示处于正常状态、选择状态和执行状态的按钮。
当图形对象200只有用于小标题的PNG数据(1)A-1时,如图76B中实线所示,在图形对象200的显示控制命令表202中描述用于PNG数据(1)203A-1的显示控制命令。当图形对象200具有多个PNG数据203A-2、203B-2和203C-2时,必需确定在显示控制命令表202中为多个PNG数据203A-2、203B-2和203C-2描述的显示控制命令。
当图76C所示图形对象200的按钮的初始状态被指定为选择状态时,首先显示并放置在PNG数据区203开头的按钮图象不应该是用于正常状态的PNG数据203A-2,而是用于选择状态的PNG数据203B-2。根据本发明的第一实施例,在图形对象200外面执行显示控制。
每个按钮的初始状态,显示开始和显示停止,以及在每个按钮的执行状态中执行的程序等由图形对象200的外部脚本程序如前面的ECMA脚本或JavaScript指定。当用户操作遥控器的箭头键并移动光标时,改变用于按钮显示的PNG数据。在此情况下,播放器根据用户的输入而改变每个按钮的PNG数据。
根据本发明的实施例,图形对象200划分为在MPEG2中规定的数据包,与剪辑AV流多路复用,并且作为剪辑AV流文件记录在盘上。如图77所示,划分图形对象200,并包含在MPEG2中所规定的PES(打包基本流)数据包210、210、...中。此时,在每个PES数据包210、210、...的有效载荷的开始处包含图形对象头部201、显示控制命令表202和各个PNG数据203A、203B、...、203n的开头。结果,当再现图形对象200时,容易搜索它的每个数据。
被划分并包含在PES数据包210、210、...中的图形对象200进一步划分为具有188字节固定数据大小的TS数据包,并且与运动图象数据和声音数据流如剪辑AV流多路复用。
图78为示出对图形对象200解码的图形对象解码器模型240的结构实例的功能框图。图形对象解码器模型240主要包括在图73A、图73B和图73C中描述的播放器解码器100的多媒体引擎106和图形解码器A 116。由于图形解码器B 117的功能与图形解码器A 116的相同,因此,以下只描述图形解码器A 116的功能。在图78中,为简单起见,与图73A、图73B和图73C中相似的部分用相似的参考号表示,并且省略它们的描述。由于图78在功能上描述图形对象解码器模型240比图73A、图73B和图73C描述得更多,因此,如果必要,与这些附图所示结构比较着描述图形对象解码器模型240。
剪辑AV流从端子202提供给PID滤波器110。PID滤波器110用作MPEG TS(传输流)的多路分离器,并且根据TS的PID而从MPEG TS提取运动图象数据、音频数据和图形对象200。运动图象数据提供给作为视频缓冲器的缓冲器TBn 111E。音频数据提供给作为音频缓冲器的缓冲器111D。图形对象200提供给作为图形对象(在图78中用“GOBJ”表示)输入缓冲器的缓冲器TBn 111B。
从缓冲器TBn 111B读取图形对象200,并提供给GOBJ分析器224。GOBJ分析器224例如为图73所示图形解码器A 116的功能之一。GOBJ分析器224从提供的图形对象200读取图形对象头部201,从图形对象头部201提取调色板数据,并且从图形对象头部201分离显示控制命令表202、PNG数据区203和声音数据区204。调色板数据和显示控制命令表202提供给命令处理器/图形渲染器225。PNG数据区203的PNG数据203A、203B、...临时储存在PNG解码器缓冲器226中。PNG解码器缓冲器226与图73A、图73B和图73C中示出的缓冲器Bn 112B相对应。
声音数据区204的声音数据204A、204B、...204n提供给命令处理器/图形渲染器225,并且储存在它的各个缓冲器(未示出)中。
储存在PNG解码器缓冲器226中的PNG数据203由PNG解码器227解码,并作为位图数据输出,其中,PNG解码器227是图形解码器A 116的功能之一。位图数据储存在对象缓冲器228中。对象缓冲器228与布置在图73A、图73B和图73C所示解码器116中的缓冲存储器相对应。当PNG数据203用软件解码时,对象缓冲器228与图73A、图73B和图73C所示图形缓冲器109D相对应。
命令处理器/图形渲染器225根据在显示控制命令表202中描述的显示控制命令而读取储存在对象缓冲器228中的位图数据,并且在指定时间把位图数据传送到平面缓冲器229。平面缓冲器229例如与图73A、图73B和图73C所示小标题平面132和图形平面133相对应。可为小标题和除小标题之外的图形对象布置平面缓冲器229A和229B(未示出)。可替换地,小标题平面132和图形平面133可以是与平面缓冲器229不同的区域。
命令处理器/图形渲染器225把从GOBJ分析器224提供的调色板数据提供给与图73A、图73B和图73C所示调色板150相应的公共调色板表230。命令处理器/图形渲染器225具有图73A、图73B和图73C所示多媒体引擎106的一部分功能和图形解码器A 116的一部分功能。
命令处理器/图形渲染器225根据从GOBJ分析器224提供的在显示控制命令表202中描述的显示控制命令而从缓冲器读取声音数据,并且输出声音数据。当储存在图形对象200中的声音数据204A、204B、...204n已被压缩编码时,它们由命令处理器/图形渲染器225解码并接着输出。
从命令处理器/图形渲染器225输出的声音数据提供给音频混合器231,并输出给表现处理器157。当另一类型的声音数据输入到音频混合器231时,这两种声音数据以预定的比例混合,并接着输出。
当图形对象200包括按钮时,在图形对象200中包含与三种按钮状态相应的PNG数据203A、203B和203C。PNG数据203A、203B和203C由PNG解码器227解码,并储存在对象缓冲器228中。
通过命令处理器/图形渲染器225接收例如从用户遥控器的输入。命令处理器/图形渲染器225根据用户的输入而从对象缓冲器228读取位图,并且把位图传送到平面缓冲器229。当用户的输入导致按钮状态从选择状态改变为执行状态时,有选择性地从对象缓冲器228读取与执行状态的按钮图象相应的位图数据,并且传送到平面缓冲器229。
命令处理器/图形渲染器225可根据显示控制命令而对从对象缓冲器228读取的位图数据执行特殊效果处理,如提取处理。
根据实施例,由于PNG数据一个象素的取样深度为八位,因此,在平面缓冲器229中排列每个象素八位的数据。以显示系统的扫描周期为间隔读取平面缓冲器229的数据,其中,所述显示系统例如对显示器件执行显示处理。从平面缓冲器229读取的位图数据提供给例如与图73A、图73B和图73C所示调色板150相应的公共调色板230。公共调色板230根据调色板索引值而把位图数据转换为实际RGB(4:4:4)的颜色信息,并且从位图数据提取透明度数据α1和α2。RGB(4:4:4)的颜色信息由转换电路(未示出)转换为YCbCr(4:4:4)的颜色信息。YCbCr(4:4:4)的颜色信息与透明度数据α1和α2一起提供给如图73A、图73B和图73C所示的表现处理器155。
通过命令处理器/图形渲染器225实现需要改变调色板和透明度处理的特殊效果,如淡入/淡出,其中,命令处理器/图形渲染器225根据显示控制命令而改变公共调色板230的数据。可替换地,可为小标题和除小标题之外的图形对象200布置公共调色板230A和203B(未示出)。
图79A、图79B、图79C和图79D示出图形对象输入缓冲器(缓冲器TBn 111B、以下称作GOBJ输入缓冲器)、PNG解码器227、对象缓冲器228和平面缓冲器229的存储数据量变化的实例。PNG解码器227表示当它对PNG数据解码时PNG解码器227所用缓冲器的存储数据量。
图79A、图79B、图79C和图79D示出三个图形对象GOBJ#1、GOBJ#2和GOBJ#3中基于时间的数据量变化。图形对象的解码开始时间用MPEG2系统的dts(解码印时戳)表示。对象的有效期的开始时间用pts表示。对象在图形对象头部201中描述的时间presentation_end结束。显示控制命令指定有效期中图象的显示开始和结束。
在图79D中,图形对象GOBJ#1的PNG数据输入到GOBJ输入缓冲器。在GOBJ#1的时间dts,开始PNG数据的解码。在图79C中,PNG数据从GOBJ输入缓冲器传送到PNG解码器227。对PNG数据进行解码,并获得位图数据。实际上,PNG数据临时从GOBJ输入缓冲器移动到PNG解码器缓冲器226。PNG解码器227对储存在PNG解码器缓冲器226中的数据执行解码处理。
由于PNG解码器227具有解码速度的上限,因此,数据从GOBJ输入缓冲器提供到PNG解码器缓冲器226,从而,数据的传输速度不超过PNG解码器227的解码速度。因而,PNG数据以与斜率相应的数据传输速度输入到PNG解码器缓冲器226,图中垂线代表PNG数据到PNG解码器227的传输时间为0的概念模型。
即使PNG数据未完全输入到PNG解码器227,也可开始PNG数据的解码。在图79A、图79B、图79C和图79D所示实例中,在储存在GOBJ输入缓冲器中的对象GOBJ#1已完全传送到PNG解码器227之后,开始把下一对象GOBJ#2的PNG数据输入到GOBJ缓冲器中。
同样,对象GOBJ#2和对象GOBJ#3的PNG数据分别以与特定斜率B和C相应的数据传输速度输入到PNG解码器缓冲器226。实际上,斜率B在多个区域中变化。
当对象GOBJ#1的有效期在GOBJ#1的时间pts开始时,已被解码并储存在PNG解码器缓冲器中的对象GOBJ#1的位图数据传送到对象缓冲器228(图79B)。传送给对象缓冲器228的对象GOBJ#1的有效期持续到GOBJ#1表现结束(GOBJ#1的表现结束)所代表的时间为止。
在对象GOBJ#1的有效期中,当发出GOBJ#1的命令Display ONCmd.(用于GOBJ#1的显示开始命令)时,储存在对象缓冲器228中的对象GOBJ#1的位图数据传送到平面缓冲器229,并且显示(图79A)。如后面所描述的,位图数据到平面缓冲器229的传输速度上限根据总线宽度等的影响而变化。因而,位图数据以例如与特定斜率D相应的传输速度写到平面缓冲器229中。
同样,其它对象GOBJ#2和对象GOBJ#3的位图数据以与斜率E、F和G相应的传输速度传送,并且写到平面缓冲器229中。
连续地显示对象GOBJ#1,直到发出使对象GOBJ#1被清除的GOBJ#1的命令Display OFF Cmd.(用于GOBJ#1的显示结束命令)为止。当发出GOBJ#1的命令Display OFF Cmd.时,放弃储存在平面缓冲器229中的对象GOBJ#1的位图数据,并且在屏幕上清除对象GOBJ#1。
对象GOBJ#2和对象GOBJ#3连续地输入到GOBJ缓冲器中。与对象GOBJ#1一样,在GOBJ#2的时间dts和GOBJ#3的时间dts开始对对象GOBJ#2和对象GOBJ#3的解码。PNG数据提供给PNG解码器227。PNG解码器227用PNG解码器缓冲器对PNG数据解码,并且输出位图数据。在GOBJ#2的时间pts指定对象GOBJ#2的有效期。GOBJ#2的命令Display ON Cmd.(在图79中未示出)导致对象GOBJ#2被显示。对象缓冲器228把位图数据传送到平面缓冲器229。在发出GOBJ#2的命令Display OFF Cmd.之前一直显示对象GOBJ#2。
在图79A、图79B、图79C和图79D中示出的实例中,在用GOBJ#2的命令Display OFF Cmd.(未示出)清除对象GOBJ#2之后,用GOBJ#2的命令Display ON Cmd.再次显示对象GOBJ#2。对象GOBJ#2的位图数据一直储存在对象缓冲器228中,直到对对象GOBJ#2指定GOBJ#1表现结束的有效期结束时间。因而,利用GOBJ#2的命令Display ON Cmd.,可重复显示对象GOBJ#2。
为对象GOBJ#3指定的有效期与为对象GOBJ#2指定的有效期重叠。在此情况下,对象缓冲器228根据其空闲容量而在不同区域中储存多个位图数据。例如,在对象GOBJ#2的位图数据从对象缓冲器228传送到平面缓冲器229并且显示的同时,当对象GOBJ#3的位图数据从对象缓冲器228的不同区域传送时,可同时显示两个位图的数据。
2-11.关于图形的传输速度
下面讨论对播放器实现图形对象解码器模型240(以下称作解码器模型240)的情形。为了允许从与不同播放器兼容的相同盘再现数据,需要对解码器模型240施加预定的限制。例如,解码器模型240具有图形处理容量的上限。因而,当输入超过容量上限的图形数据时,就不可能完美地对图形数据解码。结果,不能正常地显示图形数据。
在标准中规定播放器一方应该具有的最小图形处理容量。另一方面,在内容制造商一方准备可在标准中规定的最小容量中处理的图形。通过使播放器一方具有的图形处理容量与内容制造商一方准备的图形处理容量匹配,可保持再现兼容性。
根据本发明的实施例,在图78中,规定从GOBJ分析器224到PNG解码器缓冲器226的数据传输速度R(1)和从命令处理器225到平面缓冲器229的数据传输速度R(2)。
数据传输速度R(1)规定输入到PNG解码器缓冲器226中的数据的每单位时间的数据传输量。换句话说,图79C中所示的斜率A、B和C与数据传输速度R(1)相对应。数据传输速度R(1)规定解码能力,表示置于PNG解码器缓冲器226下游的PNG解码器227能以单位时间对压缩编码图形数据进行解码的量。因而,通过限制数据传输速度R(1),可防止输入的压缩编码图形数据被有缺陷地解码和不适当地显示。
数据传输速度R(2)规定图象的更新速度。平面缓冲器229与在器件器上实际显示的屏幕相对应。用户看见的图形的更新速度取决于数据对平面缓冲器229的写速度。数据传输速度R(2)规定所有平面,即以[字节/秒]为单位的所有屏幕,的最小更新间隔。图79A所示斜率D、E、F和G与数据传输速度R(2)相对应。
当更新一部分平面时,由于更新的图象数据量较小,因此,它在比数据传输速度R(2)所规定的最小更新间隔更短的时间内更新。更新间隔不总是与被更新的图象数据的数据量成正比。更新间隔在很大程度上受平面上图象数据排列的影响。
下面,结合图80详细描述平面的更新速度。假设:对象缓冲器228储存两个图形对象460和461并且这两个图形对象460和461写到平面缓冲器229中并显示。
从对象缓冲器228读取图形对象460和461,并且提供给命令处理器/图形渲染器225。用前述数据传输速度R(2)限制命令处理器/图形渲染器225的输出,以便限制屏幕上的更新速度(更新间隔)。
然而,即使两个对象具有相同的重写数据量,它们在屏幕上的更新速度取决于它们放在平面的位置以及它们如何变形和移动。因而,难以估计它们的更新速度。在图80所示实例中,图形对象460和461的更新速度取决于它们如何放在平面上,而不取决于它们数据量的总和。
因而,重写到平面缓冲器的数据量被定义为称作窗口的四方形更新区域。因而,可按下述估计最小更新间隔。结果,可提高执行的完成量和再现兼容性。由于定义区域是四方形的,因此,它容易作用到执行图形处理的常规图形处理器上。基于窗口定义的模型以下称作窗口模型。
例如,在图80中,用包含放在平面上的所有图形对象460和461的四方形区域462来更新平面。命令处理器/图形渲染器225根据图形对象460和461的排列信息而形成四方形区域462的图象数据。四方形区域462的图象数据通过传输总线提供给平面缓冲器229。平面缓冲器229根据指定显示位置而用新提供的四方形区域462的数据替代四方形区域462的数据。
由于从命令处理器/图形渲染器225输出的图象数据是位图数据,因此,该图象数据具有与图象面积一致而不是与图象内容一致的数据量。在图80所示实例中,包含图形对象460和461的四方形区域462的图象的数据量可例如用(宽度×高度)象素即(宽度×高度字节)表示。四方形区域462称作窗口。窗口完全包含一个或多个图形对象。当窗口面积最小化时,传输数据量变得最小。
由于对平面缓冲器229的数据传输速度定义为速度R(2)[字节/秒],因此显然,图形对象460和461可在{速度R(2)/(宽度×高度)}秒内更新。在具有预定宽度和预定高度的窗口传送到平面缓冲器229之后,当过去至少{速度R(2)/(宽度×高度)}的时间时,可绘制下一图形对象。当盘制造商一方创建允许以至少前述时间的间隔绘制两个图形对象时,可由任何播放器显示相同的图形。因而,任何播放器都可保持再现兼容性。
如上所述,包围多个同时显示的对象的四方形区域被定义为窗口。通过用传输速度R(2)划分窗口的数据量,可估计窗口的最短更新间隔。
当从平面清除对象时,必需对平面写数据。在前述窗口模型中,可透明地重写整个窗口。用于清除窗口的时间与窗口的最短更新间隔相同。
当创建其中对象在平面上变形或移动的图象时,可估计前述窗口模式的操作速度。例如,当如图81A所示,对象基于时间而变形时,完全包含基于时间变化的对象的四方形区域(Xmin,Ymin),(Xmax,Ymax)被定义为窗口。例如,如图82A所示,当对象基于时间变化时,如图82B所示,完全包含对象运动轨迹的四方形区域(xmin,ymin),(xmax,ymax)被定义为窗口。
可在平面上创建多个(如两个)窗口。此时,相同平面上的多个窗口不相互重叠。
根据本发明的实施例,通过定义前述窗口模型,尽管难以计算图形的显示速度(最小更新间隔),但容易获得显示速度,因为存在许多参数,如将被显示的对象数量、对象形状、对象尺寸、对象基于时间的变形、以及对象的显示位置。因而,盘制造商一方可预先估计图形的操作速度。因而,可提高播放器操作的兼容性。
当估计数据传输速度R(2)时,可决定小标题的动画速度,从而,可保持再现兼容性,在后面描述。
2-12.关于图形对象
下面详细描述图形对象200的结构。图83示出描述图形对象200的结构实例的语法。在图76A中示出的图形对象头部201、显示控制命令表202、PNG数据区203和声音数据区204分别与块GraphicsObjectHeader()、块GOBJCommandTable()、块PNGImageRegion()和块SoundDataRegion()相对应。
块GraphicsObjectheader()以字段length开始。字段length具有用于为0或更大的整数的八位数据长度。字段length描述就在字段length之后直到块GraphicsObjectHeader()结束之前的字节长度。字段presentation_end_time_stamp具有用于为0或更大的整数的33位数据长度。字段presentation_end_time描述图形对象200的有效期结束时间。图形对象的有效期从PES数据包头部的pts直到在此presentation_end_time_stamp中描述的有效期结束时间为止。字段number_of_DispCmds具有用于为0或更大的整数的八位数据长度,并且描述在块GOBJCommandTable()中描述的显示控制命令的数量。字段number_of_PNG_images具有用于为0或更大的整数的八位数据长度,并且描述在块PNGImageRegion()中描述的PNG图象的数量。字段number_of_sound_data具有用于为0或更大的整数的八位数据长度,并且描述块SoundDataRegion()中描述的声音数据的数量。
在块GraphicsObjectHeader()中的块globalPaletteTable()描述共用于图形对象200中的调色板表的信息。在块globalPaletteTable()中描述的调色板表的信息描述成公共调色板表230的内容。字段start_address_of_PNG_image(i)具有用于为0或更大的整数的32位数据长度,并且描述第i个PNG图象的数据PNG_image(i)以距块GraphicsObject()开头的相对数量的字节开始的位置。
字段PNG_file_name(i)描述以字段start_address_of_PNG_image(i)开始的PNG数据的文件名。字段PNG_image(i)的内容是与单个PNG文件的内容相同,其中,字段PNG_image(i)是块PNGImageRegion()中的字段。通过连接一个或多个PNG文件创建块PNGImageRegion()。例如,在图76A中,连接PNG数据203A、203B、...和203n,并且创建块PNGImageRegion()。此时,可在字段PNG_file_name(i)中描述文件名,从而,不丢失文件名。相反,当分解PNGImageRegion()并且获得各个PNG文件时,各个字段PNG_image(i)是具有在字段PNG_file_name(i)中所述文件名的独立文件。
字段start_address_of_sound_data(i)具有用于为0或更大的整数的32位数据长度,并且描述第i个声音数据sound_data(i)以自块GraphicsObject()开头的相对数量的字节开始的位置。
块GOBJCommandTable()由命令组DispCmds(i)组成,其中,命令组DispCmds(i)是同时执行的显示控制命令的集合。命令组DispCmds(i)描述以命令execution_time(time)开始的显示控制命令,其中,命令execution_time(time)描述执行时间。换句话说,在命令execution_time(time)之后直到下一命令execution_time(time)为止的部分组成一个命令组DispCmds(i)。
如上所述,块PNGImageRegion()描述字段PNG_image(i),其中,字段PNG_image(i)是已根据PNG系统压缩编码的一个图象的数据。
块SoundDataRegion()描述实时声音数据,作为声音数据sound_data(i)。
可在块GraphicsObjectHeader()和块GOBJCommandTable()之间描述任意数量的padding_word。同样,可在块GOBJCommandTable()和块PNGImageRegion()之间描述任意数量的padding_word。
图84示出描述前面块GlobalPaletteTable()的结构实例的语法。字段number_of_palette_entries描述在它后面的调色板数据的数量。当用具有8位数据长度的索引号描述图象时,字段number_of_palette_entries的最大数量为256。因而,可使用256色。当只使用256色中的一部分时,只需要必要的调色板数据。字段number_of_palette_entries描述使用的索引数量。
字段palette_index_number描述分配给在字段palette_index_number后面的字段red_value、字段green_value、字段blue_value和字段alpha的索引号。图象数据用索引号查询颜色和透明度。
在块GlobalPaletteTable()的for语句循环中,具有相同值的字段palette_index_number不应描述多于两次。字段red_value、字段green_value和字段blue_value中的每一个具有用于为0或更大的整数的8位数据长度。字段red_value、字段green_value和字段blue_value分别指定红色、绿色和蓝色。字段alpha具有8位数据长度。字段alpha代表透明度α。当字段alpha的值为0时,它表示完全透明。当字段alpha的值为255时,它表示完全不透明。
每个PNG图象具有许多调色板信息PLTE。根据本发明的实施例,不使用调色板信息PLTE,而是使用块GlobalPaletteTable()定义的调色板信息。当同时显示多个PNG图象时,如果PNG图象使用不同调色板的颜色,就难以以正确颜色显示PNG图象。在GraphicsObject()的字段PNG_image(i)中描述的多个PNG图象查询公共块GlobalPaletteTable(),并且使用在块GlobalPaletteTable()中描述的公共调色板表。
下面描述命令组DispCmds(i)。命令组DispCmds(i)描述控制图形对象200的显示的显示控制命令。在命令组DispCmds(i)中,命令execution_time(start_time)导致在指定时间start_time执行在下一命令execution_time(start_time)之前描述的命令。时间start_time的起点是图形对象200的pts。时间start_time的单位与pts的相同。
一个命令组DispCmds(i)可描述多个在时间start_time执行的命令,其中,时间start_time在命令execution_time(start_time)中描述。在命令execution_time(start_time)中所述的时间start_time同时执行在命令组DispCmds(i)中描述的命令。在执行命令组DispCmds(i)中描述的命令之前,如果在下一命令组DispCmds(i+1)的命令execution_time(start_time)中描述的时间start_time已经过去,就取消命令组DispCmds(i)的执行。相反,执行下一命令组DispCmds(i+1)。
在图85A和图85B中列出除了在命令组DispCmds(i)中描述的命令execution_time(start_time)之外的显示控制命令。这些显示控制命令被分配如图85所示的数值。
(1)命令execution_time(start_time)
(2)导致显示图形对象的命令
(3)导致清除图形对象的命令
(4)导致改变所用调色板表的颜色和透明度的命令
(5)导致设定在平面上显示的图形对象的位置和尺寸的命令
(6)导致设定图形对象的显示范围的命令
(7)导致再现效果声音的命令
(8)导致分配给图象数据(PNG数据)的效果声音的命令
在命令execution_time(start_time)之后的七类命令仅仅是实例。换句话说,在命令组DispCmds(i)中描述的命令不局限于这些命令。可定义其它显示控制命令并增加到命令组DispCmds(i)中。
图形对象200的显示开始命令(2)和显示结束命令(3)是分别描述为命令fade_in(fade_in_time)和命令fade_out(fade_out_time)的所谓淡入/淡出命令。
由命令fade_in(fade_in_time)指定淡入。命令fade_in(fade_in_time)导致图形对象200从不显示状态逐渐显示为显示状态。通过逐渐增加与时间fade_in_time相应的α混合的透明度α的值,可实现淡入。当在命令execution_time(start_time)之后是命令fade_in(fade_in_time)时,逐渐透明的图形对象200在命令execution_time(start_time)指定的时间start_time之后,变为不透明。在变量时间fade_in_time所指定的时间过去之后,所有调色板索引的透明度α的值设定为在公共调色板表上指定的值。
当命令fade_in(fade_in_time)的时间fade_in_time已经设定为0时,立即以在调色板表上指定的颜色和透明度α显示图形对象200。
淡出是淡入的相反过程。淡出由命令fade_out(fade_out_time)指定。命令fade_out(fade_out_time)导致逐渐清除显示的图形对象200。通过逐渐减小与时间fade_out_time相应的α混合的透明度α的值,可实现淡出。当在命令execution_time(start_time)之后是命令fade_out(fade_out_time)时,逐渐不透明的图形对象200在命令execution_time(start_time)指定的时间start_time之后,立即变为透明。在变量时间fade_out_time所指定的时间过去之后,所有调色板索引的透明度α的值变为0。结果,图形对象200完全变为透明并且不可见。
当命令fade_out(fade_out_time)的时间fade_out_time设定为0时,立即清除图形对象200。
当在淡入和淡出中随着时间的过去而逐渐改变透明度α的值时,优选获得更自然的淡入和淡出效果。可替换地,在淡入中,在时间fade_in_time所指定的时间过去之后,透明度α的值应该与在调色板表上指定的值相匹配。然而,透明度α的分辨率和分度不由命令指定。实际上,透明度α的分辨率和分度取决于实施系统。
在前面实例中,所述命令用文本如“fade_in()”和“fade_out()”表示,以获得高可识别性。然而,实际上,命令fade_in()和fade_out()与它们的变量一起转换为预定的二进制值,并且在DispCmds(i)中描述。它们应用于后述的其它命令。
调色板表颜色和透明度α改变命令(4)导致调色板信息变化。此命令以change_palette(index,newR,newG,newB,newAlpha)的格式描述。在小标题平面11和图形平面12上同时显示的PNG图象查询如图24所示并由图83所示语法定义的公共调色板表。定义为GlobalPaletteTable()的调色板信息用作公共调色板表。利用命令change_palette(index,newR,newG,newB,newAlpha)改变公共调色板信息。
描述为命令change_palette(index,newR,newG,newB,newAlpha)中变量的值index、newR、newG、newB和newAlpha导致用调色板编号index表示的颜色索引值的三原色的值R、G和B改变为值newR、newG和newB,并且透明度α的值改变为值newAlpha。
命令(5)导致在平面上设置图形对象的显示位置和尺寸,命令(5)以set_display_box(x1,y1,x2,y2)的格式使用。命令(5)使图形对象200放置在平面上由坐标(x1,y1)和(x2,y2)定义的四方形区域(x1,y1)(x2,y2)中。用于设置图形对象显示范围的命令(6)以set_clipping_box(a1,b1,a2,b2)的格式使用。命令(6)导致在平面上显示用图形对象200的PNG图象的坐标(a1,b1)和(a2,b2)定义的四方形区域(a1,b1)(a2,b2)。
下面,结合图86A和图86B详细描述命令set_display_box(x1,y1,x2,y2)和命令set_clipping_box(a1,b1,a2,b2)。如图87所示,在图86A和图86B所示的坐标上,显示屏幕的左上角定义为原点,水平向右方向用x代表,垂直向下方向用y代表,并且坐标用(x,y)代表。
如图86A所示,命令set_clipping_box(a1,b1,a2,b2)导致在图形对象200的PNG图象250中设置实际显示的四方形区域(a1,b1)(a2,b2)。在图86A所示实例中,假设四方形区域(a1,b1)(a2,b2)设定得比PNG图象250更小。命令set_display_box(x1,y1,x2,y2)导致在四方形区域(x1,y1)(x2,y2)的平面上设置四方形区域(a1,b1)(a2,b2)的真实显示位置(参见图86B)。只有PNG图象250的四方形区域(a1,b1)(a2,b2)显示在屏幕上的四方形区域(x1,y1)(x2,y2)中。
当四方形区域(a1,b1)(a2,b2)大于实际显示的四方形区域(x1,y1)(x2,y2)时,只显示四方形区域(a1,b1)(a2,b2)中四方形区域(x1,y1)(x2,y2)的PNG图象。相反,当四方形区域(a1,b1)(a2,b2)小于实际显示的四方形区域(x1,y1)(x2,y2)时,在四方形区域(x1,y1)(x2,y2)中的四方形区域(a1,b1)(a2,b2)的外侧被处理成透明区域。
当前述显示控制命令与多个命令execution_time(start_time)一起描述时,可显示随时间流逝而变化的小标题和同步图形。例如,在图83所示的图形对象200中,多个命令组DispCmds(i)在块GOBJCommandTable()中描述。每个命令组DispCmds(i)描述其时间start_time不同的显示控制命令execution_time(start_time),以便在start_time指定的开始时间执行命令组DispCmds(i)。
图88示出命令组DispCmds(i)的描述和图形对象200的显示变化的实例。在图88中,水平轴代表时间的流逝,而垂直轴代表图形对象200的透明度。在图88中,在向上方向,透明度增加。pts代表的时间为原点。
在第一命令组DispCmds(0)中,命令set_display_box(800,800,1300,900)导致在平面上设定显示区域。命令set_clipping_box(0,0,500,100)导致设定图形对象200的PNG图象的显示区域。命令fade_in(2秒)导致在时间[0]开始2秒钟的淡入处理。在下一命令组DispCmds(1)中,命令change_palette(index,newR,newG,newB,Alpha)描述颜色索引值[1]、[2]、[3]和[4]。命令组DispCmds(1)还导致在时间[800]改变由索引值[1]、[2]、[3]和[4]查询的颜色和透明度α。下一命令组DispCmds(2)导致显示的图形对象200在时间[2000]淡出两秒钟。
如图88所示,当连续描述命令组DispCmds(0)、DispCmds(1)和DispCmds(2)时,例如,可实现随时间流逝而变化的小标题。当正确地使用命令组DispCmds(0)、DispCmds(1)和DispCmds(2)时,小标题和按钮图象可显示为动画。
图89A、图89B、图89C和图89D示出逐渐显示小标题的淡入实例。在图89A-图89D中,控制淡入,以便逐渐显示小标题。此简单的淡入可用与图88所示命令组DispCmds(0)相似的命令来实现。
图90A和图90B示出当小标题在平面之间移动时PNG图象260的实例。此PNG图象260可用多个命令set_display_box(x1,y1,x2,y2)实现。例如,在第一命令组DispCmds(0)中,命令execution_time(start_time)导致设定开始时间。命令set_clipping_box(a1,b1,a2,b2)导致如图90A所示地设定PNG图象260的显示区域。命令set_display_box(x1,y1,x2,y2)导致在平面上设定PNG图象260的初始显示区域。
在下一命令组DispCmds(1)中,命令execution_time(start_time)把在执行命令组DispCmds(1)之后经过的预定时间设定为开始时间。命令set_display_box(x1′,y1′,x2′,y2′)导致设定在平面上移动的显示区域。同样,在下一命令组DispCmds(2)中,命令execution_time(start_time)把在执行命令组DispCmds(1)之后经过的预定时间设定为开始时间。命令set_display_box(x1″,y1″,x2″,y2″)导致设定在平面上移动的显示区域。
因而,如图90B所示,作为小标题的PNG图象260可在平面上移动到四方形区域(x1,y1)(x2,y2)、四方形区域(x1′,y1′)(x2′,y2′)和四方形区域(x1″,y1″)(x2″,y2″)。
图91A和图91B示出当小标题移动并卷屏时PNG图象261的显示区域262的实例。这可用多个命令set_clipping_box(a1,b1,a2,b2)实现。例如,在第一命令组DispCmds(0)中,命令execution_time(start_time)导致设定开始时间。命令set_clipping_box(a1,b1,a2,b2)导致如图91A所示地设定在PNG图象260中初次显示的四方形区域。命令set_display_box(x1,y1,x2,y2)导致设定在平面上显示的PNG图象260的四方形区域。
在下一命令组DispCmds(1)中,命令execution_time(start_time)把在执行命令组DispCmds(1)之后经过的预定时间设定为开始时间。命令set_clipping_box(a1′,b1′,a2′,b2′)导致设定在PNG图象260中移动的显示区域。同样,在下一命令组DispCmds(2)中,命令execution_time(start_time)把在执行命令组DispCmds(1)之后经过的预定时间设定为开始时间。命令set_clipping_box(a1″,b1″,a2″,b2″)导致设定在PNG图象260中移动的四方形区域。
因而,如图91B所示,作为PNG图象261一部分的四方形区域在平面上的四方形区域(x1,y1)(x2,y2)中,从四方形区域(a1,b1)(a2,b2)移动到四方形区域(a1′,b1′)(a2′,b2′),接着移动到四方形区域(a1″,b1″)(a2″,b2″),其中,PNG图象261作为小标题。结果,小标题可卷屏。
图92A和图92B示出设定作为PNG图象265一部分的框架的实例,其中,该框架在PNG图象265中移动,并且框架的显示位置在平面上移动。这可通过同时执行多个命令set_display_box(x1,y1,x2,y2)和多个命令set_clipping_box(a1,b1,a2,b2)而实现。例如,在第一命令组DispCmds(0)中,命令execution_time(start_time)导致设定开始时间。命令set_display_box(x1,y1,x2,y2)和命令set_clipping_box(a1,b1,a2,b2)导致设定框架266A(参见图92A)。
例如,命令set_display_box(x1,y1,x2,y2)导致设定在平面上显示的四方形区域(x1,y1)(x2,y2)。命令set_clipping_box(a1,b1,a2,b2)导致设定在PNG图象265中显示的四方形区域(a1,b1)(a2,b2)。四方形区域(x1,y1)(x2,y2)和四方形区域(a1,b1)(a2,b2)形成框架266A。
在下一命令组DispCmds(1)中,命令execution_time(start_time)把在执行命令组DispCmds(0)之后经过的预定时间设定为开始时间。命令set_display_box(x1′,y1′,x2′,y2′)导致在平面上设定四方形区域(x1′,y1′)(x2′,y2′)。命令set_clipping_box(a1′,b1′,a2′,b2′)导致在PNG图象265中设定四方形区域(a1′,b1′)(a2′,b2′)。四方形区域(x1′,y1′)(x2′,y2′)和四方形区域(a1′,b1′)(a2′,b2′)形成作为框架266A移动目的地的框架266B。同样,在下一命令组DispCmds(2)中,命令execution_time(start_time)把在执行命令组DispCmds(1)之后经过的预定时间设定为开始时间。命令set_display_box(x1″,y1″,x2″,y2″)导致在平面上设定四方形区域(x1″,y1″)(x2″,y2″)。命令set_clipping_box(a1″,b1″,a2″,b2″)导致在PNG图象265中设定四方形区域(a1″,b1″)(a2″,b2″)。四方形区域(x1″,y1″)(x2″,y2″)和四方形区域(a1″,b1″)(a2″,b2″)形成作为框架265B移动目的地的框架265B。
因而,如图92B所示,在小标题的一部分PNG图象265的四方形区域移动的同时,四方形区域可在平面上从区域265A移动到区域265B,接着移动到区域265C。
因而,根据本发明的实施例,由于通过命令组DispCmds(i)执行图形对象200的显示控制,因此,容易在小标题平面11和图形平面12上实现各种显示,其中,在命令组DispCmds(i)中,每个显示控制命令由命令execution_time(start_time)分组。
2-13.关于效果声音
根据本发明的实施例,声音输出可与图形对象200的显示控制同步。声音输出由命令(7)和命令(8)定义,其中,命令(7)导致再现效果声音,命令(8)使效果声音分配给除前述命令组DispCmds(i)中命令(1)execution_time(start_time)之外的命令(2)-(8)中的图象数据。声音数据被分配唯一的标识符sound_id。
导致再现效果声音的命令(7)以play_sound(sound_id)的格式描述。命令play_sound(sound_id)导致再现由标识符sound_id识别的声音数据。当在命令组DispCmds(i)中描述命令play_sound(sound_id)时,在由命令execution_time(start_time)指定的时间start_time再现由标识符sound_id识别的声音数据。
例如,当命令play_sound(sound_id)与命令fade_in(fade_in_time)和命令fade_out(fade_out_time)一起使用时,在显示和/或清除小标题的同时再现作为效果声音的声音数据。图88示出使用命令play_sound(sound_id)的实例。在图88所示实例中,在第一命令组DispCmds(0)中,命令fade_in(2秒)在开始时间[0]使图形对象淡入2秒钟。命令play_sound(1)导致再现由标识符sound_id[1]识别的声音数据。随后,在命令组DispCmds(1)中,命令execution_time(800)导致在时间[800]改变显示颜色。命令play_sound(2)导致再现由标识符sound_id[2]识别的声音数据。在命令组DispCmds(2)中,命令execution_time(2000)和命令fade_out(1秒)在时间[2000]使图形对象淡出1秒钟。命令play_sound(1)导致再现由标识符sound_id[1]识别的声音数据。
命令play_sound(sound_id)不是基本命令。
导致效果声音分配给PNG数据的命令(8)以set_sound(PNG_image_id,sound_id)的格式描述。命令set_sound(PNG_image_id,sound_id)导致对标识符PNG_image_id识别的PNG数据再现由标识符sound_id识别的声音数据。当显示由标识符PNG_image_id识别的PNG数据时,此命令set_sound(PNG_image_id,sound_id)导致再现由标识符sound_id识别的声音数据。PNG数据的标识符PNG_image_id与块PNGImageRegion()的PNG_image(i)的循环计数器i的值相同。
假设命令set_sound(PNG_image_id,sound_id)用于处于选择状态和执行状态下的按钮的PNG数据。结果,当按钮的正常状态改变为执行状态时或与此相反时,可产生分配给PNG数据的声音数据,作为效果声音,其中,PNG数据表示每个状态。除此实例之外,此命令set_sound(PNG_image_id,sound_id)可用于除按钮之外的PNG数据。
图93示出其中声音数据分配给按钮图象的图形对象200的数据结构的实例。在PNG数据区203中描述处于正常状态、选择状态和执行状态中的按钮的PNG数据203A、203B和203C。在图93所示实例中,显示控制命令使坐标和声音数据分配给PNG数据。PNG数据的显示开始时间和按钮的初始显示状态由外部脚本程序控制。因而,显示控制命令描述为执行时间[0]时的命令。
图93所示图形对象200只描述命令组DispCmds(0),其中,在命令execution_time(0)的时间[0]在显示控制命令表202中执行命令组DispCmds(0)。由于标识符PNG_image_id从[0]开始,因此,标识符PNG_image_id[0]表示处于正常状态下的PNG数据203A;标识符PNG_image_id[1]表示处于选择状态下的PNG数据203B;并且,PNG_image_id[2]表示处于执行状态下的PNG数据203C。
当用命令set_sound(1,10)显示处于选择状态下的按钮的PNG数据203B时,再现由sound_id[10]识别的声音数据,作为效果声音,其中,在选择状态中,标识符PNG_image_id为[1]。同样,当用命令set_sound(2,11)显示处于执行状态下的按钮的PNG数据203C时,再现由标识符sound_id[11]识别的声音数据,作为效果声音,其中,在执行状态中,标识符PNG_image_id为[2]。
尽管未在图73A、图73B和图73C中示出,一种或多种声音数据可预先储存在播放器的内存等中。例如,可在运输之前在播放器的内部非易失性存储器等中预先储存预定的声音数据。
可替换地,在已经记录图形对象200和作为运动数据的内容的盘上预先记录作为效果声音的声音数据。当从盘再现内容时,可读取声音数据。对于在盘上记录声音数据的方法,准备声音数据文件。当从盘再现内容时,在播放器的存储器中预先读取和储存文件。
可替换地,与图形对象200相似地,创造包含声音数据的PES数据包。PES数据包划分为TS数据包。TS数据包与剪辑AV流多路复用。
可替换地,可在如图76A、图76B和图76C(未示出声音数据)所示的图形对象200中,在图形对象头部201中或就在声音数据区204之后的区域中放置声音数据,其中,所述声音数据与包含在图形对象200中的PNG图象相对应。
在任何方法中,由于可从盘预先读取声音数据并且预先储存在播放器的存储器中,因此,当用PNG图象创建的按钮的状态改变为选择状态或执行状态时,可产生效果声音。对声音数据分配唯一标识符sound_id,声音数据可被唯一地识别。
下面详细描述在盘上记录声音数据的方法。结合图76A、图76B和图76C,描述在图形对象200中描述声音数据的方法。图76A和图76C示出声音数据增加到图形对象200并接着与剪辑AV流多路复用的实例。
图76A示出在图形对象200的PNG数据区203之后布置声音数据区204的实例。声音数据区204可包含多个声音数据204A、204B、...、204n。当声音数据204A、204B、...、204n分别与图形对象200的PNG数据203A、203B、...、203n相对应时,PNG图象容易与声音数据相关联。
声音数据204A、204B、...、204n可以是未进行压缩编码的数据,如AIFF(音频交换文件格式)文件或WAVE文件,或者可以是经过压缩编码的数据,如MP3(运动图象专家组1音频层3)文件、AAC(高级音频编码)文件或ATRAC(自适应传输音频编码)文件。当包含经过压缩编码的声音数据时,播放器一方应该具有遵循压缩编码系统的音频解码器。
图76C示出在构成按钮的图形对象200中包含与按钮状态相应的声音数据的实例。在实例中,在声音数据区203中包含声音数据204A-2和声音数据204B-2,其中,当按钮置于选择状态时再现声音数据204A-2,并且当按钮置于执行状态时再现声音数据204B-2。另一方面,在PNG数据区203中包含用于处在正常状态、选择状态和执行状态下的按钮的PNG数据203A-2、203B-2和203C-2。
在此情况下,在用于按钮图象的PNG数据区203之后是声音数据区204。声音数据区204包含声音数据204A-2和声音数据204B-2,其中,当按钮置于选择状态时再现声音数据204A-2,并且当按钮置于执行状态时再现声音数据204B-2。因而,当显示按钮图象的PNG数据时,再现与按钮状态相应的声音数据。假设播放器再现的效果声音主要用作按钮点击声。因而,在此结构中,可充分地实现本发明的主要目的。
下面,描述在声音数据不与剪辑AV流多路复用的情况下的方法。例如,如图94所示,在目录BDAV下放置包含声音数据的目录SOUND。目录SOUND包含PCM波形数据,作为声音数据。例如,在目录SOUND中放置具有AIFF格式的声音数据文件“sound1.aiff”。当盘初次装入到播放器中并接着储存在播放器的内存中时,读取放在目录SOUND中的所有声音数据文件。
每个声音数据被分配唯一标识符sound_id。程序或脚本用标识符sound_id调用所需的声音数据。
在此情况下,如图95所示,在图形对象200中布置声音id区205。在声音id区205中包含声音id数据205A和205B。在图95所示实例中,在PNG数据区203中包含与按钮的正常状态、选择状态和执行状态相应的PNG数据203A、203B和203C。声音id数据205A和205B是分别与PNG数据203B和203C相应的标识符sound_id。当显示PNG数据203B时,再现与标识符sound_id相应的声音数据,其中,标识符sound_id由储存在播放器存储器中的声音id数据205A代表。
例如,如结合图93所描述地,PNG数据和声音数据可根据显示控制命令表202而相互关联。
可以不从盘读取,而从网络如因特网获得具有图95所示结构的数据,并接着输入到输入端101。
与结合图85描述的显示控制命令不同,由于声音数据用标识符sound_id识别,因此,可与所显示图形不同步地,在任何时间产生声音数据的效果声音。
在此方法中,由于使用标识符sound_id从存储器读取声音数据,因此,效果声音的种类数量受标识符sound_id数量的限制。另外,可以使用的效果声音的种类数量受播放器的内存容量的限制。
接着,结合图96详细描述此方法。当装入盘400时,播放器初次访问该盘。从放在目录BDAV下的目录SOUND读取所有声音数据。已经读取的声音数据(PCM数据)储存在播放器的内存410中。此时,对每个声音数据分配唯一标识符sound_id。可替换地,可对记录在盘400上的每个声音数据增加标识符sound_id。
在此实例中,从盘400读取16个声音数据。标识符sound_id=1-16分配给这些声音数据。获得这些声音数据的数据大小。假设:在图96所示实例中,分配给标识符sound_id=1-16的声音数据分别具有d1字节、d2字节、...、和d16字节的数据大小。
例如,在显示按钮420A、420B和420C的菜单屏幕420上,当对按钮420C执行操作时,从存储器410读取与分配给按钮420C的标识符sound_id相应的声音数据。在图96所示实例中,与标识符sound_id=1相应的声音数据分配给按钮420C的执行状态。从存储器410读取的声音数据以预定方式处理,并临时储存在缓冲器450B中。随后,声音数据提供给音频混合器231。音频混合器231把该声音数据和例如与运动图象数据有关的声音数据混合在一起,并且输出混合数据,作为声音,其中,运动图象数据是内容主要部分。
缓冲器450A临时储存例如与作为内容主要部分的运动图象数据有关的声音数据。当调整从缓冲器450A和450B读取其中储存的声音数据的时间时,与按钮420C的操作相应的效果声音在储存于缓冲器450A内的声音数据的适当时间从缓冲器450B输出。在此实例中,用标识符sound_id=0指定无声音数据再现模式。
在此模型中,可从盘400读取的声音数据的总量受存储器410容量的限制。根据缓冲器450B的容量而限制每个声音数据的容量。当用容量M代表存储器410的容量并且用容量Dmax(字节)代表缓冲器450B的容量时,必需满足以下两个条件。
(1)储存在存储器410中的每个声音数据的容量d1应该小于缓冲器450B的容量Dmax。
(2)储存在存储器410中的声音数据的总量(d1+d2+...+dn)应该小于存储器410的容量M。
换句话说,当在播放器一方和盘制造商一方规定作为准则的条件(1)和(2)时,可保持声音数据如效果声音的再现兼容性。
如上所述,在声音数据不与剪辑AV流多路复用的情况下,当盘初次装入到播放器中时,从盘读取所有声音数据。然而,本发明不局限于此实例。换句话说,可分多段从盘读取声音数据。例如,读取用于一段剧本的所有声音数据,并储存在存储器中。此时,删除储存在存储器中的用于前一段剧本的声音数据。结果,即使一个剧本的声音数据的数据量超过存储器的容量,也可处理声音数据。
所有声音数据可记录在盘的预定区域中。可替换地,声音数据可分别记录在盘的多个区域中。当声音数据分别记录在盘的多个区域中时,用于剧本各段的声音数据可记录在盘中与剧本的所述段相应的位置上。可替换地,可从通过网络连接的服务器下载声音数据。此时,当用URL(统一资源定位器)指定文件位置时,以与从盘读取声音数据的情形相同的方式实现声音数据。
在结合图76A和图76B所述的声音数据与剪辑AV流多路复用的方法中,不限制声音数据的种类数量。结果,可为每个图象分配不同种类的声音数据。如果必要,可用剪辑AV流提供声音数据。因而,无论什么时候提供剪辑AV流,都可使用不同种类的声音数据。而且,在声音数据与剪辑AV流多路复用的方法中,由于从剪辑AV流一起读取声音数据和图象数据,因此,可简化构造读取模型。另外,除了盘的容量以外,声音数据文件的数量和文件的大小不受其它限制。
然而,在声音数据与剪辑AV流多路复用的方法中,当相同的声音数据用于不同的图形对象时,由于它们的图形对象每一个都具有相同的声音数据,因此,声音数据变得冗余。另外,由于应该从图形对象提取声音数据,因此,在多路分离剪辑AV流之后,应该从图形对象分离声音数据。
下面,结合图73A、图73B和图73C描述可与图形对象200同步的声音数据处理。
不与剪辑AV流多路复用的声音数据例如作为输入频道(1)的数据而输入到输入端101。声音数据通过开关电路102和103提供给内容缓冲器105。另一方面,已经与包含声音数据的图形对象200多路复用的剪辑AV流输入到输入端202。PID滤波器110过滤图形对象200,并且把图形对象200临时储存在缓冲器TBn 111A中。随后,图形对象200通过开关电路103提供给内容缓冲器105。
已经与不包含声音数据的图形对象200多路复用的剪辑AV流从输入端202输入。PID滤波器110过滤剪辑AV流,并且输出构成图形对象200的传输包。传输包临时储存在缓冲器TBn 111B或缓冲器TBn 111C中。储存在缓冲器TBn 111B中的传输包提供给缓冲器Bn112B。结果,图形对象200根据PID头部而结合。图形对象200通过开关电路107提供给图形解码器A 116。储存在缓冲器TBn 111C中的传输包还通过缓冲器Bn 111C而结合为图形对象200。图形对象200通过开关电路108提供给图形解码器B 117。
图形解码器A 116和B 117每一个都从提供的传输包除去头部信息,对包含在传输包中的图象数据进行解码,并且获得显示小标题或图形所必需的图象数据,如位图数据。
包含声音数据的图形对象200的图象数据从内容缓冲器105分别通过开关电路107和108提供给图形解码器A 116和B 117。
在图73A、图73B和图73C所示实例中,图形解码器A 116对图象数据解码,以扩展为小标题平面。图形解码器B 117对图象数据解码,以扩展为图形平面。可替换地,图形解码器A 116和B 117可对具有其它数据格式的图象数据进行解码。可替换地,图形解码器A116和B 117可处理具有多种格式的图象数据。
图形解码器A 116的输出提供给开关电路130的输入端130B和开关电路131的输入端131C。图象数据分别通过开关电路130和131提供给小标题平面132和图形平面133。
多媒体引擎106具有声音播放器106D。缓冲器109具有声音缓冲器109E。声音播放器106D用声音缓冲器109E对从内容缓冲器105读取的声音数据进行解码,并且例如输出线性PCM音频数据。从声音播放器106D输出的声音数据提供给表现处理器157。表现处理器157混合从声音播放器106D输出的声音数据与从音频解码器118输出的声音数据,并向输出端158输出混合的声音数据。
声音播放器106D再现在例如点击按钮图象时产生的声音数据,作为效果声音,如点击声等。声音数据储存在声音缓冲器109E中,并由声音播放器106D再现。
当HTML和ECMA脚本组合例如用作剧本叙述语言时,多媒体引擎106读取储存在代码缓冲器104中的ECMA脚本,分析ECMA脚本,从代码缓冲器104读取另一ECMA脚本和HTML文档,并且从内容缓冲器105读取图象数据和声音数据。与储存在内容缓冲器105中的数据相同,声音数据可保持储存在内容缓冲器105中。
多媒体引擎106从遥控器、或点击器件等接收用户的输入,并且执行与用户输入相应的处理。多媒体引擎106产生与用户输入的处理结果和每个脚本相应的控制信号。控制信号还提供给图形解码器A116和B 117、音频解码器118、MPEG视频解码器120和系统解码器121。
图形渲染器106C处理的图象数据分别通过开关电路130和131提供给小标题平面132和图形平面133。小标题平面132和图形平面133中的每一个都例如由帧存储器组成。小标题平面132和图形平面133分别与图20所示的小标题平面11和图形平面12相对应。
从图形渲染器106C提供给小标题平面132和图形平面133的图象数据是位图数据,其中,例如具有扫描宽度压缩格式、PNG格式或JPEG格式的图象数据已被图形渲染器106C解码。
多媒体引擎106向表现处理器155提供控制信号,该信号使小标题平面132、图形平面133和运动图象平面134互相切换。另外,多媒体引擎106向表现处理器141提供控制音频流输出的控制信号。
小标题平面132上的图象数据提供给调色板150,调色板150与图22所示的调色板122相对应。用索引查询具有256色的调色板150。结果,输出RGB数据。另外,输出透明度数据α1。RGB数据提供给RGB/YCbCr转换电路151,电路151与图22所示RGB/YCbCr转换电路29相对应。RGB/YCbCr转换电路151把颜色系统从RGB(4:4:4)转换为YCbCr(4:4:4)。从RGB/YCbCr转换电路151输出的YCbCr数据提供给表现处理器155。
图形平面133上的图象数据提供给调色板152,调色板152与图22所示的调色板26相对应。用索引查询具有256色的调色板152。结果,输出RGB数据。另外,输出透明度数据α2。RGB数据提供给RGB/YCbCr转换电路153,电路153与图22所示RGB/YCbCr转换电路27相对应。RGB/YCbCr转换电路153把颜色系统从RGB(4:4:4)转换为YCbCr(4:4:4)。从RGB/YCbCr转换电路153输出的YCbCr数据提供给表现处理器155。
运动图象平面134上的运动图象数据通过上/下转换器154提供给表现处理器155。
表现处理器155用小标题平面11(小标题平面132)的透明度α1和图形平面12(图形平面133)的透明度α2执行α混合处理。此处理使得运动图象平面10、小标题平面11和图形平面12上的图象数据结合。表现处理器155可基于实时而对图象数据执行效果处理。从输出端156获得已在平面之间执行结合处理并且已执行效果处理的图象数据。
2-14.其它
如上所述,根据本发明的预先记录的大容量盘具有三个独立的平面,它们是用于运动图象的运动图象平面、用于小标题的小标题平面和用于具有中断功能的屏幕如菜单屏幕的图形平面。结合并显示这些平面。因而,对于本发明的效果,可在运动图象平面上显示运动图象,同时,以运动图象为背景,在图形平面上显示菜单等。
根据本发明,由于布置用于储存将在图形平面上显示的图象数据的缓冲器,因此,可在图形平面上重复显示相同的图象数据。因而,对于本发明的效果,以比以前更高的灵活性来构造菜单屏幕等。
根据本发明,在菜单屏幕等上显示的按钮状态分为三种状态。与分类的状态相应地,提供图象数据。图象数据根据用户的输入等而进行切换。结果,可实现常规DVD视频不能实现的各种丰富的菜单。
根据本发明,用显示控制命令描述对显示在图形平面上的图形的显示控制。因而,对于本发明的效果,可用显示在图形平面上的屏幕来实现互功功能。可以实现小标题和按钮卷屏并移动的简单动画以及图象内容根据用户输入而变化的丰富按钮。
根据本发明的预先记录的大容量盘具有三个独立的平面,它们是用于运动图象的运动图象平面、用于小标题的小标题平面和用于具有中断功能的屏幕如菜单屏幕的图形平面。结合并显示这些平面。定义公共图形对象,作为在小标题平面和图形平面上显示的对象的格式。定义解码器模型、显示控制命令和操作模型。结果,对于本发明的效果,可与运动图象同步地显示小标题和按钮。
根据本发明,定义图形对象的解码器模型。为了实施它,表达一种用于限制数据从对象缓冲器到平面缓冲器的数据传输速率的方法。对于重写到平面缓冲器中的数据的数据量,由于数据量随着对象在平面上的位置、变形和运动而变化,因此,定义称作窗口的四方形更新区域。因而,可估计最小更新间隔。结果,可改进解码器模型的实施及其再现兼容性。
根据本发明,定义以下解码器模型,其中,声音数据包含在图形对象中,并且在显示包含在图形对象中的按钮图象的同时再现声音数据。因而,声音数据容易与显示的图形对象同步再现。
根据本发明,相对于图形对象的显示控制命令,定义导致再现声音数据的命令。另外,相对于对象的显示控制命令,声音数据可分配给包含在图形对象中的图象数据。因而,对于本发明的效果,可在任何时间再现声音数据如效果声音,并且可实现具有效果声音的小标题和按钮。

Claims (87)

1.一种用于再现内容数据的再现装置,包括:
输入部件,该部件用于输入非实时流和实时流,非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕,实时流至少包含运动图象数据和小标题数据;
代码存储部件,该部件用于储存由输入部件输入的程序代码;
图象数据存储部件,该部件用于储存由输入部件输入的图象数据;
第一结合部件,该部件用于结合解码的运动图象数据和解码的小标题数据,在解码的运动图象数据中,输入部件输入的运动图象数据被解码,并且,在解码的小标题数据中,输入部件输入的小标题数据被解码;以及
第二结合部件,该部件根据储存在代码存储部件中的程序代码而结合储存在图象数据存储部件中的解码的图象数据与由第一结合部件结合的运动图象和小标题数据的结合数据。
2.如权利要求1所述的再现装置,
其中,根据用户输入的程序代码而对图象数据进行解码。
3.如权利要求1所述的再现装置,
其中,第二结合部件配置为:根据用户输入的程序代码而执行结合。
4.如权利要求1所述的再现装置,
其中,根据HTML或XHTML描述程序代码。
5.如权利要求1所述的再现装置,
其中,根据ECMA脚本描述程序代码。
6.如权利要求1所述的再现装置,进一步包括:
分辨率转换部件,该部件用于转换解码的运动图象数据的分辨率,
其中,第一结合部件配置为结合分辨率转换部件的输出和解码的小标题数据。
7.如权利要求1所述的再现装置,
其中,根据解码的小标题数据而控制第一结合部件的结合程度。
8.如权利要求1所述的再现装置,
其中,根据解码的图象数据而控制第二结合部件的结合程度。
9.如权利要求1所述的再现装置,进一步包括:
第一颜色信息转换部件,该部件用于把解码的小标题数据的颜色信息转换为具有YCbCr格式的颜色信息,作为用于图象数据和小标题数据的结合数据的颜色;以及
第二颜色信息转换部件,该部件用于把解码的图象数据的颜色信息从RGB格式转换为YCbCr格式,
其中,第一结合部件配置为结合解码的小标题数据和解码的运动图象数据,解码的小标题数据的颜色信息已由第一颜色信息转换部件转换,以及
其中,第二结合部件配置为结合解码的图象数据与运动图象和小标题数据的结合数据,解码的图象数据的颜色信息已由第二颜色信息转换部件转换。
10.如权利要求1所述的再现装置,
其中,实时流包含在MPEG2 TS传输包内,并且从记录介质再现。
11.如权利要求1所述的再现装置,
其中,实时流进一步包含图象数据。
12.如权利要求1所述的再现装置,进一步包括:
小标题数据存储部件,该部件用于储存由输入部件输入的一个或多个小标题数据,
其中,第一结合部件配置为结合多个解码的小标题数据和解码的运动图象数据,其中,储存在小标题数据存储部件中的多个小标题数据已被解码。
13.如权利要求1所述的再现装置,
其中,图象数据存储部件配置为储存一个或多个图象数据,以及
其中,第二结合部件配置为结合多个解码的图象数据与运动图象数据和小标题数据的结合数据,其中,储存在图象数据存储部件中的多个图象数据已被解码。
14.如权利要求1所述的再现装置,
其中,控制图象数据和小标题数据,从而,它们与运动图象数据同步显示并包含在公共数据结构中。
15.如权利要求14所述的再现装置,
其中,数据结构至少具有显示控制命令以及一个或多个图象数据或小标题数据,显示控制命令控制显示的一个或多个图象数据或小标题数据。
16.如权利要求15所述的再现装置,
其中,显示控制命令包含使图象数据或小标题数据的显示属性被改变而不是使图象数据本身或小标题数据本身被改变的命令。
17.如权利要求16所述的再现装置,
其中,显示属性是透明度。
18.如权利要求16所述的再现装置,
其中,显示属性是显示的颜色。
19.如权利要求15所述的再现装置,
其中,数据结构包含多组多个显示控制命令,同时执行每一组多个显示控制命令,在不同的时间执行多组多个显示控制命令。
20.如权利要求14所述的再现装置,
其中,包含在数据结构中的图象数据或小标题数据的有效期根据用来对图象数据进行解码的时间管理信息或用来对小标题数据进行解码的时间管理信息而开始,并且在数据结构中所定义的有效期结束时间结束。
21.如权利要求1所述的再现装置,
其中,图象数据是用于按钮的按钮图象数据,
其中,根据用户的操作,可换地显示与三种类型的按钮状态相应的第一、第二和第三按钮图象数据中的一个。
22.如权利要求14所述的再现装置,
其中,图象数据是用于按钮的按钮图象数据,以及
其中,与三种类型的按钮状态相应的第一、第二和第三按钮图象数据包含在相同的数据结构中。
23.如权利要求15所述的再现装置,
其中,显示控制命令进一步包含用于控制再现的声音数据的声音数据再现控制命令。
24.如权利要求23所述的再现装置,
其中,声音数据再现控制命令配置为:当显示小标题数据时,控制再现的声音数据。
25.如权利要求23所述的再现装置,
其中,图象数据是用于按钮的按钮图象数据,以及
其中,当根据三种类型的按钮状态之一而显示第一、第二或第三按钮图象数据时,根据声音数据再现控制命令而再现声音数据。
26.如权利要求23所述的再现装置,
其中,声音数据再现控制命令配置为允许向图象数据或小标题数据分配声音数据。
27.如权利要求1所述的再现装置,
其中,再现为效果声音的声音数据进一步输入到输入部件中。
28.如权利要求27所述的再现装置,
其中,声音数据与输入的实时流多路复用。
29.如权利要求28所述的再现装置,
其中,实时流进一步与图象数据多路复用,以及
其中,包含在实时流中并与之多路复用的图象数据和声音数据被结合为一个数据结构并输入。
30.如权利要求29所述的再现装置,
其中,数据结构进一步包含控制命令,该命令用于控制与实时流多路复用并显示的图象数据,并且用于控制再现的声音数据。
31.如权利要求29所述的再现装置,
其中,数据结构包含与图象数据相应的声音数据,该图象数据与实时流多路复用,作为一组声音数据和图象数据。
32.如权利要求31所述的再现装置,
其中,当显示与实时流多路复用的图象数据时,再现与图象数据相应的声音数据。
33.如权利要求32所述的再现装置,
其中,与实时流多路复用的图象数据是用于按钮的按钮图象数据,以及
其中,数据结构包含一组与按钮状态相应的按钮图象数据以及声音数据。
34.如权利要求33所述的再现装置,
其中,按钮具有多个状态,
其中,多个按钮图象数据与多个状态相关联,
其中,声音数据分配给多个按钮图象数据中的至少一个,声音数据与多个按钮图象中被分配声音数据的至少一个被处理为一组,以及
其中,多个按钮图象数据和声音数据包含在相同的数据结构中。
35.如权利要求34所述的再现装置,
其中,当根据按钮状态的变化而显示按钮图象数据时,再现作为一组的与按钮图象数据相关的声音数据。
36.如权利要求35所述的再现装置,
其中,数据结构包含多组的多个控制命令,同时执行每一组的多个控制命令,在不同的时间执行多组的多个控制命令。
37.如权利要求27所述的再现装置,
其中,声音数据包含在文件中,并且从输入部件作为非实时流输入。
38.如权利要求37所述的再现装置,
其中,与实时流多路复用的图象数据以及声音数据的信息包含在输入的一个数据结构中。
39.如权利要求38所述的再现装置,
其中,数据结构包含与与实时流多路复用的图象数据以及与图象数据相应的声音数据的信息,其中,图象数据与声音数据作为一组,以及
其中,当显示图象数据时,再现与图象数据相应的声音数据。
40.如权利要求39所述的再现装置,
其中,与实时流多路复用的图象数据是用于按钮的按钮图象数据,以及
其中,数据结构包含一组的与按钮状态相应的按钮图象数据和与按钮图象数据相应的声音数据信息。
41.如权利要求40所述的再现装置,
其中,按钮具有多个状态,
其中,多个按钮图象数据分配给多个状态,
其中,声音数据与多个按钮图象数据中的至少一个相关联为一组,以及
其中,多个按钮图象数据和声音数据信息包含在相同的数据结构中。
42.如权利要求41所述的再现装置,
其中,数据结构进一步包含控制命令,该命令导致当显示按钮图象数据时再现与按钮图象数据相关的声音数据,以及
其中,根据控制命令而再现声音数据。
43.如权利要求42所述的再现装置,
其中,数据结构包含多组的多个控制命令,同时执行每一组的多个控制命令,在不同的时间执行多组的多个控制命令。
44.如权利要求1所述的再现装置,
其中,指定图象数据解码时的解码速率的上限。
45.如权利要求1所述的再现装置,
其中,指定解码的图象数据传输给平面缓冲器时的传输速率的上限。
46.如权利要求45所述的再现装置,
其中,在平面缓冲器上定义完全包含一个或多个解码的图象数据的四方形区域,以及
其中,当绘制、更新和删除图象数据时,通过重写四方形区域而定义传输速率的上限。
47.如权利要求1所述的再现装置,
其中,从圆盘形记录介质再现非实时流,并且输入到输入部件中。
48.如权利要求1所述的再现装置,
其中,通过网络获得非实时流,并且输入到输入部件中。
49.如权利要求1所述的再现装置,
其中,从圆盘形记录介质再现实时流,并且输入到输入部件中。
50.如权利要求1所述的再现装置,
其中,通过网络获得实时流,并且输入到输入部件中。
51.一种用于再现内容数据的再现方法,包括以下步骤:
输入非实时流和实时流,非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕,实时流至少包含运动图象数据和小标题数据;
在代码存储部件中储存在输入步骤中输入的程序代码;
在图象数据存储部件中储存在输入步骤中输入的图象数据;
结合解码的运动图象数据和解码的小标题数据,在解码的运动图象数据中,在输入步骤中输入的运动图象数据被解码,并且,在解码的小标题数据中,在输入步骤中输入的小标题数据被解码;以及
根据储存在代码存储部件中的程序代码而结合储存在图象数据存储部件中的解码的图象数据与在第一结合步骤中结合的运动图象和小标题数据的结合数据。
52.一种使计算机执行用于再现内容数据的再现方法的再现程序,该再现方法包括以下步骤:
输入非实时流和实时流,非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕,实时流至少包含运动图象数据和小标题数据;
在代码存储部件中储存在输入步骤中输入的程序代码;
在图象数据存储部件中储存在输入步骤中输入的图象数据;
结合解码的运动图象数据和解码的小标题数据,在解码的运动图象数据中,在输入步骤中输入的运动图象数据被解码,并且,在解码的小标题数据中,在输入步骤中输入的小标题数据被解码;以及
根据储存在代码存储部件中的程序代码而结合储存在图象数据存储部件中的解码的图象数据与在第一结合步骤中结合的运动图象和小标题数据的结合数据。
53.一种已经记录再现程序的记录介质,此再现程序使计算机执行用于再现内容数据的再现方法,该再现方法包括以下步骤:
输入非实时流和实时流,非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕,实时流至少包含运动图象数据和小标题数据;
在代码存储部件中储存在输入步骤中输入的程序代码;
在图象数据存储部件中储存在输入步骤中输入的图象数据;
结合解码的运动图象数据和解码的小标题数据,在解码的运动图象数据中,在输入步骤中输入的运动图象数据被解码,并且,在解码的小标题数据中,在输入步骤中输入的小标题数据被解码;以及
根据储存在代码存储部件中的程序代码而结合储存在图象数据存储部件中的解码的图象数据与在第一结合步骤中结合的运动图象和小标题数据的结合数据。
54.一种其上记录内容数据的圆盘形记录介质,
其中,在记录介质上记录非实时流和实时流,非实时流至少包含程序代码和图象数据,图象数据构成提示用户执行操作的操作屏幕,实时流至少包含运动图象数据和小标题数据,以及
其中,根据程序代码而结合解码的图象数据与运动图象数据和小标题数据的结合数据,在解码的图象数据中,对已被再现并储存在图象数据存储部件中的图象数据进行解码,在后一结合数据中,运动图象数据已被再现和解码,小标题数据已被再现和解码。
55.如权利要求54所述的记录介质,
其中,控制图象数据和小标题数据,从而,它们与包含在公共数据结构中的运动图象数据同步显示,并且该数据结构记录在记录介质上。
56.如权利要求55所述的记录介质,
其中,数据结构至少具有显示控制命令以及一个或多个图象数据或小标题数据,显示控制命令控制显示的一个或多个图象数据或小标题数据。
57.如权利要求56所述的记录介质,
其中,显示控制命令包含使图象数据或小标题数据的显示属性被改变而不是使图象数据本身或小标题数据本身被改变的命令。
58.如权利要求57所述的记录介质,
其中,显示属性是透明度。
59.如权利要求57所述的记录介质,
其中,显示属性是显示的颜色。
60.如权利要求56所述的记录介质,
其中,数据结构记录在记录介质上,从而,数据结构包含多组的多个显示控制命令,同时执行每一组的多个显示控制命令,在不同的时间执行多组的多个显示控制命令。
61.如权利要求55所述的记录介质,
其中,图象数据或小标题数据包含在数据结构中并记录在记录介质上,从而,有效期根据用来对图象数据进行解码的时间管理信息或用来对小标题数据进行解码的时间管理信息而开始,并且在数据结构中所定义的有效期结束时间结束。
62.如权利要求54所述的记录介质,
其中,图象数据是用于按钮的按钮图象数据,
其中,根据用户的操作,可切换地显示与三种类型的按钮状态相应的第一、第二和第三按钮图象数据中的一个。
63.如权利要求55所述的记录介质,
其中,图象数据是用于按钮的按钮图象数据,以及
其中,与三种类型的按钮状态相应的第一、第二和第三按钮图象数据包含在相同的数据结构中,并且,数据结构记录在记录介质上。
64.如权利要求56所述的记录介质,
其中,显示控制命令进一步包含用于控制再现的声音数据的声音数据再现控制命令,在数据结构中包含显示控制命令,并且在记录介质上记录数据结构。
65.如权利要求64所述的记录介质,
其中,声音数据再现控制命令配置为:当显示小标题数据时,控制再现的声音数据,在数据结构中包含显示控制命令,并且在记录介质上记录数据结构。
66.如权利要求64所述的记录介质,
其中,图象数据是用于按钮的按钮图象数据,以及
其中,当根据三种类型的按钮状态之一而显示第一、第二或第三按钮图象数据时,根据声音数据再现控制命令而再现声音数据,在数据结构中包含显示控制命令,并且在记录介质上记录数据结构。
67.如权利要求64所述的记录介质,
其中,声音数据再现控制命令配置为允许向图象数据或小标题数据分配声音数据,在数据结构中包含显示控制命令,并且在记录介质上记录数据结构。
68.如权利要求54所述的记录介质,
其中,图象数据进一步与实时流多路复用,并且在记录介质上记录实时流。
69.如权利要求54所述的记录介质,
其中,再现为效果声音的声音数据进一步记录在记录介质上。
70.如权利要求69所述的记录介质,
其中,音频数据进一步与实时流多路复用,并且在记录介质上记录实时流。
71.如权利要求70所述的记录介质,
其中,图象数据进一步与实时流多路复用,以及
其中,包含在实时流中的图象数据和声音数据被结合为一个数据结构,并且在记录介质上记录该数据结构。
72.如权利要求71所述的记录介质,
其中,数据结构进一步包含控制命令,该命令用于控制与实时流多路复用并显示的图象数据,并且用于控制再现的声音数据。
73.如权利要求71所述的记录介质,
其中,数据结构包含与图象数据相应的声音数据,该图象数据与实时流多路复用,作为一组图象数据和声音数据。
74.如权利要求73所述的记录介质,
其中,与实时流多路复用的图象数据是用于按钮的按钮图象数据,以及
其中,数据结构包含一组与按钮状态相应的按钮图象数据以及声音数据。
75.如权利要求74所述的记录介质,
其中,按钮具有多个状态,
其中,多个按钮图象数据与多个状态相关联,
其中,声音数据分配给多个按钮图象数据中的一个,声音数据与多个按钮图象中被分配声音数据的至少一个被处理为一组,以及
其中,多个按钮图象数据和声音数据包含在相同的数据结构中。
76.如权利要求75所述的记录介质,
其中,当根据按钮状态的变化而显示按钮图象数据时,再现作为一组的与按钮图象数据相关的声音数据。
77.如权利要求76所述的记录介质,
其中,数据结构包含多组的多个控制命令,同时执行每一组的多个控制命令,在不同的时间执行多组的多个控制命令。
78.如权利要求69所述的记录介质,
其中,声音数据包含在文件中,并且该文件记录在记录介质上。
79.如权利要求78所述的记录介质,
其中,与实时流多路复用的图象数据以及声音数据的信息包含在一个数据结构中,并且该数据结构记录在记录介质上。
80.如权利要求79所述的记录介质,
其中,数据结构包含与与实时流多路复用的图象数据以及与图象数据相应的声音数据的信息,其中,图象数据与声音数据作为一组。
81.如权利要求80所述的记录介质,
其中,与实时流多路复用的图象数据是用于按钮的按钮图象数据,以及
其中,数据结构包含一组与按钮状态相应的按钮图象数据和与按钮图象数据相应的声音数据信息。
82.如权利要求81所述的记录介质,
其中,按钮具有多个状态,
其中,多个按钮图象数据分配给多个状态,
其中,声音数据与多个按钮图象数据中的至少一个相关联为一组,以及
其中,多个按钮图象数据和声音数据信息包含在相同的数据结构中。
83.如权利要求82所述的记录介质,
其中,数据结构进一步包含控制命令,该命令导致当显示按钮图象数据时再现与按钮图象数据相关的声音数据。
84.如权利要求83所述的记录介质,
其中,在记录介质上记录数据结构,从而,数据结构包含多组的多个控制命令,同时执行每一组的多个控制命令,在不同的时间执行多组的多个控制命令。
85.如权利要求54所述的记录介质,
其中,在记录介质上记录图象数据,从而,满足对图象数据解码的速率的预定下限。
86.如权利要求54所述的记录介质,
其中,在记录介质上记录图象数据,从而,满足解码的图象数据传输到平面缓冲器时的传输速率的预定下限。
87.如权利要求86所述的记录介质,
其中,在平面缓冲器上定义完全包含一个或多个解码的图象数据的四方形区域,以及
其中,当绘制、更新和删除图象数据时,通过重写四方形区域,满足传输速率的下限。
CNB2004800205788A 2002-11-28 2003-11-14 再现装置和再现方法 Expired - Fee Related CN100466713C (zh)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
JP346133/2002 2002-11-28
JP2002346133 2002-11-28
JP2003022551 2003-01-30
JP22551/2003 2003-01-30
JP2003074441 2003-03-18
JP74441/2003 2003-03-18

Publications (2)

Publication Number Publication Date
CN1685721A true CN1685721A (zh) 2005-10-19
CN100466713C CN100466713C (zh) 2009-03-04

Family

ID=32397753

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2004800205788A Expired - Fee Related CN100466713C (zh) 2002-11-28 2003-11-14 再现装置和再现方法

Country Status (4)

Country Link
US (3) US8150237B2 (zh)
JP (1) JP4442564B2 (zh)
CN (1) CN100466713C (zh)
WO (1) WO2004049710A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101246731B (zh) * 2006-10-02 2011-10-19 索尼株式会社 再现装置、显示控制方法
CN103354624A (zh) * 2013-06-06 2013-10-16 青岛海信宽带多媒体技术有限公司 机顶盒中ui界面图片的更换方法和装置
CN111052222A (zh) * 2017-09-11 2020-04-21 雅马哈株式会社 乐音数据播放装置及乐音数据播放方法

Families Citing this family (121)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6808709B1 (en) * 1994-12-30 2004-10-26 The Regents Of The University Of California Immunoglobulins containing protection proteins and their use
JP3716920B2 (ja) * 2001-10-16 2005-11-16 ソニー株式会社 記録媒体再生装置および方法、記録媒体、並びにプログラム
EP1550121A4 (en) 2002-09-05 2009-06-03 Lg Electronics Inc RECORDING MEDIUM WITH DATA STRUCTURE FOR BRANDS CORRESPONDING TO A PLAYLIST, FOR MANAGING REPROCUTION OF RECORDED IMAGES RECORDED ON THE MEDIUM, AND METHODS AND DEVICES FOR RECORDING AND REPRODUCING
CN100495558C (zh) * 2002-09-06 2009-06-03 Lg电子株式会社 记录和再现用于管理静止图像的数据结构的方法及装置
RU2355048C2 (ru) * 2002-09-07 2009-05-10 Эл Джи Электроникс Инк. Носитель записи со структурой данных для управления воспроизведением статических изображений из записанного на нем файла клипа и способы и устройства записи и воспроизведения
CA2474231C (en) 2002-11-20 2012-10-23 Lg Electronics Inc. Recording medium having data structure for managing reproduction of data recorded thereon and recording and reproducing methods and apparatuses
KR100939711B1 (ko) * 2002-12-12 2010-02-01 엘지전자 주식회사 텍스트 기반의 서브타이틀 재생장치 및 방법
TWI271721B (en) * 2003-01-20 2007-01-21 Lg Electronics Inc Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
EP1595253A4 (en) * 2003-01-20 2009-09-30 Lg Electronics Inc RECORDING MEDIUM COMPRISING A DATA STRUCTURE FOR MANAGING THE REPRODUCTION OF MEDIA RECORDED STILL IMAGES AND REPRODUCTIVE METHODS AND DEVICES
EP1608165B1 (en) 2003-01-31 2010-03-17 Panasonic Corporation RECORDING MEDIUM, REPRODUCTION DEVICE, RECORDING METHOD, PROGRAM, AND REPRODUCTION METHOD for a graphics stream specifying interactive buttons
US8145033B2 (en) * 2003-02-05 2012-03-27 Lg Electronics Inc. Recording medium having data structure for managing reproducton duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US7734154B2 (en) * 2003-02-14 2010-06-08 Lg Electronics Inc. Recording medium having data structure for managing reproduction duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8055117B2 (en) 2003-02-15 2011-11-08 Lg Electronics Inc. Recording medium having data structure for managing reproduction duration of still pictures recorded thereon and recording and reproducing methods and apparatuses
US8041179B2 (en) * 2003-02-24 2011-10-18 Lg Electronics Inc. Methods and apparatuses for reproducing and recording still picture and audio data and recording medium having data structure for managing reproduction of still picture and audio data
KR100886527B1 (ko) 2003-02-28 2009-03-02 파나소닉 주식회사 애니메이션을 수반한 대화화면의 표시를 실현할 수 있는 기록매체, 재생장치, 기록방법, 컴퓨터 판독 가능한 기록매체, 재생방법
DE602004030059D1 (de) * 2003-06-30 2010-12-23 Panasonic Corp Aufzeichnungsmedium, Wiedergabegerät, Programm und Wiedergabeverfahren
KR20050012328A (ko) * 2003-07-25 2005-02-02 엘지전자 주식회사 고밀도 광디스크의 프레젠테이션 그래픽 데이터 관리 및재생방법과 그에 따른 고밀도 광디스크
EP1652184A4 (en) * 2003-07-24 2007-05-23 Lg Electronics Inc RECORD MEDIA WITH A DATA STRUCTURE FOR MANAGING THE PLAYING OF TEXT SUBTITLE DATA RECORDED THEREFOR AND RECORDING AND PLAYBACK METHOD AND DEVICES
KR20050035678A (ko) * 2003-10-14 2005-04-19 엘지전자 주식회사 광디스크 장치의 부가 데이터 재생방법 및 장치와, 이를위한 광디스크
KR20050036277A (ko) * 2003-10-15 2005-04-20 엘지전자 주식회사 고밀도 광디스크의 네비게이션 정보 관리방법
JP4649865B2 (ja) * 2003-11-06 2011-03-16 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにコンピュータ・プログラム
JP4106662B2 (ja) * 2003-11-17 2008-06-25 ソニー株式会社 情報記録再生装置および方法、プログラム格納媒体、並びにプログラム
AU2004293960A1 (en) * 2003-11-28 2005-06-09 Sony Corporation Reproduction device, reproduction method, reproduction program, and recording medium
KR101053575B1 (ko) * 2003-12-09 2011-08-03 엘지전자 주식회사 고밀도 광디스크 및 고밀도 광디스크의 파일 구성방법
BRPI0506712A (pt) * 2004-01-06 2007-05-02 Lg Electronics Inc meio fìsico de gravação, método e aparelho para reproduzir e gravar fluxos de subtìtulo de texto
KR20050072255A (ko) 2004-01-06 2005-07-11 엘지전자 주식회사 고밀도 광디스크의 서브타이틀 구성방법 및 재생방법과기록재생장치
KR20050072256A (ko) * 2004-01-06 2005-07-11 엘지전자 주식회사 고밀도 광디스크의 메뉴 사운드 구성방법 및 재생방법과기록재생장치
US7894711B2 (en) 2004-01-13 2011-02-22 Panasonic Corporation Recording medium, reproduction device, recording method, program, and reproduction method
US8175444B2 (en) * 2004-01-14 2012-05-08 Samsung Electronics Co., Ltd. Method of reproducing from storage medium storing interactive graphics stream activated in response to user's command
JP4892977B2 (ja) * 2004-01-29 2012-03-07 ソニー株式会社 情報処理装置、および情報処理方法、並びにコンピュータ・プログラム
JP2007522596A (ja) * 2004-02-10 2007-08-09 エルジー エレクトロニクス インコーポレーテッド 記録媒体及びテキスト・サブタイトル・ストリームのデコード方法と装置
KR20050089353A (ko) * 2004-03-04 2005-09-08 엘지전자 주식회사 고밀도 광디스크와 그에 따른 데이터 파일 구성 방법 및재생 방법과 장치
US20050196146A1 (en) * 2004-02-10 2005-09-08 Yoo Jea Y. Method for reproducing text subtitle and text subtitle decoding system
EP1716573A1 (en) * 2004-02-10 2006-11-02 LG Electronic Inc. Recording medium having a data structure for managing data streams associated with different languages and recording and reproducing methods and apparatuses
RU2377669C2 (ru) * 2004-02-10 2009-12-27 ЭлДжи ЭЛЕКТРОНИКС ИНК. Носитель записи, имеющий структуру данных для управления различными данными, и способ и устройство записи и воспроизведения
WO2005074399A2 (en) * 2004-02-10 2005-08-18 Lg Electronics Inc. Recording medium and method and apparatus for decoding text subtitle streams
WO2005076601A1 (en) * 2004-02-10 2005-08-18 Lg Electronic Inc. Text subtitle decoder and method for decoding text subtitle streams
EP2141704A3 (en) * 2004-02-10 2011-03-16 LG Electronics, Inc. Recording medium having a data structure for managing data and recording and reproducing method and apparatus
WO2005079064A1 (ja) * 2004-02-17 2005-08-25 Matsushita Electric Industrial Co., Ltd. 記録媒体、再生装置、プログラム、再生方法
EP1721453A2 (en) * 2004-02-26 2006-11-15 LG Electronics, Inc. Recording medium and method and apparatus for reproducing and recording text subtitle streams
WO2005088634A1 (en) * 2004-03-17 2005-09-22 Lg Electronics Inc. Recording medium, method, and apparatus for reproducing text subtitle streams
WO2005088635A1 (en) 2004-03-18 2005-09-22 Lg Electronics Inc. Recording medium and method and apparatus for reproducing text subtitle stream recorded on the recording medium
RU2378722C2 (ru) * 2004-03-26 2010-01-10 ЭлДжи ЭЛЕКТРОНИКС ИНК. Носитель записи, способ и устройство для воспроизведения потоков текстовых субтитров
BRPI0509270A (pt) * 2004-03-26 2007-09-04 Lg Electronics Inc meio de gravação, método e aparelho para reproduzir fluxo de subtìtulo de texto
CN100499780C (zh) * 2004-03-29 2009-06-10 索尼株式会社 数据处理方法和设备
JP4779340B2 (ja) 2004-03-29 2011-09-28 ソニー株式会社 データ処理方法、データ処理装置、および情報記録媒体、並びにコンピュータ・プログラム
US20050234858A1 (en) * 2004-03-30 2005-10-20 Yasuyuki Torii Recording and reproducing apparatus, reproducing apparatus, recording and reproducing method, reproducing method, program and recording medium
KR20060047266A (ko) * 2004-04-26 2006-05-18 엘지전자 주식회사 기록매체, 기록매체의 재생방법과 재생장치
US7571386B2 (en) * 2004-05-03 2009-08-04 Lg Electronics Inc. Recording medium having a data structure for managing reproduction of text subtitle data and methods and apparatuses associated therewith
JP4244331B2 (ja) * 2004-06-11 2009-03-25 ソニー株式会社 データ処理装置およびデータ処理方法、並びにプログラムおよびプログラム記録媒体
JP4692950B2 (ja) * 2004-06-11 2011-06-01 ソニー株式会社 データ処理装置およびデータ処理方法、プログラムおよびプログラム記録媒体、並びにデータ記録媒体
EP1758121B1 (en) 2004-06-18 2010-09-01 Panasonic Corporation Reproduction device, program, and reproduction method
KR101087804B1 (ko) * 2004-07-06 2011-11-29 파나소닉 주식회사 광디스크, 재생장치, 기록방법
JP4332195B2 (ja) * 2004-07-22 2009-09-16 パナソニック株式会社 アプリケーション連動再生を行う再生装置、再生方法、及び再生プログラム
KR100694123B1 (ko) * 2004-07-30 2007-03-12 삼성전자주식회사 동영상 데이터와 어플리케이션 프로그램이 기록된 저장매체 및 그 재생 장치 및 방법
US7609945B2 (en) * 2004-08-17 2009-10-27 Lg Electronics Inc. Recording medium, and method and apparatus for reproducing data from the recording medium
US7613384B2 (en) * 2004-08-17 2009-11-03 Lg Electronics Inc. Method for configuring composite file structure for data reproduction, and method and apparatus for reproducing data using the composite file structure
US7725010B2 (en) * 2004-08-17 2010-05-25 Lg Electronics, Inc. Method and apparatus of reproducing data recorded on recording medium and local storage
US7609939B2 (en) * 2004-08-17 2009-10-27 Lg Electronics Inc. Method and apparatus of reproducing data recorded on recording medium and local storage
JP4505280B2 (ja) * 2004-08-19 2010-07-21 株式会社ソニー・コンピュータエンタテインメント 映像再生装置および映像再生方法
JP4332089B2 (ja) * 2004-08-19 2009-09-16 ソニー株式会社 再生装置、再生方法および再生プログラム、ならびに、記録媒体
KR101228411B1 (ko) * 2004-08-19 2013-02-01 소니 주식회사 영상재생장치 및 방법, 기록매체, 영상재생 프로그램
WO2006018932A1 (ja) 2004-08-19 2006-02-23 Sony Computer Entertainment Inc. 映像再生装置および方法、記録媒体、映像再生プログラム
KR101116965B1 (ko) 2004-08-31 2012-03-14 파나소닉 주식회사 동화상 부호화 방법 및 장치
KR100677129B1 (ko) * 2004-09-03 2007-02-02 삼성전자주식회사 인터랙티브 그래픽 스트림을 기록한 저장 매체, 그 재생장치 및 재생 방법
US7609947B2 (en) * 2004-09-10 2009-10-27 Panasonic Corporation Method and apparatus for coordinating playback from multiple video sources
US20060056804A1 (en) * 2004-09-13 2006-03-16 Seo Kang S Recording medium, and method and apparatus for reproducing data from the recording medium
US20060056803A1 (en) * 2004-09-13 2006-03-16 Seo Kang S Recording medium, method for searching contents recorded within the recording medium, and method and apparatus for reproducing the recorded contents
US7599611B2 (en) * 2004-09-13 2009-10-06 Lg Electronics Co. Recording medium, and method and apparatus of reproducing data recorded on the same
KR20060031750A (ko) * 2004-10-09 2006-04-13 삼성전자주식회사 동영상 재생 및 프로그래밍 기능을 위한 멀티미디어데이터를 기록한 저장매체, 그 재생장치 및 재생방법
JP2006127367A (ja) * 2004-11-01 2006-05-18 Sony Corp 情報管理方法、情報管理プログラムおよび情報管理装置
JP3925812B2 (ja) 2004-11-11 2007-06-06 ソニー株式会社 再生装置および方法
EP2113121B1 (en) * 2004-11-22 2018-11-07 Mario Pirchio Method to synchronize audio and graphics in a multimedia presentation
CN101833966B (zh) * 2004-12-01 2013-05-08 松下电器产业株式会社 再现装置和再现方法
CN100514441C (zh) 2004-12-01 2009-07-15 松下电器产业株式会社 再现装置、图像合成方法、图像合成程序及集成电路
KR100739770B1 (ko) * 2004-12-11 2007-07-13 삼성전자주식회사 멀티 앵글 타이틀에 적용 가능한 메타 데이터를 포함하는저장 매체, 그 재생 장치 및 방법
JP4737991B2 (ja) 2005-01-04 2011-08-03 株式会社東芝 再生装置
JP4417854B2 (ja) 2005-01-04 2010-02-17 株式会社東芝 再生装置
JP4519658B2 (ja) * 2005-01-04 2010-08-04 株式会社東芝 再生装置
JP4568120B2 (ja) * 2005-01-04 2010-10-27 株式会社東芝 再生装置
KR101069858B1 (ko) * 2005-01-31 2011-10-04 엘지전자 주식회사 데이터 기록매체에 기록된 컨텐츠상에 마크를 설정하고,그 마크에 따른 동작을 수행하는 방법 및 장치
US20060218251A1 (en) * 2005-03-14 2006-09-28 Matsushita Electric Industrial Co., Ltd. AV server, AV contents reproducing apparatus, AV contents transmitting method, program and recording medium
JP4715278B2 (ja) * 2005-04-11 2011-07-06 ソニー株式会社 情報処理装置および情報処理方法、プログラム格納媒体、プログラム、並びに提供装置
KR100663647B1 (ko) * 2005-06-01 2007-01-03 삼성전자주식회사 디스플레이장치 및 그 제어방법
JP2007004950A (ja) * 2005-06-27 2007-01-11 Sanyo Electric Co Ltd 光ディスク装置およびハイブリッド型光ディスク
JP4251298B2 (ja) 2005-07-15 2009-04-08 ソニー株式会社 再生装置および再生方法、プログラム、プログラム格納媒体、データ、記録媒体、記録装置、および、記録媒体の製造方法
CN101026725B (zh) * 2005-07-15 2010-09-29 索尼株式会社 再现设备及再现方法
KR20070014944A (ko) * 2005-07-29 2007-02-01 엘지전자 주식회사 데이터 재생방법 및 재생장치, 기록매체와 데이터 기록방법및 기록장치
JP5234144B2 (ja) * 2005-08-30 2013-07-10 ソニー株式会社 再生装置、並びに記録媒体及びその製造方法
US8189908B2 (en) * 2005-09-02 2012-05-29 Adobe Systems, Inc. System and method for compressing video data and alpha channel data using a single stream
KR100750141B1 (ko) * 2005-11-30 2007-08-21 삼성전자주식회사 디지털 데이터 방송 수신기의 해상도 제어 방법, 장치 및그 디지털 데이터 방송 수신기
JP4642655B2 (ja) * 2005-12-28 2011-03-02 ソニー株式会社 再生装置および再生方法、プログラム、記録媒体、データ構造、記録媒体の製造方法および記録装置、並びに、データ構造の生成方法および生成装置
JP4625781B2 (ja) 2006-03-22 2011-02-02 株式会社東芝 再生装置
JP4765734B2 (ja) * 2006-04-06 2011-09-07 ソニー株式会社 情報処理装置、情報処理方法および情報処理プログラム、ならびに、表示制御装置
JP4765733B2 (ja) * 2006-04-06 2011-09-07 ソニー株式会社 記録装置、記録方法および記録プログラム
JP4816262B2 (ja) 2006-06-06 2011-11-16 ソニー株式会社 再生装置、再生方法および再生プログラム
JP5001584B2 (ja) * 2006-06-06 2012-08-15 ソニー株式会社 オーサリング装置、オーサリング方法、オーサリングプログラム、記録装置、記録方法および記録プログラム、検証装置、検証方法および検証プログラム、ならびに、記録媒体の製造装置および製造方法
JP4780806B2 (ja) * 2006-08-29 2011-09-28 パイオニア株式会社 情報再生装置及び方法、並びにコンピュータプログラム
KR101323331B1 (ko) * 2006-11-06 2013-10-29 삼성전자주식회사 불연속 동영상 데이터의 재생 방법 및 장치
US7861150B2 (en) * 2006-11-07 2010-12-28 Microsoft Corporation Timing aspects of media content rendering
US8650489B1 (en) * 2007-04-20 2014-02-11 Adobe Systems Incorporated Event processing in a content editor
US20090010533A1 (en) * 2007-07-05 2009-01-08 Mediatek Inc. Method and apparatus for displaying an encoded image
JP2009111932A (ja) * 2007-10-31 2009-05-21 Panasonic Corp 動画像復号化装置
US8639086B2 (en) 2009-01-06 2014-01-28 Adobe Systems Incorporated Rendering of video based on overlaying of bitmapped images
JP2009163866A (ja) * 2009-01-07 2009-07-23 Casio Comput Co Ltd 情報再生装置および情報再生処理のプログラム
JP2010245970A (ja) * 2009-04-08 2010-10-28 Sony Corp 再生装置、再生方法、およびプログラム
US20100329638A1 (en) * 2009-06-29 2010-12-30 Nortel Networks Limited Method and apparatus for independent licensing of audio in distribution of audiovisual assets
US8134795B2 (en) * 2009-08-27 2012-03-13 Hitachi Global Storage Technologies Netherlands B.V. Using an atmospheric pressure sensor in a hard-disk drive (HDD)
US20110227911A1 (en) * 2010-03-22 2011-09-22 Lg Electronics Inc. Image display device and method for operating the same
US9454341B2 (en) * 2010-11-18 2016-09-27 Kodak Alaris Inc. Digital image display device with automatically adjusted image display durations
KR20130094044A (ko) * 2012-02-15 2013-08-23 삼성전자주식회사 영상 표시 장치에서 자막 속성을 변경하기 위한 장치 및 방법
JP5339002B2 (ja) * 2013-05-20 2013-11-13 ソニー株式会社 情報処理装置、再生方法、および記録媒体
US9749414B2 (en) * 2013-08-29 2017-08-29 International Business Machines Corporation Storing low retention priority data in a dispersed storage network
US9323504B1 (en) * 2014-03-19 2016-04-26 Amazon Technologies, Inc. Template-driven data access
US9792957B2 (en) 2014-10-08 2017-10-17 JBF Interlude 2009 LTD Systems and methods for dynamic video bookmarking
CN105530532B (zh) * 2016-03-02 2018-09-07 深圳市茁壮网络股份有限公司 一种滚动字幕显示方法、装置和机顶盒
WO2017169499A1 (ja) * 2016-03-31 2017-10-05 ソニー株式会社 制御装置、制御方法及びコンピュータプログラム
US10911832B2 (en) 2016-07-25 2021-02-02 Google Llc Methods, systems, and media for facilitating interaction between viewers of a stream of content
GB2557194A (en) * 2016-11-29 2018-06-20 Sony Corp A decoder, encoder, computer program and method
US11882337B2 (en) 2021-05-28 2024-01-23 JBF Interlude 2009 LTD Automated platform for generating interactive videos
US20230076702A1 (en) * 2021-08-31 2023-03-09 JBF Interlude 2009 LTD Shader-based dynamic video manipulation

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08339663A (ja) 1995-04-14 1996-12-24 Toshiba Corp 記録媒体とこの記録媒体へのデータの記録装置とその記録方法、その記録媒体からのデータの再生装置とその再生方法
TW305043B (zh) * 1995-09-29 1997-05-11 Matsushita Electric Ind Co Ltd
WO1997038527A1 (fr) * 1996-04-05 1997-10-16 Matsushita Electric Industrial Co., Ltd. Disque optique multimedia contenant des donnees audio d'une pluralite de canaux, des donnees infra-video et des donnees d'images dynamiques; dispositif et procede de reproduction desdites donnees
KR100186409B1 (ko) * 1996-04-23 1999-05-01 구자홍 피씨와 티브이 적응형 피아이피 영상신호 처리회로
US5999698A (en) * 1996-09-30 1999-12-07 Kabushiki Kaisha Toshiba Multiangle block reproduction system
JPH10145722A (ja) 1996-11-07 1998-05-29 Sony Corp 再生制御データ生成装置およびその方法
JPH10308924A (ja) * 1997-05-02 1998-11-17 Sony Corp 符号化装置及び方法
JP4416846B2 (ja) * 1997-08-22 2010-02-17 ソニー株式会社 メニュー制御用データを記録したコンピュータ読み取り可能な記録媒体ならびにメニュー制御方法および装置
USRE39745E1 (en) * 1997-08-22 2007-07-24 Sony Corporation Recording medium retaining data for menu control, menu control method and apparatus
US6310648B1 (en) * 1997-09-12 2001-10-30 Eastman Kodak Company User interface for electronic image viewing apparatus
US6580870B1 (en) * 1997-11-28 2003-06-17 Kabushiki Kaisha Toshiba Systems and methods for reproducing audiovisual information with external information
US6912350B1 (en) * 1999-12-08 2005-06-28 Intel Corporation DVD subpicture rendering without loss of color resolution
CN100517489C (zh) * 2000-03-14 2009-07-22 松下电器产业株式会社 图像以及声音的重放装置及方法
JP2001275089A (ja) 2000-03-27 2001-10-05 Toshiba Corp ディジタルビデオ記録媒体並びにディジタルビデオディスク再生装置
EP1255406B1 (en) * 2000-04-21 2007-02-07 Matsushita Electric Industrial Co., Ltd. Trick play apparatus for digital storage medium
JP2001326910A (ja) * 2000-05-17 2001-11-22 Toshiba Corp プレビュー表示システム
EP1316207A1 (en) * 2000-08-28 2003-06-04 Koninklijke Philips Electronics N.V. Reproducing arrangement having an overview reproducing mode
US6806887B2 (en) * 2001-04-04 2004-10-19 International Business Machines Corporation System for integrating personalized data with visual content
US7481362B2 (en) * 2002-08-21 2009-01-27 Networks Plus, Inc. Communication card system, communication system, and web information transmission and processing device
TWI271721B (en) * 2003-01-20 2007-01-21 Lg Electronics Inc Recording medium having data structure for managing reproduction of still pictures recorded thereon and recording and reproducing methods and apparatuses
CN1700329B (zh) 2004-01-29 2010-06-16 索尼株式会社 再现装置、再现方法、再现程序和记录介质

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101246731B (zh) * 2006-10-02 2011-10-19 索尼株式会社 再现装置、显示控制方法
CN103354624A (zh) * 2013-06-06 2013-10-16 青岛海信宽带多媒体技术有限公司 机顶盒中ui界面图片的更换方法和装置
CN103354624B (zh) * 2013-06-06 2016-06-29 青岛海信宽带多媒体技术有限公司 机顶盒中ui界面图片的更换方法和装置
CN111052222A (zh) * 2017-09-11 2020-04-21 雅马哈株式会社 乐音数据播放装置及乐音数据播放方法
CN111052222B (zh) * 2017-09-11 2023-07-25 雅马哈株式会社 乐音数据播放装置及乐音数据播放方法

Also Published As

Publication number Publication date
WO2004049710A1 (ja) 2004-06-10
JP4442564B2 (ja) 2010-03-31
US20120114298A1 (en) 2012-05-10
CN100466713C (zh) 2009-03-04
JPWO2004049710A1 (ja) 2006-03-30
US20050105888A1 (en) 2005-05-19
US8150237B2 (en) 2012-04-03
US8818170B2 (en) 2014-08-26
US20120189275A1 (en) 2012-07-26
US8606080B2 (en) 2013-12-10

Similar Documents

Publication Publication Date Title
CN1685721A (zh) 再现装置、再现方法、再现程序以及记录介质
CN1700329A (zh) 再现装置、再现方法、再现程序和记录介质
CN100348033C (zh) 信息处理方法和装置、程序和记录介质
CN1698369A (zh) 再现装置、再现方法、再现程序以及记录介质
CN1193607C (zh) 信息处理设备和方法
CN1199446C (zh) 信息处理设备和方法
CN1310508C (zh) 数据传输装置及方法
CN1239021C (zh) 信息处理设备及方法、程序和记录介质
CN1757231A (zh) 记录介质、再现装置、记录方法、程序和再现方法
CN1817031A (zh) 记录介质、再现装置、记录方法、程序和再现方法
CN1925049A (zh) 使用信息存储介质的信息重放系统
CN1913028A (zh) 信息存储介质、信息重放设备、信息重放方法和信息重放程序
CN1817034A (zh) 记录介质、再现装置、记录方法、集成电路、程序和再现方法
CN101053033A (zh) 信息存储介质、信息再现设备、和信息再现方法
CN1757074A (zh) 再现设备、再现方法、再现程序、和记录介质
CN1745579A (zh) 记录介质、再现装置、记录方法、程序以及再现方法
CN1879170A (zh) 记录介质、再现装置和方法、记录方法以及计算机可读取程序
CN1695197A (zh) 记录介质,播放设备,程序,播放方法,以及记录方法
CN1839626A (zh) 再现装置、程序以及再现方法
CN1781153A (zh) 记录介质和方法、再现装置和方法、程序和集成电路
CN1754225A (zh) 记录介质、再现设备、记录方法、再现方法以及计算机程序
CN1885426A (zh) 使用存储信息介质的信息回放系统
CN1969549A (zh) 记录介质,再现设备,程序
CN1926857A (zh) 记录媒体、再现装置、程序、再现方法
CN1969548A (zh) 记录介质,再现设备,程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee
CP01 Change in the name or title of a patent holder

Address after: Tokyo, Japan

Patentee after: Sony Corp.

Address before: Tokyo, Japan

Patentee before: Sony Corp.

EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20051019

Assignee: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd.

Assignor: Blue light United Co.,Ltd.

Contract record no.: 2014990000237

Denomination of invention: Recording medium on which 3d video is recorded, recording medium for recording 3d video, and reproducing device and method for reproducing 3d video

Granted publication date: 20090304

License type: Common License

Record date: 20140423

Application publication date: 20051019

Assignee: GUANGZHOU PANYU JUDA CAR AUDIO EQUIPMENT Co.,Ltd.

Assignor: Blue light United Co.,Ltd.

Contract record no.: 2014990000233

Denomination of invention: Recording medium on which 3d video is recorded, recording medium for recording 3d video, and reproducing device and method for reproducing 3d video

Granted publication date: 20090304

License type: Common License

Record date: 20140422

Application publication date: 20051019

Assignee: TONLY ELECTRONICS HOLDINGS Ltd.

Assignor: Blue light United Co.,Ltd.

Contract record no.: 2014990000240

Denomination of invention: Recording medium on which 3d video is recorded, recording medium for recording 3d video, and reproducing device and method for reproducing 3d video

Granted publication date: 20090304

License type: Common License

Record date: 20140423

Application publication date: 20051019

Assignee: Shenzhen Maxmade Technology Co.,Ltd.

Assignor: Blue light United Co.,Ltd.

Contract record no.: 2014990000239

Denomination of invention: Recording medium on which 3d video is recorded, recording medium for recording 3d video, and reproducing device and method for reproducing 3d video

Granted publication date: 20090304

License type: Common License

Record date: 20140423

Application publication date: 20051019

Assignee: CHINA HUALU GROUP Co.,Ltd.

Assignor: Blue light United Co.,Ltd.

Contract record no.: 2014990000238

Denomination of invention: Recording medium on which 3d video is recorded, recording medium for recording 3d video, and reproducing device and method for reproducing 3d video

Granted publication date: 20090304

License type: Common License

Record date: 20140423

LICC Enforcement, change and cancellation of record of contracts on the licence for exploitation of a patent or utility model
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20051019

Assignee: Dongguan de video technology Co.,Ltd. Kit

Assignor: Blue light United Co.,Ltd.

Contract record no.: 2016990000233

Denomination of invention: Recording medium on which 3d video is recorded, recording medium for recording 3d video, and reproducing device and method for reproducing 3d video

Granted publication date: 20090304

License type: Common License

Record date: 20160614

LICC Enforcement, change and cancellation of record of contracts on the licence for exploitation of a patent or utility model
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090304

Termination date: 20211114

CF01 Termination of patent right due to non-payment of annual fee