CN100438606C - 数据处理装置 - Google Patents

数据处理装置 Download PDF

Info

Publication number
CN100438606C
CN100438606C CNB2004800012709A CN200480001270A CN100438606C CN 100438606 C CN100438606 C CN 100438606C CN B2004800012709 A CNB2004800012709 A CN B2004800012709A CN 200480001270 A CN200480001270 A CN 200480001270A CN 100438606 C CN100438606 C CN 100438606C
Authority
CN
China
Prior art keywords
video
data
conversion
picture
main video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2004800012709A
Other languages
English (en)
Other versions
CN1706187A (zh
Inventor
矢羽田洋
冈田智之
池田航
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1706187A publication Critical patent/CN1706187A/zh
Application granted granted Critical
Publication of CN100438606C publication Critical patent/CN100438606C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42646—Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4355—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504—Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/46—Receiver circuitry for the reception of television signals according to analogue transmission standards for receiving on more than one standard at will
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/04—Synchronising
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0112—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

本发明的数据处理装置包括：接收部，其接收数据流，该数据流包含通过以第1垂直扫描频率切换多张画面而进行显示的第1主视像数据、和与第1主视像同步显示的第1副视像数据；和变换部，其将第1主视像以及第1副视像的各个数据变换为通过以与第1垂直扫描频率不同的第2垂直扫描频率切换多张画面而进行显示的合成视像的数据。数据流包括规定第1主视像以及第1副视像的显示时刻的时刻信息。变换部对于与第1主视像的画面具有相同内容的第2主视像的画面，通过与在第1主视像的画面上显示的和第1副视像具有相同内容的第2副视像建立对应，生成显示第2主视像以及第2副视像的合成视像。

Description

数据处理装置
技术领域
本发明涉及将高清晰的视像(HD视像)变换为标准图像质量的视像(SD视像)的技术。
背景技术
近年，DVD介质变得非常普及。其中，DVD-视频盘(以下简记为“DVD”)作为收录了电影等的包软件已经有很多在市场上面市了。
图1表示DVD的数据结构。如图1的下方所示，在从DVD最内周的导入到最外周的导出为止之间的区域分配为逻辑地址，基于此逻辑地址，逻辑数据被存储。在基于逻辑地址存取可能的数据区域(逻辑地址空间)最开始以后的部分存储了文件系统的卷信息，接着存储了视像、音频等的应用数据。
所谓文件系统表示ISO9660、UDF(Universal Disc Format：通用盘格式)等，是将盘上的数据以被称为目录或者文件的单位进行管理的系统。日常使用的PC(个人计算机)的情况下，通过被称为FAT或者NTFS的文件系统，以目录、文件等的数据结构将硬盘上存储的数据在计算机上表示，提高可用性。
DVD中，利用了UDF以及ISO9660两种文件系统(两者合称“UDF桥”)，不论由UDF或者ISO9660哪一种文件系统，驱动器都能够读出数据。当然，作为重写型的DVD介质的DVD-RAM/R/RW中，通过这些文件系统，可以在物理上读取、写入、删除数据。
在DVD上存储的数据通过UDF桥能作为在图1左上角所示那样的目录或者文件看到。在根目录(图中为“ROOT”)的正下方设置称为“VIDEO_TS”的目录，在此记录DVD的应用数据。应用数据作为多个文件被记录，有以下主要的文件。
VIDEO_TS.IFO：盘重放控制信息文件
VTS_01_0.IFO：视像标题集#1重放控制信息文件
VTS_01_0.VOB：视像标题集#1流文件
在文件系统中规定了2种后缀。后缀“IFO”表示存储了重放控制信息的文件，后缀“VOB”表示存储了作为AV数据的MPEG流的文件。重放控制信息包括：在DVD中采用的、根据使用者的操作使重放动态地变化的、为了实现交互性的信息；原数据那样的在标题中附带的信息；流中附带的信息等。另外，在DVD中一般将重放控制信息称为导向信息。
重放控制信息文件有管理盘全体的“VIDEO_TS.IFO”和各个视像标题集(在DVD中多个标题、换言之不同电影和不同版本的电影能存储在1张盘上)的每个的重放控制信息的“VTS_01_0.IFO”。此处，在文件名中的“01”表示视像标题集的号码，例如，当视像标题集#2的情况下成为“VTS_02_0.IFO”。
图1的右上部是在DVD应用层的DVD导向空间，上述重放控制信息是展开的逻辑结构空间。“VIDEO_TS.IFO”内的信息作为VMGI(VedioManager Information：视像管理信息)，“VTS_01_0.IFO”或者存在于其他的每个视像标题集的重放控制信息作为VTSI(视像标题集信息)在DVD导向空间被展开。
VTSI中记述了被称为PGC(Program Chain：程序链)的重放顺序信息的PGCI(程序链信息)。PGCI由单元Cell的集合和被称为命令的一种编程信息构成。单元自身是与MPEG流对应的VOB(Video Object：视像对象)的一部分区间或者全部区间的集合，单元的重放意味着重放由该VOB的单元指定的区间。
命令是与在浏览器上执行的Java(注册商标)脚本等相近的概念，由DVD的假设机器处理。只是，相对于Java(注册商标)脚本除了进行逻辑运算之外还进行窗口和浏览器的控制(例如，打开新浏览器的窗口等)，DVD的命令除了逻辑运算之外，还执行AV标题的重放控制(例如，重放章节的指定等)，在这一点上不同。
单元具有将在盘上存储的VOB的开始以及结束地址(盘上的逻辑存储地址)作为其内部信息，播放机利用在单元中记述的VOB的开始以及结束地址信息执行数据的读出、重放。
图2表示流中携带的导向信息中所包括的各种信息。作为DVD的特长的交互性并非仅由上述的“VIDEO_TS.IFO”、“VTS_0._0.IFO”等存储的导向信息实现，几个重要信息使用被称为导向组包(“导向组包”或者记为“NV_PCK”)的专用载体在VOB内和视像数据、音频数据一起被多路复用。
此处作为简单的交互性的例子说明菜单。在菜单画面上出现多个按钮，对各个按钮定义了选择执行该按钮时的处理。另外，在菜单上选择一个按钮(通过高亮，在选择按钮上覆盖半透明色，向使用者表示该按钮处于选择状态)，使用者使用遥控器的上下左右键，能够使处于选择状态的按钮向上下左右的任意按钮移动。即使用者通过使用遥控器的上下左右键，移动高亮部分，直到想要选择执行的按钮为止，按下决定键进行决定，对应的命令的程序被执行。一般地，对应的标题和章节的重放是通过命令执行的。
在NV_PCK内包括高亮颜色信息和各个按钮信息等。在高亮颜色信息中记述了颜色模板信息，被覆盖显示的高亮的半透明色被指定。在按钮信息中记述了作为各个按钮的位置信息的矩形区域信息、从该按钮向其它的按钮的移动信息(与使用者的上下左右键操作分别对应的移动目的地按钮的指定)、按钮命令信息(该按钮被决定时执行的命令)。
菜单上的高亮是作为向菜单图像的覆盖图像做成的。即在按钮信息的矩形区域对应的区域中，基于彩色模板信息赋予颜色，通过将其与菜单的按钮信息的矩形区域重叠，实现菜单上的高亮。此覆盖图像和背景图像合成，在画面上显示。
还有，使用NV_PCK将导向数据的一部分填充到流中的理由是：第1，为了和流同步，动态地更新菜单信息(例如，在电影重放的中间只在5分钟～10分钟间显示菜单等)、即使同步时间容易成问题的应用也能够确实被同步。另外，第2，在NV_PCK中存储为了支持特殊重放的信息，当快进、回放等的特殊重放时也能顺利地对AV数据解码、重放等，为了提高使用者的操作性。
图3A～3C表示VOB的生成顺序，图3D表示为了重放生成的VOB的装置的构成。在图3A中表示的运动图像、音频、字幕等是基于在图3B中所示的MPEG系统标准(ISO/IEC13818-1)压缩以及打包的。此时，视像是高清晰视像(以下记为“HD视像”)，在保持其视像品质的状态下被压缩以及打包。在HD视像中包括运动图像、静止图像、文字图形等各种高清晰图像质量的视像。然后，如图3所示，分别被多路复用而生成1个MPEG程序流。此时，包括了为了实现交互性的按钮命令的NV_PCK也被一起多路复用。
MPEG系统的多路复用的特征是如果以运动图像、音频、字幕的种类看的话，MPEG流数据是基于其解码顺序以比特串配置的，但在多路复用的运动图像、音频、字幕的各个种类间，数据不一定是以重放顺序，换言之并非限于以解码顺序形成比特串。例如，如果运动图像数据的组包和字幕数据的组包连续地配置，也不一定限于在同一时间被解码或者重放。
这样的多路复用的理由是因为MPEG流在规定的解码器模型(一般所说的系统目标解码器(System Target Decoder；STD)中必须以能被解码那样编码，设置了这样的限制。即，在解码器模型中规定了与各个基本的流对应的解码器缓存器，其缓存器的容量对于各个基本流每个的容量不同。具体地说，对于运动图像是232KB，对于音频是4KB，对于字幕是52KB。视像、音频等的各个数据直到解码时间到来为止同时被存储。解码时间因为根据缓存容量而不同，所以即使相邻被多路复用，解码等的时间也不同。
重放MPEG程序流时，输入到图3D所示的装置。多路复用器3100接收MPEG程序流，分离包括运动图像数据、字幕数据以及音频数据的组包，传送到缓存器/解码器3108。缓存器/解码器3108缓存组包数据的同时，对运动图像数据、字幕数据等的每个进行解码，构建流。具体地说，缓存器3108具有视像缓存器、字幕用缓存器以及音频缓存器，在视像缓存器中存储运动图像数据，在字幕用缓存器中存储字幕数据，在音频缓存器中存储音频数据。其后，缓存器/解码器3108基于组包数据构建运动图像数据、字幕数据以及音频数据并输出。在图3D中没有特别地表示解码器。缓存器/解码器3108输出HD视像的运动图像数据、字幕数据以及音频数据。对于音频数据在解码后被输出到扬声器等，作为音频被重放。
HD视像的数据如以下这样被处理。从缓存器/解码器输出的HD视像数据(运动图像数据、静止图像数据以及文字图形数据)被送到各个处理通路。运动图像数据在视像变换部3101中通过NTSC、PAL方式等变换为隔行视像(SD视像)，在换算部3102中校正分辨率和平面形状。然后，运动图像通过MPEG编码时，在第一图像质量校正部3103中有效地除去MPEG压缩特有的噪声(块噪声、管理操作系统键控噪声)，图像质量得到改善。静止图像数据进行静止图像编码方式所固有的图像质量校正，在第2图像质量校正部3104中被降频转换(down convert)。然后，和运动图像的输出相互切换并被输出。文字图形数据在第3图像质量校正部3105中进行适合于文字图形的降频转换。
另一方面，字幕数据被输出到第4图像质量校正部3107，通过颜色变换表CLUT3106进行必要的颜色变换处理，其后，在第4图像质量校正部3107中降频转换为SD视像。然后，输出到能显示和运动图像等的SD视像合成的SD视像的TV中。
在缓存器/解码器3108的输出后，将分辨率、纵横比(aspect ratio)、帧速(frame rate)等从HD视像变换为SD视像的理由是因为利用与运动图像、静止图像、字幕等的各个最适合的文件进行个别处理能够最小限地防止降频转换时的图像质量恶化。这样的处理例如在日本特开2001-292341号公报中有记载。
今后，HD视像以原样的帧速被存储的机会会增加。例如，随着存储介质的容量增加以及存储速度的提高，假设电影素材早晚以本来的24帧/秒且720P(或者1080i)被存储的机会会增加。另一方面，只能显示SD视像的TV也会在今后相当长的期间内被使用。由此，在重放存储了HD视像的记录介质的装置中，可以说将HD视像变换为SD视像的必要性是极高的。但是，现在普及的DVD中，由于不能以原样的帧速存储HD视像，所以至今为止，考虑了这样的变换的DVD重放装置未被考虑。
另外，MPEG流这样的运动图像、字幕等各个数据分别被多路复用成流的情况下，HD视像变换为SD视像时，内容提供商一侧在创作时如所期望的那样，有必要重放运动图像、字幕等。
发明内容
本发明的目的在于保持本来期望的HD图像质量的视像、字幕等重放时间的同时，变换为SD图像质量的视像、字幕等。
依据本发明的数据处理装置，包括：接收部，其接收数据流，该数据流包含通过以第1垂直扫描频率切换多张画面而进行显示的第1主视像数据、和与所述第1主视像同步显示的第1副视像数据；和变换部，其将所述第1主视像以及所述第1副视像的各个数据变换为通过以与所述第1垂直扫描频率不同的第2垂直扫描频率切换多张画面而进行显示的合成视像的数据。所述数据流包括规定所述第1主视像以及所述第1副视像的显示时刻的时刻信息。所述变换部对于与所述第1主视像的画面具有相同内容的第2主视像的画面，通过与在所述第1主视像的画面上显示的和所述第1副视像具有相同内容的第2副视像建立对应，生成显示所述第2主视像以及所述第2副视像的合成视像。
所述变换部也可以包括：视像变换部，其通过垂直扫描频率的变换处理，将所述第1主视像的数据变换为所述第2主视像的数据；字幕变换部，其将所述第1副视像的数据变换为第2副视像的数据，并且确定与所述第1副视像的文字同步显示的所述第1主视像的画面，将与所确定的所述第1主视像的画面对应的所述第2主视像的画面、和与所述第1副视像的文字对应的所述第2副视像的文字建立对应；和合成部，其将建立对应后的所述第2主视像的数据和第2副视像的数据合成，生成所述合成视像的数据。
所述变换部也可以包括：合成部，其将根据所述时刻信息同步的所述第1主视像以及所述第1副视像重叠，生成重叠视像；和视像变换部，其将所述重叠视像的数据变换为所述合成视像的数据。
所述变换部也可以将规定分辨率的所述第1主视像以及所述第1副视像的数据变换为与所述规定分辨率不同的分辨率的合成视像的数据。
所述变换部也可以将电影素材的所述第1主视像以及所述第1副视像的数据变换为以NTSC以及PAL中的一种方式显示的合成视像的数据。
所述变换部也可以将电影素材的所述第1主视像以及所述第1副视像的1帧变换为以PAL显示的所述合成视像的2个以上的半帧，在向半帧变换时，将同一个半帧定期地多次插入。
所述数据流包含表示在所述变换部中变换可否的变换允许信息；所述变换部也可以在所述变换允许信息表示允许变换的情况下进行所述变换。
所述数据流包含指定变换种类的变换指定信息；所述变换部也可以进行根据所述变换指定信息指定的所述种类的变换。
所述数据处理装置也可以进一步包括输入部，其输入指定变换种类的变换指定信息。所述变换部进行由所述变换指定信息所指定的所述种类的变换。
所述变换部也可以基于所述变换指定信息进行将各张画面一次一次地显示的变换以及将确定的画面多次显示的变换之中的一种，生成PAL方式的合成视像。
依据本发明的数据处理方法，包括：接收步骤，其接收数据流，该数据流包含通过以第1垂直扫描频率切换多张画面而进行显示的第1主视像数据、和与所述第1主视像同步显示的第1副视像数据；和变换步骤，其将所述第1主视像以及所述第1副视像的各个数据变换为通过以与所述第1垂直扫描频率不同的第2垂直扫描频率切换多张画面而进行显示的合成视像的数据。所述数据流包括规定所述第1主视像以及所述第1副视像的显示时刻的时刻信息。在所述变换步骤中，对于与所述第1主视像的画面具有相同内容的第2主视像的画面，通过与在所述第1主视像的画面上显示的和所述第1副视像具有相同内容的第2副视像建立对应，生成显示所述第2主视像以及所述第2副视像的合成视像。
所述变换步骤也可以包括：视像变换步骤，其通过垂直扫描频率的变换处理，将所述第1主视像的数据变换为所述第2主视像的数据；字幕变换步骤，其将所述第1副视像的数据变换为第2副视像的数据，并且确定与所述第1副视像的文字同步显示的所述第1主视像的画面，将与所确定的所述第1主视像的画面对应的所述第2主视像的画面、和与所述第1副视像的文字对应的所述第2副视像的文字建立对应；和合成步骤，其将建立对应后的所述第2主视像的数据和第2副视像的数据合成，生成所述合成视像的数据。
所述变换步骤也可以包括：合成步骤，其将根据所述时刻信息同步的所述第1主视像以及所述第1副视像重叠，生成重叠视像；和视像变换步骤，其将所述重叠视像的数据变换为所述合成视像的数据。
在所述变换步骤中，也可以将规定分辨率的所述第1主视像以及所述第1副视像的数据变换为与所述规定分辨率不同的分辨率的合成视像的数据。
在所述变换步骤中，也可以将电影素材的所述第1主视像以及所述第1副视像的数据变换为以NTSC以及PAL中的一种方式显示的合成视像的数据。
在所述变换步骤中，也可以将电影素材的所述第1主视像以及所述第1副视像的1帧变换为以PAL显示的所述合成视像的2个以上的半帧，在向半帧变换时，将同一个半帧定期地多次插入。
所述数据流包含表示在所述变换步骤中变换可否的变换允许信息；在所述变换步骤中，也可以在所述变换允许信息表示允许变换的情况下进行所述变换。
所述数据流包含指定变换种类的变换指定信息；在所述变换步骤中，也可以进行根据所述变换指定信息指定的所述种类的变换。
所述数据处理方法也可以进一步包括输入步骤，其输入指定变换种类的变换指定信息。在所述变换步骤中，进行由所述变换指定信息所指定的所述种类的变换。
在所述变换步骤中，也可以基于所述变换指定信息进行将各张画面一次一次地显示的变换以及将确定的画面多次显示的变换之中的一种，生成PAL方式的合成视像。
附图说明
图1是表示DVD的数据结构的图。
图2是表示在流中携带的导向信息中所包含的各种信息的图。
图3A～3C是表示VOB的生成顺序，图3D是表示为了重放生成的VOB的装置的构成的图。
图4是表示盘状存储介质的BD104和存储的数据101、102、103的构成的图。
图5是表示在BD中存储的逻辑数据的目录/文件结构的图。
图6是表示读出BD201上的视像数据，重放视像的播放机的概略的功能构成的图。
图7是表示播放机的详细功能框图的构成图。
图8是表示BD的应用空间的概念图。
图9是表示视像的画面和MPEG流的数据结构的关系图。
图10是表示组包的数据结构的图。
图11是表示VOB数据文件等和为了读出这些文件的播放机的功能框图的构成图。
图12是表示使用了轨道缓存器的VOB数据连续提供模型的图。
图13是表示VOB管理信息文件(“YYY.VOBI”)的内部结构的图。
图14是表示VOBU的重放时间长度和数据大小的对应关系的图。
图15是表示基于VOBU的重放时间为了取得地址的处理的概念的图。
图16是表示播放清单信息的数据结构的图。
图17是表示事件处理器表(“XXX.PROG”)的数据结构的图。
图18是表示关于BD全体的信息数据结构的图。
图19是表示全局事件处理器的程序表(“BD.PROG”)的图。
图20是表示时间事件的概念图。
图21是表示进行菜单操作的使用者事件的概念图。
图22是表示全局事件的概念图。
图23是表示关于程序处理器的功能框图的构成图。
图24是表示系统参数(SPRAM)的一览的图。
图25是表示带有2个选择按钮的菜单的程序的例子的图。
图26是表示菜单选择的使用者事件的事件处理器的程序的例子的图。
图27是表示到AV重放为止的基本处理流程的图。
图28是表示从播放清单重放开始到VOB重放开始为止的处理流程的图。
图29是表示从AV重放开始后的事件处理流程的图。
图30是表示字幕处理流程的图。
图31是表示根据本实施方式进行降频转换处理的重放装置100的构成的图。
图32是表示降频转换处理的顺序的图。
图33是表示将HD视像(电影素材视像)的画面变换为SD视像(NTSC方式或者PAL方式的视像)的画面时的相关关系的图。
图34是表示根据本发明的第2方法将HD视像(电影素材视像)的画面变换为SD视像的画面时的相关关系的图。
图35是表示根据第2例降频转换处理的顺序的图。
图36是表示记述了推荐的变换方法的变换指定信息的数据结构的图。
图37是表示基于变换指定信息决定降频转换方法，重放SD视像的顺序的图。
具体实施方式
以下，说明本发明的实施方式。在本实施方式中，HD视像是存储在具有DVD数倍存储容量的蓝光盘等的高密度介质中的。在本实施方式的说明中，作为这样的高密度介质的例子例举了蓝光盘(蓝光盘；以下记为“BD”)，说明能将在BD中存储的HD视像变换为SD视像的重放装置的构成以及动作。
首先，说明在本实施方式中用词的意义。
视像：通过以规定的垂直扫描频率逐次切换多张画面进行显示的图像。视像包括运动图像、静止图像、字幕等的文字和图形等。运动图像、静止图像等被称为主视像，与主视像同步重叠显示的字幕等也被称为副视像。
画面：在隔行方式中由奇数行和偶数行的2个半帧构成的图像。在逐行方式中由1帧构成的图像。画面是代表了帧以及半帧两种意思的概念。
SD视像：指标准图像质量的视像(NTSC方式的480i视像、PAL方式的576i视像)。
HD视像：指上述SD视像以外的高清晰的视像(例如，高清晰视像)。
以下，在表1以及表2中表示关于SD视像和HD视像的运动图像的更具体的例子。在表2中24p或者23.976p的HD视像被称为电影素材的视像。
(表1)分辨率(行数)+扫描种类
Figure C20048000127000161
i：隔行扫描，p：逐行扫描
(表2)频率(Hz)+扫描种类
i：隔行扫描，p：逐行扫描
还有，在表1中表示的480p以及576p的各个视像也能有不是HD视像的分类。但是，在本说明书中，这些视像是作为HD视像对待的。其理由是因为这些视像是通过隔行逐行变换(IP变换)被变换为NTSC方式的480i以及PAL方式的576i，被表示为标准图像质量TV(SDTV)，关于处理可以说和一般的作为HD视像的720p以及1080i是同等的。
以下，为了容易理解，将项目分开进行说明。项目是进行(1)BD的逻辑数据结构、(2)播放机的构成、(3)BD的应用空间、(4)VOB的详细、(5)VOB的隔行存储、(6)导向数据结构、(7)播放清单的数据结构、(8)事件发生的机理、(9)虚拟播放机、(10)程序的例子、(11)虚拟播放机的处理流程、(12)降频转换(down convert)处理的重放装置。还有，本发明的主要处理之一是从HD视像向SD视像的降频转换(down convert)时的处理。
(1)BD的逻辑数据结构
图4表示作为盘状的存储介质的BD104和存储的数据101、102、103的构成。在BD104中存储的数据是AV数据103、关于AV数据的管理信息以及AV重放顺序等的BD管理信息102、实现交互的BD重放程序101。在本实施方式中，主要着重于为了重放电影的AV内容的AV应用程序对BD进行说明。但是，当然并不仅限于此用途。
图5表示上述的BD中存储的逻辑数据的目录/文件结构。BD和其他光盘例如DVD和CD等同样具有从其内周向外周螺旋状的存储区域，和DVD同样，具有能根据逻辑地址进行存取的数据区(逻辑地址空间)。另外，在导入的内侧具有被称为BCA(Burst Cutting Area)的只有驱动器能读取的特别区域。此区域由于不能从应用程序读出，所以例如能被利用于著作权保护技术等。
在逻辑地址空间中，在最开始部分存储了文件系统信息(卷)，后面存储了视像数据等的应用数据。所谓文件系统如以往记述所说明的，是指UFD和ISO9660等，和通常的PC同样地，能通过目录、文件结构读出存储的逻辑数据。
在本实施方式中，BD上的目录、文件结构是在根目录ROOT下面设置了BDVIDEO目录。此目录是存储了通过BD处理的AV内容和管理信息等的数据(在图4中说明的101、102、103)的目录。
在BDVIDEO目录的下面存储了下面的(a)～(g)的7种文件。
(a)BD.INFO(文件名固定)
是“BD管理信息”的一个，是存储了关于BD全体信息的文件。BD播放机最初读出此文件。
(b)BD.PROG(文件名固定)
是“BD重放程序”的一个，是存储了关于BD全体的重放控制信息的文件。
(c)XXX.PL(“XXX”可变，后缀“PL”固定)
是“BD管理信息”的一个，是存储了作为情节(重放顺序)的播放清单信息的文件。每一个播放清单具有1个文件。
(d)XXX.PROG(“XXX”可变，后缀“PL”固定)
是“BD重放程序”的一个，是存储了上述每个播放清单的重放控制信息的文件。和播放清单的对应是由文件体名(“XXX”一致)识别的。
(e)YYY.VOB(“YYY”可变，后缀“VOB”固定)
是“AV数据”的一个，是存储了VOB(和以往例子中说明的VOB相同)的文件。每个VOB具有1个文件。
(f)YYY.VOBI(“YYY”可变，后缀“VOBI”固定)
是“BD管理信息”的一个，是存储了关于作为AV数据的VOB的流管理信息的文件。和VOB的对应是由文件体(file body)名(“YYY”一致)识别的。
(g)ZZZ.PNG(“ZZZ”可变，后缀“PNG”固定)
是“AV数据”的一个，是存储为了构成字幕以及菜单的图像数据PNG(根据W3C被标准化的图像格式)的文件。每1个PNG图像具有一个文件。
(2)播放机的构成
接着，参照图6以及图7的同时，说明重放上述BD的播放机的构成。
图6表示读出BD201上的视像数据、重放视像的播放机的概略的功能构成。播放机包括：拾光器202、各种存储器(程序记录存储器203、管理信息记录存储器204、AV记录存储器205)、程序处理部206、管理信息处理部207。
拾光器202从BD201读出数据。
程序处理部206接收由管理信息处理部207重放的播放清单的信息和程序的执行时间等的事件信息，进行程序的处理。另外，在程序中动态改变重放的播放清单是可能的，此种情况下，对于管理信息处理部207通过传送播放清单的重放命令实现。程序处理部206接收来自使用者的事件，即接收来自遥控器键的请求，存在对应于使用者事件的程序的情况下，则执行此程序。
管理信息处理部207接收程序处理部206的指示，分析对应的播放清单以及和播放清单对应的VOB的管理信息，指示在展示处理部208中成为对象的AV数据的重放。另外，管理信息处理部207接收根据展示处理部208的基准时刻信息，基于时刻信息进行在展示处理部208中AV数据重放的停止指示，另外，对于程序处理部206生成表示程序执行时间的事件。
展示处理部208具有分别和运动图像、音频、字幕/图像(静止图像)对应的解码器，根据来自管理信息处理部207的指示，进行AV数据的解码以及输出。运动图像数据、字幕/图像在解码后在各自的专用显示面、视频显示面210以及图像显示面209上被描绘。
合成处理部211进行视像的合成处理向TV等的显示设备输出。
播放机的处理流程如以下。BD201上的数据通过拾光器202被读出。读出的数据根据各自的数据种类被传送到专用的存储器。BD重放程序(“BD.PROG”或者“XXX.PROG”文件的内容)被传送到程序记录存储器203、BD管理信息(“BD.INFO”、“XXX.PL”或者“YYY.VOBI”)被传送到管理信息记录存储器204、AV数据(“YYY.VOB”或者“ZZZ.PNG”)被传送到AV记录存储器205。
然后，存储在程序记录存储器203中的BD重放程序由程序处理部206处理。另外，存储在管理信息记录存储器204中的BD管理信息由管理信息处理部207处理。存储在AV记录存储器205中的AV数据由展示处理部208处理。
展示处理部208将运动图像、音频、字幕/图像(静止图像)的各个解码并输出。其结果，运动图像数据、字幕/图像在视频显示面210以及图像显示面209上显示。然后，合成处理部211将运动图像和字幕等合成并输出。
这样如图6所示，BD播放机基于在图4所示的BD中存储的数据构成而构成。
图7表示播放机的详细的功能框图的构成。图7的图像存储器308和轨道缓存器309和图6的AV记录存储器205对应，程序处理器302以及UOP管理器303和程序处理部206对应。另外，情节处理器305以及展示控制器306和图6的管理信息处理部207对应，时钟307、多路复用器310、图像处理器311、视频处理器312以及音频处理器313和图6的展示处理部208对应。
从BD201读出的MPEG流(VOB数据)被存储在轨道缓存器309、图像数据(PNG)被存储在图像存储器308中。多路复用器310基于时钟307的时刻将存储在轨道缓存器309中的VOB数据抽出，将视像数据传送到视频处理器312、将音频数据传送到音频处理器313。视频处理器312以及音频处理器313按照MPEG系统标准，分别由解码器缓存器和解码器构成。即，从多路复用器310送入的视像、音频各自的数据在各自的解码器缓存器中暂时存储，根据时钟307在各个解码器中被解码处理。
在图像存储器308存储的PNG由以下的2种处理方法处理。
当图像数据用于字幕的情况下，由展示控制器306指示解码时间。情节处理器305一旦接收了来自时钟307的时刻信息，能进行适当的字幕显示那样，如果到了字幕显示时刻(开始以及结束)，对展示控制器306发出字幕的显示/非显示的指示。接收了来自展示控制器306的解码/显示的指示的图像处理器311从图像存储器308中取出对应的PNG数据，解码、在图像显示面314上显示。
接着，当图像数据用于菜单的情况下，由程序处理器302指示解码时间。程序处理器302何时指示图像的解码依赖于程序处理器302处理的BD程序，不能一概决定。
图像数据以及视像数据如图6说明的那样分别解码后被输出到图像显示面314、视频显示面315，由合成处理器316合成后被输出。
从BD201读出的管理信息(情节、AV管理信息)被存储在管理信息记录存储器304中，但情节信息(“BD.INFO”以及“XXX.PL”)被读入到情节处理器305进行处理。另外，AV管理信息(“YYY.VOBI”)由展示控制器306读出并处理。
情节处理器305分析播放清单的信息，向展示控制器306指示根据播放清单参照的VOB和其重放位置，展示控制器306分析成为对象的VOB的管理信息(“YYY.VOBI”)，指示驱动器控制器317取出成为对象的VOB。
驱动器控制器317根据展示控制器306的指示，移动拾光器，进行成为对象的AV数据的读出，读出的AV数据被读出到上述图像存储器308或者轨道缓存器309。
另外，情节处理器305监视时钟307的时刻，按照管理信息设定的时间将事件传送到程序处理器302。
在程序记录存储器301中存储的BD程序(“BD.PROG”或者“XXX.PROG”)由程序处理器302执行处理。程序处理器302处理BD程序是在从情节处理器305事件被送到的情况下，或者从UOP管理器303事件被送到的情况下。UOP管理器303在使用者通过遥控器键送到请求的情况下，对程序处理器302生成事件。
(3)BD的应用空间
图8表示BD应用空间的概念。
在BD的应用空间中，播放清单(PlayList)成为一个的重放单位。播放清单通过单元(Cell)的连接，具有由连接的顺序决定的作为重放顺序的静态的情节(scenario)和由程序描述的动态的情节。只在没有根据程序的动态的情节的情况下，播放清单才规定将各个单元只按顺序重放的顺序。根据播放清单的重放在全部的单元重放结束了的时刻结束。另一方面，如果根据程序能够描述越过播放清单的重放路径，根据使用者或者播放机的状态动态的变更选择重放的对象是可能的。作为典型的例子可以列举出菜单。菜单能够根据使用者的选择定义作为重放的情节，表示根据程序动态地选择播放清单。
以下，更详细地说明程序。此处所说的程序表示时间事件或者根据使用者事件被执行的(event handler)。
时间事件基于播放清单中携带的时刻信息生成。在图7中说明的从情节处理器305向程序处理器302传送的事件相当于此。如果时间事件被发行，程序处理器302执行处理根据ID对应的事件处理器。如上述，被执行的程序指示其它播放清单的重放是可能的，此种情况下，现在重放的播放清单的重放被终止，转移到为指定的播放清单的重放。
使用者事件根据使用者的遥控器键操作生成。使用者事件被分成2大类。
第1类使用者事件是根据特定的键的操作生成的菜单的选择事件。所谓特定的键例如BD播放、主体或者遥控器的指示键(“上”“下”“左”“右”键)和“决定”键。和菜单选择的事件对应的事件处理器只在播放清单内限定的期间有效。作为播放清单的信息设定了各个事件处理器的有效期间。当按下特定键时检索有效的事件处理器，存在有效的事件处理器的情况下执行处理该事件处理器。其它的情况下，可以无视菜单选择的事件。
第2类使用者事件是根据特定的键的操作生成的菜单的呼出事件。所谓特定的键是例如BD播放、主体或者遥控器的“菜单”键。如果生成了呼出菜单的事件，则称为全局事件处理器。全局事件处理器不依赖于播放清单，通常是有效的事件处理器。通过使用此功能，能实现DVD的菜单呼出(标题重放中得到音频、字幕菜单等，实现变更音频或者字幕后，从中断的地点开始的标题重放的功能等)。
播放清单中作为构成静态的情节的单位的单元Cell是参照了VOB(MPEG流)的全部或者一部分的重放区间的单元。单元开始VOB内的重放区间，将其作为结束时刻的信息。各个VOB和成为一对的VOB管理信息(VOBI)包括在其内部与数据的重放时刻对应的作为记录地址的表信息的时间图(Time Map或者TM)。根据此时间图，上述的VOB的重放、读出在VOB内(即，成为对象的文件“YYY.VOB”内)的结束时刻、导出开始地址以及结束地址是可能的。后面详细叙述时间图。
(4)VOB的详细
图9表示视像的画面和MPEG流的数据结构的关系。最下方表示VOB的数据结构，由1个以上的VOBU(Video Object Unit：视像对象单元)构成。各个VOBU在其内部包括视频组包V_PCK和音频组包A_PCK。各个组包具有和1个扇区相同的大小，在本实施方式中由2KB单位构成。
VOBU是以称为MPEG视像流的GOP(Group of Picture：画面组)作为标准构成的，也包括音频数据，是作为多路复用流的一个重放单位。VOBU包括以视像的重放时间看来，从0.4秒开始至1.0秒的范围内(通常为0.5秒左右)的数据。也就是说，多数的情况下，在1个GOP内当NTSC的情况下存储了15帧左右的帧。
图10表示组包的数据结构。组包(pack)具有组包头、包头(PES PacketHeader)、有效载荷(PES Packet Payload)。包头以及有效载荷共同构成包(PES Packet)。
有效载荷是包(PES Packet)的数据存储区域。在有效载荷中视频数据以及音频数据等的元素数据从开始依次被存入。在包头中存储为了识别在有效载荷中存储的数据是哪个流的ID(stream_id)、该有效数据的解码以及显示时刻信息的时间戳、DTS(Decode Time Stamp：解码时间戳)以及PTS(Presentation Time Stamp：展示时间戳)。还有，PTS/DTS并不限于在全部的包头中存储。
在组包头中存储了表示该组包何时通过多路复用器被输入到各个元素流的解码器缓存器的时间戳SCR(System Clock Reference：系统参考时钟)。
(5)VOB的插入存储
接着，参照图11以及图12，说明被插入存储的VOB文件的重放处理。
图11表示VOB数据文件等和为了读出这些文件的播放机的功能框图的构成。
图11的下方表示在BD上的VOB文件以及PNG文件的插入存储。如图11所示，VOB数据文件被分段，在盘上被离散配置。从某一个连续区间向其它区间的移动需要查找动作，此间数据的读出停止。即，存在数据的提供停止的可能性。
一般的ROM例如CD-ROM和DVD-ROM的情况下，作为一连串的连续重放单位的AV数据是被连续地存储的。限于连续存储的情况，驱动器只需依次读出数据，传送至解码器即可的处理是简单的。由此VOB数据文件优选存储在连续区域。但是，尽管如此还有这样的数据结构的理由是因为例如存在象字幕数据这样的，和在VOB中存储的视像数据同步被重放的数据，和VOB文件同样，字幕数据也通过采用某种方法从BD中读出是必要的。由此，将VOB数据文件分为若干块，在其间配置字幕用的图像数据(PNG文件)是有必要的。
还有，作为字幕数据的读出方法的一种方法，有在VOB重放开始之前集中将字幕用的图像数据(PNG文件)读出的方法。但是，此种情况下，大量的存储器是必要的，这是不现实的。
通过适当地插入配置VOB文件和图像数据，不需要上述这样的大量的临时记录存储器，通过必要的时间将图像数据存储在图像存储器中成为可能。
播放机的功能框图是上述的播放机的一部分。BD上的数据通过拾光器被读出。VOB数据文件(即MPEG流)被输入到轨道缓存器，PNG(即图像数据)文件被输入图像存储器。
轨道缓存器为FIFO(First In First Out：先进先出)，被输入的VOB数据按输入的顺序被传送到多路复用器。此时，根据上述的SCR，各个组包被从轨道缓存器中取出，其数据经由多路复用器被传送到视频处理器或者音频处理器中。另一方面，对于图像数据来说，描绘哪幅图像是由展示控制器指示的。另外，描绘时使用的图像数据是字幕用数据的情况下，被同时从图像存储器中删除，当是菜单用的图像数据的情况下，其菜单描绘中被按照原样保留在图像存储器内。这是因为菜单的描绘依赖于使用者操作，随着使用者的操作对菜单的一部分进行再显示或者变换为不同的图像，此时为了使再显示部分的图像数据的解码更容易的原因。
图12表示使用了轨道缓存器的VOB数据连续提供模型。首先，如在图12的上方所示，使VOB的一个连续记录区域从逻辑地址的“a1”开始延续至“a2”为止。从“a2”至“a3”间存储了图像数据，是不进行VOB数据的读出的区间。
由于VOB数据暂时累积在轨道缓存器中，所以如果在向轨道缓存器的数据输入速率Va和从轨道缓存器输出的数据速率Vb之间设定差(Va＞Vb)，限于从BD中连续读出数据，轨道缓存器的数据累积量不断增加。在图12的下方表示在轨道缓存器中存储的数据的数据量。横坐标表示时间，纵坐标表示在轨道缓存器内部累积的数据量。时刻“t1”表示作为VOB的一个连续记录区域的开始点的“a1”的读出开始的时刻。在此时刻以后，在轨道缓存器中以速率Va-Vb累积数据。此速率是轨道缓存器的输入输出速率的差。时刻“t2”表示到作为一个连续记录区域的结束点的“a2”的数据为止读取结束的时刻。从时刻“t1”开始至“t2”之间，以速率Va-Vb，轨道缓存器内数据量不断增加，时刻“t2”的数据累积量B(t2)能由下式求出。
B(t2)＝(Va-Vb)×(t2-t1)         (1)
此后，由于至BD上的地址“a3”为止图像数据连续，所以向轨道缓存器的输入变为0，按照作为输出速率的“-Vb”，轨道缓存器内的数据量减少。这使读出位置至“a3”(时刻“t3”)为止。
此处应该注意的是，如果在时刻“t3”很早之前，在轨道缓存器中累积的数据量为0，向解码器提供的VOB的数据就没有了，存在VOB的重放停止的可能性。由此，在时刻“t3”，当在轨道缓存器中还留有数据的情况下，VOB的重放不会停止，能够连续。
此条件能由下式表示。
B(t2)≥-Vb×(t3-t2)            (2)
即，满足式(2)这样决定图像数据(非VOB数据)的配置即可。
(6)导向数据结构
参照图13～图19，说明BD的导向数据(BD管理信息)结构。
图13表示VOB管理信息文件(“YYY.VOBI”)的内部结构。VOB管理信息包括该VOB的流属性信息Attribute和时间图TMAP。流属性包括视频属性Video、音频属性Audio#0～Audio#m的各个。特别是音频流的情况下，由于VOB能够同时具有多个音频流，所以根据音频流数量Number表示数据域的有无。
下面是视频属性Video所具有的域和分别可取的值。
压缩方式Coding：
MPEG1
MPEG2
MPEG4
MPEG4-AVC(Advaced Video Coding)
分辨率Resolution：
1920×1080
1280×720
720×480
720×565
纵横比Aspect
4∶3
16∶9
帧速Framerate
60
59.94(60/1.001)
50
30
29.97(30/1.001)
25
24
23.976(24/1.001)
下面是音频属性Audio所具有的域和分别可取的值。
压缩方式Coding
AV3
MPEG1
MPEG2
LPCM
频道数(Ch)：
1～8
语言属性Language：
时间图TAMP是具有每个VOBU的信息的表，具有该VOB包括的VOBU数Number和各个VOBU信息VOBU#1～VOBU#n。各个VOBU信息分别包括VOBU的重放时间长度Duration和VOBU的数据大小Size。
图14表示VOBU的重放时间长度和数据大小的对应关系。因为作为音频的压缩标准的AC3进行以固定位速率的压缩，所以时间和地址的关系能够通过1次式求出。但是，当为MPEG视频的情况下，时间和地址的关系以一次式的形式表示是不可能的。
其理由是因为MPEG视频流为了获得高图像质量记录是以可变位速率被压缩生成的，其重放时间和数据大小间没有单纯的相关。当MPEG视频数据的情况下，各个帧具有固定的显示时间，例如当NTSC信号的情况下，1帧具有1/29.97秒的显示时间，各个帧的压缩后的数据大小由于画面的特性和压缩所使用的画面种类，也就是根据I/P/B画面，数据大小有很大的改变。
同样地，将MPEG视频数据多路复用MPEG系统流，即VOB也还是不可能通过一次式的形式表示时间和数据大小。因此，关于在VOB内的时间和地址的对应关系的信息是必要的。所以，设置了时间图TMAP。如图14所示，时间图TMAP具有使在各个VOBU的每个中VOBU内的帧数和VOBU内的组包数(即数据大小)对应的入口。
参照图15，详细地说明时间图TMAP。图15表示基于VOBU的重放时间为了得到地址的处理的概念。首先，当给出时刻信息的情况下，首先检索该时刻属于哪个VOBU。这要对时间图的每个VOBU的帧数进行加法运算，帧数的和超过该时刻(换算为帧数)或者一致的VOBU成为该VOBU。接着对时间图的每个VOBU的数据大小直到该VOBU之前的VOBU为止相加。为了重放包括给出时刻的帧，此值被用于求出应当读出的组包的地址。
(7)播放清单的数据结构
接着参照图16，说明播放清单信息(“XXX.PL”)的数据结构。图16表示播放清单信息的数据结构。播放清单信息由单元清单CellList和事件清单EventList构成。
单元清单CellList是播放清单内的重放单元顺序，以本清单的记述顺序重放单元。单元清单CellList的内容是单元数Number和各个单元信息Cell#1～Cell#n。
单元信息Cell#具有VOB文件名VOBName、在该VOB内的开始时刻In以及结束时刻Out、字幕表SubtitleTable。开始时刻In以及结束时刻Out，分别以该VOB内的帧号表示，通过使用上述的时间图TMAP能够得到重放时必要的VOB数据的地址。
字幕表SubtitleTable具有该VOB和被同步重放的字幕信息。字幕和音频同样能够具有多种语言，字幕表SubtitleTable最初的信息也是由语言数Number和其后接续的各种语言的各个表Language#1～Language#k构成。
各种语言的表Language#是由语言信息Lang、每种中表示的字幕的字幕信息数Number、每种中表示的字幕的字幕信息Speech#1～Speech#j构成，字幕信息Speech#由对应的图像数据文件名Name、字幕显示开始时刻In以及字幕显示结束时刻Out、字幕显示位置Position构成。
事件表EventList是定义在该播放清单内发生的事件的表。事件表是由在事件数Number之后的各个事件Event#1～Event#m构成，各个事件Event#t由事件的种类Type、事件的ID、事件发生时刻Time和有效期间Duration构成。
图17表示事件处理器表(“XXX.PROG”)的数据结构。事件处理器表(“XXX.PROG”)包括各个播放清单每个的事件处理器(时间事件和菜单选择用的使用者事件)。
事件处理器表包括定义的时间处理器/程序数Number和各个事件处理器/程序Program#1～Program#n。各个事件处理器/程序Program#内的描述包括事件处理器开始的定义(<event_handler>标识符)和与上述的时间的ID成为一对的事件处理器的ID，其后该程序也在函数后的括号“{”和“}”之间描述。在上述的“XXX.PL”的事件表EventList中存储的事件Event#1～Event#m，利用“XXX.PROG”的事件处理器的ID被确定。
接着参照图18的同时说明关于BD全体的信息(“BD.INFO”)的内部结构。图18表示关于BD全体的信息的数据结构。
关于BD全体的信息包括标题清单TitleList和全局事件用的事件表(事件清单)。
标题清单TitleList由盘内的标题数Number和接续其后的各个标题信息Title#1～Title#n构成。各个标题信息Title#包括在标题中包含的播放清单的表PLTable和标题内的章节清单ChapterList。播放清单的表PLTable包括标题内的播放清单数Number和播放清单名Name即播放清单的文件名。
章节清单ChapterList由在该标题内包括的章节数Number和各个章节的信息Chapter#1～Chapter#n构成。章节信息Chapter#具有该章节包括的单元的表CellTable，单元的表CellTable由单元数Number和各个单元的入口信息CellEntry#1～CellEntry#k构成。单元的入口信息CellEntry#是根据包括该单元的播放清单名和播放清单内的单元号描述的。
事件清单EventList包括全局事件数Number和各个全局事件的信息。此处应注意之处是最初定义的全局事件被称为最初事件FirstEvent，是BD被插入播放机时最初读出的事件。全局事件用事件信息只包括事件种类Type和事件的ID。
图19表示全局事件处理器的程序表(“BD.PROG”)。此表具有和在图17中说明的事件处理器表相同的内容。
(8)事件发生的机制
接着参照图20至图22，说明事件发生的机制。
图20表示时间事件的概念。如前所述，时间事件是根据播放清单信息(“XXX.PL”)的事件清单EventList被定义的。作为时间事件被定义的事件，即当事件种类Type是“TimeEvent”的情况下，在事件生成时刻(“t1”)的时刻，具有ID“Ex1”的时间事件被从情节处理器传送到程序处理器。程序处理器寻找具有事件ID“Ex1”的事件处理器，执行处理对象的事件处理器。例如，在本实施方式中，能够进行2个按钮图像的描绘等。
图21表示进行菜单操作的使用者事件的概念。
如前所述，进行菜单操作的使用者事件也是根据播放清单信息(“XXX.PL”)的事件清单EventList被定义的。作为使用者事件被定义的事件，即当事件种类Type为“UserEvent”的情况下，在成为事件生成时刻(“t1”)的时刻，该使用者事件为预备。此时，事件自身还未被生成。该事件在由有效期间信息Duration描述的期间内是预备状态。
如图21所示，当使用者按下遥控器的“上”“下”“左”“右”键或者“决定”键的情况下，首先UOP事件由UOP管理器生成，被传送到程序处理器。程序处理器对情节处理器传送UOP事件。然后，情节处理器在接收了UOP事件的时刻，检索是否存在有效的使用者事件，当存在作为对象的使用者事件的情况下，生成使用者事件，传送到程序处理器。在程序处理器中，寻找具有事件ID“Ex1”的事件处理器，执行处理对象的事件处理器。例如，在本实施方式中，开始播放清单#2的重放。
在生成的使用者事件中，没有包括使用者按下了哪个遥控器键的信息。被选择的遥控器键的信息根据UOP事件被传送到程序处理器，被记录保存在虚拟播放机具有的寄存器SPRM(8)中。事件处理器的程序分析此寄存器的值，执行分支处理是可能的。
图22表示全局事件的概念。如前所述，全局事件是根据关于BD全体的信息(“BD.INFO”)的事件清单EventList被定义的。作为全局事件被定义的事件，即当事件种类Type为“GlobalEvent”的情况下，只在有使用者的遥控器键操作的情况下被生成。
当使用者按下“菜单”的情况下，首先UOP事件被放到根据UOP管理器生成的程序处理器中。程序处理器对情节处理器传送UOP事件，情节处理器生成该全局事件，传送到程序处理器。在程序处理器中，寻找具有事件ID“menu”的事件处理器，执行处理对象的事件处理器。例如，在本实施方式中，开始播放清单#3的重放。
还有，此处只简单地称作“菜单”键，但也可以是如DVD那样具有多个菜单键。通过分别定义与各个菜单键对应的ID，进行对应是可能的。
(9)虚拟播放机
参照图23，说明程序处理器的功能。图23表示与程序处理器相关的功能框图的构成。程序处理器是在内部具有虚拟播放机的处理模块。虚拟播放机是与BD相关定义的功能模型，不依赖于各个BD播放机的具体的安装构成。因此，能够保证不管在哪个BD播放机中都能执行同样的功能。例如，图6以及图7就是以具有以下所说明的功能为前提的构成。
虚拟播放机具有大致2种功能。是编程函数(a～c)和播放机变量(寄存器)。编程函数是以例如Java(R)Script为基础，将以下描述的2种功能作为BD固有函数定义的。
(a)链接函数：停止现在的重放，开始指定的播放清单、单元、时刻开始的重放。
格式：Link(PL#，Cell#，time)
PL#：播放清单名
Cell#：单元号
time：在单元内的重放开始时刻
(b)PNG描绘函数：在图像显示面上描绘指定的PNG数据。
格式：Draw(File，X，Y)
File：PNG文件名
X：X坐标位置
Y：Y坐标位置
(c)图像显示面清除函数：清除图像显示面的指定区域。
格式：Clear(X，Y，W，H)
X：X坐标位置
Y：Y坐标位置
W：X方向宽度
H：Y方向宽度
播放机变量是表示播放机状态的系统参数SPRM和作为一般用途可能使用的通用参数GPRM。
图24是系统参数SPRM的一览表。
SPRM(0)：语言编码
SPRM(1)：音频流号
SPRM(2)：字幕流号
SPRM(3)：角度号
SPRM(4)：标题号
SPRM(5)：章节号
SPRM(6)：程序号
SPRM(7)：单元号
SPRM(8)：选择键信息
SPRM(9)：导向计时器
SPRM(10)：重放时刻信息
SPRM(11)：卡拉OK用混合模式
SPRM(12)：母语国信息
SPRM(13)：母语水平
SPRM(14)：播放机设定值(视频)
SPRM(15)：播放机设定值(音频)
SPRM(16)：音频流用语言编码
SPRM(17)：音频流用语言编码(扩展)
SPRM(18)：字幕流用语言编码
SPRM(19)：字幕流用语言编码(扩展)
SPRM(20)：播放机区域编码
SPRM(21)：保留
SPRM(22)：保留
SPRM(23)：重放状态
SPRM(24)：保留
SPRM(25)：保留
SPRM(26)：保留
SPRM(27)：保留
SPRM(28)：保留
SPRM(29)：保留
SPRM(30)：保留
SPRM(31)：保留
在本实施方式中，虚拟播放机的编程函数是以Java(R)Script为基础，其它，也可以是在UNIX(R)OS等使用的B-Shell、Perl Script等其它的编程函数。换言之，本发明并非限定于Java(R)Script。
(10)程序的例子
参照图25以及图26，说明在事件处理器中的程序的例子。
图25是有2个选择按钮的菜单的程序的例子。
在单元(PlayList#1.Cell#1)的开头，采用时间事件，从图25中的“<event_handler ID＝”pre“>”开始的程序被执行。此处，最初将通用参数的一个GPRM(0)设定为“1”。GPRM(0)是被用于识别在该程序中选择的按钮。当初规定在左侧配置的按钮“1”所选择的状态作为初始值。接着，使用作为描绘PNG的描绘的函数的Draw分别对按钮1、按钮2进行描绘。按钮1以坐标(10、200)为起点(左端)描绘PNG图像“1black.png”。按钮2以坐标(330、200)为起点(左端)描绘PNG图像“2white.png”。
另外，在本单元最后使用时间事件执行图25右侧的程序。此处，使用Link函数，指示从该单元的开始再次重放。
图26是菜单选择的使用者事件处理器的事件处理器的程序的例子。
当按下了“左”键、“右”键、“决定”键的哪一个遥控器键的情况下，与其分别对应的程序在事件处理器中被描述。使用者按下遥控器键的情况下，如图21所说明的，使用者事件被生成，图26的事件处理器被启动。本事件处理器使用识别选择按钮的GPRM(0)的值和识别选择的遥控器键的SPRM(8)进行分支处理。对于条件的分支以及执行处理如以下所述。
条件1)当按钮1被选择而且选择键为“右”键的情况下：再次设定GPRM(0)为2，将处于选择状态的按钮变更为右按钮2。按钮1、按钮2的图像被互相交换。
条件2)：当选择键为“决定OK”、按钮1被选择的情况下，开始播放清单#2的重放。
条件3)：当选择键为“决定OK”、按钮2被选择的情况下，开始播放清单#3的重放。
(11)虚拟播放机的处理流程
接着参照图27至图30的同时说明在播放机中的处理流程。图27表示直到AV重放为止的基本处理流程。
如果插入BD(S101)，BD播放机执行BD.INFO文件的读入以及分析(S102)、BD.PROG的读入(S103)。BD.INFO以及BD.PROG一旦被共同地存储到管理信息记录存储器中，则由情节处理器分析。
接着，情节处理器根据在BD.INFO文件内的初始事件FirstEvent信息，生成最初的时间(S104)。生成的初始事件被程序处理器接收，处理执行与该事件对应的事件处理器(S105)。
期望在与初始事件对应的事件处理器中，应当存储最初重放的播放清单信息。假设，当没有指示播放清单重放(PL重放)的情况下，播放机什么也不重放，只是连续等待接收使用者事件(S201)。如果BD播放机接收来自使用者的遥控器操作，UOP管理器对于程序管理器发行UOP事件(S202)。
程序管理器判断UOP事件是否是菜单键(S203)，当是菜单键的情况下，向情节处理器发送UOP事件，情节处理器生成使用者事件(S204)。程序处理器执行处理与生成的使用者事件对应的事件处理器(S205)。
图28表示从播放清单重放开始至VOB重放开始为止的处理流程。
如前所述，根据初始事件处理器或者全局事件处理器开始播放清单重放(S301)。情节处理器作为重放对象的播放清单重放所必要的信息，进行播放清单信息“XXX.PL”的读入和分析(S302)、与播放清单对应的程序信息“XXX.PROG”的读入(S303)。接着，情节处理器基于在播放清单登录的单元信息，指示单元的重放(S304)。单元重放意味着情节处理器对展示控制器能提出要求，展示控制器开始AV重放(S305)。
如果开始了AV重放的开始(S401)，展示控制器读入与重放的单元对应的VOB信息文件(XXX.VOBI)，进行分析(S402)。展示控制器使用时间图确定重放开始的VOBU和其地址，向驱动控制器指示读出的地址。驱动控制器读出成为对象的VOB数据(S403)，将VOB数据传送到解码器开始重放(S404)。
VOB重放继续到其VOB的重放区间结束为止(S405)，如果结束则转移到下一个单元重放S304。当不存在下一个单元的情况下，重放结束(S406)。
图29表示从AV重放开始后的事件处理流程。BD播放机是事件驱动型的。如果开始了播放清单的重放，时间事件系统、使用者事件系统、字幕显示系统的事件处理过程就分别被启动，并行执行事件处理。
从S501开始至S505为止的处理是时间事件系统的处理流程。播放清单重放开始后(S501)，经过确认播放清单重放结束的步骤(S502)，情节处理器确认到达时间事件发生时刻(S503)。当到达了时间事件发生时刻的情况下，情节处理器生成时间事件(S504)，程序处理器接收时间事件，执行处理事件处理器(S505)。
在步骤S503中，当不是时间事件发生时刻的情况下或者在步骤S504中事件处理器执行处理后，再次返回到步骤S502，重复同样的处理。另一方面，在步骤S502中如果播放清单重放结束得到确认，则时间事件系统的处理被强制性地结束。
从S601开始至S608为止的处理是使用者事件系统的处理流程。播放清单重放开始后(S601)，经过播放清单重放结束确认步骤(S602)，转移到UOP接收确认步骤的处理(S603)。当存在UOP的接收时，UOP管理器生成UOP事件(S604)，接收了UOP事件的程序处理器确认UOP事件是菜单呼出(S605)。当是菜单呼出的情况下，程序处理器使情节处理器生成事件(S607)，程序处理器执行处理事件处理器(S608)。
在步骤S605中，当判断了UOP事件不是菜单呼出事件的情况下，UOP事件通过指示键或者“决定”键表示是事件。此种情况下，情节处理器判断现在时刻是否是在使用者事件有效期间内(S606)。当在有效期间内的情况下，情节处理器生成使用者事件(S607)，程序处理器执行处理对象的事件处理器(S608)。
当在步骤S603中没有UOP接收的情况下，在步骤S606中现在时刻不在使用者事件有效期间的情况下，或者在步骤S608中事件处理器执行处理之后再次返回步骤S602，重复相同的处理。另外，在步骤S602中如果播放清单重放结束被确认，使用者系统的处理被强制地结束。
图30表示字幕处理的流程。如果播放清单重放开始(S701)，经过播放清单重放结束确认步骤(S702)，转移至字幕描绘开始时刻确认步骤(S703)。字幕描绘开始时刻的情况下，情节处理器对展示控制器指示字幕描绘，展示控制器对图像处理器指示字幕描绘(S704)。在步骤S703中当判断不是字幕描绘开始时刻的情况下，确认是否是字幕显示结束时刻(S705)。如果判断为字幕显示结束时刻的情况下，展示控制器对图像处理器进行字幕消除指示，将描绘的字幕从图像显示面消除(S706)。
在字幕描绘的指示(步骤S704)结束后，字幕消除指示(步骤S706)结束后，或者在字幕显示结束时刻的确认(步骤S705)中判断为不是该时刻之后，返回步骤S702，重复相同的处理。如果在步骤S702中确认了播放清单的重放结束了，则处理被强制地结束。
(12)进行降频转换处理的重放装置
图31表示根据本实施方式进行降频转换处理的重放装置100的构成。重放装置100由基于关于MPEG标准的传送流的系统目标解码器(T-STD)模型构成。重放装置100将HD视像降频转换为SD视像是可能的。
还有，在图31中，运动图像数据、字幕数据、静止图像数据以及音频数据分别被输入到解码器模型中，这是光头将MPEG传送流从BD中读出，多路复用器接收其传送流，将运动图像数据、字幕数据等分别从存储的包中分离输出的结果。多路复用器具有和例如图3的多路复用器3100同样的功能。
重放装置100大致分为包括缓存器3121、解码器3122、对应于各数据种类的信号处理系统和变换部3123。
缓存器3121包括将运动图像数据、字幕数据、静止图像数据以及音频数据分别分为数段存储的缓存器。另外，解码器3122将基于MPEG标准压缩编码的视像数据以及音频数据基于MPEG标准解码。信号处理系统实现对应于运动图像数据等各种的处理。具体在后面叙述。变换部3123将HD视像降频转换为SD视像。缓存器3121、解码器3122以及信号处理系统作为1个解码器芯片实现也可以。另外，只将解码器3122以及信号处理系统作为1个芯片也可以。
以下，说明在视像数据中包含的运动图像数据、字幕数据以及静止图像数据的处理流程的同时，说明上述各个构成元素的功能。
首先运动图像数据被传送至视像的解码器线，从传送流缓存器TB3201经由多路复用缓存器MB3202在元素缓存器EB3203中暂时存储。在EB3203中存储的画面在指定的解码时刻(DTS)到来的瞬间被传送至视像解码器3204被解码。从其它的画面参照的画面(I画面、P画面)被传送至重新排序缓存器O3205，被利用于其它画面的解码。各个画面在重放时刻(PTS)的时刻被送至视像显示装置显示。当连接了HDTV的情况下，解码的HD视像在PTS时刻向HDTV3206被输出处理。当向SDTV的降频转换必要的情况下，解码的HD视像被传送至视像的降频转换器V-DC3207，被变换为SD视像。
字幕数据被从传送缓存器TB3208传送到缓存器B3209，被暂时存储。然后，和视像的情况同样地，字幕数据也在解码的时刻DTS被瞬时传送到字幕解码器D3210被解码。解码的字幕数据在图像缓存器IB3212一旦被展开，接收来自图像控制器IC3211的要求，被指定的字幕在PTS时刻经由颜色变换表的CLUT3213向HDTV输出。字幕向由图像控制器IC3211指定的HDTV的显示区域显示。当向SDTV的降频转换必要的情况下，解码的HD图像质量的字幕被传送到字幕的降频转换器S-DC3215，变换为SD图像质量的字幕。
处理菜单的静止图像等的静止图像数据也被解码，被输出到HDTV或者SDTV。因为静止图像数据的处理和字幕数据是同样的，所以引用关于字幕数据的上述说明，此处省略说明。
被降频转换处理的运动图像数据、字幕数据以及静止图像数据被合成，作为SD视像向SDTV3229输出。首先运动图像和字幕被α合成。对于合成的结果得到的SD图像质量的运动图像，α合成菜单等的静止图像。由此，在背景图像上重叠了字幕，在其上完成菜单等的静止图像重叠的SD视像。SD视像向SDTV3229输出。
音频数据的处理流程如以下。音频数据被从传送缓存器TB3224传送到缓存器B3225，在缓存器B3225暂时存储后，在解码时刻(DTS)被瞬时向音频解码器3226输出被解码。还有，音频数据的解码时刻和重放时刻是同一时刻的情况很多，大多数的音频被解码的时刻(DTS)就是重放时刻(PTS)。由此，解码后即刻被输出到扬声器3227。
当在视像输出上没有连接HDTV的情况下，当向SD视像的降频转换必要时，向音频降频转换器A-DC3228传送，进行采样的间隔抽取处理等。然后和SD视像同步的音频向扬声器3230输出。还有，设置音频降频转换器A-DC3228的理由是因为在后述的PAL方式中，根据DEFT变换等被降频转换的SD视像是以和原始的HD视像不同的速度被显示的，产生为了调整重放速度和SD视像一起进行音频的降频转换的必要。
还有，如后述那样，当降频转换处理后的SD视像的重放速度对于原始的HD视像的重放速度产生变化时，不必如DTS时刻那样进行解码也可以。
接着，参照图32以及图33，详细地说明从HD视像向SD视像的降频转换处理。此处，HD视像是帧速为24Hz、逐行扫描的电影素材视像(带有字幕的运动图像)。另一方面，SD视像是帧速为59.94Hz、隔行扫描的NTSC视像或者帧速为50Hz、隔行扫描的PAL视像。不管哪一种都和原始的HD视像是带有字幕的运动图像相对应，对带有字幕的运动图像进行降频转换。
图32表示降频转换处理的顺序。首先，重放装置100从光盘中读出MPEG数据流(S801)。多路复用器(图中未表示)接收MPEG数据流，分离运动图像数据、字幕数据、静止图像数据、音频数据，将这些经由缓存器3121传送到解码器3122。解码器3122分别将HD视像的运动图像数据、字幕数据、静止图像等解码(S802)。
接着，变换部3123取得HD视像的显示时刻信息(PTS)(S803)。更具体地说，视像降频转换器3207取得运动图像的PTS，字幕降频转换器3215取得字幕的PTS。如参照图10说明的那样，显示时刻信息(PTS)是从构成MPEG数据流的包的包头中取得的。
接着，变换部3123基于PTS确定运动图像画面的数据和在其画面上显示的字幕的数据(S804)，将确定的HD视像的画面数据变换为SD视像的画面数据，而且，将确定的HD视像的字幕数据变换为SD视像的字幕数据(S805)。
以下，参照图33详细说明在步骤S804以及步骤S805中进行的处理。图33表示HD视像(电影素材视像)的画面变换为SD视像(NTSC方式或者PAL方式的视像)的画面时的相关关系。从MPEG数据流得到的电影素材的HD视像是将作为重放周期为1/24秒的顺序扫描信号(逐行扫描)的画面P1、P2、…连续地切换显示得到的。
变换部3123将此HD视像变换为SD视像。变换后的SD视像(NTSC方式)是将重放周期为1/59.94秒、隔行扫描信号(隔行扫描)的半帧连续地切换显示得到的。另外，在变换后的SD视像(PAL方式)中，作为重放周期为1/50秒、隔行扫描信号(隔行扫描)的半帧是连续地切换显示得到的。
在将HD视像变换为NTSC方式的SD视像时，按照以下的规则变换。即电影素材的帧P1被变换为2个半帧P1t以及P1b。电影素材的帧P2被变换为3个半帧P2t、P2b以及P2t。一般地，奇数个HD视像的画面被变换为2张SD视像半帧，偶数个HD视像的画面被变换为3张SD视像的半帧。这被称为2∶3下拉，是将HD视像的2帧变换为SD视像的5个半帧的技术。还有，在变换后的NTSC方式的SD视像中，例如由于半帧P2t夹着半帧P2b被显示2次，所以能看见视像晃动。
当将HD视像变换为PAL方式的SD视像时，能够利用被称为DEFT变换的技术。在DEFT变换中，电影素材的帧Pn被变换为2个半帧Pnt以及Pnb。因此，由于不象NTSC方式那样对相同的半帧显示2次，所以视像的振动被极小化。另一方面，各个半帧以50Hz，即各个帧以25Hz显示。即由于24Hz的HD视像被变换为25Hz的SD视像，此SD视像和原始的HS视像比较，每1帧(2个半帧)只以1Hz被快进显示。
如上述，如果将电影素材这样的24Hz(或者23.976Hz)的帧速的HD视像降频转换为SD视像，以和本来应当以24Hz显示的时间不同的时间显示画面。由此，当必须在运动图像上重叠字幕显示的情况下，使字幕在那张画面上重叠就成了问题。
将字幕重叠在运动图像、静止图像的情况下，也可以对运动图像、静止图像和字幕分别赋予重放时刻(PTS)。但是由于在SDTV中存在各个画面的显示时刻的格子(59.94Hz和50Hz)，所以优选SDTV的输出时刻和此格子吻合。
首先，在MPEG-2中，能以90000Hz的时刻精度设定各个存取单元的DTS、PTS。即，在24Hz的电影素材中，显示相邻的运动图像的各个画面的PTS的差为3750。另一方面，NTSC的情况下，运动图像的各个半帧的PTS的差为1501或者1502；PAL方式的情况下，各个半帧的PTS的差为1800。在各种显示形式中，画面的PTS是随着其格子变化的。
当以MPEG-2多路复用的情况下，字幕数据的重放时刻(PTS)也能以90000Hz的时刻精度设定。但是，字幕数据不应当在任意时刻设定，在从HD视像的画面得到的SD视像的画面中，需要始终显示和在其对应的HD视像的画面上显示的字幕具有相同内容的字幕。例如，在同时进行向HDTV输出和向SDTV输出这样的情况下，在HDTV上的显示和在SDTV上的显示之间，需要做到在运动图像的相同场面上不出现不同的字幕。
在图33中，在涂黑表示的画面P4、P5以及P6上显示字幕。为了在将P4、P5以及P6变换为SD视像之后也显示相同的字幕，变换部3123基于运动图像的PTS和字幕的PTS，确定运动图像的画面的数据和在其画面上显示的字幕的数据(即图32的步骤S804)。
具体地说，如果画面P4、P5以及P6的PTS分别为t4、t5、t6(t5＝t4+3750、t6＝t5+3750)，PTS确定作为t4、t5、t6的字幕。然后，确定的HD视像的画面P4～P6的数据变换为SD视像的画面数据，而且，确定的HD视像的字幕数据变换为SD视像的字幕数据(即图32的步骤S805)。然后，变换部3123合成生成的SD视像的画面数据和字幕数据并输出(S806)。
此结果，在变换后的SD视像中，对于和画面P4对应的半帧P4b、P4t以及P4b，和PTS值表示时刻t4的字幕具有相同内容的字幕以SD图像质量被显示。另外，对于和画面P5对应的半帧P5t以及P5b，和PTS值表示时刻t5的字幕具有相同内容的字幕以SD图像质量被显示。画面P6和P4相同。由此，从电影素材变换为NTSC、PAL之后，字幕和其字幕显示的运动图像的画面之间的关系也被保持。这在PAL方式中也是同样的。
但是，根据适用于PAL方式的DEFT变换，由于以比电影素材本来的帧显示周期(换言之，垂直扫描频率)还要快的时间改写帧，所以与其同步的音频的重放速度增加，音调升高，产生不合适的情况。在这样的情况下，能通过以下的方法抑制不适的情况。
图34表示根据第2种方法，将HD视像(电影素材视像)的画面变换为SD视像的画面时的相关关系。以下，说明在图34的第1段表示的HD视像(电影素材视像)的画面变换为在第3段表示的SD视像中表示的画面的处理。还有，图34的第2段表示DEFT变换后的PAL方式的画面，这与图33的第3段是相同的。之所以一同表示的理由是为了使与在图34的第3段表示的变换后的画面的对比更加容易。
如上述这样，如果将24Hz的HD视像通过DEFT变换为25Hz的PAL方式的SD视像，SD视像能以只有相当于1帧1秒的时间比HD视像快放显示。因此，在本说明书中，以DEFT变换为基础，在变换时定期地使确定的画面(半帧或者帧)显示多次，不是视像的重放速度变快那样调整1秒间的显示画面数。此变换在本说明书中称为“半帧加倍变换”。
参照图34进行说明。在图34中，将基于HD视像的画面P5根据DEFT变换得到的半帧作为P5t以及P5b，将基于HD视像的画面得到的半帧作为P6t以及P6b。在半帧加倍变换中，在半帧P5t以及P5b之后，半帧P5t被再次显示，由此变换视像。半帧P5t的第2次显示结束后，半帧P6b被显示，接着半帧P6t被显示。通过2次显示半帧P5t，使其后半帧P6b的显示时间只慢1/50秒。由此，快送被1个半帧分解消除。此处理不只是对运动图像，对于与此运动图像同步重放的字幕等的视像也是同样的。例如，对于字幕数据，在图31的字幕降频转换器3215中，将与半帧P5t对应显示的字幕半帧在与半帧P5b对应显示的字幕半帧之后插入，其后，显示与半帧P6b对应显示的字幕半帧这样进行变换即可。
进一步，2次显示其它的1个半帧，在1秒间使确定的2个半帧显示2次，由紧随其后的2个半帧构成的画面能使重放时间与和电影素材对应的画面进行整合。根据半帧加倍变换，在相同的半帧多次显示这点上，半帧的第2次显示时，SD视像能看见晃动的可能性是存在的。但是，由于能使画面的重放时间和HD视像进行整合，所以，与其视像同步重放的音频数据能按原样没有失真地重放。由此，作为电影素材(24Hz或者23.976Hz)、音频作为重要的内容在PAL中降频转换时，此半帧加倍的降频转换处理的方法是适用的。
还有，如从图31所理解，重放装置100将HD图像质量的运动图像数据、字幕数据以及静止图像数据分别独立地降频转换生成SD图像质量的各个数据，其后，将其进行合成得到SD视像。但是，也可以是在HD图像质量的状态下，合成运动图像数据、字幕数据以及静止图像数据，其后将合成的HD视像降频转换为SD视像，生成SD合成视像。在进行这样的处理时，在图31的变换部3123中，首先，设置合成HD图像质量的运动图像数据、字幕数据等的构成元素，设置将从此元素的HD合成视像输出变换为SD视像的降频转换器即可。
图35表示根据第2例的降频转换处理的顺序。此处理代替图32表示的处理被执行。虽然没有图示执行此处理的装置的构成，除了上述变换部3123的内部构成，能由和图31的重放装置100的构成元素同样的构成元素构成。由此，以下，参照图31的重放装置100进行说明。
首先重放装置100从光盘读出MPEG数据流(S901)，多路复用器(图中未表示)接收MPEG数据流，分离运动图像数据、字幕数据、静止图像数据、音频数据，将这些数据通过缓存器3121送至解码器3122。解码器3122分别对HD视像的运动图像数据、字幕数据、静止图像数据等进行解码(S902)。
接着，变换部3123取得在HD视像的画面数据以及字幕数据中附加的显示时刻信息(PTS)(S903)，基于PTS确定HD视像的画面数据和在其画面上显示的字幕数据(S904)。
其后，变换部3123合成确定的HD视像的画面数据和字幕数据，生成合成HD视像数据(S905)。然后，变换部3123将合成的HD视像的画面数据变换为SD视像的画面数据并输出(S906)。
还有，合成HD视像，其后变换为SD视像的处理能够利用在图33以及图34中说明的变换方法。例如，变换为NTSC方式的SD视像能适用2∶3下拉变换，变换为PAL方式的SD视像能进行DEFT变换或者半帧加倍变换。另外，预测在降频转换时具有4∶3的显示比率的TV上全景和扫描显示的情况下，字幕的显示区域、特别是使横幅能装进降频转换后的4∶3的TV中这样进行变换也可以。
基于DEFT变换或者半帧加倍变换的那一个进行变换，可以在每次变换时由视听者对重放装置100发出指示，也可以事先固定为某一种变换。
进一步，也能够将记述了推荐的变换方法的变换指定信息附加在流中，重放装置100基于此变换指定信息决定变换方法。
图36表示记述了推荐的变换方法的变换指定信息的数据结构。例如，变换指定信息记述在BD的管理信息“YYY.VOBI”内以及/或者在MPEG流的“YYY.VOB”内也可以。如果是记述在流管理信息的“YYY.VOBI”中，则具有每个VOB都能够选择适当的降频转换处理的优点。另外，象“BD.INFO”这样，存储在盘的其它区域中也可以。还有，在本说明书中原则上发送信息一方的广播台等在MPEG传输流内记述变换指定信息，进行发送。但是，在记录时，也可以根据需要，存储装置在MPEG传输流附加的管理信息“YYY.VOBI”中记述变换指定信息。
更具体地说，变换指定信息是根据在属性信息Attribute内部降频转换信息DownCon规定的。降频转换信息包括标记DC_prohibit_flag以及指定推荐的变换方法的信息DC_PAL。
标记DC_prohibit_flag表示是否是降频转换、输出SD视像可能的内容。在标记中，当禁止降频转换时添加“1b”，允许时添加“0b”。指定推荐的变换方法的信息DC_PAL是指示向PAL方式的SD视像的降频转换的信息，而且，指示变换方法。如图36所示，在本实施方式中，在“DC_PAL”中没有推荐的变换方法时添加“00b”，推荐DEFT变换时添加“01b”，推荐半帧加倍(FD)变换时添加“10b”。当没有特别地指定变换方法的情况下，表示两种变换都是可能的添加“11b”。
图37表示基于变换指定信息决定降频转换方法、重放SD视像的顺序。此处理在例如重放装置100中进行。
首先，如果重放装置100从视听者处接受了重放开始的指示，重放装置100判断连接的显示设备(例如电视)是否能够不对重放对象的HD视像的内容进行降频转换进行显示(S1002)。如果连接了能将该内容按原样重放的显示装置，则以HD视像的状态向显示设备输出(S1005)，在其显示设备中重放。
另一方面，当从HD视像向SD视像的降频转换是必要的情况下，重放装置100取得变换指定信息(S1002)，参照标记DC_prohibit_flag判断是否被允许(S1003)。如果降频转换未被允许，则该内容的重放结束。
另一方面，当降频转换被允许的情况下，参照指定推荐的变换方法的信息DC_PAL，确定被推荐的降频转换方法，基于此方法对HD视像进行降频转换(S1004)。然后，重放装置100将降频转换的SD视像向显示装置输出(S1005)。然后，直到成为该内容的重放对象的区间的重放结束为止，继续降频转换处理以及重放输出。
还有，重放装置100将关于上述推荐的变换方法的信息在例如屏上显示(On Screen Display)显示的同时，基于视听者的指示决定最终的降频转换方法也可以。
在本实施方式中，虽然只记录了HD图像质量的字幕和静止图像数据，也可以将降频转换用的SD图像质量的字幕和静止图像数据记录在别处，当降频转换时，让播放机/使用者能够进行选择即可。另外，虽然只是存储了HD图像质量的字幕和静止图像数据，但为了保证降频转换时的图像质量，在降频转换时，合成的字幕也可以利用TrueType那样的向量图像字体生成。
在本实施方式中，对于字幕的显示区域的设定方法没有详细地涉及，但考虑降频转换，对HD用、降频转换了的NTSC的字母框(letter box)用、降频转换的NTSC的全景&扫描用、降频转换的PAL的字母框用、降频转换的PAL的全景&扫描用等分别设定字幕显示区域也可以。另外，根据使用者的喜好能够变更显示区域这样也可以。
在本实施方式中，当根据半帧加倍变换进行降频转换时，对将确定的半帧按原样再次显示进行了说明，但是为了使降频转换时的视像的晃动减轻，从前后的画面生成中间的半帧画面，将此半帧画面插入，进行半帧加倍变换也可以。例如在图34中，将第3段的50Hz-FD(PAL)再次显示的第2张的P5t基于24Hz(影片)的P5画面和P6画面生成也可以。
在实施方式中，将HD视像的视像以及字幕的数据变换为SD图像质量的视像数据。但是，当SD视像变换为HD图像质量在HDTV上显示的情况下，也能够根据和上述处理同样的处理，得到视像以及字幕被合成的HD图像质量的数据。即本发明能够适用于将某一分辨率的视像以及字幕数据变换为和其分辨率不同的分辨率的合成视像的数据的情况。
通过以MPEG-TS的T-STD为基础的模型进行了说明，但是这只是例子，即使是MPEG-PS和其他视像以及音频的多路复用流的情况也同样能够适用。
在工业上应用的可能性
根据本发明，将HD视像向SD视像降频转换视听时，能够自动地或者根据使用者的判断选择对应内容的降频转换方法成为可能。
另外，将和在HD视像的画面上显示的字幕具有相同内容的SD图像质量的字幕与SD视像的画面对应生成合成视像，输出。由此，能使和HD视像具有完全相同内容的SD视像被显示。另外，通过规定和字幕(静止图像)和运动图像的同步重放模型，能够确保设备间的互操作性。

Claims (20)

1、一种数据处理装置，其特征在于，包括：
接收部，其接收数据流，该数据流包含通过以第1垂直扫描频率切换多张画面而进行显示的第1主视像数据、和与所述第1主视像同步显示的第1副视像数据；和
变换部，其将所述第1主视像以及所述第1副视像的各个数据变换为通过以与所述第1垂直扫描频率不同的第2垂直扫描频率切换多张画面而进行显示的合成视像的数据；
所述数据流包括规定所述第1主视像以及所述第1副视像的显示时刻的时刻信息；
所述变换部对于与所述第1主视像的画面具有相同内容的第2主视像的画面，通过与在所述第1主视像的画面上显示的和所述第1副视像具有相同内容的第2副视像建立对应，生成显示所述第2主视像以及所述第2副视像的合成视像。
2、根据权利要求1所述的数据处理装置，其特征在于，
所述变换部包括：
视像变换部，其通过垂直扫描频率的变换处理，将所述第1主视像的数据变换为所述第2主视像的数据；
字幕变换部，其将所述第1副视像的数据变换为第2副视像的数据，并且确定与所述第1副视像的文字同步显示的所述第1主视像的画面，将与所确定的所述第1主视像的画面对应的所述第2主视像的画面、和与所述第1副视像的文字对应的所述第2副视像的文字建立对应；和
合成部，其将建立对应后的所述第2主视像的数据和第2副视像的数据合成，生成所述合成视像的数据。
3、根据权利要求1所述的数据处理装置，其特征在于，
所述变换部包括：
合成部，其将根据所述时刻信息同步的所述第1主视像以及所述第1副视像重叠，生成重叠视像；和
视像变换部，其将所述重叠视像的数据变换为所述合成视像的数据。
4、根据权利要求1所述的数据处理装置，其特征在于，
所述变换部将规定分辨率的所述第1主视像以及所述第1副视像的数据变换为与所述规定分辨率不同的分辨率的合成视像的数据。
5、根据权利要求4所述的数据处理装置，其特征在于，
所述变换部将电影素材的所述第1主视像以及所述第1副视像的数据变换为以NTSC以及PAL中的一种方式显示的合成视像的数据。
6、根据权利要求5所述的数据处理装置，其特征在于，
所述变换部将电影素材的所述第1主视像以及所述第1副视像的1帧变换为以PAL显示的所述合成视像的2个以上的半帧，在向半帧变换时，将同一个半帧定期地多次插入。
7、根据权利要求1所述的数据处理装置，其特征在于，
所述数据流包含表示在所述变换部中变换可否的变换允许信息；
所述变换部在所述变换允许信息表示允许变换的情况下进行所述变换。
8、根据权利要求1所述的数据处理装置，其特征在于，
所述数据流包含指定变换种类的变换指定信息；
所述变换部进行根据所述变换指定信息指定的所述种类的变换。
9、根据权利要求1所述的数据处理装置，其特征在于，
进一步包括输入部，其输入指定变换种类的变换指定信息；
所述变换部进行由所述变换指定信息所指定的所述种类的变换。
10、根据权利要求9所述的数据处理装置，其特征在于，
所述变换部基于所述变换指定信息进行将各张画面一次一次地显示的变换以及将确定的画面多次显示的变换之中的一种，生成PAL方式的合成视像。
11、一种数据处理方法，其特征在于，包括：
接收步骤，其接收数据流，该数据流包含通过以第1垂直扫描频率切换多张画面而进行显示的第1主视像数据、和与所述第1主视像同步显示的第1副视像数据；和
变换步骤，其将所述第1主视像以及所述第1副视像的各个数据变换为通过以与所述第1垂直扫描频率不同的第2垂直扫描频率切换多张画面而进行显示的合成视像的数据；
所述数据流包括规定所述第1主视像以及所述第1副视像的显示时刻的时刻信息；
在所述变换步骤中，对于与所述第1主视像的画面具有相同内容的第2主视像的画面，通过与在所述第1主视像的画面上显示的和所述第1副视像具有相同内容的第2副视像建立对应，生成显示所述第2主视像以及所述第2副视像的合成视像。
12、根据权利要求11所述的数据处理方法，其特征在于，
所述变换步骤包括：
视像变换步骤，其通过垂直扫描频率的变换处理，将所述第1主视像的数据变换为所述第2主视像的数据；
字幕变换步骤，其将所述第1副视像的数据变换为第2副视像的数据，并且确定与所述第1副视像的文字同步显示的所述第1主视像的画面，将与所确定的所述第1主视像的画面对应的所述第2主视像的画面、和与所述第1副视像的文字对应的所述第2副视像的文字建立对应；和
合成步骤，其将建立对应后的所述第2主视像的数据和第2副视像的数据合成，生成所述合成视像的数据。
13、根据权利要求11所述的数据处理方法，其特征在于，
所述变换步骤包括：
合成步骤，其将根据所述时刻信息同步的所述第1主视像以及所述第1副视像重叠，生成重叠视像；和
视像变换步骤，其将所述重叠视像的数据变换为所述合成视像的数据。
14、根据权利要求11所述的数据处理方法，其特征在于，
在所述变换步骤中，将规定分辨率的所述第1主视像以及所述第1副视像的数据变换为与所述规定分辨率不同的分辨率的合成视像的数据。
15、根据权利要求14所述的数据处理方法，其特征在于，
在所述变换步骤中，将电影素材的所述第1主视像以及所述第1副视像的数据变换为以NTSC以及PAL中的一种方式显示的合成视像的数据。
16、根据权利要求15所述的数据处理方法，其特征在于，
在所述变换步骤中，将电影素材的所述第1主视像以及所述第1副视像的1帧变换为以PAL显示的所述合成视像的2个以上的半帧，在向半帧变换时，将同一个半帧定期地多次插入。
17、根据权利要求11所述的数据处理方法，其特征在于，
所述数据流包含表示在所述变换步骤中变换可否的变换允许信息；
在所述变换步骤中，在所述变换允许信息表示允许变换的情况下进行所述变换。
18、根据权利要求11所述的数据处理方法，其特征在于，
所述数据流包含指定变换种类的变换指定信息；
在所述变换步骤中，进行根据所述变换指定信息指定的所述种类的变换。
19、根据权利要求11所述的数据处理方法，其特征在于，
进一步包括输入步骤，其输入指定变换种类的变换指定信息；
在所述变换步骤中，进行由所述变换指定信息所指定的所述种类的变换。
20、根据权利要求19所述的数据处理方法，其特征在于，
在所述变换步骤中，基于所述变换指定信息进行将各张画面一次一次地显示的变换以及将确定的画面多次显示的变换之中的一种，生成PAL方式的合成视像。
CNB2004800012709A 2003-03-13 2004-03-02 数据处理装置 Expired - Fee Related CN100438606C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP068026/2003 2003-03-13
JP2003068026 2003-03-13

Publications (2)

Publication Number Publication Date
CN1706187A CN1706187A (zh) 2005-12-07
CN100438606C true CN100438606C (zh) 2008-11-26

Family

ID=32984580

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2004800012709A Expired - Fee Related CN100438606C (zh) 2003-03-13 2004-03-02 数据处理装置

Country Status (5)

Country Link
US (1) US7561779B2 (zh)
EP (1) EP1517554A4 (zh)
JP (1) JP4490914B2 (zh)
CN (1) CN100438606C (zh)
WO (1) WO2004082274A1 (zh)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100848437B1 (ko) * 2003-10-10 2008-07-28 샤프 가부시키가이샤 콘텐츠 재생 장치, 콘텐츠 재생 장치의 제어 방법, 콘텐츠 기록 매체, 및 컴퓨터 판독 가능한 기록 매체
CN101002266A (zh) * 2004-07-28 2007-07-18 皇家飞利浦电子股份有限公司 映射udf和bdfs盘区
JP2006108961A (ja) * 2004-10-04 2006-04-20 Sony Corp 情報処理装置および方法、プログラム並びに記録媒体
JP2008517343A (ja) * 2004-10-19 2008-05-22 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ アニメーション・ジャダー補償
GB2419975A (en) * 2004-11-09 2006-05-10 Nokia Corp Auxiliary content handling
US8306386B2 (en) 2004-12-01 2012-11-06 Panasonic Corporation Reproduction device, image synthesis method, image synthesis program, and integrated circuit
KR100654448B1 (ko) * 2005-01-14 2006-12-06 삼성전자주식회사 컨텐츠 검색을 위한 사용자 인터페이스 제공 방법 및 장치
KR100782835B1 (ko) * 2005-01-29 2007-12-06 삼성전자주식회사 캡션 정보의 출력시점 및 출력 우선순위를 조절하는 방법및 그 장치
JP4005605B2 (ja) * 2005-02-24 2007-11-07 本田技研工業株式会社 車両品質分析システム並びに複数データの管理方法およびそのプログラム
EP1720166A1 (en) * 2005-05-04 2006-11-08 Deutsche Thomson-Brandt Gmbh Method and apparatus for authoring a 24p audio/video data stream by supplementing it with additional 50i format data items
JP2007004896A (ja) * 2005-06-23 2007-01-11 Toshiba Corp 情報記憶媒体、情報転送方法、情報再生方法、及び情報記録方法
CN102867530B (zh) * 2005-07-14 2016-01-06 汤姆森许可贸易公司 用于提供数字电影合成播放列表中的辅助媒体的方法和装置
JP4827642B2 (ja) * 2005-07-27 2011-11-30 パナソニック株式会社 記録装置、記録方法、プログラムおよび集積回路
WO2007013378A1 (ja) * 2005-07-27 2007-02-01 Matsushita Electric Industrial Co., Ltd. 情報記録媒体、記録装置、および記録方法
US20070206929A1 (en) * 2006-03-02 2007-09-06 David Konetski System and method for presenting karaoke audio and video features from an optical medium
US20070218444A1 (en) * 2006-03-02 2007-09-20 David Konetski System and method for presenting karaoke audio features from an optical medium
JP5093557B2 (ja) * 2006-10-10 2012-12-12 ソニー株式会社 画像処理装置、画像処理方法、及びプログラム
TWI466547B (zh) * 2007-01-05 2014-12-21 Marvell World Trade Ltd 用於改善低解析度視訊之方法與系統
CN101227606B (zh) * 2007-01-18 2010-09-29 中兴通讯股份有限公司 消除视频解码重建图像拖影的方法和装置
JP2009223929A (ja) * 2008-03-13 2009-10-01 Sanyo Electric Co Ltd デジタルデータ再生装置
KR101591085B1 (ko) * 2008-05-19 2016-02-02 삼성전자주식회사 영상 파일 생성 및 재생 장치 및 방법
DK2453661T3 (en) * 2009-07-10 2017-10-30 Panasonic Ip Man Co Ltd PLAYBACK, RECORDING PROCEDURE AND SYSTEM, INCLUDING A RECORDING MEDIUM AND PLAYBACK
TW201104563A (en) * 2009-07-27 2011-02-01 Ipeer Multimedia Internat Ltd Multimedia subtitle display method and system
JP5532726B2 (ja) * 2009-07-31 2014-06-25 ソニー株式会社 記録媒体製作方法、記録媒体及び記録媒体の再生装置
KR20110066578A (ko) * 2009-12-11 2011-06-17 삼성전자주식회사 디지털 컨텐츠와 이를 위한 재생장치 및 방법
KR101564521B1 (ko) * 2011-11-30 2015-10-29 인텔 코포레이션 운영 체제 초기화 중에 멀티미디어 데이터를 디스플레이하기 위한 기술들
US8813156B1 (en) * 2012-05-22 2014-08-19 Google Inc. Resolution recommendation for displaying content items
JP5509284B2 (ja) * 2012-09-14 2014-06-04 株式会社東芝 マルチフォーマット出力装置、マルチフォーマット出力装置の制御方法
US9392214B2 (en) * 2013-02-06 2016-07-12 Gyrus Acmi, Inc. High definition video recorder/player
US9202522B2 (en) * 2013-05-08 2015-12-01 Adobe Systems Incorporated Method and apparatus for subtitle display
JP6255760B2 (ja) * 2013-07-16 2018-01-10 ソニー株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1081050A (zh) * 1992-06-22 1994-01-19 汤姆森电子消费品公司 适配内插方法和装置
CN1274503A (zh) * 1998-07-24 2000-11-22 松下电器产业株式会社 视频信号特性转换装置及其方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU6164094A (en) * 1993-01-21 1994-08-15 Scientific-Atlanta, Inc. Apparatus and methods for providing close captioning in a digital program services delivery system
DE69622809T2 (de) * 1995-09-29 2002-11-28 Matsushita Electric Ind Co Ltd Fernsehempfänger für Videotext
KR19980068686A (ko) * 1997-02-22 1998-10-26 구자홍 엠펙 디코더(MPEG Decoder)의 레터 박스(Letter Box) 처리방법
JPH11127422A (ja) * 1997-10-20 1999-05-11 Toshiba Corp 映像信号多重装置
JP2000092458A (ja) * 1998-09-17 2000-03-31 Toshiba Corp 映像信号再生装置
US6512552B1 (en) * 1999-03-29 2003-01-28 Sony Corporation Subpicture stream change control
US6829012B2 (en) * 1999-12-23 2004-12-07 Dfr2000, Inc. Method and apparatus for a digital parallel processor for film conversion
JP2001292341A (ja) 2000-04-10 2001-10-19 Matsushita Electric Ind Co Ltd 輪郭強調方法およびデジタル放送受信装置
TW535413B (en) * 2001-12-13 2003-06-01 Mediatek Inc Device and method for processing digital video data
JP2004064166A (ja) 2002-07-25 2004-02-26 Hitachi Ltd 映像記録装置および映像再生装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1081050A (zh) * 1992-06-22 1994-01-19 汤姆森电子消费品公司 适配内插方法和装置
CN1274503A (zh) * 1998-07-24 2000-11-22 松下电器产业株式会社 视频信号特性转换装置及其方法

Also Published As

Publication number Publication date
US7561779B2 (en) 2009-07-14
EP1517554A1 (en) 2005-03-23
US20050244135A1 (en) 2005-11-03
JP4490914B2 (ja) 2010-06-30
EP1517554A4 (en) 2010-06-16
JPWO2004082274A1 (ja) 2006-06-15
CN1706187A (zh) 2005-12-07
WO2004082274A1 (ja) 2004-09-23

Similar Documents

Publication Publication Date Title
CN100438606C (zh) 数据处理装置
CN101815213B (zh) 动态图像编码方法及装置、记录方法、再现方法及装置
EP2357814B1 (en) Image encoding device and method
JP3824699B2 (ja) 情報記録媒体、その記録装置及び方法、その再生装置及び方法並びに情報処理装置及び方法
CN106104689B (zh) 记录介质、再现装置以及再现方法
US20070041712A1 (en) Method and apparatus for reproducing data, recording medium, and method and apparatus for recording data
US20080063369A1 (en) Method and apparatus for reproducing data, recording medium, and method and apparatus for recording data
US11238897B2 (en) Method of playing system stream files with different recording formats
US20070025696A1 (en) Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data
CN111276170B (zh) 解码系统以及解码方法
CN111599385B (zh) 记录介质、再现方法以及再现装置
CN111933189B (zh) 再现装置以及再现方法
JP4142063B2 (ja) 情報記録媒体、その記録装置及び方法、その再生装置及び方法並びに情報処理装置及び方法
WO2006018993A1 (ja) オーサリング装置、オーサリング方法並びにオーサリングプログラム及びそのプログラムを記録した記録媒体
CN101268517A (zh) 用于再现数据的方法和装置、记录介质、以及用于记录数据的方法和装置
EP3107098A1 (en) Recording medium, reproduction device and method therefor
JP2005276438A (ja) 情報記録媒体及びレプリカディスク
CN101477821A (zh) 将信息记录到信息记录介质的装置及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20081126

Termination date: 20180302

CF01 Termination of patent right due to non-payment of annual fee