CN101043600B - 重放设备和使用该重放设备的重放方法 - Google Patents

重放设备和使用该重放设备的重放方法 Download PDF

Info

Publication number
CN101043600B
CN101043600B CN2007100032445A CN200710003244A CN101043600B CN 101043600 B CN101043600 B CN 101043600B CN 2007100032445 A CN2007100032445 A CN 2007100032445A CN 200710003244 A CN200710003244 A CN 200710003244A CN 101043600 B CN101043600 B CN 101043600B
Authority
CN
China
Prior art keywords
data
video data
mixed processing
processing unit
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2007100032445A
Other languages
English (en)
Other versions
CN101043600A (zh
Inventor
久野真司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Publication of CN101043600A publication Critical patent/CN101043600A/zh
Application granted granted Critical
Publication of CN101043600B publication Critical patent/CN101043600B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B31/00Arrangements for the associated working of recording or reproducing apparatus with related apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/93Regeneration of the television signal or of selected parts thereof
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2310/00Command of the display device
    • G09G2310/02Addressing, scanning or driving the display screen or processing steps related thereto
    • G09G2310/0224Details of interlacing
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0435Change or adaptation of the frame rate of the video stream
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/10Mixing of images, i.e. displayed pixel being the result of an operation, e.g. adding, on the corresponding input pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/12Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels
    • G09G2340/125Overlay of images, i.e. displayed pixel being the result of switching between the corresponding input pixels wherein one of the images is motion video

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供一种重放设备和使用该重放设备的重放方法,该重放设备包括:输出单元(103),配置来输出用作主图像的主视频数据、用作副图像的副视频数据、显示光标的光标数据、显示操作导航的图形数据和显示字幕的子画面数据;第一混合处理单元(120),配置来叠加所述副视频数据、子画面数据、光标数据和图形数据;第二混合处理单元(30),配置来叠加由所述第一混合处理单元所得到的已叠加的数据和所述主视频数据。

Description

重放设备和使用该重放设备的重放方法
技术领域
本发明的一个实施例涉及一种重放设备如HD DVD(高清晰度数字多功能盘)播放器,以及一种使用该重放设备的重放方法。
背景技术
近年来,随着运动图像的数字压缩编码技术的发展,可处理HD(高清晰度)标准的高清晰度图像的重放设备(播放器)也得到发展。
这种类型的播放器需要具有用于融合多个高阶图像数据项的功能来增强交互性。
例如,公开号为8-205092的日本专利申请公开了一种通过显示控制器把图形数据与视频数据相结合的系统。在该系统中,显示控制器捕获视频数据,并把捕获到的视频数据与在图形画面上的一部分区域相结合。
同时,在包括了公开号为8-205092的日本专利申请中所公开的系统的传统系统中,是以处理相对低的清晰度的视频数据为基础,并不是为了处理如HD标准的视频数据之类的高清晰度图像。而且,它们也不打算叠加很多图像数据项。
另一方面,在HD标准中需要叠加最多五个图像数据,并且所需处理量超过重放设备的实际处理能力。因此,非常需要考虑到负载处理的适当分配和提高效率。
发明内容
考虑到上述情况做出本发明。本发明的目的是提供一种重放设备和一种使用该重放设备的方法,其在把负载峰值抑制在某个值之内的同时执行多个图像数据项的叠加。
为达到上述目的,根据本发明的重放设备包含:输出单元,配置来输出用作主图像的主视频数据、用作副图像的副视频数据、显示光标的光标数据、显示操作导航的图形数据和显示字幕的子画面数据;第一混合处理单元,配置来叠加所述副视频数据、子画面数据、光标数据和图形数据;第二混合处理单元,配置来叠加由所述第一混合处理单元所得到的已叠加的数据和所述主视频数据。
根据本发明,提供的是在把负载峰值抑制在某个值之内的同时执行多个图像数据项的叠加的一种重放设备和一种使用该重放设备的方法。
本发明另外的目的和优越性将在下面的描述中阐明,并从该描述中一部分变得明显或者可通过实践本发明而获悉。本发明的目的和优越性可依靠下文中特别指出的手段和结合来实现和获得。
附图说明
现在将参照附图描述实现本发明各种特性的总体结构。附图和相关描述是提供来说明本发明的实施例而不是限制本发明的范围。
图1是说明根据本发明实施例的重放设备的结构的实例框图。
图2是说明在图1的重放设备中使用的播放器应用程序的结构的示例图。
图3是说明由图2的播放器应用程序所实现的软件解码器的功能和结构的示例图。
图4是说明由在图1的重放设备中提供的混合处理单元所执行的混合处理的示例图。
图5是说明由在图1的重放设备中提供的GPU所执行的混合处理的示例图。
图6是说明在图1的重放设备中在副视频数据被叠加到主视频数据上的状态下显示副视频数据的状态的示例图。
图7是说明在图1中的重放设备中在副视频数据上的一部分区域中显示主视频数据的状态的示例图。
图8是说明在图1的重放设备中在HD标准的AV内容里叠加多个图像数据项的处理的示意性的示例图。
图9A和9B是说明由图1的重放设备中的GPU和混合处理单元的一个来有选择性地执行副视频图像的叠加的实例的示图。
具体实施方式
下面将参照附图描述根据本发明的各种实施例。
图1说明根据本发明实施例的重放设备的结构的实例。该重放设备是重放音频视频(AV)内容的媒体播放器。实现该重放设备来作为HD DVD播放器,其对存储在HD DVD(高清晰度数字多功能盘)标准的DVD介质中的音频视频(AV)内容进行重放。
如图1所示,该HD DVD播放器包含CPU(中央处理单元)11、北桥芯片12、主存储器13、南桥芯片14、非易失性存储器15、USB(通用串行总线)控制器17、HD DVD驱动器18、图形总线20、PCI(外围部件互联)总线21、视频控制器22、音频控制器23、视频解码器25、混合处理单元30、主音频解码器31、副音频解码器32、混音器(混音)33、视频编码器40和诸如HDMI(高清晰度多媒体接口)之类的AV接口(HDMI-TX)41。
在HD DVD播放器中,将播放器应用程序150和操作系统(OS)151预先安装在非易失性存储器15中。播放器应用程序150是在OS151上运行的软件,并执行控制来对HD DVD驱动器18所读取的AV内容进行重放。
存储在如HD DVD介质之类的存储介质中并由HD DVD驱动器18驱动的AV内容包含被压缩和编码了的主视频数据、被压缩和编码了的主音频数据、被压缩和编码了的副视频数据、被压缩和编码了的子画面数据、包含alpha数据的图形数据、被压缩和编码了的副音频数据以及控制该AV内容重放的导航数据。
被压缩和编码了的主视频数据是通过压缩和编码运动图像数据而获得的数据,该数据将被用作以H.264/AVC标准的压缩编码方法得到的主图像(主画面图像)。主视频数据包含HD标准的高清晰度图像。SD(标准清晰度)标准的视频数据可被用作主视频数据。被压缩和编码了的主音频数据是与主视频数据相关联的音频数据。主音频数据与主视频数据同步重放。
被压缩和编码了的副视频数据由以叠加在主视频图像上的状态而显示的副图像(子画面图像)所形成,并包含对主视频数据进行补充的运动图像(例如,作为主视频图像的电影制片人采访现场的图像)。被压缩和编码了的副音频数据是与副视频数据相关联的音频数据。副音频数据与副视频数据同步重放。
图形数据也由以叠加在主视频图像上的状态而显示的副图像(子画面图像)所形成,并包含用于显示如菜单对象之类的操作导航的各种数据(高级组件)。所述高级组件的每一个由静态图像、运动图像(包括动画)和文本形成。播放器应用程序150具有绘画功能,其用于根据用户的鼠标操作来画图。由绘画功能画出的图像也用作图形数据,并且能以叠加在主视频图像上的状态来显示。
被压缩和编码了的子画面数据由字幕之类的文本所形成。
导航数据包括用于控制内容的重放次序的播放列表和用于控制副视频数据和图形(高级组件)的重放的脚本。该脚本由标记语言如XML来描述。
HD标准的主视频数据具有1920×1080像素或1280×720像素的分辨率。另外,副视频数据、子画面数据和图形数据的每一个具有例如720×480像素的分辨率。
在HD DVD播放器中,软件(播放器应用程序150)执行分离处理和解码处理。在分离处理中,主视频数据、主音频数据、副视频数据、副音频数据和子画面数据从HD DVD驱动器18所读取的HD DVD流中分离。在解码处理中,副视频数据、子画面数据和图形数据被解码。另一方面,硬件执行需要更多处理量的处理,即对主视频数据解码的处理,以及对主音频数据和副音频数据解码的处理。
CPU 11是提供来控制HD DVD播放器的操作的处理器。CPU 11执行从非易失性存储器15载入到主存储器13的OS 151和播放器应用程序150。在主存储器13中存储区域的一部分用作视频存储器(VRAM)131。然而,并非必须使用主存储器13中存储区域的一部分作为VRAM 131。可将独立于主存储器13的专用存储器件用作VRAM 131。
北桥芯片12是连接CPU 11的局域总线与南桥芯片14的连接器件。北桥芯片12包括执行主存储器13的访问控制的存储器控制器。另外,北桥芯片12还包括GPU(图形控制单元)120。
GPU 120是由被CPU 11写入视频存储器(VRAM)131中的数据来产生形成图形画面图像的图形信号的一个图形控制器,所述视频存储器(VRAM)131是主存储器13的存储区域的一部分。GPU 120通过使用如位块传输之类的图形计算功能来产生图形信号。例如,假设CPU 11把图像数据项(副视频、子画面、图形和光标)写入VRAM 131上的四个单独的平面内。GPU 120通过使用位块传输执行混合处理来一个像素接一个像素地叠加这四个平面的图像数据项,从而产生图形信号以形成具有与主视频相同的分辨率(例如1920×1080像素)的图形画面图像。通过使用对应于副视频、子画面和图形的各个alpha数据项来执行该混合处理。alpha数据是指示对应于alpha数据的图像数据的每个像素的透明度(或不透明度)的系数。对应于副视频、子画面和图形的各个alpha数据项与副视频、子画面和图形的各个图像数据项一起存储在HD DVD介质中。具体地说,副视频、子画面和图形的每一个由图像数据和alpha数据形成。
由GPU 120产生的图形信号具有RGB彩色空间。图形信号的每个像素由数字RGB数据(24位)来表示。
除了产生形成图形画面图像的图形信号之外,GPU 120还具有向外部输出对应于所产生的图形信号的alpha数据的功能。
具体地说,GPU 120向外部输出产生的图形信号来作为数字RGB视频信号,还向外部输出对应于所产生的图形信号的alpha数据。该alpha数据是指示产生的图形信号(RGB数据)的每个像素的透明度(或不透明度)的系数(8位)。GPU 120针对每个像素输出具有由图形信号(24位的数字RGB视频信号)和alpha数据(8位)形成的alpha数据(32位的RGBA数据)的图形输出数据。具有alpha数据(32位的RGBA数据)的图形输出数据通过专用图形总线20发送到混合处理单元30。图形总线20是连接GPU 120和混合处理单元30的传输线。
如上所述,在HD DVD播放器中,具有alpha数据的图形输出数据通过图形总线20从GPU 120直接传输到混合处理单元30。这使得不必使用PCI总线21等把alpha数据从VRAM 131传输到混合处理单元30,从而避免由于alpha数据传输引起的PCI总线21中通信量的增加。
如果alpha数据通过PCI总线21等从VRAM 131向混合处理单元30传输,则需要把从GPU 120输出图形信号与通过PCI总线21传输的alpha数据同步,因此混合处理单元30的结构变得复杂。在本发明的HD DVD播放器中,GPU 120一个像素接一个像素相互同步地输出图形信号和alpha数据。因此,容易地达到图形信号与alpha数据之间的同步。
南桥芯片14控制分布在PCI总线21上的器件。南桥芯片14包括IDE(集成驱动电子学)控制器来控制HD DVD驱动器18。南桥芯片14还具有控制非易失性存储器15和USB控制器17的功能。USB控制器17控制鼠标器件171。用户可通过操作鼠标器件171来选择菜单项等。当然也可使用遥控单元来代替鼠标器件171。
HD DVD驱动器18是驱动单元,用来驱动存储介质,如存储了符合HD DVD标准的音频视频(AV)内容的HD DVD介质。
视频控制器22连接到PCI总线21。视频控制器22是与视频解码器25连接的LSI。被软件从HD DVD流中分离出来的主视频数据的流(视频流)通过PCI总线21和视频控制器22传输到视频解码器25。而且,从CPU 11输出的解码控制信息(控制)也通过PCI总线21和视频控制器22传输到视频解码器25。
视频解码器25是符合H.264/AVC标准的解码器。视频解码器25对HD标准的主视频数据解码并产生形成了分辨率为例如1920×1080像素的视频画面图像的数字YUV视频信号。该数字YUV视频信号传输到混合处理单元30。
混合处理单元30连接到GPU 120和视频解码器25,并执行混合处理来叠加从GPU 120输出的图形输出数据和被视频解码器25解码的主视频数据。在混合处理中,根据与图形数据(RGB)一起从GPU 120输出的alpha数据来执行混合处理(alpha混合处理),从而来一个像素接一个像素地叠加形成图形数据的数字RGB视频信号和形成主视频数据的数字YUV视频信号。在处理中,主视频数据用作在下的画面图像,而图形数据用作叠加在主视频数据上的在上的画面图像。
例如,由混合处理获得的输出图像数据作为数字YUV视频信号供给视频编码器40和AV接口(HDMI-TX)41的每一个。视频编码器40把由混合处理获得的输出图像数据(数字YUV视频信号)转化为分视频信号或S视频信号,并将其输出到外部显示装置(监视器)如电视机。AV接口(HDMI-TX)41向外部HDMI器件输出含有数字YUV视频信号和数字音频信号的一组数字信号。
音频控制器23连接到PCI总线21。音频控制器23是与主音频解码器31和副音频解码器32的每一个相连接的LSI。被软件从HD DVD流中分离出来的主音频数据流通过PCI总线21和音频控制器23传输到主音频解码器31。而且,被软件从HD DVD流中分离出来的副音频数据流通过PCI总线21和音频控制器23传输到副音频解码器32。从CPU 11输出的解码控制信息(控制)还通过音频控制器23供给主音频解码器31和副音频解码器32的每一个。
主音频解码器31通过解码主音频数据产生I2S(集成电路间音频传输标准(Inter-IC Sound))格式的数字音频信号。数字音频信号被传输到混音器(混音)33。主音频数据通过使用多种类型的预定压缩编码方法(即多种类型的音频编解码器)的任一个来被压缩和编码。因此,主音频解码器31具有符合各个压缩编码方法的解码功能。具体地说,主音频解码器31通过对以压缩编码方法中的一种进行了压缩和编码的主音频数据进行解码来产生数字音频信号。以来自CPU 11的解码控制信息来告知主音频解码器31对主音频数据所使用的压缩编码方法的类型。
副音频解码器32通过对副音频数据解码来产生I2S(集成电路间音频传输标准(Inter-IC Sound))格式的数字音频信号。该数字音频数据被传输到混音器(混音)33。副音频数据也通过使用上述预定的压缩编码方法(即多种类型的音频编解码器)的任一个来被压缩和编码。因此,副音频解码器32还具有符合各个压缩编码方法的解码功能。具体地说,副音频解码器32通过对以压缩编码方法中的一种进行了压缩和编码的副音频数据进行解码来产生数字音频信号。以来自CPU 11的解码控制信息来告知副音频解码器32对副音频数据所使用的压缩编码方法的类型。
混音器(混音)33通过执行混合处理来把由主音频解码器31解码的主音频数据与由副音频解码器32解码的副音频数据相混合,以产生数字音频输出信号。该数字音频输出信号被传输到AV接口(HDMI-TX)41,并在被转化成模拟音频输出信号之后被输出到外部。
接着,将参照图2来说明由CPU 11执行的播放器应用程序150的功能和结构。
播放器应用程序150包含多路信号分离器(多路分离器)模块、解码控制模块、子画面解码模块、副视频解码模块和图形解码模块。
多路分离器模块是执行多路信号分离处理来把主视频数据、主音频数据、子画面数据、副视频数据和副音频数据从被HD DVD驱动器18读取的流中分离出来的软件。解码控制模块是根据导航数据来控制对主视频数据、主音频数据、子画面数据、副视频数据、副音频数据和图形数据的解码处理的软件。
子画面解码模块对子画面数据解码。副视频解码模块对副视频数据解码。图形解码模块对图形数据(高级组件)解码。
图形驱动器是控制GPU 120的软件。解码的子画面数据、解码的副视频数据和解码的图形数据通过图形驱动器传输到GPU 120。此外,图形驱动器向GPU 120发布各种绘画命令。
PCI流传送驱动器是用来通过PCI总线21传送流的软件。主视频数据、主音频数据和副音频数据由PCI流传送驱动器通过PCI总线21分别传输到视频解码器25、主音频解码器31和副音频解码器32。
接着将参照图3来说明由CPU 11执行的播放器应用程序150所实现的软件解码器的功能和结构。
如图3所示,软件解码器包含数据读取单元101、解密处理单元102、多路信号分离器单元(多路分离器)103、子画面解码器104、副视频解码器105、图形解码器106和导航控制单元201。
存储在HD DVD 18中的HD DVD介质中的内容(主视频数据、副视频数据、子画面数据、主音频数据、副音频数据、图形数据和导航数据)由数据读取单元101从HD DVD驱动器18中读取。主视频数据、副视频数据、子画面数据、主音频数据、副音频数据、图形数据和导航数据的每一个都被加密。主视频数据、副视频数据、子画面数据、主音频数据、副音频数据被叠加在HD DVD流上。由数据读取单元101从HD DVD介质中读取出的主视频数据、副视频数据、子画面数据、主音频数据、副音频数据、图形数据和导航数据的每一个被输入到内容解密处理单元102。解密处理单元102执行处理来对加密的数据项的每一个进行解密。解密的导航数据被传输到导航控制单元201。另外,解密的HD DVD流被传输到多路分离器103。
导航控制单元201对包括在导航数据中的脚本(XML)进行分析,并控制图形数据(高级组件)的重放。图形数据(高级组件)被传输到图形解码器106。图形解码器106由播放器应用程序150的图形解码模块形成,并对图形数据(高级组件)进行解码。
另外,导航控制单元201还执行响应于用户对鼠标器件171的操作来移动光标的处理,以及响应于菜单项的选择来重放音效的处理。用以上述绘画功能来画图可由下述过程实现:导航控制单元201接收鼠标器件171的用户操作,使GPU 120产生由该轨迹即光标轨迹形成的画面的图形数据,然后通过使用导航数据,把该数据作为与图形解码器106所解码的图形数据等价的图形数据再次输入到GPU120。
以播放器应用程序150的多路分离器模块来实现多路分离器103。多路分离器103把主视频数据、主音频数据、副音频数据、子画面数据和副视频数据从HD DVD流中分离出来。
主视频数据通过PCI总线21传输给视频解码器25。主视频数据由视频解码器25解码。解码的主视频数据具有例如HD标准的1920×1080像素的分辨率,并且作为数字YUV视频信号被传输到混合处理单元30。
主音频数据通过PCI总线21传输给主音频解码器31。主音频数据由主音频解码器31解码。解码的主音频数据作为12S格式的数字音频信号被传输给混音器33。
副音频数据通过PCI总线21传输给副音频解码器32。副音频数据由副音频解码器32解码。解码的副音频数据作为I2S格式的数字音频信号被传输给混音器33。
子画面数据和副视频数据被分别传输给子画面解码器104和副视频解码器105。子画面解码器104和副视频解码器105分别对子画面数据和副视频数据解码。子画面解码器104和副视频解码器105分别由播放器应用程序150的子画面解码模块和副视频解码模块实现。
分别由子画面解码器104、副视频解码器105和图形解码器106解码的子画面数据、副视频数据和图形数据被CPU 11写入VRAM 131。而且,对应于光标图像的光标数据也被CPU 11写入VRAM 131。子画面数据、副视频数据、图形数据和光标数据的每一个都包括针对每个像素的RGB数据和alpha数据(A)。
GPU 120由被CPU 11写入VRAM 131中的副视频数据、图形数据、子画面数据和光标数据产生形成了1920×1080像素的图形画面图像的图形输出数据。通过由GPU 120的混合器单元(MIX)121执行的alpha混合处理来一个像素接一个像素地叠加副视频数据、图形数据、子画面数据和光标数据。
在alpha混合处理中,使用了对应于写入VRAM 131中的副视频数据、图形数据、子画面数据和光标数据的各个alpha数据项。具体地说,写入VRAM 131中的副视频数据、图形数据、子画面数据和光标数据的每一个都包含图像数据和alpha数据。MIX 121根据对应于副视频数据、图形数据、子画面数据和光标数据的各个alpha数据项以及由CPU 11指定的副视频数据、图形数据、子画面数据和光标数据的各个位置信息项,来执行混合处理。因此,MIX 121产生这样的图形画面图像,其中副视频数据、图形数据、子画面数据和光标数据叠加在1920×1080像素的背景图像上。
该背景图像的每个像素的alpha值是表示该像素为透明的值,即0。在图形画面图像中,对于其中叠加了图像数据项的区域,对应于各个区域的新alpha数据项由MIX 121来计算。
如上所述,GPU 120从副视频数据、图形数据、子画面数据和光标数据来产生形成了1920×1080像素的图形画面图像的图形输出数据(RGB)以及对应于图形数据的alpha数据。当只显示副视频数据、图形数据、子画面数据和光标数据的一个图像时,GPU 120产生了对应于图形画面图像的图形数据,并产生了对应于该图形数据的alpha数据,其中在该图形画面图像中只有该图像(例如720×480)被安置在1920×1080像素的背景图像上。
由GPU 120产生的图形数据(RGB)和alpha数据作为RGBA数据通过图形总线20传输给混合处理单元30。
接着参照图4来说明由混合处理单元30执行的混合处理(alpha混合处理)。
alpha混合处理是根据伴随图形数据(RGB)的alpha数据(A)来一个像素接一个像素地叠加图形数据和主视频数据的混合处理。图形数据(RGB)用作表层图像,并被叠加在视频数据上。从GPU 120输出的图形数据的分辨率与从视频解码器25输出的主视频数据的分辨率相同。
假设具有分辨率为1920×1080像素的主视频数据(视频)作为图像数据C输入给混合处理单元30,而具有分辨率为1920×1080像素的图形数据作为图像数据G输入给混合处理单元30。混合处理单元30根据具有分辨率为1920×1080像素的alpha数据(A)执行计算来一个像素接一个像素地把图像数据G叠加到图像数据C上。该计算由下面的公式(1)执行。
V=α×G+(1-α)C    ...(1)
V表示由alpha混合处理所获得的输出图像数据每个像素的颜色,α表示对应于图形数据G每个像素的alpha值。
接着参照图5来说明由GPU 120的MIX 121执行的混合处理(alpha混合处理)。
在本实施例中,假设从写入VRAM 131中的子画面数据和副视频数据产生了具有1920×1080像素分辨率的图形数据。子画面数据和副视频数据的每一个都具有例如720×480像素的分辨率。子画面数据和副视频数据的每一个都伴随着具有720×480像素分辨率的alpha数据。
例如,把对应于子画面数据的图像用作表层图像,而把对应于副视频数据的图像用作下层图像。
在对应于子画面数据的图像叠加在对应于副视频数据的图像上的区域中每个像素的颜色由下面的公式(2)确定。
G=Go×αo+Gu(1-αo)αu    ...(2)
G表示在该叠加的区域中每个像素的颜色,Go表示用作表层图像的子画面数据每个像素的颜色,αo表示用作表层图像的子画面数据每个像素的alpha值,Gu表示用作下层图像的副视频数据每个像素的颜色。
此外,在把对应于子画面数据的图像叠加在对应于副视频数据的图像上的区域中每个像素的alpha值由下面的公式(3)确定。
α=αo+αu×(1-αo)          ...(3)
α表示该叠加的区域每个像素的alpha值,αu表示用作下层的副视频数据的每个像素的alpha值。
如上所述,GPU 120的MIX 121通过使用在对应于子画面数据的alpha数据与对应于副视频数据的alpha数据之间的被用作表层图像的那个数据的alpha数据来叠加子画面数据和副视频数据,从而产生形成了1920×1080像素的画面图像的图形数据。此外,GPU 120的MIX 121根据对应于子画面数据的alpha数据和对应于副视频数据的alpha数据来计算形成了1920×1080像素画面图像的图形数据的每个像素的alpha值。
具体地说,GPU 120的MIX 121执行叠加1920×1080像素的表面(像素颜色=黑,像素的alpha值=0)、720×480像素的副视频数据的表面、和720×480像素的子画面数据的表面的混合处理,从而计算形成1920×1080像素的画面图像的图形数据和1920×1080像素的alpha数据。1920×1080像素的表面被用作最底层面,副视频数据的表面被用作次底层面,子画面数据的表面被用作最上层面。
在1920×1080像素的画面图像中,在子画面数据或副视频数据都不存在的区域中像素颜色是黑色。另外,在只存在子画面数据的区域中像素颜色与子画面数据的对应像素的各原始颜色相同。同样,在只存在副视频数据的区域中像素颜色与副视频数据的对应像素的各原始颜色相同。
另外,在1920×1080像素的画面图像中,与在子画面数据或副视频数据都不存在的区域中的像素相对应的alpha值是0。在只存在子画面数据的区域中像素的alpha值与子画面数据的对应像素的原始alpha值相同。同样,在只存在副视频数据的区域中像素的alpha值与副视频数据的对应像素的原始alpha值相同。
图6说明的是在把720×480像素的副视频数据叠加在1920 ×1080像素的主视频数据上的状态下所显示的该720×480像素的副视频数据的情况。
在图6中,通过一个像素接一个像素地叠加1920×1080像素(像素颜色=黑,像素的alpha值=0)的表面与720×480像素的副视频数据表面的混合处理来产生图形数据。
如上所述,输出到显示装置的输出画面数据(视频+图形)是通过混合图形数据和主视频数据来产生的。
在1920×1080像素的图形数据中,在不存在720×480像素的副视频数据的区域中像素的alpha值是0。因此,不存在副视频数据的区域是透明的,并且在该区域中显示不透明度100%的主视频数据。
在主视频数据上以对应于副视频数据的alpha数据指定的透明度来显示720×480像素的副视频数据的每个像素。例如,以不透明度100%来显示具有alpha值为1的副视频数据的像素,而不显示对应于该副视频数据像素位置的主视频数据的像素。
此外,如图7所示,在放大到1920×1080像素分辨率的副视频数据上的区域中可显示缩小到720×480像素分辨率的主视频数据。
通过使用GPU 20的缩放功能和视频解码器25的缩放功能可实现图7的显示模式。
具体地说,根据来自CPU 11的指令,GPU 20执行缩放处理来逐步增大副视频数据的分辨率直到副视频数据的分辨率(图像尺寸)达到1920×1080像素。使用像素插值法执行该缩放处理。随着副视频数据分辨率增加,不存在副视频数据的区域(具有alpha值为0的区域)在1920×1080像素的图形数据中逐渐减少。因此在主视频数据上显示的副视频数据的尺寸逐渐增加,而具有alpha值为0的区域逐渐减少。当副视频数据的分辨率(图像尺寸)达到1920×1080像素时,GPU 120执行混合处理来在1920×1080像素的副视频数据上叠加720×480像素的表面(像素颜色=黑,像素的alpha值=0),从而在1920×1080像素的副视频数据上安置alpha值为0的720×480像素的区域。
另一方面,视频解码器25根据来自CPU 11的指令执行缩放处理来把主视频数据的分辨率减小到720×480像素。
在安置于1920×1080像素的副视频数据上的、alpha值为0的720×480像素的区域中显示了被减小到720×480像素的主视频数据。具体地说,从GPU 120输出的alpha数据还可用作掩膜以限制显示主视频数据的区域。
如上所述,从GPU 120输出的alpha数据可由软件控制。因此,以叠加在主视频数据上的状态来有效地显示图形数据,从而容易地实现高交互性图像显示。另外,alpha数据随图形数据一起自动从GPU120传输到混合处理单元30,因此该软件无需分别执行处理来把alpha数据传送到混合处理单元30。
图8是示意性示图,说明了通过如上所述进行操作的GPU 120和混合处理单元30来在由HD DVD播放器重放的HD标准AV内容中叠加多个图像数据项的处理。
在HD标准中,定义了从层1到层5的五个层,并把光标、图形、子画面、副视频和主视频分别分配给层1到层5。如图8所示,作为前一步处理,GPU 120的MIX 121把层1到层5之中层1到层4的四个图像a1到a4进行叠加;并且作为后一步处理,混合处理单元30把从GPU 120输出的图像与层5的图像a5叠加。因此产生目标图像a6。
如上所述,第一个优点是,HD DVD播放器通过把在HD标准中定义的层1到层5的五个图像数据项的叠加分成两个步骤来执行适当的装载分配。另外,层5的主视频包含高清晰度图像,必须对每一帧(每秒有30帧)执行更新。因此处理主视频的混合处理单元30每秒需要执行30次叠加。与之相比,层1到层4的光标、图形、子画面和副视频无需具有与主视频一样高的图像质量。因此,对于GPU 120的MIX 121来说每秒执行例如10次叠加就足够了。假设混合处理单元30与层5的主视频一起还对层1到层4的光标、图形、子画面和副视频执行叠加,则对层1到层4也要执行每秒30次叠加,即每秒执行了20次不必要的叠加。因此,作为第二个优点,该HD DVD播放器适当地实现了效率的提高。
层1到层4的光标、图形、子画面和副视频被从播放器应用程序150提供给GPU 120。为了把图像数据项供给GPU 120,播放器应用程序150包含了子画面解码器104、副视频解码器105、图形解码器(组件解码器)106、和光标绘画管理器107、以及表面管理/定时控制器108,如图8所示。
光标绘画管理器107作为导航控制单元201的功能来实现,并执行光标绘画控制来响应于鼠标器件171的用户操作而移动光标。另一方面,表面管理/定时控制器108执行定时控制来显示由子画面解码器104在适当的定时解码的子画面数据的图像。
如图8所示的光标控制是用于移动光标的控制数据,它由USB控制器17响应于鼠标器件171的操作而产生。ECMA脚本是其中描述了绘画API从而指示点、线和图像等的绘画的脚本。iHD标记是以标记语言描述的用来在适当定时显示各种高级组件的文本数据。
此外,除了MIX 121以外,GPU 120还具有缩放处理单元122、亮度键处理单元123和3D图形引擎124。
缩放处理单元122执行在图7的说明中提及的缩放处理。亮度键处理单元123通过把亮度值小于阈值的像素的alpha值设置成0来执行亮度键处理以去除图像中的背景(黑色)。3D图形引擎124执行图形数据产生处理,包括用于绘画功能的(光标轨迹形成的图像的)图像生成。
如图8所示,HD DVD播放器对层2到层4的图像a2到a4执行缩放处理,并对层4的图像a4进一步执行亮度键处理。此外,在HDDVD播放器中,GPU 120不单独地执行缩放处理和亮度键处理,而是(通过MIX 121)与混合处理同时执行。从播放器应用程序150的观点出发,播放器应用程序150要求缩放处理和亮度键处理与混合处理一起进行。假设GPU 120单独地执行缩放处理和亮度键处理,则需要提供中间缓冲器来临时存储缩放处理后的图像和亮度键处理后的图像,并执行中间缓冲器与GPU 120之间的数据传送。与之相比,根据该HD DVD播放器,在GPU 120中无论有无必要都要把缩放处理单元122的输出输入到亮度键处理单元123中,并且无论有无必要都要把亮度键处理单元123的输出输入到MIX 121。换言之,该HD DVD执行所谓的流水线处理,其中缩放处理单元122、亮度键处理单元123和MIX 121一起工作。因此,该HD DVD播放器不需要中间缓冲器,并且不会产生中间缓冲器与GPU 120之间的数据传送。同样在这方面该HD DVD播放器实现效率提高。
在图8中说明的像素缓冲器管理器153是中间设备(middleware),其执行对用作工作区的像素缓冲器的分配控制,从而用来通过使用3D图形引擎124的鼠标操作来画图并通过组件解码器106来画如操作管理之类的对象。在准备通过软件使用作为硬件的像素缓冲器的驱动器与使用该像素缓冲器的更高系统之间提供该像素缓冲器管理器153,以通过该驱动器进一步优化分配控制。
如上所述,在HD DVD播放器中,在HD标准中定义的层1到层5的五个图像数据项的叠加被分成两个步骤,从而实现了适当的装载分配和效率的提高。而且,通过与混合处理同时执行缩放处理和亮度键处理进一步实现了效率提高。
本实施例示出分步的实例,其中在层1到层5之中的层1到层4的图像a1到a4的叠加被作为前一步执行,而层5的图像a5的叠加被作为后一步执行。然而,例如通过动态切换层4的连接,层4的图像a4的叠加,即副视频的叠加既可在前一步也可在后一步中执行。图9A和9B的示图说明了通过GPU 120的MIX 121或混合处理单元30二者之一选择性地执行副视频叠加的结构示例。
例如,如果要求副视频具有与主视频相等的高图像质量,并需要对每一帧更新,即每秒更新30次,则可执行从图9A的状态到图9B的状态的切换。用于切换的触发事件可作为在导航数据中包括的脚本而提供。
此外,可以把图9B的状态设置成基本状态,并且当HD DVD播放器处在超出预定参考值的重负载状态下时执行切换到图9A的状态。由于播放器应用程序150可从OS 151获得负载状态的信息,因此容易获得用于切换的触发事件。
另外,在本实施例中说明的是其中GPU 120作为软件执行前一步叠加而混合处理单元30作为硬件执行后一步叠加的例子。然而,本发明的实质并不在于软件处理和硬件处理的区分。因此本发明当然可在前一步和后一步都由软件处理来执行的情况下适用。
已经描述本发明的某些实施例,这些实施例仅仅作为例子示出,而非用来限制本发明的范围。实际上,这里描述的新方法和系统可以以各种其它形式实施;此外,可在不脱离本发明的精神情况下对这里描述的方法和系统的形式做出各种省略、替代和改变。所附权利要求及其等同物意在覆盖这些落入本发明范围和精神之内的形式或其修改。

Claims (13)

1.一种重放设备,其特征在于包含:
输出单元,配置来输出用作主图像的主视频数据、用作副图像的副视频数据、显示光标的光标数据、显示操作导航的图形数据和显示字幕的子画面数据;
第一混合处理单元,配置来叠加所述副视频数据、子画面数据、光标数据和图形数据;以及
第二混合处理单元,配置来叠加由所述第一混合处理单元所得到的已叠加数据和所述主视频数据。
2.如权利要求1所述的重放设备,其特征在于
由所述第一混合处理单元执行的每单位时间的处理次数小于由所述第二混合处理单元执行的每单位时间的处理次数。
3.如权利要求1所述的重放设备,其特征在于还包含:
切换单元,配置来把所述副视频数据的叠加从所述第一混合处理单元切换到所述第二混合处理单元。
4.如权利要求3所述的重放设备,其特征在于还包含:
控制单元,配置来驱动和控制所述切换单元,以使得当所述副视频数据的副图像是高图像质量的图像时所述第二混合处理单元执行所述副视频数据的叠加,并且使得当所述副视频数据的副图像是低图像质量的图像时所述第一混合处理单元执行所述副视频数据的叠加。
5.如权利要求3所述的重放设备,其特征在于还包含:
控制单元,配置来驱动和控制所述切换单元,以使得当所述重放设备在轻负载情况下时所述第二混合处理单元执行所述副视频数据的叠加,并且使得当所述重放设备在重负载情况下时所述第一混合处理单元执行所述副视频数据的叠加。
6.如权利要求1所述的重放设备,其特征在于
所述第一混合处理单元在执行所述混合处理的同时执行缩放处理来缩小或放大所述图形数据。
7.如权利要求1所述的重放设备,其特征在于
所述第一混合处理单元在执行所述混合处理的同时执行缩放处理来缩小或放大所述子画面数据。
8.如权利要求1所述的重放设备,其特征在于
所述第一混合处理单元在执行所述混合处理的同时执行缩放处理来缩小或放大所述副视频数据。
9.如权利要求8所述的重放设备,其特征在于
所述第一混合处理单元在执行所述混合处理的同时对所述副视频数据执行亮度键处理来去除所述副图像中的背景色。
10.如权利要求1所述的重放设备,其特征在于
所述第一混合处理单元在执行所述混合处理的同时对所述副视频数据执行亮度键处理来去除所述副图像中的背景色。
11.一种重放设备,其特征在于包含:
输出单元,配置来输出用作主图像的主视频数据、用作副图像的副视频数据、显示光标的光标数据、显示操作导航的图形数据和显示字幕的子画面数据;
第一混合处理单元,配置来叠加所述副视频数据、子画面数据和光标数据;以及
第二混合处理单元,配置来叠加由所述第一混合处理单元所得到的已叠加数据、所述主视频数据和所述副视频数据。
12.如权利要求11所述的重放设备,其特征在于
由所述第一混合处理单元执行的每单位时间的处理次数小于由所述第二混合处理单元执行的每单位时间的处理次数。
13.一种使用重放设备的重放方法,其特征在于包含步骤:
输出用作主图像的主视频数据、用作副图像的副视频数据、显示光标的光标数据、显示操作导航的图形数据和显示字幕的子画面数据;
对所述副视频数据、子画面数据、光标数据和图形数据进行第一叠加;以及
对由所述第一叠加所得到的已叠加数据和所述主视频数据进行第二叠加。
CN2007100032445A 2006-03-22 2007-01-31 重放设备和使用该重放设备的重放方法 Expired - Fee Related CN101043600B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006078219 2006-03-22
JP2006078219A JP4625781B2 (ja) 2006-03-22 2006-03-22 再生装置
JP2006-078219 2006-03-22

Publications (2)

Publication Number Publication Date
CN101043600A CN101043600A (zh) 2007-09-26
CN101043600B true CN101043600B (zh) 2011-07-06

Family

ID=38533531

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007100032445A Expired - Fee Related CN101043600B (zh) 2006-03-22 2007-01-31 重放设备和使用该重放设备的重放方法

Country Status (5)

Country Link
US (1) US8385726B2 (zh)
JP (1) JP4625781B2 (zh)
KR (1) KR100865425B1 (zh)
CN (1) CN101043600B (zh)
TW (1) TW200809692A (zh)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8543420B2 (en) * 2007-09-19 2013-09-24 Fresenius Medical Care Holdings, Inc. Patient-specific content delivery methods and systems
JP4625781B2 (ja) * 2006-03-22 2011-02-02 株式会社東芝 再生装置
JP4858129B2 (ja) * 2006-12-01 2012-01-18 富士ゼロックス株式会社 画像処理装置と画像形成システムおよびプログラム
US8174620B2 (en) 2007-11-06 2012-05-08 Microsoft Corporation High definition media content processing
JP4346663B2 (ja) 2008-01-18 2009-10-21 株式会社東芝 情報処理装置、及びプログラム
JP5322529B2 (ja) * 2008-07-29 2013-10-23 キヤノン株式会社 表示装置、表示制御方法
US8300056B2 (en) 2008-10-13 2012-10-30 Apple Inc. Seamless display migration
US8698741B1 (en) 2009-01-16 2014-04-15 Fresenius Medical Care Holdings, Inc. Methods and apparatus for medical device cursor control and touchpad-based navigation
US10799117B2 (en) 2009-11-05 2020-10-13 Fresenius Medical Care Holdings, Inc. Patient treatment and monitoring systems and methods with cause inferencing
US8632485B2 (en) * 2009-11-05 2014-01-21 Fresenius Medical Care Holdings, Inc. Patient treatment and monitoring systems and methods
US8368702B2 (en) * 2010-01-06 2013-02-05 Apple Inc. Policy-based switching between graphics-processing units
US8648868B2 (en) 2010-01-06 2014-02-11 Apple Inc. Color correction to facilitate switching between graphics-processing units
US8797334B2 (en) 2010-01-06 2014-08-05 Apple Inc. Facilitating efficient switching between graphics-processing units
KR101688153B1 (ko) * 2010-08-11 2016-12-20 엘지전자 주식회사 3차원 영상의 편집 방법 및 이를 이용하는 이동 단말기
JP2013025619A (ja) * 2011-07-22 2013-02-04 Olympus Corp 画像表示装置および画像表示方法
TW201308131A (zh) * 2011-08-08 2013-02-16 Ite Tech Inc 減少數位廣播內容游標反應時間的方法與其裝置
CN106060647A (zh) * 2013-05-15 2016-10-26 蔡留凤 采用字幕处理模块的超高清数字电视接收机的工作方法
KR20150033162A (ko) * 2013-09-23 2015-04-01 삼성전자주식회사 컴포지터, 이를 포함하는 시스템온칩 및 이의 구동 방법
JP6307716B2 (ja) * 2015-06-11 2018-04-11 株式会社アクセル 画像情報処理方法
CN105898614A (zh) * 2015-08-21 2016-08-24 乐视致新电子科技(天津)有限公司 一种设置屏幕菜单的透明度的方法、装置和芯片
WO2017066736A1 (en) * 2015-10-16 2017-04-20 Tribune Broadcasting Company, Llc Media-production system with social media content interface feature
KR20170083889A (ko) * 2016-01-11 2017-07-19 삼성전자주식회사 디스플레이 장치 및 그 동작 방법
US11256528B2 (en) 2018-10-26 2022-02-22 Nvidia Corporation Individual application window streaming suitable for remote desktop applications

Family Cites Families (87)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5027212A (en) * 1989-12-06 1991-06-25 Videologic Limited Computer based video/graphics display system
US5890190A (en) * 1992-12-31 1999-03-30 Intel Corporation Frame buffer for storing graphics and video data
JPH06335022A (ja) 1993-05-25 1994-12-02 Mitsubishi Electric Corp 静止画記憶装置
US5535137A (en) 1994-02-14 1996-07-09 Sony Corporation Of Japan Random access audio/video processor with compressed video resampling to allow higher bandwidth throughput
JPH07236136A (ja) * 1994-02-23 1995-09-05 Hitachi Ltd 動画情報の伝送制御方式および表示制御方式
JPH0865512A (ja) 1994-08-22 1996-03-08 Canon Inc 画像処理装置およびその方法
US5809245A (en) * 1995-01-24 1998-09-15 Kabushiki Kaisha Toshiba Multimedia computer system
JP3135808B2 (ja) 1995-01-24 2001-02-19 株式会社東芝 コンピュータシステムおよびこのコンピュータシステムに適用されるカード
US6741617B2 (en) * 1995-04-14 2004-05-25 Koninklijke Philips Electronics N.V. Arrangement for decoding digital video signals
JPH0946722A (ja) 1995-07-28 1997-02-14 Ekushingu:Kk カラースーパーインポーズ装置
US6008860A (en) * 1995-12-29 1999-12-28 Thomson Consumer Electronics, Inc. Television system with provisions for displaying an auxiliary image of variable size
US6311204B1 (en) * 1996-10-11 2001-10-30 C-Cube Semiconductor Ii Inc. Processing system with register-based process sharing
JP3226804B2 (ja) 1996-11-08 2001-11-05 日本電気株式会社 画像・音声再生システム
JP3742167B2 (ja) * 1996-12-18 2006-02-01 株式会社東芝 画像表示制御装置
KR100254612B1 (ko) * 1996-12-28 2000-06-01 구자홍 광디스크 재생장치의 가변전송레이트 버퍼 관리장치 및 그 제어방법
JP3684740B2 (ja) * 1997-01-24 2005-08-17 セイコーエプソン株式会社 Yuv−rgbデジタル変換回路並びにそれを用いた画像表示装置及び電子機器
JPH10320922A (ja) 1997-05-22 1998-12-04 Hitachi Ltd データ処理装置及びディスク状記憶媒体の記憶データ再生装置
JPH1153580A (ja) 1997-07-31 1999-02-26 Sony Corp 3次元画像処理装置及びビデオ合成方法
JP3756647B2 (ja) 1997-12-02 2006-03-15 株式会社東芝 多画面表示装置
JPH11203444A (ja) 1998-01-09 1999-07-30 Mitsubishi Electric Corp 画像合成装置
US6486922B1 (en) * 1998-02-20 2002-11-26 Matsushita Electric Industrial Co., Ltd. Synchronization method of image decoder
JP2000100073A (ja) * 1998-09-28 2000-04-07 Sony Corp 記録装置および方法、再生装置および方法、記録媒体、並びに提供媒体
US6573905B1 (en) * 1999-11-09 2003-06-03 Broadcom Corporation Video and graphics system with parallel processing of graphics windows
US6414996B1 (en) * 1998-12-08 2002-07-02 Stmicroelectronics, Inc. System, method and apparatus for an instruction driven digital video processor
US7365757B1 (en) * 1998-12-17 2008-04-29 Ati International Srl Method and apparatus for independent video and graphics scaling in a video graphics system
JP3382170B2 (ja) * 1998-12-25 2003-03-04 株式会社東芝 マルチウインドウ画像表示装置
JP2000209580A (ja) * 1999-01-13 2000-07-28 Canon Inc 画像処理装置およびその方法
JP2000305546A (ja) 1999-04-16 2000-11-02 Nec Corp 半導体メモリおよび画像表示装置
JP2000324419A (ja) 1999-05-14 2000-11-24 Canon Inc 画像処理装置及び方法
JP3380859B2 (ja) 1999-06-02 2003-02-24 松下電器産業株式会社 マルチレイヤ画像合成装置
US6606127B1 (en) * 1999-06-10 2003-08-12 Enseo, Inc. System and method for synchronizing, storing and accurately reproducing video signals
US6912350B1 (en) * 1999-12-08 2005-06-28 Intel Corporation DVD subpicture rendering without loss of color resolution
US7483042B1 (en) * 2000-01-13 2009-01-27 Ati International, Srl Video graphics module capable of blending multiple image layers
DE10001369A1 (de) * 2000-01-14 2001-07-19 Infineon Technologies Ag Verfahren und Schaltungsanordnung zur Grafikdarstellung, insbesondere in einem digitalen Fernsehgerät
US6552750B1 (en) * 2000-03-21 2003-04-22 Tvia, Inc. Apparatus for improving the presentation of graphics data on a television display
EP1330123A4 (en) * 2000-09-29 2006-04-26 Toshiba Kk RECORDING / REPRODUCING DEVICE AND METHOD FOR PROGRAMMING THE RECORDING / REPRODUCTION RECORDING
JP4215423B2 (ja) 2000-10-19 2009-01-28 三洋電機株式会社 画像データ出力装置
TW475122B (en) * 2000-10-24 2002-02-01 Cyberlink Corp Film commentary data service device
US6903753B1 (en) * 2000-10-31 2005-06-07 Microsoft Corporation Compositing images from multiple sources
JP3548521B2 (ja) * 2000-12-05 2004-07-28 Necマイクロシステム株式会社 半透明画像処理装置及び方法
JP2002247498A (ja) * 2001-02-16 2002-08-30 Toshiba Corp 情報再生装置
JP2002297198A (ja) 2001-03-30 2002-10-11 Seiko Epson Corp オーディオ復号装置
JP3540761B2 (ja) 2001-04-02 2004-07-07 株式会社東芝 コンピュータシステムおよび動画再生方法
JP4151234B2 (ja) 2001-04-25 2008-09-17 カシオ計算機株式会社 画像合成処理装置
JP2002335497A (ja) * 2001-05-10 2002-11-22 Toshiba Corp サブピクチャ表示倍率変換方法及び装置
US6828987B2 (en) * 2001-08-07 2004-12-07 Ati Technologies, Inc. Method and apparatus for processing video and graphics data
JP3785983B2 (ja) 2001-10-05 2006-06-14 株式会社日立製作所 ディジタル情報記録装置および情報記録再生装置
JP2003162276A (ja) 2001-11-29 2003-06-06 Matsushita Electric Ind Co Ltd オンスクリーン表示回路
JP2003224862A (ja) 2002-01-29 2003-08-08 Nec Access Technica Ltd グラフィックコントローラ及び表示メモリ容量低減方式
JP4573491B2 (ja) * 2002-02-28 2010-11-04 三洋電機株式会社 画像処理装置および画像処理方法
JP3730586B2 (ja) 2002-03-20 2006-01-05 株式会社リコー 画像処理装置
US6771274B2 (en) * 2002-03-27 2004-08-03 Sony Corporation Graphics and video integration with alpha and video blending
US7330640B2 (en) * 2002-04-15 2008-02-12 Thomson Licensing Display of closed caption and sub-picture information during limited speedup video trick modes
JP2003317395A (ja) * 2002-04-15 2003-11-07 Pioneer Electronic Corp 情報記録装置および情報記録方法
US7539391B2 (en) * 2002-06-27 2009-05-26 Nxp B.V. Method and apparatus for trick-mode support of audio/video/data streams with conditional access
US7463311B2 (en) * 2002-09-09 2008-12-09 General Instrument Corporation Method and system for including non-graphic data in an analog video output signal of a set-top box
MXPA05003234A (es) * 2002-09-26 2005-07-05 Koninkl Philips Electronics Nv Aparato para recibir una senal de informacion digital.
US8150237B2 (en) 2002-11-28 2012-04-03 Sony Corporation Reproducing apparatus, reproducing method, reproducing program, and recording medium
US7580614B2 (en) * 2002-12-09 2009-08-25 Kabushiki Kaisha Toshiba Information playback apparatus having expansion information storage unit and information playback method
JP4261893B2 (ja) * 2002-12-13 2009-04-30 キヤノン株式会社 情報処理装置及び情報処理方法
US7554608B2 (en) * 2003-04-01 2009-06-30 Panasonic Corporation Video composition circuit for performing vertical filtering to α-blended video data and successively input video data
JP4466117B2 (ja) 2003-04-09 2010-05-26 ヤマハ株式会社 画像合成装置
TWI229562B (en) * 2003-04-17 2005-03-11 Mediatek Inc Apparatus and method for signal processing of format conversion and combination of video signals
JP2004328226A (ja) 2003-04-23 2004-11-18 Funai Electric Co Ltd Dvdプレーヤ、及び合成映像再生装置
US7400360B2 (en) * 2003-09-22 2008-07-15 Lsi Corporation Device for simultaneous display of video at two resolutions with different fractions of active regions
KR20050034448A (ko) * 2003-10-09 2005-04-14 엘지전자 주식회사 다중 그래픽 중첩을 위한 온 스크린 디스플레이 장치
US7251322B2 (en) * 2003-10-24 2007-07-31 Microsoft Corporation Systems and methods for echo cancellation with arbitrary playback sampling rates
TWI263925B (en) * 2003-12-16 2006-10-11 Via Tech Inc Graphics card for smoothing the playing of video
US7486337B2 (en) 2003-12-22 2009-02-03 Intel Corporation Controlling the overlay of multiple video signals
US7535478B2 (en) * 2003-12-24 2009-05-19 Intel Corporation Method and apparatus to communicate graphics overlay information to display modules
US8190003B2 (en) * 2004-01-14 2012-05-29 Samsung Electronics Co., Ltd. Storage medium storing interactive graphics stream activated in response to user's command, and reproducing apparatus for reproducing from the same
JP2005341169A (ja) * 2004-05-26 2005-12-08 Funai Electric Co Ltd 光ディスク再生装置
JP2005341132A (ja) * 2004-05-26 2005-12-08 Toshiba Corp 映像データ処理装置及び処理方法
JP2006004486A (ja) * 2004-06-16 2006-01-05 Toshiba Corp 情報記録媒体及び情報再生装置
US20050281342A1 (en) * 2004-06-22 2005-12-22 Broadcom Corporation Slow motion and high speed for digital video
JP2006065365A (ja) 2004-08-24 2006-03-09 Fuji Photo Film Co Ltd 画像処理装置および方法並びにプログラム
JP2007065928A (ja) * 2005-08-30 2007-03-15 Toshiba Corp 情報記憶媒体、情報処理方法、情報転送方法、情報再生方法、情報再生装置、情報記録方法、情報記録装置、及びプログラム
EP1667448A1 (en) * 2004-12-02 2006-06-07 Deutsche Thomson-Brandt Gmbh Method and apparatus for encoding and for decoding a main video signal and one or more auxiliary video signals
JP4568120B2 (ja) * 2005-01-04 2010-10-27 株式会社東芝 再生装置
JP4417854B2 (ja) * 2005-01-04 2010-02-17 株式会社東芝 再生装置
JP4519658B2 (ja) * 2005-01-04 2010-08-04 株式会社東芝 再生装置
JP4737991B2 (ja) * 2005-01-04 2011-08-03 株式会社東芝 再生装置
JP2006236411A (ja) * 2005-02-22 2006-09-07 Toshiba Corp 情報記憶媒体、情報記録方法、および情報再生方法
JP4968506B2 (ja) * 2005-03-04 2012-07-04 ソニー株式会社 再生装置、再生方法、およびプログラム
US7903172B2 (en) * 2005-03-29 2011-03-08 Snell Limited System and method for video processing
JP4625781B2 (ja) * 2006-03-22 2011-02-02 株式会社東芝 再生装置
JP2007258873A (ja) * 2006-03-22 2007-10-04 Toshiba Corp 再生装置および再生方法

Also Published As

Publication number Publication date
JP4625781B2 (ja) 2011-02-02
US8385726B2 (en) 2013-02-26
JP2007258872A (ja) 2007-10-04
TW200809692A (en) 2008-02-16
KR20070095761A (ko) 2007-10-01
KR100865425B1 (ko) 2008-10-24
CN101043600A (zh) 2007-09-26
US20070223877A1 (en) 2007-09-27

Similar Documents

Publication Publication Date Title
CN101043600B (zh) 重放设备和使用该重放设备的重放方法
US20070222798A1 (en) Information reproduction apparatus and information reproduction method
KR100885578B1 (ko) 정보 처리 장치 및 정보 처리 방법
US7973806B2 (en) Reproducing apparatus capable of reproducing picture data
US20060164437A1 (en) Reproducing apparatus capable of reproducing picture data
CN101431690B (zh) 图像处理设备,图像处理方法
US8922622B2 (en) Image processing device, image processing method, and program
TW200526038A (en) Controlling the overlay of multiple video signals
US20130148947A1 (en) Video player with multiple grpahics processors
US6567097B1 (en) Display control apparatus
US7936360B2 (en) Reproducing apparatus capable of reproducing picture data
US20070245389A1 (en) Playback apparatus and method of managing buffer of the playback apparatus
US8411110B2 (en) Interactive image and graphic system and method capable of detecting collision
JP4519658B2 (ja) 再生装置
KR101015412B1 (ko) 비디오 신호를 생성하는 방법 및 전자장치
JP5159846B2 (ja) 再生装置および再生装置の再生方法
JP5060584B2 (ja) 再生装置
JP2005269283A (ja) ディジタル画像の再生方法及び再生装置
JP2005321481A (ja) 情報処理装置およびビデオ信号処理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110706

Termination date: 20160131

EXPY Termination of patent right or utility model