CN1890961A - 控制多个视频信号的重叠 - Google Patents

控制多个视频信号的重叠 Download PDF

Info

Publication number
CN1890961A
CN1890961A CNA2004800359663A CN200480035966A CN1890961A CN 1890961 A CN1890961 A CN 1890961A CN A2004800359663 A CNA2004800359663 A CN A2004800359663A CN 200480035966 A CN200480035966 A CN 200480035966A CN 1890961 A CN1890961 A CN 1890961A
Authority
CN
China
Prior art keywords
component
signal
alpha
pixel
vision signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2004800359663A
Other languages
English (en)
Other versions
CN1890961B (zh
Inventor
边启雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN1890961A publication Critical patent/CN1890961A/zh
Application granted granted Critical
Publication of CN1890961B publication Critical patent/CN1890961B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504—Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42653—Internal components of the client ; Characteristics thereof for processing graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Television Systems (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

在一个实施例中，本发明包括接收图形信号的阿尔法分量，接收主视频信号，和接收次视频信号。阿尔法分量的一部分被提取并应用于所提取的部分以呈现主视频信号上的次视频信号。

Description

控制多个视频信号的重叠
技术领域
本发明涉及电视和视频显示的领域，尤其涉及控制如何将一个视频信号叠加于另一视频信号上。
背景技术
许多当前的电视、个人视频记录器(PVR)、磁带录像机(VTR)、媒体中心和类似装置支持来自许多不同源的视频。这些源可以包括调谐器、记录器、播放器和摄像机。
任何特殊装置中视频源的数量和类型可大大地变化。来自陆基无线电广播、电缆广播、卫星、光纤和广域网的信号都可以提供不同的编程。播放器可提供来自带、盘或存储器的视频，且摄像机在性能上变化很大。所有这些源当前都可用于提供不同格式的视频。这些包括具有不同纵横比的模拟和数字信号、不同调制和编码系统、不同分辨率以及不同支持音频格式、质量水平和频道数量。
为了观看或监控所有视频编程的不同可用源，许多电视、个人视频记录器(PVR)、磁带录像机(VTR)、媒体中心和类似设备可同时在同一屏幕上显示一个或多个视频节目。通常，这被称作画中画(PIP)显示。PIP显示通常通过在主视频源上叠加或重叠的较小窗口中提供次视频源而提供。主视频源填充整个显示区或者至少显示区的全部宽或高。典型的PIP显示器总是在同一位置并以同一形状示出较小的窗口，且用户仅可以选择哪些视频源或频道将显示于主和次位置中。在一些更复杂的电视中，可以同时显示两个以上的视频源。
附图说明
通过以下给出的详细描述并通过本发明各实施例的附图将更完整地理解本发明。但是，附图不应将本发明限制于特定实施例，而是仅仅用于说明和理解。
图1是根据本发明一个实施例的具有图形处理器输入和视频输入的视频混合系统的示图。
图2是根据本发明一个实施例的将RGBA信号应用于图片参数中的图片的过程流程图。
图3是适于实现本发明实施例的媒体中心的框图。
图4是适于与本发明一起使用的娱乐系统的框图。
具体实施方式
在一个实施例中，图形芯片以32位RBGA(红、绿、蓝、阿尔法)像素格式生成在DVO(数字视频输出)端口上发送的图形。在还具有至少两个视频输入的视频混合器和阿尔法调合器(blender)的图形输入处接收该RGBA信号。这两个视频流被组合用于PIP显示，使得一个视频流被按比例缩小并重叠于处于全屏模式的另一个视频流上。RGBA流的8位阿尔法分量中的一个位被用于定义较小视频窗口的重叠区。
在该实施例中，在PIP组合后，8位阿尔法分量的其余7位被用于定义所获得的视频图像如何与RGBA信号的图形图像进一步组合和阿尔法调合。这按RBGA图形流中每个像素的其余7位阿尔法分量所确定的不透明或半透明方式将该图形图像置于视频图像之上。
来自RGBA流的一个位允许重叠视频按任何期望的形状，包括圆形、椭圆形、模板图像等以及在全屏中的任何期望的位置中。用于形状和位置的这些指令利用现有的高数据率通信线从图形芯片发送到视频混合器而不需要任何附加硬件。
参考图1，图形处理器1具有与视频混合器3的DVO端口耦合的DVO端口。视频混合器还具有与视频源5、7耦合的两个或更多端口。图形处理器可以是各种不同图形处理器中的任何一个，包括IntelGMCH(图形和存储器控制集线器)芯片。一种合适的处理器是Intel82835M GMCH处理器。该82835M处理器产生RGBA图形输出信号。该信号具有8位，用于显示器的每个像素的红、绿、蓝和阿尔法分量中的每一个，且根据它显示或呈现图形信号和视频信号。
红、绿和蓝分量定义显示器的每个像素的这三种颜色的亮度水平。阿尔法分量定义如何通过视频混合器将该像素与任何其它信号调合。使用RGBA信号，可以按许多不同的方式将较宽范围的不同种类的图形显示(包括菜单和标题标识)与视频信号调合。
DVO端口是从图形控制器到外部装置的三线接口，外部装置诸如视频混合器3或显示装置。它使用1.8V信令并以高频操作，并能传送1280×1024分辨率的32位图形数据。DVO端口是如何可以将RGBA信号发送到视频混合器的一个示例，然而可以使用其它类型的端口和其它类型的信号。可使用任何类型的视频或模拟通信线，包括DVI(数字视频接口)。RGBA信号和DVO端口的使用不是本发明所必需的。
视频信号可来自于任何种类的两个不同的调谐器或者来自于视频信号的任何其它源。调谐器可用于各种不同的模拟和数字电视信号中的任一种，无论是广播、多点播送或点对点。示例包括NTSC信号、ATSC(高级电视系统委员会)信号、PAL(逐行倒相)信号、各种可能的标准下的电缆电视信号、DBS(直播卫星)信号或任何其它类型的视频信号。调谐器可以是复合视频调谐器。这种调谐器可允许系统从视频记录器、摄像机、外部调谐器或任何其它装置接收视频和音频信号。多种不同的连接器可用于从同轴电缆接收视频信号到RAC分量视频、S-视频、DIN连接器、DVI(数字视频接口)、HDMI(高清晰度多媒体接口)、VGA(视频图形适配器)、IEEE 1394(电气和电子工程师协会)和其它。在许多当前的视频源中，视频输入信号按YCbCr 4∶2∶2数字视频格式并通过ITU-R BT.656(国际电信联盟-无线电通信广播服务(电视)推荐)数字视频接口发送到视频混合器。但是，取代ITU-R BT.656或除此之外，可使用不同类型的格式。
如图1所示，将视频信号应用于视频混合器3内的视频PIP(画中画)混合器9。视频PIP混合器将两个视频信号组合以形成PIP显示。PIP显示可由任意多个数量的视频信号构成，这取决于可用视频信号的数量以及视频混合器的性能。为了形成PIP显示，可将一个视频图像按比例缩小以拟合于另一个视频图像内。该按比例缩小可由次级视频输入和PIP混合器之间的视频混合器内的定标器10执行或者通过未示出的某些其它组件执行。将该PIP显示提供给视频混合器3内的图形和视频混合器11。
PIP混合器和次视频定标器10可由用户控制或者可按缺省设定参数。用户可选择较小的次视频的相对大小以及它在主视频上的位置。用户可禁用PIP混合，仅选择按比例缩小的或全屏的显示，或者选择要组合哪些以及多少视频信号。用户也可选择次按比例缩小视频的大小、形状和位置。
来自于图形处理器的图形信号也在DVO端口上提供给视频混合器3内的图形混合器11，它组合图形信号和PIP显示以生成要在显示器上示出的视频输出信号13。图形图像可具有同与之混合的视频信号相同的帧刷新率或者不同的刷新率，例如更高的刷新率。在一个实施例中，视频混合器包括定标器和扫描速率转换器12。这允许图形处理器1生成具有相同比例和刷新率的图形而不管显示格式。视频混合器随后可用转换并按比例缩放图形信号，以便这两个信号在图形混合器中被调合前在格式和尺寸上匹配输出视频信号。
图形混合器将采用DVO端口上接收到的RGBA信号中所定义的个别像素并将它们与组合的PIP显示图像的像素调合。RGB信号的RGB分量用于定义图形图像的每个像素的外观。A(阿尔法)分量用于定义如何调合这两个图像。和可用每个图形图像帧再定义像素一样，调合也可以这样。
在本实施例中，RGBA信号有8位可用于调合信息。但是，只使用7位。将第八位(最高有效位)从RGBA信号中提取出并馈送给阿尔法映象，它可以实现为内部RAM(随机存取存储器)15。该RAM可以采用各种不同配置中的任一种。在一个实施例中，RAM可具有两个存储器区用以保存阿尔法位的至少两个顺序帧。阿尔法位一起存储用于每个RGBA图像，一个位用于每个图像的每个像素。这些位与像素位置相关联地存储并用作掩码，以便应用于显示的视频帧。但是，代替将该掩码应用于RGBA信号的图像，将该掩码应用于PIP显示的主视频信号。
在一个实施例中，每个像素的位仅指明主视频输入5或次视频输入7是否要被显示于组合的PIP显示图像中。像素对应于次图像的像素，即重叠于主显示图像上的较小的图像。因此，要用于次图像的那些像素定义了次图像的形状。利用其它可配置参数定义次图像的大小和位置。利用用于次图像的每个像素的单个位，可以定义任何期望的形状。
PIP视频混合器可以修剪次视频以拟合所定义的形状。例如，如果次视频具有矩形图像帧且阿尔法RAM的位定义圆形帧，则可以切去次视频图像帧的边角(即，用主视频像素减去)以拟合圆形形状。切去边角可包括在与主视频的边角相对应的像素中显示主视频以取代次视频。或者，可修改次视频的形状或纵横比以适合所定义的形状。
图1的组件可构成机顶盒、记录器、数字媒体适配器的一部分，或者集成入调谐器系统。这种调谐器系统可结合入显示器，诸如电视机或孤立单元。调谐器系统可以是电视机或视频显示器、视频或音频记录器、计算机的外围装置、用于连接到娱乐系统或任何其它装置的分离的调谐器，包括例如图3的所有或部分媒体中心。装置可以是机顶盒或它例如可以被集成入电视机、记录器、数字媒体适配器或计算机。
参考图2，示出了从视频混合器3角度的基本处理流程。框203中，视频混合器接收图形信号的阿尔法分量。框205中，它还接收主视频信号，并在框207中接收次视频信号。在一个实施例中，该阿尔法分量是具有用于每个像素的阿尔法分量的多个像素图像信号的一部分，诸如RGBA信号。它可以由图形处理器1或GMCH芯片生成。多个像素图像信号可具有用于每个像素的一组位，例如32个，且阿尔法分量可以是这组位的子集，例如8个。该位子集可包括至少一个位用以定义次视频信号在主视频信号上的重叠。
框209中，视频混合器提取一部分阿尔法分量。在RGBA信号的示例中其中一个位被用于定义重叠，视频混合器提取那一个位。例如，使用驱动标准清晰度NTSC显示的视频混合器，阿尔法映象可具有640×480位的大小。阿尔法分量的每个位都定义视频1还是视频2被选择用于每个像素位置。因此，在主图像上重叠时次图像的形状和位置可由该阿尔法映象中的位模式定义。当图形流获得扫描转换并被按比例缩放以匹配视频流的帧速率和分辨率时，测试每个像素的MSB(最高有效位)并将设定阿尔法映象中的相应位。从每个像素中提取出的这一个位可用于构建阿尔法映象，它定义了在主图像上重叠时次图像的形状和位置。
PIP混合器的重叠选择器根据阿尔法映象中的相应位确定在每个像素位置显示视频1还是视频2。这样，框211中，PIP混合器生成重叠信号。该重叠信号可提供给将图形添加到信号的图形混合器或者任何其它装置。它也可以被输出而不进一步处理为例如画中画显示。
图3示出了适于使用上述视频混合器3的媒体中心43的框图。图3中，DTV(数字电视)调谐器模块17经过数字解码器19和多路复用器51例如使用I2C接口(内部集成电路，Philips Semiconductors设计的总线类型，以连接集成电路)耦合到视频混合器。模拟调谐器21还经过视频解码器23和多路复用器51耦合到视频混合器。使用各解码器，进出多路复用器的视频信号可被转换为视频混合器的单个共同格式。一个这种格式是上述ITU-R BT.656格式。但是，也可以使用其它格式来代替。或者，可通过视频混合器转换格式。
除了上述功能外，视频混合器也可执行图形控制器的功能。视频混合器可以是专用组件或较大的更一般或多用途控制器的一部分，它在任一情况中都可使用不同处理器或ASIC中的任一种实现。图形控制器的一些示例包括STMicroelectronicsSti70 15/20，ZoranTL8xx，或Generation 9，以及ATiTechnologies XilleonTM处理器线。图形控制器可以是用于较大系统的中央处理器或者耦合到分开的CPU，如图3所示。或者，调谐器可通过I2C或合适的总线耦合到图形处理器1或耦合到CPU61。
调谐器通过多路复用器51耦合。如需要，其它源也可耦合到多路复用器，例如IEEE 1394设备，如图所示，数字视频摄像机25可通过IEEE 1394接口53耦合。一些其它源可包括带式播放器、盘播放器和MP3播放器等。在视频混合器的控制下，多路复用器或者图形处理器或CPU选择该调谐器或其它输入中的哪个将连接到其余媒体中心。
所选定的视频输入耦合到多路复用器输出，它在本示例中路由到视频混合器13。从视频混合器，视频和音频信号可以输出用于显示、存储或记录。在一个实施例中，视频混合器包含MPEG-2和MPEG-3解码器以及视频信号处理器，以便格式化由期望的设备使用的视频和音频信号。
如所示，视频混合器还从图形处理器1接收命令、控制、菜单、消息和其它图像并将它们与来自调谐器的视频和音频组合。
为简便，图3仅输出了一个视频输出和一个音频输出，但是输出的数量和种类可根据特殊应用而大大变化。如果媒体中心用作调谐器，则单个DVI或分量视频输出连同单个数字音频输出(诸如光S/PDIF(Sony/Philips数字接口)输出)就足够。在所示的配置中，媒体中心可用作具有在监视器上的画中画显示的调谐器，或者可用于记录一个频道同时显示另一个。如果媒体中心提供更多功能，则可能需要一种或不同类型的附加音频和视频连接。
实际连接器和用于视频和音频连接的格式可以是许多不同类型和不同的数量。一些连接器格式包括同轴电缆、RCA复合视频、S-视频、分量视频、DIN(Deutsche Industrie Norm)连接器、DVI(数字视频接口)、HDMI(高清晰度多媒体接口)、VGA(视频图形适配器)、USB(通用串行总线)和IEEE(电气和电子工程师协会)1394。还有若干不同的专用连接器，它们可偏向于特殊的应用。连接器的类型可更改以适合特殊应用或者采用不同的连接器。
媒体总线也可以包括大容量存储装置59，诸如硬盘驱动器、易失性存储器、磁带驱动器(例如用于VTR)或光学驱动器。这可用于存储用于图形控制器的指令，以维持EPG(电子程序指导)或者记录从调谐器模块接收的音频或视频。
虽然上述组件足以用于许多消费电子产品、家庭娱乐和家庭影院设备，诸如调谐器(陆基、电缆和卫星机顶盒)、VTR、PVR、数字媒体适配器以及电视机。可以用图3所示的一些附加组件提供进一步的功能。此外，前置放大器和功率放大器、控制面板或显示器(未示出)可按需要耦合到视频混合器。
媒体中心也可包括耦合到图形处理器1的CPU(中央处理单元)61。该处理器也可用作CPU的支持芯片组，如在上述82835M GMCH芯片组的示例中。可使用任何数量的不同CPU和芯片组。在一个实施例中，使用具有Intel82835芯片组的Mobile IntelCeleron处理器，但本发明不限于此。它提供了超过足够的处理功率、连接性和节能模式。主机处理器具有与I/O控制器集线器(ICH)65耦合的北桥，诸如IntelFW82801DB(ICH4)，以及与板上存储器67耦合的南桥，诸如RAM(随机存取存储器)。芯片组还具有一接口以便与图形控制器41耦合。注意：本发明不限于这里所建议的处理器和支持芯片的特殊选择。
ICH 65提供与较宽范围的不同装置的连接性。所建立的协定和协议可用于这些连接。连接可包括LAN(局域网)端口69、USB集线器71和本地BIOS(基本输入/输出系统)闪存73。SIO(超级输入/输出)端口75可提供用于具有按键和显示器的前面板77、键盘79、鼠标81和红外线装置85(诸如IR增强器或遥控传感器)的连接性。I/O端口也可支持软盘、并行端口和串行端口连接。或者，这些装置中的任何一个或多个可从USB、PCI或任何其它类型的总线得到支持。
ICH也可提供IDE(集成设备电子电路)总线，用于与盘驱动器87、89或其它大存储器装置的连接。大容量存储可包括硬盘驱动器和光学驱动器。因此，例如软件程序、用户数据、EPG数据和记录的娱乐节目可存储于硬盘驱动器或其它驱动器上。此外，CD(光盘)、DVD(数字通用盘)和其它存储媒体可以在与IDE总线耦合的驱动器上播放。
PCI(外围组件互连)总线91耦合到ICH并允许较宽范围的装置和端口耦合到ICH。图3中的示例包括WAN(广域网)端口93、无线端口95、数据卡连接器97和视频适配器卡99。有许多其它装置可用于连接到PCI端口以及许多其它可能的功能。PCI装置可允许连接到本地设备，诸如摄像机、存储卡、电话机、PDA(个人数字助理)或相邻计算机。它们也可允许连接到各种外围设备，诸如打印机、扫描仪、记录器、显示器等。它们也可允许与更多远程设备或许多不同接口中的任一个的有线或无线连接。远程设备可允许编程或EPG数据的通信，用于维护或遥控或者用于游戏、因特网冲浪或其它性能。
最后，ICH被示出具有AC-链接(音频编解码器链接)101，即支持具有音频和调制解调器的独立功能的编解码器的数字链接。在音频部分，支持麦克风输入和左右音频声道。在图3的示例中，AC-链接支持用于与PSTN链接的调制解调器103，以及与图形控制器41的音频链接。AC-链接将CPU、主机控制器或ICH生成的任何音频传送到用于与音频输出57的集成的视频混合器。或者，ISA(工业标准结构)总线、PCI总线或任何其它类型的链接可用于该用途。如通过图3可见，有许多不同方法来支持调谐器所产生的信号以及控制调谐器的操作。图3的架构允许较宽范围的不同功能和性能。特殊设计取决于特殊的应用。
图4示出了适合于与图3的媒体中心一起使用的娱乐系统111的框图。图4示出了具有较宽范围的安装设备的娱乐系统。该设备被示作许多可能性的示例。本发明可用于更简单或更复杂的系统中。图3所述的媒体中心能支持通过WAN和LAN连接、蓝牙、IEEE 802.11 USB、1394、IDE、PCI和红外线的通信。此外，调谐器模块接收来自天线、组件和复合音频和视频以及IEEE 1394装置的输入。这提供了可与媒体中心连接和运行的装置的极大灵活性和多样性。随着新接口的开发且根据媒体中心的特殊应用，可添加其它接口或者用它们替代所述的那些。也可去除许多连接以降低成本。图4所示的特定装置表示适于消费家庭娱乐系统的一配置示例。
媒体中心43具有如上所述的若干不同可能的输入。在图4的示例中，这些包括电视电缆117、广播天线119、卫星接收器121、视频播放器123(诸如磁带或磁盘播放器)、音频播放器125(诸如磁带、磁盘或存储器播放器)以及例如通过IEEE1394连接的数字装置127。
在进行处理、选择和控制后，这些输入可用于生成用于用户的输出。输出可以呈现于监视器129或投影仪131或者任何其它类型的可见视频显示器上。音频部分可路由经过放大器133，诸如A/V接收器或声音处理引擎，到达耳机135、扬声器137或任何其它类型的发声装置。输出也可被发送到外部记录器139，诸如VTR、PVR、CD或DVD记录器、存储卡等等。
媒体中心还提供例如通过电话端口141和网络端口143的与外部装置的连接。例如通过键盘145或遥控147提供用户接口，且媒体中心可通过其自己的红外线端口149与其它装置通信。可拆卸存储装置153可允许MP3压缩音频在便携式装置上存储并稍后播放或者允许摄像机图片显示于监视器129上。
有使用图3的媒体中心的许多不同的用于娱乐中心的设备配置以及要连接设备的许多不同的可能选择。使用当前典型的可用设备，典型的家庭娱乐系统可如下。作为输入，该典型的家庭娱乐系统可具有输入到媒体中心的调谐器模块的电视天线119和电缆电视117或DBS121。VTR或DVD记录器可连接作为输入装置123和输出装置139。可添加CD播放器125和MP3播放器127用于音乐。这种系统还可包括宽屏高清晰度电视129，以及与六个或八个扬声器137耦合的环绕声音接收器133。该相同的用户系统将具有用户的小型遥控器147并提供从媒体中心到电视机、接收器、VTR和CD播放器的遥控。因特网连接141和键盘145将允许web冲浪、更新和信息下载，同时计算机网络将允许文件交换和与家中的个人计算机的远程控制。
可以理解，对于某些实现，比上述示例更少或更多的装备视频混合器、娱乐系统和媒体中心可能是优选的。因此，基于许多因素，诸如价格约束、性能要求、技术改进或其它情况，娱乐系统、媒体中心和组件的配置会随实现而改变。本发明的实施例也可应用于其它类型的软件驱动的系统，它们使用与图1、2、3和4所示的架构不同的硬件架构。
在以上描述中，为了进行说明，阐述了许多特殊细节以提供本发明的透彻理解。但本领域的熟练技术人员可以理解，可以在没有这些特殊细节中的一些的情况下实施本发明。在其它情况下，公知的结构和装置按框图形式示出。
本发明可包括各种步骤。本发明的步骤可通过硬件组件执行，诸如图1、3和4所示的那些，或者可以体现于机器可执行指令中，这些指令能用于使得用这些指令编程的通用或专用处理器或逻辑电路执行所述步骤。或者，这些步骤可由硬件和软件的组合来执行。
本发明可提供作为计算机程序产品，它可以包括其上存储了指令的机器可读介质，这些指令可用于编程媒体中心(或其它电子装置)以执行根据本发明的过程。机器可读介质可包括，但不限于，软盘、光盘、CD-ROM和磁光盘、ROM、RAM、EPROM、EEPROM、磁或光卡、闪存或适于存储电子指令的其它类型的媒体/机器可读介质。此外，本发明也可作为计算机程序产品下载，其中该程序可借助载波或其它传播介质中包含的数据信号经由通信链路(例如，调制解调器或网络连接)从远程计算机传送到请求计算机。
许多方法和装置是按其最基本形式描述的，可以从任何方法中添加或删除步骤并可以从任何所述装置中添加或减去组件而不背离本发明的基本范围。本领域的熟练技术人员显见的是，可以进行许多进一步的修改和适应。特殊实施例不被提供用于限制本发明而是说明之。本发明的范围不受以上提供的特殊示例确定而仅由以下的权利要求书限定。

Claims (27)

1.一种方法，包括：
接收图形信号的阿尔法分量；
接收主视频信号；
接收次视频信号；
提取所述阿尔法分量的一部分；
应用所提取的部分以将次视频信号呈现在主视频信号上。
2.如权利要求1所述的方法，其特征在于，接收一阿尔法分量包括接收具有每个像素的阿尔法分量的多个像素图像信号。
3.如权利要求1所述的方法，其特征在于，所述多个像素图像信号包括每个像素的一组位，且其中所述阿尔法分量包括这组位的子集。
4.如权利要求1所述的方法，其特征在于，所述位的子集包括至少一个位用以定义次视频信号在主视频信号上的重叠。
5.如权利要求1所述的方法，其特征在于，提取阿尔法分量的一部分包括读取多位阿尔法分量的一个位以构建一像素掩码，其中应用所提取的部分包括使用像素映象以定义所述主图像上的次图像的形状和位置。
6.如权利要求1所述的方法，其特征在于，应用所提取的部分包括生成一像素掩码以定义所述主图像上的次图像的形状和位置。
7.一种其上存储有表示指令的数据的机器可读介质，所述指令在由机器执行时使得所述机器执行操作，包括：
接收图形信号的阿尔法分量；
接收主视频信号；
接收次视频信号；
提取阿尔法分量的一部分；
应用所提取的部分以将所述次视频信号呈现在所述主视频信号上。
8.如权利要求7所述的介质，其特征在于，接收阿尔法分量包括接收具有每个像素的阿尔法分量的多个像素图像信号。
9.如权利要求7所述的介质，其特征在于，所述多个像素图像信号包括每个像素的一组位，且其中所述阿尔法分量包括这组位的一个子集。
10.如权利要求7所述的介质，其特征在于，提取阿尔法分量的一部分包括读取多位阿尔法分量的一个位以构建一像素掩码，其中应用所提取的部分包括使用像素映象以定义所述主图像上的次图像的形状和位置。
11.一种装置，包括：
用于接收图形信号的图形端口，所述图形信号包括阿尔法分量；
用于接收第一视频信号的第一视频端口；
用于接收第二视频信号的第二视频端口；
存储器；以及
视频混合器，用于从所述图形信号中提取一部分阿尔法分量以便将所提取的部分存入所述存储器中并应用所提取的部分以将次视频信号呈现在所述主视频信号上。
12.如权利要求11所述的装置，其特征在于，所述图形端口包括到图形处理器的总线。
13.如权利要求11所述的装置，其特征在于，所述图形端口包括互连总线。
14.如权利要求11所述的装置，其特征在于，所述图形端口包括RGBA端口。
15.如权利要求11所述的装置，其特征在于，所述阿尔法分量包括用于定义所述图形信号的调合的第一部分以及用于定义所述第二视频信号上所述第一视频信号的重叠的第二部分。
16.如权利要求11所述的装置，其特征在于，所述图形处理器将一掩码存入所述存储器以应用于第一视频信号，以定义所述第一视频信号在所述第二视频信号上的重叠。
17.一种数字机顶盒，包括：
用于生成图形信号的图形处理器，所述图形信号包括阿尔法分量；
用于接收第一视频信号的第一视频端口；
用于接收第二视频信号的第二视频端口；
存储器；以及
视频混合器，用于从所述图形信号中提取一部分阿尔法分量，以将所提取的部分存入所述存储器并应用所提取的部分以将次视频信号呈现在所述主视频信号上。
18.如权利要求17所述的机顶盒，其特征在于，所述图形端口包括到图形处理器的总线。
19.如权利要求17所述的机顶盒，其特征在于，所述图形端口包括互连总线。
20.如权利要求17所述的机顶盒，其特征在于，所述图形端口包括RGBA端口。
21.如权利要求17所述的机顶盒，其特征在于，所述阿尔法分量包括用于定义所述图形信号的调合的第一部分以及用于定义所述第二视频信号上所述第一视频信号的重叠的第二部分。
22.如权利要求17所述的机顶盒，其特征在于，所述图形处理器将一掩码存入所述存储器以应用于第一视频信号上，以定义所述第一视频信号在所述第二视频信号上的重叠。
23.一种计算机生成的位流，包括：
多个图形分量，每一个都定义图像的一个像素；
多个调合分量，每一个都与图形部分相关联并定义所述图形与另一图形的调合；
多个重叠分量，每一个都与调合分量相关联并定义一个外部图像在另一外部图像上的重叠。
24.如权利要求23所述的位流，其特征在于，所述图像分量包括红、蓝和绿分量。
25.如权利要求23所述的位流，其特征在于，每个重叠分量都定义用于其相关联像素的重叠。
26.如权利要求23所述的位流，其特征在于，组合所述外部图像和另一外部图像以创建一组合的图像且将由所述图形分量定义的图像与所述组合图像调合以创建一复合图像，且其中每个重叠分量定义所述复合图像的其相关联像素的重叠。
27.如权利要求23所述的位流，其特征在于，除了将输出流的A分量的一部分用作重叠分量外，所述图形分量和调合分量是基于RGBA输出流的。
CN2004800359663A 2003-12-22 2004-12-10 用于控制多个视频信号的重叠的方法和装置 Expired - Fee Related CN1890961B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US10/744,224 2003-12-22
US10/744,224 US7486337B2 (en) 2003-12-22 2003-12-22 Controlling the overlay of multiple video signals
PCT/US2004/041802 WO2005067285A2 (en) 2003-12-22 2004-12-10 Controlling the overlay of multiple video signals

Publications (2)

Publication Number Publication Date
CN1890961A true CN1890961A (zh) 2007-01-03
CN1890961B CN1890961B (zh) 2011-01-12

Family

ID=34678789

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2004800359663A Expired - Fee Related CN1890961B (zh) 2003-12-22 2004-12-10 用于控制多个视频信号的重叠的方法和装置

Country Status (8)

Country Link
US (1) US7486337B2 (zh)
JP (1) JP4443571B2 (zh)
KR (1) KR100824463B1 (zh)
CN (1) CN1890961B (zh)
DE (1) DE112004002520T5 (zh)
GB (1) GB2423210B (zh)
TW (1) TWI264946B (zh)
WO (1) WO2005067285A2 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102263906A (zh) * 2011-07-26 2011-11-30 北京数码视讯科技股份有限公司 视频图像的处理方法及装置
CN103155582A (zh) * 2011-08-11 2013-06-12 松下电器产业株式会社 广播通信协作系统、数据生成装置及接收装置
CN103238178A (zh) * 2010-11-15 2013-08-07 思科技术公司 用于在视频环境中提供增强的图形的系统和方法
CN103873915A (zh) * 2012-12-18 2014-06-18 辉达公司 用于连接片上系统处理器和外部处理器的系统和方法
CN101971617B (zh) * 2007-12-20 2015-12-02 Ati技术无限责任公司 具有视频来源装置与视频接收装置的系统中的调整视频处理

Families Citing this family (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7768533B2 (en) * 1998-05-27 2010-08-03 Advanced Testing Technologies, Inc. Video generator with NTSC/PAL conversion capability
US7486337B2 (en) * 2003-12-22 2009-02-03 Intel Corporation Controlling the overlay of multiple video signals
KR20050077185A (ko) * 2004-01-27 2005-08-01 엘지전자 주식회사 다양한 화면구현이 가능한 ｄｔｖ에서의 디스플레이화면의 출력제어방법
KR101049129B1 (ko) * 2004-07-30 2011-07-15 엘지전자 주식회사 케이블 방송 수신기 및 그의 상태 정보 처리 방법
KR101092438B1 (ko) * 2004-08-05 2011-12-13 엘지전자 주식회사 케이블 방송 수신기 및 그의 진단 방법
KR100609916B1 (ko) * 2004-11-25 2006-08-08 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR100747530B1 (ko) * 2004-12-13 2007-08-08 엘지전자 주식회사 Ｐｖｒ 시스템 및 그 방송 재생 방법
TWI273533B (en) * 2004-12-15 2007-02-11 Benq Corp Projector and image generating method thereof
US20060198540A1 (en) * 2005-02-04 2006-09-07 Jonson Paul E Apparatus for mixing, controlling and distributing audio signals
US20060288370A1 (en) * 2005-05-10 2006-12-21 Rothschild Leigh M System and method for controlling a plurality of electronic devices
US7477264B2 (en) * 2005-08-12 2009-01-13 Microsoft Corporation Compositing external images into a multimedia rendering pipeline
US8189908B2 (en) * 2005-09-02 2012-05-29 Adobe Systems, Inc. System and method for compressing video data and alpha channel data using a single stream
US8014615B2 (en) * 2005-09-02 2011-09-06 Adobe Systems Incorporated System and method for decompressing video data and alpha channel data using a single stream
TWI321752B (en) * 2005-10-06 2010-03-11 Quanta Comp Inc Audio/video playing system
JP2007156525A (ja) * 2005-11-30 2007-06-21 Matsushita Electric Ind Co Ltd 描画処理装置及び画像処理方法
US20070143801A1 (en) * 2005-12-20 2007-06-21 Madonna Robert P System and method for a programmable multimedia controller
US8659704B2 (en) 2005-12-20 2014-02-25 Savant Systems, Llc Apparatus and method for mixing graphics with video images
US20070162944A1 (en) 2006-01-09 2007-07-12 Broadcom Corporation Method and apparatus for generating video for a viewing system from multiple video elements
US20070168866A1 (en) * 2006-01-13 2007-07-19 Broadcom Corporation Method and system for constructing composite video from multiple video elements
JP2007228167A (ja) * 2006-02-22 2007-09-06 Funai Electric Co Ltd パネル型映像表示装置および液晶テレビジョン
JP4625781B2 (ja) 2006-03-22 2011-02-02 株式会社東芝 再生装置
US9195428B2 (en) * 2006-04-05 2015-11-24 Nvidia Corporation Method and system for displaying data from auxiliary display subsystem of a notebook on a main display of the notebook
US20070242160A1 (en) * 2006-04-18 2007-10-18 Marvell International Ltd. Shared memory multi video channel display apparatus and methods
KR101366912B1 (ko) 2006-05-16 2014-02-24 소니 주식회사 통신 시스템, 송신 장치 및 수신 장치, 통신 방법, 및프로그램
JP2007334071A (ja) * 2006-06-16 2007-12-27 Sony Corp 映像信号処理装置および表示装置
TWI359614B (en) * 2006-06-20 2012-03-01 Via Tech Inc Pip processing apparatus and processing method the
KR101282973B1 (ko) * 2007-01-09 2013-07-08 삼성전자주식회사 오버레이 이미지를 디스플레이 하는 장치 및 방법
US20090097817A1 (en) * 2007-05-10 2009-04-16 Bang & Olufsen A/S Multiple-input video-image merging system
KR100854932B1 (ko) * 2007-08-06 2008-08-29 (주)씨앤에스 테크놀로지 영상 변환 기능을 가지는 영상 합성 장치
WO2009032279A1 (en) * 2007-09-05 2009-03-12 Savant Systems Llc. Multimedia control and distribution architechture
US8115726B2 (en) * 2007-10-26 2012-02-14 Hewlett-Packard Development Company, L.P. Liquid crystal display image presentation
US9124847B2 (en) * 2008-04-10 2015-09-01 Imagine Communications Corp. Video multiviewer system for generating video data based upon multiple video inputs with added graphic content and related methods
US20090284659A1 (en) * 2008-05-13 2009-11-19 Tatung Company Of America, Inc. Monitor with multiple video inputs and one video output
US8570441B2 (en) 2008-06-11 2013-10-29 Microsoft Corporation One pass video processing and composition for high-definition video
US8520979B2 (en) * 2008-08-19 2013-08-27 Digimarc Corporation Methods and systems for content processing
US20100245667A1 (en) * 2009-03-24 2010-09-30 Sony Corporation Non-standalone tv pc
KR101677527B1 (ko) * 2009-09-22 2016-11-21 삼성전자주식회사 복수의 입력소스들로부터의 비디오 신호들을 디스플레이하기 위한 방법 및 장치
US8085279B2 (en) * 2009-10-30 2011-12-27 Synopsys, Inc. Drawing an image with transparent regions on top of another image without using an alpha channel
US8325757B2 (en) * 2009-12-17 2012-12-04 Silicon Image, Inc. De-encapsulation of data streams into multiple links
US8698958B2 (en) * 2010-06-16 2014-04-15 Silicon Image, Inc. Mechanism for memory reduction in picture-in-picture video generation
US8331767B2 (en) * 2010-08-20 2012-12-11 Avid Technology, Inc. Media composition system with remote connection
KR20130030371A (ko) * 2011-09-19 2013-03-27 도시바삼성스토리지테크놀러지코리아 주식회사 멀티미디어 장치 및 멀티미디어 장치의 제어 방법
TWI493501B (zh) * 2012-10-26 2015-07-21 Mstar Semiconductor Inc 圖像檔處理方法以及圖像檔處理裝置
EP2733926A1 (en) * 2012-11-16 2014-05-21 PIXarithmic GmbH Method of operating a video processing apparatus
US9697630B2 (en) * 2014-10-01 2017-07-04 Sony Corporation Sign language window using picture-in-picture
US10204433B2 (en) 2014-10-01 2019-02-12 Sony Corporation Selective enablement of sign language display
US10097785B2 (en) * 2014-10-01 2018-10-09 Sony Corporation Selective sign language location
JP2016099456A (ja) * 2014-11-20 2016-05-30 株式会社リコー 画像投影装置および画像投影方法
JPWO2017038482A1 (ja) 2015-09-01 2018-06-21 ソニー株式会社 受信装置、送信装置、及び、データ処理方法
US10080051B1 (en) * 2017-10-25 2018-09-18 TCL Research America Inc. Method and system for immersive information presentation
US12058310B2 (en) 2021-02-26 2024-08-06 Lemon Inc. Methods of coding images/videos with alpha channels
US20220279185A1 (en) * 2021-02-26 2022-09-01 Lemon Inc. Methods of coding images/videos with alpha channels

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5123085A (en) * 1990-03-19 1992-06-16 Sun Microsystems, Inc. Method and apparatus for rendering anti-aliased polygons
US5351067A (en) * 1991-07-22 1994-09-27 International Business Machines Corporation Multi-source image real time mixing and anti-aliasing
GB9200281D0 (en) * 1992-01-08 1992-02-26 Thomson Consumer Electronics A pip horizontal panning circuit for wide screen television
WO1994006111A1 (en) 1992-09-08 1994-03-17 Analog Devices, Incorporated Crt display apparatus with improved techniques for blending video signals with computer-generated graphic signals
US6147695A (en) * 1996-03-22 2000-11-14 Silicon Graphics, Inc. System and method for combining multiple video streams
US6052648A (en) * 1996-04-12 2000-04-18 Earthwatch Communications, Inc. Method and system for display of weather-related information
JPH10108143A (ja) * 1996-09-27 1998-04-24 Sony Corp 画像表示制御装置および方法
US5926647A (en) * 1996-10-11 1999-07-20 Divicom Inc. Processing system with dynamic alteration of a color look-up table
US5953691A (en) * 1996-10-11 1999-09-14 Divicom, Inc. Processing system with graphics data prescaling
US5923385A (en) * 1996-10-11 1999-07-13 C-Cube Microsystems Inc. Processing system with single-buffered display capture
US6046778A (en) * 1997-10-29 2000-04-04 Matsushita Electric Industrial Co., Ltd. Apparatus for generating sub-picture units for subtitles and storage medium storing sub-picture unit generation program
US6853385B1 (en) * 1999-11-09 2005-02-08 Broadcom Corporation Video, audio and graphics decode, composite and display system
WO2000028518A2 (en) * 1998-11-09 2000-05-18 Broadcom Corporation Graphics display system
US6573905B1 (en) * 1999-11-09 2003-06-03 Broadcom Corporation Video and graphics system with parallel processing of graphics windows
US6636222B1 (en) * 1999-11-09 2003-10-21 Broadcom Corporation Video and graphics system with an MPEG video decoder for concurrent multi-row decoding
US6327000B1 (en) * 1999-04-02 2001-12-04 Teralogic, Inc. Efficient image scaling for scan rate conversion
US6748107B1 (en) * 1999-08-05 2004-06-08 Microsoft Corporation Implementation and uses of XsRGB
US6919897B1 (en) * 1999-08-06 2005-07-19 Microsoft Corporation System and method for pre-processing a video signal
US6486888B1 (en) * 1999-08-24 2002-11-26 Microsoft Corporation Alpha regions
US6545724B1 (en) * 1999-10-29 2003-04-08 Intel Corporation Blending text and graphics for display on televisions
EP1258138A2 (en) * 1999-12-09 2002-11-20 Liberate Technologies Enhanced display of world wide web pages on television
ATE262253T1 (de) * 1999-12-14 2004-04-15 Broadcom Corp Verfahren und system zur dekodierung von videosequenzen und grafiken
US6603482B1 (en) * 2000-01-31 2003-08-05 Evans & Sutherland Computer Corporation Screen space effects utilizing the alpha channel and the alpha buffer
US6646686B1 (en) * 2000-09-21 2003-11-11 Intel Corporation Managing alpha values for video mixing operations
US6903753B1 (en) * 2000-10-31 2005-06-07 Microsoft Corporation Compositing images from multiple sources
US7206029B2 (en) * 2000-12-15 2007-04-17 Koninklijke Philips Electronics N.V. Picture-in-picture repositioning and/or resizing based on video content analysis
JP2003091737A (ja) * 2001-07-13 2003-03-28 Sony Computer Entertainment Inc 描画処理装置、描画処理プログラムを記録した記録媒体、描画処理プログラム、描画処理方法
US20040012600A1 (en) * 2002-03-22 2004-01-22 Deering Michael F. Scalable high performance 3d graphics
US6771274B2 (en) * 2002-03-27 2004-08-03 Sony Corporation Graphics and video integration with alpha and video blending
JP4011949B2 (ja) * 2002-04-01 2007-11-21 キヤノン株式会社 マルチ画面合成装置及びデジタルテレビ受信装置
GB2390949A (en) * 2002-07-17 2004-01-21 Sony Uk Ltd Anti-aliasing of a foreground image to be combined with a background image
AU2002952382A0 (en) * 2002-10-30 2002-11-14 Canon Kabushiki Kaisha Method of Background Colour Removal for Porter and Duff Compositing
US7486337B2 (en) * 2003-12-22 2009-02-03 Intel Corporation Controlling the overlay of multiple video signals

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101971617B (zh) * 2007-12-20 2015-12-02 Ati技术无限责任公司 具有视频来源装置与视频接收装置的系统中的调整视频处理
CN103238178A (zh) * 2010-11-15 2013-08-07 思科技术公司 用于在视频环境中提供增强的图形的系统和方法
CN103238178B (zh) * 2010-11-15 2016-01-13 思科技术公司 用于在视频环境中提供增强的图形的系统和方法
CN102263906A (zh) * 2011-07-26 2011-11-30 北京数码视讯科技股份有限公司 视频图像的处理方法及装置
CN103155582A (zh) * 2011-08-11 2013-06-12 松下电器产业株式会社 广播通信协作系统、数据生成装置及接收装置
CN103873915A (zh) * 2012-12-18 2014-06-18 辉达公司 用于连接片上系统处理器和外部处理器的系统和方法

Also Published As

Publication number Publication date
CN1890961B (zh) 2011-01-12
KR20060103457A (ko) 2006-09-29
GB2423210A (en) 2006-08-16
JP2007514390A (ja) 2007-05-31
WO2005067285A2 (en) 2005-07-21
GB2423210B (en) 2009-11-11
US20050134739A1 (en) 2005-06-23
GB0608715D0 (en) 2006-06-14
DE112004002520T5 (de) 2006-10-05
US7486337B2 (en) 2009-02-03
KR100824463B1 (ko) 2008-04-22
JP4443571B2 (ja) 2010-03-31
WO2005067285A3 (en) 2006-01-26
TW200526038A (en) 2005-08-01
TWI264946B (en) 2006-10-21

Similar Documents

Publication Publication Date Title
CN1890961B (zh) 用于控制多个视频信号的重叠的方法和装置
CN101910999B (zh) 用以产生及实现移动式高清晰多媒体接口的方法、装置及系统
CN1094694C (zh) 附有文字信息显示功能的电视接收机
US7839896B2 (en) Video transmission system
CN1649397A (zh) 映像信号处理装置和映像信号处理方法
US7535478B2 (en) Method and apparatus to communicate graphics overlay information to display modules
CN1168754A (zh) 电视图形和字幕的卸载
CN1812524A (zh) 使用集中式信号处理的集成多媒体信号处理系统
US8869214B2 (en) Device control apparatus, device control method and computer program
US20060244752A1 (en) Signal conveying apparatus and display system having same
CN1883193A (zh) 用于家庭娱乐的可互换媒体输入盒
CN1791198A (zh) 一种实现可同时接收播放多套节目的电视机装置
US7626638B2 (en) Apparatus and method for processing video signal
CN1312895C (zh) 使用设备专用控制器的调谐器模块
CN1909635A (zh) 信号源与播放设备的接口方法和接口设备
CN1317199A (zh) 可借助录像机录制电视机上显示的电视节目的机顶盒
CN2669525Y (zh) 模拟和数字信号兼容接收的电视机电路
CN1518347A (zh) 智能等离子显示一体机及其实现智能化的方法
KR200281929Y1 (ko) 튜너를 내장한 피디피 티브
CN201118768Y (zh) 数字电视接收机
KR20070000866A (ko) 다중 오디오 및 비디오 신호의 입/출력 처리장치.
CN1567979A (zh) 电视接收器
JP2000188742A (ja) 画像通信装置
JPH10133626A (ja) Ｐｄｐ表示装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110112

Termination date: 20131210