CN102783159B - 视差数据传输和信号发送 - Google Patents

视差数据传输和信号发送 Download PDF

Info

Publication number
CN102783159B
CN102783159B CN201180012449.4A CN201180012449A CN102783159B CN 102783159 B CN102783159 B CN 102783159B CN 201180012449 A CN201180012449 A CN 201180012449A CN 102783159 B CN102783159 B CN 102783159B
Authority
CN
China
Prior art keywords
parallax
caption
data
closed
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201180012449.4A
Other languages
English (en)
Other versions
CN102783159A (zh
Inventor
M·K·厄伊尔
塚越郁夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102783159A publication Critical patent/CN102783159A/zh
Application granted granted Critical
Publication of CN102783159B publication Critical patent/CN102783159B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

一种用于解码闭合字幕视差数据的方法，涉及：TV接收机接收针对3D显示的被编码为一个或多个帧间隔/斜率变化对的序列的闭合字幕视差数据，其中，表示其上要应用表示视差的每个线性函数的帧的指定数量的帧间隔与指示相对于前一段的斜率的斜率变化的值成对。视差数据的序列中的第一段将预定斜率假设为用于随后的斜率变化的基准。字幕数据包的序列指定包含闭合字幕文本的闭合字幕显示窗口。在每一帧中使用视差数据，以确定闭合字幕显示的左眼视图和右眼视图的水平偏移，该水平偏移确立闭合字幕显示窗口的感知到的z轴位置。该摘要不应该被认为是限制性的，因为可以从在该摘要中描述的特征推导出其它实施例。

Description

视差数据传输和信号发送
相关文献的交叉引用
本申请要求以下申请的优先权利益：Mark Eyer等人的2010年11月22日提交的名为“Service Linkage to Caption Disparity DataTransport”的美国临时专利申请号61/415,924；Mark Eyer等人的2010年11月19日提交的名为“Disparity Data Signaling and Transportfor 3D Captioning”的美国临时专利申请号61/415,457；Mark Eyer等人的2010年5月20日提交的名为“Disparity Data Transport”的美国临时专利申请号61/346,652；Mark Eyer等人的2010年3月12日提交的美国临时专利申请号61/313,612；Mark Eyer等人的2010年3月23日提交的名为“Extended Command Stream for CEA-708Captions”的美国专利申请号61/316,733；Mark Eyer等人的2010年8月31日提交的名为“Efficient Transport of Frame-by-Frame Changein Captioning Disparity Data”的美国临时专利申请号61/378,792；据此，通过引用将上述专利申请中的每一个的全部内容并入在此。
版权通知
本专利文件的部分公开包含受版权保护的主题的素材。当本专利文件或本专利公开的拓制出现在专利商标事务所的专利文档或记录中时，该版权拥有者对其没有异议，但是在其它情况下该版权拥有者对其保留全部版权权利。
背景技术
闭合字幕用于电视节目播放中，为电视观众提供可视文本（通常是，语音和声音的抄本）。闭合字幕（CC）对听力有障碍的人尤其有帮助。使用由各种技术标准定义的技术在电视节目播放中提供CC数据，这些技术标准包括定义于技术标准CEA-608和CEA-708中的各种版本和实现方式。
遗憾的是，随着三维（3D）立体电视的出现，传统的技术不能够提供用于观众在3DTV环境中观看字幕的优化机制，因为字幕相对于其它视频对象通常出现在不便的Z轴位置（深度）中，而这些其它视频对象可能会出现在字幕前方或者后方。
附图说明
通过结合附图参考以下详细描述，可以更佳地理解阐述操作方法和组织的说明性的实施例及其目的和优点。在附图中：
图1是说明根据本发明某些实施例的字幕视差数据的传输的示图。
图2是根据本发明某些实施例的示例编码器。
图3是根据本发明某些实施例的示例解码器。
图4是根据本发明某些实施例的示例电视接收机装置。
图5是描述根据本发明某些实施例的处理器的各种操作的示例框图。
图6是描述根据本发明某些实施例的表示被编写的视差数据的示例曲线的曲线图。
图7是描述根据本发明某些实施例的视差曲线的分段线性近似的例子的曲线图。
图8是根据本发明某些实施例的被编写的视差数据的分段线性近似的例子。
图9是根据本发明某些实施例的方法的示例性实现方式的流程图。
图10是根据本发明某些实施例的更加详细的示例性实现方式的流程图。
具体实施例
本发明容许有许多不同形式的实施例，在附图以及详细的具体实施例中示出并描述了本发明，应该理解，这些实施例的公开应该被认为是原理的示例，而并非意图将本发明限制为在此示出和描述的具体实施例。在以下的描述中，贯穿附图，类似的附图标记被用来描述相同的、类似的或对应的部件。
如在本文中所使用的，术语“一个”或“一种”被定义为一个或多于一个。如在本文中所使用的，术语“多个”被定义为两个或多于两个。如在本文中所使用的，术语“另一个”被定义为至少第二个或更多。如在本文中所使用的，术语“包括”和/或“具有”被定义为含有（即，开放式语言）。如在本文中所使用的，术语“耦合”被定义为“连接”，虽然不一定是直接地，也不一定是机械地。如在本文中所使用的，术语“程序”或“计算机程序”或类似的术语被定义为是设计成在计算机系统上运行的指令序列。“程序”或“计算机程序”可以包括子程序、函数、程序模块、脚本、过程、对象方法、对象实现、在可执行应用程序中、小应用程序、小服务程序、源代码、对象代码、共享库/动态加载库、和/或设计成在计算机系统上运行的其它指令序列。
如在本文中所使用的，术语“节目”也可以被用于第二上下文中（上述定义是用于第一上下文中）。在第二上下文中，从“电视节目”的意义上来使用该术语。在该上下文中，该术语被用来表示音频视频内容的任何相干序列，例如，那些可以被诠释为单个电视节目并且在电子节目指南（EPG）中被报告为单个电视节目的音频视频内容的相干序列，而无需考虑该内容是电影、体育事件、多部分的电视节目系列的片断、还是新闻广播等。该术语还可以被诠释为包含在电子节目指南中不被报告为节目的商业插播广告和类似节目的内容。
贯穿全文，当提及“一个实施例”、“某些实施例”、“实施例”、“实现方式”、“示例”或类似术语时，意味着结合实施例描述的特定特征、结构或特性包括在本发明的至少一个实施例中。因此，这类短语的出现或者贯穿本说明书在不同位置中的出现并不一定涉及相同的实施例。此外，在一个或者多个实施例中，这些特定特征、结构或特性可以按照任何合适的方式进行组合，而不受限制。
如在本文中所使用的，术语“或”应该被诠释为是包含性的或者是指任何一个或任何组合。因此，“A、B或C”是指“如下情况中的任何一种，即：A;B;C;A和B；A和C；B和C；A，B和C”。只有当元件、功能、步骤或动作的组合在某种意义上固有地相互排斥时，才会出现上述定义的例外。
根据本发明实施例的实现方式通常涉及用于在3D视频上呈现闭合字幕的数据的传输和格式。
当在3D视频节目的显示中呈现闭合字幕时，如上所述，CC窗口及其相关联的文本很可能被呈现在屏幕的平面中，除非采取措施来呈现该窗口和文本使得它们出现在不同的更加合适的感知深度处。3D内容中的场景中的对象可以被表现为使得其对于观众看上去在显示屏幕的平面的前方一定的距离。如果深度上定位在显示的平面处的字幕窗口要被放置该对象的前方时，将出现“深度冲突”。在这种情况下，观众面临相冲突的深度提示，即，引起视觉疲劳和不舒适感的情况。如果字幕直接定位在屏幕平面上，该字幕在z轴上可能会与场景中的内容交叉，因此优选地将字幕的介绍单独地编写成视频演示的主题。为了完成这个，可以连同字幕一起发送额外的信息，来定义用于有效演示的包含字幕文本的窗口在z轴上的感知放置（在屏幕平面的前方或后方的指定距离）并且避免与场景中的对象的干扰。可以想出许多方法来提供这种信息，但是这些方法中很多存在缺点。
3D立体电视涉及将分别用于左眼和右眼的单独视图递送给显示屏幕，外加允许观众的每一只眼睛只能看到针对该只眼睛的图像的方法。当针对给定对象左眼视图和右眼视图在该对象的放置的水平位置中不同时，实现了深度的错觉。关于三维显示系统的基本技术的概述在Dr.Nick Holliman,Department of Computer Science,University ofDurham,Science Laboratories,South Road,Durham DH13LE,UK的“3D Display Systems”中（尤其，参见10-11页以及附图5）有所描述，该文献的全部内容通过引用并入在此。
如在本文中所使用的，术语“视差”可以更正式地指代“屏幕视差”（即，在屏幕上测量的）以区别于“视网膜视差”，并且被定义为是显示在屏幕上的一对对准的立体图像中的右图像和左图像中的对应点的物理x坐标的差异。在本文中，出于简洁的目的，将使用较不正式的术语“视差”。按照惯例，当视差是负的时候（例如，当左眼图像在屏幕上被呈现在右眼图像的右侧时），对象被感知为在屏幕平面的前方。当视差是正的时候（例如，当左眼图像在屏幕上被呈现在右眼图像的左侧时），对象被感知为在屏幕平面的后方。
术语“视差数据”可以是任何指示用于呈现诸如字幕窗口及其相关联的文本之类的给定图形对象的视差值的数据。该术语也可以更广泛地指反映当前场景中对象的z轴位置的数据。可以将场景区绘制成具有不同区域的图，其中，将每个区域中最靠近观众的对象的z轴位置在该图中记录为坐标。这种图可以被称为“视差图”或“深度图”。视差图可以逐帧地发生变化并且可以按照任何多种方式来表示该视差图。注意，视差是对左眼和右眼图像的水平偏移的测量，但是该偏移无需是像素的整数，因为分数像素偏移是完全可以接受的。
在递送3D视频和CC内容以供显示的上下文中，视差通常被表示为伴随视频的宽度的一定百分比。因此，其是无量纲数。例如，信号发送方案可能会指定视差的一个单位等于视频内容的宽度的1/1920（通常，该视频内容被呈现为匹配显示屏幕的宽度）。但是，即使在1920的屏幕宽度下，1/1920的视差也不是实际视差中的最小增量。按照这种定义，7的视差指等于视频内容的宽度的7/1920的距离。再次，按照这种定义，在具有1920个像素的水平分辨率的屏幕的特殊情况下，计算出视差的一个全单位与一个显示像素的宽度相同，但是这应该被看作是特殊情况。如果显示屏幕具有少于1920个的水平像素（例如，1600个水平像素），那么相应地调整视差，并且7的视差等于(7/1920)(1600)=5.83个像素。因此，视差可以被更加合适地看作是一对对准的立体图像中的左眼图像和右眼图像中的对应点的沿x轴（水平）的在屏幕上的物理位置的差。值得注意的是，CC窗口通常是沿z轴定位的并且被感知为位于与显示屏幕的平面平行的平面中的二维窗口。
关于添加视差数据以使用CEA-708兼容语法针对特定CEA-708字幕窗口设置感知到的z轴或深度的方法，已经向标准委员会提出了建议。一种方法是通过使用CEA-708中称为ETX1法的命令扩展法来提供针对任何特定CEA-708字幕窗口的视差数据。这种建议具有弊端，但是也可以设想出一些其它可能性，以用于视差数据的传输。在一个示例中，可以将字幕视差数据放置在单独图片user_data()包中，从而出于缓冲和定时的考虑而分离该字幕视差数据，如果该字幕视差数据携带在字幕流内部，则可能不得不面对这种缓冲和定时的考虑。这在图1所示的示意图中有所描述。
图1表示DTV比特流100，其作为携带用于传输不同元素的数据的“数据管道”，这些不同元素被用来将DTV信息通过物理信道传送给接收数字电视接收机装置（即，电视机，机顶盒，等等）。在根据本发明的实施例的一个实现方式中，可以将字幕视差数据定义为另一种类型的use_data()，并且在该图示中，其被示出为字幕视差数据110。这使得视差数据实质上在DTVCC传输信道120的外部被传输，并且使得可以使用未分配给DTVCC字幕服务本身的额外带宽。
现在，参考图2，描述了诸如广播公司之类的服务提供商的基本示意图。一般来讲，单个服务提供商可以在一个或多个传输流上提供多个节目。音频、视频和字幕数据被提供给编码器，该编码器将这些数据编码成适合于分发的包，包括如上所述的字幕数据包。如所示出的，编码器202和204对节目A和节目B进行编码，编码后的节目A和节目B然后被提供给传输流多路复用器210，该传输流多路复用器210提供能够经由诸如陆地、有线或卫星广播之类的物理信道介质被分发的输出。在本讨论中，术语“节目”的使用与MPEG-2系统标准（ISO/IEC 13818-1）的使用一致。MPEG-2节目具有相关联的基本流组件，例如一个视频基本流和一个或多个音频基本流。根据上述的实现方式，提供字幕视差数据110作为视频基本流中的user_data()，但是这不应该被看作是限制性的，因为此后将描述或参考在其它传输机制中携带字幕视差数据的其它实现方式。然而，应该注意，可以使用目前的传输机制按照任何合适的方式编码字幕视差数据，而不受限制。类似地，在不受限制的情况下，可以使用任何合适的传输机制来传输将如随后要描述的那样被编码的视差数据。
如在图3中所描述的，在电视接收机装置（例如，电视机或机顶盒）处接收来自物理信道的被编码的数据。传输流在传输流多路分配器304处被多路分配，以产生包括音频、视频（具有嵌入的字幕数据）以及其它未示出的数据的一个或多个的基本流。视频解析器308从视频基本流提取压缩的视频数据，并将提取的视频数据发送给视频解码器314以供解码。视频解析器308从视频基本流中提取user_data()块，并将这些user_data()块发送至用户数据解析器310。传输流多路分配器304选择音频包并且将音频包递送给音频解码器312，以产生音频数据作为输出。当使用上述传输机制时，用户数据解析器310检查视频流的user_data()部分，并且分离出DTVCC传输信道和字幕视差数据。当其它传输被用于DTVCC和视差数据时，使用匹配于传输的合适的解析机制来解析出CC数据和视差。
在字幕处理器316处处理闭合字幕相关数据。字幕处理器使用视差数据来呈现字幕文本，该视差数据定义左眼图像和右眼图像的x轴分离，以产生字幕文本及其相关联的窗口的感知到的z轴位置。然后，在合成器320处将所得到的字幕图像与视频数据进行合成，从而产生3D视频，在该3D视频中，字幕在x，y，和z平面中按照字幕数据包中的数据放置。这种数据可以将字幕按照静态的方式放置（其中，在给定字幕段的显示期间，z轴的位置保持恒定），或者可以根据字幕数据的编写动态地放置字幕（其中，在显示期间，z轴位置随着时间移动）。然后，连同节目视频一起可以将字幕数据呈现在视频显示器（未示出）上。
在图4中更加详细地描述了接收机装置，其中，在接收机400的调谐器/解调器402处经由诸如陆地广播、有线或卫星之类的任何合适的源来接收内容。在多路分配器406处，将包括来自调谐器/解调器402的字幕数据的传输流多路分配成音频流和视频流。音频在音频解码器410处被解码，而视频在视频解码器414处被解码。也可以经由未压缩A/V接口418来接收未压缩A/V数据，其中，未压缩A/V接口418可以被选择性地使用。
也可以通过因特网422经由网络接口426来接收A/V内容，用于IP电视内容解码。另外，可以为非实时（NRT）存储的内容提供存储器430。可以按照类似于其它内容源的方式在406处通过多路分配来播放NRT内容。接收机通常在诸如CPU438之类的处理器的控制下工作，处理器经由一个或多个总线（例如，450）互连至工作存储器440和节目存储器442以及图像子系统444。
CPU438通过任何传输机制（例如，经由如上所述的字幕数据包或者下面将参考的其它机制）接收来自多路分配器406的闭合字幕以及视差数据，并且通过解析这些数据来确定左眼位置和右眼位置的哪个水平分离被用于创建z轴位置以及x和y位置的感知，从而定位字幕数据。这些信息被传递给图形子系统444，并且图像在合成器460处被合成以产生适合于在视频显示器上显示的输出。
因此，一种用于将闭合字幕数据传递至电视接收机装置的方法涉及：在数字电视字幕信道数据包流中封装闭合字幕文本；在数字电视用户数据包流中传输和递送视差数据，其中，该视差数据针对与闭合字幕一起显示的视频的每一个帧定义闭合字幕文本的z轴位置；将数字电视字幕信道数据包流发送至电视接收机装置，作为携带与闭合字幕文本相关联的音频/视频数据的传输流的一部分；以及，在携带与闭合字幕文本相关联的音频/视频数据的传输流的外部，将包含视差数据的数字电视用户数据包流发送至电视接收机装置。
并且，一种用于在电视接收机装置中处理闭合字幕数据的方法涉及：接收作为携带与闭合字幕文本相关联的音频/视频数据的传输流的一部分的至电视接收机装置的数字电视字幕信道数据包流；接收在携带与闭合字幕文本相关联的音频/视频数据的传输流的外部的至电视接收机装置的包含视差数据的数字电视用户数据包流；以及，将闭合字幕文本放置在闭合字幕窗口中，用于在三维视频显示器上显示，其中，闭合字幕窗口沿z轴定位在视差数据定义的位置中。
图5描述了用来处理按照在此描述的方式提供的字幕数据的程序模块的一种实现方式。在该示例实现方式中，在来自程序存储器442的程序控制下工作并且使用工作存储器440的CPU438（经由任何合适的传输机制）接收来自多路分配器406的多路分配的传输流，并且解析器模块504在508处产生字幕数据（也就是，字幕文本和相关联的命令以创建和定位字幕窗口），并将视差数据发送至视差数据处理模块512，在视差数据处理模块512处，视差数据被提取供字幕呈现器514使用，以用于处理。其它数据可以由解析器504解析至其它数据处理模块，如由506所示。然后，在合成器460处将处理后的字幕数据与来自多路分配器406的视频数据合成，从而产生用于显示的数据，其中，CC数据的位置按照在视差数据中规定的那样定位。
在根据本发明实施例的某些实现方式中，用于定义z轴的数据量可以被最小化，并且可以与DTV传输流的视频部分和字幕文本一起被传输或如上所述在单独的user_data()数据包中被传输。
当在DTV传输信道外部递送视差数据时，字幕视差数据不会影响DTVCC缓冲模型或数据率，并且可以按照与字幕数据分离的方式被多路复用成视频。注意：还存在定义于标准中的其它类型的用户数据，诸如有效格式描述（AFD）和条码数据（Bar Data）。根据本发明的某些实施例，字幕视差数据可以作为一种类型的图片用户数据被传输。然而，这不应该被看作是限制性的，因为上述传输机制只是用于传输按照后面将描述的方式编码的视差数据的几种机制中的一种。例如，可以使用在如下文献中描述的技术来传输视差数据，即，Eyer的与本文同时提交的名为“Service Linkage to Caption DisparityTransport”的美国专利申请系列号13/022,828，或者Eyer的与本文同时提交的名为“Extended Command Stream for Closed CaptionDisparity”的美国专利申请系列号13/022,810,通过引用将这两个文献均并入在此，并且可以在没有限制的条件下使用。
根据一些优选的实施例，可以显著地减少用于传输视差数据的数据量，从而最小化对用于字幕服务的可用带宽的影响，而不管传输机制如何，如随后将描述的。
为了如同在技术标准规范中描绘定义那样地来定义数据结构，如下所述，提供了适合于ATSC A/72第1部分，AVC Video(针对ATSC)和A/53的架构的示例数据结构。这里，从A/72第1部分和A/53第4部分复制文本。在以下部分中描述针对本发明的该示例实现方式被修改成适合视差数据的呈现的规范的部分：
●表1符合A/72第1部分中的表6.4（2008）；
●表2符合A/72第1部分中的表6.5（2008）；
●表3符合A/52第4部分中的表6.8（2009）；
●表4符合A/52第4部分中的表6.9（2009），这里添加了新的代码点（user_data_type_code_value 0x07）；
●表5至表7是原始的；
●表5之后并且与表5相关的所有定义（service_number,extended_service_number,等）都是原始的；
●表6之后并且与表6相关的所有定义（disparity(i),offset_precision,等）都是原始的；
记住这些改变，可以形成针对字幕数据的递送的规范，其类似于下面作为样品标准给出的规范，并且被用作根据以上论述的用于标准化字幕递送的基础：
示例1－样品标准文本
表1SEI语法
itu_t_t35_country_code-固定8位字段，应该具有按照ITU-TT3.5的要求分配的0xB5的值。
itu_t_t35provider_code-固定16位字段，应该具有按照ITU-TT3.5的要求分配的0x0031的值。
user_identifier－这是32位代码，指示user_structure()的语法和语义，如在ATSC A/53第4部分的表6.7中所示。
user_strcture()－这是由user_identifier的值和表2定义的可变长度数据结构。
表2user_identifier
ATSC_user_data()语法和语义应该是针对“ATSC_user_data()”结构在表3中给出的语法和语义。虽然这些语法和语义名义上是MPEG-2专有，但是它们完全适用于AVC。
表3ATSC_user_data语法
user_data_type_code－这是8位值，其识别user_data_type_strcutre()中要遵循的ATSC用户数据的类型，并且应该根据表4来设置该值。
表4user_data_type_code赋值
在表5中示出了示例字幕视差数据语法。
表5字幕视差数据语法
service_number－在0至15的范围内的4位无符号的整数值，当该值在1至14的范围内时，应该指示与该组视差数据相关联的CEA-708字幕服务编号。值0应该指示所包括的视差数据均等地应用于所有字幕服务。值15应该指示服务编号在15至63的范围内，并且应该在extended_service_number字段中指定。
extended_service_number－在15至63的范围内的6位无符号的整数值，应该指示与该组视差数据相关联的CEA-708字幕服务编号。
caption_window_count－在1至63的范围内的6位无符号的整数值，应该指示在caption_disparity_data()实例中出现的视差数据组的数目。
caption_window_id[i]－在0至7的范围内的3位无符号的整数值，应该指示对其施加“for”循环实例中的视差数据的CEA-708字幕窗口ID。
temporal_extension_flag－1位标记，当设置为“1”时，应该指示在caption_window_count“for”循环的实例中包括时间扩展数据。temporal_extension_flag中的值“0”应该指示在caption_window_count“for”循环的实例中不包括时间扩展数据。
data_valid－1位标记，当设置为“0”时，应该指示要遵循的disparity[i]数据、select_view_shift和时间扩展数据（如果存在的话）不具有含义。当data_valid设置为“1”时，disparity[i]数据（以及要遵循的时间扩展数据，如果存在的话）应该具有含义。注意：可以使用data_valid=“0”来在有效视差数据的插入的多路复用上游中创建补位数字用户数据。
select_view_shift－2位数量，应该根据下表指定用于将视差应用于左视图和右视图的方法。
表6select_view_shift译码
disparity[i]－9位有符号的整数值，应该指示相对于1920单位的水平网格左视图和右视图之间的视差的单位数。正值应该指示右视图向左视图的右侧移动。负值应该指示右视图向左视图的左侧移动。
offset_precision－1位标记，应该指定在caption_window_count“for”循环的迭代中在offset_sequence[i,k]中规定的值的精度。当设置为“0”时，offset_precision应该指示一个像素的精度。当设置为“1”时，offset_precision应该指示两个像素的精度。
offset_sequence[i,k]－11个2位值的集合，应该指定在11帧期间视差的帧间变化。offset_sequence[i,0]应该指示当前帧和下一个帧之间的视差值的变量增量，offset_sequence[i,1]应该指示该帧和随后的帧之间的视差值的变量增量，依此类推。每一帧中的变化量应该通过offset_sequence[i,k]的译码来指示，如下表所示。
表7offset_sequence[i,k]译码
  offset_sequence [i,k]值   含义
  “00”   与在前帧相比没有视差的变化
  “01”   与在前帧相比视差正向变化在offset_precision中给定的量
  “10”   与在前帧相比视差负向变化在offset_precision中给定的量
  “11”   针对偏移序列没有分配帧
在上述示例1中，将视差数据定义并且编码为具有一个或两个单位的精度的偏移。然而，这种水平的视差精度不如在逐帧的基础上所期望的那样精确。虽然在具有屏幕宽度的1/1920的精度的视差值处的初始放置可能是足够的，但是深度平面中的平滑运动要求更高的分辨率。
在该第一示例的方法中，使用user_data_identifier_code的唯一值在user_data()包中传输字幕视差数据（表4）。作为能够在DTVCC传输信道的外部作为user_data()传输从而传输字幕视差数据（如图1所述）的视差数据的一种类型的例子，本示例是有用的。
上述示例提供了字幕视差数据的编码和传输，然而，遗憾的是，对于随着时间沿z轴方向移动的字幕窗口来说，字幕视差数据并不是按照最有效的方式被编码的，并且可能需要大量的带宽来进行发送。另外，对于视差的逐帧采样来说，已经发现屏幕宽度的1/1920的视差分辨率太粗糙。当指定用于随时间在深度上平滑移动的对象的视差时，需要更精细的粒度。
一般来讲，可能希望无论如何同时地编写视差和字幕数据，从而允许在视频帧中沿z轴方向在适当的位置放置字幕使得其它对象不会与字幕显示交叉。换句话说，为了正确地呈现场景，字幕窗口应该看起来相对于其覆盖的任何对象更靠近观众。字幕窗口与其覆盖的对象在z轴上的交叉引起观众视觉疲劳，因为字幕窗口和对象给出的深度提示彼此冲突。
通常字幕是基于在视频中表现的其它声音或对话被呈现的。因此，例如，对话的每个段（例如，来自一个演员）可以出现在单独的字幕文本窗口中。如果接收机不能够动态地调整z轴位置（例如，由于CPU不足或图形处理能力不足），则可以在静态位置处呈现该窗口。
优选地，编写字幕数据，从而针对与对话的每个段相关联的每个个体帧用z轴位置来表现该字幕数据。按照这种方式，在其显示的时间期间，可以按照字幕编写者所希望的方式移动给定的闭合字幕窗口及其相关联的文本，使它们靠近观众或者远离观众。可以根据CEA-708-D标准来定义给定的闭合字幕窗口的x和y位置，但是z位置可以通过采用限定沿z轴的感知到的移动的机制被动态地改变，如将要描述的。
如果如图6中所描述的那样绘制（在大量的视频的连续帧上）随时间的感知到的z轴位置，那么可以将视差表示为反映窗口在z轴上的运动的曲线，其中，如果该视差被表示为负值（负视差值代表被感知为位于显示器前方的位置），则窗口在z轴上朝向显示器的观众侧移动；如果该视差值被表示为正值（正数代表显示器后方的位置；并且显示屏幕自身位于z轴位置零处），则窗口在z轴上远离用户朝向显示器移动并且最终出现在显示器后方。因此，曲线600可以表示对象的显示，其开始于极左处的初始深度，并且首先朝向观众移动直至到达曲线600的底部，在该点处，视差数据呈现正斜率（以远离观众的深度的运动）。这种z轴上的被编写的视差位置可以允许包含字幕文本的窗口在视频显示中平滑地移动，以跟踪场景中的对象并且避免与其它对象发生干扰。为了携带针对每个视频帧的这种不同信息，例如，在每帧处曲线的值的采样，可能需要大量的数据。
从随后的公开中可以看出，某些较低容量的接收机可以不配备有按照跟踪被编写的视差曲线600的方式来动态地调整视差的能力。在这些实例中，可以提供诸如604的固定视差值作为按照稍后描述的方式静态地位于特定字幕窗口的z轴上的“备用视差”。备用视差可以针对由604所表示的字幕窗口的感知距离来设定，以大约位于视差曲线600的最接近的感知水平，从而确保在感知深度上字幕窗口与其它的屏幕对象之间没有干扰。如随后将要描述的，可以提供该固定备用视差值。在根据本发明的某些实现方式中，一组动态变化的表示被编写的视差的数据以及备用静态视差数据均可以被发送至TV接收机并且被TV接收机接收。按照这种方式，例如，如果TV接收机装置没有足够的处理能量来处理逐帧的视差变化，那么该TV接收机装置可以使用静态备用视差。还应该注意，无论显示部分是动态变化的还是静态的，字幕都是按照与伴随视频中的对话和其它声音或解说词匹配的方式被显示的。因此，当伴随有A/V内容时CC窗口的x-y位置和z位置在逐阶段的基础或其它频率的基础上变化，并且每个CC窗口一般只被显示大约几秒。因此，CC数据的每个窗口可以具有其自己的一系列的描述动态编写的视差和备用静态视差的数据。
如图7所示，曲线600的数据可以被近似为分段线性近似700。（注意，图7中示出的近似是出于清楚说明的目的的总近似，曲线600的更好的近似也是可能的。另外，可以通过低通滤波分段线性近似来改善呈现，如果接收机具有这种能力的话）。在该示例中，具有图示中的多个段700A、700B、700C、700D、和700E的曲线700近似视差曲线600，具有斜率的变化，该斜率的变化发生在定义从一个线段至下一个线段的变化（例如，从700B至700C的变化）的分界点处。可以通过如下方式编码该分段线性近似，即，假设限定的开始视差值和斜率（或者提供初值和斜率），然后对帧的数目以及要在此点实时地改变斜率的量进行编码，在这些帧上，具有特定斜率的近似的特定段被认为是有效的。因此，在一种实现方式中，仅需要被传送以建立各个分界点的信息是帧的数目以及相对于在前斜率的斜率变化。可以假设该斜率的开始值是零。斜率的一个单位可以被定义为是随着帧中指定的预定时间间隔的变化的视差单位的数目。如果该预定时间间隔被指定为是2的幂，那么接收机中所需的计算可以被简化。例如，如果该预定时间间隔是25或32，可以始终使用二进制运算来表示在任何给定帧处的计算的视差值，其中，保留小数点右边的5个位。可以在没有限制的情况下使用2的其它幂，得到相同的益处。
方便的是，使用小的数来表示斜率变化以使传输的数据量最小化。例如，可以使用范围在-16至＋15之间的5位2的带符号的整数补码表示，其指示要在指定数量的帧上应用的斜率的变化量。
再次，为了便于实现，方便的是，将视差的一个单位表示为屏幕宽度的1/1920。通过这种选择，当显示分辨率在水平方向是1920个像素时，视差的一个单位等于一个像素的宽度，但这并不是说被呈现的视差值总是具有一个像素的分辨率。
如上所述，图7的表示代表分段线性模型的放大近似，使得在黑白线图中可以清楚地看见两条曲线，但是通过更好地选择线段的分界点和斜率可以使近似比所示出的更接近。还应该注意，一旦被接收机接收到，如果低通滤波希望的话，可以改善分段线性近似，这在本质上将发生在分界点处的斜率的急剧变化转换成更接近地近似被编写的视差曲线的平滑曲线。还应该注意到，使用当前近似还可以将针对动态变化的分数单位粒度提供给字幕窗口和相关联的闭合字幕文本的z轴位置。
以下示例提供要使用扩展的服务来发送的视差数据，其是从字幕文本的主服务编号映射的。在Eyer等人的名为“Service Linkage toCaption Disparity Transport”的美国专利申请号61/415,924中更加详细地描述了这种映射，该文献通过引用并入在此。
示例2－视差编码的标准补充
增强服务
针对给定字幕服务的字幕视差数据应该在“增强服务”中被递送。增强服务应该被看作是为其相关联的字幕服务提供额外命令和数据的字幕服务。增强服务关联应该在表I中示出。如所示出的，在ExtendedService#49中传输的命令和数据被看作是Service#1的有效部分，在Extended Service#50中传输的命令和数据被看作是标准Service#2中的部分，等等。
  服务编号   增强服务编号
  1   49
  2   50
  3   51
  4   52
  5   53
  6   54
表I－增强服务编号关联
仅针对标准字幕Service#1至＃6定义增强服务。
设置视差－（DISP）
名称：SetDisparity-指定针对3D字幕的视差
格式：可变长度
命令译码：EXT1,90h,caption_disparity_data()
cription：应该使用如下定义的语法和语义在增强服务内在SetDisparity命令中传输字幕视差数据。SetDisparity指定当字幕与立体3D节目一起使用时针对一个或多个字幕窗口左眼视图和右眼视图之间的水平偏移（视差）量。
字幕视差数据
Caption_disparity_data()的语法如表II所示。
表二
注意：在该实现方式中，参照上表，使用如下变量来定义win_info：
caption_window_count－范围在1至7内的3位无符号的整数，应该指示在caption_disparity_data()的这个实例中包括的字幕窗口的数目。
caption_window_id－3位无符号的整数，应该识别对应服务中的窗口ID，在“for”循环的该迭代中针对该对应服务给出了视差数据。
temporal_extension_flag－1位标记，当被设置为“1”时，应该指示包括识别时变视差路径的数据。当该标记被设置为“0”时，其应该指示命令中的最后一个字段是disparity[i]。
disparity[i]－9位2的带符号的整数补码表示，应该指示相对于1920个水平像素在caption_window_id中给出的相关联的字幕窗口i的视差值。值“0”应该指代屏幕平面。负值应该对应于屏幕前方的感知深度。正值应该对应于屏幕后方的感知深度。
alternate_disparity[i]－9位2的带符号的整数补码表示，应该如同disparity[i]那样被编码；应该指定替代在分段线性路径中给出的值由不能够呈现时变字幕窗口的编码器使用的视差值。
segment_count－范围在1至31内的5位无符号的整数，应该指示要遵循的段的数目。
frame_count－范围在0至31内的5位无符号的整数，应该指示在应用紧随其后的segment_slope_change字段之前应该消逝的视频帧的数目。
segment_slope_change－范围在-16至+15之间的5位2的带符号的整数补码表示，应该指示应用于在frame_count中指示的帧处的斜率的变化量。斜率是按照在32个帧上视差的单位的数目来指定的。在时变路径的开始点处的斜率值应该被假定为零。
图8描述了时变字幕视差数据的具体例子。图8使用下述示例2的数据结构示出了视差曲线的分段线性近似。在示例2中，斜率的一个单位被定义为等于在32个帧的时间间隔上视差的一个单位中的变化。图8示出了以下帧计数（frame_count）以及视差斜率变化（segment_slope_change）参数的序列所导致的时线：(2,-7),(10,-9),(8,+9)和(10,+7)。在左侧的第一段中，s＝0具有被预先限定为0的斜率。前两个斜率变化是负的，其指示字幕窗口朝向用户移动，视差值始于0，行进经过-2.1875在第三段和第四段的结点处到达-6.1875。在下两个段处的正的斜率变化导致表示在z轴上朝向观众的缓慢移动，并且最终，在最后段处，窗口在显示的前方在-8.4375的恒定视差处停止。
在该示例中，视差曲线的斜率被定义为始于值“0”。在该示例中，在两个帧之后，斜率变化为每32帧-7视差单位。在10个帧之后，视差再次变为每32帧-16视差单位。8个帧之后，其变回为-7，并且在这之后，10个帧之后，其变回0。
可以使用二进制运算来精确地计算每一帧处的视差，携带小数点右侧的5个二进制数字（1/32视差单位的精度）。不支持呈现中的1/32视差单位精度的接收机被预期将每一帧处的结果舍入至其支持的任何呈现精度，诸如，1/16,1/8,1/4像素，等。为了避免累计的误差，每一帧处的视差的计算被预期优选地是在完全精度（1/32单位）处执行的，在此之后再进行舍入（如果有的话）。
还应该注意，可能会提供一些不支持视差中的动态时变变化的接收机。为此，也希望如图6所示指定固定的视差，其可以被用作较不精密的接收机的备用。这被指定为是“备用视差”值。
为了完成这个概念的实现，采用表示视差数据的数据结构。表II在下面示出了这种数据结构的实现。在30个字节内，该数据结构容纳具有多达10个段的两个窗口：针对每窗口，2字节（win_info）＋2字节（seg_info）＋segment_count＊1.25字节(frm_info)＝16.5字节。
在不脱离本发明的某些实施例的实现方式的教导的情况下，可以按照任何合适的方式来递送上述视差数据。在一个这种实现方式中，希望的是，将服务编号映射至扩展服务编号或增强服务编号，而在其它的实现方式中，可以按照任何方式传送视差数据，包括与闭合字幕文本和相关联的视频同时地传送，或者作为带内或带外的一个或多个数据块提前传送。
在图9的流程图802（始于804）中描述了根据视差编码的某些示例实现方式的整体过程。在808处，接收到被编写的字幕数据，包括字幕窗口定义和文本（例如，表示对话的每个部分）和视差数据。这个数据可以被表示为（在一些数量的帧上）随时间的视差的曲线并且在812处通过分段线性模型近似来近似该数据。可以使用创建曲线的分段线性近似的从手动近似到任何数学算法的任何机制，而不受限制。然后，在816处，对于在近似中的每个段，视差被编码作为针对每个线段的一定量的帧，以及针对该一定量的帧在在前线段上的斜率的变化。初始线段的斜率被假定为0。
使用诸如图10的处理900中示出的示例处理可以更加详细地表示在接收机处执行的处理。该处理900开始于902处，其中接收到定义字幕窗口的命令（在CEA-708中，是DefineWindow命令）。在904处，如上所述，接收视差数据，作为斜率变化/帧的数目的序列。接下来，在906处，将第一线段的视差数据初始化为零。在910处，扩展数据序列，以计算该命令所覆盖的时间的间隔内的每个帧的视差的值。在915处，可以选择性地在路径上执行低通滤波操作，从而消除分界点。在接收到闭合字幕文本之前以及在将字幕窗口的状态设置为“可见”之前，没有发生字幕呈现。在920处，接收到字幕文本，并且在930处，将字幕窗口设置为可见（如果没有利用已经设置为真的可见属性将该字幕窗口初始化）。
在950处，一旦文本可用并且窗口可见，就可以使用在每一帧处所计算的视差的值来呈现字幕窗口和文本。在960处，在每个连续的帧处，呈现所计算的视差的下一个值，直至到达最后一个帧（测试970）。当到达最后一个帧时，或者字幕窗口被删除或设置为不可见（未示出），处理在980处结束。
应该理解，这些事件可以表示连续的流，其中文本和字幕数据被不断地接收，使得当前的表示不被解释为准确地描述时间。图10中的各种操作的顺序可以根据制订者的选择而不同。例如，可以在使窗口可见（930）之后，或者，在初始化帧计数（940）之后，执行如下步骤：使斜率初始化至零，计算路径，和低通滤波（906，910和915）。在其它的实现方式中，通过合适的信号发送，可以在定义字幕窗口之前接收字幕视差数据，从而按照这种方式对在流程图900中示出的定时进行描述仅仅是为了便于理解。
考虑到本教导，该处理的许多变型对于本领域技术人员来说是清楚的。
因此，一种用于将编写的闭合字幕视差数据（其定义用于在显示器上显示的包含闭合字幕文本的窗口（平行于屏幕的二维窗口）的z轴位置）转换为视差数据的所编码的近似的方法涉及：将编写的三维闭合字幕视差数据的段近似为由可在帧的序列上应用的线段的有序序列组成的分段线性近似，其中，在分界点处，每个段与下一个段连接；在编码器处，对分段线性近似进行编码，作为指定数量的帧（在该帧上要应用每个线段）以及相对于该序列中前一段的斜率的斜率变化，从而产生视差数据的所编码的近似；并且，其中，该序列中的第一段将预定斜率假设为用于斜率变化的基准。
优选地，预定的初始斜率是零，但根据惯例或者根据被传送的信息也可以是任何其它开始点。可以作为分数的分子的表示给出该斜率，其中，该分数的分母是预定值2N，N是整数，使得仅需要该分子传达该分数的值。在一个优选的实现方式中，N＝5，可以用范围在-16至+15内的值来表示该分子，并且将斜率的一个单位定义为在32帧的时间间隔上的视差的一个单位的变化。在这种情况下，2N是32，并且可以使用范围在-16至+15之间的5位2的带符号的整数补码表示来指示要施加在指定数量的帧上的斜率变化量。
该方法还进一步地涉及：在数字电视字幕信道数据包流中封装闭合字幕文本；在携带与闭合字幕文本相关联的视频数据的数字电视用户数据包流内封装编码的闭合字幕视差数据。在考虑到本教导，本领域的技术人员将理解，在不脱离本发明的实现方式的情况下，可以按照任何合适的方式将使用其上要应用斜率的帧的数目的编码传输至接收机。
该方法还进一步地涉及：确立备用的固定视差值，该备用的固定视差值确立针对闭合字幕文本的固定的z轴位置，并且，连同编码的闭合字幕视差数据一起封装该备用的固定视差值，以作为备用的z轴位置来使用。
该方法还涉及接收编码的视差数据并且低通滤波编码的三维视差数据以使分界点处的过渡平滑化。
该方法还进一步地涉及：在数字电视字幕信道包流中封装闭合字幕文本；并且，在携带与闭合字幕文本相关联的音频/视频数据的数字电视传输流包流内封装编码的闭合字幕视差数据作为命令扩展或作为用户数据。该方法还可以涉及：按照任何合适的方式将数字电视字幕信道包流和编码的闭合字幕视差数据以及闭合字幕文本传输至电视接收机装置，作为携带与闭合字幕文本相关联的音频/视频数据的传输流的一部分。
因此，在某些实现方式中，一种解码闭合字幕视差数据的方法涉及：在电视接收机装置处，接收被编码为一个或多个帧间隔/斜率变化对的序列的闭合字幕视差数据，其中，表示其上要应用表示视差的每个线性函数的帧的指定数量的帧间隔与指示相对于前一段的斜率的斜率变化的值成对。视差数据的序列中的第一段将斜率0假设为用于随后的斜率变化的基准，并且接收字幕数据包的序列，其中，该字幕数据包的序列指定包含闭合字幕文本的闭合字幕显示窗口，在数字电视字幕信道包流中封装闭合字幕数据。在闭合字幕显示的左眼视图和右眼视图的3D呈现中在每一帧中使用视差值，从而确定确立窗口的感知到的z轴位置的水平偏移。该方法进一步地接收确立针对闭合字幕显示的固定视差的备用固定视差值，其中该备用固定视差值连同编码的三维闭合字幕视差数据一起被封装从而作为备用的感知到的z轴位置被使用。使用低通滤波来滤波编码的三维视差数据从而使视差数据的过渡平滑化。处理字幕文本和视差数据以产生适合于在由视差数据限定的感知到的z轴位置处定义三维图像在字幕文本的显示上的呈现的输出。
解码闭合字幕视差数据的另一个方法涉及：在电视接收机装置处，接收被编码为一个或多个帧间隔/斜率变化对的序列的闭合字幕视差数据，其中，表示其上要应用表示视差的每个线性函数的帧的指定数量的帧间隔与指示相对于前一段的斜率的斜率变化的值成对。视差数据的序列中的第一段将预定斜率假设为用于随后的斜率变化的基准。接收字幕数据包的序列，其中，该字幕数据包的序列指定包含闭合字幕文本的闭合字幕显示窗口。在每一帧中使用视差值，以确定闭合字幕显示的左眼视图和右眼视图的水平偏移，该水平偏移确立闭合字幕显示窗口的感知到的z轴位置。
在某些实现方式中，预定斜率是0。在某些实现方式中，作为表示在2N个帧上视差的变化的值给出该斜率变化，其中N是整数。在某些实现方式中，N＝5。在某些实现方式中，信号发送斜率变化，作为范围在-16至+15之间的值，其指示要施加在指定的帧间隔上的斜率变化的量。在某些实现方式中，该方法涉及接收确立针对闭合字幕显示的固定的感知到的z轴位置的备用固定视差值，其中，该备用固定视差值连同编码的三维闭合字幕视差数据一起被封装，以作为备用的z轴位置被使用。在某些实现方式中，该方法涉及：低通滤波编码的三维视差数据以使视差值的过渡平滑化。在某些实现方式中，该方法涉及：处理字幕文本和视差数据以产生适合于在由视差数据定义的感知到的z轴位置处定义三维图像在字幕文本的显示上的呈现的输出。
可以使用诸如非瞬态存储介质之类的计算机可读电子存储设备用于存储指令，当在一个或多个编程的处理器上执行这些指令时，这些指令执行在此描述的任何处理。
按照符合某些实现方式的方式处理针对闭合字幕的视差数据的电视接收机装置具有解码器，该解码器接收被编码为一个或多个帧间隔/斜率变化对的序列的闭合字幕视差数据，其中，表示其上要应用表示视差的每个线性函数的帧的指定数量的帧间隔与指示相对于前一段的斜率的斜率变化的值成对。视差数据的序列中的第一段将预定斜率假设为用于随后的斜率变化的基准。解析器解析来自一个或多个信号的视差数据和闭合字幕文本。合成器接收视差数据和闭合字幕文本，并且生成包括包含闭合字幕文本的闭合字幕显示窗口的视频帧信号的序列，其中闭合字幕显示窗口在由视差值定义的每一帧中具有感知到的z轴位置。
在某些实现方式中，预定斜率是0。在某些实现方式中，作为2N个帧的预定值给出斜率变化，其中N是整数。在某些实现方式中，作为表示在32个帧上视差的变化的值给出斜率变化。在某些实现方式中，信号发送斜率变化，作为范围在-16至+15之间的值，其指示要施加在指定的帧间隔上的斜率变化的量。在某些实现方式中，信号发送斜率变化作为范围在-16至+15之间的值，其指示要施加在指定的帧间隔上的斜率变化的量。在某些实现方式中，解码器进一步地接收确立针对闭合字幕显示的一部分的固定的z轴位置的备用固定视差值，其中，备用固定视差值连同编码的闭合字幕视差数据一起被封装，以作为备用的z轴位置被使用。在某些实现方式中，低通滤波器处理编码的三维视差数据以使视差值的过渡平滑化。在某些实现方式中，合成器进一步地处理字幕文本和视差数据以产生适合于在由视差数据定义的感知到的z轴位置处定义三维图像在字幕文本的显示上的呈现的输出。
考虑到上述教导，本领域的技术人员将认识到，某些上述示例性实施例基于编程的处理器的使用。然而本发明不局限于这些示例性实施例，因为可以使用诸如专用硬件和/或专用处理器之类的硬件组件等同物来实现其它的实施例。类似地，可以使用通用计算机、基于微处理器的计算机、微控制器、光学计算机、模拟计算机、专用处理器、专用电路和/或专用硬连线逻辑来构建替代的等同实施例。
考虑到上述教导，本领域的技术人员将认识到，在不脱离本发明的某些实现方式的情况下，可以使用盘存储器以及诸如非瞬态储存装置之类的其它形式的存储器来实现用于实现上述某些实施例的程序操作和处理及其相关联的数据，其中，其它形式的存储器包括，例如，只读存储器（ROM）装置、随机存取存储器（RAM）装置、网络存储器装置、光学存储器元件、磁存储器元件、磁光存储器元件、闪速存储器、芯存储器和/或其它等同的易失性和非易失性存储技术。术语非瞬态并不暗示借助电源的去除或其它操作不会丢失信息。这种备用的存储器装置应该可以被看作是等同物。
可以使用可存储在任何适当的电子或计算机可读存储器介质上的以流程图的形式在上面被广泛地描述的执行程序指令的编程的处理器来实现某些实施例。然而，考虑到本教导，本领域的技术人员将理解，在不脱离本发明的实施例的情况下，可以以任何变型以及以任何合适的编程语言来实现上述处理。例如，在不脱离本发明的实施例的情况下，可以经常改变执行的某些操作的顺序，添加额外的操作或者删除某些操作。在不脱离本发明的实施例的情况下，可以添加和/或增强误差捕获，可在操作流程、用户界面和信息呈现中进行改变。这样的变型是被预期的并且被认为是等同物。
虽然描述了某些示例性实施例，但是显然，基于上述描述，许多替换、修改、组合和变型对于本领域的技术人员来书是清楚的。

Claims (23)

1.一种用于解码闭合字幕视差数据的方法，包括：
在电视接收机装置处，接收被编码为一个或多个帧间隔/斜率变化对的序列的闭合字幕视差数据，其中，表示应用表示视差的每个线性函数的帧的指定数量的帧间隔与指示相对于前一段的斜率的斜率变化的值成对；
其中，视差值的序列中的第一段将斜率0假设为用于随后的斜率变化的基准；
接收字幕数据包的序列，其中，字幕数据包的序列指定包含闭合字幕文本的闭合字幕显示窗口，其中，在数字电视字幕信道包流中封装闭合字幕数据；
其中，在闭合字幕显示的左眼视图和右眼视图的3D呈现中在每一帧中使用视差值，从而确定确立窗口的感知到的z轴位置的水平偏移；
接收确立针对闭合字幕显示的固定视差的备用固定视差值，其中备用固定视差值连同编码的三维闭合字幕视差数据一起被封装以便作为备用的感知到的z轴位置被使用；
低通滤波编码的三维视差数据从而使视差值的过渡平滑化；以及
处理字幕文本和视差数据以产生适合于在由视差数据限定的感知到的z轴位置处定义三维图像在字幕文本的显示上的呈现的输出。
2.一种用于解码闭合字幕视差数据的方法，包括：
在电视接收机装置处，接收被编码为一个或多个帧间隔/斜率变化对的序列的闭合字幕视差数据，其中，表示要在其上应用表示视差的每个线性函数的帧的指定数量的帧间隔与指示相对于前一段的斜率的斜率变化的值成对；
其中，视差值的序列中的第一段将预定斜率假设为用于随后的斜率变化的基准；
接收字幕数据包的序列，其中，字幕数据包的序列指定包含闭合字幕文本的闭合字幕显示窗口；以及
其中，在每一帧中使用视差值，以确定闭合字幕显示的左眼视图和右眼视图的水平偏移，其确立闭合字幕显示窗口的感知到的z轴位置。
3.根据权利要求2的方法，其中，预定斜率是0。
4.根据权利要求2的方法，其中，斜率变化作为表示在2N个帧上视差的变化的值被给定，其中N是整数。
5.根据权利要求4的方法，其中，N＝5。
6.根据权利要求2的方法，其中，斜率变化作为在-16至+15的范围中的值被信号发送，该值指示要施加在指定的帧间隔上的斜率变化的量。
7.根据权利要求2的方法，进一步地包括：接收确立针对闭合字幕显示的固定的感知到的z轴位置的备用固定视差值，其中，备用固定视差值连同编码的三维闭合字幕视差数据一起被封装，以作为备用的z轴位置被使用。
8.根据权利要求2的方法，进一步地包括：低通滤波编码的三维视差数据以使视差值的过渡平滑化。
9.根据权利要求2的方法，进一步地包括：处理字幕文本和视差数据以产生适合于在由视差数据定义的感知到的z轴位置处定义三维图像在字幕文本的显示上的呈现的输出。
10.一种处理针对闭合字幕的视差数据的电视接收机装置，包括
解码器，接收被编码为一个或多个帧间隔/斜率变化对的序列的闭合字幕视差数据，其中，表示要在其上应用表示视差的每个线性函数的帧的指定数量的帧间隔与指示相对于前一段的斜率的斜率变化的值成对；
其中，视差值的序列中的第一段将预定斜率假设为用于随后的斜率变化的基准；
解析器，解析来自一个或多个信号的视差数据和闭合字幕文本；以及
合成器，接收视差数据和闭合字幕文本，并且生成包括包含闭合字幕文本的闭合字幕显示窗口的视频帧信号的序列，其中闭合字幕显示窗口在由视差值定义的每个帧中具有感知到的z轴位置。
11.根据权利要求10的装置，其中，预定斜率是0。
12.根据权利要求10的装置，其中，帧间隔作为2N个帧的预定值被给定，其中N是整数。
13.根据权利要求10的装置，其中，斜率变化作为表示在32个帧上视差的变化的值被给定。
14.根据权利要求13的装置，其中，斜率变化作为在-16至+15的范围中的值被信号发送，该值指示要施加在指定的帧间隔上的斜率变化的量。
15.根据权利要求10的装置，其中，斜率变化作为在-16至+15的范围中的值被信号发送，该值指示要施加在指定的帧间隔上的斜率变化的量。
16.根据权利要求10的装置，其中，解码器进一步地接收确立针对闭合字幕显示的一部分的固定的z轴位置的备用固定视差值，其中，备用固定视差值连同编码的闭合字幕视差数据一起被封装，以作为备用的感知到的z轴位置被使用。
17.根据权利要求10的装置，进一步地包括处理编码的三维视差数据以使视差值的过渡平滑化的低通滤波器。
18.根据权利要求11的装置，其中，合成器进一步地处理字幕文本和视差数据以产生适合于在由视差数据定义的感知到的z轴位置处定义三维图像在字幕文本的显示上的呈现的输出。
19.一种用于解码闭合字幕视差数据的方法，包括：
在电视接收机装置处，接收编码的动态闭合字幕视差数据，编码的动态闭合字幕视差数据确定针对视频帧的序列逐帧地变化的闭合字幕显示窗口的感知到的z轴位置；以及
在电视接收机装置处，接收编码的备用闭合字幕视差值，编码的备用闭合字幕视差值设置针对视频帧的序列静止的闭合字幕显示窗口的感知到的z轴位置；接收字幕数据包的序列，其中，字幕数据包的序列指定包含闭合字幕文本的闭合字幕显示窗口；以及
其中，针对视频帧的序列在每一帧中使用编码的动态闭合字幕视差数据和备用视差值中的一种，以确定确立闭合字幕显示窗口的感知到的z轴位置的闭合字幕显示的左眼视图和右眼视图的水平偏移。
20.根据权利要求19的方法，其中，编码的动态闭合字幕视差数据被编码为一个或多个帧间隔/斜率变化对的序列，其中，表示要在其上应用表示视差的每个线性函数的帧的指定数量的帧间隔与指示相对于前一段的斜率的斜率变化的值成对；以及
其中，视差值的序列中的第一段将预定斜率假设为用于随后的斜率变化的基准。
21.根据权利要求20的方法，其中，预定斜率是0。
22.根据权利要求19的方法，进一步地包括：低通滤波编码的三维视差数据以使视差值的过渡平滑化。
23.根据权利要求19的方法，进一步地包括：处理字幕文本和视差数据以产生适合于在由视差数据定义的感知到的z轴位置处定义三维图像在字幕文本的显示上的呈现的输出。
CN201180012449.4A 2010-03-12 2011-02-25 视差数据传输和信号发送 Expired - Fee Related CN102783159B (zh)

Applications Claiming Priority (15)

Application Number Priority Date Filing Date Title
US31361210P 2010-03-12 2010-03-12
US61/313,612 2010-03-12
US31673310P 2010-03-23 2010-03-23
US61/316,733 2010-03-23
US34665210P 2010-05-20 2010-05-20
US61/346,652 2010-05-20
US37879210P 2010-08-31 2010-08-31
US61/378,792 2010-08-31
US41545710P 2010-11-19 2010-11-19
US61/415,457 2010-11-19
US41592410P 2010-11-22 2010-11-22
US61/415,924 2010-11-22
US13/022,817 US8817072B2 (en) 2010-03-12 2011-02-08 Disparity data transport and signaling
US13/022,817 2011-02-08
PCT/US2011/026291 WO2011112370A1 (en) 2010-03-12 2011-02-25 Disparity data transport and signaling

Publications (2)

Publication Number Publication Date
CN102783159A CN102783159A (zh) 2012-11-14
CN102783159B true CN102783159B (zh) 2015-06-17

Family

ID=44559593

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180012449.4A Expired - Fee Related CN102783159B (zh) 2010-03-12 2011-02-25 视差数据传输和信号发送

Country Status (8)

Country Link
US (5) US8878913B2 (zh)
EP (2) EP2545705A4 (zh)
JP (1) JP5545605B2 (zh)
KR (3) KR101295451B1 (zh)
CN (1) CN102783159B (zh)
CA (1) CA2791916A1 (zh)
MX (1) MX2012010002A (zh)
WO (3) WO2011112370A1 (zh)

Families Citing this family (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8839338B2 (en) * 2012-03-28 2014-09-16 Sony Corporation Service usage reporting data transport
US8760498B2 (en) * 2011-03-14 2014-06-24 Sony Corporation Disparity data transport in standard caption service
US8878913B2 (en) * 2010-03-12 2014-11-04 Sony Corporation Extended command stream for closed caption disparity
US8941779B2 (en) * 2012-03-21 2015-01-27 Sony Corporation Non-closed caption data transport in standard caption service
CN102918854B (zh) * 2010-05-30 2015-09-23 Lg电子株式会社 处理和接收用于3维字幕的数字广播信号的方法和装置
US8863171B2 (en) 2010-06-14 2014-10-14 Sony Corporation Announcement of program synchronized triggered declarative objects
US8893210B2 (en) 2010-08-20 2014-11-18 Sony Corporation Server load balancing for interactive television
US8898723B2 (en) 2010-08-20 2014-11-25 Sony Corporation Virtual channel declarative script binding
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
US8909694B2 (en) 2010-08-27 2014-12-09 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
US8918801B2 (en) 2010-08-30 2014-12-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, reception method, program, and broadcasting system
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US8872888B2 (en) 2010-10-01 2014-10-28 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
US8908103B2 (en) 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
TWI545955B (zh) 2011-04-28 2016-08-11 Sony Corp Signal receiving apparatus and method, a signal transmission apparatus and method, and program
US20130002812A1 (en) * 2011-06-29 2013-01-03 General Instrument Corporation Encoding and/or decoding 3d information
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
US8917358B2 (en) 2011-07-27 2014-12-23 Sony Corporation Reception apparatus, terminal apparatus, control method, program, and communication system
RU2594000C2 (ru) 2011-08-05 2016-08-10 Сони Корпорейшн Приемное устройство, способ приема, носитель записи и система обработки информации
TWI528749B (zh) * 2011-09-06 2016-04-01 Sony Corp A signal receiving device, a signal receiving method, an information processing program and an information processing system
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
US9113230B2 (en) 2011-12-21 2015-08-18 Sony Corporation Method, computer program, and reception apparatus for delivery of supplemental content
US8930988B2 (en) 2011-12-21 2015-01-06 Sony Corporation Reception apparatus, reception method, program, and information processing system
TWI554079B (zh) * 2011-12-28 2016-10-11 Jvc Kenwood Corp Dynamic image decoding device, dynamic image decoding method, dynamic image decoding program
US9936231B2 (en) 2012-03-21 2018-04-03 Saturn Licensing Llc Trigger compaction
CN103931177A (zh) * 2012-04-10 2014-07-16 华为技术有限公司 显示对象在三维场景中的显示方法及设备
JP6092525B2 (ja) * 2012-05-14 2017-03-08 サターン ライセンシング エルエルシーＳａｔｕｒｎ Ｌｉｃｅｎｓｉｎｇ ＬＬＣ 画像処理装置、情報処理システム、画像処理方法およびプログラム
US10104447B2 (en) 2012-06-19 2018-10-16 Saturn Licensing Llc Extensions to trigger parameters table for interactive television
MY177736A (en) 2012-07-12 2020-09-23 Sony Corp Parameterized services descriptor for advanced television services
US9154840B2 (en) 2012-07-31 2015-10-06 Sony Corporation Reception apparatus, reception method, transmission apparatus, and transmission method
WO2014042368A1 (en) * 2012-09-12 2014-03-20 Lg Electronics Inc. Apparatus and method for processing an interactive service
US9253518B2 (en) 2012-11-09 2016-02-02 Sony Corporation On-demand access to scheduled content
US9148676B2 (en) 2012-12-04 2015-09-29 Sony Corporation Broadcast transition channel
US10244203B1 (en) * 2013-03-15 2019-03-26 Amazon Technologies, Inc. Adaptable captioning in a video broadcast
PL2982107T3 (pl) * 2013-04-05 2018-06-29 Koninklijke Philips N.V. Ponowne nakierowywanie sygnału trójwymiarowego obrazu
US9137566B2 (en) 2013-06-28 2015-09-15 Sony Corporation Distribution system, reception apparatus, and methods for transitioning to new services
US9038095B2 (en) 2013-07-03 2015-05-19 Sony Corporation Methods, information providing system, and reception apparatus for distribution of at least one content version
US8884800B1 (en) 2013-07-31 2014-11-11 Sony Corporation Method and apparatus for performing analog-to-digital conversion on multiple input signals
KR101801594B1 (ko) * 2014-04-27 2017-11-27 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
US9326295B1 (en) 2014-12-10 2016-04-26 Sony Corporation Method and apparatus for transmitting a-priori information in a communication system
US20160204804A1 (en) 2015-01-13 2016-07-14 Sony Corporation Data processing apparatus and method
US9762354B2 (en) 2015-01-27 2017-09-12 Sony Corporation Signaling methods and apparatus
CA2973328C (en) 2015-01-30 2019-11-26 Sharp Kabushiki Kaisha System for service usage reporting
US9912986B2 (en) 2015-03-19 2018-03-06 Sony Corporation System for distributing metadata embedded in video
US9756401B2 (en) 2015-04-07 2017-09-05 Sony Corporation Processing and providing an image in which a plurality of symbols are encoded
US9590782B2 (en) 2015-06-22 2017-03-07 Sony Corporation Signaling methods and apparatus
US10205991B2 (en) 2015-07-27 2019-02-12 Sony Corporation Hidden replaceable media slots
US10299008B1 (en) 2017-11-21 2019-05-21 International Business Machines Corporation Smart closed caption positioning system for video content
BR112020019890A2 (pt) * 2018-04-11 2021-01-05 Dolby International Ab Métodos, aparelho e sistemas para sinal pré-renderizado para renderização de áudio
KR102109514B1 (ko) * 2018-12-12 2020-06-12 유니마이크로텍(주) 동기화 패킷 송신 방법 및 수신 방법
US11625928B1 (en) * 2020-09-01 2023-04-11 Amazon Technologies, Inc. Language agnostic drift correction
CN114286154A (zh) * 2021-09-23 2022-04-05 腾讯科技（深圳）有限公司 多媒体文件的字幕处理方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7312891B2 (en) * 2001-04-06 2007-12-25 Canon Kabushiki Kaisha Image processing method and apparatus
WO2010010499A1 (en) * 2008-07-25 2010-01-28 Koninklijke Philips Electronics N.V. 3d display handling of subtitles
CN101653011A (zh) * 2007-03-16 2010-02-17 汤姆森许可贸易公司 用于将文本与三维内容相结合的系统和方法

Family Cites Families (167)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3676676D1 (de) * 1986-01-23 1991-02-07 Donald J Imsand Drei-dimensionales fernsehsystem.
US5200823A (en) * 1991-03-29 1993-04-06 Scientific-Atlanta, Inc. Virtual channels for a multiplexed analog component (mac) television system
US5294982A (en) 1991-12-24 1994-03-15 National Captioning Institute, Inc. Method and apparatus for providing dual language captioning of a television program
US5418782A (en) * 1992-10-30 1995-05-23 Scientific-Atlanta, Inc. Methods and apparatus for providing virtual service selection in a multi-service communications system
US6269363B1 (en) * 1994-01-24 2001-07-31 Yossi Matias Method of accessing data using approximate data structures by relaxing the operations that define same
US5534941A (en) * 1994-05-20 1996-07-09 Encore Media Corporation System for dynamic real-time television channel expansion
US5841433A (en) * 1994-12-23 1998-11-24 Thomson Consumer Electronics, Inc. Digital television system channel guide having a limited lifetime
JP3472659B2 (ja) * 1995-02-20 2003-12-02 株式会社日立製作所 映像供給方法および映像供給システム
CN1192602C (zh) * 1996-05-03 2005-03-09 三星电子株式会社 适于音节文字的观众选择型字幕播放和接收方法及其装置
JP3854691B2 (ja) * 1997-01-14 2006-12-06 キヤノン株式会社 無線通信システムおよび無線通信装置
US6043838A (en) * 1997-11-07 2000-03-28 General Instrument Corporation View offset estimation for stereoscopic video coding
US6252596B1 (en) * 1998-03-31 2001-06-26 Canon Kabushiki Kaisha Command entry highlight editing for a menu selection system and method
US6433835B1 (en) * 1998-04-17 2002-08-13 Encamera Sciences Corporation Expanded information capacity for existing communication transmission systems
JP4034886B2 (ja) 1998-10-13 2008-01-16 富士通株式会社 半導体装置
US7446774B1 (en) * 1998-11-09 2008-11-04 Broadcom Corporation Video and graphics system with an integrated system bridge controller
US6480819B1 (en) * 1999-02-25 2002-11-12 Matsushita Electric Industrial Co., Ltd. Automatic search of audio channels by matching viewer-spoken words against closed-caption/audio content for interactive television
US6266094B1 (en) * 1999-06-14 2001-07-24 Medialink Worldwide Incorporated Method and apparatus for the aggregation and selective retrieval of television closed caption word content originating from multiple geographic locations
DE60138330D1 (de) * 2000-02-28 2009-05-28 Hitachi Int Electric Inc Vorricht ung und Systemzur Überwachung von eingedrungenen Objekte
US7035292B1 (en) * 2000-03-17 2006-04-25 Applied Micro Circuits Corporation Transposable frame synchronization structure
US20040125877A1 (en) * 2000-07-17 2004-07-01 Shin-Fu Chang Method and system for indexing and content-based adaptive streaming of digital video content
US8051212B2 (en) * 2001-04-11 2011-11-01 Mellanox Technologies Ltd. Network interface adapter with shared data send resources
US7110664B2 (en) * 2001-04-20 2006-09-19 Front Porch Digital, Inc. Methods and apparatus for indexing and archiving encoded audio-video data
US20030066081A1 (en) * 2001-07-27 2003-04-03 Barone Samuel T. Command protocol for interactive TV production tools
AUPR676201A0 (en) * 2001-08-01 2001-08-23 Canon Kabushiki Kaisha Video feature tracking with loss-of-track detection
US6952236B2 (en) 2001-08-20 2005-10-04 Ati Technologies, Inc. System and method for conversion of text embedded in a video stream
US8880709B2 (en) * 2001-09-12 2014-11-04 Ericsson Television Inc. Method and system for scheduled streaming of best effort data
US7319720B2 (en) * 2002-01-28 2008-01-15 Microsoft Corporation Stereoscopic video
US20040017831A1 (en) * 2002-04-05 2004-01-29 Jian Shen System and method for processing SI data from multiple input transport streams
US7614066B2 (en) * 2002-05-03 2009-11-03 Time Warner Interactive Video Group Inc. Use of multiple embedded messages in program signal streams
KR100468163B1 (ko) * 2002-06-22 2005-01-26 삼성전자주식회사 디지털 비디오 수신기 및 그 스트림 생성방법
CN1682539A (zh) * 2002-07-16 2005-10-12 韩国电子通信研究院 用于适配2d和3d立体视频信号的装置和方法
ATE433590T1 (de) * 2002-11-27 2009-06-15 Vision Iii Imaging Inc Abtastung der parallaxe durch manipulation der position der gegenstände in einer szene
KR100751422B1 (ko) * 2002-12-27 2007-08-23 한국전자통신연구원 스테레오스코픽 비디오 부호화 및 복호화 방법, 부호화 및복호화 장치
JP2004274125A (ja) * 2003-03-05 2004-09-30 Sony Corp 画像処理装置および方法
US7606391B2 (en) * 2003-07-25 2009-10-20 Sony Corporation Video content scene change determination
CA2536260A1 (en) * 2003-08-26 2005-03-03 Clearplay, Inc. Method and apparatus for controlling play of an audio signal
WO2005027490A2 (en) * 2003-09-05 2005-03-24 Thomson Licensing S.A. Auxiliary information processing system
KR100565614B1 (ko) 2003-09-17 2006-03-29 엘지전자 주식회사 캡션 송수신 방법
CN1890967B (zh) * 2003-12-08 2010-11-17 汤姆逊许可公司 电视接收器中的数字/模拟隐藏式字幕显示系统
US8094927B2 (en) * 2004-02-27 2012-01-10 Eastman Kodak Company Stereoscopic display system with flexible rendering of disparity map according to the stereoscopic fusing capability of the observer
US20060067592A1 (en) * 2004-05-27 2006-03-30 Walmsley Simon R Configurable image processor
JP2006033677A (ja) * 2004-07-21 2006-02-02 Matsushita Electric Ind Co Ltd 映像再生出力装置及び映像再生出力方法
KR100995042B1 (ko) * 2004-07-23 2010-11-22 엘지전자 주식회사 디지털 방송 수신기 및 그의 긴급 경고 메시지 처리 방법
JP3753726B1 (ja) * 2004-10-13 2006-03-08 シャープ株式会社 動画像再符号化装置、動画像編集装置、プログラム、及び記録媒体
KR101041814B1 (ko) * 2005-02-15 2011-06-17 엘지전자 주식회사 무선 이동통신 시스템에서 점대다 멀티미디어 서비스 제공방법
US8745687B2 (en) * 2005-02-15 2014-06-03 Sony Corporation Digital closed caption transport in standalone stream
US20090207305A1 (en) * 2005-02-28 2009-08-20 Panasonic Corporation Caption Display Device
CN100576251C (zh) * 2005-04-19 2009-12-30 皇家飞利浦电子股份有限公司 呈现单元、呈现方法以及图像处理设备
US7492752B2 (en) * 2005-05-25 2009-02-17 Motorola, Inc. Method and apparatus for improved channel maintenance signaling
JP2007097090A (ja) * 2005-09-30 2007-04-12 Fujifilm Corp 画像表示装置および方法ならびにプログラム、さらに写真プリント注文受付装置
US20070124768A1 (en) * 2005-11-30 2007-05-31 Microsoft Corporation Media content menu navigation and customization
KR101249988B1 (ko) * 2006-01-27 2013-04-01 삼성전자주식회사 사용자의 위치에 따른 영상을 디스플레이하는 장치 및 방법
WO2007086860A1 (en) * 2006-01-27 2007-08-02 Thomson Licensing Closed-captioning system and method
KR20070079258A (ko) * 2006-02-01 2007-08-06 엘지전자 주식회사 데이터 방송을 수신할 수 있는 방송 수신기의 사용자 선호옵션 제어 방법, 클래스와 인터페이스 구조 및 이를 위한방송 수신기
US8576882B2 (en) * 2006-05-11 2013-11-05 Blackberry Limited Media access control protocol for multi-hop network systems and method therefore
CN101449587A (zh) * 2006-06-08 2009-06-03 汤姆逊许可公司 用于视频的场景切换检测
KR100771244B1 (ko) * 2006-06-12 2007-10-29 삼성전자주식회사 동영상 데이터 처리 방법 및 장치
EP1870813B1 (en) * 2006-06-19 2013-01-30 Texas Instruments France Page processing circuits, devices, methods and systems for secure demand paging and other operations
US7664108B2 (en) * 2006-10-10 2010-02-16 Abdullah Ali Bahattab Route once and cross-connect many
KR20080036329A (ko) * 2006-10-23 2008-04-28 엘지전자 주식회사 캡션 디스플레이 장치 및 방법
US7999820B1 (en) * 2006-10-23 2011-08-16 Nvidia Corporation Methods and systems for reusing memory addresses in a graphics system
US20080098433A1 (en) * 2006-10-23 2008-04-24 Hardacker Robert L User managed internet links from TV
KR20090091646A (ko) * 2006-12-18 2009-08-28 소니 가부시끼 가이샤 촬상 장치 및 방법, 기록 장치 및 방법, 재생 장치 및 방법
US8369579B2 (en) * 2006-12-21 2013-02-05 Massachusetts Institute Of Technology Methods and apparatus for 3D surface imaging using active wave-front sampling
US20080180572A1 (en) * 2007-01-29 2008-07-31 Microsoft Corporation Enabling access to closed captioning data present in a broadcast stream
JP4331217B2 (ja) * 2007-02-19 2009-09-16 株式会社東芝 映像再生装置および方法
KR20070050419A (ko) * 2007-04-23 2007-05-15 삼성전자주식회사 캡션 표시 장치 및 그 방법
KR100962696B1 (ko) * 2007-06-07 2010-06-11 주식회사 이시티 부호화된 스테레오스코픽 영상 데이터 파일의 구성방법
US20080316303A1 (en) * 2007-06-08 2008-12-25 Joseph Chiu Display Device
US9209937B2 (en) * 2007-06-28 2015-12-08 Telefonaktiebolaget L M Ericsson (Publ) Reliable decoding of a high-speed shared control channel
KR20090004661A (ko) 2007-07-04 2009-01-12 엘지전자 주식회사 디지털 방송 시스템 및 데이터 처리 방법
JP4793339B2 (ja) * 2007-07-09 2011-10-12 ソニー株式会社 動画像変換装置、動画像復元装置、および方法、並びにコンピュータ・プログラム
US8958486B2 (en) * 2007-07-31 2015-02-17 Cisco Technology, Inc. Simultaneous processing of media and redundancy streams for mitigating impairments
US20090060055A1 (en) * 2007-08-29 2009-03-05 Sony Corporation Method and apparatus for encoding metadata into a digital program stream
KR101456633B1 (ko) * 2008-01-21 2014-11-06 삼성전자주식회사 방송 신호의 부가 데이터를 처리하는 방법 및 장치, 방송신호를 녹화하는 방법 및 장치, 녹화된 방송 신호를재생하는 방법 및 장치
CN101534377A (zh) * 2008-03-13 2009-09-16 扬智科技股份有限公司 根据节目内容自动改变字幕设定的方法与系统
US8621505B2 (en) * 2008-03-31 2013-12-31 At&T Intellectual Property I, L.P. Method and system for closed caption processing
WO2009123066A1 (ja) * 2008-04-03 2009-10-08 日本電気株式会社 画像処理方法、画像処理装置及び記録媒体
WO2009139740A1 (en) 2008-05-12 2009-11-19 Thomson Licensing System and method for measuring potential eyestrain of stereoscopic motion pictures
KR20100002032A (ko) * 2008-06-24 2010-01-06 삼성전자주식회사 영상 생성 방법, 영상 처리 방법, 및 그 장치
WO2009157707A2 (en) * 2008-06-24 2009-12-30 Samsung Electronics Co,. Ltd. Image processing method and apparatus
US20100002134A1 (en) * 2008-07-03 2010-01-07 Sony Corporation Communication system with display status
JP4792127B2 (ja) * 2008-07-24 2011-10-12 パナソニック株式会社 立体視再生が可能な再生装置、再生方法、プログラム
US20100039558A1 (en) * 2008-08-12 2010-02-18 Richard Detore Real time high definition caption correction
US8442831B2 (en) * 2008-10-31 2013-05-14 International Business Machines Corporation Sound envelope deconstruction to identify words in continuous speech
EP2356820B1 (en) * 2008-12-02 2017-07-19 LG Electronics Inc. 3d caption display method and 3d display apparatus for implementing the same
US8339441B2 (en) * 2008-12-26 2012-12-25 Kabushiki Kaisha Toshiba Frame processing device, television receiving apparatus and frame processing method
KR101622691B1 (ko) * 2009-01-08 2016-05-19 엘지전자 주식회사 3차원 캡션 신호 전송 방법 및 3차원 캡션 디스플레이 방법
US8265450B2 (en) * 2009-01-16 2012-09-11 Apple Inc. Capturing and inserting closed captioning data in digital video
CN102292993B (zh) 2009-01-20 2015-05-13 Lg电子株式会社 三维字幕显示方法以及用于实现该方法的三维显示装置
US8269821B2 (en) * 2009-01-27 2012-09-18 EchoStar Technologies, L.L.C. Systems and methods for providing closed captioning in three-dimensional imagery
EP2521363B1 (en) * 2009-02-19 2014-05-14 Panasonic Corporation Playback device
FI20095273A0 (fi) * 2009-03-17 2009-03-17 On2 Technologies Finland Oy Digitaalinen videokoodaus
JP2010250562A (ja) * 2009-04-15 2010-11-04 Sony Corp データ構造、記録媒体、再生装置および再生方法、並びにプログラム
JP5414357B2 (ja) * 2009-05-20 2014-02-12 キヤノン株式会社 撮像装置および再生装置
JP5429034B2 (ja) * 2009-06-29 2014-02-26 ソニー株式会社 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP4934701B2 (ja) * 2009-06-30 2012-05-16 株式会社日立製作所 ステレオ画像処理装置およびステレオ画像処理方法
MX2011002003A (es) * 2009-07-10 2011-03-29 Panasonic Corp Medio de grabacion, dispositivo de reproduccion y circuito integrado.
US8428122B2 (en) * 2009-09-16 2013-04-23 Broadcom Corporation Method and system for frame buffer compression and memory resource reduction for 3D video
US8705933B2 (en) 2009-09-25 2014-04-22 Sony Corporation Video bookmarking
US20110081133A1 (en) * 2009-10-05 2011-04-07 Xuemin Chen Method and system for a fast channel change in 3d video
US9277183B2 (en) 2009-10-13 2016-03-01 Sony Corporation System and method for distributing auxiliary data embedded in video data
US8839338B2 (en) 2012-03-28 2014-09-16 Sony Corporation Service usage reporting data transport
US8941779B2 (en) 2012-03-21 2015-01-27 Sony Corporation Non-closed caption data transport in standard caption service
US8878913B2 (en) * 2010-03-12 2014-11-04 Sony Corporation Extended command stream for closed caption disparity
US9723360B2 (en) 2010-04-01 2017-08-01 Saturn Licensing Llc Interests and demographics profile for advanced broadcast services
US9706158B2 (en) 2010-04-01 2017-07-11 Saturn Licensing Llc Receiver and method for reporting the usage of advanced television services
WO2011123178A1 (en) * 2010-04-01 2011-10-06 Thomson Licensing Subtitles in three-dimensional (3d) presentation
US20110247028A1 (en) 2010-04-01 2011-10-06 Mark Eyer Receiver and System Using an Electronic Questionnaire for Advanced Broadcast Services
JP2011239169A (ja) * 2010-05-10 2011-11-24 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
JP2011249945A (ja) * 2010-05-24 2011-12-08 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US20110302599A1 (en) 2010-06-07 2011-12-08 Mark Kenneth Eyer TV-Centric Actions in Triggered Declarative Objects
US8863171B2 (en) 2010-06-14 2014-10-14 Sony Corporation Announcement of program synchronized triggered declarative objects
US9258544B2 (en) * 2010-06-27 2016-02-09 Lg Electronics Inc. Digital receiver and method for processing caption data in the digital receiver
US8898723B2 (en) 2010-08-20 2014-11-25 Sony Corporation Virtual channel declarative script binding
US8893210B2 (en) 2010-08-20 2014-11-18 Sony Corporation Server load balancing for interactive television
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
JP5765558B2 (ja) 2010-08-27 2015-08-19 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
US8909694B2 (en) 2010-08-27 2014-12-09 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US20120050619A1 (en) 2010-08-30 2012-03-01 Sony Corporation Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
CN103081508B (zh) 2010-08-30 2016-03-23 索尼公司 接收设备、接收方法和程序
US8918801B2 (en) 2010-08-30 2014-12-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, reception method, program, and broadcasting system
US10511887B2 (en) 2010-08-30 2019-12-17 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US8892636B2 (en) 2010-08-30 2014-11-18 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
EP2612501B1 (en) * 2010-09-01 2018-04-25 LG Electronics Inc. Method and apparatus for processing and receiving digital broadcast signal for 3-dimensional display
JP5757075B2 (ja) 2010-09-15 2015-07-29 ソニー株式会社 送信装置、送信方法、受信装置、受信方法、プログラム、および放送システム
US9986270B2 (en) 2010-09-21 2018-05-29 Saturn Licensing Llc Reception and transmission of trigger information for application program control
JP5703664B2 (ja) 2010-09-30 2015-04-22 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
KR101926203B1 (ko) 2010-10-01 2018-12-06 소니 주식회사 정보 처리 장치, 정보 처리 방법 및 프로그램
US8842974B2 (en) 2010-10-01 2014-09-23 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program, and content delivery system
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
US8908103B2 (en) 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
US8872888B2 (en) 2010-10-01 2014-10-28 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system
US20120185888A1 (en) 2011-01-19 2012-07-19 Sony Corporation Schema for interests and demographics profile for advanced broadcast services
JP5793871B2 (ja) 2011-01-25 2015-10-14 ソニー株式会社 受信装置、受信方法、供給装置、供給方法、プログラム、および放送システム
JP5783402B2 (ja) 2011-01-25 2015-09-24 ソニー株式会社 受信装置、受信方法、供給装置、供給方法、プログラム、および放送システム
JP5668512B2 (ja) 2011-02-15 2015-02-12 ソニー株式会社 情報処理装置、及び、情報処理方法
TWI574565B (zh) 2011-03-31 2017-03-11 Sony Corp A transmitting apparatus, a transmitting method, a receiving apparatus, a receiving method, a computer-readable medium, and a broadcasting system
US8886009B2 (en) 2011-04-26 2014-11-11 Sony Corporation Creation of video bookmarks via scripted interactivity in advanced digital television
TWI545955B (zh) 2011-04-28 2016-08-11 Sony Corp Signal receiving apparatus and method, a signal transmission apparatus and method, and program
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
US8917358B2 (en) 2011-07-27 2014-12-23 Sony Corporation Reception apparatus, terminal apparatus, control method, program, and communication system
US10491966B2 (en) 2011-08-04 2019-11-26 Saturn Licensing Llc Reception apparatus, method, computer program, and information providing apparatus for providing an alert service
RU2594000C2 (ru) 2011-08-05 2016-08-10 Сони Корпорейшн Приемное устройство, способ приема, носитель записи и система обработки информации
CA2842152C (en) 2011-08-24 2020-03-10 Sony Corporation Reception apparatus, reception method, program and information processing system
US20130055313A1 (en) 2011-08-31 2013-02-28 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for accessing content from a plurality of content sources
TWI528749B (zh) 2011-09-06 2016-04-01 Sony Corp A signal receiving device, a signal receiving method, an information processing program and an information processing system
US9374620B2 (en) 2011-10-21 2016-06-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and interlocked application feed system
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
US9113230B2 (en) 2011-12-21 2015-08-18 Sony Corporation Method, computer program, and reception apparatus for delivery of supplemental content
US8930988B2 (en) 2011-12-21 2015-01-06 Sony Corporation Reception apparatus, reception method, program, and information processing system
KR102057107B1 (ko) 2012-01-24 2019-12-18 소니 주식회사 수신 장치, 수신 방법, 프로그램 및 정보 처리 시스템
MX338815B (es) 2012-02-07 2016-05-03 Sony Corp Dispositivo de recepcion, metodo de recepcion, y programa.
US9936231B2 (en) 2012-03-21 2018-04-03 Saturn Licensing Llc Trigger compaction
US20130282870A1 (en) 2012-04-18 2013-10-24 Sony Corporation Reception apparatus, reception method, transmission apparatus, transmission method, and program
US10104447B2 (en) 2012-06-19 2018-10-16 Saturn Licensing Llc Extensions to trigger parameters table for interactive television
US9456245B2 (en) 2012-07-05 2016-09-27 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method for controlling applications
MY177736A (en) 2012-07-12 2020-09-23 Sony Corp Parameterized services descriptor for advanced television services
US9432744B2 (en) 2012-07-31 2016-08-30 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method
US9154840B2 (en) 2012-07-31 2015-10-06 Sony Corporation Reception apparatus, reception method, transmission apparatus, and transmission method
US9883247B2 (en) 2012-08-13 2018-01-30 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, and transmission method
MX343095B (es) 2012-08-15 2016-10-25 Sony Corp Distribucion por banda ancha de informacion de personalizacion para servicios de tv avanzados.
US9264648B2 (en) 2012-10-09 2016-02-16 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method
US10002206B2 (en) 2012-10-26 2018-06-19 Saturn Licensing Llc Information processing device and information processing method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7312891B2 (en) * 2001-04-06 2007-12-25 Canon Kabushiki Kaisha Image processing method and apparatus
CN101653011A (zh) * 2007-03-16 2010-02-17 汤姆森许可贸易公司 用于将文本与三维内容相结合的系统和方法
WO2010010499A1 (en) * 2008-07-25 2010-01-28 Koninklijke Philips Electronics N.V. 3d display handling of subtitles

Also Published As

Publication number Publication date
EP2524512A1 (en) 2012-11-21
US20110221863A1 (en) 2011-09-15
KR20120042711A (ko) 2012-05-03
KR101320175B1 (ko) 2013-10-23
WO2011112392A1 (en) 2011-09-15
KR101323424B1 (ko) 2013-10-29
EP2545705A4 (en) 2014-06-25
US9521394B2 (en) 2016-12-13
US20140253683A1 (en) 2014-09-11
US20110221873A1 (en) 2011-09-15
KR20120039506A (ko) 2012-04-25
JP2013521708A (ja) 2013-06-10
US8878913B2 (en) 2014-11-04
WO2011112381A1 (en) 2011-09-15
EP2545705A1 (en) 2013-01-16
MX2012010002A (es) 2012-10-01
EP2524512A4 (en) 2014-06-25
CA2791916A1 (en) 2011-09-15
US8817072B2 (en) 2014-08-26
JP5545605B2 (ja) 2014-07-09
KR20120039505A (ko) 2012-04-25
US8730301B2 (en) 2014-05-20
CN102783159A (zh) 2012-11-14
US20110221862A1 (en) 2011-09-15
WO2011112370A8 (en) 2011-12-08
KR101295451B1 (ko) 2013-08-09
WO2011112370A1 (en) 2011-09-15
US20140218475A1 (en) 2014-08-07

Similar Documents

Publication Publication Date Title
CN102783159B (zh) 视差数据传输和信号发送
CN102685524B (zh) 标准字幕服务中的像差数据传输
US9961325B2 (en) 3D caption display method and 3D display apparatus for implementing the same
US9253469B2 (en) Method for displaying 3D caption and 3D display apparatus for implementing the same
KR20110053160A (ko) 비디오 부가 재생 정보의 3차원 깊이감 조절을 위한 멀티미디어 스트림 생성 방법과 그 장치, 및 수신 방법과 그 장치
EP2524513A1 (en) Service linkage to caption disparity data transport

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150617

Termination date: 20200225

CF01 Termination of patent right due to non-payment of annual fee