CN102685524B - 标准字幕服务中的像差数据传输 - Google Patents

标准字幕服务中的像差数据传输 Download PDF

Info

Publication number
CN102685524B
CN102685524B CN201210036132.0A CN201210036132A CN102685524B CN 102685524 B CN102685524 B CN 102685524B CN 201210036132 A CN201210036132 A CN 201210036132A CN 102685524 B CN102685524 B CN 102685524B
Authority
CN
China
Prior art keywords
service
data
aberration data
closed caption
aberration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201210036132.0A
Other languages
English (en)
Other versions
CN102685524A (zh
Inventor
马克·肯尼思·艾耶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102685524A publication Critical patent/CN102685524A/zh
Application granted granted Critical
Publication of CN102685524B publication Critical patent/CN102685524B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H04N7/087—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only
    • H04N7/088—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital
    • H04N7/0882—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital for the transmission of character code signals, e.g. for teletext

Abstract

本发明涉及标准字幕服务中的像差数据传输。一种针对三维视频来处理用于隐藏字幕的像差数据的方法，包括：在具有范围在1-6的服务编号的第一标准服务块中接收包括隐藏字幕文本的隐藏字幕数据；在服务编号等于n的标准服务块中接收隐藏字幕像差数据，其中n在1到6之间；接收将像差数据的每个实例与相应的标准服务相关联的链接字段；从出现在服务编号n中的隐藏字幕数据解析像差数据；以及处理所述字幕文本和像差数据，以产生适合于定义在由所述像差数据所定义的z轴位置上、字幕文本的在显示器上的三维图像呈现的输出。该摘要不被认为是限制性的，因为其他实施例可能偏离该摘要中所描述的特征。

Description

标准字幕服务中的像差数据传输
技术领域
本发明涉及标准字幕服务中的像差数据传输。
背景技术
当隐藏字幕(closed captions，CC)伴有三维(3D)立体视频节目时，需要定义字幕出现在z轴(深度)上的何处以及如何将该信息传达给接收器的标准。如果没有这样的信令，字幕可能无法被最优地放到视频显示屏上，从而不会干扰其它视频对象或被其他视频对象所干扰。
发明内容
根据本发明的一方面，提供了一种针对三维视频来处理用于隐藏字幕的像差数据的方法，包括：在具有范围在1-6的服务编号的第一标准服务块中接收包括隐藏字幕文本的隐藏字幕数据；在服务编号等于n的标准服务块中接收隐藏字幕像差数据，其中n在1到6之间；接收将所述像差数据的每个实例与相应的标准服务相关联的链接字段；从出现在服务编号n中的隐藏字幕数据解析所述像差数据；以及处理所述字幕文本和像差数据，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出。
根据本发明的另一方面，提供了一种针对三维视频来处理用于隐藏字幕的像差数据的方法，包括：在具有范围在1-6的服务编号的服务块中接收包括隐藏字幕文本的隐藏字幕数据；在服务编号等于6的标准服务块中接收隐藏字幕像差数据；接收将所述像差数据的每个实例与相应的标准服务块相关联的链接字段；从出现在服务编号6中的隐藏字幕数据解析所述像差数据；以及处理所述字幕文本和像差数据，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出。
根据本发明的又一方面，提供了一种处理用于隐藏字幕的像差数据的电视接收器设备，包括：接收器，该接收器在具有范围在1-6的服务编号的服务块中接收包括隐藏字幕文本的隐藏字幕数据；该接收器还在服务编号等于n的标准服务块中接收隐藏字幕像差数据，其中n在1到6之间；该接收器还接收将所述像差数据的每个实例与相应的标准服务相关联的链接字段；一个或多个处理器，所述处理器从出现在服务编号n中的隐藏字幕数据解析所述像差数据；这一个或多个处理器处理所述字幕文本和像差数据，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出；以及合成器，该合成器接收并处理所述像差数据和所述字幕文本，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出。
根据本发明的又一方面，提供了一种处理用于隐藏字幕的像差数据的电视接收器设备，包括：接收器，该接收器在具有范围在1-6的服务编号的服务块中接收包括隐藏字幕文本的隐藏字幕数据；该接收器还在服务编号等于n的标准服务块中接收隐藏字幕像差数据，其中n在1到6之间；该接收器还接收将所述像差数据的每个实例与相应的标准服务相关联的链接字段；解析器，该解析器从出现在服务编号n中的隐藏字幕数据解析所述像差数据；一个或多个处理器，这一个或多个处理器处理所述字幕文本和像差数据，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出；以及合成器，该合成器接收并处理所述像差数据和所述字幕文本，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出。
附图说明
通过结合附图参考以下详细描述，可以最好地理解用来说明组织和操作方法的某些示例性实施例以及目的和优势，在附图中：
图1是符合本发明某些实施例的caption_disparity_data()命令的布置示例。
图2是符合本发明某些实施例的所创作的像差(disparity)数据的分段线性近似的示例。
图3是符合本发明某些实施例的编码器的示例。
图4是符合本发明某些实施例的解码器的示例。
图5是符合本发明某些实施例的电视接收器设备的示例。
图6是符合本发明某些实施例的过程的示例性流程图。
图7是符合本发明某些实施例的电视接收器设备的示例性实现方式框图。
具体实施方式
虽然本发明能够以很多不同形式实现实施例，但是附图中所示出并且这里详细描述的将是特定实施例，需要理解，这些实施例的公开将被认为是原理的示例，而不希望将本发明局限于所示出和描述的特定实施例。在以下描述中，在若干视图中的类似标号被用来描述相同、相似或相应部分。
这里所使用的术语“一”或“一个”被定义为一个或多于一个。这里所使用的术语“多个”被定义为两个或多于两个。这里所使用的术语“另一个”被定义为至少第二个或更多个。这里所使用的术语“包括”和/或“具有”被定义为包含(即，开放语言)。这里所使用的术语“耦合”被定义为连接，但是不一定是直接连接，也不一定是机械连接。这里所使用的术语“程序”或“计算机程序”或类似术语被定义为被设计用于在计算机系统上执行的指令序列。“程序”或“计算机程序”可以包括子例程、程序模块、脚本、功能、规程(procedure)、对象方法、对象实现方式、可执行应用、小应用程序(applet)、服务器应用程序(servlet)、源代码、目标代码、共享库/动态负载库和/或被设计用于在计算机系统上执行的其他指令序列。
这里所使用的术语“program”还可以在第二上下文(以上定义被用于第一上下文)中使用。在第二上下文中，该术语被用于“电视节目”的意思。在该上下文中，该术语被用来指音频视频内容的任意连贯序列，例如被解释为并在电子节目导引(EPG)中被报告为单个电视节目的那些音频视频内容，不考虑该内容是否是电影、体育事件、多集连续剧的片断、新闻广播、等等。该术语还可以被解释为包含商业广告和不能在电子节目导引中作为节目报告的其他类似节目的内容。
贯穿本文档中所提到的“一个实施例”、“某些实施例”、“实施例”、“实现方式”、“示例”或类似术语意思是结合该实施例所描述的特定特征、结构或特性被包括在本发明的至少一个实施例中。因此，在本说明书各处出现这些短语不一定都指代同一实施例。此外，特定的特征、结构或特性可以按任意合适的方式在一个或多个实施例中组合而没有限制。
这里所使用的术语“或”被解释为包含的或者意思是任意一个或任意组合。因此，“A、B或C”意思是“下列各项中的任意一种：A；B；C；A和B；A和C；B和C；A、B和C”。这种定义的例外将仅仅发生在元件、功能、步骤或动作的组合以某种方式固有地相互排斥时。
当在3D视频节目的显示中呈现隐藏字幕时，CC窗口和相关文本可能被呈现在屏幕的平面上，除非采取步骤来呈现窗口和文本以使得它们出现在不同的、更适合的感知深度上。3D内容中的场景中的一个物体可以被呈现为由观看者看来显得在显示屏幕的平面前方的一定距离。如果深度在显示平面上的字幕窗口被放置在该物体上方，则将发生“深度违反(depth violation)”。在此情况下，向观看者呈现出冲突的深度提示(depth cue)，这种情况会导致眼睛疲劳和不舒服。由于在字幕被简单地置于屏幕平面上的情况下字幕可能在z轴上与场景中的内容交叉，因此字幕的呈现优选地针对视频呈现的主题被个别地创作。为了实现这一点，可以将额外信息与字幕一道发送，以定义包含字幕文本的窗口在z轴上的被感知放置(在屏幕平面前方或后方指定的距离)，以进行有效的呈现并避免干扰场景中的物体。可以设计多种技术来提供该信息，但是很多技术有缺点。
立体3D电视涉及向显示屏幕传递分离的用于左眼和右眼的视图，并且配有用于允许观看者的每只眼睛只看到针对这只眼睛的图像的方法。当针对给定物体，左眼视图和右眼视图在该物体的水平放置位置上不同时，则实现了深度幻觉。与三维显示系统有关的基本技术的概述在如下文章中被描述：“3D Display Systems”，Nick Holliman博士，Durham大学计算机科学系，科学实验室，South Road，Durham DH13LE，UK(具体参见第10-11页以及图5)，该文档通过引用被整体上结合于此。
这里所使用的术语“像差”可以被更正规地称为“屏幕像差”(即，在屏幕上被测量)以区别于“视网膜像差”，并被定义为在屏幕上所显示的一对并排立体图像中右眼图像和左眼图像中的相应点的物理x坐标之差。为了简化，这里将使用不太正规的术语“像差”。传统上，当像差为负时(例如，当左眼图像在屏幕上被呈现在右眼图像的右侧时)，感觉该物体在屏幕平面的前方。当像差为正时(例如，当左眼图像在屏幕上被呈现在右眼图像的左侧时)，感觉该物体在屏幕平面的后方。
术语“像差数据”可以指用于指示被用于呈现给定图形对象(例如字幕窗口及其相关文本)的像差值的任意数据。该术语还可以更一般地指代反映物体在当前场景中的z轴位置的数据。场景区域可以被绘制成多个分区，物体在每个分区中最接近观看者的z轴位置被记录为图(map)中的一个坐标。这样的图可以被称为“像差图”或“深度图”。像差图可以逐帧改变并且可以用任意多种方式来表示。注意，像差是左眼图像和右眼图像的水平偏移的度量，但是，该偏移不需要是整数个像素，因为分数的像素偏移是完全可接受的。
在传递3D视频和CC内容以用于显示的上下文中，像差一般被表示为附带视频的宽度的百分比。因此，它是无维度的数字。例如，信令方案可以指定：一个单位的像差等于视频内容的宽度的1/1920。但是，即使对于1920个像素的屏幕宽度，1/1920的像差也不是实际像差的最小增量。根据该定义，像差7指的是等于视频内容的宽度的7/1920的距离。再根据该定义，在水平分辨率为1920像素的屏幕的特殊情况下，得出一个完整单位的像差与一个显示像素具有相同宽度，但这应该被认为是一种特殊情况。如果显示屏幕具有少于1920个水平像素，例如1600个水平像素，则像差被相应地进行比例缩放，并且像差7等于(7/1920)(1600)＝5.83像素。因此，像差应该被最适当地视为：在一对并排的立体图像中，左眼图像和右眼图像中的相应点沿着x轴(水平)在屏幕上的物理位置之差。还值得注意的是，CC窗口一般是二维窗口，其沿z轴布置并且被感觉是在与显示屏幕的平面平行的平面中。
这里的主题是解决涉及支持3D字幕服务的数据传输的问题。需要一种在兼容CEA-708的设备的DTV字幕信道中传递数据的方法，所述兼容CEA-708的设备几乎可确定是与旧的(现有的、场扫描的(fielded))字幕解码器向后兼容的。一种可能性是使用在如下专利申请中所描述的扩展信道：Eyer等人于2011年2月8日递交的题为“Extended CommandStream for Closed Caption Disparity”的美国专利申请13/022,810，该申请通过引用被整体上结合于此。在前述应用中，使用扩展服务(ExtendedService)编号来运载像差数据。
用于3D音频/视频内容的隐藏字幕数据包括字幕窗口属性和文本的定义以及指定每个字幕窗口将在3D视频上方被呈现的z轴位置(深度)的像差数据两者。在某些内容创建和分发情形中，相同内容的2D版本通过不同路径被分发到接收器(例如，在线缆上的不同信道被广播)。包括像差数据的同一隐藏字幕数据可以附带内容的2D版本。由于内容的2D版本被无3D能力的接收器(其可以被称为“旧的”接收器)所处理，因此在处理字幕数据时，像差数据应该被适当地忽视或跳过。
用于高级字幕的CEA标准CEA-708包括多个规定，旨在用来允许未来对标准进行扩展。使用这些扩展之一来添加像差数据似乎是一种合乎逻辑的选择，但是，CEA-708字幕解码器的实现方式已被发现在它们处理这些扩展中的某些扩展的方式方面存在缺陷。CEA-708标准已被发现在某些区域中不清楚或令人混淆，该事实会导致实现错误或疏忽。
已经在寻找使得旧的解码器由于在字幕流中存在像差数据而被不利影响的可能性最小化的方法。这里所描述的方法涉及在已知与标准字幕服务之一相关联的分离的字幕服务中来传递像差数据。
CEA-708高级字幕标准支持多个同时的字幕服务，从而例如可针对同一节目提供不同语言的字幕。CEA-708在第9节定义了“最小解码器”。最小解码器被要求处理“标准”服务编号1到6。处理“扩展”服务7到63是可选的。摘自CEA-708：“解码器将能够解码所有字幕信道块头部，包括标准服务头部、扩展服务块头部和空块(Null Block)头部”。
这里所描述的像差数据传输方法之一涉及将3D数据放在“附属数据(Adjunct Data)”服务中。在该方法中，根据优选实现方式，标准服务编号6被认为是附属数据服务。服务6因此可以运载被接收器用来呈现字幕服务1到5以及服务6的数据。
可以设计这样的系统，其中字幕服务6(或在1-6范围内的某个其他标准服务编号)可以运载用于一个或多个标准服务的3D数据。例如，在标准服务#6中，可以存在用于将某块3D数据与标准服务(1-6)中的一个特定服务相关联的信令。在上面引用的扩展服务被使用的专利申请中，其提出使用标准服务来传送像差数据将是笨拙且效率低的。但是，根据进一步研究，注意到，在现实世界的情形中，使用多于一个或两个标准服务编号(通常为服务1、2，或许少有地包括3)的情况是罕见的。因此，虽然看起来笨拙且效率低，但是在现实世界的应用中，结果不是这样的。因此，虽然上面引用的专利申请设计了一种可靠方案来解决使用扩展服务传输像差数据的问题，但是还存在与所有旧接收器设备的兼容性的理论问题。
先前公开的主题的一个附加方面涉及一种方法，其中用来传输3D像差数据的数据结构使用CEA-708的被称为“可变长度”命令的可扩展性特征，如CEA-708-D Sec.7.1.11.2所定义的。这样的方法被认为是不适合用在大多数标准服务的上下文中，因为相信绝大多数现有的旧接收器不能处理该特征。这些接收器如果遭遇这些可变长度命令之一，则它们可能在屏幕上显示混乱的字幕输出。但是，如果在标准服务#6服务块中传递像差数据，则不会有问题，除非出现所有六个标准服务被同时使用的情况。在当前实践中，甚至两个字幕服务被同时使用的情况也是罕见的。以英语和西班牙语两者来配字幕的节目稍显罕见，但确实存在。以多于两种语言同时来配字幕的节目很少见，即使曾经产生过。因此，在服务#6中放置可变长度命令不会干扰当前大多数预期的字幕服务传递。
相信所有现有的接收器都能够适当地跳过与它们当前没在解码的服务编号相对应的服务块。此外，在接收器中适当地处理标准字幕服务1-6是FCC规则所要求的。如果任意旧接收器试图解码像差数据(这通常应该不会发生，因为包含像差数据的字幕服务在字幕服务描述符中没有被声明)，那么如果该接收器是根据CEA-708-D建立的，则将简单地忽略该命令的内容。
据上总结，要解决的若干问题是：
1.对于与旧设备兼容的3D像差数据的传递方法的需求(例如，在它们处理用于2D版本广播的字幕数据时不产生异常输出)。
2.在扩展服务(“扩展”范围7-63中的字幕服务)中传递3D数据是非常可行的，但是由于服务块中的额外字节，可能不代表用于帮助确保旧兼容性的最安全方案。
3.当在利用标准服务(例如服务#6)标识的字幕服务中发送3D像差数据时，该3D数据被链接到的2D服务的3比特标准服务编号被包括在每个可变长度命令中。
4.标准服务#6中的3D像差数据可能可以被旧解码器所解码(如果用户在菜单中选择服务#6的话)。在此情况下，该旧设备如果与CEA-708-D兼容地被建立，则将正确地解码-它应该简单地忽略作为不支持命令的该3D数据。
为了优化与旧解码器的兼容性(虽然不能够绝对确保所有旧解码器都能够适当地忽略该新命令)，可以使用在CEA-708-D Sec.7.1.11.2中定义的可变长度命令。这些命令使用“C3”命令(“C3代码集-扩展控制代码集2”)。如果被适当地实现，旧解码器则应该跳过可变长度命令，进而确保它们将不会采取不可预测的动作。
因此，为了帮助确保旧解码器不会由于尝试处理像差数据而发生故障，使用标准服务#6(在该示例性优选实现方式中)来传输像差数据。为了进一步防止旧解码器尝试呈现服务，可以使用可变长度命令来以任意合适的方式定义像差数据。虽然某些旧解码器可能不能适当地实现如CEA-708所定义的“跳过可变长度扩展”特征，但是由于它是一种“未经声明的”服务，因此观看者可能没有以任何方式被给予选择标准服务#6的选项。除非所有六个标准服务实际都运载字幕服务(即使存在，当前也被认为是极端罕见的情况)，否则服务#6将不会在ATSC A/65节目与系统信息协议(PSIP)中所定义的字幕服务描述符(CSD)中被声明。
示例性的可变长度像差命令在图1中被示为100。如CEA-708-D第7.1.11.2节所指定的，可变长度命令由EXT1字符指示，后面跟随一个范围在0x90到0x9F的数字，其中“0x”标注表明用十六进制格式表示的数字。在图1所示命令格式中，EXT1字符(0x10)后面跟随0x90。在此上下文中，0x90是SetDisparity(设置像差)命令的命令标识符。根据在CEA-708-D第7.1.11.2节中所定义的语法，下一字节包含2-比特类型字段、零比特、再跟着5-比特长度字段。
caption_disparity_data()数据结构跟随在包含长度字段的字节之后。字幕像差数据的一个示例的语法如下表中的伪代码所示，该表随后将详细描述。
图2是如上面引用的美国专利申请No.13/022,817中所述的、与本发明的某些实施例相一致的所创作的像差数据的分段线性近似的示例。
现在参考图3，诸如广播者之类的服务提供商的基本框图被示出。一般而言，单个服务提供商可以通过一个或多个传输流提供多个节目。音频、视频和字幕数据被提供到编码器，该编码器将数据编码成适合分发的分组，包括如上所述的字幕数据分组。如图所示，节目A和节目B被编码器402编码，然后被提供到传输流复用器410，然后传输流复用器410提供可以经由物理信道媒介(例如线缆或卫星广播)分发的输出。
来自物理信道的该编码数据在电视接收器设备(例如，电视机或机顶盒)处被接收，如图4所示。传输流在传输流解复用器504处被解复用，以产生包括音频、视频和字幕数据(以及可能未示出的其它数据)的一个或多个节目流。来自节目A的视频分组从解复用器504被传递到视频解析器508。来自节目A的音频分组从解复用器504被传递到音频解码器512，该音频解码器512进而产生音频输出。视频解析器508从视频流提取出视频分组并将它们传递到视频解码器514。视频解析器508从视频流提取出用户数据并将其传递到用户数据解析器510。用户数据解析器510从用户数据分组内提取出隐藏的字幕数据，并将其传递到字幕处理器516。在字幕处理器516中，包含除了感兴趣的字幕服务之外的字幕服务的数据的字幕服务块被过滤出并丢弃。当视频内容为3D时，字幕处理器516处理与感兴趣的主要服务相对应的字幕服务块，同时处理与被映射的附属数据服务相对应的字幕服务块。字幕处理器516的输出是隐藏字幕(通常是包含在字幕窗口中的文本)的图形表示。对于3D内容，字幕处理器516的输出是针对左眼视图和右眼视图的字幕的分开输出，并且适当的像差被应用以建立每个字幕窗口的被感知深度(z平面位置)。
字幕图形在合成器520中与视频数据合成以产生带有字幕的3D视频，所述字幕是根据字幕数据分组中的数据被放置在x、y和z平面上的。这样的数据可以根据字幕数据的创作以静态方式或动态地将字幕放置在z轴上。
在图5中更详细地示出接收器设备，其中，内容经由诸如地面广播、线缆或卫星之类的任意合适的源在接收器600的调谐器/解调器602处被接收。来自调谐器/解调器602的传输流在解复用器606处被解复用成音频和视频流。音频在音频解码器610处被解码，而视频在视频解码器614处被解码。未经压缩的A/V数据也可以经由可被选择性地利用的未经压缩A/V接口618被接收。
对于IP电视内容解码，A/V内容也可以经由网络接口626从因特网622被接收。另外，对于非实时(NRT)存储的内容，可以提供存储设备630。NRT内容可以按照与内容的其他源类似的方式通过606处的解复用被播放。接收器一般在处理器的控制下工作，该处理器例如是CPU 638，CPU 638经由一个或多个总线(例如650)连接到工作存储器640和程序存储器642以及图形子系统644。
CPU 638接收来自解复用器606的隐藏字幕数据并经由这里所描述的机制接收像差数据，并且通过解析附属数据服务中的数据来确定在什么z位置以及x和y位置放置字幕数据。该信息被传递到图形子系统644，并且图像在合成器660处被合成，以产生适合于处理以及在视频显示器上显示的输出。
以下方法克服了可替代的传递和传输方法存在的潜在问题。以下方法使用标准服务进行传输，因为使用标准服务进行传输可能是确保旧兼容性的最安全的可能方式。
根据该方法，标准服务#6(或者编号n等于服务1到6中的任意一个的另一标准服务)被定义为附属数据服务。附属数据服务的特性包括：
●被格式化为可变长度命令(参见CEA-708-D第7.1.11.2节，从0x90到0x9F的可变长度代码)，以使得被适当设计的接收器将丢弃这些分组的内容；
●在PSIP字幕服务描述符中不被声明(因此适当设计的接收器将不会向用户声明和提供包含附属数据的服务)；
●包括针对标准服务#1到#6的3D数据(特定数据块与哪个服务相关联在数据结构中用信号通知；见下面)。
该方法克服了以下潜在问题：
a.所有旧接收器可能无法被设计成适当地忽略扩展服务分组。这是因为CEA-708-D服务块(参见CEA-708-D中的表9)的数据结构在service_number字段＝“111”(十进制7)时包括一个额外字节。因此，使用扩展服务可能潜在地存在问题。
本发明将附属数据放在标准服务分组中。所有旧解码器应该都能够处理标准服务分组的存在性并且能够过滤出与它们未被设置来解码的服务(未被选择的服务)相对应的分组。
b.某些旧接收器可能不使用PSIP字幕服务描述符(CSD)来创建用于选择字幕服务的用户接口。在此情况下，用户可能选择字幕服务#6(附属数据信道)并尝试对其解码。所提议的方法使用接收器未知的“可变长度”命令。期望接收器丢弃不支持的命令，因此它们应该能够跳过适当数目的字节，以便丢弃该命令。在此情况下，没有什么将被显示用于服务#6。
甚至在有什么将被显示(垃圾字符或不管是什么)的情况下，用户也将确定这不是好的字幕服务并将选择一种更好的。因此，不会有损害发生。
由于可能有多个服务运载3D字幕(例如，不同语言)，因此该方法应该适应用于每个服务的不同像差数据的传输。这是使用如下所述的、以在技术标准中所用的格式被格式化的service_linkage字段来实现的。
SET DISPARITY(设置像差)-(DISP)
Name(名称)：SetDisparity-指定用于3D字幕的像差
Format(格式)：可变长度
Command Coding(命令编码)：EXT1，90h，Caption_disparity_data()
Description(描述)：字幕像差数据将使用下面定义的语法和语义在附属服务中的SetDisparity命令中被传输。SetDisparity指定在与立体3D节目一起使用字幕时，针对一个或多个字幕窗口在左眼视图和右眼视图之间的水平偏移量(屏幕像差)。
Caption disparity data(字幕像差数据)
Caption_disparity_data()的语法将在下表中示出：
表：字幕像差数据语法
上表中使用的术语被定义为如下：
command_length-5比特无符号整数，范围在3到27，指示在该Caption_disparity_data()的实例中跟随的字节数目。
service_linkage-3比特无符号整数，范围在1到6，指示该Caption_disparity_data()的实例与哪个标准字幕服务相关联。
caption_window_count-3比特无符号整数，范围在1到7，指示该Caption_disparity_data()的实例中所包括的字幕窗口的数目。
caption_window_id-3比特无符号整数，标识在“for”循环的这次迭代中像差数据被赋予的相应服务中的窗口ID。
temporal_extension_flag-1比特标志，当该标志被设置为“1”时，指示用于标识随着时间变化的像差路径的数据被包括。当该标志被设置为“0”时，指示在命令中出现的最后字段是disparity[i]。
disparity[i]-9比特2的补码带符号整数，指示相关的字幕窗口i(在caption_window_id中给出的)相对于1920个水平像素的像差值。值0将指代屏幕平面。负值对应于在屏幕前方的所感知深度。正值对应于在屏幕后方的所感知深度。
alternate_disparity[i]-9比特2的补码带符号整数，与disparity[i]一样地被编码；将指定一像差值，该像差值可被用于取代在分段线性路径中由不能呈现随时间变化的字幕窗口的解码器所给出的值。
segment_count-5比特无符号整数，范围在1到31，指示跟随的分段的数目。
frame_count-5比特无符号整数，范围在0到31，指示在应用紧跟其后的segment__slope_change字段之前将过去的视频帧的数目。
 segment_slope_change-5比特2的补码带符号整数，范围在-16到+15，指示在frame_count中所指示的帧处应用的斜率变化量。斜率用32帧期间的像差的像素数目来指定。斜率值0将假设位于随着时间变化的路径的起点处。
现在参考图6，在流程图900中示出针对三维视频来处理用于隐藏字幕的像差数据的示例性方法。该过程开始于904，其中，包括隐藏字幕文本的隐藏字幕数据在具有范围在1-6的服务编号的第一标准服务块中被接收。在908，隐藏字幕像差数据在具有等于6的服务编号的标准服务块中被接收。一般而言，用于像差数据的标准服务可以是介于1和6之间的服务编号n中的任意一个，但是由于比前面几个服务编号更大的服务编号将被用于字幕文本数据的情况相对罕见，因此服务编号6是优选的。在912，链接(linkage)字段也被接收，该字段将像差数据的每个实例与相应的标准服务相关联，以使得接收器可以正确地利用它希望与之关联的具有隐藏字幕文本的像差数据。
在916，接收器解析(例如，在解析计算机进程模块中)来自出现在服务编号6(或n)中的隐藏字幕数据的像差数据。字幕文本和像差数据随后在920被处理(例如，在另一处理器操作中)以产生一输出，该输出适合于定义在由像差数据所定义的z轴位置处、字幕文本的在显示器上的三维图像的呈现。字幕文本数据随后可以在924处作为3D立体图像被呈现在显示器上的隐藏字幕窗口内。优选地，上面引用的像差数据在兼容CEA-708的可变长度命令中被运载。
现在参考图7，示例性的电视接收器系统被示出，其中被编号的块对应于结合图5所描述的相同功能，其中的例外如下所述。在该系统940中，CPU 944接收经解复用的数字电视流，该数字电视流包含范围在1-6内的标准服务编号。它们在解析器704处被解析并被发送到标准服务处理块950。解析器704还解析出链接字段954，该链接字段954被提供到标准服务处理950以用于确定与来自708的隐藏字幕数据相关联的像差数据，并且在706解析用于其它数据处理的其它数据。该像差数据被传递到图形子系统644以进行处理，再到合成器660，以作为隐藏字幕窗口中的立体3D隐藏字幕文本显示在显示器(例如显示器970)上。
因此，针对三维视频来处理用于隐藏字幕的像差数据的方法包含：在具有范围在1-6的服务编号的第一标准服务块中接收包括隐藏字幕文本的隐藏字幕数据；在服务编号等于6的标准服务块中接收隐藏字幕像差数据；接收将所述像差数据的每个实例与相应的标准服务相关联的链接字段；从出现在服务编号6中的隐藏字幕数据解析像差数据；处理字幕文本和像差数据，以产生适合于定义在由像差数据所定义的z轴位置上、字幕文本的在三维电视显示器上的三维图像呈现的输出；其中，像差数据在兼容CEA-708的可变长度命令中被运载；并且在三维电视显示器上显示作为立体图像的隐藏字幕文本。
针对三维视频来处理用于隐藏字幕的像差数据的另一方法包含：在具有范围在1-6的服务编号的第一标准服务块中接收包括隐藏字幕文本的隐藏字幕数据；在服务编号等于n的标准服务块中接收隐藏字幕像差数据，其中n在1到6之间；接收将所述像差数据的每个实例与相应的标准服务相关联的链接字段；从出现在服务编号n中的隐藏字幕数据解析像差数据；以及处理字幕文本和像差数据，以产生适合于定义在由像差数据所定义的z轴位置上、字幕文本的在显示器上的三维图像呈现的输出。
在某些实现方式中，像差数据在兼容CEA-708的可变长度命令中被运载。在某些实现方式中，标准服务编号n等于服务编号6。在某些实现方式中，该方法还包括在显示器上显示作为立体图像的隐藏字幕文本。
针对三维视频来处理用于隐藏字幕的像差数据的另一方法包含：在具有范围在1-6的服务编号的服务块中接收包括隐藏字幕文本的隐藏字幕数据；在服务编号等于6的标准服务块中接收隐藏字幕像差数据；接收将所述像差数据的每个实例与相应的标准服务块相关联的链接字段；从出现在服务编号6中的隐藏字幕数据解析像差数据；以及处理字幕文本和像差数据，以产生适合于定义在由像差数据所定义的z轴位置上、字幕文本的在显示器上的三维图像呈现的输出。
在某些实现方式中，像差数据在兼容CEA-708的可变长度命令中被运载。在某些实现方式中，该方法还包括在显示器上显示作为立体图像的隐藏字幕文本。
诸如非瞬态存储介质之类的有形计算机可读存储介质或其他存储设备可以存储指令，当所述指令在一个或多个经编程的处理器上被执行时执行这里所公开的方法中的任意一个。
一种根据某些实现方式处理用于隐藏字幕的像差数据的电视接收器设备具有接收器，该接收器在具有范围在1-6的服务编号的服务块中接收包括隐藏字幕文本的隐藏字幕数据。接收器还在服务编号等于n的标准服务块中接收隐藏字幕像差数据，其中n在1到6之间。接收器还接收将所述像差数据的每个实例与相应的标准服务相关联的链接字段。一个或多个处理器充当解析器，该解析器从出现在服务编号n中的隐藏字幕数据解析像差数据。这一个或多个处理器处理字幕文本和像差数据，以产生适合于定义在由像差数据所定义的z轴位置上、字幕文本的在显示器上的三维图像呈现的输出。合成器接收和处理像差数据和字幕文本，以产生适合于定义在由像差数据所定义的z轴位置上、字幕文本的在显示器上的三维图像呈现的输出。
在某些实现方式中，像差数据在兼容CEA-708的可变长度命令中被运载。在某些实现方式中，标准服务编号n等于服务编号6。在某些实现方式中，接收器设备还具有诸如三维电视机之类的显示器，用于显示作为由合成器产生的立体图像的隐藏字幕文本。
另一种处理用于隐藏字幕的像差数据的电视接收器设备具有接收器，该接收器在具有范围在1-6的服务编号的服务块中接收包括隐藏字幕文本的隐藏字幕数据。接收器还在服务编号等于n的标准服务块中接收隐藏字幕像差数据，其中n在1到6之间。接收器还接收将所述像差数据的每个实例与相应的标准服务相关联的链接字段。解析器从出现在服务编号n中的隐藏字幕数据解析像差数据。一个或多个处理器处理字幕文本和像差数据，以产生适合于定义在由像差数据所定义的z轴位置上、字幕文本的在显示器上的三维图像呈现的输出。合成器接收和处理像差数据和字幕文本，以产生适合于定义在由像差数据所定义的z轴位置上、字幕文本的在显示器上的三维图像呈现的输出。
在某些实现方式中，像差数据在兼容CEA-708的可变长度命令中被运载。在某些实现方式中，标准服务编号n等于服务编号6。在某些实现方式中，三维电视显示器显示作为由合成器产生的立体图像的隐藏字幕文本。
另一种处理用于隐藏字幕的像差数据的电视接收器设备具有三维电视显示器和接收器，该接收器在具有范围在1-6的服务编号的服务块中接收包括隐藏字幕文本的隐藏字幕数据。接收器还在服务编号等于6的标准服务块中接收隐藏字幕像差数据。接收器还接收将所述像差数据的每个实例与相应的标准服务相关联的链接字段。解析器从出现在服务编号n中的隐藏字幕数据解析像差数据。一个或多个处理器处理字幕文本和像差数据，以产生适合于定义在由像差数据所定义的z轴位置上、字幕文本的在显示器上的三维图像呈现的输出。合成器接收和处理像差数据和字幕文本，以产生适合于定义在由像差数据所定义的z轴位置上、字幕文本的在显示器上的三维图像呈现的输出。像差数据在兼容CEA-708的可变长度命令中被运载。
本领域技术人员将意识到，考虑上述教导，上述示例性实施例中的某些是基于经编程的处理器的使用的。但是，本发明并不局限于这些示例性实施例，因为使用硬件组件等同物(例如专用硬件和/或专用处理器)可以实现其他实施例。类似地，通用计算机、基于微处理器的计算机、微控制器、光学计算机、模拟计算机、专用处理器、专用电路和/或专用硬连线逻辑可以被用于构建可替代的等同实施例。
本领域技术人员将意识到，考虑以上教导，用来实现上述某些实施例的程序操作和过程和相关数据可以使用盘存储设备以及其他形式的存储设备来实现，例如非瞬态存储设备，包括例如只读存储器(ROM)设备、随机访问存储器(RAM)设备、网络存储器设备、光学存储元件、磁存储元件、磁-光存储元件、闪存、核心存储器和/或其他等同的易失性和非易失性存储技术，而不会脱离本发明的某些实施例。术语非瞬态不是表明信息不能通过断电或其他动作丢失。这些可替代的存储设备应该被看作等同物。
这里描述的某些实施例是被编程的处理器执行编程指令或者可以使用被编程的处理器执行编程指令来实现，编程指令在上面被以流程图形式广泛描述并且可以被存储在任意合适的电子或计算机可读存储介质上。但是，本领域技术人员将意识到，考虑本教导，上述过程可以按照任意多种变化以及用很多合适的编程语言来实现，而不会脱离本发明的实施例。例如，某些操作的执行顺序通常可以改变，可以添加额外的操作，或者可以删除操作，这都不会脱离本发明的某些实施例。在操作流程、用户接口以及信息呈现方式中可以添加和/或增强错误捕获(error trapping)以及进行改变，而不会脱离本发明的实施例。这些变化可以被预期并被认为是等同的。
虽然已经描述了某些示例性实施例，但是显而易见，本领域技术人员根据以上描述可以设想很多替代、修改、变换和变更。
相关文档的交叉引用
本申请与2011年3月14日由Mark Eyer递交的美国临时专利申请No.61/452,247有关并要求其优先权权益。本申请还与以下申请有关：MarkEyer等人于2010年11月22日递交的题为“Service Linkage to CaptionDisparity Data Transport”的美国临时专利申请No.61/415,924；Mark Eyer等人于2010年11月19日递交的题为“Disparity Data Signaling andTransport for 3D Captioning”的美国临时专利申请No.61/415,457；MarkEyer等人于2010年5月20日递交的题为“Disparity Data Transport”的美国临时专利申请No.61/346,652；Mark Eyer等人于2010年3月12日递交的美国临时专利申请No.61/313，612；Mark Eyer等人于2010年3月23日递交的题为“Extended Command Stream for CEA-708Captions”的美国临时专利申请No.61/316,733；以及Mark Eyer于2010年8月31日递交的题为“Efficient Transport of Frame-by-Frame Change in Captioning DisparityData”的美国临时专利申请No.61/378,792。本申请还与2011年2月8日递交的非临时专利申请13/022,828、13/022,817和13/022,810有关。上述申请中的每一个通过引用被整体上结合于此。
版权和商标声明
本专利文件的部分公开包含受版权保护的素材。版权所有者不反对对专利文件或专利公开内容的复制再现，当其已经出现在专利商标局的专利文件或记录中时，但是在其他情况下，版权所有者保留所有版权权益。商标是相关所有者的私人财产。

Claims (7)

1.一种针对三维视频来处理用于隐藏字幕的像差数据的方法，所述方法兼容CEA-708，包括：
在具有范围在1-6的服务编号的第一标准服务块中接收包括隐藏字幕文本的隐藏字幕数据；
在服务编号等于n的标准服务块中接收隐藏字幕像差数据，其中n在1到6之间；
接收在服务编号等于n的标准服务块内的、将所述像差数据的每个实例与相应的标准服务相关联的链接字段；
从服务编号等于n的标准服务块解析所述像差数据和所述链接字段；以及
处理所述字幕文本和像差数据，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出。
2.如权利要求1所述的方法，其中所述像差数据在兼容CEA-708的可变长度命令中被运载。
3.如权利要求2所述的方法，其中所述服务编号n等于6。
4.如权利要求1所述的方法，还包括将所述隐藏字幕文本作为立体图像显示在所述显示器上。
5.一种处理用于隐藏字幕的像差数据的电视接收器设备，所述电视接收器设备兼容CEA-708，包括：
接收器，该接收器在具有范围在1-6的服务编号的服务块中接收包括隐藏字幕文本的隐藏字幕数据；
所述接收器还在服务编号等于n的标准服务块中接收隐藏字幕像差数据，其中n在1到6之间；
所述接收器还接收在服务编号等于n的标准服务块内的、将所述像差数据的每个实例与相应的标准服务相关联的链接字段；
一个或多个处理器，所述处理器从服务编号等于n的标准服务块解析所述像差数据和所述链接字段；
所述一个或多个处理器处理所述字幕文本和像差数据，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出；以及
合成器，该合成器接收并处理所述像差数据和所述字幕文本，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出。
6.如权利要求5所述的设备，还包括三维电视显示器，该三维电视显示器将所述隐藏字幕文本作为由所述合成器所产生的立体图像显示。
7.一种处理用于隐藏字幕的像差数据的电视接收器设备，所述电视接收器设备兼容CEA-708，包括：
接收器，该接收器在具有范围在1-6的服务编号的服务块中接收包括隐藏字幕文本的隐藏字幕数据；
所述接收器还在服务编号等于n的标准服务块中接收隐藏字幕像差数据，其中n在1到6之间；
所述接收器还接收在服务编号等于n的标准服务块内的、将所述像差数据的每个实例与相应的标准服务相关联的链接字段；
解析器，该解析器从服务编号等于n的标准服务块解析所述像差数据和所述链接字段；
一个或多个处理器，所述处理器处理所述字幕文本和像差数据，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出；以及
合成器，该合成器接收并处理所述像差数据和所述字幕文本，以产生适合于定义在由所述像差数据所定义的z轴位置上、所述字幕文本的在显示器上的三维图像呈现的输出。
CN201210036132.0A 2011-03-14 2012-02-15 标准字幕服务中的像差数据传输 Expired - Fee Related CN102685524B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201161452247P 2011-03-14 2011-03-14
US61/452,247 2011-03-14
US13/176,088 US8760498B2 (en) 2011-03-14 2011-07-05 Disparity data transport in standard caption service
US13/176,088 2011-07-05

Publications (2)

Publication Number Publication Date
CN102685524A CN102685524A (zh) 2012-09-19
CN102685524B true CN102685524B (zh) 2015-06-24

Family

ID=45566946

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210036132.0A Expired - Fee Related CN102685524B (zh) 2011-03-14 2012-02-15 标准字幕服务中的像差数据传输

Country Status (7)

Country Link
US (3) US8760498B2 (zh)
EP (1) EP2501147B1 (zh)
KR (1) KR101865983B1 (zh)
CN (1) CN102685524B (zh)
CA (1) CA2819527C (zh)
MX (1) MX2013006917A (zh)
WO (1) WO2012125699A2 (zh)

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8941779B2 (en) * 2012-03-21 2015-01-27 Sony Corporation Non-closed caption data transport in standard caption service
US8760498B2 (en) 2011-03-14 2014-06-24 Sony Corporation Disparity data transport in standard caption service
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
US8908103B2 (en) 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
CA2810853A1 (en) * 2011-08-04 2013-02-07 Sony Corporation Transmitting apparatus, transmitting method, and receiving apparatus
CN103718564B (zh) 2011-08-05 2018-01-09 索尼公司 接收装置、接收方法以及信息处理系统
TWI528749B (zh) 2011-09-06 2016-04-01 Sony Corp A signal receiving device, a signal receiving method, an information processing program and an information processing system
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
US9113230B2 (en) 2011-12-21 2015-08-18 Sony Corporation Method, computer program, and reception apparatus for delivery of supplemental content
US8930988B2 (en) 2011-12-21 2015-01-06 Sony Corporation Reception apparatus, reception method, program, and information processing system
US9936231B2 (en) 2012-03-21 2018-04-03 Saturn Licensing Llc Trigger compaction
KR102222166B1 (ko) 2012-06-19 2021-03-04 소니 주식회사 대화형 텔레비전을 위한 트리거 파라미터 테이블의 확장
KR20150035567A (ko) 2012-07-12 2015-04-06 소니 주식회사 고급 텔레비전 서비스들에 대한 파라미터화된 서비스 디스크립터
US9154840B2 (en) 2012-07-31 2015-10-06 Sony Corporation Reception apparatus, reception method, transmission apparatus, and transmission method
US9253518B2 (en) 2012-11-09 2016-02-02 Sony Corporation On-demand access to scheduled content
US9326017B2 (en) * 2012-11-19 2016-04-26 Thomson Licensing Method and apparatus for setting controlled events for network devices
US9148676B2 (en) 2012-12-04 2015-09-29 Sony Corporation Broadcast transition channel
ES2658043T3 (es) * 2013-04-05 2018-03-08 Koninklijke Philips N.V. Redireccionamiento de una señal de imágenes tridimensionales
US9137566B2 (en) 2013-06-28 2015-09-15 Sony Corporation Distribution system, reception apparatus, and methods for transitioning to new services
US9038095B2 (en) 2013-07-03 2015-05-19 Sony Corporation Methods, information providing system, and reception apparatus for distribution of at least one content version
US8884800B1 (en) 2013-07-31 2014-11-11 Sony Corporation Method and apparatus for performing analog-to-digital conversion on multiple input signals
US9326295B1 (en) 2014-12-10 2016-04-26 Sony Corporation Method and apparatus for transmitting a-priori information in a communication system
US20160204804A1 (en) 2015-01-13 2016-07-14 Sony Corporation Data processing apparatus and method
US9762354B2 (en) 2015-01-27 2017-09-12 Sony Corporation Signaling methods and apparatus
CN107211192B (zh) 2015-01-30 2020-11-06 夏普株式会社 上报信息的方法
US9912986B2 (en) 2015-03-19 2018-03-06 Sony Corporation System for distributing metadata embedded in video
US9756401B2 (en) 2015-04-07 2017-09-05 Sony Corporation Processing and providing an image in which a plurality of symbols are encoded
US9590782B2 (en) 2015-06-22 2017-03-07 Sony Corporation Signaling methods and apparatus
US10205991B2 (en) 2015-07-27 2019-02-12 Sony Corporation Hidden replaceable media slots
KR102398453B1 (ko) * 2015-10-02 2022-05-16 삼성전자주식회사 영상 출력 방법 및 이를 지원하는 전자 장치
KR102525186B1 (ko) * 2018-10-10 2023-04-24 한화비전 주식회사 비디오월에서 캡션 동기화 방법 및 멀티디스플레이간 캡션동기화를 제공하는 비디오월시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2749064A1 (en) * 2009-01-08 2010-07-15 Lg Electronics Inc. 3d caption signal transmission method and 3d caption display method
WO2010088070A1 (en) * 2009-01-27 2010-08-05 Echostar Technologies Llc Systems and methods for providing closed captioning in three-dimensional imagery
CN101902582A (zh) * 2010-07-09 2010-12-01 清华大学 一种立体视频字幕添加方法及装置
WO2010151555A1 (en) * 2009-06-24 2010-12-29 Dolby Laboratories Licensing Corporation Method for embedding subtitles and/or graphic overlays in a 3d or multi-view video data
WO2011001858A1 (ja) * 2009-06-29 2011-01-06 ソニー株式会社 立体画像データ送信装置および立体画像データ受信装置

Family Cites Families (102)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5200823A (en) * 1991-03-29 1993-04-06 Scientific-Atlanta, Inc. Virtual channels for a multiplexed analog component (mac) television system
US5294982A (en) * 1991-12-24 1994-03-15 National Captioning Institute, Inc. Method and apparatus for providing dual language captioning of a television program
US5534941A (en) * 1994-05-20 1996-07-09 Encore Media Corporation System for dynamic real-time television channel expansion
ID27878A (id) 1997-12-05 2001-05-03 Dynamic Digital Depth Res Pty Konversi image yang ditingkatkan dan teknik mengenkodekan
KR20010075754A (ko) * 2000-01-17 2001-08-11 구자홍 텔레비젼 캡션 데이터 및 이 텔레비젼 캡션 데이터를구성하는 방법
AU3689301A (en) 2000-02-09 2001-08-20 Apriva Inc Communication systems, components, and methods operative with programmable wireless devices
US7047191B2 (en) * 2000-03-06 2006-05-16 Rochester Institute Of Technology Method and system for providing automated captioning for AV signals
KR100778470B1 (ko) * 2001-03-30 2007-11-21 엘지전자 주식회사 디지털 티브이의 캡션 자동 선택 장치
US6952236B2 (en) * 2001-08-20 2005-10-04 Ati Technologies, Inc. System and method for conversion of text embedded in a video stream
JP2004080676A (ja) * 2002-08-22 2004-03-11 Funai Electric Co Ltd ディジタル放送／アナログ放送受信装置
KR100751422B1 (ko) * 2002-12-27 2007-08-23 한국전자통신연구원 스테레오스코픽 비디오 부호화 및 복호화 방법, 부호화 및복호화 장치
US20050078221A1 (en) * 2003-09-26 2005-04-14 Koji Kobayashi Apparatus for generating video contents with balloon captions, apparatus for transmitting the same, apparatus for playing back the same, system for providing the same, and data structure and recording medium used therein
US20060092291A1 (en) * 2004-10-28 2006-05-04 Bodie Jeffrey C Digital imaging system
US8745687B2 (en) 2005-02-15 2014-06-03 Sony Corporation Digital closed caption transport in standalone stream
US7999820B1 (en) * 2006-10-23 2011-08-16 Nvidia Corporation Methods and systems for reusing memory addresses in a graphics system
US20080129864A1 (en) * 2006-12-01 2008-06-05 General Instrument Corporation Distribution of Closed Captioning From a Server to a Client Over a Home Network
US20090060055A1 (en) * 2007-08-29 2009-03-05 Sony Corporation Method and apparatus for encoding metadata into a digital program stream
US20090249392A1 (en) * 2008-03-28 2009-10-01 Lg Electronics Inc. Digital broadcast receiver and method for processing caption thereof
US20100002134A1 (en) * 2008-07-03 2010-01-07 Sony Corporation Communication system with display status
WO2010064853A2 (en) * 2008-12-02 2010-06-10 Lg Electronics Inc. 3d caption display method and 3d display apparatus for implementing the same
US8265450B2 (en) * 2009-01-16 2012-09-11 Apple Inc. Capturing and inserting closed captioning data in digital video
JP5429034B2 (ja) * 2009-06-29 2014-02-26 ソニー株式会社 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US8705933B2 (en) 2009-09-25 2014-04-22 Sony Corporation Video bookmarking
US9277183B2 (en) 2009-10-13 2016-03-01 Sony Corporation System and method for distributing auxiliary data embedded in video data
BR112012009086A2 (pt) * 2009-10-20 2016-04-26 Samsung Electronics Co Ltd método de geração de um fluxo, equipamento para processamento de um fluxo , e meio de gravação legível por computador.
US8839338B2 (en) 2012-03-28 2014-09-16 Sony Corporation Service usage reporting data transport
US8941779B2 (en) 2012-03-21 2015-01-27 Sony Corporation Non-closed caption data transport in standard caption service
US8760498B2 (en) 2011-03-14 2014-06-24 Sony Corporation Disparity data transport in standard caption service
US8878913B2 (en) * 2010-03-12 2014-11-04 Sony Corporation Extended command stream for closed caption disparity
US9723360B2 (en) 2010-04-01 2017-08-01 Saturn Licensing Llc Interests and demographics profile for advanced broadcast services
US9706158B2 (en) 2010-04-01 2017-07-11 Saturn Licensing Llc Receiver and method for reporting the usage of advanced television services
US20110247028A1 (en) 2010-04-01 2011-10-06 Mark Eyer Receiver and System Using an Electronic Questionnaire for Advanced Broadcast Services
JP2011249945A (ja) * 2010-05-24 2011-12-08 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US20110298981A1 (en) 2010-06-07 2011-12-08 Mark Kenneth Eyer Scripted Access to Hidden Multimedia Assets
US8863171B2 (en) 2010-06-14 2014-10-14 Sony Corporation Announcement of program synchronized triggered declarative objects
US8893210B2 (en) 2010-08-20 2014-11-18 Sony Corporation Server load balancing for interactive television
US8898723B2 (en) 2010-08-20 2014-11-25 Sony Corporation Virtual channel declarative script binding
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
US8909694B2 (en) 2010-08-27 2014-12-09 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
JP5765558B2 (ja) 2010-08-27 2015-08-19 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
JP5897468B2 (ja) 2010-08-30 2016-03-30 ソニー株式会社 受信装置、受信方法、及びプログラム
US20120050619A1 (en) 2010-08-30 2012-03-01 Sony Corporation Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
US10511887B2 (en) 2010-08-30 2019-12-17 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
US8918801B2 (en) 2010-08-30 2014-12-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, reception method, program, and broadcasting system
US8892636B2 (en) 2010-08-30 2014-11-18 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
EP2612501B1 (en) * 2010-09-01 2018-04-25 LG Electronics Inc. Method and apparatus for processing and receiving digital broadcast signal for 3-dimensional display
JP5757075B2 (ja) 2010-09-15 2015-07-29 ソニー株式会社 送信装置、送信方法、受信装置、受信方法、プログラム、および放送システム
US9986270B2 (en) 2010-09-21 2018-05-29 Saturn Licensing Llc Reception and transmission of trigger information for application program control
JP5703664B2 (ja) 2010-09-30 2015-04-22 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
US8842974B2 (en) 2010-10-01 2014-09-23 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program, and content delivery system
US8872888B2 (en) 2010-10-01 2014-10-28 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system
US8908103B2 (en) 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
CA2809311C (en) 2010-10-01 2019-01-08 Sony Corporation Information processing device, information processing method, and program
US20120185888A1 (en) 2011-01-19 2012-07-19 Sony Corporation Schema for interests and demographics profile for advanced broadcast services
JP5783402B2 (ja) 2011-01-25 2015-09-24 ソニー株式会社 受信装置、受信方法、供給装置、供給方法、プログラム、および放送システム
JP5793871B2 (ja) 2011-01-25 2015-10-14 ソニー株式会社 受信装置、受信方法、供給装置、供給方法、プログラム、および放送システム
JP5668512B2 (ja) 2011-02-15 2015-02-12 ソニー株式会社 情報処理装置、及び、情報処理方法
TWI574565B (zh) 2011-03-31 2017-03-11 Sony Corp A transmitting apparatus, a transmitting method, a receiving apparatus, a receiving method, a computer-readable medium, and a broadcasting system
US8886009B2 (en) 2011-04-26 2014-11-11 Sony Corporation Creation of video bookmarks via scripted interactivity in advanced digital television
TWI545955B (zh) 2011-04-28 2016-08-11 Sony Corp Signal receiving apparatus and method, a signal transmission apparatus and method, and program
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
US8917358B2 (en) 2011-07-27 2014-12-23 Sony Corporation Reception apparatus, terminal apparatus, control method, program, and communication system
US10491966B2 (en) 2011-08-04 2019-11-26 Saturn Licensing Llc Reception apparatus, method, computer program, and information providing apparatus for providing an alert service
CN103718564B (zh) 2011-08-05 2018-01-09 索尼公司 接收装置、接收方法以及信息处理系统
EP3439294B1 (en) 2011-08-24 2023-06-14 Saturn Licensing LLC Reception apparatus, reception method, program and information processing system
US20130055313A1 (en) 2011-08-31 2013-02-28 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for accessing content from a plurality of content sources
TWI528749B (zh) 2011-09-06 2016-04-01 Sony Corp A signal receiving device, a signal receiving method, an information processing program and an information processing system
US9374620B2 (en) 2011-10-21 2016-06-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and interlocked application feed system
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
JP5901956B2 (ja) 2011-12-16 2016-04-13 株式会社コガネイ 直線往復動装置
US8930988B2 (en) 2011-12-21 2015-01-06 Sony Corporation Reception apparatus, reception method, program, and information processing system
US9113230B2 (en) 2011-12-21 2015-08-18 Sony Corporation Method, computer program, and reception apparatus for delivery of supplemental content
EP3468177B1 (en) 2012-01-24 2020-04-29 Saturn Licensing LLC Receiver, reception method, program and information processing system
WO2013118617A1 (ja) 2012-02-07 2013-08-15 ソニー株式会社 受信装置、受信方法、及びプログラム
US9936231B2 (en) 2012-03-21 2018-04-03 Saturn Licensing Llc Trigger compaction
US20130282870A1 (en) 2012-04-18 2013-10-24 Sony Corporation Reception apparatus, reception method, transmission apparatus, transmission method, and program
KR102222166B1 (ko) 2012-06-19 2021-03-04 소니 주식회사 대화형 텔레비전을 위한 트리거 파라미터 테이블의 확장
US9456245B2 (en) 2012-07-05 2016-09-27 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method for controlling applications
KR20150035567A (ko) 2012-07-12 2015-04-06 소니 주식회사 고급 텔레비전 서비스들에 대한 파라미터화된 서비스 디스크립터
US9154840B2 (en) 2012-07-31 2015-10-06 Sony Corporation Reception apparatus, reception method, transmission apparatus, and transmission method
US9432744B2 (en) 2012-07-31 2016-08-30 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method
US9883247B2 (en) 2012-08-13 2018-01-30 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, and transmission method
SG11201500229YA (en) 2012-08-15 2015-03-30 Sony Corp Broadband delivery of personalization information for advanced tv services
US9264648B2 (en) 2012-10-09 2016-02-16 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method
US10002206B2 (en) 2012-10-26 2018-06-19 Saturn Licensing Llc Information processing device and information processing method
US9253518B2 (en) 2012-11-09 2016-02-02 Sony Corporation On-demand access to scheduled content
US9769503B2 (en) 2012-11-14 2017-09-19 Saturn Licensing Llc Information processor, information processing method and program
US9936256B2 (en) 2012-11-28 2018-04-03 Saturn Licensing Llc Receiver, reception method, transmitter and transmission method
US9148676B2 (en) 2012-12-04 2015-09-29 Sony Corporation Broadcast transition channel
US8914832B2 (en) 2012-12-14 2014-12-16 Sony Corporation Information processing apparatus, information processing method, and program
US9942601B2 (en) 2013-01-24 2018-04-10 Saturn Licensing Llc Storing non-real time content
US10257564B2 (en) 2013-01-24 2019-04-09 Saturn Licensing Llc Distributed non-real-time content
US20140229580A1 (en) 2013-02-12 2014-08-14 Sony Corporation Information processing device, information processing method, and information processing system
US9300896B2 (en) 2013-06-03 2016-03-29 Sony Corporation Method, computer-readable storage medium, reception apparatus, and information providing apparatus for identifying available channels and/or services
US9980014B2 (en) 2013-06-28 2018-05-22 Saturn Licensing Llc Methods, information providing system, and reception apparatus for protecting content
US9137566B2 (en) 2013-06-28 2015-09-15 Sony Corporation Distribution system, reception apparatus, and methods for transitioning to new services
US9038095B2 (en) 2013-07-03 2015-05-19 Sony Corporation Methods, information providing system, and reception apparatus for distribution of at least one content version
US8884800B1 (en) 2013-07-31 2014-11-11 Sony Corporation Method and apparatus for performing analog-to-digital conversion on multiple input signals

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2749064A1 (en) * 2009-01-08 2010-07-15 Lg Electronics Inc. 3d caption signal transmission method and 3d caption display method
WO2010088070A1 (en) * 2009-01-27 2010-08-05 Echostar Technologies Llc Systems and methods for providing closed captioning in three-dimensional imagery
WO2010151555A1 (en) * 2009-06-24 2010-12-29 Dolby Laboratories Licensing Corporation Method for embedding subtitles and/or graphic overlays in a 3d or multi-view video data
WO2011001858A1 (ja) * 2009-06-29 2011-01-06 ソニー株式会社 立体画像データ送信装置および立体画像データ受信装置
CN101902582A (zh) * 2010-07-09 2010-12-01 清华大学 一种立体视频字幕添加方法及装置

Also Published As

Publication number Publication date
CN102685524A (zh) 2012-09-19
WO2012125699A2 (en) 2012-09-20
EP2501147A1 (en) 2012-09-19
MX2013006917A (es) 2013-07-22
KR101865983B1 (ko) 2018-06-08
KR20140017536A (ko) 2014-02-11
US20160073079A1 (en) 2016-03-10
CA2819527C (en) 2019-06-25
US20140327825A1 (en) 2014-11-06
CA2819527A1 (en) 2012-09-20
US20120236113A1 (en) 2012-09-20
US9247198B2 (en) 2016-01-26
EP2501147B1 (en) 2014-05-14
US8760498B2 (en) 2014-06-24
US9912932B2 (en) 2018-03-06
WO2012125699A3 (en) 2014-04-10

Similar Documents

Publication Publication Date Title
CN102685524B (zh) 标准字幕服务中的像差数据传输
KR101320175B1 (ko) 캡션 시차 데이터 전송에 대한 서비스 연계
EP2829058B1 (en) Non-closed caption data transport in standard caption service
US9986220B2 (en) Auxiliary data in 3D video broadcast
KR20110139189A (ko) 3ｄ 비디오 신호 처리 방법 및 이와 같은 기능을 수행하는 디지털 방송 수신기
KR101846857B1 (ko) 3차원 비디오 전송을 위한 자막들에 있어서의 개선
EP2524513A1 (en) Service linkage to caption disparity data transport

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150624

Termination date: 20200215

CF01 Termination of patent right due to non-payment of annual fee