CN102273210A - 3d字幕显示方法和实现该方法的3d显示装置 - Google Patents

3d字幕显示方法和实现该方法的3d显示装置 Download PDF

Info

Publication number
CN102273210A
CN102273210A CN2009801540911A CN200980154091A CN102273210A CN 102273210 A CN102273210 A CN 102273210A CN 2009801540911 A CN2009801540911 A CN 2009801540911A CN 200980154091 A CN200980154091 A CN 200980154091A CN 102273210 A CN102273210 A CN 102273210A
Authority
CN
China
Prior art keywords
caption
data
captions
signal
view
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2009801540911A
Other languages
English (en)
Other versions
CN102273210B (zh
Inventor
徐琮烈
梁正烋
金镇泌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN102273210A publication Critical patent/CN102273210A/zh
Application granted granted Critical
Publication of CN102273210B publication Critical patent/CN102273210B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362—Generation or processing of Service Information [SI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Library & Information Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明涉及一种能够在3D显示装置中显示自然地融合到3D图像的封闭字幕的封闭字幕信号处理方法，并且涉及适用于实现该方法的3D显示装置。所述3D显示装置接收第一图像信号和第二图像信号以例如按照立体方式实现3D图像，并且接收仅用于从第一图像和第二图像中选择的基本视图的封闭字幕数据。接下来，所述显示装置基于关于基本视图的封闭字幕数据和预定的3D字幕信息，确定封闭字幕在扩展视图中的显示位置，使得3D封闭字幕可以按立体方式显示在基本视图以及扩展视图上。

Description

3D字幕显示方法和实现该方法的3D显示装置
技术领域
本发明涉及一种显示装置中的图像显示方法，更具体地说，涉及一种字幕显示方法。此外，本发明涉及一种适于实现该图像显示方法的显示装置。
背景技术
封闭字幕广播是如下的广播服务：分离地发送没有与电视广播图像混合的文本数据，以使得电视接收器能够选择性地显示文本作为字幕。在NTSC(全国电视系统委员会)模拟TV广播中，每次，作为垂直消隐间隔(VBI)的第一场和第二场的行21的模拟波形，通过2个字节来发送字幕数据，从而接收器可以在其屏幕上显示字幕数据。同时，根据ATSC(高级电视标准委员会)数字电视广播标准，可以将封闭字幕数据的两个字节作为一种用户数据插入到图片报头的extension_and_user_data()结构中，并且可以在节目和系统信息协议(PSIP)的事件信息表(EIT)中限定用于再现封闭字幕的控制信息(参见“ATSC数字电视标准第四部分-MPEG-2视频系统特征(A/53，第四部分：2007)，第一次修改”以及“数字电视(DTV)封闭字幕，CEA-708-B”)。接收器可以根据CEA-708-B标准来累积通过图片报头接收的字幕数据字节对，从而根据由发送方制定的定义或规范来解释并且显示封闭字幕。
现在参照图1至5简要说明符合CEA-708-B标准的DTV封闭字幕(DTVCC)。
根据特定格式的数据通信协议来发送DTVCC数据。图1示出了DTVCC的协议栈。该协议栈包括5层：传输层、数据包层、业务层、编码层和解释层(interpretationlayer)。
传输层表示如下的机制：其中，DTVCC数据被插入到DTV视频子系统中并由接收器提取，并且在ATSC A/53和ISO/IEC 13818标准中定义。具体来说，对DTVCC数据按两个字节为单位进行分割并通过DTV流的图片用户数据进行发送，并且通过PSIP的节目映射表(PMT)和/或EIT发送信令描述符。
图2例示了通过图片用户数据发送的封闭字幕数据cc_data()的句法。“process_cc_data_flag”是指示是否需要对封闭字幕数据cc_data()进行处理的标志。如果该标志被设置为‘1’，则应当解析封闭字幕数据，并且必须处理其含义，而如果该标志被复位为‘0’，则可以丢弃该封闭字幕数据。“cc_count”字段指示该字段之后的字幕数据结构的数量，并且其值可以从0到31。cc_count的每一个字幕数据结构通过“cc_data_1”和“cc_data_2”这一对字段而携带16比特的字幕数据。当“cc_valid”字段被设置为1时，这表示之后的两个字幕数据字节是有效的。当“cc_valid”字段被复位为0时，该“cc_valid”字段表示这两个字幕数据字节是无效的。“cc_type”字段表示如CEA-708-B标准中所定义的两个字幕数据字节的类型。例如，如果“cc_type”字段的值为10，则它表示这两个字幕数据字节是频道数据包数据，而如果“cc_type”字段的值为11，则它表示新频道数据包数据的开始。
再次参照图1，在将DTVCC数据编码在传输层中之前，根据特定规则将DTVCC数据打包为多个字幕频道数据包。这些字幕频道数据包定义了数据包层。图3示出了字幕频道数据包的结构。n字节的字幕频道数据包包括一字节的数据包报头和n-1字节的数据包数据。数据包报头包含序列号和数据包大小数据。序列号是在0至3的范围内滚动以确定是否丢失了数据包的三字节数据。
DTVCC字幕频道可以分为被称作“业务”的一组逻辑子频道。根据时分复用方案将业务数据插入字幕频道数据流。服务层定义了针对封闭字幕频道业务数量、业务类型、业务属性等的报头。字幕频道流可以携带6个标准业务、以及多达57个的附加扩展业务，由此总共可以有63个业务。图4示出了对于各个业务的业务块的结构。业务块包括业务块报头和业务块数据。业务块报头包括业务号和业务块大小数据。如果业务数量为6或更少，则业务块报头为一个字节，而如果业务数量超过6，则业务块报头为两个字节。
再次参照图1，编码层描述了对于封闭字幕业务如何对数据进行编码。换言之，编码层定义了对于码空间控制、字幕命令、以及字幕字符和符号的数值码分配。图5示出了根据CEA-708-B标准的码空间组织。该码空间由分别具有256个位置的两个码本构成，并且被分为四个码组：CL、GL、CR和GR。CL组包括从00h到1Fh的32个码，C0码集(杂项控制码)和C2码集(扩展杂项控制码)映射到该空间。GL组包括从20h到7Fh的96个码，G0码集(字符集)和G2码集(扩展控制码集1)映射到该空间。CR组包括从80h到9Fh的32个码，C1码集(字幕控制码)和C3码集(扩展控制码2)映射到该空间。GR组包括从A0h到FFh的96个码，G1码集(拉丁字符)和G3码集(将来的字符和图标扩展)映射到该空间。
这四个码组(CL、GL、CR和GR)中的基本码是位于图5所示的码空间的上部的C0、C1、G0和G1码集的字符、控制码和命令。位于图5所示的码空间的下部的C2、C3、G2和G3码集可以通过使用C0码集的“EXT1”码(10h)来访问。即，通过对这些码加前缀“EXT1”码，来引用扩展C2、C3、G2和G3码集。换言之，为了引用C2、C3、G2和G3码集中的字符，必须使用两个字节(即，“EXT1”+基本码)。
解释层定义DTVCC图形用户接口，即，如何使用编码层的码集来对字幕数据进行编码、以及当解码时如何解释字幕数据。解释层处理字幕画面、窗口、笔、文本和显示同步。
根据由这种协议实现的封闭字幕广播，可以提供说话者的词句、歌曲的歌词、电影线翻译、在线TV指南、紧急广播和各种其他文本服务。近来，由于在听力受损人士的媒体访问权利或者通用服务的方面使得封闭字幕广播趋向于成为强制性限制，所以希望封闭字幕广播扩展其应用。
同时，电视技术的进步已经达到了能够实现用于显示三维(3D)图像的装置的水平，并且，在提交本申请时，立体型3D电视的完全商业化已经呼之欲出。在立体3D显示系统中，将通过使用与人眼一样间隔开大约65毫米的两个图像传感器而获得的两个图像作为广播信号发送到接收器。然后，接收器将这两个图像输入到用户的左眼和右眼，以模拟产生深度感或者立体感的双眼视差(disparity)。
为了在这种立体3D电视中实现封闭字幕，必须在左图像和右图像上都显示封闭字幕。然而，如果在左图像和右图像内的所有对象都有视差地显示以模拟双眼视差的状态下将字幕显示在左图像和右图像的相同位置，则字幕显示将是不完整的，并且会打乱3D显示，使得观众感觉混乱并出现头痛或者恶心。
虽然ATSC数字电视标准(A/53)及其辅助标准(即，节目和系统信息协议(PSIP)标准(A/65C)和DTVCC标准(CEA-708-B))描述了封闭字幕的发送，但是这些标准的规范仅仅适用于针对普通二维电视发送封闭字幕数据，而不适用于3D电视。如果要根据这些标准发送3D字幕数据，则应当分离地发送3D图像对中的每一个图像的字幕数据，这导致可用带宽实质减小一半，引起资源利用效率低下的问题。
因此，需要这样一种方法：在接收器中有效地显示与3D图像兼容的封闭字幕，而不会降低带宽资源的效率。
发明内容
技术问题
因此，本发明的一个目的是提供一种在3D显示装置中将封闭字幕与3D图像和谐地融合并且显示的3D字幕显示方法。
本发明的另一个目的是提供一种适用于实现这种封闭字幕显示方法的3D显示装置。
技术方案
根据本发明，当3D显示装置按照立体方案接收到用于实现3D图像的第一图像和第二图像的图像信号时，例如，3D显示装置接收从第一图像和第二图像确定的仅用于基本视图的封闭字幕数据。然后，显示装置基于用于基本视图的封闭字幕数据和特定的3D字幕信息来确定用于扩展视图的封闭字幕的位置，并且调整用于基本视图和扩展视图的字幕图形数据的格式，以将3D封闭字幕输出在其画面上。3D字幕信息可以包括3D字幕参数，即，在封闭字幕显示位置的水平视差或者封闭字幕显示位置的深度信息。可以将3D字幕参数与图像信号一起接收，或者可以将它们分离地接收。然而，也可以由显示装置来确定3D字幕参数。
更具体地说，根据用于实现上述目的之一的3D字幕显示方法的一个方面，3D显示装置接收包括3D图像信号的广播信号，并且获取该广播信号中包括的用于基本视图的字幕数据以及3D字幕信息。之后，3D显示装置通过使用所述3D字幕信息来产生用于扩展视图的字幕数据，并且对用于基本视图的字幕数据和用于扩展视图的字幕数据进行格式调整和输出。
优选的是，3D字幕信息是水平视差值。在这种情况下，通过将用于基本视图的字幕数据偏移该水平视差值而产生用于扩展视图的字幕数据。
可以从事件信息表(EIT)、节目映射表(PMT)或者广播信号的图片报头中提取3D字幕信息。具体地，可以从在所述图片报头中检测到的字幕信号中将3D字幕信息与字幕数据一起提取。
根据用于实现上述目的之一的3D字幕显示方法的另一个方面，3D显示装置接收包括3D图像信号的广播信号，并且获取该广播信号中包括的字幕数据和3D字幕信息。之后，3D显示装置获取所述3D字幕信息中包括的字幕深度信息，并且通过使用所述字幕深度信息来将所述字幕数据显示在其显示画面上。
同时，用于实现上述目的中的另一个的3D显示装置包括信号接收单元以及合成及输出单元。所述信号接收单元接收包括3D图像信号的广播信号，恢复所述图像信号，并且获取所述广播信号中包括的3D字幕信息和用于基本视图的字幕数据。所述合成及输出单元通过使用所述3D字幕信息来产生用于扩展视图的字幕数据，并且对用于基本视图的字幕数据和用于扩展视图的字幕数据进行格式调整和输出。
优选的是，所述信号接收单元可以包括：解调单元，其被构成为接收广播信号，对接收的广播信号进行解调，并输出传输流；解复用器，其被构成为对所述传输流进行解复用，以输出经编码的图像信号和信令信息；信令信息处理单元，其被构成为从所述信令信息中提取所述3D字幕信息；图像鉴别及分析单元，其被构成为对经编码的图像信号进行解析，以提取图片报头；以及字幕解码单元，其被构成为从所述图片报头中提取用于基本视图的字幕数据。
然而，另选的是，所述信号接收单元可以包括：解调单元，其被构成为接收并解调广播信号，以输出传输流；解复用器，其被构成为对所述传输流进行解复用以输出经编码的图像信号；视频解码器，其被构成为对经编码的图像信号进行解析，以提取图片报头；以及字幕解码单元，其被构成为从所述图片报头中提取所述3D字幕信息和用于基本视图的字幕数据。
所述合成及输出单元的一个实施方式包括图形产生器、第一混合器和第二混合器、以及格式调整器。所述图形产生器可以基于用于基本视图的字幕数据而产生基本视图字幕图像信号，并且基于所产生的扩展视图的字幕数据而产生扩展视图字幕图像信号。所述第一混合器可以合成基本视图图像信号和基本视图字幕图像信号，所述第二混合器可以合成扩展视图图像信号和扩展视图字幕图像信号。所述格式调整器可以根据立体输出方案而调整所述第一混合器和所述第二混合器的输出信号的格式。
所述合成及输出单元的另一个实施方式包括图形产生器、第一格式调整器和第二格式调整器、以及混合器。所述图形产生器可以基于用于基本视图的字幕数据而产生基本视图字幕图像信号，并且基于所产生的扩展视图的字幕数据而产生扩展视图字幕图像信号。所述第一格式调整器根据立体输出方案而调整基本视图图像信号和扩展视图图像信号的格式，所述第二格式调整器可以根据所述立体输出方案而调整基本视图字幕图像信号和扩展视图字幕图像信号的格式。所述混合器合成所述第一格式调整器和所述第二格式调整器的输出信号
有益效果
根据本发明，3D显示装置可以将封闭字幕与3D图像和谐地融合，从而有效地显示高质量3D图像，而不会扰乱观众的3D识别系统。
具体地，即使仅对用于实现3D图像的多个2D图像中的单个图像提供封闭字幕数据、而不是分别地提供所有2D图像，接收器也可以基于3D字幕参数来显示3D字幕。因此，可以防止在发送3D字幕数据时的实质可用带宽减小。
附图说明
根据本文下面给出的详细说明以及附图，本发明可以得到更加充分的理解。在附图中通篇使用相同的附图标记来表示相同或相似的元件。在附图中：
图1例示了符合CEA-708-B标准的数字电视封闭字幕(DTVCC)的协议栈；
图2例示了根据ATSC A/53标准通过图片用户数据发送的封闭字幕数据cc_data()的句法；
图3示出了符合CEA-708-B标准的字幕频道数据包的结构；
图4示出了符合CEA-708-B标准的业务块的结构；
图5示出了符合CEA-708-B标准的码空间的结构；
图6是根据本发明示例性实施方式的广播系统的示意性框图；
图7例示了图6的系统中的发送封闭字幕数据的用户数据比特流的句法；
图8例示了图7所示的封闭字幕数据的句法；
图9例示了在根据H.265/AVC标准对立体图像对进行编码的实施方式中适用于发送封闭字幕数据的SEI RBSP有效载荷比特流的句法；
图10例示了由图6的系统发送的事件信息表(EIT)中包括的字幕业务描述符的句法；
图11是根据本发明第一示例性实施方式的电视接收器的示意性框图；
图12是例示图11的电视接收器中提取3D字幕信息和封闭字幕数据的处理的流程图；
图13是例示显示3D封闭字幕的处理的流程图；
图14例示了用于基本视图的字幕位图的示例；
图15例示了从用于基本视图的字幕位图获取用于扩展视图的字幕位图的处理；
图16例示了用于扩展视图的字幕位图的示例；
图17例示了用于测量封闭字幕深度值的基准点的示例；
图18至20示出了通过对被相应的封闭字幕窗口叠加的左图像和右图像进行格式调整而获得的画面图像的示例；
图21是图11的电视接收器的另选实施方式的示意性框图；
图22例示了在图21的电视接收器中按照并排格式进行了格式调整的字幕位图图像的示例；
图23例示了在图21的电视接收器中按照上下格式进行了格式调整的字幕位图图像的示例；
图24是根据本发明第二示例性实施方式的广播系统的示意性框图；
图25例示了图24的系统发送3D字幕参数的disparity_data()的句法；
图26例示了图24的系统发送的事件信息表(EIT)中包括的字幕业务描述符的句法；
图27是根据本发明第二示例性实施方式的电视接收器的示意性框图；
图28是例示图27所示的电视接收器中提取封闭字幕数据并显示3D封闭字幕的处理的流程图；
图29是图27的电视接收器的另选实施方式的示意性框图；
图30是根据本发明第三示例性实施方式的广播系统的示意性框图；
图31例示了用于传送3D字幕信息的设置3D参数(S3D)命令的编码格式的示例；
图32例示了根据本发明示例性实施方式、设置3D参数命令在码空间中的位置；
图33是根据本发明第三示例性实施方式的电视接收器的示意性框图；
图34是图33的电视接收器中提取封闭字幕信息的处理的流程图；
图35是图33的电视接收器的另选实施方式的示意性框图；
图36例示了用于传送3D字幕信息的设置3D参数命令的编码格式的另一示例；以及
图37例示了根据本发明示例性实施方式、图36的设置3D参数命令在码空间中的位置。
具体实施方式
第一实施方式
图6示出了根据本发明示例性实施方式的广播系统。图6的广播系统包括双眼摄像机100、预处理器102、节目编码器104、控制器112、传输复用器120、频道编码及调制单元122、以及发送器124。
双眼摄像机100包括两个透镜和对应的图像拾取装置，并且拍摄正视图的一对二维(2D)图像。类似于人眼，这两个透镜和图像拾取装置被布置为隔开65毫米(mm)，因此摄像机100获取具有水平视差(parallax)的两个2D图像。在包括所附权利要求的本说明中，在构成立体图像对的两个2D图像中，将通过左透镜获取的图像称为左图像，将通过右透镜获取的另一个图像称为右图像。
预处理器102去除由摄像机100获取的左原始图像和右原始图像中可能存在的噪声，校正图像，并且消除亮度不平衡。这些图像可以存储在存储单元中，或者可以在预处理器102进行的预处理之前或之后进行编辑，因此，在摄像机100的图像拍摄与节目编码器104进行的图像编码之间，可能存在一些显著的时间差。
在节目编码器104中，音频编码器106从安装在图像拍摄点的适当位置的多个麦克风(图中未示出)接收音频信号，并且根据预定标准(例如，AC-3标准)对所接收的音频信号进行编码，以产生音频基本流(ES)。
视频编码器108根据特定标准对摄像机100获取的图像进行编码，并且通过去除时间和空间冗余来对编码后的图像进行压缩，以产生视频基本流(ES)。视频编码器108在对图像进行编码的同时从用户数据插入器106接收用户数据以插入到图片报头。特别地，用户数据包括封闭字幕数据。在本发明的示例性实施方式中，视频编码器108根据ISO/IEC 13838-2的MPEG-2标准、以及A/53第四部分的ATSC数字电视标准，对视频信号进行编码。然而，并不限于此，射频编码器108可以根据ISO/IECJTC1/SC29/WG11和ITU-T SG16Q.6的联合视频组(JVT)起草的H.264/AVC、或者其它编码方案，对视频信号进行编码。
打包器110分别从音频编码器106和视频编码器108接收音频ES和视频ES，并且对各个流进行打包，以产生打包基本流(PES)。
控制器112包括字幕数据产生器114、用户数据插入器116、以及PSI/PSIP产生器118。控制器112控制系统的总体操作，并且产生对视频信号进行编码所需要的用户数据、节目专用信息(PSI)、以及节目和系统信息协议(PSIP)数据。
字幕数据产生器114通过网络或者通过记录介质从外部工作站接收具有时间戳的字幕数据，将所接收的数据打包为图3所示的字幕频道数据包。在发送立体3D图像对时，可以将两个图像中的一个指定为基本视图，可以将另一个指定为扩展视图。优选的是，针对基本视图产生字幕窗口位置信息。此外，字幕数据产生器114将指示字幕业务的类型和属性的字幕业务信息提供给PSI/PSIP产生器118。在本示例性实施方式中，字幕业务信息包括：3D字幕信息，例如指示封闭字幕业务是否为三维的信息；用于支持3D字幕的参数(以下，称为“3D字幕参数”)；等等。3D字幕参数可以是指示字幕在3D图像中的前向/后向位置的深度数据、或者指示扩展视图中的字幕显示位置与基本视图中的字幕显示位置之间的差异的水平视差。
用户数据插入器116在编码处理期间，向视频编码器108提供要按照序列级、GOP级或者图片级插入的扩展数据和用户数据。特别地，用户数据插入器116向视频编码器108提供来自字幕数据产生器114的字幕频道数据包作为一种用户数据，由此视频编码器108在将这些字幕频道数据包以两个字节为单位包括在图片报头中之后对视频信号进行编码。
PSI/PSIP产生器118产生PSIP数据。PSIP中的节目映射表(PMT)或事件信息表(EIT)包括用于描述字幕业务信息的字幕业务描述符。特别地，根据本示例性实施方式，字幕业务描述符包括用于支持3D字幕的3D字幕信息。
传输复用器120对PES和PSI/PSIP信息进行复用并且添加报头，以产生传输流(TS)。图1的系统发送单频道的陆地广播信号，而例如经由有线网络或卫星网络来发送多广播信号的另选系统可以附加地包括用于对这些广播信号进行复用以产生节目流的发送复用器。频道编码及调制单元122对TS进行纠错编码，从而接收器可以检测并校正由于发送频道中的噪声而可能引起的差错(error)。此外，频道编码和调制单元122根据系统所采用的调制方案(例如，8-VSB调制方案)对纠错编码后的TS进行调制。发送器124根据频道特性，例如经由天线来发送调制后的广播信号。
现在参照图7至10详细说明传送封闭字幕信息的信令数据的结构。
根据ISO/IEC 13838-2的MPEG-2标准、以及A/53第四部分的ATSC数字电视标准，可以将用于定义扩展数据或用户数据的extension_and_user_data()按照视频序列、GOP或图片级插入到报头。优选的是，将封闭字幕数据按照图片级作为图片用户数据插入，即，在视频ES中的可以设置在图片报头之后的extension_and_user_data()中。
图7中的第一表示出了图片扩展和用户数据的句法。句法标题‘extension_and_user_data(2)’的括号中的数值‘2’表示该句法是图片级的。如在‘dowhile’语句的执行条件中可以看到的，如果在图片报头内接下来出现的比特是extension_start_code或user_data_start_code，则认为后面的比特流是扩展数据或者用户数据。具体来说，认为在extension_start_code之后的比特流是extension_data(2)，而认为在user_data_start_code之后的比特流是user_data()。
如图7的第二表所示，图片用户数据(user_data())包括“user_data_start_code”和“user_data_identifier”字段，之后是user_structure()。根据ISO/IEC 13818-2标准，将“user_data_start_code”的值设置为“0x000001B2”。如在ISO/IEC 13818-1标准中所定义的，将“user_data_identifier”字段(其为表示user_structure()的句法和含义的32比特码)设置为“format_identifier”的值。在ATSC_user_data()的情况下，如在本发明中这样，将“user_data_identifier”设置为值“0x47413934”。
user_structure()是由“user_data_identifier”字段的值定义的可变长度数据结构，如图7的第三表所示，user_structure()包括“user_data_type_code”字段和user_data_type_structure()。“user_data_type_code”是表示ATSC用户数据的类型的8比特值。当“user_data_type_code”的值为“0x03”时，其表示封闭字幕数据。
图8例示了封闭字幕数据的句法，cc_data()。
“process_cc_data_flag”是表示是否必须对封闭字幕数据cc_data()进行处理的标志。当“process_cc_data_flag”被设置为1时，必须对封闭字幕数据进行解析和处理，而当“process_cc_data_flag”被设置为0时，这表示可以丢弃封闭字幕数据。“cc_count”字段表示在该字段之后的字幕数据结构的数量，并且可以具有0到31的值。根据帧速率和经编码图片数据结构来设置“cc_count”字段的具体值，以使得对于封闭字幕有效载荷数据保持9600bps的固定带宽。
对于各个字幕数据结构的cc_count数量，在“cc_data_1”和“cc_data_2”字段的字节对中携带封闭字幕数据的十六个比特。当被设置为1时，“cc_valid”字段表示后面的两个字幕数据字节是有效的。当被复位为0时，“cc_valid”字段表示后面的两个字幕数据字节是无效的。如CEA-708-B标准中所定义的，“cc_type”字段表示两个封闭字幕数据字节的类型。例如，如果“cc_type”字段的值为10，则其表示所述两个封闭字幕数据字节是频道数据包数据，而如果“cc_type”字段的值为11，则其表示新频道数据包的开始。
按这种方式，根据本发明的示例性实施方式，按照MPEG-2标准对构成立体图像对的两个2D图像进行编码，并且将封闭字幕数据作为用户数据插入在视频ES的图片报头中。然而，在这种情况下，可以按照另一编码方案(例如，ISO/IECJTC1/SC29/WG11和ITU-T SG16的联合视频组(JVT)起草的H.265/AVC标准)对这些图像进行编码。在按照H.264/AVC标准对图像进行编码的情况下，可以将封闭字幕数据包括在辅助增强信息(SEI)中。
图9例示了在根据H.265/AVC标准对立体图像对进行编码的另选实施方式中适用于发送封闭字幕数据的SEI RBSP有效载荷比特流的句法。
在图9所示的句法中，“itu_t_t35_country_code”是在ITU-T Rec.T35，附录A中指定的8比特国家码，在韩国的情况下，其值为‘0x61’。“itu_t_t35_provider_code”是值为‘0x0031’的16比特码。“user_identifier”是32比特码，并且可以通过值‘0x47413934”来表示user_structure()的句法结构符合ATSC A/53中的定义。在这种情况下，可以按照与ATSC数字电视标准(即，A/53第四部分6.2.3节)中定义的方式相同的方式来使用user_structure()。因此，可以通过图7的第三表所示的用户数据句法和图8的封闭字幕句法来指定封闭字幕数据。
同时，与字幕数据分离地将字幕业务信息发送到接收器，所述字幕业务信息描述由图片用户数据携带的字幕业务的类型和属性。在本示例性实施方式中，字幕业务信息是根据ATSC A/65标准而产生的，包括在字幕业务描述符中，并且通过MPEG-2传输流的事件信息表(EIT)和/或节目映射表(PMT)而发送。
图10例示了根据本示例性实施方式的EIT中包括的字幕业务描述符的比特流的句法。通常，字幕业务描述符是用于通过信号通知(signaling)封闭字幕信息的描述符，并且用于发送诸如封闭字幕的类型(例如，NTSC行21封闭字幕业务或者数字TV封闭字幕业务)、字幕语言等的信息。如上所述，根据本示例性实施方式，字幕业务描述符除了这些信息之外，还包括3D字幕信息。3D字幕信息包括关于封闭字幕业务是否为三维的信息、以及用于支持3D字幕的3D字幕参数。3D字幕参数可以是字幕深度值、或者基本视图的字幕显示位置与扩展视图的字幕显示位置之间的水平视差值。
“descriptor_tag”是标识描述符类型的8比特字段，在字幕业务描述符的情况下具有‘0x86’的值。“descriptor_length”字段是该描述符内在该字段之后的字节数量的计数。“number_of_services”字段是范围在1到16的5比特整数，表示EIT中存在的封闭字幕业务的数量。
“for”循环中的每次重复都定义了9600bps的封闭字幕流内的作为单个子流而存在的单个封闭字幕业务。每次重复都提供业务语言、属性和相关的字幕业务号。“language”字段是表示与封闭字幕业务相关联的语言的3字节语言码，并且具有由ISO639.2/B标准指定的值。当“digital_cc”字段被清零时，“language”字段没有意义。当被设置为1时，“digital_cc”字段表示存在数字TV封闭字幕业务。当“digital_cc”字段被清零时，该字段表示存在NTSC行21封闭字幕业务。“line21_field”被弃用(deprecate)，可以设置为1或者清零。“caption_service_number”字段是范围在0到63的6比特整数，标识封闭字幕流内的与“for”循环的当前重复中定义的语言和属性相关联的字幕业务号。仅当“digital_cc”字段表示数字TV封闭字幕业务时，才定义该字段。“easy_reader”字段是逻辑标志，当被设置为1时其表示封闭字幕业务包含针对开始方(beginner)的需要定制(tailor)的文本。如果该字段被清零，则其表示封闭字幕业务不是定制的。“easy_reader”字段在“digital_cc”字段被清零时没有意义。“wide_aspect_ratio”字段是逻辑标志。在被设置为1时，“wide_aspect_ratio”字段表示封闭字幕业务针对纵横比为16∶9的显示器进行了格式调整。在“wide_aspect_ratio”字段被清零时，封闭字幕业务针对纵横比为4∶3的显示器进行了格式调整。如果“digital_cc”字段被清零，则该字段没有意义。
“cc_3d_type”字段表示用于3D立体显示的3D字幕参数的存在和3D字幕参数的类型。值为‘00’的“cc_3d_type”表示无论3D字幕参数如何都必须丢弃该字段之后的数据比特，即“cc_disparity”字段或“cc_depth”字段。值为‘01’的“cc_3d_type”表示应当解析并且处理“cc_disparity”字段，并且“cc_disparity”字段是以像素数量为单位表示的。值为‘10’的“cc_3d_type”表示应当解析并且处理“cc_disparity”字段，并且“cc_disparity”字段是按相对于显示器的宽度的比率(％)来表示的。值为‘11’的“cc_3d_type”表示应当解析并且处理“cc_depth”字段。
“base_view”字段定义用作立体图像对(即，左图像和右图像)的基准的基本视图。在本示例性实施方式中，如果“base_view”字段为0，则左视图是基本视图，而如果“base_view”字段为1，则右视图是基本视图。
“cc_disparity”字段是当在立体显示器上显示字幕时在字幕显示位置的基本视图和扩展视图之间的水平视差值，其表示扩展视图相对于基本视图的字幕显示位置的字幕显示位置。因此，接收器可以通过将基本视图的字幕显示位置偏移水平视差，来获得扩展视图的封闭字幕显示位置。如上所述，可以由“cc_3d_type”字段表示“cc_disparity”字段的数据格式。在以上说明中，“cc_disparity”字段表示的水平视差值可以由像素数量或者相对于显示器宽度的比率(％)表示。然而，另选的是，“cc_disparity”也可以由物理长度(例如厘米或者英寸)来表示。当希望由物理长度来表示“cc_disparity”字段时，可以将“cc_3d_type”字段定义为替代像素数量或者相对于显示器宽度的比率，或者可以除了“cc_3d_type”字段之外新定义特定字段。
“cc_depth”字段表示立体3D图像中的字幕的深度。当3D视频数据包括深度信息时，可以将字幕的深度数据而不是水平视差(cc_disparity)提供给接收器，从而接收器可以通过应用深度数据来确定3D图像中的字幕显示位置。优选的是，所述深度的尺寸和比例可以等于视频数据的深度信息，从而接收器可以按相同方式对其进行解释。虽然视频数据的深度值可以具有负值或正值，但是可以构造将深度值映射为[0，255]的值的深度映射。优选的是，按这种方式表达字幕深度。同时，在构造深度映射时，可以按照线性标度(scale)将深度值映射为[0，255]的值。然而，另选的是，考虑到人类的感知特性，例如可以按照对数标度来映射深度值。
图11是用于接收图6的系统发送的广播信号的电视接收器的示意性框图。根据本示例性实施方式的电视接收器适用于接收陆地广播信号以再现图像。
调谐器200选择用户在经由图中未示出的天线输入的多个广播信号中选择的特定频道的广播信号。解调及频道解码单元202对来自调谐器200的广播信号进行解调，对解调后的信号进行纠错解码，以输出传输流(TS)。传输解复用器204对TS进行解复用，以分离视频ES和音频ES，并且提取PSI/PSIP信息。
音频解码器208对音频ES进行解码，以输出数字音频比特流。音频比特流由数模转换器(未示出)转换为模拟音频信号，由放大器(未示出)放大，然后经由扬声器(未示出)输出。视频解码器210对视频ES进行解析，以提取扩展和用户数据以及MPEG-2视频比特流。视频解码器210从扩展和用户数据提取封闭字幕数据cc_data()，以输出到字幕解码器216。视频解码器210对MPEG-2视频比特流进行解码，以输出用于实现立体3D图像对的左视频信号和右视频信号。音频解码器208和视频解码器210的解码处理可以基于由PSI/PSIP处理器214检测到的数据包ID(PID)来进行。
PSI/PSIP处理器214从传输解复用器204接收并解析PSI/PSIP信息以将其存储在图中未示出的存储器或者寄存器中，由此基于所存储的信息来再现广播图像。接收器接收的PSIP的EIT包括字幕业务描述符，该字幕业务描述符包含描述字幕业务的类型和属性的字幕业务信息。PSI/PSIP处理器214将字幕业务信息提供给字幕解码器216，从而字幕解码器216可以基于字幕业务信息对字幕数据进行解码。具体来说，根据本示例性实施方式，通过字幕业务描述符接收的字幕业务信息包括3D字幕信息(即，封闭字幕业务是否是三维的)以及用于实现3D字幕的3D字幕参数。然而，另选的是，可以将3D字幕信息提供给图形引擎218而不是字幕解码器216，或者提供给字幕解码器216和图形引擎218两者。
字幕解码器216从视频解码器210接收封闭字幕数据cc_data()，并且以数据包为单位累积由“cc_data_1”和“cc_data_2”携带的封闭字幕数据对。此外，字幕解码器216基于来自PSI/PSIP处理器214的字幕业务信息对字幕数据包数据进行拆包，以恢复对各个业务的业务块数据。之后，字幕解码器216对业务块数据进行解码和解释。同时，字幕解码器216从PSI/PSIP处理器214接收字幕业务信息，并且检测基本视图信息以及3D字幕参数，即来自3D字幕信息的水平视差值或者深度值。字幕解码器216基于解释后的业务块数据和3D字幕参数产生字幕显示信息，以提供给图像引擎218.
图形引擎218从字幕解码器216接收字幕显示信息，并且基于所接收的字幕显示信息，按照OSD信号形式产生用于基本视图和扩展视图的字幕位图。这里，基本视图可以是左图像，扩展视图可以是右图像。首先，图形引擎218使用由“base_view”字段确定的基本视图信息和所提取的封闭字幕数据来构造用于基本视图的字幕位图，并且按照OSD信号形式输出用于左图像的字幕位图。随后，图形引擎218使用3D字幕参数来构造用于扩展视图的字幕位图，并且按照OSD信号形式输出用于右图像的字幕位图。当3D字幕参数是水平视差值时，通过将用于基本视图的字幕位图按水平视差进行移位，可以构造用于扩展视图的字幕位图。同时，如果3D字幕参数是深度值，则通过使用字幕深度值将与基本视图对应的字幕数据显示在显示器上，这在广播信号中附加地提供了深度图像时是尤其有用的。
第一混合器220将来自图形引擎218的左图像字幕位图混合到来自视频解码器210的左图像信号。第二混合器222将来自图形引擎218的右图像字幕位图混合到来自视频解码器210的右图像信号。格式调整器224在对信号的帧时间进行比较的同时，对叠加有相应的字幕位图的左图像和右图像进行格式调整，使得在时间上一致的左图像和右图像可以成对显示在显示板232上。将经过格式调整的3D图像信号重构为3D图像并且显示在显示板226上。
同时，可以响应于用户命令选择性地执行第一混合器220和第二混合器222的图像合成。即，用户例如可以操纵遥控器(未示出)来选择是否显示封闭字幕窗口、并且要显示多个封闭字幕窗口中的哪个封闭字幕窗口。当施加了这样的操纵命令时，接收器的控制器(未示出)可以将命令存储在存储器中，并且参照所存储的命令来控制封闭字幕窗口的显示。
现在参照图12和13来详细说明图11的电视接收器中的提取封闭字幕信息并显示3D封闭字幕的处理。
图12示出了图11的电视接收器中的提取封闭字幕信息的处理。
首先，PSI/PSIP处理器214解析PSIP以基于数据包ID(PID)和表ID来提取“PID”为‘0x1FFB’并且“table_ID”为‘0xC7’的主指南表(MGT)，并且从MGT获取事件信息表(EIT)的PID信息。接着，PSI/PSIP处理器214读取具有所获取的PID的TP，以提取“table_ID”为‘0xC7’的EIT。然后，PSI/PSIP处理器214解析EIT并且针对EIT中的各个事件检测图10所示的字幕业务描述符(步骤250)。
在步骤252，PSI/PSIP处理器214解析字幕业务描述符，以提取字幕业务信息(步骤252)。通过字幕业务描述符接收到的字幕业务信息包括3D字幕信息(即，封闭字幕业务是否为三维的)和用于实现3D字幕的3D字幕参数。之后，PSI/PSIP处理器214将字幕业务信息存储在存储器或寄存器中，从而字幕解码器216可以基于字幕业务信息对字幕数据进行解码，并且图形引擎218可以基于3D字幕信息产生字幕图像。
存储3D字幕信息的处理如下所述。这里，“cc_3d_type”字段值确定是存储“cc_disparity”还是“cc_eepth”字段值。如果“cc_3d_type”字段值为‘01’或者‘10’(步骤254)，则PSI/PSIP处理器214存储水平视差“cc_disparity”值作为3D字幕参数(步骤256)。如果在步骤254中“cc_3d_type”字段值为‘11’，则PSI/PSIP处理器214存储字幕深度“cc_depth”值作为3D字幕参数(步骤258)。另一方面，如果“cc_3d_type”字段值为‘00’，则PSI/PSIP处理器214认为字幕业务是2D字幕业务，并且认为“cc_3d_type”字段和后继数据是没有意义的保留比特而将它们丢弃(步骤260)。
在步骤262，视频解码器210解析视频ES以输出扩展和用户数据以及MPEG-2视频比特流，并对MPEG-2视频比特流进行解码。在由视频解码器210解析视频ES的处理中，提取视频ES的图片报头或者消息中包括的封闭字幕数据cc_data()并将其提供给字幕解码器216。即，视频解码器210从视频ES的图片用户数据user_data()中检测“user_data_identifier”值为‘0x47413934’的ATSC_user_data()，并且提取“user_data type_code”为‘0x03’的user_data_type_structure()作为封闭字幕数据cc_data()。累积以数据包为单位通过cc_data()接收的字幕数据字节对cc_data1和cc_data2，字幕解码器216基于来自PSI/PSIP处理器214的字幕业务信息对字幕数据包进行解码和解释(步骤264)。
图13例示了显示3D封闭字幕的处理。
在步骤280，图形引擎218通过使用解码后的字幕文本数据和由“base_view”字段确定的基本视图信息，构造用于基本视图的字幕位图。图14示出了用于基本视图(例如，左图像)的字幕位图的示例。之后，图形引擎218通过使用3D字幕参数来构造用于扩展视图的字幕位图(步骤282)。
更具体地说，如果在步骤254至260中存储的3D字幕参数是水平视差值，则通过将用于基本视图的字幕位图按照水平视差进行移位，可以构造用于扩展视图的字幕位图，如图15所示。这里，如果字幕业务描述符中包括的“cc_disparity”字段的值表示像素数量或者实际物理长度，则通过简单地将用于基本视图的字幕窗口按该字段值进行移位，可以获得包括用于扩展视图的字幕窗口的字幕位图。同时，如果字幕业务描述符中包含的“cc_displarity”字段的值表示与显示器宽度的比率(即，如果“cc_3d_type”字段的值为‘10’)，而不是实际物理长度的像素数量，则可以通过下式1来计算以实际像素为单位的水平视差值，在下式1中假定“cc_disparity”是以N比特的分辨率来表示的：
[式1]
Figure BDA0000074501820000171
通过简单地将用于基本视图的字幕窗口按水平视差进行移位，可以获得包括用于扩展视图的字幕窗口的字幕位图。图16例示了用于扩展视图(例如，右图像)的字幕位图的示例。
另一方面，在存储的3D字幕参数是字幕深度值的情况下，通过使用该字幕深度值将对应于基本视图的字幕数据显示在显示板上。这里，如果按照对数标度或除了线性标度之外的任何其他非线性标度将从“cc_depth”字段获得的深度值映射在[0，255]的范围内，则按相应方式对深度值进行逆映射。在这种情况下，可以通过使用诸如摄像机参数等的其它信息来进一步调整深度值。图17示出了用于测量封闭字幕深度值的基准点的示例。如图17所示，当拍摄图像时图像聚焦在其上并且定像点(fixationpoint)位于其上的图像深度平面292通常位于显示器的显示面290的后面，在一些情况下也可以位于显示器的显示面290的前面(294)。其上显示封闭字幕的深度平面296优选地位于图像深度平面292和294的前面。这里，封闭字幕深度平面296的深度值是从显示面290开始测量的，并且在观众的方向上具有正值，而在显示面290的向后方面上具有负值。
再次参照图13，两个视图的字幕与图像信号组合，然后在步骤284中根据适当的立体显示方案对其进行格式调整。通过显示板226输出格式调整之后的视频信号，并且在画面上输出叠加在3D广播图像上的3D封闭字幕(步骤286)。图18至20示出了通过合成叠加有相应的封闭字幕窗口的左图像和右图像而获得的画面图像的示例。具体来说，图18示出了如下的示例：其中，左图像和右图像水平交织，从而左图像和右图像在水平方向上逐行地交替显示。图19示出了如下的示例：其中，左图像和右图像垂直交织，从而左图像和右图像在垂直方向上逐行地交替显示。图20示出了将左图像和右图像格式调整为具有棋盘图案的示例。通过偏振眼镜，将所显示的左图像和右图像分别输入到观众的左眼和右眼。
图18至20的示例适用于利用偏振眼镜的接收器系统。然而，另选的是，本发明可以也适用于利用快门眼镜(shuttered glasses)的接收器系统。在利用快门眼镜的接收器系统中，图14和16所示的叠加有相应的封闭字幕窗口的左图像和右图像可以交替显示在显示板上。并且，与所显示图像的切换同步的快门眼镜使得左图像和右图像可以发送到观众的左眼和右眼中的相应眼睛。
图21是图11的电视接收器的另选实施方式的示意性框图。在本示例性实施方式中，由一个格式调整器对左广播图像信号和右广播图像信号进行格式调整，由另一个格式调整器对左封闭字幕OSD信号和右封闭字幕OSD信号进行格式调整，然后混合格式调整后的信号。第一格式调整器224A根据立体输出方案对来自视频解码器210的左图像信号和右图像信号进行格式调整。第二格式调整器224B根据立体输出方案对来自图像引擎218的左图像字幕OSD信号和右图像字幕OSD信号进行格式调整。混合器220A对第一格式调整器224A和第二格式调整器224B的输出信号进行合成，从而在显示板226上显示格式调整后的图像信号。
假定对于左图像和右图像的字幕位图分别与图14和16中所示的相同，则第二格式调整器224B输出按图22所示的并排格式或者按图23所示的上下格式进行了格式调整的字幕位图图像。因此，在由混合器220A进行了混合之后显示在显示板226上的立体3D图像可以具有与图18或图19所示形式类似的形式。图21的电视接收器的其它特征类似于图11的实施方式的特征，因此省略对其的详细说明。
第二实施方式
在上述示例性实施方式中，通过EIT的字幕业务描述符，将通过使用单个视图的封闭字幕数据来帮助实现3D字幕的3D字幕信息传送到接收器。然而，另选的是，可以按不同方式来传送3D字幕信息，例如，将3D字幕信息作为视频ES中的图片用户数据来传送。图24示出了用于实现这种发送方案的广播系统的示例。
在图24的系统中，视频编码器308在对视频信号进行编码的同时从用户数据插入器316接收用户数据以插入到图片报头。具体地，用户数据包括封闭字幕数据和3D字幕信息。封闭字幕数据和3D字幕信息都设置在图片用户数据的ATSC_user_data()内，并且如上所述，可以由“user_data_type_code”字段来区分。
字幕数据产生器314通过网络或者通过记录介质从外部工作站接收具有时间戳的字幕数据，并且产生图3所示的字幕频道数据包。字幕数据产生器314将字幕频道数据包和3D字幕信息提供给用户数据插入器316，由此用户数据插入器316将该信息插入到图片用户数据。同时，字幕数据产生器314将指示字幕业务的类型和属性的字幕业务信息提供给PSI/PSIP产生器318，从而PSI/PSIP产生器318可以产生EIT。
用户数据插入器316在编码处理期间，向视频编码器308提供要按序列级、GOP级、或者图片级插入的扩展数据和用户数据。具体来说，用户数据插入器316将封闭字幕数据和3D字幕信息作为一种用户数据提供给视频编码器308，由此视频编码器308在将封闭字幕数据和3D字幕信息包括在图片报头中之后对视频信号进行编码。
在本示例性实施方式中，由用户数据插入器316提供并且由视频编码器308插入到图片报头的封闭字幕数据的句法具有与图7和8所示格式相同的格式。在本示例性实施方式中，仅针对从用于实现立体3D图像的两个或更多个视图中选择的一个视图(即，基本视图)发送封闭字幕数据。3D字幕信息包括关于封闭字幕业务是否为三维的信息、基本视图信息、以及3D字幕参数，并且由接收器用于基于仅针对基本视图提供的封闭字幕数据来实现3D字幕。
图25例示了图24的系统发送3D字幕参数的disparity_data()的句法。
如以上参照图7所述，图片用户数据user_data()包括“user_data_start_code”和“user_data_identifier”字段，之后是user_structure()。根据ISO/IEC 13838-2标准，将“user_data_start_code”的值设置为‘0x000001B2’。“user_data_identifier”字段是指示user_structure()的句法和含义的32比特码，并被设置为“format_identifier”的值，如ISO/IEC 13838-1标准中所定义的。在根据本发明的ATSC_user_data()的情况下，将“user_data_identifier”字段设置为“0x47413934”的值。
user_structure()是由“user_data_identifier”的值定义的可变长度数据结构，并且如图25的第二表所示，包括“user_data_type_code”字段和user_data_type_structure()。“user_data_type_code”是指示ATSC用户数据的类型的8比特值。当“user_data_type_code”字段的值为‘0x03’时，其表示封闭字幕数据，而当“user_data_type_code”字段值为‘0x04’时，其表示3D封闭字幕参数数据。
如图25的第三表所示，3D封闭字幕参数数据包括3D字幕信息disparity_data()。图25的第四表示出了3D字幕信息disparity_data()的句法。由于各个字段的含义与以上关于图10所示的字幕业务描述符所述的相同，所以省略对其的详细描述。
再次参照图24，PSI/PSIP产生器308产生PSI/PSIP数据。PSIP包括事件信息表(EIT)，所述EIT包括用于描述字幕业务信息的字幕业务描述符。与图7的实施方式相反，在本示例性实施方式中，字幕业务描述符可以符合遵照A/65标准的通用格式，如图26所示，而不是包括用于支持3D字幕的3D字幕信息。
由于图24的其它特征与图7所示的示例性实施方式的特征相似，所以省略对其的详细描述。
图27示出了适用于接收由图24的系统发送的广播信号的电视接收器的示例。
调谐器200选择用户在通过天线输入的多个广播信号中选择的特定频道的广播信号。解调及频道解码单元202对来自调谐器200的广播信号进行解调，对解调后的信号进行纠错解码，并且输出传输流(TS)。传输解复用器204对TS进行解复用以分离视频ES和音频ES，并且提取PSI/PSIP信息。
音频解码器208对音频ES进行解码以输出数字音频比特流。该音频比特流由数模转换器转换为模拟音频信号，由放大器放大，并随后通过扬声器输出。视频解码器410解析视频ES以提取扩展和用户数据以及MPEG-2视频比特流。视频解码器410从扩展和用户数据提取封闭字幕数据cc_data()和3D字幕信息cc_disparity()以输出到字幕解码器216。视频解码器410对MPEG-2视频比特流进行解码以输出用于实现立体3D图像的左视频信号和右视频信号。由音频解码器208和视频解码器410进行的解码处理可以基于PSI/PSIP处理器214检测到的数据包ID(PID)来进行。
PSI/PSIP处理器414接收并且解析来自传输解复用器204的PSI/PSIP信息以存储在存储器或寄存器中，从而基于存储的信息来再现广播图像。PSIP的EIT包括字幕业务描述符，所述字幕业务描述符包含描述字幕业务的类型和属性的字幕业务信息。PSI/PSIP处理器214将字幕业务信息提供给字幕解码器416，从而字幕解码器416基于字幕业务信息来对字幕数据进行解码。与图11的实施方式相反，在本示例性实施方式中，用于实现3D字幕的3D字幕信息不包括在字幕业务描述符所携带的字幕业务信息中。
字幕解码器416从视频解码器410接收封闭字幕数据cc_data()，并且以数据包为单位累积由“cc_data_1”和“cc_data_2”携带的封闭字幕数据对。此外，字幕解码器416基于来自PSI/PSIP处理器414的字幕业务信息对字幕数据包数据进行拆包，以恢复各个业务的业务块数据。之后，字幕解码器416对业务块数据进行解码和解释。同时，字幕解码器416从视频解码器410接收字幕业务信息cc_disparity()，并且检测基本视图信息以及3D字幕参数，即水平视差值或者深度值。字幕解码器416基于解释后的业务块数据和3D字幕参数产生字幕显示信息以提供给图形引擎218。
图形引擎218从字幕解码器416接收字幕显示信息，并且基于字幕显示信息按照OSD信号形式产生用于基本视图和扩展视图的字幕位图。这里，基本视图可以是左图像，扩展视图可以是右图像。首先，图形引擎218使用由“base_view”字段确定的基本视图信息和提取的封闭字幕数据来构造用于基本视图的字幕位图，并且按照OSD信号形式输出用于基本视图的字幕位图。随后，图形引擎218使用3D字幕参数来构造用于扩展视图的字幕位图，并且按照OSD信号形式输出用于扩展视图的字幕位图。当3D字幕参数是水平视差值时，可以通过将用于基本视图的字幕位图按照水平视差进行移位，来构造用于扩展视图的字幕位图。同时，如果3D字幕参数是深度值，则通过使用字幕深度值将对应于基本视图的字幕数据显示在显示器上，这在广播信号中附加地提供了深度图像时是尤其有用的。
第一混合器220将来自图形引擎218的左图像字幕位图混合到来自视频解码器410的左图像信号。第二混合器222将来自图形引擎218的右图像字幕位图混合到来自视频解码器410的右图像信号。格式调整器224在比较信号的帧时间的同时对叠加有相应字幕位图的左图像和右图像进行格式调整，由此可以将在时间上一致的左图像和右图像成对显示在显示板232上。在显示板226上将格式调整后的3D图像信号重构为3D图像。
同时，响应于用户命令，可以选择性地执行由第一混合器220和第二混合器222进行的图像合成。即，用户例如可以操纵遥控器来选择是否要显示封闭字幕窗口、以及显示多个封闭字幕窗口中的哪个封闭字幕窗口。当施加了这样的操纵命令时，接收器的控制器可以将该命令存储在存储器中，并且参照所存储的命令来控制封闭字幕窗口的显示。
现在，参照图28详细描述图27中示出的电视接收器中的提取封闭字幕信息的处理。
首先，PSI/PSIP处理器414解析PSIP，以基于数据包ID(PID)和表ID来提取“PID”为‘0x1FFB’并且“table_ID”为‘0xC7’的主指南表(MGT)，以从该MGT获取事件信息表(EIT)的PID信息。接着，PSI/PSIP处理器414读取具有所获取的PID的TP，以提取“table_ID”为‘0xC7’的EIT。然后，PSI/PSIP处理器414解析EIT以检测针对EIT中的各个事件的图26所示的字幕业务描述符以及字幕业务信息(步骤450)。
在步骤452到466，从包括在视频ES的图片报头中并且存储在存储器中的3D字幕信息disparity_data()中，提取3D字幕参数和基本视图信息。首先，在步骤452，视频解码器410解析对应于EIT的视频ES以输出扩展和用户数据以及MPEG-2视频比特流，并对MPEG-2视频比特流进行解码。在解析视频ES的处理期间，在提取了报头以及扩展和用户数据之后，视频解码器410对图片报头中的extension_and_user_data(2)进行解码以提取图片用户数据user_data()。随后，视频解码器410从图片用户数据user_data()中检测“user_data_identifier”值为‘0x47413934’的ATSC_user_data()(步骤454)。之后，视频解码器410从ATSC_user_data()提取“user_data_type_code”为‘0x04’的user_data_type_structure()以提供给字幕解码器416(步骤456)。随后，字幕解码器416从来自视频解码器410的3D字幕信息disparity_data()中提取“cc_3d_type”、“base_view”、以及“cc_disparity”或者“cc_depth”字段值(步骤458)。
这里，“cc_3d_type”字段值确定是存储“cc_disparity”还是“cc_depth”字段值。如果“cc_3d_type”字段值为‘01’或者‘10’(步骤460)，则字幕解码器416存储3D字幕参数的水平视差“cc_disparity”值(步骤462)。在步骤460中，如果“cc_3d_type”字段值为‘11’，则字幕解码器416存储3D字幕参数的字幕深度“cc_depth”值(步骤S464)。另一方面，如果“cc_3d_type”字段值为‘00’，则字幕解码器416认为字幕业务为2D字幕业务，并且认为“cc_3d_type”字段及后续数据是没有意义的保留位而丢弃它们(步骤466)。
同时，在根据H.265/AVC标准对视频ES进行编码的另选实施方式中，类似于可以通过SEI原始字节序列有效载荷(RBSP)传送封闭字幕数据cc_data()，也可以通过SEI RBSP来将3D字幕信息，即disparity_data()，传送到接收器。在这种情况下，视频解码器410解析AVC NAL单元以提取“nal_unit_type”值为‘6’的SEI数据，并且读取“payloadType”值为‘4’的user_data_registered_itu_t_t35()。之后，视频解码器410从图片用户数据user_data()中检测“user_data_identifier”值为‘0x47413934’的user_data()。随后，视频解码器410从user_data()中提取“user_data_type_code”为‘0x04’的user_data_type_structure()。然后，字幕解码器416从所提取的数据中读取3D字幕信息disparity_data()结构，以提取“cc_3d_type”、“base_view”、和“cc_disparity”或“cc_depth”字段值并且存储在存储器中。
同时，在视频解码器410解析视频ES的处理中，提取视频ES的图片报头或者消息中包括的cc_data()并且将其提供给字幕解码器416。即，视频解码器410从视频ES的图片用户数据user_data()中检测“user_data_identifier”值为‘0x47413934’的ATSC_user_data()，并且从ATSC_user_data()中提取‘user_data_type_code”为‘0x03’的user_data_type_structure()作为封闭字幕数据cc_data()。字幕解码器416以数据包为单位累积通过cc_data()接收的字幕数据字节对(cc_data1和cc_data2)，并且提取数据包内的业务块以管理字幕业务(步骤468)。
在画面上显示所提取的封闭字幕信息的处理类似于以上参照图13至23描述的情况。即，假定用于基本视图(例如，左图像)的字幕位图类似于图14所示的字幕位图，则如图15所示，通过将用于基本视图的字幕位图按照水平视差进行移位，可以构造如图16所示的用于扩展视图的字幕位图。第一混合器220将左字幕OSD信号混合到左图像信号，第二混合器222将右字幕OSD信号混合到右图像信号。格式调整器224根据立体方案调整这两个图像信号的格式，由此通过显示板226输出格式调整后的图像信号。叠加有相应的封闭字幕窗口的左图像和右图像可以分别根据如图18或图19所示的水平或垂直交织方案来合成，或者可以合成为如图20所示的棋盘图案。
图29是图27的电视接收器的另选实施方式的示意性框图。根据本实施方式，由一个格式调整器来调整左广播图像信号和右广播图像信号的格式，由另一个格式调整器来调整左封闭字幕OSD信号和右封闭字幕OSD信号的格式，然后混合格式调整后的信号。第一格式调整器224A根据立体输出方案调整来自视频解码器410的左图像信号和右图像信号的格式。第二格式调整器224B根据立体输出方案调整来自图形引擎218的左图像字幕OSD信号和右图像字幕OSD信号的格式。混合器220A合成第一格式调整器224A和第二格式调整器224B的输出信号，从而在显示板226上显示格式调整后的图像信号。
假定用于左图像和右图像的字幕位图分别与图14和16所示的字幕位图相同，则第二格式调整器224B输出按照图22所示的并排格式或者图23所示的上下格式而进行了格式调整的字幕位图图像。因此，在由混合器220A混合后显示在显示板226上的立体3D图像可以具有与图18或图19所示的形式类似的形式。图29所示的电视接收器的其它特征类似于图27的实施方式的特征，因此省略对其的详细说明。
第三实施方式
图30示出了根据本发明第三示例性实施方式的广播系统。在第三示例性实施方式中，将3D字幕信息作为字幕控制码插入到封闭字幕数据cc_data()。
在图30的系统中，视频编码器508在编码视频信号的同时，接收来自用户数据插入器516的用户数据以将其插入到图片报头。具体来说，该用户数据包括封闭字幕数据cc_data()，该封闭字幕数据cc_data()包括用于支持3D字幕的3D字幕信息。
字幕数据产生器514通过网络或者通过记录介质从外部工作站接收带有时间戳的字幕数据，并且产生图3所示的字幕频道数据包。字幕数据产生器314将字幕频道数据包和3D字幕信息提供给用户数据插入器316，由此用户数据插入器316将这些信息插入到图片用户数据。具体来说，在本示例性实施方式中，如下所述，将3D字幕信息作为控制码插入到字幕频道数据包的字幕数据包数据。此外，字幕数据产生器314将表示字幕业务的类型和属性的字幕业务信息提供给PSI/PSIP产生器518，由此PSI/PSIP产生器518可以产生字幕业务描述符。
用户数据插入器516在编码处理期间向视频编码器508提供要按照序列级、GOP级、或图片级插入的扩展数据和用户数据。具体来说，用户数据插入器516将来自字幕数据产生器514的字幕频道数据包作为一种用户数据提供给视频编码器508，由此视频编码器508可以在编码视频信号的同时，一次两个字节地将字幕频道数据包插入到图片报头。
如上所述，当在添加业务块报头和字幕报头之前根据图5的码空间对字幕数据cc_data()进行编码时，通过控制码将用于支持3D字幕的3D字幕信息插入到字幕数据cc_data()中。图31示出了用于传送3D字幕信息的设置3D参数(S3D)命令的编码格式的示例。在优选示例性实施方式中，该设置3D参数命令包括三个字节：一个字节的命令码和两个字节的参数，并且在码空间中可以缩写为“S3D”。
在附图中，“3D_Type_Flag”字段表示是否包括用于支持3D字幕的参数以及该参数的类型。“3D_Type_Flag”值‘00”表示不支持3D字幕并且应当丢弃该字段之后的参数。“3D_Type_Flag”值‘01’表示支持3D字幕，并且“Disparity Parameter”字段指示以像素为单位表示的水平视差值。“3D_Type_Flag”值‘10’表示支持3D字幕，并且“Disparity Parameter”字段指示被表示为相对于显示器宽度的比率(％)的水平视差值。“3D_Type_Flag”值‘11’表示支持3D字幕，并且“Disparity Parameter”字段是字幕深度值。
“base_view”字段定义用作立体图像对(即，左图像和右图像)的基准的基本视图。在本示例性实施方式中，如果“base_view”字段为0，则左视图是基本视图，而如果“base_view”字段为1，则右视图是基本视图。
当“3D_Type_Flag”字段的值为‘01’或‘10’时，“Disparity Parameter”字段是在字幕显示位置处在基本视图与扩展视图之间的水平视差值，并且表示相对于基本视图的字幕显示位置而言扩展视图的字幕显示位置。因此，接收器可以通过将用于基本视图的封闭字幕按照水平视差值进行移位，来获取用于扩展视图的封闭字幕显示位置。如上所述，“3D_Type_Flag”字段可以指示“Disparity Parameter”字段的数据格式。在以上说明中，“3D_Type_Flag”字段表示的水平视差值可以由像素数量来表示，或者由相对于显示器宽度的比例(％)来表示。然而，另选的是，“3D_Type_Flag”字段也可以由物理长度(例如，厘米、英寸等)来表示。当想要用物理长度来表示水平视差值时，可以将“3D_Type_Flag”字段定义为替换像素数量或者与显示器宽度的比例，或者除了“3D_Type_Flag”字段之外，可以新定义特定字段。此外，“3D_Type_Flag”字段值‘00’可以定义“Disparity Parameter”表示由像素数量表示的水平视差值。
当“3D_Type_Flag”字段的值为‘11’时，“Disparity Parameter”字段表示立体3D图像中的字幕的深度。当3D视频数据包括深度信息时，可以将字幕数据的深度数据而不是水平视差提供给接收器，从而接收器可以通过应用深度数据来确定3D图像中的字幕显示位置。优选的是，所述深度的尺寸和比例(scale)与关于视频数据的深度信息是相同的，从而接收器可以按相同方式解释它。虽然视频数据的深度值可以具有负值或正值，但是可以构造将深度值映射为[0，255]的值的深度图。优选的是，按这种方式来表示字幕的深度值。同时，在构造深度图时，可以按线性标度将深度值映射为[0，255]的值。然而，另选的是，考虑到人类的感知特性，也可以按对数标度来映射深度值。
图32示出了根据本发明示例性实施方式的码空间中的设置3D参数(S3D)的位置。在图5的符合CEA-708-B标准的码空间中，分配C0码集以映射各种控制码，C0码集包括从“0x00”到“0x1F”的32个码。在C0码集中，“0x00”到“0x0F”的码是单字节码，“0x10”到“0x17”的码是两字节码，“0x18”到“0x1F”的码是三字节码。
在上述实施方式中，设置3D参数命令是三字节码，并且可以映射到码“0x18”到“0x1F”中的一个空码。优选的是，将设置3D参数命令映射到“0x18”的位置。
如上定义的设置3D参数命令与其它控制码和字幕文本数据一起构成业务块数据。前缀为业务块报头的业务块数据形成如图4所示的业务块，前缀为数据包报头的业务块构成如图3所示的字幕频道数据包。以两个字节为单位分割字幕频道数据包，并将其插入到视频ES的图片报头。
将图片用户数据携带的描述字幕业务的类型和属性的字幕业务信息与字幕数据分离地发送到接收器。在本示例性实施方式中，字幕业务信息是根据ATSC A/65标准而产生的，包括在字幕业务描述符中，并且通过MPEG-2传输流的事件信息表(EIT)来发送。根据本示例性实施方式的字幕业务描述符的句法符合图26所示的通用格式。
图33是适用于接收图30的系统发送的广播信号的电视接收器的示意性框图。
调谐器200选择用户在通过天线输入的多个广播信号中选择的特定频道的广播信号。解调及频道解码单元202对来自调谐器200的广播信号进行解调，并对解调后的信号进行纠错解码以输出传输流(TS)。传输解复用器204对TS进行解复用，以分离视频ES和音频ES，并且提取PSI/PSIP信息。
音频解码器208对音频ES进行解码，以输出数字音频比特流。所述音频比特流由数模转换器转换为模拟音频信号，由放大器进行放大，然后通过扬声器输出。视频解码器610解析视频ES以提取扩展和用户数据以及MPEG-2视频比特流。视频解码器610从扩展和用户数据提取封闭字幕数据cc_data()，并且输出到字幕解码器216。视频解码器610对MPEG-2视频比特流进行解码，以输出用于实现立体3D图像对的左视频信号和右视频信号。音频解码器208和视频解码器610进行的解码处理可以基于PSI/PSIP处理器214检测到的数据包ID(PID)来进行。
PSI/PSIP处理器414接收并且解析来自传输解复用器204的PSI/PSIP信息以存储在存储器或寄存器中，从而基于所存储的信息来再现广播图像。PSIP的EIT包括字幕业务描述符，所述字幕业务描述符包含描述字幕业务的类型和属性的字幕业务信息。PSI/PSIP处理器214将字幕业务信息提供给字幕解码器616，从而字幕解码器616可以基于所接收的字幕业务信息来对字幕数据进行解码。
字幕解码器616从视频解码器610接收封闭字幕数据cc_data()，并且累积由“cc_data_1”和“cc_data_2”字段携带的封闭字幕数据对。此外，字幕解码器616基于来自PSI/PSIP处理器414的字幕业务信息对字幕数据包数据进行拆包，以恢复各个业务的业务块数据。之后，字幕解码器616对业务块数据进行解码和解释。当在解释业务块数据的处理中检测到设置3D参数命令时，字幕解码器616从该命令中检测基本视图信息以及3D字幕信息参数，即水平视差值或者深度值。字幕解码器616基于解释后的业务块数据和3D字幕参数产生字幕显示信息以提供给图形引擎218。
图形引擎218从字幕解码器416接收字幕显示信息，并且基于字幕显示信息按照OSD信号形式产生用于基本视图和扩展视图的字幕位图。这里，基本视图可以是左图像，扩展视图可以是右图像。首先，图形引擎218使用由“base_view”字段确定的基本视图信息和所提取的封闭字幕数据来构造用于基本视图的字幕位图，并且按照OSD信号形式输出用于左图像的字幕位图。随后，图形引擎218使用3D字幕参数来构造用于扩展视图的字幕位图，并且按照OSD信号形式输出用于右图像的字幕位图。当3D字幕参数是水平视差值时，可以通过将用于基本视图的字幕位图按照水平视差进行移位，来构造用于扩展视图的字幕位图。同时，如果3D字幕参数是深度值，则通过使用字幕深度值将对应于基本视图的字幕数据显示在显示器上，这在广播信号中附加地提供了深度图像时是尤其有用的。
第一混合器220将来自图形引擎218的左图像字幕位图混合到来自视频解码器610的左图像信号。第二混合器222将来自图形引擎218的右图像字幕位图混合到来自视频解码器610的右图像信号。格式调整器224在比较图像信号的帧时间的同时对叠加有相应字幕位图的左图像和右图像进行格式调整，由此可以将在时间上一致的左图像和右图像成对显示在显示板232上。在显示板226上将格式调整后的3D图像信号重构为3D图像。
现在参照图34详细描述图33示出的电视接收器中提取封闭字幕信息的处理。
首先，PSI/PSIP处理器414解析PSIP，以基于数据包ID(PID)和表ID来提取“PID”为‘0x1FFB’并且“table_ID”为‘0xC7’的主指南表(MGT)，并且从该MGT获取事件信息表(EIT)的PID信息。接着，PSI/PSIP处理器414读取具有所获取的PID的TP，以提取“table_ID”为‘0xC7’的EIT。然后，PSI/PSIP处理器414解析EIT以检测针对EIT中的各个事件的图26所示的字幕业务描述符以及字幕业务信息(步骤650)。
在步骤652，视频解码器610解析对应于EIT的视频ES，以输出扩展和用户数据以及MPEG-2视频比特流，并且对MPEG-2视频比特流进行解码。在解析视频ES的处理期间，在提取了报头以及扩展和用户数据之后，视频解码器610对图片报头中的extension_and_user_data(2)进行解码以提取图片用户数据user_data()。同时，在根据H.264/AVC标准对视频ES进行编码的另选实施方式中，在此阶段对辅助增强信息(SEI)进行解码。即，视频解码器610解析AVC NAL单元以提取“nal_unit_type”值为‘6’的SEI数据，并且读取“payload_Type”值为‘4’的user_data_registered_itu_t_t35()消息。
随后，视频解码器610从图片用户数据user_data()中检测“user_data_identifier”值为‘0x47413934’的ATSC_user_data()，并且从ATSC_user_data()中提取“user_data_type_code”为‘0x03’的user_data_type_structure()作为封闭字幕数据cc_data()。随后，字幕解码器616以数据包为单位累积通过cc_data()接收到的字幕数据字节对(cc_data1和cc_data2)，并且提取数据包内的业务块以管理字幕业务(步骤654)。
之后，字幕解码器616从所累积的字幕业务块数据中检测对应于设置3D参数命令的数据字节(步骤656)。字幕解码器616从检测到的命令字节之后的两个参数字节中提取“3D_Type_Flag”、“Base_View”，“3D_Type_Flag”以及“Disparity/DepthParameter”字段(步骤658)。
在步骤660，字幕解码器616基于“3D_Type_Flag”字段来确定是否应当以3D显示封闭字幕。如果“3D_Type_Flag”字段值为指示3D字幕的‘01’、‘10’或‘11’，则字幕解码器616从设置3D参数命令中提取与3D字幕相关的参数，并将其存储在存储器中。更具体地说，当“3D_Type_Flag”字段值为‘01’或‘10’时，字幕解码器616存储“Disparity/Depth Parameter”作为水平视差值(步骤662)。如果“3D_Type_Flag”字段值为‘11’，则字幕解码器616存储“Disparity/Depth Parameter”作为字幕深度值(步骤664)。同时，如果“3D_Type_Flag”字段值为‘00’，则字幕解码器616认为对应的节目不支持3D字幕功能，并且丢弃设置3D参数命令内的参数数据(步骤666)。
在画面上显示所提取的封闭字幕信息的处理类似于以上参照图13至23描述的情况。即，假定用于基本视图(例如，左图像)的字幕位图类似于图14所示的字幕位图，则如图15所示，通过将用于基本视图的字幕位图按照水平视差进行移位，可以构造图16所示的用于扩展视图的字幕位图。第一混合器220将左字幕OSD信号混合到左信号，第二混合器222将右字幕OSD信号混合到右图像信号。格式调整器224根据立体方案调整这两个图像信号的格式，由此通过显示板226输出格式调整后的图像信号。叠加有相应封闭字幕窗口的左图像和右图像可以分别根据如图18或图19所示的水平或垂直交织方案来合成，或者可以合成为如图20所示的棋盘图案。
图35是图33的电视接收器的另选实施方式的示意性框图。根据本实施方式，由一个格式调整器来调整左广播图像信号和右广播图像信号的格式，由另一个格式调整器来调整左封闭字幕OSD信号和右封闭字幕OSD信号的格式，然后混合格式调整后的信号。第一格式调整器224A根据立体输出方案调整来自视频解码器410的左图像信号和右图像信号的格式。第二格式调整器224B根据立体输出方案调整来自图形引擎218的左图像字幕OSD信号和右图像字幕OSD信号的格式。混合器220A合成第一格式调整器224A和第二格式调整器224B的输出信号，从而在显示板226上显示格式调整后的图像信号。
假定用于左图像和右图像的字幕位图分别与图14和16所示的字幕位图相同，则第二格式调整器224B输出按照图22所示的并排格式或者图23所示的上下格式而进行了格式调整的字幕位图图像。因此，在由混合器220A混合后显示在显示板226上的立体3D图像可以具有与图18或图19所示的形式类似的形式。图35所示的电视接收器的其它特征类似于图33的实施方式的特征，因此省略对其的详细说明。
虽然根据图31的编码格式，“Disparity Parameter”字段由一个字节数据构成，但是另选地，“Disparity Parameter”可以包括两个或更多个字节，以增强数据的精度或者扩展显示范围。图36示出了这种示例。在图36的示例中，设置3D参数命令包括四个字节：一个字节的命令码和三个字节的参数。这里，“Disparity Parameter”字段具有两个字节，由一个高位字节和一个低位字节来表示。
图37示出了根据图36的示例性实施方式的码空间中的设置3D参数命令的位置。在图5所示的根据CEA-708-B标准的码空间中，字幕控制码集中在C1码集中。如果除了该码集之外还需要附加命令，则可以使用C2或C3码集中的保留码。C2码集包括从“0x00”到“0x1F”的32个码，可以通过加前缀“0x10”来编址(即，“EXT1”码)。在C2码集中的码当中，从“0x00”到“0x07”的码是单字节码(不需要附加字节)，从“0x08”到“0x0F”的码是两字节码(需要一个附加字节)，从“0x10”到“0x17”的码是三字节码(需要两个附加字节)，并且，从“0x18”到“0x1F”的码是四字节码(需要三个附加字节)。在图36的示例性实施方式中，设置3D参数(S3D)命令除了前缀“EXT1”之外由四字节构成，由此可以映射到从“0x18”到“0x1F”的码之一。优选的是，将设置3D参数(S3D)命令映射到码“0x18”。
其它另选实施方式
此外，可以对所述的实施方式进行各种变化和修改，而不脱离本发明的精神和范围。
例如，虽然在图6至23的示例性实施方式中字幕业务描述符包括在事件信息表(EIT)中，但是另选地，可以将该描述符插入到节目映射表(PMT)或其它表中。
同时，在上述说明中，通过广播信号将3D字幕参数(例如，水平视差值或者字幕深度值)发送到接收器。然而，可以在接收器中合成水平视差值。例如，电视接收器可以对左图像和右图像应用块匹配算法，以对于多个块或者对象计算水平视差值。通常，将具有绝对值较大的正水平视差的对象识别为位置距观众较远，而将具有绝对值较大的负水平视差的另一个对象识别为位置距观众较近。因此，可以基于针对假定为位置距观众最近的对象而计算的水平视差值，来确定封闭字幕的水平视差值。
如果屏幕尺寸很大并且左图像和右图像的封闭字幕之间的水平视差值很大，则左图像的封闭字幕的宽度和右图像的封闭字幕的宽度之间可能有所差异。因此，考虑到这一点，图形引擎可以附加地进行缩放以调整左图像的封闭字幕和右图像的封闭字幕中的一个或两个的宽度。
因此，应当理解，前述说明是示例性的而不是限制性的。我们要求保护落入所附权利要求的精神和范围内的所有修改和变型。
[工业适用性]
如上所述的，根据本发明的3D显示装置，封闭字幕可以自然地与3D图像融合并且显示。具体来说，即使仅对单个图像而不是用于实现3D图像的全部多个2D图像提供封闭字幕数据，接收器也可以基于3D字幕信息显示3D字幕。
本发明可以应用于具有3D显示功能并且需要具有封闭字幕显示功能的任何类型的显示装置。具体来说，本发明尤其可以用于与格式调整方案无关的立体显示装置，例如双模显示器、时间连续显示器等。

Claims (20)

1.一种三维(3D)显示装置中的3D字幕显示方法，该方法包括以下步骤：
接收步骤，接收包括3D图像信号的广播信号；
获取步骤，获取所述广播信号中包括的3D字幕信息和用于基本视图的字幕数据；
产生步骤，通过使用所述3D字幕信息来产生用于扩展视图的字幕数据；以及
格式调整和输出步骤，对用于所述基本视图的字幕数据和用于所述扩展视图的字幕数据进行格式调整和输出。
2.根据权利要求1所述的方法，其中，所述3D字幕信息是水平视差值，通过将用于所述基本视图的字幕数据按所述水平视差值进行移位来产生用于所述扩展视图的字幕数据。
3.根据权利要求1所述的方法，其中，从所述广播信号的事件信息表(EIT)中提取所述3D字幕信息。
4.根据权利要求1所述的方法，其中，从所述广播信号的节目映射表(PMT)中提取所述3D字幕信息。
5.根据权利要求1所述的方法，其中，从所述广播信号的图片报头中提取所述3D字幕信息。
6.根据权利要求5所述的方法，其中，所述获取步骤包括以下步骤：
对所述广播信号的图片报头进行解析，以提取字幕信号；以及
从所述字幕信号提取所述3D字幕信息和用于所述基本视图的字幕数据。
7.一种三维(3D)显示装置中的3D字幕显示方法，该方法包括以下步骤：
接收步骤，接收包括3D图像信号的广播信号；
获取所述广播信号中包括的字幕数据和3D字幕信息；
获取所述3D字幕信息中包括的字幕深度信息；以及
通过使用所述字幕深度信息，将所述字幕数据显示在显示画面上。
8.根据权利要求7所述的方法，其中，从所述广播信号的事件信息表(EIT)中提取所述3D字幕信息。
9.根据权利要求7所述的方法，其中，从所述广播信号的节目映射表(PMT)中提取所述3D字幕信息。
10.根据权利要求7所述的方法，其中，从所述广播信号的图片报头中提取所述3D字幕信息。
11.根据权利要求10所述的方法，其中，所述获取步骤包括以下步骤：
对所述广播信号的图片报头进行解析，以提取字幕信号；以及
从所述字幕信号提取所述3D字幕信息和用于基本视图的字幕数据。
12.一种三维(3D)显示装置，该装置包括：
信号接收单元，其被构成为接收包括3D图像信号的广播信号，恢复所述图像信号，并获取所述广播信号中包括的3D字幕信息和用于基本视图的字幕数据；以及
合成及输出单元，其被构成为通过使用所述3D字幕信息来产生用于扩展视图的字幕数据，并对用于所述基本视图的字幕数据和用于所述扩展视图的字幕数据进行格式调整和输出。
13.根据权利要求12所述的装置，其中，所述信号接收单元包括：
解调单元，其被构成为接收广播信号，对所接收的广播信号进行解调，并输出传输流；
解复用器，其被构成为对所述传输流进行解复用，以输出经编码的图像信号和信令信息；
信令信息处理单元，其被构成为从所述信令信息中提取所述3D字幕信息；
视频解码单元，其被构成为对所述经编码的图像信号进行解析，以提取图片报头；以及
字幕解码单元，其被构成为从所述图片报头中提取用于所述基本视图的字幕数据。
14.根据权利要求13所述的装置，其中，所述3D字幕信息是水平视差值，通过将用于所述基本视图的字幕数据按所述水平视差值进行移位来产生用于所述扩展视图的字幕数据。
15.根据权利要求14所述的装置，其中，所述信号接收单元恢复基本视图图像信号和扩展视图图像信号，
其中，所述合成及输出单元包括：
图形产生器，其被构成为基于用于所述基本视图的字幕数据而产生基本视图字幕图像信号，并且基于用于所述扩展视图的字幕数据而产生扩展视图字幕图像信号；
第一混合器，其被构成为合成所述基本视图图像信号和所述基本视图字幕图像信号；
第二混合器，其被构成为合成所述扩展视图图像信号和所述扩展视图字幕图像信号；以及
格式调整器，其被构成为根据立体输出方案而调整所述第一混合器和所述第二混合器的输出信号的格式。
16.根据权利要求14所述的装置，其中，所述信号接收单元恢复基本视图图像信号和扩展视图图像信号，
其中，所述合成及输出单元包括：
图形产生器，其被构成为基于用于所述基本视图的字幕数据而产生基本视图字幕图像信号，并且基于用于所述扩展视图的字幕数据而产生扩展视图字幕图像信号；
第一格式调整器，其被构成为根据立体输出方案而调整所述基本视图图像信号和所述扩展视图图像信号的格式；
第二格式调整器，其被构成为根据立体输出方案而调整所述基本视图字幕图像信号和所述扩展视图字幕图像信号的格式；
混合器，其被构成为合成所述第一格式调整器和所述第二格式调整器的输出信号。
17.根据权利要求12所述的装置，其中，所述信号接收单元包括：
解调器，其被构成为接收广播信号并对所接收的广播信号进行解调，以输出传输流；
解复用器，其被构成为对所述传输流进行解复用，以输出经编码的图像信号；
视频解码单元，其被构成为对所述经编码的图像信号进行解析，以提取图片报头；以及
字幕解码单元，其被构成为从所述图片报头中提取所述3D字幕信息和用于所述基本视图的字幕数据。
18.根据权利要求17所述的装置，其中，所述3D字幕信息是水平视差值，通过将用于所述基本视图的字幕数据按所述水平视差值进行移位来产生用于所述扩展视图的字幕数据。
19.根据权利要求18所述的装置，其中，所述信号接收单元重构基本视图图像信号和扩展视图图像信号，
其中，所述合成及输出单元包括：
图形产生器，其被构成为基于用于所述基本视图的字幕数据而产生基本视图字幕图像信号，并且基于用于所述扩展视图的字幕数据而产生扩展视图字幕图像信号；
第一混合器，其被构成为合成所述基本视图图像信号和所述基本视图字幕图像信号；
第二混合器，其被构成为合成所述扩展视图图像信号和所述扩展视图字幕图像信号；以及
格式调整器，其被构成为根据立体输出方案而调整所述第一混合器和所述第二混合器的输出信号的格式。
20.根据权利要求18所述的装置，其中，所述信号接收单元重构基本视图图像信号和扩展视图图像信号，
其中，所述合成及输出单元包括：
图形产生器，其被构成为基于用于所述基本视图的字幕数据而产生基本视图字幕图像信号，并且基于用于所述扩展视图的字幕数据而产生扩展视图字幕图像信号；
第一格式调整器，其被构成为根据立体输出方案而调整所述基本视图图像信号和所述扩展视图图像信号的格式；
第二格式调整器，其被构成为根据立体输出方案而调整所述基本视图字幕图像信号和所述扩展视图字幕图像信号的格式；以及
混合器，其被构成为合成所述第一格式调整器和所述第二格式调整器的输出信号。
CN200980154091.1A 2008-12-02 2009-09-23 3d字幕显示方法和实现该方法的3d显示装置 Expired - Fee Related CN102273210B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US11933708P 2008-12-02 2008-12-02
US61/119,337 2008-12-02
US12048308P 2008-12-07 2008-12-07
US61/120,483 2008-12-07
PCT/KR2009/005435 WO2010064784A2 (ko) 2008-12-02 2009-09-23 3차원 캡션 디스플레이 방법 및 이를 구현하기 위한 3차원 디스플레이 장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201410347214.6A Division CN104065950B (zh) 2008-12-02 2009-09-23 3d字幕显示方法和设备以及发送3d字幕的方法和设备

Publications (2)

Publication Number Publication Date
CN102273210A true CN102273210A (zh) 2011-12-07
CN102273210B CN102273210B (zh) 2014-08-13

Family

ID=42233689

Family Applications (2)

Application Number Title Priority Date Filing Date
CN200980154091.1A Expired - Fee Related CN102273210B (zh) 2008-12-02 2009-09-23 3d字幕显示方法和实现该方法的3d显示装置
CN201410347214.6A Expired - Fee Related CN104065950B (zh) 2008-12-02 2009-09-23 3d字幕显示方法和设备以及发送3d字幕的方法和设备

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201410347214.6A Expired - Fee Related CN104065950B (zh) 2008-12-02 2009-09-23 3d字幕显示方法和设备以及发送3d字幕的方法和设备

Country Status (5)

Country Link
US (3) US8599242B2 (zh)
KR (1) KR101659026B1 (zh)
CN (2) CN102273210B (zh)
CA (1) CA2745021C (zh)
WO (1) WO2010064784A2 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105657395A (zh) * 2015-08-17 2016-06-08 乐视致新电子科技（天津）有限公司 一种3d视频的字幕播放方法及装置
CN105812771A (zh) * 2010-06-27 2016-07-27 Lg电子株式会社 数字接收器以及在数字接收器中处理字幕数据的方法
CN106664448A (zh) * 2014-07-11 2017-05-10 Lg 电子株式会社 用于发送和接收广播信号的方法和设备
US10368144B2 (en) 2014-07-29 2019-07-30 Lg Electronics Inc. Method and device for transmitting and receiving broadcast signal
US10582269B2 (en) 2014-07-11 2020-03-03 Lg Electronics Inc. Method and device for transmitting and receiving broadcast signal

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100045779A1 (en) * 2008-08-20 2010-02-25 Samsung Electronics Co., Ltd. Three-dimensional video apparatus and method of providing on screen display applied thereto
KR20110132546A (ko) * 2009-02-27 2011-12-08 파나소닉 주식회사 기록매체, 재생장치 및 집적회로
WO2010100875A1 (ja) * 2009-03-02 2010-09-10 パナソニック株式会社 記録媒体、再生装置、及び集積回路
KR20100128233A (ko) * 2009-05-27 2010-12-07 삼성전자주식회사 영상 처리 방법 및 장치
CN102461187A (zh) * 2009-06-22 2012-05-16 Lg电子株式会社 视频显示装置及其操作方法
JP2011030182A (ja) * 2009-06-29 2011-02-10 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
KR20120131170A (ko) * 2010-02-25 2012-12-04 톰슨 라이센싱 디스패러티의 시간 변화에 대한 디스패러티 추정 및 한계를 가진 입체적인 자막 달기
US9426441B2 (en) * 2010-03-08 2016-08-23 Dolby Laboratories Licensing Corporation Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning
US8839338B2 (en) * 2012-03-28 2014-09-16 Sony Corporation Service usage reporting data transport
WO2011118216A1 (ja) * 2010-03-24 2011-09-29 パナソニック株式会社 映像処理装置
JP6073214B2 (ja) 2010-03-31 2017-02-01 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ 視差を処理する方法、装置及びプロセッサ読み取り可能媒体
CN107911684B (zh) 2010-06-02 2020-06-23 麦克赛尔株式会社 接收装置和接收方法
KR20110138151A (ko) * 2010-06-18 2011-12-26 삼성전자주식회사 자막 서비스를 포함하는 디지털 방송 서비스를 제공하기 위한 비디오 데이터스트림 전송 방법 및 그 장치, 자막 서비스를 포함하는 디지털 방송 서비스를 제공하는 비디오 데이터스트림 수신 방법 및 그 장치
JP4996720B2 (ja) * 2010-06-30 2012-08-08 株式会社東芝 画像処理装置、画像処理プログラム、及び画像処理方法
TWI491244B (zh) * 2010-11-23 2015-07-01 Mstar Semiconductor Inc 調整物件三維深度的方法與裝置、以及偵測物件三維深度的方法與裝置
JP4989760B2 (ja) * 2010-12-21 2012-08-01 株式会社東芝 送信装置、受信装置および伝送システム
EP2697975A1 (en) 2011-04-15 2014-02-19 Dolby Laboratories Licensing Corporation Systems and methods for rendering 3d images independent of display size and viewing distance
JP2012244570A (ja) * 2011-05-24 2012-12-10 Funai Electric Co Ltd 立体映像表示装置
WO2012161734A1 (en) 2011-05-26 2012-11-29 Thomson Licensing Scale-independent maps
US9554175B2 (en) * 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
KR101975247B1 (ko) 2011-09-14 2019-08-23 삼성전자주식회사 영상 처리 장치 및 그 영상 처리 방법
EP2800391A4 (en) * 2011-12-27 2015-07-29 Lg Electronics Inc DIGITAL BROADCAST RECEIVING METHOD FOR DISPLAYING THREE-DIMENSIONAL IMAGE, AND CORRESPONDING RECEIVING DEVICE
WO2013111552A1 (ja) * 2012-01-27 2013-08-01 パナソニック株式会社 画像処理装置、撮像装置および画像処理方法
EP2862350A4 (en) 2012-06-19 2015-11-18 Sony Corp EXPANSIONS OF A TRIGGER PARAMETER PANEL FOR INTERACTIVE TELEVISION
MX343095B (es) * 2012-08-15 2016-10-25 Sony Corp Distribucion por banda ancha de informacion de personalizacion para servicios de tv avanzados.
US9190025B1 (en) * 2013-03-14 2015-11-17 Amazon Technologies, Inc. Adapting display fonts for reflective displays
KR101861497B1 (ko) * 2013-07-19 2018-05-28 에이치에프아이 이노베이션 인크. 3ｄ 비디오 코딩에서의 카메라 파라미터 시그널링의 방법 및 장치
JP6599864B2 (ja) * 2014-04-27 2019-11-06 エルジー エレクトロニクス インコーポレイティド 放送信号送信装置、放送信号受信装置、放送信号送信方法、及び放送信号受信方法
US10848795B2 (en) * 2015-05-12 2020-11-24 Lg Electronics Inc. Apparatus for transmitting broadcast signal, apparatus for receiving broadcast signal, method for transmitting broadcast signal and method for receiving broadcast signal
CN112019883B (zh) * 2015-07-06 2022-04-22 Lg电子株式会社 发送广播信号的方法和设备及接收广播信号的方法和设备
US10315816B2 (en) * 2015-09-29 2019-06-11 Samsonite Ip Holdings S.A R.L. Hydration reservoir
CN109152521B (zh) 2016-07-14 2022-04-05 直观外科手术操作公司 紧凑双目图像捕获设备
CN108089004B (zh) * 2016-11-21 2020-01-07 中国科学院大连化学物理研究所 一种硫巯化翻译后修饰肽段的定性与定量方法
CN111133763B (zh) * 2017-09-26 2022-05-10 Lg 电子株式会社 360视频系统中的叠加处理方法及其设备
CN107835403B (zh) 2017-10-20 2020-06-26 华为技术有限公司 一种以3d视差效果显示的方法及装置
CN109561263A (zh) * 2018-11-23 2019-04-02 重庆爱奇艺智能科技有限公司 在vr设备的3d视频中实现3d字幕效果
US12003825B1 (en) * 2022-09-21 2024-06-04 Amazon Technologies, Inc. Enhanced control of video subtitles

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6351280B1 (en) * 1998-11-20 2002-02-26 Massachusetts Institute Of Technology Autostereoscopic display system
US6965379B2 (en) 2001-05-08 2005-11-15 Koninklijke Philips Electronics N.V. N-view synthesis from monocular video of certain broadcast and stored mass media content
JP2004274125A (ja) * 2003-03-05 2004-09-30 Sony Corp 画像処理装置および方法
US7769794B2 (en) 2003-03-24 2010-08-03 Microsoft Corporation User interface for a file system shell
CN1328905C (zh) * 2004-06-29 2007-07-25 乐金电子（沈阳）有限公司 电视机的字幕错误修正装置及其方法
KR100678938B1 (ko) 2004-08-28 2007-02-07 삼성전자주식회사 영상과 자막의 동기화 조절 장치 및 방법
JP4861988B2 (ja) * 2004-09-24 2012-01-25 マイクロソフト コーポレーション ファイルシステムシェルブラウザを実現するコンピュータ・プログラム
KR20070047665A (ko) * 2005-11-02 2007-05-07 삼성전자주식회사 방송수신장치, 방송송신장치, 방송 시스템 및 그 제어방법
KR100818933B1 (ko) 2005-12-02 2008-04-04 한국전자통신연구원 디지털방송 기반 ３차원 컨텐츠 서비스 제공 방법
KR20080036329A (ko) * 2006-10-23 2008-04-28 엘지전자 주식회사 캡션 디스플레이 장치 및 방법
CA2680724C (en) 2007-03-16 2016-01-26 Thomson Licensing System and method for combining text with three-dimensional content
CN101312506B (zh) * 2007-05-21 2010-12-22 Nec卡西欧移动通信株式会社 附带字幕的影像重现装置
JP2009135686A (ja) * 2007-11-29 2009-06-18 Mitsubishi Electric Corp 立体映像記録方法、立体映像記録媒体、立体映像再生方法、立体映像記録装置、立体映像再生装置
KR101506219B1 (ko) * 2008-03-25 2015-03-27 삼성전자주식회사 3차원 영상 컨텐츠 제공 방법, 재생 방법, 그 장치 및 그기록매체
KR101539935B1 (ko) * 2008-06-24 2015-07-28 삼성전자주식회사 3차원 비디오 영상 처리 방법 및 장치
WO2010010709A1 (ja) * 2008-07-24 2010-01-28 パナソニック株式会社 立体視再生が可能な再生装置、再生方法、プログラム
MX2011002553A (es) * 2008-09-18 2011-04-04 Panasonic Corp Dispositivo de reproduccion de video estereoscopico y dispositivo de presentacion visual de video estereoscopico.
WO2010085074A2 (en) 2009-01-20 2010-07-29 Lg Electronics Inc. Three-dimensional subtitle display method and three-dimensional display device for implementing the same
CN104333746B (zh) 2009-02-12 2017-04-12 Lg电子株式会社 广播接收机及其3d字幕数据处理方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105812771A (zh) * 2010-06-27 2016-07-27 Lg电子株式会社 数字接收器以及在数字接收器中处理字幕数据的方法
CN105812771B (zh) * 2010-06-27 2017-12-08 Lg电子株式会社 数字接收器以及在数字接收器中处理字幕数据的方法
CN106664448A (zh) * 2014-07-11 2017-05-10 Lg 电子株式会社 用于发送和接收广播信号的方法和设备
US10419718B2 (en) 2014-07-11 2019-09-17 Lg Electronics Inc. Method and device for transmitting and receiving broadcast signal
US10582269B2 (en) 2014-07-11 2020-03-03 Lg Electronics Inc. Method and device for transmitting and receiving broadcast signal
US10368144B2 (en) 2014-07-29 2019-07-30 Lg Electronics Inc. Method and device for transmitting and receiving broadcast signal
CN105657395A (zh) * 2015-08-17 2016-06-08 乐视致新电子科技（天津）有限公司 一种3d视频的字幕播放方法及装置

Also Published As

Publication number Publication date
CN104065950A (zh) 2014-09-24
US9253469B2 (en) 2016-02-02
WO2010064784A3 (ko) 2010-07-22
CA2745021C (en) 2014-10-28
CA2745021A1 (en) 2010-06-10
US8878899B2 (en) 2014-11-04
WO2010064784A2 (ko) 2010-06-10
US20150009305A1 (en) 2015-01-08
KR101659026B1 (ko) 2016-09-23
US20140139626A1 (en) 2014-05-22
US20110149036A1 (en) 2011-06-23
CN102273210B (zh) 2014-08-13
CN104065950B (zh) 2016-06-15
KR20110106288A (ko) 2011-09-28
US8599242B2 (en) 2013-12-03

Similar Documents

Publication Publication Date Title
CN102273210B (zh) 3d字幕显示方法和实现该方法的3d显示装置
KR101622688B1 (ko) 3차원 캡션 디스플레이 방법 및 이를 구현하기 위한 3차원 디스플레이 장치
KR101622691B1 (ko) 3차원 캡션 신호 전송 방법 및 3차원 캡션 디스플레이 방법
CN102972039B (zh) 处理图像的设备及处理图像的方法
CA2745392C (en) Method for 3d image signal processing and image display for implementing the same
CN102959952B (zh) 数字接收器以及在数字接收器中处理字幕数据的方法
CN102883172A (zh) 接收装置、接收方法和发送接收方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140813

Termination date: 20210923

CF01 Termination of patent right due to non-payment of annual fee