CN108028949B - 传输装置、传输方法、再现装置和再现方法 - Google Patents

传输装置、传输方法、再现装置和再现方法 Download PDF

Info

Publication number
CN108028949B
CN108028949B CN201680052622.6A CN201680052622A CN108028949B CN 108028949 B CN108028949 B CN 108028949B CN 201680052622 A CN201680052622 A CN 201680052622A CN 108028949 B CN108028949 B CN 108028949B
Authority
CN
China
Prior art keywords
subtitle
stream
packet
payload
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201680052622.6A
Other languages
English (en)
Other versions
CN108028949A (zh
Inventor
塚越郁夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN108028949A publication Critical patent/CN108028949A/zh
Application granted granted Critical
Publication of CN108028949B publication Critical patent/CN108028949B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/9201—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving the multiplexing of an additional signal and the video signal
    • H04N5/9206—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving the multiplexing of an additional signal and the video signal the additional signal being a character code signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362—Generation or processing of Service Information [SI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4343—Extraction or processing of packetized elementary streams [PES]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/782—Television signal recording using magnetic recording on tape
    • H04N5/783—Adaptations for reproducing at a rate different from the recording rate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)

Abstract

本发明使得能够在RAP再现和可变速度再现期间良好地执行字幕的显示。在本发明中，在有效载荷中生成由均包括编码图像数据的视频分组组成的视频流。在有效载荷中，生成由均具有字幕信息的字幕分组组成的字幕流。生成并传输由通过将视频流和字幕流进行分组而获得的容器分组组成的多路复用流。在其有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入指示有效载荷包括第一字节的第一标识信息。例如，第一标识信息还基于具有包括在特定容器分组的有效载荷中的第一字节的字幕分组的字幕信息来指示字幕显示优先级。

Description

传输装置、传输方法、再现装置和再现方法
技术领域
本发明涉及一种传输装置、一种传输方法、一种再现装置和一种再现方法，具体地，涉及一种用于将字幕信息与图像数据一起传输的传输装置等。
背景技术
传统上，例如在数字视频广播(DVB)等的广播中，执行通过使用位图数据来传输字幕信息的操作。最近，提出了通过使用文本字符代码，换言之，基于文本来传输字幕信息。在这种情况下，在接收侧执行对应于分辨率的字体扩展。
另外，提出了在基于文本传输字幕信息的情况下，向文本信息提供时间信息。作为这种文本信息，在例如万维网联盟(W3C)中提出了时间文本标记语言(TTML)(参见专利文献1)。
引用列表
专利文献
专利文献1：日本专利申请公开No.2012-169885
发明内容
本发明要解决的技术问题
本技术的目的是能够在RAP再现时和在可变速度再现时满意地显示字幕。
解决技术问题的技术方案
本技术的概念在于一种传输装置，包括：
视频编码单元，用于生成包括视频分组(packet，数据包)的视频流，其中，有效载荷具有编码图像数据；
字幕编码单元，用于生成包括字幕分组的字幕流，其中，有效载荷具有字幕信息；
多路复用流生成单元，用于生成包括通过对所述视频流和所述字幕流进行分组而获得的容器分组的多路复用流；
传输单元，用于传输多路复用的流；以及
信息插入单元，用于在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入指示有效载荷包括第一字节的第一标识信息。
在本技术中，视频编码单元生成包括视频分组的视频流，其中，有效载荷具有编码图像数据。字幕编码单元生成包括字幕分组的字幕流，其中，有效载荷具有字幕信息。例如，字幕信息可以是具有预定格式并且具有显示时间信息的字幕的文本信息。
多路复用流生成单元生成包括通过对所述视频流和所述字幕流进行分组而获得的容器分组的多路复用流。例如，多路复用流可以是MPEG-2传输流、MMT流或DASH/ISOBMFF流。信息插入单元在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入指示有效载荷包括第一字节的第一标识信息。传输单元传输多路复用流。
以此方式，在本技术中，在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入指示有效载荷包括第一字节的第一标识信息。因此，例如，在RAP再现时，基于该第一标识信息，可以容易地识别有效载荷包括字幕分组的第一字节的容器分组。因此，可以有效地提取包括字幕分组的数据的一系列容器分组，这使得能够令人满意地显示字幕。
另外，在本技术中，例如，第一标识信息可以被配置为还指示基于包含在字幕分组中的字幕信息的字幕显示的优先级，所述字幕分组具有在特定容器分组的有效载荷中包括的第一字节。在这种情况下，例如，在可变速度再现时，参考由第一标识符指示的优先级，可以根据再现速度来选择要显示的字幕。这使得能够容易地选择要显示的字幕，并且令人满意地显示反映了制作者侧的意图的字幕。
应该注意的是，在本技术中，可以进一步提供信息插入单元，用于将的第二标识信息插入到多路复用流中。第二标识信息指示第一标识信息插入到特定容器分组的报头中。在这种情况下，将第二标识信息插入到多路复用流中，使得能够容易地确定将第一标识信息插入到特定容器分组的报头中。
另外，在本技术中，例如，多路复用流生成单元可以被配置为将字幕分组设置在随机存取位置处。在这种情况下，当从多路复用流中取出随机存取位置处的视频分组时，可以一起取出字幕分组。这使得能够例如在RAP再现时简化字幕显示处理。
另外，本技术的另一概念在于一种再现装置，包括再现处理单元，用于使多路复用流经受再现处理，所述多路复用流包括通过对视频流和字幕流进行分组而获得的容器分组，所述视频流包括视频分组，其中，有效载荷具有编码图像数据，所述字幕流包括字幕分组，其中，有效载荷具有字幕信息，
其中：
在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入指示有效载荷包括第一字节的第一标识信息；并且
所述再现处理单元基于第一标识信息从多路复用流中提取特定的容器分组。
在本技术中，再现处理单元使多路复用流经受再现处理，所述多路复用流包括通过对视频流和字幕流进行分组而获得的容器分组。在此处，所述视频流包括视频分组，其中，有效载荷具有编码图像数据。此外，所述字幕流包括字幕分组，其中，有效载荷具有字幕信息，
在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入指示有效载荷包括第一字节的第一标识信息。所述再现处理单元基于第一标识信息从多路复用流中提取特定的容器分组。
以这种方式，在本技术中，基于第一标识信息从多路复用流中提取特定容器分组。因此，例如，在RAP再现时，可以有效地提取包括字幕分组的数据的一系列容器分组，这使得能够令人满意地显示字幕。
应当注意，在本技术中，例如，第一标识信息可以被配置为还指示基于包含在字幕分组中的字幕信息的字幕显示的优先级，所述字幕分组具有在特定容器分组的有效载荷中包括的第一字节，并且所述再现处理单元可以被配置成当所述多路复用流经受可变速度再现处理时，基于优先级信息来控制基于包含在每个字幕分组中的字幕信息的字幕显示。在这种情况下，在可变速度再现时，可以容易地选择要显示哪个字幕，并且可以令人满意地执行反映了制作者侧的意图的字幕显示。
另外，本技术的又一概念在于一种传输装置，包括：
视频编码单元，用于生成包括视频分组的视频流，其中，有效载荷具有编码图像数据；
字幕编码单元，用于生成包括字幕分组的字幕流，其中，有效载荷具有字幕信息；
多路复用流生成单元，用于生成包括通过对所述视频流和所述字幕流进行分组(packetize)而获得的容器分组的多路复用流；
传输单元，用于传输多路复用的流；以及
信息插入单元，用于在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入基于包含在具有第一字节的字幕分组中的字幕信息的字幕显示的优先级信息。
在本技术中，视频编码单元生成包括视频分组的视频流，其中，有效载荷具有编码图像数据。字幕编码单元生成包括字幕分组的字幕流，其中，有效载荷具有字幕信息。例如，字幕信息可以是具有预定格式并且具有显示时间信息的字幕的文本信息。
多路复用流生成单元生成包括通过将所述视频流和所述字幕流进行分组而获得的容器分组的多路复用流。例如，多路复用流可以是MPEG-2传输流、MMT流或DASH/ISOBMFF流。信息插入单元在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入基于包含在具有第一字节的字幕分组中的字幕信息的字幕显示的优先级信息。传输单元传输多路复用流。
以此方式，在本技术中，在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入基于包含在具有第一字节的字幕分组中的字幕信息的字幕显示的优先级信息。因此，例如，在可变速度再现时，参考优先级信息，可以根据再现速度来选择要显示的字幕。这使得能够容易地选择要显示的字幕，并且令人满意地显示反映了制作者侧的意图的字幕。
另外，例如，在RAP再现时，基于该优先级信息，可以容易地识别有效载荷包括字幕分组的第一字节的容器分组。因此，可以有效地提取包括字幕分组的数据的一系列容器分组，这使得能够令人满意地显示字幕。
本发明的技术效果
根据本技术，在RAP再现时和在可变速度再现时，可以令人满意地显示字幕。应该注意的是，本说明书中描述的效果仅被解释为说明性的，而不是限制性的，另外，可以产生额外的效果。
附图说明
[图1]是示出作为实施例的传输和接收系统的配置实例的方框图。
[图2]是示出广播传送系统的流生成单元的配置实例的方框图。
[图3]是示出TTML结构的示图。
[图4]示出存在于具有TTML结构的报头(head)中的元数据(metadata)、样式(styling)和布局(layout)元素的相应结构实例的示图。
[图5]示出了均具有TTML结构的主体(body)的相应结构实例的示图。
[图6]是示意性地示出控制单元中的时间管理单元的配置实例的示图。
[图7]是示出字幕显示时间管理单元的详细配置的示图。
[图8]是示出PES包的配置实例的示图。
[图9]是示出TS分组的配置实例的示图。
[图10]示出了PVR辅助信息(PVR_assist_information)的结构实例以及该结构实例中的主要信息内容。
[图11]是作为实例示出了字幕PES包与均具有包括字幕PES包的数据的有效载荷的TS分组的关系的示图。
[图12]示出了字幕随机存取位置描述符(Subtitle_rap_descriptor)的结构实例以及该结构实例中的主要信息内容。
[图13]是示出传输流TS的配置实例的示图。
[图14]是示出电视接收机的配置实例的示图。
[图15]是示意性地示出解码和输出在随机存取点(RAP)位置读取的字幕PES包的处理时间的示图。
[图16]是作为实例示出可变速再现模式中的字幕显示序列的示图。
[图17]示出表格，其作为实例示出了添加到字幕的“PVR_priority_value”的值与在每个再现速度(即，正常速度、双倍速度和四倍速度)下显示的字幕之间的对应关系。
[图18]是示出现有技术中的多路复用的示图。
[图19]是示出根据本技术的多路复用的示图。
[图20]是示出具有TTML结构的主体(body)的另一结构实例的示图；
[图21]示出了PVR辅助信息(PVR_assist_information)的另一结构实例以及该结构实例中的主要信息内容。
具体实施方式
下面将描述执行本发明的方式(在下文中称为实施例)。应该注意的是，按以下顺序进行解释。
1、实施例
2、修改实例
1、实施例
传输和接收系统的配置实例
图1示出作为实施例的传输和接收系统10的配置实例。该传输和接收系统10包括广播传送系统100和电视接收机200。广播传送系统100在广播波上传输作为多路复用流的MPEG-2传送流(在下文中简称为“传送流”)TS。传输流TS不仅具有视频流和音频流，而且还具有字幕流。
视频流包括视频PES包，在该视频PES包中有效载荷具有编码图像数据。音频流包括音频PES包，在该音频PES包中有效载荷具有编码音频数据。字幕流包括字幕PES包，在该字幕PES包中有效载荷具有字幕(字幕)信息。具有与在随机存取位置处的视频PES包的报头的时间戳(time stamp)插入位置处插入的时间戳的值相同或接近的值的时间戳插入到字幕PES包的报头的时间戳插入位置。
当字幕流与视频流等多路复用时，包括字幕PES包(在下文中简称为PES包)的TS分组设置在随机存取位置处。在这种情况下，例如，如上所述，参考在报头的时间戳插入位置处插入的时间戳，并且将字幕PES包设置在随机存取位置处，换言之，接近在随机存取位置处的视频PES包的位置。
传输流TS包括TS分组，该TS分组为通过将视频流、音频流和字幕流中的每一个进行分组(packetize)而获得的容器分组(container packet)。在有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头中，插入指示有效载荷包括第一字节的第一标识信息。该第一标识信息还指示基于包含在具有第一字节的字幕分组中的字幕信息的字幕显示的优先级。指示第一标识信息插入到特定容器分组的报头中的第二标识信息插入到传输流TS中。
电视接收机200通过广播波接收从广播传送系统100传输的传输流TS。如上所述，该传输流TS包括通过将视频流、音频流和字幕流中的每一个进行分组而获得的TS分组。
如上所述，当传输流TS多路复用时，字幕PES包设置在随机存取位置。另外，如上所述，在有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的头中，插入指示有效载荷包括第一字节的第一标识信息。此外，该第一标识信息还指示基于包含在具有第一字节的字幕分组中的字幕信息的字幕显示的优先级。
电视接收机200在随机存取位置处从传输流TS中提取字幕PES包以及视频PES包，然后执行字幕(subtitle)显示处理。例如，在RAP再现时，立即处理在随机存取位置处从传输流TS提取的字幕PES包，以显示字幕。
在这种情况下，电视接收机200能够基于第一标识信息容易地识别特定容器分组，换言之，有效载荷包括字幕分组的第一字节的TS分组。因此，可以有效地提取与具有字幕信息的字幕PES包有关的一系列TS分组，这使得能够令人满意地显示字幕。
另外，例如，在可变速度再现时，电视接收机200参考由第一标识符指示的字幕显示的优先级，并且根据再现速度来选择要显示的字幕。这使得电视接收机200能够容易地选择要显示的字幕，并且令人满意地显示反映了制作者侧的意图的字幕。
广播传送系统的流生成单元的配置实例
图2示出了广播传送系统100的流生成单元110的配置实例。该流生成单元110包括控制单元111、视频编码器112、音频编码器113、文本格式转换器114、字幕编码器115和TS格式化器(多路复用器)116。
控制单元111包括例如中央处理单元(CPU)，并且控制流生成单元110的每个部件的操作。视频编码器112输入图像数据DV，对该图像数据DV进行编码，并且生成包括有效载荷具有编码图像数据的视频PES包的视频流(PES流)。音频编码器113输入音频数据DA，对该音频数据DA进行编码，并且生成包括具有编码音频数据的音频PES包的音频流(PES流)。
文本格式转换器114输入作为字幕信息的文本数据(字符码)DT，并且获得具有预定格式并且具有显示时间信息的字幕的文本信息。作为这种文本信息，例如，认为使用TTML或TTML派生格式。但是，假设在本实施例中使用了TTML。
图3示出了TTML结构。基于XML描述TTML。报头(头)包括元数据(metadat)、样式(styling)和布局(layout)元素。图4的(a)示出了元数据(TTM：TTML元数据)的结构实例。该元数据包括元数据报头信息和版权信息。
图4的(b)示出了样式(TTS：TTML样式)的结构实例。除了标识符(id)以外，该样式还包括诸如颜色(color)、字体(fontFamily)、尺寸(fontSize)和对准(textAlign)等信息。图4的(c)示出了布局(区域：TTML布局)的结构实例。除了设置字幕的区域的标识符(id)之外，该布局包括诸如范围(extent)、偏移量(padding)、背景颜色(backgroundColor)和对准(displayAlign)等信息。
图5的(a)、图5的(b)、图5的(c)分别示出了主体(主体)的结构实例。在图5的(a)所示的实例中，包括字幕1(subtitle 1)的信息。在图5的(b)所示的实例中，包括字幕2(subtitle 2)的信息。在图5的(c)所示的实例中，包括字幕3(subtitle 3)的信息。作为每个字幕的信息，描述了显示开始时间和显示结束时间，并且描述了文本数据。例如，对于字幕1(subtitle 1)，显示开始时间是“0.76s”，显示结束时间是“3.45s”，而文本数据是“似乎是一个悖论，对吧”。
返回到图2，字幕编码器115将由文本格式转换器114获得的TTML转换成各种片段，并且生成字幕流(PES流)，其包括具有设置这些片段(字幕信息)的有效载荷的字幕PES包。在这种情况下，如图5的(a)、图5的(b)、图5的(c)所示，生成分别包括主体的信息的字幕PES包。
在控制单元111的控制下，字幕编码器115在字幕PES包的报头的时间戳插入位置处插入具有与在随机存取位置处的视频PES包(换言之，针对RAP(随机存取点)的视频PES包)的报头的时间戳插入位置处插入的时间戳的值相同或接近的值的时间戳(第一时间戳)。
在此处，这意味着针对RAP的视频PES包的报头是例如视频PES包的头部，其中，有效载荷具有帧内图片(I图片)的编码图像数据。在所谓的RAP再现时，从传输流TS仅解码在针对RAP的视频PES包中包含的帧内图片的编码图像数据，然后，进行图像显示。另外，在进行其他可变速度再现时，对与包括针对RAP的视频PES包的双倍速度对应的间歇部分视频PES包中包含的图片的编码图像数据进行解码，然后，进行图像显示。
另外，在控制单元111的控制下，字幕编码器115将指示字幕的显示时间(显示开始时间、显示结束时间)的特定时间戳(第二时间戳)插入到字幕PES包的报头或有效载荷中。
图6示意性地示出了控制单元111中的时间管理单元120的配置实例。该时间管理单元120包括视频时间管理单元121、音频时间管理单元122、RAP时间管理单元123和字幕显示时间管理单元124。
视频时间管理单元121管理应该在每个视频PES包的时间戳插入位置处插入的时间戳(视频的访问单元的时间戳)。视频编码器112基于该视频时间管理单元121的管理信息在每个视频PES包的时间戳插入位置处插入时间戳。
音频时间管理单元122管理应该在每个音频PES包的时间戳插入位置处插入的时间戳(音频的访问单元的时间戳)。音频编码器113基于该音频时间管理单元122的管理信息在每个音频PES包的时间戳插入位置处插入时间戳。
RAP时间管理单元123管理针对RAP的视频PES包的时间戳，并且在音频PES包中管理针对RAP的音频PES包。在这种情况下，具有与针对RAP的视频PES包的时间戳接近的时间戳的音频PES包在RAP时被视为再现目标。
基于针对RAP的该音频PES包的管理信息，TS格式化器116在针对RAP的音频PES包接近于随机存取位置的位置处进行设置，即，如稍后所述的针对RAP的视频PES包的位置。
字幕显示时间管理单元124管理字幕PES包的第一时间戳(插入到报头的时间戳插入区域中的时间戳)和第二时间戳(指示要插入到报头或有效负载中的字幕的显示时间的特定时间戳)。字幕编码器115基于该字幕显示时间管理单元124的管理信息，将第一时间戳和第二时间戳插入到字幕PES包中。
图7示出了字幕显示时间管理单元124的详细配置。字幕显示时间管理单元124基于来自RAP时间管理单元的RAP时间信息，来获得第一时间戳(字幕流的时间戳)。另外，字幕显示时间管理单元124使包括在TTML主体中的相对开始时间“开始”和相对结束时间“结束”经受时间戳精度转换，并且获得第二时间戳(显示开始时间戳、显示结束时间戳)。
第二时间戳的插入位置(字幕特定显示时间戳)
在此处，将描述第二时间戳(字幕特定显示时间戳)的插入位置的具体实例。图8示出了PES包的配置实例。第一时间戳插入到用箭头P表示的并且是报头的时间戳插入区域的33位区域中。该时间戳插入区域存在于构成一部分报头的“可选PES报头”下的“可选字段”中。
如上所述，将第二时间戳插入报头或有效载荷中。在将第二时间戳插入报头内的情况下，将第二时间戳插入例如用箭头Q表示的“PES扩展字段数据”的区域中。该“PES扩展字段数据”存在于“PES扩展”下的“可选字段”内。顺便提及，“PES扩展”存在于构成一部分报头的“可选PES报头”下的“可选字段”中。同时，在第二时间戳插入到有效载荷中的情况下，第二时间戳插入到用箭头R指示的“PES包数据字节”的区域中。
返回到图2，TS格式化器116对由视频编码器112生成的视频流、由音频编码器113生成的音频流和由字幕编码器115生成的字幕流进行传输包化并多路复用，由此获得传输TS流，作为多路复用流。在此处，传输流TS包括TS分组，作为通过将视频流、音频流和字幕流中的每一个包化而获得的容器分组。
在TS有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头中，TS格式器116插入指示有效载荷包括第一字节的第一标识信息。如上所述，该第一标识信息还指示基于包含在字幕分组中的字幕信息的字幕显示的优先级，所述字幕分组具有在特定容器分组的有效载荷中包括的第一字节。
第一标识信息的插入位置
在此处，将描述第一标识信息的插入位置的具体实例。图9示出了TS分组的配置实例。将第一标识信息插入到用箭头S表示的“传输专用数据”的区域中。该“传输专用数据”存在于“适配字段”下的“可选字段”中。具有第一标识信息的PVR辅助信息(PVR_assist_information)设置在“传输专用数据”的这个区域中。
图10的(a)示出了PVR辅助信息(PVR_assist_information)的结构实例(Syntax)；图10的(b)示出了结构实例中的主要信息内容(Semantics)。作为8位字段的“data_field_tag”具有与表示与视频的显示有关的“0x02”不同的值(例如，0x08)。“data_field_tag”表示与显示字幕有关。作为8位字段的“data_field_length”表示之后的字节数，作为该信息的长度(大小)。
作为8位字段的“PVR_priority_value”是上述第一标识信息，并且指示字幕的显示优先级。该显示优先级用于确定是否相对于再现速度执行解码显示。随着值的增加，显示优先级增加，并且显示程度变得更大。应该注意的是，显示优先级也能以这种方式设置，使得显示优先级随着值的减小而增加。
图11示出了字幕PES包与均具有包括字幕PES包的数据的有效载荷的TS分组的关系的实例。在图11所示的实例中，示出了具有两个字幕(字幕1和字幕2)的信息的字幕PES包。字幕PES包分成多个片段，并且片段被插入到TS分组的相应有效载荷中。
“PVR_priority_value”插入到有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头中。在图11所示的实例中，插入在有效载荷包括具有字幕1的信息的字幕PES包的第一字节的TS分组的报头中的“PVR_priority_value”的值是“N”，并且插入到有效载荷包括具有字幕2的信息的字幕PES包的第一字节的TS分组的报头中的“PVR_priority_value”的值是“M”。
应该注意，存在于有效载荷包括字幕PES包的数据的TS分组的报头中的“PID”与存在于有效载荷包括视频PES包的数据的TS分组的报头中的“PID”不同，并且与存在于有效载荷包括音频PES包的数据的TS分组的报头中的“PID”不同。
因此，促使报头包含“PVR_priority_value”的信息，能够通过提取有效载荷包括字幕PES包的第一字节的TS分组，并且随后基于存在于报头中的“PID”，通过提取有效载荷包括字幕PES包的数据的TS分组，容易地提取包含字幕PES包的数据的一系列TS分组。
返回到图2，当多路复用每个流时，TS格式器116在随机存取位置处，即，基于第一时间戳(插入到报头的时间戳插入位置的时间戳)，在与针对RAP的视频PES包的位置接近的位置处，设置字幕PES包。另外，此时，TS格式器116将针对RAP的音频PES包设置在随机存取位置，即，基于针对RAP的音频PES包的管理信息，在与针对RAP的视频PES包的位置接近的位置。
另外，TS格式器116将指示第一标识信息(“PVR_priority_value”的信息)插入到有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头中的第二标识信息插入到传输流TS中。在本实施例中，TS格式器116在节目映射表(PMT：节目映射表)的控制下，将字幕随机存取位置描述符(Subtitle_rap_descriptor)插入对应于字幕流的字幕基本流循环中。
图12的(a)示出了字幕随机存取位置描述符的结构实例(Syntax)。图12的(b)示出了结构实例中的主要信息内容(Semantics)。作为8位字段的“descriptor_tag”表示描述符类型，在此处是字幕随机存取位置描述符。作为8位的字段的“descriptor_length”表示描述符的长度(大小)，并将其后的字节数表示为描述符的长度。
作为2位字段的“playback_information_insertion_type”表示PVR特技再现的字幕显示信息的插入目的地。例如，“01”表示在PES头扩展(PES头扩展)部分中定义。“10”表示在PES有效载荷(PES有效载荷)中定义。“00”表示在TS适配字段(TS适配字段)的传输专用数据(传输专用数据)中定义。在这个实施例中，“playback_information_insertion_type”＝“00”。
图13示出了传输流TS的配置实例。在该配置实例中，存在作为由PID1标识的视频流的PES包的视频PES包“视频PES”。另外，在该配置实例中，存在作为由PID2标识的音频流的PES包的音频PES包“音频PES”。此外，在该配置实例中，存在作为由PID3标识的字幕流的PES包的字幕PES包“字幕PES”。
PES包包括PES报头(PESheader)和PES有效载荷(PESpayload)。在视频PES包中，DTS/PTS的时间戳插入到PES报头中，并且视频编码流(编码图像数据)插入到PES有效载荷中。另外，在音频PES包中，PTS的时间戳插入到PES报头中，并且音频编码流(编码音频数据)插入到PES有效载荷中。
另外，在字幕PES包中，将PTS的时间戳(第一时间戳)插入到PES报头中，并且将字幕编码流(作为字幕信息的多个字幕段)插入到PES有效载荷中。此外，PES报头或PES有效载荷包含显示开始时间戳“subtitle_start_time”和显示结束时间戳“subtitle_end_time”，作为第二时间戳(字幕特定显示时间戳)。
另外，在有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头中，具有指示该TS分组的有效载荷包括字幕PES包的第一字节的第一标识信息的PVR辅助信息(PVR_assist_information)设置在适配字段(适配字段)的传输专用数据(传输专用数据)中。
另外，传输流TS包括作为节目特定信息(PSI)的节目映射表(PMT)。该PSI是指示传输流TS中包含的每个基本流属于哪个节目的信息。另外，传输流TS包括用于基于事件进行管理的作为服务信息(SI)的事件信息表(EIT)。在这个EIT中，描述了关于节目的元数据。
PMT包含描述与整个节目相关的信息的节目描述符(ProgramDescriptor)。另外，该PMT包含基本流循环，每个基本流循环具有与每个基本流有关的信息。在该配置实例中，存在视频基本流循环(Video ESloop)、音频基本流循环(Audio ES loop)和字幕基本流循环(Subtitle ESloop)。
不仅在每个循环中设置诸如包标识符(PID)等信息，而且还设置描述与其基本流有关的信息的描述符(descriptor)。作为一个描述符，在字幕基本流循环中设置上述字幕随机存取位置描述符(Subtitle_rap_descriptor)。在该描述符中插入第二标识信息，该第二标识信息指示第一标识信息(“PVR_priority_value”的信息)插入到有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头内。
将简要描述图2所示的流生成单元110的操作。图像数据DV提供给视频编码器112。视频编码器112使该图像数据DV进行编码，并且生成包括有效载荷具有编码图像数据的视频PES包的视频流(PES流)。该视频流提供给TS格式化器116。
另外，音频数据DA提供给音频编码器113。音频编码器113使音频数据DA进行编码，并且生成包括具有编码音频数据的音频PES包的音频流(PES流)。该音频流提供给TS格式化器116。
另外，作为字幕信息的文本数据(字符码)DT提供给文本格式转换器114。该文本格式转换器114获得具有预定格式并具有显示时间信息的字幕的文本信息。在此处，文本格式转换器114获得TTML。该TTML提供给字幕编码器115。
字幕编码器115将TTML转换为各种片段，并且生成包括具有设置了这些片段的有效载荷的字幕PES包的字幕流。该字幕流提供给TS格式化器116。
当生成字幕流时，在控制单元111的控制下，字幕编码器115在字幕PES包的报头的时间戳插入位置处，插入具有与在针对RAP的视频PES包的报头的时间戳插入位置处插入的时间戳的值相同或接近的值的时间戳(第一时间戳)。
另外，当生成字幕流时，在控制单元111的控制下，字幕编码器115将指示字幕的显示时间(显示开始时间、显示结束时间)的字幕特定显示时间戳(第二时间戳)插入到字幕PES包的报头或有效载荷中(参见图8)。
TS格式器116将由视频编码器112生成的视频流、由音频编码器113生成的音频流和由字幕编码器115生成的字幕流进行传输包化并多路复用，从而生成传输流TS，作为多路复用流。该传输流TS包括TS分组，该包是通过将视频流、音频流和字幕流中的每一个包化而获得的容器分组。
以这种方式，当多路复用每个流时，在控制单元111的控制下，字幕PES包设置在随机存取位置处，即，基于第一时间戳(插入到报头的时间戳插入位置的时间戳)，在与针对RAP的视频PES包的位置接近的位置处。另外，在此时，在控制单元111的控制下，针对RAP的音频PES包设置在随机存取位置处，即，基于针对RAP的音频PES包的管理信息，在与针对RAP的视频PES包的位置接近的位置处。
另外，在有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头中，TS格式器116插入指示有效载荷包括第一字节的第一标识信息。如上所述，该第一标识信息还指示基于包含在字幕PES包中的字幕信息的字幕显示的优先级，所述字幕PES包具有在特定容器分组的有效载荷中包括的第一字节。在这种情况下，具有第一标识信息(PVR_priority_value)的PVR辅助信息(PVR_assist_information)设置在适配字段(adaptationfield)的传输专用数据(Transport private data)中(参考图9、图10、图11)。
另外，TS格式116在传输流TS中插入指示第一标识信息(信息“PVR_priority_value”)插入到有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头中的第二标识信息。在这种情况下，在节目映射表(PMT：节目映射表)的控制下，字幕随机存取位置描述符(Subtitle_rap_descriptor)插入到与字幕流对应的字幕基本流循环中(参考图12)。
电视接收机的配置实例
图14示出了电视接收机200的配置实例。该电视接收机200包括接收单元201、TS分析单元(解复用器(demultiplexer))202、视频解码器203、视频叠加单元204、面板驱动电路205以及显示面板206。另外，该电视接收机200包括音频解码器207、音频输出电路208、扬声器209和字幕解码器210。此外，该电视接收机200包括CPU 221、闪存ROM 222、DRAM 223、内部总线224、遥控接收单元225和遥控传输器226。
CPU 221控制电视接收机200的每个部件的操作。闪存ROM 222存储控制软件并保存数据。DRAM 223形成CPU 221的工作区域。CPU 221在DRAM 223上扩展从闪存ROM 222读取的软件和数据，启动软件，并且控制电视接收机200的每个部件。
遥控接收单元225接收从遥控传输器226传输的遥控信号(遥控代码)，并将该遥控信号提供给CPU 221。CPU 221基于这个遥控器代码，控制电视接收器200的相应部件。CPU221、闪存ROM222和DRAM 223连接到内部总线224。
接收单元201在广播波上接收从广播传送系统100传输的传输流TS。如上所述，该传输流TS包括视频流、音频流和字幕流。TS分析单元202从传输流TS提取包括视频、音频和字幕流中的每一个的PES包的数据的TS分组。
在此处，由接收单元201接收的传输流TS临时累积在累积介质(缓冲器或存储器)201a中，并且取出与再现模式对应的部分，然后，传输到TS分析单元202。例如，在正常再现模式中，所有累积流传输到TS分析单元202。同时，在可变速度再现模式中，对应于双倍速度的间歇部分(包括在RAP位置(随机存取位置)的部分)传输到TS分析单元202。具体地，在RAP再现模式中，仅将RAP位置(随机存取位置)处的部分传输到TS分析单元202。
另外，TS分析单元202提取插入到传输流TS中的各种信息，并将所提取的信息传输到CPU 221。该信息还包括字幕随机存取位置描述符(Subtitle_rap_descriptor)的信息。这使得CPU 221能够容易地识别有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头具有插入其中的第一标识信息(“PVR_priority_value”的信息)，第一识别信息指示有效载荷包括第一字节。
另外，TS分析单元202分析插入到每个TS分组的报头中的各种信息，并且基于“PID”，选择性地提取包括视频、音频和字幕PES包中的每一个的数据的TS分组，从而获得视频、音频和字幕PES包中的每一个。
在这种情况下，促使报头包含第一标识信息(“PVR_priority_value”的信息)，使得TS分析单元202能够通过提取有效载荷包括字幕PES包的第一字节的TS分组，并且随后基于存在于报头中的“PID”，通过提取有效载荷包括字幕PES包的数据的TS分组，来容易地提取包括字幕PES包的数据的一系列TS分组。
音频解码器207使由TS分析单元202获得的音频PES包进行解码处理，以获得音频数据。音频输出电路208使音频数据进行诸如D/A转换和放大等所需处理，然后，将音频数据提供给扬声器209。视频解码器203使由TS分析单元202获得的视频PES包进行解码处理，以获得图像数据。
在正常再现模式中，音频解码器207和视频解码器203中的每个PES包的解码和输出处理由插入到报头中的时间戳来控制。然而，在可变速再现模式中，解码和输出处理不由时间戳控制，而是在从TS分析单元202提供之后立即执行。
字幕解码器210对由TS分析单元202获得的字幕PES包进行解码处理，并且获得应当叠加在图像数据上的每个区域的位图数据。在正常再现模式中，在字幕解码器210中用于字幕PES包的解码和输出处理由插入到报头或有效载荷中的第二时间戳(字幕特定显示时间戳)控制。然而，在可变速度再现模式下，解码和输出处理不由第二时间戳控制，而是在从TS分析单元202提供之后立即执行。
图15示意性示出了解码和输出在例如RAP位置处读取的字幕PES包的处理时间。在正常再现模式的情况下，完成解码，直到由显示开始时间戳指示的时间，作为解码结果的位图数据的输出从上述时间开始，并且继续，直到由显示器结束时间戳指示的时间。在这种情况下，从显示开始时间戳指示的时间直到由显示结束时间戳指示的时间的周期是字幕显示周期。
同时，在可变速度再现模式的情况下，在从累积介质201a读取之后立即执行解码，并且作为解码的结果的位图数据的输出开始。该输出的持续时间成为字幕显示周期。该输出的持续时间例如是从TTML主体中包含的相对开始时间“开始”到相对结束时间“结束”的时间段(与从显示开始时间戳指示的时间直到由显示结束时间戳指示的时间的上述时间段相同)。
在该可变速度再现模式中，在N×速度(N>1)的情况下，多个字幕的显示周期可以彼此重叠。随着N×速度的增加，出现重叠周期的可能性更高。基于诸如根据N×速度确定的字幕的开始时间之间的间隔以及字幕的显示周期等信息，CPU 221能够确定字幕的显示周期是否彼此重叠。
当多个字幕的显示周期彼此重叠时，CPU 221基于字幕显示的优先级信息(“PVR_priority_value”的信息)来选择要显示哪个字幕，并且以这种方式控制TS分析单元202和字幕解码器210，使得仅输出所选择的字幕的解码结果(位图数据)。
图16示出了可变速度再现模式中的字幕显示序列的实例。在此处，假定对应于字幕1、2、3，“PVR_priority_value”的值分别设置为“4”、“1”、“2”，例如，如图17的(a)所示。如图17的(b)所示，电视接收机200以这种方式操作，使得当“PVR_priority_value”＝“4”时，以正常速度、双倍速度和四倍速度中的任何一种进行显示，“PVR_priority_value”＝“2”时，仅以正常速度和双倍速度进行显示，而当“PVR_priority_value”＝“1”时，仅在正常速度下进行显示。
图16的(a)作为实例示出了正常再现的情况。字幕1、2、3的显示周期分别是DU1、DU2、DU3。字幕1和字幕2的开始时间之间的间隔是DS12，并且比字幕1的显示周期DU1长。另外，字幕2和字幕3的开始时间之间的间隔是DS23，并且比字幕2的显示周期DU2长。在该正常再现的情况下，显示所有的字幕1、2、3。在这种情况下，TS分析单元202选择性地处理TS分组，包括对应于作为“PVR_priority_value”的全部“4”、“2”、“1”的字幕PES包的数据，获得与所有字幕1、2、3相关的字幕PES包，并且将字幕PES包传输到字幕解码器210。
图16的(b)作为实例示出了双倍速度再现的情况。字幕1和字幕2的开始时间之间的间隔变为DS12*1/2。因此，字幕1和2的显示周期产生重叠周期DP。另外，字幕2和字幕3的开始时间之间的间隔变为DS23*1/2。因此，字幕2和3的显示周期产生重叠周期DP。
在这种情况下，从字幕1和字幕2之间选择具有较高优先级的字幕1，作为要显示的字幕，并且字幕3被进一步选择为要显示的字幕。换言之，在这种双倍速度再现的情况下，显示字幕1、3，并且不显示字幕2。在这种情况下，TS分析单元202选择性地处理TS分组，包括对应于作为“PVR_priority_value”的“4”和“2”的字幕PES包的数据，获得与字幕1和2相关的字幕PES包，并且将字幕PES包传输到字幕解码器210。
图16的(c)作为实例示出了四倍速度再现的情况。字幕1和字幕2的开始时间之间的间隔变为DS12*1/4。另外，字幕2和字幕3的开始时间之间的间隔变为DS23*1/4。因此，字幕1和2的显示周期产生重叠周期DP。而且，字幕1和3的显示周期也产生重叠周期DP。在这种情况下，从字幕1、2、3中选择具有最高优先级的字幕1，作为要显示的字幕。换言之，在这种四倍速度再现的情况下，显示字幕1，并且不显示字幕2和3。在这种情况下，TS分析单元202选择性地处理TS分组，包括对应于作为“PVR_priority_value”的“4”的字幕PES包的数据，获得与字幕1相关的字幕PES包，并且将字幕PES包传输到字幕解码器210。
返回到图14，视频叠加单元204将从字幕解码器210获得的每个区域的位图数据叠加在由视频解码器203获得的图像数据上。面板驱动电路205基于由视频叠加单元204获得的用于显示的图像数据，驱动显示面板206。显示面板206包括例如液晶显示器(LCD)和有机电致发光显示器(有机EL显示器)。
将简要描述图14所示的电视接收机200的操作。接收单元201在广播波上接收从广播传送系统100传输的传输流TS。该传输流TS包括视频流、音频流和字幕流。
该传输流TS通过积累介质201a提供给TS分析单元202。在这种情况下，取出对应于再现模式的部分，然后将其传输到TS分析单元202。例如，在正常再现模式中，将所有累积的流传输到TS分析单元202。同时，在可变速度再现模式中，对应于双倍速度的间歇部分(包括在RAP位置(随机存取位置)的部分)传输到TS分析单元202。具体地，在RAP再现模式中，只有在RAP位置(随机存取位置)的部分传输到TS分析单元202。
由TS分析单元202提取的视频PES包提供给视频解码器203。视频解码器203对由TS分析单元202提取的视频PES包进行解码处理，以获得图像数据。在正常再现模式中，每个视频PES包的解码和输出处理由插入到报头中的时间戳控制。然而，在可变速度再现模式中，解码和输出处理不由时间戳控制，而是在从TS分析单元202提供之后立即执行。该图像数据提供给视频叠加单元204。
另外，由TS分析单元202提取的字幕流(PES流)提供给字幕解码器210。字幕解码器210处理每个区域的分段数据，以获得应该叠加在图像数据上的每个区域的位图数据。在正常再现模式中，每个字幕PES包的解码和输出处理由插入到报头或有效载荷中的第二时间戳(特定时间戳)控制。然而，在可变速再现模式中，解码和输出处理不由第二时间戳控制，而是在从TS分析单元202提供之后立即执行(参考图15)。
另外，在可变速度再现模式下，在N×速度(N>1)的情况下，多个字幕的显示周期可以彼此重叠。基于诸如根据N×速度确定的字幕的开始时间之间的间隔以及字幕的显示周期等信息，CPU 221能够确定字幕的显示周期是否彼此重叠。当多个字幕的显示周期彼此重叠时，CPU 221基于字幕显示的优先级信息来选择要显示哪个字幕，并且以这种方式控制TS分析单元202和字幕解码器210，使得仅输出所选择的字幕的解码结果(位图数据)(参考图16)。
从字幕解码器210输出的每个区域的位图数据提供给视频叠加单元204。视频叠加单元204将从字幕解码器210输出的每个区域的位图数据叠加在由视频解码器203获得的图像数据上。
由视频叠加单元204获得的用于显示的图像数据提供给面板驱动电路205。面板驱动电路205基于用于显示的视频数据来驱动显示面板206。结果，显示面板206显示叠加了字幕的图像。在这种情况下，在正常再现模式中，以正常速度显示正常再现图像；并且在可变速度再现模式中，显示对应于N×速度的可变速度再现图像。
另外，由TS分析单元202提取的音频PES包提供给音频解码器207。音频解码器207对音频PES包进行解码处理，以获得音频数据。在正常再现模式中，每个音频PES包的解码和输出处理由插入到报头中的时间戳控制。然而，在可变速再现模式中，解码和输出处理不由时间戳控制，而是在从TS分析单元202提供之后立即执行。
该音频数据提供给音频输出电路208。音频输出电路208对音频数据进行诸如D/A转换和放大等所需处理。随后，将处理后的音频数据提供给扬声器209。结果，从扬声器209获得与在显示面板206上显示的图像对应的音频输出。
如上所述，在图1所示的传输和接收系统10中，有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头具有插入其中的第一标识信息(信息“PVR_priority_value”)，第一识别信息指示有效载荷包括第一字节。因此，例如，在RAP再现时，基于该第一标识信息，可以容易地识别有效载荷包括字幕PES包的第一字节的TS分组。因此，可以有效地提取包括字幕PES包的数据的一系列TS分组(容器分组)，这使得能够令人满意地显示字幕。
另外，在图1所示的传输和接收系统10中，在有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头中，插入基于包含在具有该第一字节的字幕PES包中的字幕信息的字幕显示的优先级信息(信息“PVR_priority_value”)。因此，例如，在可变速度再现时，参考优先级信息，可以根据再现速度来选择要显示的字幕。这使得能够容易地选择要显示的字幕，并且令人满意地显示反映了制作者侧的意图的字幕。
另外，在图1所示的传输和接收系统10中，当在传输侧产生作为多路复用流的传输流TS时，字幕PES包设置在随机存取位置。因此，在接收侧，当从多路复用流中取出随机存取位置处的视频PES包时，可以一起取出字幕PES包，因此，可变速度再现模式中的字幕显示处理变得简单。
例如，图18示出了现有技术中的多路复用。图18的(a)示出了构成视频流的视频PES包序列。“V_TS00”、“V_TS10”、“V_TS20”、“V_TS30”......表示插入到报头中的时间戳，“V0”、“V10”、“V20”、“V30”......表示设置在有效载荷中的编码图像数据。
图18的(b)示出构成音频流的音频PES包序列。“A_TS00”、“A_TS10”、“A_TS20”、“A_TS30”......表示插入到报头中的时间戳，“A0”、“A10”、“A20”、“A30”......表示设置在有效载荷中的编码音频数据。
图18的(c)示出了构成字幕流的字幕PES包序列。“S_TS15”、“S_TS19”、“S_TS35”、“A_TS39”...表示插入到报头中的时间戳，“S15”、“S19”、“S35”、“S39”、...表示设置在有效载荷中的字幕信息。时间戳插入字幕PES包的报头中，而不管插入到视频PES包的报头和音频PES包的报头中的时间戳。
图18的(d)示出了多路复用流(传输流TS)中的每个PES包的设置的实例。在多路复用时，参考插入到每个PES包的报头中的时间戳，由此确定每个PES包的设置。在这种情况下，不管RAP位置(随机存取位置)如何，字幕PES包设置在略微在显示周期之前的位置。
在RAP再现时，例如，如图18的(e)的再现方法1所示，在每个RAP位置处读取PES包，以便具有一定的长度，经受解码处理，然后，执行图像显示和音频输出。在这种情况下，字幕PES包并不总是设置在RAP位置，因此不显示字幕。
顺便提及，甚至在该RAP再现的情况下，为了执行字幕显示，也考虑不仅读取RAP位置，而且还读取字幕PES包，如图18的(f)的再现方法2中所示。在这种情况下，不仅需要重复读取RAP位置的跳跃，而且还要重复读取字幕PES包的跳跃，这使得再现处理变得复杂。另外，图像显示和音频输出被迫等待，直到读取字幕PES包，这导致图像显示和音频输出的延迟。
图19示出了根据本技术的多路复用。图19的(a)示出了构成视频流的视频PES包序列。“V_TS00”、“V_TS10”、“V_TS20”、“V_TS30”......表示插入到报头中的时间戳，“V0”、“V10”、“V20”、“V30”......表示设置在有效载荷中的编码图像数据。
图19的(b)示出了构成音频流的音频PES包序列。“A_TS00”、“A_TS10”、“A_TS20”、“A_TS30”......表示插入到报头中的时间戳，“A0”、“A10”、“A20”、“A30”......表示设置在有效载荷中的编码图像数据。
图19的(c)示出了构成字幕流的字幕PES包序列。“S_TS10”、“S_TS30”......表示插入到报头中的时间戳，“S10”、“S130”......表示设置在有效载荷中的字幕信息。具有与插入到针对RAP的视频PES包的报头中的时间戳的值相同或接近的值的时间戳(第一时间戳)插入到字幕PES包的报头中。
图19的(d)示出了多路复用流(传输流TS)中的每个PES包的设置的实例。在多路复用时，参考插入到每个PES包的报头中的时间戳，由此确定每个PES包的设置。在这种情况下，与针对RAP的视频PES包和音频PES包一样，字幕PES包设置在RAP位置(随机存取位置)处。
在RAP再现时，例如，如图19的(e)的再现方法3所示，在每个RAP位置处读取PES包，以便具有一定的长度，然后，经受解码处理。在这种情况下，字幕PES包也被读取并且与视频PES包和音频PES包一起经受解码处理。因此，也与图像显示和音频输出一起令人满意地执行字幕显示。
以如本技术中所呈现的这种方式执行多路复用，消除了不仅需要重复读取RAP位置的跳跃，而且还需要重复读取字幕PES包的跳跃，例如，如由图19的(f)所示的再现方法2执行的。因此，简化了能够进行字幕显示的在接收端的可变速度再现处理。
另外，在图1所示的传输和接收系统10中，指示字幕的显示时间的第二时间戳(字幕特定显示时间戳)插入到字幕PES包的报头或有效载荷中。因此，在接收侧，基于该字幕特定显示时间戳，可以容易地控制字幕的显示时间。
此外，在图1所示的传输和接收系统10中，作为多路复用流的传输TS具有插入其中的第二标识信息，第二标识信息指示有效载荷包括字幕分组的第一字节的TS分组(特定容器分组)具有插入其中的第一标识信息(信息“PVR_priority_value”)，第一标识信息指示有效载荷包括第一字节。这使得在接收侧能够容易地确定第一标识信息插入到特定容器分组的报头中。
2、修改实例
顺便提及，上述实施例显示了一个实例，其中，如图5的(a)、图5的(b)、图5的(c)所示，每个主体具有一个字幕的信息，并且生成并传输分别包括主体信息的字幕PES包。但是，如图20所示，还考虑了主体具有多个字幕的信息的实例。另外，也考虑了生成并传输包括该主体的信息的字幕PES包。
图21的(a)示出了该情况下的PVR辅助信息(PVR_assist_information)的结构实例(Syntax)，图21的(b)示出了结构实例中的主要信息内容(Semantics)。作为8位字段的“data_field_tag”具有与表示与视频的显示有关的“0x02”不同的值(例如，0x08)。“data_field_tag”表示与显示字幕有关。作为8位字段的“data_field_length”表示之后的字节数，作为该信息的长度(大小)。
作为8位字段的“number_of_subtitles”表示字幕的数量。另外，具有“xml_id”8位字段，其数量相当于字幕的数量，并且具有“PVR_priority_value”8位字段，其数量相当于字幕的数量。“xml_id”字段指示字幕的ID。“PVR_priority_value”字段指示字幕的显示优先级。
根据图21的(a)中所示的PVR辅助信息的结构实例，字幕PES包包括多条字幕信息，因此每个字幕的显示优先级可以提供给接收侧。应该注意，甚至在字幕PES包包括多条字幕信息的情况下，如果假定所有这些显示优先级都相同，则PVR辅助信息的结构实例可以图10中示出的结构实例替代。
另外，在如图20所示的多个字幕在显示时间上不同的情况下，例如，具有最早显示时间的字幕的相对开始时间“开始”和相对结束时间“结束”经受时间戳精度转换，由此获得显示开始时间戳和显示结束时间戳，作为上述第二时间戳。
在这种情况下，在接收侧，关于具有最早显示时间的字幕的显示控制，使用作为上述第二时间戳的显示开始时间戳和显示结束时间戳。另外，关于随后的字幕的显示控制，生成并使用基于与具有在TTML主体中提供的具有最早显示时间的字幕的相对时间的差异进行时间戳精度转换的显示时间戳(显示开始时间戳、显示结束时间戳)。
另外，上述实施方式示出了在传输侧生成作为多路复用流的传输流TS时将字幕PES包设置在随机存取位置的实例。然而，甚至在以这种方式将字幕PES包设置在随机存取位置的情况下，也可以应用以下技术：有效载荷包括字幕分组的第一字节的TS分组(特定容器分组)的报头具有插入其中的第一标识信息(优先级信息)，第一标识信息指示有效载荷包括第一字节。
另外，上述实施例已经示出了TTML用作具有预定格式并且具有显示时间信息的字幕的文本信息的实例。然而，本技术不限于此。也考虑使用具有等同于TTML的信息的其他时间文本信息。例如，可以使用TTML派生格式。而且，即使字幕格式是传统类型的位图系统，自然也可以类似地应用本技术。
此外，虽然在上述实施例中已经呈现了包括广播传送系统100和电视接收机200的传输和接收系统10，但是可以应用本技术的传输和接收系统的配置不限于此。例如，电视接收机200的部分可以具有包括监视器以及连接到诸如HDMI(高清晰度多媒体接口)等数字接口的机顶盒的配置。应该注意的是，“HDMI”是注册商标。
此外，上述实施例已经示出了多路复用流是MPEG-2传输流的实例。甚至在多路复用流是MMT流、DASH/ISOBMFF流等的情况下，自然也可以类似地应用本技术。
另外，本技术也可以具有如下所述的配置。
(1)一种传输装置，包括：
视频编码单元，用于生成包括视频分组的视频流，其中，有效载荷具有编码图像数据；
字幕编码单元，用于生成包括字幕分组的字幕流，其中，有效载荷具有字幕信息；
多路复用流生成单元，用于生成包括通过将所述视频流和所述字幕流进行分组而获得的容器分组的多路复用流；
传输单元，用于传输多路复用的流；以及
信息插入单元，用于在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入指示有效载荷包括第一字节的第一标识信息。
(2)根据(1)所述的传动装置，其中：
所述第一标识信息还指示基于包含在字幕分组中的字幕信息的字幕显示的优先级，所述字幕分组具有在特定容器分组的有效载荷中包括的第一字节。
(3)根据(1)或(2)所述的传输装置，还包括：
信息插入单元，用于将指示第一标识信息插入到特定容器分组的报头中的第二标识信息插入到多路复用流中。
(4)根据(1)到(3)中任一项所述的传输装置，其中，
所述多路复用流生成单元将字幕分组设置在随机存取位置处。
(5)根据(1)到(4)中任一项所述的传输装置，其中，
所述多路复用流是MPEG-2传输流、MMT流或DASH/ISOBMFF流。
(6)一种传输方法，包括：
视频编码步骤，用于生成包括视频分组的视频流，其中，有效载荷具有编码图像数据；
字幕编码步骤，用于生成包括字幕分组的字幕流，其中，有效载荷具有字幕信息；
多路复用流生成步骤，用于生成包括通过将所述视频流和所述字幕流进行分组而获得的容器分组的多路复用流；
传输步骤，用于由传输单元传输多路复用的流；以及
信息插入步骤，用于在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入指示有效载荷包括第一字节的第一标识信息。
(7)一种再现装置，包括：
再现处理单元，用于使多路复用流经受再现处理，所述多路复用流包括通过将视频流和字幕流进行分组而获得的容器分组，所述视频流包括视频分组，其中，有效载荷具有编码图像数据，所述字幕流包括字幕分组，其中，有效载荷具有字幕信息，
其中：
在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入指示有效载荷包括第一字节的第一标识信息；并且
所述再现处理单元基于第一标识信息从多路复用流中提取特定的容器分组。
(8)根据(7)所述的再现装置，其中：
所述第一标识信息还指示基于包含在字幕分组中的字幕信息的字幕显示的优先级，所述字幕分组具有在特定容器分组的有效载荷中包括的第一字节；并且
当所述多路复用流经受可变速度再现处理时，所述再现处理单元基于优先级信息来控制基于包含在每个字幕分组中的字幕信息的字幕显示。
(9)一种再现方法，包括：
再现处理步骤，用于由再现处理单元使多路复用流经受再现处理，所述多路复用流包括通过将视频流和字幕流进行分组而获得的容器分组，所述视频流包括视频分组，其中，有效载荷具有编码图像数据，所述字幕流包括字幕分组，其中，有效载荷具有字幕信息，
其中：
在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入指示有效载荷包括第一字节的第一标识信息；并且
在所述再现处理步骤中，基于第一标识信息从多路复用流中提取特定的容器分组。
(10)一种传输装置，包括：
视频编码单元，用于生成包括视频分组的视频流，其中，有效载荷具有编码图像数据；
字幕编码单元，用于生成包括字幕分组的字幕流，其中，有效载荷具有字幕信息；
多路复用流生成单元，用于生成包括通过将所述视频流和所述字幕流进行分组而获得的容器分组的多路复用流；
传输单元，用于传输多路复用的流；以及
信息插入单元，用于在有效载荷包括字幕分组的第一字节的特定容器分组的报头内，插入基于包含在具有第一字节的字幕分组中的字幕信息的字幕显示的优先级信息。
本技术的主要特征在于，通过在有效载荷包括字幕PES包的第一字节的TS分组(特定容器分组)的报头内插入指示有效载荷包括第一字节的第一标识信息，可以例如在RAP再现时有效地提取包括字幕PES包的数据的一系列TS分组(容器分组)，并且通过将第一标识信息配置为指示字幕显示的优先级，例如，在可变速度再现时，可以容易地选择要显示的字幕(参见图11)。
附图标记列表
10 传输和接收系统
100 广播传送系统
110 流生成单元
111 控制单元
112 视频编码器
113 音频编码器
114 文本格式转换器
115 字幕编码器
116 TS格式化器
120 时间管理单元
121 视频时间管理单元
122 音频时间管理单元
123 RAP时间管理单元
124 字幕显示时间管理单元
200 电视接收机
201 接收单元
201a 累积介质
202 TS分析单元
203 视频解码器
204 视频叠加单元
205 面板驱动电路
206 显示面板
207 音频解码器
208 音频输出电路
209 扬声器
210 字幕解码器
221 CPU。

Claims (10)

1.一种传输装置，包括：
视频编码单元，用于生成包括视频分组的视频流，在所述视频分组中，有效载荷具有编码图像数据；
字幕编码单元，用于生成包括字幕分组的字幕流，在所述字幕分组中，有效载荷具有字幕信息；
多路复用流生成单元，用于生成包括传输流分组的多路复用流，所述传输流分组通过对所述视频流和所述字幕流进行分组而获得；
传输单元，用于传输所述多路复用流；以及
信息插入单元，用于在所述传输流分组的报头内插入指示所述传输流分组的有效载荷包括所述字幕分组的第一字节的第一标识信息，其中，所述第一标识信息还指示基于包含在所述字幕分组中的字幕信息的字幕显示的优先级。
2.根据权利要求1所述的传输装置，其中，
所述字幕分组具有包含在所述传输流分组的有效载荷中的所述第一字节。
3.根据权利要求1所述的传输装置，还包括：
信息插入单元，用于将第二标识信息插入到所述多路复用流中，所述第二标识信息指示所述第一标识信息插入到所述传输流分组的报头中。
4.根据权利要求1所述的传输装置，其中，
所述多路复用流生成单元将所述字幕分组设置在随机存取位置处。
5.根据权利要求1所述的传输装置，其中，
所述多路复用流是MPEG-2传输流、MMT流或DASH/ISOBMFF流。
6.一种传输方法，包括：
视频编码步骤，用于生成包括视频分组的视频流，在所述视频分组中，有效载荷具有编码图像数据；
字幕编码步骤，用于生成包括字幕分组的字幕流，在所述字幕分组中，有效载荷具有字幕信息；
多路复用流生成步骤，用于生成包括传输流分组的多路复用流，所述传输流分组通过对所述视频流和所述字幕流进行分组而获得；
传输步骤，用于由传输单元传输所述多路复用流；以及
信息插入步骤，用于所述传输流分组的报头内插入指示所述传输流分组的有效载荷包括所述字幕分组的第一字节的第一标识信息，其中，所述第一标识信息还指示基于包含在所述字幕分组中的字幕信息的字幕显示的优先级。
7.一种再现装置，包括：
再现处理单元，用于使多路复用流经受再现处理，所述多路复用流包括通过对视频流和字幕流进行分组而获得的传输流分组，所述视频流包括视频分组，在所述视频分组中，有效载荷具有编码图像数据，所述字幕流包括字幕分组，在所述字幕分组中，有效载荷具有字幕信息，
其中：
在所述传输流分组的报头内插入指示所述传输流分组的有效载荷包括所述字幕分组的第一字节的第一标识信息，其中，所述第一标识信息还指示基于包含在所述字幕分组中的字幕信息的字幕显示的优先级；并且
所述再现处理单元基于所述第一标识信息从所述多路复用流中提取所述传输流分组。
8.根据权利要求7所述的再现装置，其中：
所述字幕分组具有包含在所述传输流分组的有效载荷中的第一字节；并且
当所述多路复用流经受可变速度再现处理时，所述再现处理单元基于优先级信息来控制基于包含在每个字幕分组中的字幕信息的字幕显示。
9.一种再现方法，包括：
再现处理步骤，用于由再现处理单元使多路复用流经受再现处理，所述多路复用流包括通过对视频流和字幕流进行分组而获得的传输流分组，所述视频流包括视频分组，在所述视频分组中，有效载荷具有编码图像数据，所述字幕流包括字幕分组，在所述字幕分组中，有效载荷具有字幕信息，
其中：
在所述传输流分组的报头内插入指示所述传输流分组的有效载荷包括所述字幕分组的第一字节的第一标识信息，其中，所述第一标识信息还指示基于包含在所述字幕分组中的字幕信息的字幕显示的优先级；并且
在所述再现处理步骤中，基于所述第一标识信息从所述多路复用流中提取所述传输流分组。
10.一种传输装置，包括：
视频编码单元，用于生成包括视频分组的视频流，在所述视频分组中，有效载荷具有编码图像数据；
字幕编码单元，用于生成包括字幕分组的字幕流，在所述字幕分组中，有效载荷具有字幕信息；
多路复用流生成单元，用于生成包括容器分组的多路复用流，所述容器分组通过对所述视频流和所述字幕流进行分组而获得；
传输单元，用于传输所述多路复用流；以及
信息插入单元，用于在有效载荷包括所述字幕分组的第一字节的特定容器分组的报头内，插入基于包含在具有所述第一字节的所述字幕分组中的字幕信息的字幕显示的优先级信息。
CN201680052622.6A 2015-09-16 2016-09-12 传输装置、传输方法、再现装置和再现方法 Expired - Fee Related CN108028949B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015-183476 2015-09-16
JP2015183476 2015-09-16
PCT/JP2016/076770 WO2017047540A1 (ja) 2015-09-16 2016-09-12 送信装置、送信方法、再生装置および再生方法

Publications (2)

Publication Number Publication Date
CN108028949A CN108028949A (zh) 2018-05-11
CN108028949B true CN108028949B (zh) 2021-05-11

Family

ID=58288747

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680052622.6A Expired - Fee Related CN108028949B (zh) 2015-09-16 2016-09-12 传输装置、传输方法、再现装置和再现方法

Country Status (6)

Country Link
US (1) US10511802B2 (zh)
EP (1) EP3352461A4 (zh)
JP (1) JP6760296B2 (zh)
CN (1) CN108028949B (zh)
AU (1) AU2016323754B2 (zh)
WO (1) WO2017047540A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108111872B (zh) * 2018-01-09 2021-01-01 武汉斗鱼网络科技有限公司 一种音频直播系统
WO2021102355A1 (en) 2019-11-21 2021-05-27 Vooks, Inc. Systems and methods for enhanced video books
US20220272284A1 (en) * 2021-02-25 2022-08-25 Rovi Guides, Inc. Systems and methods for improved video captions
US20220353584A1 (en) * 2021-04-30 2022-11-03 Rovi Guides, Inc. Optimal method to signal web-based subtitles
CN114938433B (zh) * 2022-07-25 2022-10-11 四川赛狄信息技术股份公司 基于fpga的视频图像处理方法、系统、终端及介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000040311A (ja) * 1998-07-21 2000-02-08 Matsushita Electric Ind Co Ltd 画像信号再生装置
JP2004207831A (ja) * 2002-12-24 2004-07-22 Hitachi Ltd デジタル放送送受信方法と装置及び進行状況字幕送信装置と進行状況画面送信装置並びにコンピュータ・ソフトウエア
CN101136235A (zh) * 2006-06-06 2008-03-05 索尼株式会社 回放装置、回放方法、和回放程序
CN101346973A (zh) * 2005-11-08 2009-01-14 诺基亚公司 用于针对富媒体应用中的远程交互提供反馈和正向传输的系统和方法
CN101346995A (zh) * 2005-12-23 2009-01-14 皇家飞利浦电子股份有限公司 数据流拆分
CN104113749A (zh) * 2009-01-08 2014-10-22 Lg电子株式会社 3d字幕信号发送方法和3d字幕显示方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100547162B1 (ko) * 2004-06-10 2006-01-26 삼성전자주식회사 그래픽 데이터를 포함한 ａｖ 스트림을 기록한정보저장매체, 재생방법 및 장치
JP4575129B2 (ja) * 2004-12-02 2010-11-04 ソニー株式会社 データ処理装置およびデータ処理方法、並びにプログラムおよびプログラム記録媒体
JP4779981B2 (ja) * 2007-02-01 2011-09-28 三菱電機株式会社 デジタル映像情報データ生成装置、デジタル映像情報記録装置、デジタル映像情報再生装置、及びデジタル映像情報データ生成方法
WO2008114595A1 (ja) * 2007-03-22 2008-09-25 Mitsubishi Electric Corporation 映像再生装置および映像再生方法
JP5132504B2 (ja) 2008-09-25 2013-01-30 株式会社東芝 情報記録再生装置及び情報記録再生方法
GB2479711A (en) 2010-04-01 2011-10-26 British Broadcasting Corp Determining playback points in recorded media content
EP2547101A4 (en) * 2010-04-14 2013-12-18 Samsung Electronics Co Ltd METHOD AND DEVICE FOR PRODUCING A BROADCASTING BITSTREAM FOR DIGITAL BROADCASTING WITH SUBTITLES AND METHOD AND DEVICE FOR RECEIVING A BROADBAND RADIO BITSTREAM FOR DIGITAL BROADCASTING WITH SUBTITLES
JP2012070344A (ja) 2010-09-27 2012-04-05 Mitsubishi Electric Corp デジタル放送受信装置及びデジタル放送受信方法
JP5685969B2 (ja) 2011-02-15 2015-03-18 ソニー株式会社 表示制御方法、表示制御装置
KR101781887B1 (ko) * 2014-02-23 2017-09-26 엘지전자 주식회사 방송 신호 송수신 방법 및 장치

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000040311A (ja) * 1998-07-21 2000-02-08 Matsushita Electric Ind Co Ltd 画像信号再生装置
JP2004207831A (ja) * 2002-12-24 2004-07-22 Hitachi Ltd デジタル放送送受信方法と装置及び進行状況字幕送信装置と進行状況画面送信装置並びにコンピュータ・ソフトウエア
CN101346973A (zh) * 2005-11-08 2009-01-14 诺基亚公司 用于针对富媒体应用中的远程交互提供反馈和正向传输的系统和方法
CN101346995A (zh) * 2005-12-23 2009-01-14 皇家飞利浦电子股份有限公司 数据流拆分
CN101136235A (zh) * 2006-06-06 2008-03-05 索尼株式会社 回放装置、回放方法、和回放程序
CN104113749A (zh) * 2009-01-08 2014-10-22 Lg电子株式会社 3d字幕信号发送方法和3d字幕显示方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
《流媒体客户端的分析与研究》;申志伟;《中国优秀硕士学位论文全文数据库》;20070615;全文 *

Also Published As

Publication number Publication date
US20180255270A1 (en) 2018-09-06
US10511802B2 (en) 2019-12-17
JPWO2017047540A1 (ja) 2018-07-05
CN108028949A (zh) 2018-05-11
EP3352461A1 (en) 2018-07-25
AU2016323754B2 (en) 2021-01-14
WO2017047540A1 (ja) 2017-03-23
AU2016323754A1 (en) 2018-02-22
EP3352461A4 (en) 2019-03-06
JP6760296B2 (ja) 2020-09-23

Similar Documents

Publication Publication Date Title
CN108028949B (zh) 传输装置、传输方法、再现装置和再现方法
CN107431835B (zh) 发送装置、发送方法、再现装置以及再现方法
JP7176598B2 (ja) 送信方法
CN107005733B (zh) 发送装置、发送方法、接收装置以及接收方法
AU2017387992B2 (en) Transmission device, transmission method, reception device, and reception method
US20170055024A1 (en) Receiving apparatus, receiving method, transmission apparatus, and transmission method
US11290785B2 (en) Transmission apparatus, transmission method, reception apparatus, and reception method for transmitting subtitle text information
JP2024152974A (ja) 送信方法、送信装置、受信方法および受信装置
JP2006279529A (ja) 地上デジタル文字放送信号生成装置及び地上デジタル文字放送信号生成方法
CN109479154B (zh) 发送装置、发送方法、接收装置和接收方法
JP2020137091A (ja) 信号処理モジュール、信号符号化装置、信号処理方法、および信号処理用プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210511