CN107534786A - 传输装置、传输方法、图像处理装置、图像处理方法、接收装置、及接收方法 - Google Patents

传输装置、传输方法、图像处理装置、图像处理方法、接收装置、及接收方法 Download PDF

Info

Publication number
CN107534786A
CN107534786A CN201680027991.XA CN201680027991A CN107534786A CN 107534786 A CN107534786 A CN 107534786A CN 201680027991 A CN201680027991 A CN 201680027991A CN 107534786 A CN107534786 A CN 107534786A
Authority
CN
China
Prior art keywords
frame
information
image data
video flowing
rate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680027991.XA
Other languages
English (en)
Other versions
CN107534786B (zh
Inventor
塚越郁夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN107534786A publication Critical patent/CN107534786A/zh
Application granted granted Critical
Publication of CN107534786B publication Critical patent/CN107534786B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/398—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H04N21/6336—Control signals issued by server directed to the network components or client directed to client directed to decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)

Abstract

本发明通过在接收侧上执行帧插值而使得可以避免阻挡准确地反映在制作过程中的意图。本发明传输包含通过使具有规定帧速率的视频数据经过编码处理而获得的视频流的规定容器。将限制帧插值的信息插入到容器的层和/或视频流的层中。例如，限制帧插值的信息包括阻止帧插值的信息。此外，例如，限制帧插值的信息包括表达帧重复次数的信息。

Description

传输装置、传输方法、图像处理装置、图像处理方法、接收装 置、及接收方法
技术领域
本技术涉及一种传输装置、传输方法、图像处理装置、图像处理方法、接收装置、及接收方法。更具体地，本技术涉及一种传输预定帧速率的移动图像数据的传输装置等。
背景技术
通常，为了增强显示装置的图像质量，存在一种在将帧速率转换成更高速率之后在接收侧执行显示(例如，参见专利文献1)的已知技术。为了增加帧速率，必须执行增加帧数目的处理。出于此目的的处理包括重复同一帧的帧重复和使用在前和在后的帧创建新帧的帧插值。
引用列表
专利文献
专利文献1：JP 2013-143646 A
发明内容
发明解决的问题
根据内容的类型，在接收侧上对被传递的移动图像数据执行的帧插值可能阻碍准确地反映制作时的意图。
本技术的一个目标是提供一种能够避免由于在接收侧上运行帧插值而阻碍准确地反映制作时的意图的技术。
问题的解决方案
本技术的构思是传输装置，包括：传输单元，传输单元被配置为传输包括视频流的预定容器，所述视频流是通过对预定帧速率的移动图像数据执行编码操作获得的；和信息插入单元，信息插入单元被配置为将用于限制帧插值的信息插入到容器的层和视频流的层的一个或两个中。
在本技术中，通过传输单元传输包括视频流的预定容器，视频流是通过对预定帧速率的移动图像数据执行编码操作获得的。通过信息插入单元将用于限制帧插值的信息插入到容器的层和视频流的层的一个或两个中。
例如，用于限制帧插值的信息可以包括用于阻止帧插值的信息。而且，例如，用于限制帧插值的信息可以包括指示帧重复次数的信息。而且，例如，信息插入单元可以将包括用于限制帧插值的信息的描述符插入到容器的层中。而且，例如，信息插入单元可以将包括用于限制帧插值的信息的SEI消息插入到视频流的层中。
同样，在本技术中，将用于限制帧插值的信息插入到容器的层和视频流的层的一个或两个中。利用此配置，在接收侧基于信息可以限制对被传输的移动图像数据的帧插值，并且可以避免阻碍准确地反映在制作时的意图。
而且，本技术的另一构思是一种图像处理装置，包括：图像数据获取单元，图像数据获取单元被配置为获得预定帧速率的移动图像数据；和控制单元，控制单元被配置为基于用于限制帧插值的信息控制将移动图像数据的帧速率转换成显示帧速率并且进行输出的帧速率转换处理。
在本技术中，通过数据获取单元获得预定帧速率的移动图像数据。控制单元基于用于限制帧插值的信息控制将移动图像数据的帧速率转换成显示帧速率并且进行输出的帧速率转换处理。
例如，可以允许配置成使得图像数据获取单元接收包括视频流的预定格式的容器，视频流是通过对预定帧速率的移动图像数据执行编码操作而获得的，并且使得通过对视频流执行解码操作而获得预定帧速率的移动图像数据。在这种情况下，例如，可以将用于限制帧插值的信息插入到容器的层和视频流的层的一个或两个中。
而且，例如，图像数据获取单元可以经由数字接口从外部设备获得预定帧速率的移动图像数据。在这种情况下，例如，经由数字接口可以从外部设备获得用于限制帧插值的信息。
如上所述，本技术控制基于用于限制帧插值的信息将移动图像数据的帧速率转换成显示帧速率并且进行输出的帧速率转换处理。利用此配置，可以避免由于运行帧插值而阻碍准确地反映在制作时的意图。
而且，本技术的另一构思是一种接收装置，包括：接收单元，接收单元被配置为接收包括视频流的预定格式的容器，是视频流通过对预定帧速率的移动图像数据执行编码操作而获得的，并且将用于限制帧插值的信息插入到容器的层和视频流的层的一个或两个中；接收装置进一步包括控制单元，控制单元被配置为控制通过对视频流执行解码操作而获得预定帧速率的移动图像数据的解码处理，并且被配置为基于用于控制帧插值的信息控制将通过解码处理获得的移动图像数据的帧速率转换成显示帧速率并进行输出的帧速率转换处理。
在本技术中，接收单元接收包括视频流的预定格式的容器，视频流是通过对预定帧速率的移动图像数据执行编码操作而获得的。将用于限制帧插值的信息插入到容器的层和视频流的层的一个或两个中。
控制单元控制通过对视频流执行解码操作而获得预定帧速率的移动图像数据的解码处理，并且基于用于控制帧插值的信息控制将通过解码处理获得的移动图像数据的帧速率转换成显示帧速率并且进行输出的帧速率转换处理。
同样，本技术基于用于限制帧插值的信息控制将通过对视频流执行解码操作而获得的移动图像数据的帧速率转换成显示帧速率并且进行输出的帧速率转换处理。利用此配置，可以避免由于运行帧插值而阻碍准确地反映制作时的意图。
而且，本技术的另一构思是一种接收装置，包括：接收单元，接收单元被配置为经由数字接口从外部设备接收预定帧速率的移动图像数据和用于限制帧插值的信息；和控制单元，控制单元被配置为基于用于限制帧插值的信息控制将移动图像数据的帧速率转换成显示帧速率并进行输出的帧速率转换处理。
在本技术中，接收单元经由数字接口从外部设备接收预定帧速率的移动图像数据和用于限制帧插值的信息。例如，数字接口可被配置成高清晰多媒体接口(HDMI)。
控制单元控制基于用于限制帧插值的信息将移动图像数据的帧速率转换成显示帧速率并进行输出的帧速率转换处理。
如上所述，本技术基于用于限制帧插值的信息控制将移动图像数据的帧速率转换成显示帧速率并进行输出的帧速率转换处理。利用此配置，可以避免由于运行帧插值而阻碍准确地反映制作时的意图。
而且，本技术的另一构思是一种接收装置，包括：接收单元，接收单元被配置为接收包括视频流的预定格式的容器，视频流是通过对预定帧速率的移动图像数据执行编码操作而获得，将用于限制帧插值的信息插入到容器的层和视频流的层的一个或两个中；接收装置进一步包括控制单元，控制单元被配置为控制通过对视频流执行解码操作而获得预定帧速率的移动图像数据的解码处理，并且被配置为控制经由数字接口将在解码处理期间获得的预定帧速率的移动图像数据以及用于限制帧插值的信息传输至外部设备的传输处理。
在本技术中，接收单元接收包括视频流的预定格式的容器，视频流是通过对预定帧速率的移动图像数据执行编码操作而获得的。将用于限制帧插值的信息插入到容器的层和视频流的层的一个或两个中。
控制单元控制通过对视频流执行解码操作而获得预定帧速率的移动图像数据的解码处理并且控制经由数字接口将在解码处理期间获得的预定帧速率的移动图像数据和用于限制帧插值的信息传输至外部设备的传输处理。
如上所述，本技术经由数字接口将与移动图像数据有关的用于限制帧插值的信息、以及预定帧速率的移动图像数据一起传输至外部设备。利用此配置，在接收侧上，基于与移动图像数据有关的用于限制帧插值的信息可以限制对移动图像数据的帧插值，并且避免阻碍准确地反映制作时的意图。
发明效果
根据本技术，可以避免由于在接收侧上运行帧插值而阻碍准确地反映制作时的意图。应注意，此处描述的效果是非限制性的。效果可以是本公开中公开的任何效果。
附图说明
图1是示出根据一个实施方式的传输-接收系统的示例性配置的框图。
图2是示出传输装置的示例性配置的框图。
图3是示出编码系统是HEVC的情况下位于GOP的头部的访问单元的图表。
图4是示出编码系统是HEVC的情况下不在GOP头部的访问单元的图表。
图5是示出示例性结构中的帧插值限制SEI消息和主要信息内容的示例性结构的图表。
图6是示出帧插值限制描述符的示例性结构的图表。
图7是示出帧插值限制描述符的示例性结构中的主要信息的内容的图表。
图8是示出传输流TS的示例性配置的图表。
图9是示出接收装置的示例性配置的框图。
图10是示出图片时刻(timing，时序)SEI消息的示例性结构的图表。
图11是示出当前限定的图片时刻SEI消息的“pic_struct”的显示序列的图表。
图12是示出未限制帧插值的情况下的帧速率转换实例(1)的图表。
图13是示出未限制帧插值的情况下的帧速率转换实例(2)的图表。
图14是示出基于用于限制帧插值的信息限制帧插值的情况下的帧速率转换的实施例的图表。
图15是示出在图片时刻SEI消息的“pic_struct”中重新限定的显示序列的图表。
图16是示出传输-接收系统的另一示例性配置的框图。
图17是示出示例性结构中的“视频显示信息帧”的包与主要信息内容的示例性结构的图表。
具体实施方式
在下文中，将描述本发明的实施方式(以下称为实施方式)。应注意，将按照下列顺序展开描述。
1.实施方式
2.变形例
<1.实施方式>
【传输-接收系统】
图1示出了根据一个实施方式的传输-接收系统10的示例性配置。传输-接收系统10包括传输装置100和接收装置200。
传输装置(发射装置)100通过广播波传输传输流TS作为容器。传输流TS包括通过对诸如24Hz、30Hz、60Hz、或120Hz等预定帧速率的移动图像数据执行编码操作而获得的视频流。在这种情况下，例如，执行诸如H.264/AVC、H.265/HEVC等编码。
将用于限制帧插值的信息插入到作为容器的传输流TS的层和视频流的层的一个或两个中。在接收侧，从传输流TS的层和视频流的层能够容易地获得用于限制帧插值的信息。
在本实施方式中，传输装置100将包括用于限制帧插值的信息的描述符插入到传输流TS的层中。而且，在本实施方式中，传输装置100将包括用于限制帧插值的信息的SEI消息插入到视频流的层中。
接收装置200接收通过广播波从传输装置100传输的传输流TS。传输流TS包括通过对预定帧速率的移动图像数据执行编码操作而获得的视频流。将用于限制帧插值的信息插入到传输流TS的层和视频流的层的一个或两个中。
接收装置200通过对视频流执行解码操作而执行获得预定帧速率的移动图像数据的解码处理并且通过执行将移动图像数据的帧速率转换成显示帧速率的帧速率转换处理而获得用于显示的移动图像数据。在用于限制帧插值的信息出现时，接收装置200基于该信息通过控制帧速率转换处理而阻止帧插值的执行。
“传输装置的配置”
图2示出了传输装置100的示例性配置。传输装置100包括中央处理单元(CPU)101、编码器102、多路复用器103、以及传输单元104。CPU101是控制单元并且控制传输装置100的各个部分的操作。
将构成用于分布的图像序列的预定帧速率的移动图像数据VD输入到编码器102中。例如，编码器102通过对移动图像数据VD执行诸如H.264/AVC或H.265/HEVC的编码操作而生成视频流。
此时，编码器102将用于限制帧插值的信息插入到视频流的层中。即，编码器102将重新限定的帧插值限制SEI消息(frame_interpolation_restriction SEI message)插入到访问单元(AU)的“SEI”部分中。
图3示出了编码系统是HEVC的情况下位于图像组(GOP)头部的访问单元。而且，图4示出了编码系统是HEVC情况下不在GOP头部的访问单元。在HEVC编码系统的情况下，将用于解码的一组SEI消息“Prefix_SEIs”布置在对像素数据进行编码的切片之前，并且将用于显示“Suffix_SEIs”的一组SEI消息布置在该切片之后。如图3和图4中示出的，例如，将帧插值限制SEI消息布置成SEI消息组“Suffix_SEIs”。
图5的(a)示出了帧插值限制SEI消息的示例性结构(Syntax，语法)。图5的(b)示出了示例性结构中的主要信息的内容(Semantics，语义)。“frame_interpolation_prohibited_flag”中的1位字段表示指示是否阻止帧插值的标志信息。例如，“1”指示阻止帧插值，并且“0”指示不阻止帧插值。
“frame_repeat_type”字段指示帧重复类型。例如，“000”指示帧重复不受限制。这基于未指定重复次数的假设，并且接收显示侧确定重复次数，以便与显示的帧速率匹配。而且，“001”指示一次帧重复，“010”指示两次帧重复，“011”指示三次帧重复，“100”指示四次帧重复，并且“101”指示五次帧重复。
参考图2，多路复用器103将由编码器102生成的视频流转换成分包基本流(PES)包，通过将其转换成传输包而进一步将其多路复用，并且获得传输流TS作为多路复用流。
此时，将用于限制帧插值的信息插入到作为容器的传输流TS的层中。即，多路复用器103根据节目映射表将帧插值限制描述符(frame_interpolation_restrictiondescriptor)插入到被布置成与视频流对应的视频基本流环中。
图6示出了帧插值限制描述符的示例性结构(Syntax，语法)。图7示出了示例性结构中的主要信息的内容(Semantics，语义)。“descriptor_tag”的8位字段指示描述符类型。此处，这指示它是帧插值限制描述符。“descriptor_length”的8位字段指示描述符的长度(大小)并且指示后续字节长度作为描述符的长度。此处，这指示三个字节。
“frame_interpolation_prohibited_flag”的1位字段表示指示是否阻止帧插值的标志信息。例如，“1”指示阻止帧插值，并且“0”指示不阻止帧插值。
“frame_rate”的3位字段指示帧速率。例如，“001”指示24Hz，“010”指示30Hz，“011”指示60Hz，并且“100”指示120Hz。
“frame_repeat_type”字段指示帧重复类型。例如，“000”指示帧重复不受限制。这基于未指定重复次数的假设，并且接收显示侧确定重复次数，以便与显示的帧速率匹配。而且，“001”指示一次帧重复，“010”指示两次帧重复，“011”指示三次帧重复，“100”指示四次帧重复，并且“101”指示五次帧重复。
返回图2，传输单元104通过广播波传输由多路复用器103获得的传输流TS并且传输至接收装置200。
图8示出了传输流TS的示例性配置。在示例性配置中，存在视频流的PES包“videoPES 1”。通过诸如“AUD”、“VPS”、“SPS”、“PPS”、“PSEI”、“SLICE”、“SSEI”、“EOS”等NAL单元配置PES有效载荷中包括的各个图片的编码图像数据。插入上述所述帧插值限制SEI消息(参考图5的(a))作为SEI消息。
而且，传输流TS包括节目映射表(PMT)作为节目具体信息(PSI)。PSI是描述在节目所属的传输流中包括的各个基本流的信息。在PMT中，存在描述与整个节目有关的信息的节目循环。而且，具有与各个基本流有关的信息的基本流循环也存在于PMT中。在示例性配置中，存在视频基本流循环(视频ES1循环)。
在视频基本流循环中，诸如流类型、包标识符(PID)等信息被布置成与视频流(视频PES 1)对应，并且还布置了描述与视频流有关的信息的描述符。作为描述符之一的HEVC描述符(HEVC_descriptor)或以上所述帧插值限制描述符(参考图6)被插入。
简要描述图2中示出的传输装置100的操作。将构成用于分布的图像序列的预定帧速率的移动图像数据VD输入到编码器102中。例如，编码器102通过对移动图像数据VD应用诸如H.264/AVC或H.265/HEVC等编码操作而生成视频流。
而且，在编码器102中，将用于限制帧插值的信息插入到视频流的层中。即，在编码器102中，将重新限定的帧插值限制SEI消息(参考图5的(a))插入到访问单元(AU)的“SEI”部分中。
将通过编码器102生成的视频流供应至多路复用器103。在多路复用器103中，通过视频流的PES包化(packetization)和传输包化执行多路复用并且获得传输流TS作为多路复用流。
而且，在多路复用器103中，将用于限制帧插值的信息插入到作为容器的传输流TS的层中。即，根据节目映射表将帧插值限制描述符(参考图6)插入到被布置成与视频流对应的视频基本流循环中。
将通过多路复用器103生成的传输流TS传输至传输单元104。例如，在传输单元104中，通过适合于诸如QPSK/OFDM等广播的调制方案对传输流TS进行调制，并且从传输天线传输RF调制信号。
“接收装置的配置”
图9示出了接收装置200的示例性配置。接收装置200包括中央处理单元(CPU)201、接收单元202、解多路复用器203、解码器204、显示处理单元205、以及显示单元206。CPU 201构成控制单元并且控制接收装置200的各个单元的操作。
接收装置202接收通过广播波或网络上的包从传输装置100传输的传输流TS。传输流TS包括通过对预定帧速率的移动图像数据执行编码操作而获得的视频流。
解多路复用器203通过PID滤波从传输流TS中提取视频流并且将提取的视频流供应至解码器204。而且，解多路复用器203提取传输流TS的层中包括的区段(section)信息并且将提取的区段信息传输至CPU 201。在这种情况下，还提取包括用于限制帧插值的信息的帧插值限制描述符(参考图6)。
解码器204对从解多路复用器203供应的视频流执行解码操作并且输出预定帧速率的移动图像数据。而且，解码器204提取构成视频流的各个访问单元中插入的参数集和SEI消息并且将它们传输至CPU 201。在这种情况下，还提取包括用于限制帧插值的信息的帧插值限制SEI消息(参考图5的(a))。
应注意，解码器204包括输出缓冲器(未示出)并且还能够对通过解码操作获得的移动图像数据执行帧重复及执行输出。例如，CPU 201基于图片时刻SEI消息(Picture_timing SEI message)的“pic_struct”字段的信息、用于限制帧插值的信息等控制解码器204中的帧重复。
图10示出了图片时刻SEI消息的示例性结构(Syntax，语法)。图11示出了当前限定的“pic_struct”的显示序列。
显示处理单元205将通过解码器204获得的移动图像数据的帧速率转换成显示帧速率并且以显示帧速率执行输出。应注意，将通过解码器204获得的移动图像数据的帧速率设置成等于或低于显示帧速率。当通过解码器204获得的移动图像数据的帧速率低于显示帧速率时，显示处理单元205通过帧插值或帧重复执行帧速率转换处理。应注意，当通过解码器204获得的移动图像数据的帧速率等于显示帧速率时，显示处理单元205按原样输出通过解码器204获得的移动图像数据，而不执行帧速率转换处理。
CPU 201基于在帧插值限制描述符或帧插值限制SEI消息中包括的、用于限制帧插值的信息来控制解码器204和显示处理单元205的操作。下面对控制细节进行详述。
显示单元206基于通过显示处理单元205获得的移动图像数据显示移动图像。例如，利用液晶显示器(LCD)和有机电致发光(EL)面板等形成显示单元206。应注意，显示单元206可以是连接至接收装置200的外部设备。
简要描述图9中示出的接收装置200的操作。在接收单元202中，对通过接收天线接收的RF调制信号进行解调，并且获得传输流TS。将该传输流TS传输至解多路复用器203。在解多路复用器203中，从传输流TS提取通过PID滤波经历解码操作的视频流。
而且，在解多路复用器203中，提取传输流TS的层中包括的区段信息并且传输至CPU 201。在这种情况下，还提取包括用于限制帧插值的信息的帧插值限制描述符(参考图6)。利用此配置，CPU 201从该描述符中获得用于限制帧插值的信息。
将通过解多路复用器203提取的视频流供应至解码器204。在解码器204中，对视频流执行解码操作，从而致使获取预定帧速率的移动图像数据。而且，在解码器204中，提取构成视频流的各个访问单元中插入的参数集和SEI消息并且传输至CPU 201。在这种情况下，还提取包括用于限制帧插值的信息的帧插值限制SEI消息(参考图5的(a))。利用此配置，CPU 201从该SEI消息中获得用于限制帧插值的信息。
将通过解码器204获得的预定帧速率的移动图像数据供应至显示处理单元205。在显示处理单元205中，将通过解码器204获得的移动图像数据的帧速率转换成显示帧速率并且以显示帧速率输出。应注意，在通过解码器204获得的移动图像数据的帧速率等于显示帧速率的情况下，按原样输出通过解码器204获得的移动图像数据，而不经历帧速率转换处理。
将从显示处理单元205输出的移动图像数据供应至显示单元206。基于移动图像数据在显示单元206上显示移动图像。
“通过用于限制帧插值的信息进行控制”
基于帧插值限制描述符或帧插值限制SEI消息中包括的、用于限制帧插值的信息，通过CPU 201控制解码器204和显示处理单元205的操作。
(1)例如，存在“frame_repeat_type”的信息指示诸如“001”至“101”等受限制的重复次数并且使用“frame_repeat_type”的信息与“frame_interpolation_prohibited_flag”的信息的组合的可想到的情况。
现在，下面是通过解码操作获得的移动图像数据(已接收的移动图像数据)的帧速率是30Hz、“frame_repeat_type”是指示三个(次)帧重复的“011”、并且“frame_interpolation_prohibited_flag”是指示阻止帧插值的“1”的情况。
在这种情况下，基于“frame_repeat_type”的信息控制解码器204的操作，从解码器204的输出缓冲器以4倍的速度执行四次读取。从而致使获取120Hz的帧速率的移动图像数据。进一步地，在显示帧速率是120Hz的情况下，从解码器204输出的120Hz的帧速率的移动图像数据按原样从显示处理单元205输出。
而且，在显示帧速率是240Hz的情况下，基于“frame_interpolation_prohibited_flag”的信息控制显示处理单元205的操作，从而致使通过显示处理单元205重复各个帧一次，由此从显示处理单元205输出具有240Hz的帧速率的移动图像。
此时，基于“frame_repeat_type”的信息和“frame_interpolation_prohibited_flag”的信息控制解码器204的操作，从解码器204的输出缓冲器以8倍的速度执行八次读取，并且可以获得240Hz的帧速率的移动图像数据。在这种情况下，从显示处理单元205原样输出240Hz的帧速率的移动图像数据。
尽管上述描述是主要通过解码器204执行帧重复的情况，然而，通过显示处理单元205可以执行全部的帧重复。
(2)而且，例如，存在“frame_repeat_type”的信息指示如“000”等不受限制的重复次数并且仅使用“frame_repeat_type”字段的信息的可想到的情况。
现在，下面是通过解码操作获得的移动图像数据(已接收的移动图像数据)的帧速率是30Hz并且“frame_repeat_type”是指示不受限制的重复次数的“000”的情况。
在这种情况下，基于“frame_repeat_type”的信息控制解码器204的操作。在显示帧速率是120Hz的情况下，从解码器204的输出缓冲器以4倍的速度执行四次读取，从而致使获取120Hz的帧速率的移动图像数据。因此，从显示处理单元205原样输出移动图像数据。
而且，在显示帧速率是240Hz的情况下，从解码器204的输出缓冲器以8倍的速度执行八次读取，从而致使获取240Hz的帧速率的移动图像数据。因此，从显示处理单元205原样输出移动图像数据。
应注意，尽管上述描述是通过解码器204执行帧重复的情况，然而，通过显示处理单元205也可以执行帧重复。
(3)而且，例如，存在单独使用“frame_interpolation_prohibited_flag”的信息的可想到的情况。
现在，下面是通过解码操作获得的移动图像数据(已接收的移动图像数据)的帧速率是30Hz并且“frame_interpolation_prohibited_flag”是指示阻止帧插值的“1”的情况。
在这种情况下，基于“frame_repeat_type”的信息控制解码器204的操作。在显示帧速率是120Hz的情况下，从解码器204的输出缓冲器以4倍的速度执行四次读取，从而致使获取120Hz的帧速率的移动图像数据。然后，从显示处理单元205按原样输出移动图像数据。
而且，在显示帧速率是240Hz的情况下，从解码器204的输出缓冲器以8倍的速度执行八次读取，从而致使获取240Hz的帧速率的移动图像数据。然后，从显示处理单元205按原样输出移动图像数据。
应注意，尽管上述描述是通过解码器204执行帧重复的情况，然而，通过显示处理单元205也可以执行帧重复。
如上所述，根据图1中示出的传输-接收系统10中的传输装置100，将用于限制帧插值的信息插入到作为容器的传输流TS的层和视频流的层中。利用此配置，在接收侧，基于信息可以限制对已传输的移动图像数据的帧插值，并且可以避免阻碍准确地反映在制作时的意图。
例如，图12示出了不限制帧插值的情况下的帧速率转换的实例(1)。下面是通过解码操作获得的移动图像数据(已接收的移动图像数据)的帧速率是24Hz并且显示帧速率是120Hz的示例性情况。应注意，类似条件适用于下面图13和图14中示出的实例。
图12的(a)示出了通过解码操作获得的24Hz的帧速率的移动图像数据(已接收的移动图像数据)。图12的(b)示出了通过从解码器的输出缓冲器读取的帧重复对已接收的移动图像数据执行3/2下拉处理而获得的60Hz的帧速率的移动图像数据。图12的(c)示出了通过显示处理单元对解码器输出的移动图像数据执行帧插值而获得的120Hz的帧速率的移动图像数据。
在该实施例中，当通过3/2下拉处理将帧速率设置为60Hz时，显示时刻从24Hz的初始时间网格发生移位。不同于初始移动，这导致显示中产生更不平滑的移动。而且，在该实施例中，在通过帧插值转换至120H的帧速率时，在显示时刻从初始24Hz时间网格移位的状态下，插入初始并不存在的插值帧。因此，该示例性情况可能阻碍准确地反映制作时的意图。
而且，例如，图13示出了帧插值不受限制的情况下的帧速率转换的实例(2)。图13的(a)示出了通过解码操作获得的24Hz的帧速率的移动图像数据(已接收的移动图像数据)。图13的(b)示出了通过显示处理单元对24Hz的帧速率的解码器输出的移动图像数据执行帧插值而获得的120Hz的帧速率的移动图像数据。
在该实施例中，尽管显示时刻中并不从初始的24Hz时间网格产生位移，然而，插入了初始并不存在的插值帧。因此，该示例性情况可能阻碍准确地反映在制作时的意图。
图14示出了本技术中基于用于限制帧插值的信息限制帧插值的情况下的帧速率转换的实施例。图14的(a)示出了通过解码器204的解码操作获得的24Hz的帧速率的移动图像数据(已接收的移动图像数据)。图14的(b)示出了通过解码器204和显示处理单元205中的一个或两个对24Hz的帧速率的解码器输出的移动图像数据执行帧重复而获得的120Hz的帧速率的移动图像数据。
在该实施例的情况下，显示时刻不从初始的24Hz时间网格发生移位并且不执行帧插值，从而使得可以保持初始的图像质量并且避免阻碍准确地反映制作时的意图。
<2.变形例>
应注意，在上述所述实施方式中，将具有用于限制帧插值的信息的帧插值限制描述符插入到作为容器的传输流TS的层中，并且将具有用于限制插值的信息的帧插值限制SEI消息插入到视频流的层中。然而，不一定必须始终插入描述符和SEI消息两者，并且可以允许具有仅插入它们其中一个的配置。
而且，在上述所述实施方式中，帧插值限制描述符和帧插值限制SEI消息各自包括作为指示阻止帧插值的信息“frame_interpolation_prohibited_flag”和作为指示帧重复次数的信息“frame_repeat_type”。
还可以想到允许图片时刻SEI消息中包括指示帧重复次数的信息(参考图10)。在这种情况下，例如，在图15示出的“pic_struct”中限定新显示序列。例如，“13”指示对于“帧四倍”重复三次帧。而且，“14”指示对于“帧五倍”重复四次帧。而且，“15”指示帧重复不受限制。这基于未指定重复次数的假设，并且接收显示侧确定重复次数，以与显示的帧速率相匹配。
而且，尽管上述所述实施方式示出了传输-接收系统10包括传输装置100和接收装置200的情况，然而，能够应用本技术的传输-接收系统的配置并不局限于此。例如，如图16中示出的传输-接收系统10A，接收装置200可以被通过数字接口连接彼此的机顶盒(STB)200A和监控器200B取代，例如，高清晰多媒体接口(HDMI)的数字接口。应注意，“HDMI”是注册商标。
在这种情况下，例如，机顶盒200A中包括直至解码器204的部分，并且监控器200B中包括显示处理单元205和后续部分。在这种情况下，考虑HDMI的数字接口中的传输速率，例如，被配置成使得在机顶盒200A的解码器204中不执行帧速率转换。具体地，当接收时，机顶盒200A的解码器204输出初始帧速率的移动图像数据，并且机顶盒200A经由HDMI数字接口将移动图像数据(未经压缩的移动图像数据)输出至监控器200。
而且，机顶盒200A经由HDMI数字接口将用于限制帧插值的信息传输至监控器200。例如，机顶盒200A通过将用于限制帧插值的信息插入在移动图像数据的空白周期内而传输该信息。例如，使用包“Video displaying InfoFrame”将用于限制帧插值的信息传输至监控器200B。
图17的(a)示出了从机顶盒200A传输至监控器200B的“Video displayingInfoFrame”的包的示例性结构(Syntax，语法)。而且，图17的(b)示出了示例性结构中的主要信息的内容。
将“frame_interpolation_prohibited_flag(帧_插值_阻止_标志)”的1位信息布置在第四字节的第七位上。1位信息指示表示是否阻止帧插值的标志信息。例如，“1”指示阻止帧插值，并且“0”指示不阻止帧插值。
而且，将“frame_repeat_type(帧_重复_类型)”的3位信息布置在第四字节的第六位至第四位的范围内。该3位信息指示帧重复的类型。例如，“000”指示帧重复不受限制。这基于未指定重复次数的假设，并且接收显示侧确定重复次数，以与显示的帧速率相匹配。而且，“001”指示帧重复一次，“010”指示帧重复两次，“011”指示帧重复三次，“100”指示帧重复四次，并且“101”指示帧重复五次。
监控器200B的CPU基于从机顶盒200A传输的、用于限制帧插值的信息控制显示处理单元205的操作。尽管省去了该控制的细节，然而，与上述所述传输-接收系统10的接收装置100中的控制相似，执行该控制。
应注意，还可以想到使用诸如“Vender Specific InfoFrame(供应商特定信息帧)”包等其他“InfoFrame(信息帧)”包，例如，而非使用将用于限制帧插值的信息从机顶盒200A传输至监控器200B时的“Video displaying InfoFrame(视频显示信息帧)”包。而且，还构想了经由CEC线路或HEC通信线路传输用于限制帧插值的信息。
而且，上述所述实施方式是其中容器是传输流(MPEG-2TS)的实施例。然而，本技术同样也可应用于被配置为使用诸如互联网等网络执行接收终端的分布的系统。在经由互联网的分布中，通常在MP4的容器中或以其他格式执行分布。即，诸如数字广播标准中采用的传输流(MPEG-2TS)或MPEG媒体传输(MMT)等各种格式的容器、以及经由互联网分布时使用的MP4可应用为容器。
而且，本技术还可被配置成如下。
(1)一种传输装置，包括：
传输单元，传输单元被配置为传输包括视频流的预定容器，视频流是通过对预定帧速率的移动图像数据执行编码操作获得的；和
信息插入单元，信息插入单元被配置为将用于限制帧插值的信息插入到容器的层和视频流的层的一个或两个中。
(2)根据(1)所述的传输装置，
其中，用于限制帧插值的信息包括用于阻止帧插值的信息。
(3)根据(1)或(2)所述的传输装置，
其中，用于限制帧插值的信息包括指示帧重复次数的信息。
(4)根据(1)至(3)中任一项所述的传输装置，
其中，信息插入单元将包括用于限制帧插值的信息的描述符插入到容器的层中。
(5)根据(1)至(4)中任一项所述的传输装置，
其中，信息插入单元将包括用于限制帧插值的信息的SEI消息插入到视频流的层中。
(6)一种传输方法，包括：
传输步骤，传输包括视频流的预定容器，视频流是通过对预定帧速率的移动图像数据执行编码操作获得的；和
信息插入步骤，将用于限制帧插值的信息插入到容器的层和视频的层的一个或两个中。
(7)一种图像处理装置，包括：
图像数据获取单元，图像数据获取单元被配置为获得预定帧速率的移动图像数据；
帧速率转换处理单元，帧速率转换处理单元被配置为将移动图像数据的帧速率转换成显示帧速率并且以显示帧速率执行输出；以及
控制单元，控制单元被配置为基于用于限制帧插值的信息控制帧速率转换处理单元的操作。
(8)根据(7)所述的图像处理装置，
其中，图像数据获取单元接收包括视频流的预定格式的容器，视频流是通过对预定帧速率的移动图像数据执行编码操作获得的，并且图像数据获取单元通过对视频流执行解码操作而获得预定帧速率的移动图像数据。
(9)根据(8)所述的图像处理装置，
其中，将用于限制帧插值的信息插入到容器的层和视频流的层的一个或两个中。
(10)根据(7)所述的图像处理装置，
其中，图像数据获取单元经由数字接口从外部设备获得预定帧速率的移动图像数据。
(11)根据(10)所述的图像处理装置，
其中，经由数字接口从外部设备获得用于限制帧插值的信息。
(12)一种图像处理方法，包括：
图像数据获取步骤，获得预定帧速率的移动图像数据；
帧速率转换处理步骤，将移动图像数据的帧速率转换成显示帧速率并且以显示帧速率执行输出；以及
控制步骤，基于用于限制帧插值的信息控制帧速率转换处理步骤的操作。
(13)一种包括被配置为接收包括视频流的预定格式的容器的接收单元的接收装置，视频流是通过对预定帧速率的移动图像数据执行编码操作获得的，
用于限制帧插值的信息被插入到容器的层和视频流的层的一个或两个中；
接收装置进一步包括：
解码单元，解码单元被配置为通过对视频流执行解码操作而获得预定帧速率的移动图像数据；
帧速率转换处理单元，帧速率转换处理单元被配置为将通过解码单元获得的移动图像数据的帧速率转换成显示帧速率并且以显示帧速率执行输出；以及
控制单元，控制单元被配置为基于用于限制帧插值的信息控制帧速率转换处理单元的操作。
(14)一种包括通过接收单元接收包括视频流的预定格式的容器的接收步骤的接收方法，视频流是通过对预定帧速率的移动图像数据执行编码操作获得的，
用于限制帧插值的信息被插入到容器的层和视频流的层的一个或两个中；
接收方法进一步包括：
解码步骤，通过对视频流执行解码操作获得预定帧速率的移动图像数据；
帧速率转换处理步骤，将通过解码步骤获得的移动图像数据的帧速率转换成显示帧速率并且以显示帧速率执行输出；以及
控制步骤，基于用于控制帧插值的信息控制帧速率转换处理步骤的操作。
(15)一种接收装置，包括：
图像数据接收单元，图像数据接收单元被配置为经由数字接口从外部设备接收预定帧速率的移动图像数据；
信息接收单元，信息接收单元被配置为经由数字接口从外部设备接收用于限制帧插值的信息；
帧速率转换处理单元，帧速率转换处理单元被配置为将移动图像数据的帧速率转换成显示帧速率并且以显示帧速率执行输出；以及
控制单元，控制单元被配置为基于用于限制帧插值的信息控制帧速率转换处理单元的操作。
(16)一种接收方法，包括：
图像数据接收步骤，通过图像数据接收单元经由数字接口从外部设备接收预定帧速率的移动图像数据；
信息接收步骤，通过信息接收单元经由数字接口从外部设备接收用于限制帧插值的信息；
帧速率转换处理步骤，将移动图像数据的帧速率转换成显示帧速率并且以显示帧速率执行输出；以及
控制步骤，基于用于限制帧插值的信息控制帧速率转换处理步骤的操作。
(17)一种包括被配置为接收包括视频流的预定格式的容器的接收单元的接收装置，视频流是通过对预定帧速率的移动图像数据执行编码操作获得的；
用于限制帧插值的信息被插入到容器的层和视频流的层的一个或两个中；
接收装置进一步包括：
解码单元，解码单元被配置为通过对视频流执行解码操作获得预定帧速率的移动图像数据；和
传输单元，传输单元被配置为经由数字接口将在解码单元中获得的预定帧速率的移动图像数据及用于限制帧插值的信息传输至外部设备。
(18)一种包括通过接收单元接收包括视频流的预定格式的容器的接收步骤的接收方法，视频流是通过对预定帧速率的移动图像数据执行编码操作获得的，
用于限制帧插值的信息被插入到容器的层和视频流的层的一个或两个中；
接收方法进一步包括：
通过对视频流执行解码操作获得预定帧速率的移动图像数据的解码步骤；和
经由数字接口将在解码步骤中获得的预定帧速率的移动图像数据及用于限制帧插值的信息传输至外部设备的传输步骤。
本技术的主要特征在于将用于限制帧插值的信息插入到容器的层和视频流的层中，由此在接收侧基于该信息来限制对移动图像数据的帧插值，从而使得可以避免妨碍准确地反映制作时的意图(参考图8)。
参考标识列表
10,10A 传输-接收系统
100 传输装置
101 CPU
102 编码器
103 多路复用器
104 传输单元
200 接收装置
200A 机顶盒
200B 监控器
201 CPU
202 接收单元
203 解多路复用器
204 解码器
205 显示处理单元
206 显示单元

Claims (18)

1.一种传输装置，包括：
传输单元，所述传输单元被配置为传输包括视频流的预定容器，所述视频流是通过对预定帧速率的移动图像数据执行编码操作而获得的；和
信息插入单元，所述信息插入单元被配置为将用于限制帧插值的信息插入到所述容器的层和所述视频流的层的一个或两个中。
2.根据权利要求1所述的传输装置，
其中，用于限制帧插值的所述信息包括用于阻止帧插值的信息。
3.根据权利要求1所述的传输装置，
其中，用于限制帧插值的所述信息包括指示帧重复次数的信息。
4.根据权利要求1所述的传输装置，
其中，所述信息插入单元将包括用于限制帧插值的所述信息的描述符插入到所述容器的层中。
5.根据权利要求1所述的传输装置，
其中，所述信息插入单元将包括用于限制帧插值的所述信息的SEI消息插入到所述视频流的层中。
6.一种传输方法，包括：
传输步骤，由传输单元传输包括视频流的预定容器，其中所述视频流是通过对预定帧速率的移动图像数据执行编码操作而获得的；和
信息插入步骤，将用于限制帧插值的信息插入到所述容器的层和所述视频流的层的一个或两个中。
7.一种图像处理装置，包括：
图像数据获取单元，所述图像数据获取单元被配置为获得预定帧速率的移动图像数据；和
控制单元，所述控制单元被配置为基于用于限制帧插值的信息控制将所述移动图像数据的所述帧速率转换成显示帧速率并进行输出的帧速率转换处理。
8.根据权利要求7所述的图像处理装置，
其中，所述图像数据获取单元接收包括视频流的预定格式的容器，所述视频流是通过对所述预定帧速率的所述移动图像数据执行编码操作而获得的，并且所述图像数据获取单元通过对所述视频流执行解码操作而获得所述预定帧速率的所述移动图像数据。
9.根据权利要求8所述的图像处理装置，
其中，将用于限制帧插值的所述信息插入到所述容器的层和所述视频流的层的一个或两个中。
10.根据权利要求7所述的图像处理装置，
其中，所述图像数据获取单元经由数字接口从外部设备获得所述预定帧的所述移动图像数据。
11.根据权利要求10所述的图像处理装置，
其中，经由所述数字接口从所述外部设备获得用于限制帧插值的所述信息。
12.一种图像处理方法，包括：
图像数据获取步骤，获得预定帧速率的移动图像数据；
帧速率转换处理步骤，将所述移动图像数据的所述帧速率转换成显示帧速率并且以所述显示帧速率执行输出；以及
控制步骤，由控制单元基于用于限制帧插值的信息控制所述帧速率转换处理步骤的操作。
13.一种接收装置，包括被配置为接收包括视频流的预定格式的容器，所述视频流是通过对预定帧速率的移动图像数据执行编码操作而获得的，
用于限制帧插值的信息被插入到所述容器的层和所述视频流的层的一个或两个中；
所述接收装置进一步包括控制单元，所述控制单元被配置为控制通过对所述视频流执行解码操作而获得预定帧速率的移动图像数据的解码处理，并且被配置为基于用于控制帧插值的所述信息控制将通过所述解码处理获得的所述移动图像数据的所述帧速率转换成显示帧速率并进行输出的帧速率转换处理。
14.一种接收方法，包括通过接收单元接收包括视频流的预定格式的容器的接收步骤，所述视频流是通过对预定帧速率的移动图像数据执行编码操作而获得的，
用于限制帧插值的信息被插入到所述容器的层和所述视频流的层的一个或两个中；
所述接收方法进一步包括：
解码步骤，通过对所述视频流执行解码操作获得预定帧速率的移动图像数据；
帧速率转换处理步骤，将通过所述解码步骤获得的所述移动图像数据的所述帧速率转换成显示帧速率并且以所述显示帧速率执行输出；以及
控制步骤，基于用于控制帧插值的所述信息控制所述帧速率转换处理步骤的操作。
15.一种接收装置，包括：
接收单元，所述接收单元被配置为经由数字接口从外部设备接收预定帧速率的移动图像数据和用于限制帧插值的信息；和
控制单元，所述控制单元被配置为基于用于限制帧插值的所述信息控制将所述移动图像数据的所述帧速率转换成显示帧速率并进行输出的帧速率转换处理。
16.一种接收方法，包括：
图像数据接收步骤，通过图像数据接收单元经由数字接口从外部设备接收预定帧速率的移动图像数据；
信息接收步骤，通过信息接收单元经由数字接口从外部设备接收用于限制帧插值的信息；
帧速率转换处理步骤，将所述移动图像数据的所述帧速率转换成显示帧速率并且以所述显示帧速率执行输出；以及
控制步骤，基于用于限制帧插值的所述信息控制所述帧速率转换处理步骤的操作。
17.一种接收装置，包括被配置为接收包括视频流的预定格式的容器的接收单元，所述视频流是通过对预定帧速率的移动图像数据执行编码操作而获得的；
用于限制帧插值的信息被插入到所述容器的层和所述视频流的层的一个或两个中；
所述接收装置进一步包括控制单元，所述控制单元被配置为控制通过对所述视频流执行解码操作而获得预定帧速率的移动图像数据的解码处理，并且被配置为控制经由数字接口将在所述解码处理时获得的预定帧速率的所述移动图像数据及用于限制帧插值的所述信息传输至外部设备的传输处理。
18.一种接收方法，包括通过接收单元接收包括视频流的预定格式的容器的接收步骤，所述视频流是通过对预定帧速率的移动图像数据执行编码操作而获得的，
用于限制帧插值的信息被插入到所述容器的层和所述视频流的层的一个或两个中；
所述接收方法进一步包括：
解码步骤，通过对所述视频流执行解码操作获得预定帧速率的移动图像数据；和
传输步骤，经由数字接口将在所述解码步骤中获得的预定帧速率的所述移动图像数据及用于限制帧插值的所述信息传输至外部设备。
CN201680027991.XA 2015-05-22 2016-05-10 传输装置、传输方法、图像处理装置、图像处理方法、接收装置、及接收方法 Expired - Fee Related CN107534786B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015104216 2015-05-22
JP2015-104216 2015-05-22
PCT/JP2016/063922 WO2016190089A1 (ja) 2015-05-22 2016-05-10 送信装置、送信方法、画像処理装置、画像処理方法、受信装置および受信方法

Publications (2)

Publication Number Publication Date
CN107534786A true CN107534786A (zh) 2018-01-02
CN107534786B CN107534786B (zh) 2020-10-27

Family

ID=57392728

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680027991.XA Expired - Fee Related CN107534786B (zh) 2015-05-22 2016-05-10 传输装置、传输方法、图像处理装置、图像处理方法、接收装置、及接收方法

Country Status (5)

Country Link
US (1) US10904592B2 (zh)
EP (1) EP3300374B1 (zh)
JP (1) JP6930420B2 (zh)
CN (1) CN107534786B (zh)
WO (1) WO2016190089A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018194040A1 (ja) * 2017-04-17 2018-10-25 ソニー株式会社 送信装置、送信方法、受信装置、受信方法、記録装置および記録方法
CN112584076B (zh) * 2020-12-11 2022-12-06 北京百度网讯科技有限公司 视频的插帧方法、装置及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100013988A1 (en) * 2008-07-17 2010-01-21 Advanced Micro Devices, Inc. Method and apparatus for transmitting and using picture descriptive information in a frame rate conversion processor
CN101939992A (zh) * 2007-12-10 2011-01-05 高通股份有限公司 经内插或经外推的视频单元的选择性显示
WO2013057938A1 (ja) * 2011-10-19 2013-04-25 パナソニック株式会社 システム層処理装置、符号化装置、システム層処理方法、および符号化方法
US20140362923A1 (en) * 2011-12-14 2014-12-11 Yutaka Nio Video signal processing device, video signal output device, and video signal processing method
WO2015053157A1 (ja) * 2013-10-11 2015-04-16 ソニー株式会社 送信装置、送信方法および受信装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0683441B2 (ja) * 1989-06-26 1994-10-19 松下電器産業株式会社 画像信号のフレーム間内挿符号化方法とその装置
AU2005219956B2 (en) * 2004-03-01 2009-05-28 Dolby Laboratories Licensing Corporation Multichannel audio coding
EP1931141A4 (en) * 2005-09-30 2010-11-03 Sharp Kk IMAGE DISPLAY DEVICE AND METHOD
US8848793B2 (en) * 2007-10-31 2014-09-30 Broadcom Corporation Method and system for video compression with integrated picture rate up-conversion
JP2013030907A (ja) * 2011-07-27 2013-02-07 Sony Corp 符号化装置および符号化方法、並びに、復号装置および復号方法
JP2013143646A (ja) 2012-01-10 2013-07-22 Sony Corp 表示装置、フレームレート変換装置、および表示方法
WO2016129851A1 (ko) * 2015-02-13 2016-08-18 엘지전자(주) 비균등 위상 보간을 이용하여 비디오 신호를 인코딩, 디코딩하는 방법 및 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101939992A (zh) * 2007-12-10 2011-01-05 高通股份有限公司 经内插或经外推的视频单元的选择性显示
US20100013988A1 (en) * 2008-07-17 2010-01-21 Advanced Micro Devices, Inc. Method and apparatus for transmitting and using picture descriptive information in a frame rate conversion processor
WO2013057938A1 (ja) * 2011-10-19 2013-04-25 パナソニック株式会社 システム層処理装置、符号化装置、システム層処理方法、および符号化方法
US20140362923A1 (en) * 2011-12-14 2014-12-11 Yutaka Nio Video signal processing device, video signal output device, and video signal processing method
WO2015053157A1 (ja) * 2013-10-11 2015-04-16 ソニー株式会社 送信装置、送信方法および受信装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
GARY J SULLIVAN: "Overview of the High Efficiency Video Coding(HEVC) Standard", 《IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY,INSTITUTE OF ELECTRICAL AND ELECTRONICS ENGINEERS,US》 *
THOMAS SCHIERL: "scalable video coding over RTP and MPEG-2 transport stream in broadcast and IPTV channels", 《IEEE WIRELESS COMMUNICATION》 *

Also Published As

Publication number Publication date
EP3300374A1 (en) 2018-03-28
US10904592B2 (en) 2021-01-26
EP3300374B1 (en) 2022-07-06
US20180146219A1 (en) 2018-05-24
CN107534786B (zh) 2020-10-27
JP6930420B2 (ja) 2021-09-01
JPWO2016190089A1 (ja) 2018-03-08
WO2016190089A1 (ja) 2016-12-01
EP3300374A4 (en) 2018-10-24

Similar Documents

Publication Publication Date Title
KR102077435B1 (ko) 송신 장치, 송신 방법, 수신 장치, 수신 방법, 표시 장치 및 표시 방법
CN104837001B (zh) 广播接收机及其视频数据处理方法
JP6888717B2 (ja) 送信方法および送信装置
EP3261352B1 (en) Transmission device, transmission method, reception device, and reception method
CN110418166A (zh) 发送设备、发送方法、接收设备、以及接收方法
CN103597823B (zh) 发送装置、发送方法和接收器装置
EP3267685B1 (en) Transmission device, transmission method, receiving device, and receiving method
KR102181994B1 (ko) 송신 장치, 송신 방법, 수신 장치, 수신 방법 및 수신 표시 방법
CN103891275B (zh) 数字广播信号处理方法及设备
CN107534790A (zh) 图像处理装置、图像处理方法、接收装置及发送装置
CN103155574A (zh) 发射机、传送方法和接收机
EP3439309B1 (en) Method and apparatus for transmitting and receiving broadcast signals
KR20180069805A (ko) 송신 디바이스, 송신 방법, 수신 디바이스, 및 수신 방법
US20140049606A1 (en) Image data transmission device, image data transmission method, image data reception device, and image data reception method
CN106796793A (zh) 传输设备、传输方法、接收设备以及接收方法
US20140327740A1 (en) Transmission apparatus, transmisson method, receiver and receiving method
CN107534786A (zh) 传输装置、传输方法、图像处理装置、图像处理方法、接收装置、及接收方法
CN103168476A (zh) 发送器、发送方法以及接收器
CN106233736A (zh) 发送设备、发送方法、接收设备以及接收方法
JP5886341B2 (ja) 送信装置、送信方法、受信装置および受信方法
CN103535045A (zh) 用于传送立体视频信息的方法和设备
CN109479154A (zh) 发送装置、发送方法、接收装置和接收方法
KR20140004045A (ko) 실시간으로 전송되는 기준 영상과 별도로 전송되는 부가 영상 및 콘텐츠를 연동하여 3ｄ 서비스를 제공하기 위한 전송 장치 및 방법, 및 수신 장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20201027