CN105359512B - 用于交互性的运动约束贴片集合sei消息的扩展 - Google Patents

用于交互性的运动约束贴片集合sei消息的扩展 Download PDF

Info

Publication number
CN105359512B
CN105359512B CN201480038849.6A CN201480038849A CN105359512B CN 105359512 B CN105359512 B CN 105359512B CN 201480038849 A CN201480038849 A CN 201480038849A CN 105359512 B CN105359512 B CN 105359512B
Authority
CN
China
Prior art keywords
patch
video
section interested
interested
section
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480038849.6A
Other languages
English (en)
Other versions
CN105359512A (zh
Inventor
欧阳祥
徐俊
A·塔巴塔贝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to CN201910195676.3A priority Critical patent/CN109862373B/zh
Publication of CN105359512A publication Critical patent/CN105359512A/zh
Application granted granted Critical
Publication of CN105359512B publication Critical patent/CN105359512B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162—User input
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/12—Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal

Abstract

针对运动约束贴片集合SEI消息的扩展提供了用信号表明所有贴片都是独立可解码的以及用信号表明对于每个ROI可以具有多于一个贴片的ROI的功能。通过这一扩展，实现了基于用户交互性在编码树单元层级重新定义CVS中的任何独立可解码的感兴趣区段的功能。所述扩展支持利用在多种应用中的交互性，比如交互式超高清晰度电视(UHDTV)、动态高质量焦距拉近应用、交互式点播、电子学习、智能监控以及许多其他应用。此外，时间MCTS SEI消息能够被编码器使用于贴片式流送，以便明确地用信号向解码器表明解码器只需要显示ROI。

Description

用于交互性的运动约束贴片集合SEI消息的扩展
相关申请的交叉引用
本申请在35 U.S.C.§119(e)下要求以下专利申请的优先权：2013年7月15日提交的美国临时专利申请No.61/846,555，其标题为“EXTENSION OF MOTION-CONSTRAINED TILESETS SEI MESSAGE FOR INTERACTIVITY(用于交互性的运动约束贴片集合SEI消息的扩展)”；2013年7月29日提交的美国临时专利申请No.61/859,347，其标题为“EXTENSIONS OFMOTION-CONSTRAINED TILE SETS SEI MESSAGE FOR INTERACTIVITY(用于交互性的运动约束贴片集合SEI消息的扩展)”；2014年1月3日提交的美国临时专利申请No.61/923,351，其标题为“HLE:EXTENSION TO TEMPORAL MOTION CONSTRAINED TILE SETS SEI MESSAGE FORNO DISPLAY(HLE：针对无显示的时间运动约束贴片集合SEI消息的扩展)”；以及2014年1月16日提交的美国临时专利申请No.61/928,107，其标题为“HLE:EXTENSION TO TEMPORALMOTION CONSTRAINED TILE SETS SEI MESSAGE FOR NO DISPLAY(HLE：针对无显示的时间运动约束贴片集合SEI消息的扩展)”，通过引用的方式将所有这些专利申请全文合并在此。
技术领域
本发明涉及成像领域。更具体来说，本发明涉及视频编码。
背景技术
范围扩展文本规范第3版草稿(Range Extensions text specification,Draft3)中的运动约束贴片集合不具有用信号表明所有贴片都是独立可解码的以及用信号表明对于每个感兴趣区段(ROI)可能具有多于一个贴片的ROI的功能。
发明内容
针对运动约束贴片集合SEI消息的扩展提供了用信号表明所有贴片都是独立可解码的以及用信号表明对于每个ROI可以具有多于一个贴片的ROI的功能。通过这一扩展，实现了基于用户交互性在编码树单元层级重新定义CVS中的任何独立可解码的感兴趣区段的功能。所述扩展支持利用在多种应用中的交互性，比如交互式超高清晰度电视(UHDTV)、动态高质量焦距拉近应用、交互式点播、电子学习、智能监控以及许多其他应用。此外，时间MCTS SEI消息能够被编码器使用于贴片式流送，以便明确地用信号向解码器表明解码器只需要显示ROI。
在一个方面中，一种编程在设备的非瞬时性存储器中的方法包括：接收视频的比特流，其中所述比特流包括补充增强信息消息，并且其中所述补充信息消息用信号表明所有贴片(tile)都是独立可解码的并且各个感兴趣区段能够对于每个感兴趣区段具有多于一个贴片；以及在所述设备上解码所述比特流。视频的基本层中的所有贴片都是独立可解码的。视频的增强层中的所有贴片都是独立可解码的。解码包括提供增强层中的感兴趣区段到基本层中的该感兴趣区段的映射。解码包括提供基本层中的感兴趣区段到增强层中的该感兴趣区段的映射。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。视频通过独立可解码的贴片被编码在一个或多个分辨率层中，并且被存储在服务器上。不同的用户请求视频的不同分辨率层。不同的导演请求视频的不同分辨率层。补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块不被显示。补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块被编码成灰色贴片以降低比特率。
在另一个方面中，一种系统包括：被配置成存储应用的非瞬时性存储器，所述应用被配置成接收视频的比特流，其中所述比特流包括补充增强信息消息，并且其中所述补充信息消息用信号表明所有贴片都是独立可解码的并且各个感兴趣区段能够对于每个感兴趣区段具有多于一个贴片，所述应用还被配置成解码所述比特流；以及被配置成显示已解码比特流的显示器。视频的基本层中的所有贴片都是独立可解码的。视频的增强层中的所有贴片都是独立可解码的。解码包括提供增强层中的感兴趣区段到基本层中的该感兴趣区段的映射。解码包括提供基本层中的感兴趣区段到增强层中的该感兴趣区段的映射。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。视频通过独立可解码的贴片被编码在一个或多个分辨率层中，并且被存储在服务器上。不同的用户请求视频的不同分辨率层。不同的导演请求视频的不同分辨率层。补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块不被显示。补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块被编码成灰色贴片以降低比特率。
在另一个方面中，一种装置包括：用于存储应用的非瞬时性存储器，所述应用用于接收视频的比特流，其中所述比特流包括补充增强信息消息，并且其中所述补充信息消息用信号表明所有贴片都是独立可解码的并且各个感兴趣区段能够对于每个感兴趣区段具有多于一个贴片，所述应用还用于解码所述比特流；以及耦合到存储器的处理组件，所述处理组件被配置成处理所述应用。视频的基本层中的所有贴片都是独立可解码的。视频的增强层中的所有贴片都是独立可解码的。解码包括提供增强层中的感兴趣区段到基本层中的该感兴趣区段的映射。解码包括提供基本层中的感兴趣区段到增强层中的该感兴趣区段的映射。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。视频通过独立可解码的贴片被编码在一个或多个分辨率层中，并且被存储在服务器上。不同的用户请求视频的不同分辨率层。不同的导演请求视频的不同分辨率层。补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块不被显示。补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块被编码成灰色贴片以降低比特率。
在另一个方面中，一种编程在设备的非瞬时性存储器中的方法包括：接收具有基本层以及一个或多个增强层的视频的比特流，其中所述比特流包括增强层的补充增强信息消息，并且其中所述补充信息消息与层间约束贴片集合一起被利用，其可以用信号表明所有贴片都可以独立于该层中的任何其他贴片被解码并且各个感兴趣区段对于该层中的每个感兴趣区段具有多于一个贴片；以及在所述设备上解码所述比特流。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。不同的用户请求视频的不同分辨率层。不同的导演请求视频的不同分辨率层。
在另一个方面中，一种系统包括：被配置成存储应用的非瞬时性存储器，所述应用被配置成接收具有基本层以及一个或多个增强层的视频的比特流，其中所述比特流包括增强层的补充增强信息消息，并且其中所述补充信息消息与层间约束贴片集合一起被利用，其可以用信号表明所有贴片都可以独立于该层中的任何其他贴片被解码并且各个感兴趣区段对于该层中的每个感兴趣区段具有多于一个贴片，所述应用还被配置成解码所述比特流；以及被配置成显示已解码比特流的显示器。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。不同的用户请求视频的不同分辨率层。不同的导演请求视频的不同分辨率层。
在另一个方面中，一种装置包括：用于存储应用的非瞬时性存储器，所述应用用于接收具有基本层以及一个或多个增强层的视频的比特流，其中所述比特流包括增强层的补充增强信息消息，并且其中所述补充信息消息与层间约束贴片集合一起被利用，其可以用信号表明所有贴片都可以独立于该层中的任何其他贴片被解码并且各个感兴趣区段对于该层中的每个感兴趣区段具有多于一个贴片，所述应用还用于解码所述比特流；以及耦合到存储器的处理组件，所述处理组件被配置成处理所述应用。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。不同的用户请求视频的不同分辨率层。不同的导演请求视频的不同分辨率层。
附图说明
图1示出了根据一些实施例的贴片式流送的一个实例。
图2示出了根据一些实施例用最少的比特对ROI之外的贴片进行重新编码的图示。
图3示出了根据一些实施例的贴片式流送方法的流程图。
图4示出了根据一些实施例的贴片式流送方法的流程图。
图5示出了根据一些实施例的贴片式流送方法的流程图。
图6示出了被配置成实施根据一些实施例的贴片式流送方法的示例性计算设备的方框图。
具体实施方式
在高效率视频编码(HEVC)标准的第1版中，当tiles_enabled_flag等于1时，每一幅画面由被称作贴片的矩形区段构成。在范围扩展文本规范第3版草稿中，这些贴片能够被收集从而形成被称作感兴趣区段(ROI)的贴片集合的总集。能够通过运动约束贴片集合补充增强信息(SEI)消息将贴片集合表明为是独立可解码的。
这样的HEVC贴片结构能够被应用于交互式贴片流送。贴片式流送的一个实例是其中能够把多分辨率全景视频分解成由不同的ROI和分辨率构成的各个视频的应用。
针对运动约束贴片集合SEI消息的扩展提供了用信号表明所有贴片都是独立可解码的以及用信号表明可以对于每个ROI具有多于一个贴片的ROI的功能。通过这一扩展，实现了基于用户或导演交互性在贴片层级重新定义已编码视频流(CVS)中的任何独立可解码感兴趣区段的功能。导演是控制内容和/或能够修改内容(例如根据其被发送到的用户组来修改内容)的人。所述扩展支持利用在多种应用中的交互性，比如交互式超高清晰度电视(UHDTV)、动态高质量焦距拉近应用、交互式点播、电子学习、智能监控以及许多其他应用。
ROI被定义成一个或多个贴片的并集。这里所描述的扩展被用来对于单层视频或者具有基本层和至少一个增强层的视频基于用户或导演通过交互方式用信号表明ROI。存在增强层中的ROI到基本层中的ROI的映射。还存在基本层中的ROI到增强层中的ROI的映射。
在后面的情况中，这里所描述的扩展对于具有空间可伸缩性和/或信噪比(SNR)可伸缩性的多层视频用信号表明运动约束贴片集合。具有这里所描述的扩展的运动约束贴片集合被应用于增强层(例如增强层中的每一个贴片可以独立于增强层中的其他贴片被解码)。基本层和增强层都具有运动约束贴片集合。基本层中的每一个贴片是独立可解码的。增强层中的每一个贴片可以独立于增强层中的其他贴片被解码。增强层中的贴片可以取决于基本层中的一个或多个贴片。在解码处理中，存在增强层中的ROI到基本层中的ROI的映射。在解码处理中，存在基本层中的ROI到增强层中的ROI的映射。
图1示出了根据一些实施例的贴片式流送的图示。用户能够通过交互方式选择ROI。在用户选择了ROI之后，所选的ROI被呈现在设备(例如电视、智能电话、平板设备)上。由于不同的用户可能想要不同的ROI，因此所有贴片都是独立可解码的。很重要的是通过避免CTU层级转码来降低为所有用户服务的复杂度。在图1中，在服务器侧，全景视频通过独立可解码的贴片被编码在多个分辨率层中。服务器侧的其中一个分辨率层是8K乘4K。不同的观看者能够请求服务器发送来自全景视频的不同分辨率层的不同ROI。在图1中，一个客户端请求在该客户端的HD移动设备上观看来自其中一个分辨率层的某一区段。另一个客户端请求在该客户端的4K电视上观看来自相同分辨率层的不同区段。一般来说，客户端能够选择性地在几种空间分辨率的其中一种空间分辨率下观看任何ROI。图1示出了其中一个分辨率层处的用户与服务器的交互性。
贴片式流送有几项属性。所有贴片都是独立可解码的(运动约束贴片)。ROI不一定是在CVS的编码时间的开头确定的。一旦ROI被编码在CVS中，就能够基于用户交互性对其进行修改或重新定义而无需在CTU层级对CVS进行重新编码。
运动约束贴片集合(MCTS)SEI能够被用来用信号表明独立可解码的ROI的位置。但是一般来说，MCTS SEI无法同时用信号表明以下各项：所有贴片都是独立可解码的，以及ROI的位置。这里所描述的扩展允许MCTS支持所有贴片都是独立可解码的以及用信号表明ROI的位置。
表1示出了具有所述扩展的MCTS句法
all_tiles_exact_sample_value_match_flag类似于用于运动约束贴片集合的exact_sample_value_match_flag的定义，但是适用于每一个贴片。all_tiles_exact_sample_value_match_flag等于0表明在已编码视频序列内，当处在运动约束贴片集合之外的编码树块未被解码并且运动约束贴片集合的边界被作为画面边界对待以用于解码处理的目的时，运动约束贴片集合中的每一个样本的值与当所述画面的所有编码树块都被解码时的相同样本的值可能并不完全相同。all_tiles_exact_sample_value_match_flag等于1表明在已编码视频序列内，当不属于运动约束贴片集合的编码树块未被解码并且运动约束贴片集合的边界被作为画面边界对待以用于解码处理的目的时，运动约束贴片集合中的每一个样本的值将与当已编码视频序列中的所有画面的所有编码树块都被解码时所获得的所述样本的值完全相同。one_tile_per_tile_set_flag等于1表明每一个贴片形成一个贴片集合。
类似于运动约束贴片集合SEI消息的扩展还能够被应用于JCTVC-N0087中的层间约束贴片集合(ILCTS)。具体来说，用于间层的JCTVC-N0087的句法不具有在每一个贴片都是贴片集合时用信号表明ROI的能力，并且其如在表2中被扩展。
层间约束贴片集合
表2示出了经过修改的层间句法
层间约束贴片集合SEI消息的范围是其nuh_layer_id等于targetLayerId的该层的完整CLVS。当层间贴片集合SEI消息对于CLVS的任何已编码画面都存在并且按照解码顺序的CLVS的第一幅已编码画面是IRAP画面时，层间贴片集合SEI消息应当对于按照解码顺序的CLVS的第一幅已编码画面是存在的，并且对于CLVS的其他已编码画面也可以是存在的。
当tiles_enabled_flag对于该层的任何活跃PPS等于0时，层间约束贴片集合SEI消息对于其nuh_layer_id等于targetLayerId的该层将不存在。
除非对于其nuh_layer_id等于targetLayerId的该层的CLVS的各幅画面活跃的每一个PPS都具有等于1的tile_boundaries_aligned_flag或者满足将由tile_boundaries_aligned_flag等于1所表明的条件，否则层间约束贴片集合SEI消息对于其nuh_layer_id等于targetLayerId的该层将不存在。
所识别出的贴片集合被定义成其nuh_layer_id为targetLayerId的画面内的贴片集合，其包含在后面基于包含在层间约束贴片集合SEI消息中的句法元素的值而指定的贴片。
如果存在的话，则对应于其ilcts_id[iPred]等于ilctsId的第iPred个识别出的贴片集合的相关联的参考贴片集合被定义成与第iPred个识别出的贴片集合存在于相同访问单元中的所识别出的贴片集合，并且对于处在0到NumDirectRefLayers[targetLayerId]-1(包含边界值)范围内的j的任何值与等于ilctsId的ilcts_id[iRef]和等于RefLayerId[targetLayerId][j]的nuh_layer_id相关联。
层间约束贴片集合SEI消息的存在表明层间预测处理受到约束，从而使得对于所识别出的贴片集合内的任何样本的层间预测不使用处于每一个相关联的参考贴片集合之外的样本值，并且不使用利用处于每一个相关联的参考贴片集合之外的一个或多个样本值导出的分数样本位置处的样本值。
当跨越贴片边界应用环路滤波和重采样滤波器时，对于参考从并不同时是画面边界的相关联的参考贴片集合边界算起处于8个样本内的样本的所识别出的贴片集合内的任何样本的层间预测可能会导致失配错误的传播。编码器可以通过避免使用导致这样的参考的运动矢量来避免这样的潜在的错误传播。
当对于CLVS存在多于一条层间约束贴片集合SEI消息时，其应包含完全相同的内容。
用于每一个访问单元内的相同CLVS的层间约束贴片集合SEI消息的数目不应超出5条。
il_all_tiles_exact_sample_value_match_flag等于1表明在该CLVS内，当处在该层间约束贴片集合SEI消息中所指定的任何识别出的贴片集合中的任何贴片之外的编码树块未被解码并且所述贴片的边界被作为画面边界对待以用于解码处理的目的时，所述贴片中的每一个样本的值将与当所述CLVS中的所有画面的所有编码树块都被解码时所将获得的所述样本的值完全相同。il_all_tiles_exact_sample_value_match_flag等于0表明在该CLVS内，当处在该层间约束贴片集合SEI消息中所指定的任何识别出的贴片集合中的任何贴片之外的编码树块未被解码并且所述贴片的边界被作为画面边界对待以用于解码处理的目的时，所述贴片中的每一个样本的值可能与当所述CLVS中的所有画面的所有编码树块都被解码时的相同样本的值完全相同或者可能不与当所述CLVS中的所有画面的所有编码树块都被解码时的相同样本的值完全相同。
il_one_tile_per_tile_set_flag等于1表明每一个识别出的贴片集合包含一个贴片，并且il_num_sets_in_message_minus1不存在。当il_one_tile_per_tile_set_flag等于1时，以下各项适用：
-(num_tile_columns_minus1+1)*(num_tile_rows_minus1+1)应小于或等于256。
-在0到(num_tile_columns_minus1+1)*(num_tile_rows_minus1+1)-1(包含边界值)的范围内用于按照贴片光栅扫描顺序的第i个贴片的ilcts_id[i]的值被推断为等于256+i。
当il_one_tile_per_tile_set_flag等于0时，明确地用信号表明所识别出的贴片集合。
il_num_sets_in_message_minus1加1指定SEI消息中的层间识别出的贴片集合的数目。il_num_sets_in_message_minus1的值应处在0到255的范围内(包含边界值)。
skipped_tile_set_present_flag等于1表明在该CLVS内，第il_num_sets_in_message_minus1个识别出的贴片集合由未被包括在相同的信息中的任何早前识别出的贴片集合中的那些剩余的贴片构成，并且处在第il_num_sets_in_message_minus1个识别出的贴片集合内部的所有预测块都是从其nuh_layer_id等于RefLayerId[targetLayerId][NumDirectRefLayers[targetLayerId]-1]的层间参考画面预测的，并且在第il_num_sets_in_message_minus1个识别出的贴片集合的任何变换单元中不存在residual_coding()句法结构。skipped_tile_set_present_flag等于0不表明CLVS内的比特流约束。当不存在时，skipped_tile_set_present_flag的值被推断为等于0。
ilcts_id[i]包含标识号，其可以被用来标识第i个识别出的贴片集合的目的(例如用来标识将从已编码视频序列中提取出来以用于特定目的的区域)。ilcts_id[i]的值应处在0到232-2的范围内(包含边界值)。
可以由应用确定使用从0到255(包含边界值)以及从512到231-1(包含边界值)的ilcts_id[i]的值。如果il_one_tile_per_tile_set_flag等于1，则对于前面所指定的所推断出的ilcts_id[i]值使用从256到511(包含边界值)的ilcts_id[i]的值。否则，从256到511(包含边界值)的ilcts_id[i]的值被保留用于ITU-T|ISO/IEC的未来使用。从231到232-2(包含边界值)的ilcts_id[i]的值被保留用于ITU-T|ISO/IEC的未来使用。遇到处在256到511的范围内(包含边界值)或者处在231到232-2的范围内(包含边界值)的所表明的ilcts_id[i]的值的解码器应当将其忽略(从比特流中去除并且丢弃)。
il_num_tile_rects_in_set_minus1[i]加1指定第i个识别出的贴片集合中的矩形贴片区段的数目。il_num_tile_rects_in_set_minus1[i]的值应当处在0到(num_tile_columns_minus1+1)*(num_tile_rows_minus1+1)-1的范围内(包含边界值)。
il_top_left_tile_index[i][j]和il_bottom_right_tile_index[i][j]分别按照贴片光栅扫描顺序标识第i个识别出的贴片集合的矩形区段中的左上贴片的贴片位置和右下贴片的贴片位置。
ilc_idc[i]等于1表明对于其内的任何样本的层间预测不使用处于任何相关联的参考贴片集合之外的样本，并且不使用利用处于任何相关联的参考贴片集合之外的一个或多个样本导出的分数样本位置处的样本。ilc_idc[i]等于2表明不从层间参考画面预测第i个识别出的贴片集合中的预测块。ilc_idc[i]等于0表明对于第i个识别出的贴片集合中的预测块可以约束层间预测处理或者可以不约束层间预测处理。ilc_idc[i]等于3的值被保留。
il_exact_sample_value_match_flag[i]等于1表明在该CLVS内，当不属于第i个识别出的贴片集合的编码树块未被解码并且第i个识别出的贴片集合的边界被作为画面边界对待以用于解码处理的目的时，第i个识别出的贴片集合中的每一个样本的值将与当所述CLVS中的所有画面的所有编码树块都被解码时所将获得的所述样本的值完全相同。il_exact_sample_value_match_flag[i]等于0表明在该CLVS内，当处在第i个识别出的层间约束贴片集合之外的编码树块未被解码并且第i个识别出的贴片集合的边界被作为画面边界对待以用于解码处理的目的时，第i个识别出的贴片集合中的每一个样本的值可能与当所述CLVS中的所有画面的所有编码树块都被解码时的相同样本的值完全相同或者可能不与当所述CLVS中的所有画面的所有编码树块都被解码时的相同样本的值完全相同。
在使用以下各项的特定组合时，使用il_exact_sample_value_match_flag等于1是可行的：loop_filter_across_tiles_enabled_flag，pps_loop_filter_across_slices_enabled_flag，pps_deblocking_filter_disabled_flag，slice_loop_filter_across_slices_enabled_flag，slice_deblocking_filter_disabled_flag，sample_adaptive_offset_enabled_flag，slice_sao_luma_flag，以及slice_sao_chroma_flag。
all_tiles_ilc_idc等于1表明对于该CLVS内的每一个识别出的贴片集合，对于所识别出的贴片集合内的任何样本的层间预测不使用处于每一个相关联的参考贴片集合之外的样本值，并且不使用利用处于每一个相关联的参考贴片集合之外的一个或多个样本导出的分数样本位置处的样本值。all_tiles_ilc_idc等于2表明在该CLVS内，不从层间参考画面预测每一个识别出的贴片集合中的预测块。all_tiles_ilc_idc等于0表明在该CLVS内，对于所识别出的贴片集合可以约束层间预测处理或者可以不约束层间预测处理。all_tiles_ilc_idc等于3的值被保留。当all_tiles_ilc_idc不存在时，其被推断为等于0。
时间运动约束贴片集合(时间MCTS)
JCTVC-O1005中的时间运动约束贴片集合(时间MCTS)SEI消息能够被扩展，以便用信号表明处于ROI之外的编码树块不应当被显示。通过这一扩展，时间运动约束贴片集合SEI消息能够被编码器用于贴片式流送，从而明确地用信号向解码器表明解码器只需要显示ROI。时间MCTS SEI消息能够被用于贴片流送。对于贴片式流送的实例，全景视频在服务器侧通过独立可解码的贴片被编码，仅有所述贴片的一个子集被客户端解码器请求作为灰色贴片(或者能够被非常高效地编码的贴片，比如低比特率内容)旁边的ROI，并且用信号向解码器表明不要显示灰色贴片(或者被高效地编码的贴片)。
当解码器接收到用信号表明不要显示ROI之外的区域的经过修改的时间MCTS SEI消息时，解码器能够选择：1)不显示ROI之外的区域，2)用预定的颜色替换ROI之外的区域。所述颜色能够被用于色度键控(chroma keying)以用于与其他内容一起显示。
图2示出了在服务器侧通过独立可解码的贴片编码的全景视频，仅有所述贴片的一个子集被客户端解码器请求作为ROI以用于显示的目的。为了减小传送带宽，服务器能够用灰色贴片替换处于ROI之外的贴片，并且用信号向解码器表明不要显示灰色贴片。此外，不同的客户端能够请求从服务器流送不同的ROI。
能够通过若干方式来修改时间MCTS SEI消息。这里将描述几个可能的实施例。在一些实施例中，在比特流中用信号表明是否显示处于ROI之外的编码树块。
表3示出了时间运动约束贴片集合函数的经过修改的句法
Display_tile_sets_only_flag等于1表明应当显示所有贴片集合中的所有编码树块，并且不应当显示不处在任何贴片集合中的所有编码树块。Display_tile_sets_only_flag等于0表明该标志应当被忽略。
表4示出了时间运动约束贴片集合函数的经过修改的句法
no_display_outside_tile_sets_flag等于1表明不应当显示不处在任何贴片集合中的所有编码树块。no_display_outside_tile_sets_flag等于0表明该标志应当被忽略。
在一些实施例中，temporal_motion_constrained_tile_sets和inter_layer_constrained_tile_sets的句法是对准的。具体来说，no_display_last_tile_set_flag扮演与inter_layer_constrained_tile_setsSEI消息中的skipped_tile_set_present_flag并行的角色。
表5示出了时间运动约束贴片集合函数的经过修改的句法
no_display_last_tile_set_flag等于1表明最后一个贴片集合包括未被包括在相同消息中的任何早前的贴片集合中的那些贴片，并且不应当显示最后一个贴片集合。no_display_last_tile_set_flag等于0表明最后一个贴片集合可以包括未被包括在相同消息中的任何早前的贴片集合中的那些贴片或者可以不包括未被包括在相同消息中的任何早前的贴片集合中的那些贴片。
在一些实施例中，仅显示单个贴片集合。
表6示出了时间运动约束贴片集合函数的经过修改的句法
single_tile_set_display_flag等于1表明display_tile_set_idc句法元素存在。single_tile_set_display_flag等于0表明display_tile_set_idc句法元素不存在。
当display_tile_set_idc存在时，其表明仅有第display_tile_set_idc个贴片集合意图被显示。display_tile_set_idc应处在0到num_sets_in_message_minus1的范围内。
表7示出了时间运动约束贴片集合函数的经过修改的句法
limited_tile_set_display标志等于1表明display_tile_set_flag[i]句法元素存在，并且表明未被包括在其display_tile_set_flag[i]等于1的任何贴片集合内的贴片不意图被显示。limited_tile_set_display标志等于0表明display_tile_set_flag[i]句法元素不存在。display_tile_set_flag[i]等于1表明第i个贴片集合意图被显示。display_tile_set_flag[i]等于0表明第i个贴片集合不意图被显示。当display_tile_set_flag[i]不存在时，其值被推断为等于1。
图3示出了根据一些实施例的贴片式流送方法的流程图。在步骤300中，从一个设备(例如服务器)向第二设备(例如电视)传送视频比特流。所述视频比特流包括具有这里所描述的带有扩展的SEI消息。SEI消息能够用信号表明所有贴片都可以独立于其他贴片被解码。在步骤302中，对视频比特流进行解码。在步骤304中，显示已解码视频。在步骤306中，用户选择视频的ROI以用于交互性目的。在步骤308中，向用户呈现所选择的ROI。在一些实施例中，实施更少的或者附加的步骤。在一些实施例中，各个步骤的顺序被修改。
图4示出了根据一些实施例的贴片式流送方法的流程图。在步骤400中，在MCTSSEI消息中用信号表明ROI的位置。在步骤402中，在视频解码处理中把基本层中的ROI映射到增强层中的ROI。在步骤404中，增强层中的每一个贴片独立于增强层的MCTS中的其他贴片被解码。在一些实施例中，实施更少的或附加的步骤。
图5示出了根据一些实施例的贴片式流送方法的流程图。在步骤500中，用信号向解码器表明哪些ROI将不被显示。在步骤502中，用信号向解码器表明哪些ROI将被显示(例如由用户选择的ROI)。在步骤504中，用灰色贴片替换处于将被显示的ROI之外的贴片，以便减少带宽。在步骤506中，生成SEI消息以便用信号表明处于时间运动约束贴片集合之外的编码树块的位置。在一些实施例中，实施更少的或附加的步骤。在一些实施例中，图3、4和5的步骤能够被一起实施。举例来说，虽然在图5中示出了步骤500，但是步骤500能够与图3中的步骤一起实施。
图6示出了被配置成实施根据一些实施例的贴片式流送方法的示例性计算设备的方框图。计算设备600能够被用来采集、存储、计算、处理、传送和/或显示例如图像和/或视频之类的信息。一般来说，适合于实施计算设备600的硬件结构包括网络接口602、存储器604、处理器606、(多个)I/O设备608、总线610以及存储设备612。只要选择了具有足够速度的适当的处理器，关于处理器的选择并非至关重要的。存储器604能够是本领域内已知的任何传统的计算机存储器。存储设备612能够包括硬盘驱动器、CDROM、CDRW、DVD、DVDRW、高清晰度盘/驱动器、超高清晰度驱动器、闪存卡或者任何其他存储设备。计算设备600能够包括一个或多个网络接口602。网络接口的一个实例包括连接到以太网或者其他类型的LAN的网卡。(多个)I/O设备608能够包括以下各项当中的一项或多项：键盘、鼠标、监视器、屏幕、打印机、调制解调器、触摸屏、按钮接口以及其他设备。被用来实施所述贴片式流送方法的(多个)贴片式流送应用630可能被存储在存储设备612和存储器604中，并且按照应用通常被处理的那样被处理。在计算设备600中能够包括比图6中所示出的更多或更少的组件。在一些实施例中包括贴片式流送硬件620。虽然图6中的计算设备600包括用于所述贴片式流送方法的应用630和硬件620，但是所述贴片式流送方法能够通过硬件、固件、软件或者其任意组合而被实施在计算设备上。举例来说，在一些实施例中，贴片式流送应用630被编程在存储器中并且利用处理器被执行。在另一个实例中，在一些实施例中，贴片式流送硬件620是专门被设计成实施所述贴片式流送方法的包括门的已编程硬件逻辑。
在一些实施例中，(多个)贴片式流送应用630包括几个应用和/或模块。在一些实施例中，模块还包括一个或多个子模块。在一些实施例中，能够包括更少的或者附加的模块。
适当的计算设备的实例包括个人计算机、膝上型计算机、计算机工作站、服务器、大型计算机、手持式计算机、个人数字助理、蜂窝/移动电话、智能电器、游戏主机、数字摄影机、数字摄录一体机、摄影机电话、智能电话、便携式音乐播放器、平板计算机、移动设备、视频播放器、视频盘写入器/播放器(例如DVD写入器/播放器、高清晰度盘写入器/播放器、超高清晰度盘写入器/播放器)、电视、家庭娱乐系统、智能首饰(例如智能手表)或者任何其他适当的计算设备。
为了利用所述贴片式流送方法，例如数字视频摄影机之类的设备能够被用来采集视频。在采集视频期间或之后(比如在视频重放期间)自动实施所述贴片式流送方法。所述贴片式流送方法能够在没有用户介入的情况下被自动实施。
在操作中，所述贴片式流送方法允许用户通过交互方式选择图像/视频的某些部分。所述扩展支持利用在多种应用中的交互性，比如交互式超高清晰度电视(UHDTV)、动态高质量焦距拉近应用、交互式点播、电子学习、智能监控以及许多其他应用。
用于交互性的运动约束贴片集合SEI消息的扩展的一些实施例
1、一种编程在设备的非瞬时性存储器中的方法，包括：
a、接收视频的比特流，其中所述比特流包括补充增强信息消息，并且其中所述补充信息消息用信号表明所有贴片都是独立可解码的并且各个感兴趣区段能够对于每个感兴趣区段具有多于一个贴片；以及
b、在所述设备上解码所述比特流。
2、第1条的方法，其中，视频的基本层中的所有贴片都是独立可解码的。
3、第1条的方法，其中，视频的增强层中的所有贴片都是独立可解码的。
4、第1条的方法，其中，解码包括提供增强层中的感兴趣区段到基本层中的该感兴趣区段的映射。
5、第1条的方法，其中，解码包括提供基本层中的感兴趣区段到增强层中的该感兴趣区段的映射。
6、第1条的方法，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。
7、第1条的方法，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。
8、第1条的方法，其中，视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。
9、第1条的方法，其中，视频通过独立可解码的贴片被编码在一个或多个分辨率层中，并且被存储在服务器上。
10、第1条的方法，其中，不同的用户请求视频的不同分辨率层。
11、第1条的方法，其中，不同的导演请求视频的不同分辨率层。
12、第1条的方法，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块不被显示。
13、第1条的方法，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块被编码成灰色贴片以降低比特率。
14、一种系统，包括：
a、被配置成存储应用的非瞬时性存储器，所述应用被配置成：
i、接收视频的比特流，其中所述比特流包括补充增强信息消息，并且其中所述补充信息消息用信号表明所有贴片都是独立可解码的并且各个感兴趣区段能够对于每个感兴趣区段具有多于一个贴片；以及
ii、解码所述比特流；以及
b、被配置成显示已解码比特流的显示器。
15、第14条的系统，其中，视频的基本层中的所有贴片都是独立可解码的。
16、第14条的系统，其中，视频的增强层中的所有贴片都是独立可解码的。
17、第14条的系统，其中，解码包括提供增强层中的感兴趣区段到基本层中的该感兴趣区段的映射。
18、第14条的系统，其中，解码包括提供基本层中的感兴趣区段到增强层中的该感兴趣区段的映射。
19、第14条的系统，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。
20、第14条的系统，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。
21、第14条的系统，其中，视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。
22、第14条的系统，其中，视频通过独立可解码的贴片被编码在一个或多个分辨率层中，并且被存储在服务器上。
23、第14条的系统，其中，不同的用户请求视频的不同分辨率层。
24、第14条的系统，其中，不同的导演请求视频的不同分辨率层。
25、第14条的系统，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块不被显示。
26、第14条的系统，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块被编码成灰色贴片以降低比特率。
27、一种装置，包括：
a、用于存储应用的非瞬时性存储器，所述应用用于：
i、接收视频的比特流，其中所述比特流包括补充增强信息消息，并且其中所述补充信息消息用信号表明所有贴片都是独立可解码的并且各个感兴趣区段能够对于每个感兴趣区段具有多于一个贴片；以及
ii、解码所述比特流；以及
b、耦合到存储器的处理组件，所述处理组件被配置成处理所述应用。
28、第27条的装置，其中，视频的基本层中的所有贴片都是独立可解码的。
29、第27条的装置，其中，视频的增强层中的所有贴片都是独立可解码的。
30、第27条的装置，其中，解码包括提供增强层中的感兴趣区段到基本层中的该感兴趣区段的映射。
31、第27条的装置，其中，解码包括提供基本层中的感兴趣区段到增强层中的该感兴趣区段的映射。
32、第27条的装置，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。
33、第27条的装置，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。
34、第27条的装置，其中，视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。
35、第27条的装置，其中，视频通过独立可解码的贴片被编码在一个或多个分辨率层中，并且被存储在服务器上。
36、第27条的装置，其中，不同的用户请求视频的不同分辨率层。
37、第27条的装置，其中，不同的导演请求视频的不同分辨率层。
38、第27条的装置，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块不被显示。
39、第27条的装置，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块被编码成灰色贴片以降低比特率。
40、一种编程在设备的非瞬时性存储器中的方法，包括：
a、接收具有基本层以及一个或多个增强层的视频的比特流，其中所述比特流包括增强层的补充增强信息消息，并且其中所述补充信息消息与层间约束贴片集合一起被利用，其可以用信号表明所有贴片都可以独立于该层中的任何其他贴片被解码并且各个感兴趣区段对于该层中的每个感兴趣区段具有多于一个贴片；以及
b、在所述设备上解码所述比特流。
41、第40条的方法，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。
42、第40条的方法，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。
43、第40条的方法，其中，视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。
44、第40条的方法，其中，不同的用户请求视频的不同分辨率层。
45、第40条的方法，其中，不同的导演请求视频的不同分辨率层。
46、一种系统，包括：
a、被配置成存储应用的非瞬时性存储器，所述应用被配置成：
i、接收具有基本层以及一个或多个增强层的视频的比特流，其中所述比特流包括增强层的补充增强信息消息，并且其中所述补充信息消息与层间约束贴片集合一起被利用，其可以用信号表明所有贴片都可以独立于该层中的任何其他贴片被解码并且各个感兴趣区段对于该层中的每个感兴趣区段具有多于一个贴片；以及
ii、解码所述比特流；以及
b、被配置成显示已解码比特流的显示器。
47、第46条的系统，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。
48、第46条的系统，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。
49、第46条的系统，其中，视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。
50、第46条的系统，其中，不同的用户请求视频的不同分辨率层。
51、第46条的系统，其中，不同的导演请求视频的不同分辨率层。
52、一种装置，包括：
a、用于存储应用的非瞬时性存储器，所述应用用于：
i、接收具有基本层以及一个或多个增强层的视频的比特流，其中所述比特流包括增强层的补充增强信息消息，并且其中所述补充信息消息与层间约束贴片集合一起被利用，其可以用信号表明所有贴片都可以独立于该层中的任何其他贴片被解码并且各个感兴趣区段对于该层中的每个感兴趣区段具有多于一个贴片；以及
ii、解码所述比特流；以及
b、耦合到存储器的处理组件，所述处理组件被配置成处理所述应用。
53、第52条的系统，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。
54、第52条的系统，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。
55、第52条的系统，其中，视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。
56、第52条的系统，其中，不同的用户请求视频的不同分辨率层。
57、第52条的系统，其中，不同的导演请求视频的不同分辨率层。
前面通过合并有细节的具体实施例描述了本发明，以便于理解本发明的构造和操作的原理。在这里提到具体实施例及其细节时不意图限制所附权利要求书的范围。本领域技术人员将很容易认识到，在不背离由权利要求书限定的本发明的精神和范围的情况下，可以在被选择用于说明的实施例中做出其他多种修改。

Claims (39)

1.一种编程在设备的非瞬时性存储器中的方法，包括：
a、接收视频的比特流，其中所述比特流包括补充增强信息消息，并且其中包括在所述补充增强信息消息中的标志的值用信号表明所有贴片都是独立可解码的并且各个感兴趣区段中的每个感兴趣区段能够具有多于一个贴片；以及
b、在所述设备上解码所述比特流，
其中在所述设备上解码所述比特流包括，基于表明当运动约束贴片集合的所有贴片的边界被作为画面边界对待以用于解码处理的目的并且当不属于运动约束贴片集合的任何贴片的编码树块未被解码时，运动约束贴片集合中的每一个样本的值是否与当画面的所有编码树块都被解码时所获得的所述样本的值完全相同的信息，来解码所述比特流以生成图像。
2.根据权利要求1所述的方法，其中，视频的基本层中的所有贴片都是独立可解码的。
3.根据权利要求1所述的方法，其中，视频的增强层中的所有贴片都是独立可解码的。
4.根据权利要求1所述的方法，其中，解码包括提供增强层中的感兴趣区段到基本层中的该感兴趣区段的映射。
5.根据权利要求1所述的方法，其中，解码包括提供基本层中的感兴趣区段到增强层中的该感兴趣区段的映射。
6.根据权利要求1所述的方法，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述设备上。
7.根据权利要求1所述的方法，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。
8.根据权利要求1所述的方法，其中，视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。
9.根据权利要求1所述的方法，其中，视频通过独立可解码的贴片被编码在一个或多个分辨率层中，并且被存储在服务器上。
10.根据权利要求1所述的方法，其中，不同的用户请求视频的不同分辨率层。
11.根据权利要求1所述的方法，其中，不同的导演请求视频的不同分辨率层。
12.根据权利要求1所述的方法，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块不被显示。
13.根据权利要求1所述的方法，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块被编码成灰色贴片以降低比特率。
14.一种用于解码比特流的系统，包括：
a、被配置成存储应用的非瞬时性存储器，所述应用被配置成：
i、接收视频的比特流，其中所述比特流包括补充增强信息消息，并且其中包括在所述补充增强信息消息中的标志的值用信号表明所有贴片都是独立可解码的并且各个感兴趣区段中的每个感兴趣区段能够具有多于一个贴片；以及
ii、解码所述比特流；以及
b、被配置成显示已解码比特流的显示器，
其中解码所述比特流包括，基于表明当运动约束贴片集合的所有贴片的边界被作为画面边界对待以用于解码处理的目的并且当不属于运动约束贴片集合的任何贴片的编码树块未被解码时，运动约束贴片集合中的每一个样本的值是否与当画面的所有编码树块都被解码时所获得的所述样本的值完全相同的信息，来解码所述比特流以生成图像。
15.根据权利要求14所述的系统，其中，视频的基本层中的所有贴片都是独立可解码的。
16.根据权利要求14所述的系统，其中，视频的增强层中的所有贴片都是独立可解码的。
17.根据权利要求14所述的系统，其中，解码包括提供增强层中的感兴趣区段到基本层中的该感兴趣区段的映射。
18.根据权利要求14所述的系统，其中，解码包括提供基本层中的感兴趣区段到增强层中的该感兴趣区段的映射。
19.根据权利要求14所述的系统，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述显示器上。
20.根据权利要求14所述的系统，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。
21.根据权利要求14所述的系统，其中，视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。
22.根据权利要求14所述的系统，其中，视频通过独立可解码的贴片被编码在一个或多个分辨率层中，并且被存储在服务器上。
23.根据权利要求14所述的系统，其中，不同的用户请求视频的不同分辨率层。
24.根据权利要求14所述的系统，其中，不同的导演请求视频的不同分辨率层。
25.根据权利要求14所述的系统，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块不被显示。
26.根据权利要求14所述的系统，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块被编码成灰色贴片以降低比特率。
27.一种用于解码比特流的装置，包括：
a、用于存储应用的非瞬时性存储器，所述应用用于：
i、接收视频的比特流，其中所述比特流包括补充增强信息消息，并且其中包括在所述补充增强信息消息中的标志的值用信号表明所有贴片都是独立可解码的并且各个感兴趣区段中的每个感兴趣区段能够具有多于一个贴片；以及
ii、解码所述比特流；以及
b、耦合到存储器的处理组件，所述处理组件被配置成处理所述应用，
其中解码所述比特流包括，基于表明当运动约束贴片集合的所有贴片的边界被作为画面边界对待以用于解码处理的目的并且当不属于运动约束贴片集合的任何贴片的编码树块未被解码时，运动约束贴片集合中的每一个样本的值是否与当画面的所有编码树块都被解码时所获得的所述样本的值完全相同的信息，来解码所述比特流以生成图像。
28.根据权利要求27所述的装置，其中，视频的基本层中的所有贴片都是独立可解码的。
29.根据权利要求27所述的装置，其中，视频的增强层中的所有贴片都是独立可解码的。
30.根据权利要求27所述的装置，其中，解码包括提供增强层中的感兴趣区段到基本层中的该感兴趣区段的映射。
31.根据权利要求27所述的装置，其中，解码包括提供基本层中的感兴趣区段到增强层中的该感兴趣区段的映射。
32.根据权利要求27所述的装置，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在所述装置上。
33.根据权利要求27所述的装置，其中，视频的感兴趣区段由用户选择，其中由用户选择的感兴趣区段被呈现在第二设备上。
34.根据权利要求27所述的装置，其中，视频的感兴趣区段由导演选择，其中由导演选择的感兴趣区段被呈现在用户的设备上。
35.根据权利要求27所述的装置，其中，视频通过独立可解码的贴片被编码在一个或多个分辨率层中，并且被存储在服务器上。
36.根据权利要求27所述的装置，其中，不同的用户请求视频的不同分辨率层。
37.根据权利要求27所述的装置，其中，不同的导演请求视频的不同分辨率层。
38.根据权利要求27所述的装置，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块不被显示。
39.根据权利要求27所述的装置，其中，补充增强信息消息表明处于所选感兴趣区段之外的编码树块，其中处于所选感兴趣区段之外的编码树块被编码成灰色贴片以降低比特率。
CN201480038849.6A 2013-07-15 2014-07-15 用于交互性的运动约束贴片集合sei消息的扩展 Active CN105359512B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910195676.3A CN109862373B (zh) 2013-07-15 2014-07-15 用于对比特流进行编码的方法和装置

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201361846555P 2013-07-15 2013-07-15
US61/846,555 2013-07-15
US201361859347P 2013-07-29 2013-07-29
US61/859,347 2013-07-29
US201461923351P 2014-01-03 2014-01-03
US61/923,351 2014-01-03
US201461928107P 2014-01-16 2014-01-16
US61/928,107 2014-01-16
PCT/US2014/046624 WO2015009676A1 (en) 2013-07-15 2014-07-15 Extensions of motion-constrained tile sets sei message for interactivity

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910195676.3A Division CN109862373B (zh) 2013-07-15 2014-07-15 用于对比特流进行编码的方法和装置

Publications (2)

Publication Number Publication Date
CN105359512A CN105359512A (zh) 2016-02-24
CN105359512B true CN105359512B (zh) 2019-05-28

Family

ID=52277076

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201480038849.6A Active CN105359512B (zh) 2013-07-15 2014-07-15 用于交互性的运动约束贴片集合sei消息的扩展
CN201910195676.3A Active CN109862373B (zh) 2013-07-15 2014-07-15 用于对比特流进行编码的方法和装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201910195676.3A Active CN109862373B (zh) 2013-07-15 2014-07-15 用于对比特流进行编码的方法和装置

Country Status (6)

Country Link
US (3) US10368078B2 (zh)
EP (1) EP3008896B1 (zh)
JP (4) JP6150011B2 (zh)
KR (4) KR102107270B1 (zh)
CN (2) CN105359512B (zh)
WO (1) WO2015009676A1 (zh)

Families Citing this family (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
PL2744202T3 (pl) * 2011-08-11 2020-12-28 Sun Patent Trust Sposób kodowania obrazów, sposób dekodowania obrazów, urządzenie do kodowania obrazów, urządzenie do dekodowania obrazów oraz urządzenie do kodowania/dekodowania obrazów
CN108650514A (zh) * 2013-07-14 2018-10-12 夏普株式会社 瓦片对齐信令和一致性约束
US9992501B2 (en) 2013-09-10 2018-06-05 Kt Corporation Method and apparatus for encoding/decoding scalable video signal
CN105723712B (zh) * 2013-10-14 2019-06-28 韩国电子通信研究院 基于多层的图像编码/解码方法和设备
US20150264368A1 (en) * 2014-03-14 2015-09-17 Sony Corporation Method to bypass re-sampling process in shvc with bit-depth and 1x scalability
US20150373341A1 (en) * 2014-06-23 2015-12-24 Cisco Technology, Inc. Techniques for Interactive Region-Based Scalability
CN107409203A (zh) * 2015-05-27 2017-11-28 谷歌公司 减小用户头戴式耳机的球形视频带宽的方法和设备
JP6642573B2 (ja) 2015-06-24 2020-02-05 ソニー株式会社 符号化装置、復号装置及び伝送制御方法
FI20165114A (fi) 2016-02-17 2017-08-18 Nokia Technologies Oy Laitteisto, menetelmä ja tietokoneohjelma videokoodausta ja videokoodauksen purkua varten
EP3223524A1 (en) 2016-03-22 2017-09-27 Thomson Licensing Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices
EP3226561A1 (en) * 2016-03-31 2017-10-04 Thomson Licensing Method and apparatus for coding a video into a bitstream carrying region-based post processing parameters into an sei nesting message
WO2017196670A1 (en) 2016-05-13 2017-11-16 Vid Scale, Inc. Bit depth remapping based on viewing parameters
US10582201B2 (en) * 2016-05-19 2020-03-03 Qualcomm Incorporated Most-interested region in an image
EP3249928A1 (en) * 2016-05-23 2017-11-29 Thomson Licensing Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices
US10565463B2 (en) * 2016-05-24 2020-02-18 Qualcomm Incorporated Advanced signaling of a most-interested region in an image
US10841566B2 (en) * 2016-05-26 2020-11-17 Vid Scale, Inc. Methods and apparatus of viewport adaptive 360 degree video delivery
EP4336850A3 (en) * 2016-07-08 2024-04-17 InterDigital Madison Patent Holdings, SAS Systems and methods for region-of-interest tone remapping
US10931980B2 (en) * 2016-07-19 2021-02-23 Electronics And Telecommunications Research Institute Method and apparatus for providing 360 degree virtual reality broadcasting service
US10771791B2 (en) * 2016-08-08 2020-09-08 Mediatek Inc. View-independent decoding for omnidirectional video
CN107770525B (zh) * 2016-08-15 2020-07-24 华为技术有限公司 一种图像编码的方法及装置
US10917564B2 (en) * 2016-10-12 2021-02-09 Qualcomm Incorporated Systems and methods of generating and processing files for partial decoding and most interested regions
WO2018083378A1 (en) * 2016-11-01 2018-05-11 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
CN112738530B (zh) * 2016-11-17 2024-02-23 英特尔公司 全景视频的建议视口指示
US10652553B2 (en) * 2016-12-07 2020-05-12 Qualcomm Incorporated Systems and methods of signaling of regions of interest
JP2018107500A (ja) * 2016-12-22 2018-07-05 キヤノン株式会社 符号化装置、符号化方法及びプログラム、復号装置、復号方法及びプログラム
JP7018447B2 (ja) * 2017-01-05 2022-02-10 シャープ株式会社 仮想現実アプリケーション用の、動き制約タイルセットのシグナリングのためのシステム及び方法
US10944974B2 (en) 2017-01-11 2021-03-09 Raytheon Company Method for encoding and processing raw UHD video via an existing HD video architecture
EP3583780B1 (en) 2017-02-17 2023-04-05 InterDigital Madison Patent Holdings, SAS Systems and methods for selective object-of-interest zooming in streaming video
US10764575B2 (en) 2017-03-03 2020-09-01 Qualcomm Incorporated Coding MCTS-nested SEI messages to exclude other SEI messages that are not MCTS-nested
EP3593536A1 (en) 2017-03-07 2020-01-15 PCMS Holdings, Inc. Tailored video streaming for multi-device presentations
US10390030B2 (en) * 2017-03-10 2019-08-20 Raytheon Company Symbology encoding in video data
US11190724B2 (en) * 2017-03-10 2021-11-30 Raytheon Company Adaptive bitrate streaming of UHD image data
US10412395B2 (en) * 2017-03-10 2019-09-10 Raytheon Company Real time frame alignment in video data
CN116074502A (zh) * 2017-03-20 2023-05-05 Ge 视频压缩有限责任公司 生成视频数据流的装置以及生成视频数据流的方法
WO2019009473A1 (ko) * 2017-07-04 2019-01-10 엘지전자 주식회사 360도 비디오의 영역 기반 처리 방법 및 장치
US10679415B2 (en) * 2017-07-05 2020-06-09 Qualcomm Incorporated Enhanced signaling of regions of interest in container files and video bitstreams
US10798455B2 (en) * 2017-12-22 2020-10-06 Comcast Cable Communications, Llc Video delivery
US10390063B2 (en) 2017-12-22 2019-08-20 Comcast Cable Communications, Llc Predictive content delivery for video streaming services
US11445215B2 (en) 2017-12-28 2022-09-13 Electronics And Telecommunications Research Institute Method and device for image encoding and decoding, and recording medium having bit stream stored therein
US11140418B2 (en) * 2018-07-17 2021-10-05 Qualcomm Incorporated Block-based adaptive loop filter design and signaling
US10798389B2 (en) * 2018-10-02 2020-10-06 Tencent America LLC Method and apparatus for content-aware point cloud compression using HEVC tiles
US11477445B2 (en) * 2018-12-28 2022-10-18 Hfi Innovation Inc. Methods and apparatuses of video data coding with tile grouping
CN113302930A (zh) 2019-01-09 2021-08-24 华为技术有限公司 视频译码中的时间运动约束子图像指示
WO2020181435A1 (en) * 2019-03-08 2020-09-17 Zte Corporation Null tile coding in video coding
AU2020354926A1 (en) 2019-09-24 2022-04-07 Huawei Technologies Co., Ltd. Decoded picture buffer operation for resolution changes
KR20210100853A (ko) 2020-02-07 2021-08-18 삼성전자주식회사 이미지를 저장하는 전자 장치 및 방법
JPWO2021192764A1 (zh) * 2020-03-25 2021-09-30
CA3177367A1 (en) * 2020-03-27 2021-09-30 Wilus Institute Of Standards And Technology Inc. Method and device for processing video signal by using picture header
US11321878B2 (en) 2020-06-26 2022-05-03 Sony Group Corporation Decoded tile hash SEI message for V3C/V-PCC
US11619935B2 (en) * 2020-07-17 2023-04-04 Blue Ocean Robotics Aps Methods of controlling a mobile robot device from one or more remote user devices
CN113837171B (zh) * 2021-11-26 2022-02-08 成都数之联科技有限公司 候选区域提取方法及系统及装置及介质及目标检测方法
WO2023177098A1 (ko) * 2022-03-14 2023-09-21 현대자동차주식회사 초해상도 인루프 필터를 이용하는 비디오 코딩을 위한 방법 및 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101313578A (zh) * 2005-09-26 2008-11-26 韩国电子通信研究院 用于在可伸缩视频编码中定义和重构感兴趣区域的方法和装置
WO2013027407A1 (en) * 2011-08-25 2013-02-28 Panasonic Corporation Methods and apparatuses for encoding, extracting and decoding video using tiles coding scheme
WO2013063425A1 (en) * 2011-10-26 2013-05-02 Qualcomm Incorporated Unified design for picture partitioning schemes
WO2013077236A1 (en) * 2011-11-21 2013-05-30 Canon Kabushiki Kaisha Image coding apparatus, image coding method, image decoding apparatus, image decoding method, and storage medium

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6263022B1 (en) * 1999-07-06 2001-07-17 Philips Electronics North America Corp. System and method for fine granular scalable video with selective quality enhancement
FI114433B (fi) 2002-01-23 2004-10-15 Nokia Corp Otossiirtymän koodaaminen videokoodauksessa
EP1500002A1 (en) * 2002-04-29 2005-01-26 Sony Electronics Inc. Supporting advanced coding formats in media files
US6764556B2 (en) * 2002-05-17 2004-07-20 Shinya Myojin Copper-nickel-silicon two phase quench substrate
JP2004040351A (ja) 2002-07-02 2004-02-05 Ricoh Co Ltd 画像配信システム及び画像配信再生システム
JP2004112566A (ja) * 2002-09-20 2004-04-08 Ricoh Co Ltd 画像処理装置、画像処理方法、画像処理プログラム、及び画像処理プログラムを記憶する記憶媒体
JP2006165809A (ja) * 2004-12-03 2006-06-22 Toshiba Corp 情報処理装置
US8019175B2 (en) 2005-03-09 2011-09-13 Qualcomm Incorporated Region-of-interest processing for video telephony
KR101255226B1 (ko) * 2005-09-26 2013-04-16 한국과학기술원 스케일러블 비디오 코딩에서 다중 ｒｏｉ 설정, 복원을위한 장치 및 방법
US8270496B2 (en) 2005-10-12 2012-09-18 Thomson Licensing Region of interest H.264 scalable video coding
CA2633819C (en) * 2005-12-08 2016-12-06 Vidyo, Inc. Systems and methods for error resilience and random access in video communication systems
JP2007174568A (ja) * 2005-12-26 2007-07-05 Sanyo Electric Co Ltd 符号化方法
JP2007180801A (ja) 2005-12-27 2007-07-12 Fujitsu Ltd 画像符号化方法および画像符号化装置
US8265392B2 (en) 2006-02-07 2012-09-11 Qualcomm Incorporated Inter-mode region-of-interest video object segmentation
JP2007235314A (ja) 2006-02-28 2007-09-13 Sanyo Electric Co Ltd 符号化方法
EP1999960A4 (en) * 2006-03-24 2011-05-18 Korea Electronics Telecomm CODING METHOD FOR REDUCING REDUNDANCY BETWEEN LAYERS USING MITION DATA OF THE FGS LAYER AND ESTABLISHMENT THEREFOR
US8184710B2 (en) * 2007-02-21 2012-05-22 Microsoft Corporation Adaptive truncation of transform coefficient data in a transform-based digital media codec
WO2008143747A2 (en) 2007-05-16 2008-11-27 Thomson Licensing Methods and apparatus for the use of slice groups in decoding multi-view video coding (mvc) information
JP5326234B2 (ja) 2007-07-13 2013-10-30 ソニー株式会社 画像送信装置、画像送信方法および画像送信システム
US20090300692A1 (en) * 2008-06-02 2009-12-03 Mavlankar Aditya A Systems and methods for video streaming and display
US8908763B2 (en) * 2008-06-25 2014-12-09 Qualcomm Incorporated Fragmented reference in temporal compression for video coding
CA2755774C (en) 2009-03-19 2015-01-06 Azuki Systems, Inc. Method for scalable live streaming delivery for mobile audiences
US9131033B2 (en) 2010-07-20 2015-09-08 Qualcomm Incoporated Providing sequence data sets for streaming video data
US20120078885A1 (en) * 2010-09-24 2012-03-29 Rovi Technologies Corporation Browsing hierarchies with editorial recommendations
EP2630799A4 (en) * 2010-10-20 2014-07-02 Nokia Corp METHOD AND DEVICE FOR VIDEO CODING AND DECODING
US10244239B2 (en) * 2010-12-28 2019-03-26 Dolby Laboratories Licensing Corporation Parameter set for picture segmentation
JP5594477B2 (ja) * 2011-01-26 2014-09-24 Ｎｌｔテクノロジー株式会社 画像表示装置、画像表示方法、及びプログラム
GB2492396A (en) 2011-06-30 2013-01-02 Canon Kk Decoding a Scalable Video Bit-Stream
PL2744202T3 (pl) * 2011-08-11 2020-12-28 Sun Patent Trust Sposób kodowania obrazów, sposób dekodowania obrazów, urządzenie do kodowania obrazów, urządzenie do dekodowania obrazów oraz urządzenie do kodowania/dekodowania obrazów
US9584819B2 (en) * 2011-10-24 2017-02-28 Qualcomm Incorporated Grouping of tiles for video coding
KR20140092861A (ko) * 2011-10-31 2014-07-24 미쓰비시덴키 가부시키가이샤 동화상 부호화 장치, 동화상 복호 장치, 동화상 부호화 방법 및 동화상 복호 방법
KR102145782B1 (ko) * 2011-10-31 2020-08-19 미쓰비시덴키 가부시키가이샤 동화상 부호화 장치, 동화상 부호화 방법 및 컴퓨터 독취 가능한 기억 매체
US9332259B2 (en) * 2012-01-18 2016-05-03 Qualcomm Incorporated Indication of use of wavefront parallel processing in video coding
NZ616358A (en) * 2012-02-03 2015-03-27 Mediatek Inc Method and apparatus for loop filtering cross tile or slice boundaries
US20130208808A1 (en) * 2012-02-08 2013-08-15 Panasonic Corporation Image coding method and image decoding method
AU2013283173B2 (en) * 2012-06-29 2016-03-24 Ge Video Compression, Llc Video data stream concept
GB2504068B (en) * 2012-07-11 2015-03-11 Canon Kk Methods and devices for controlling spatial access granularity in compressed video streams
WO2014047134A1 (en) * 2012-09-18 2014-03-27 Vid Scale, Inc. Region of interest video coding using tiles and tile groups
US20140098851A1 (en) * 2012-10-04 2014-04-10 Qualcomm Incorporated Indication of video properties
US9473779B2 (en) * 2013-03-05 2016-10-18 Qualcomm Incorporated Parallel processing for video coding
US9232225B2 (en) * 2013-03-14 2016-01-05 Chirp Inc. Low complexity and memory efficient image CODEC
CN105284114A (zh) * 2013-07-07 2016-01-27 韦勒斯标准与技术协会公司 视频信号处理方法及装置
GB2516224A (en) * 2013-07-11 2015-01-21 Nokia Corp An apparatus, a method and a computer program for video coding and decoding
JP6271888B2 (ja) * 2013-07-12 2018-01-31 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
SG10201604902PA (en) * 2013-07-12 2016-08-30 Sony Corp Image Decoding Device And Method
US8762555B1 (en) * 2013-07-30 2014-06-24 Google Inc. System and method for providing filtered geospatial assets
EP3138295A4 (en) * 2014-04-28 2017-09-20 ActiveVideo Networks, Inc. Systems and methods for generating a full-motion video mosaic interface for content discovery with user-configurable filters
US20200265278A1 (en) * 2019-02-19 2020-08-20 Toshiba Tec Kabushiki Kaisha Colored region barcode printing

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101313578A (zh) * 2005-09-26 2008-11-26 韩国电子通信研究院 用于在可伸缩视频编码中定义和重构感兴趣区域的方法和装置
WO2013027407A1 (en) * 2011-08-25 2013-02-28 Panasonic Corporation Methods and apparatuses for encoding, extracting and decoding video using tiles coding scheme
WO2013063425A1 (en) * 2011-10-26 2013-05-02 Qualcomm Incorporated Unified design for picture partitioning schemes
WO2013077236A1 (en) * 2011-11-21 2013-05-30 Canon Kabushiki Kaisha Image coding apparatus, image coding method, image decoding apparatus, image decoding method, and storage medium

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Exploitation of Interactive Region of Interest Scalability in Scalable Video Coding by Using an XML-driven Adaptation Framework;Davy De Schrijver et al.;《2ND INTERNATIONAL CONFERENCE ON AUTOMATED PRODUCTION OF CROSS MEDIA CONTENT FOR MULTI-CHANNEL DISTRIBUTION》;20060101;第2.1、2.2、3.2、3.3节，图1-3

Also Published As

Publication number Publication date
CN109862373B (zh) 2021-10-15
US10841592B2 (en) 2020-11-17
JP2020014252A (ja) 2020-01-23
US20150016504A1 (en) 2015-01-15
CN109862373A (zh) 2019-06-07
JP2016529789A (ja) 2016-09-23
KR102107286B1 (ko) 2020-05-06
JP2017184258A (ja) 2017-10-05
JP6801764B2 (ja) 2020-12-16
US10368078B2 (en) 2019-07-30
US20190246116A1 (en) 2019-08-08
KR20160019091A (ko) 2016-02-18
JP6350717B2 (ja) 2018-07-04
KR20200045012A (ko) 2020-04-29
KR20170129975A (ko) 2017-11-27
JP6150011B2 (ja) 2017-06-21
US11553190B2 (en) 2023-01-10
EP3008896A1 (en) 2016-04-20
EP3008896B1 (en) 2021-03-31
JP2018152889A (ja) 2018-09-27
CN105359512A (zh) 2016-02-24
US20210021839A1 (en) 2021-01-21
WO2015009676A1 (en) 2015-01-22
KR20200045013A (ko) 2020-04-29
KR102107270B1 (ko) 2020-05-06
EP3008896A4 (en) 2016-11-23
JP6610705B2 (ja) 2019-11-27

Similar Documents

Publication Publication Date Title
CN105359512B (zh) 用于交互性的运动约束贴片集合sei消息的扩展
Niamut et al. MPEG DASH SRD: spatial relationship description
AU2017213593B2 (en) Transmission of reconstruction data in a tiered signal quality hierarchy
CN113498606A (zh) 用于视频编码和解码的装置、方法和计算机程序
CN100542247C (zh) 对主视频信号和一个或更多个副视频信号进行编解码的方法和设备
JP6965278B2 (ja) タイムドメディアデータをカプセル化及びパージングするための方法、デバイス及びコンピュータプログラム
JP2018078602A (ja) Ｓｈｖｃでの注目領域スケーラビリティ
CN108476324A (zh) 增强视频流的视频帧中的感兴趣区域
CN109891893B (zh) 一种媒体内容处理方法
KR101832113B1 (ko) 인코딩 장치, 방법 및 컴퓨터 판독가능 매체
CN105359544A (zh) 数字视频流传输中的特技播放
KR20200008637A (ko) 360도 비디오의 영역 기반 처리 방법 및 장치
CN115104315A (zh) 基于nal单元相关信息的图像或视频编码

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant