CN107646195B - 用于屏幕内容译码的帧内块复制模式 - Google Patents

用于屏幕内容译码的帧内块复制模式 Download PDF

Info

Publication number
CN107646195B
CN107646195B CN201680033424.5A CN201680033424A CN107646195B CN 107646195 B CN107646195 B CN 107646195B CN 201680033424 A CN201680033424 A CN 201680033424A CN 107646195 B CN107646195 B CN 107646195B
Authority
CN
China
Prior art keywords
reference picture
picture
video
video block
current picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680033424.5A
Other languages
English (en)
Other versions
CN107646195A (zh
Inventor
修晓宇
叶艳
贺玉文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vid Scale Inc
Original Assignee
Vid Scale Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vid Scale Inc filed Critical Vid Scale Inc
Priority to CN202210630036.2A priority Critical patent/CN115118973A/zh
Publication of CN107646195A publication Critical patent/CN107646195A/zh
Application granted granted Critical
Publication of CN107646195B publication Critical patent/CN107646195B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/88—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks

Abstract

可以以帧内块复制(IBC)模式对当前图片的视频块进行译码。加权预测可以针对IBC译码的屏幕内容视频块被禁用。分数块向量可以被用于IBC译码的视频块的色度分量。插补滤波器被用于生成针对所述视频块的色度预测采样。当前参考图片的解码版本可被添加到与IBC译码的视频块相关联的参考图片列表L0和参考图片列表L1两者。当约束帧内预测被应用时，被用于预测帧内译码视频块的参考采样被限制到在帧内译码的相邻块中的那些。IBC搜索的范围可通过施加针对块向量的最大绝对值而被限制。

Description

用于屏幕内容译码的帧内块复制模式
相关申请的交叉引用
本申请要求2015年6月8日提交的美国临时专利申请No.62/172,645、2015年10月14日提交的美国临时专利申请No.62/241,708和2016年2月19日提交的美国临时专利申请No.62/297,736的权益，这些申请公开内容全部作为引用结合于此。
背景技术
由于诸如无线显示和云计算等视频应用的快速增长的使用，视频内容译码(SCC)已经变得日益重要。屏幕内容视频通常包括计算机产生的内容，诸如文本和图片，并且由此拥有与自然内容视频(例如由照相机获取的视频)不同的属性。设计了系统、方法和装置以利用屏幕内容的独特属性，从而其可被更有效地译码。
发明内容
此处公开了用于对视频(例如屏幕内容视频)进行译码的系统、方法和装置。加权预测可以在对当前图片的视频块进行译码期间被启用或禁用。例如，如果视频块以帧内块复制(IBC)模式译码，则加权预测可被禁用。IBC模式针对视频块是否被启用可以通过将与当前图片相关联的图片顺序号和与当前图片的参考图片相关联的图片顺出号进行比较来确定。如果两个图片顺序号彼此不同，则作出IBC模式不被启用并且加权预测被应用的决定。当加权预测被应用时，通过由视频比特流信号通知一个或多个加权预测参数来生成与视频块相关联的视频比特流。在特定实施方式中，在作出有关IBC模式和加权预测模式的决定之前，与当前图片相关联的层ID和与参考图片相关联的层ID之间的进一步比较可以被执行。更特别地，如果当前图片和参考图片的各自层ID不同，或者如果当前图片和参考图片的各自图片顺序号不同，则作出IBC模式可不被启用并且加权预测被应用(例如一个或多个加权预测参数被用信号通知)的决定。
分数块向量(fractional block vector)被用于标示用于IBC译码视频块的色度参考采样。插补滤波处理可以被使用以基于色度参考采样来生成针对视频块的色度预测采样。进一步地，当IBC模式被启用时，伪参考图片(例如当前图片的解码版本)被添加到当前图片的参考图片列表L0和参考图片列表L1两者。约束帧内预测(CIP)可以被应用。CIP的应用可以遵循特定限制，该特定限制包括例如仅使用来自帧内译码相邻块来预测帧内译码视频块。
此处描述的视频译码(coding)设备可以包括视频编码器(encoder)和/或视频解码器(decoder)。在此描述的系统、方法及装置并不限于对屏幕内容视频进行译码，还可应用于译码其他视频内容。
附图说明
从以下描述中可以更详细地理解本发明，这些描述是以实例方式给出的，并且可以结合附图加以理解，其中：
图1为根据此处描述的一个或多个举例的示例视频编码器。
图2为根据此处描述的一个或多个举例的示例视频解码器。
图3为描述完全帧内块复制搜索的示例的图示。
图4为描述局部帧内块复制搜索的示例的图示
图5A为描述用于色度分量的示例BV剪辑(clip)操作的图示。
图5B为描述相邻片段的参考采样对于分数色度采样插补不可用的图示。
图5C为描述用于分数色度采样插补的跨片段边界(cross-slice-boundary)采样填充的示例的图示。
图5D为描述用于色度分量的示例BV剪辑操作的图示。
图6为描述差错如何从帧间译码参考块传播到利用约束帧内预测(CIP)译码的当前块的图示。
图7为描述当CIP被启用时执行帧内预测的示例方式的图示。
图8A为可以在其中实现一个或多个所公开的实施方式的示例通信系统的图示；
图8B为示例无线发射/接收单元(WTRU)的系统图，其中所述WTRU可以在如图8A所示的通信系统中使用；
图8C为示例无线电接入网络和示例核心网络的系统图，其中所述示例核心网络和所述示例无线电接入网络可以在如图8A所示的通信系统中使用。
图8D为另一示例无线电接入网络和示例核心网络的系统图，其中所述示例核心网络和所述示例无线电接入网络可以在如图8A所示的通信系统中使用。
图8E为另一示例无线电接入网络和示例核心网络的系统图，其中所述示例核心网络和所述示例无线电接入网络可以在如图8A所示的通信系统中使用。
具体实施方式
现在参照各个附图对示例实施方式进行具体地描述。然而本描述提供了可能实施方式的具体示例，应当理解的是这些示例并不意在限制本申请的范围。此外，此处描述的视频译码设备可包括视频编码器和/或视频解码器。
图1为其中可实现一个或多个公开的实施方式的示例视频编码器100的框图。视频编码器100遵循国际视频译码标准，诸如MPEG-1,MPEG-2,MPEG-4,H.264/MPEG-4增强型视频译码(AVC)和/或高效视频译码(HEVC)。视频编码器100可以为视频广播系统、有线系统、基于网络的视频流服务、游戏应用和/或服务、多媒体通信系统和/或各种其它应用和服务的一部分或独立单元。视频编码器100可以以硬件、软件或硬件和软件的组合来实现。例如，视频编码器100可利用一个或多个专用目的处理器、通用目的处理器、图形处理单元(GPU)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)电路、状态机等等。视频编码器100的一个或多个组件可以利用与计算机可读介质结合的软件或固件实现以用于由计算机或处理器执行。计算机可读介质的示例包括电子信号(通过有线或无线连接传送)和计算机可读存储介质，诸如只读存储器(ROM)、随机访问存储器(RAM)、寄存器、缓冲存储器、半导体存储器设备、磁性介质(例如内部硬盘和可移动磁盘)、磁光介质、光介质(例如CD-ROM光盘)和数字多功能光盘(DVD)。
如图1所示，视频编码器100可以包括空间预测单元104、时间(或运动)预测单元106、参考图片库108、运动决定和控制逻辑单元110、变换单元112、逆变换单元113、量化单元114、解量化单元115、扫描单元(未示出)、熵译码单元116和/或环路滤波器124。尽管图1描述了视频编码器100仅具有此处描述的每个组件的一个单元，本领域技术人员将会理解一个或多个组件的多个单元可以被用于实现此处描述的功能。
视频编码器100被配置成接收输入视频信号102。输入视频信号102可具有标准分辨率(例如640x880)或者高分辨率(例如1920x1080和以上)。视频编码器100可以逐块处理输入视频信号102。每个视频块此处可被称作宏块(“MB”)或“译码树单元”(CTU)，并且具有包括4x4像素、8x8像素、16x16像素、32x32像素或64x64像素多种尺寸中的一者。扩展块尺寸(例如64x64,32x32和16x16像素的CTU)可以被用于压缩高分辨率视频信号(例如1080或更高)。扩展块尺寸可以在序列级被选择并且在序列参数集合(SPS)中用信号通知。扩展块尺寸(例如诸如CTU)可以例如经由四叉树分离被划分成一个或多个译码单元(CU)。CU(例如64x64像素的CU)可以被划分成预测单元(PU)。视频编码器100可以在每个视频块上执行预测(例如帧内(intra)或帧间(inter)预测)以例如发现视频块中固有的冗余和不相关，从而减少需要被压缩和/或传递的信息量。在示例中，视频编码器100可以在CU级应用预测。当CU被划分成预测单元时，独立预测可以被应用到预测单元。
视频编码器100可以被配置成在空间预测单元104对于当前视频块执行空间预测。例如，这种预测方法可以允许视频编码器100使用来自相同视频帧的一个或多个先前译码的相邻块来预测当前视频块的像素(被用于预测的块此处可被称作“预测块”)。相邻块的像素可能与当前视频块的像素高度相关，这是因为例如相关视频帧包含具有平滑变化强度的许多部位(region)。由此，通过使用空间预测，视频编码器100能够从当前视频块移除特定空间冗余，并且仅对不能进行空间预测的剩余像素进行译码。示例空间预测方法可以包括帧内预测、帧内块复制预测(IBC)等等。帧内预测可以使用来自当前帧(例如不与任何其它帧相关)的相邻先前译码的像素采样(例如一列或一行的采样)来预测特定采样值。IBC预测可以使用来自当前帧的先前译码的采样的块来预测针对整个块的采样值。
除了空间预测或者作为空间预测的替代，视频编码器100可以使用时间预测单元106来对视频块应用时间预测(例如“帧间预测”或者“运动补偿预测”)。时间预测可以利用两个邻近视频帧可具有高时间冗余的现象，因为典型视频序列从一个帧到下一个帧不会快速变化。由此，视频编码器100可以使用来自先前译码的视频帧中的一个或多个预测块来预测当前视频块，由此视频信号102中固有的时间冗余可以被移除。在示例中，视频编码器100被配置成使用例如一个或多个运动向量计算和/或用信号通知当前视频块和其预测块之间的运动的量和方向，并且利用计算的运动信息来进一步改善预测效率。在一个或多个示例中，视频编码器100可以支持多个参考图片并且将参考图片索引分派到每个编码视频块。视频编码器100可以基于视频块的参考图片索引来确定时间预测信号可能来自参考图片库108中的哪个参考图片和/或参考视频块。
视频编码器100可以基于在模式决定和控制逻辑单元110中存储的逻辑来选择预测模式。多种因素可以在选择过程中考虑，包括例如失真率优化(RDO)标准和/或比特率需求。在一个或多个示例中，视频编码器100可以选择绝对变化差异总和(SATD)最小的预测模式。在一个或多个示例中，视频编码器100可以选择具有最小失真率消耗的预测模式。各种其它技术也是可能的，所有这些都在本公开的范围内。
此处描述的各种预测方法可能产生预测剩余(例如通过从当前视频块中减去预测块)。预测剩余可包括高相关像素的大集合。视频编码器100可以在将变换系数(例如经由此处描述的扫描单元)扫描成系数的一维序列并且将序列反馈到熵译码单元116之前，将预测剩余变换(例如经由变换单元112)和量化(例如经由量化单元114)成较少相关(例如不相关)系数(此处称作“变换系数”)的较小集合。在一个或多个示例中，视频编码器100可以将诸如译码模式、预测模式、运动信息、剩余差分脉冲译码调制(RDPCM)模式和/或其它译码参数之类的附加信息传递到熵译码单元116。附加信息可以利用变换系数被压缩和打包并且发送到视频比特流120。变换系数可以被解量化(例如在解量化单元115)、逆变换(例如在逆变换单元112)并可被添回预测块以重构视频块。在重构后的视频块被放入到参考图片库108以译码未来视频块之前诸如解块滤波和自适应环路滤波的环内滤波124可以被应用到重构后的视频块。
图2为在其中可实现一个或多个公开的实施方式的示例视频解码器200的图示。示例视频解码器200可以位于比特流202的接收端，并且可以通过各种传输介质接收比特流202，所述传输介质包括例如公共网络(例如因特网)，内部网络(例如企业内部互联网)，虚拟私有网络(“VPN”)，蜂窝网络，有线网络，串行通信链路，RS-485通信链路，RS-232通信链路，内部数据总线等等。视频解码器200可以利用基于块的解码方法，这些方法遵循国际视频标准，诸如MPEG-1,MPEG-2,MPEG-4,H.264/MPEG-4增强型视频译码(AVC)和/或高效视频译码(HEVC)。视频解码器200可以为计算机设备、移动设备、电视系统、游戏控制台和应用、多媒体通信系统和/或各种其它应用和服务的一部分或独立单元。视频解码器200以硬件、软件或硬件和软件的组合来实现。例如，视频解码器200可利用一个或多个专用目的处理器、通用目的处理器、图形处理单元(GPU)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)电路、状态机等等。视频解码器200的一个或多个组件可以利用与计算机可读介质结合的软件或固件实现以用于由计算机或处理器执行。计算机可读介质的示例包括电子信号(通过有线或无线连接传送)和计算机可读存储介质，诸如只读存储器(ROM)、随机访问存储器(RAM)、寄存器、缓冲存储器、半导体存储器设备、磁性介质(例如内部硬盘和可移动磁盘)、磁光介质、光介质(例如CD-ROM光盘)和数字多功能光盘(DVD)。
视频解码器200可操作地基于视频信号的编码版本(例如诸如由视频编码器100产生)来重构视频信号。重构过程可包括接收编码视频(例如SCC视频)的块，获取被用于编码视频块的预测块，恢复视频块的预测剩余和重构原始视频块。由此，视频解码器200可包括执行与视频编码器100相反的功能的组件。例如，如图2所示，视频解码器200可包括熵解码单元204、空间预测单元206、时间预测单元208、解量化单元210、逆变换单元212、环路滤波器214和/或参考图片库216。视频解码器200可在熵解码单元204接收视频比特流202。熵解码单元204可解包和熵解码比特流202，熵解码单元204可以从比特流202中提取诸如由视频编码器100的变换单元112、量化单元114和/或扫描单元产生的变换系数之类的信息。包括译码模式、预测模式、RDPCM模式和/或用于编码视频块的其它参数的附加信息也可以被提取。一些提取的信息可以被发送到空间预测单元206(例如如果视频信号被帧内译码或IBC译码)和/或时间预测单元208(如果视频信号被帧间译码)以获取预测块。变换系数块被重建和解量化(例如在解量化单元210)以及逆变换(例如在逆变换单元212)以获取视频块的预测剩余。视频解码器200可以组合剩余视频块和预测块以将视频块重构到其原始形式。
视频解码器200可以在例如环路滤波器214处在重构的视频块上应用环内滤波。各种环内滤波技术可以被使用，包括例如解块滤波和自适应环路滤波。在重构和滤波时，视频解码器200可以将重构的视频218放入参考图片库216，并且可后续使用参考图片库216的视频块来译码其它图像和/或驱动视频设备。如此处描述，类似的重构和环内滤波也可以经由例如解量化单元115、逆变换单元113、环路滤波器124和/或参考图片库108在视频编码器100处发生。
各种技术和/或工具可以被用于译码视频。这些技术和/或工具包括例如IBC、调色板译码、自适应色彩变换(ACT)和自适应运动向量精度。IBC是块匹配技术。在IBC的示例实现中，当前视频块可被预测为从相同图片的相邻部位(region)/区域(area)中的先前重构块(例如参考块)的位移。位移可以例如由块向量(BV)测量和/或表示。译码系统(例如编码器100)可以使用各种搜索技术来标识BV和/或相应参考块。例如，为了达到译码性能和存储器带宽复杂性之间的折衷，译码系统被配置成执行全帧IBC搜索或局部IBC搜索以便标识参考块。
图3描述了全帧IBC搜索的示例。块302表示被译码的当前块。空白和阴影区域分别表示译码和未译码区域。全帧IBC搜索选项在译码系统(例如编码器100)的配置期间可被规定。在全帧IBC搜索选项下，参考块304可以在当前图片的先前重构像素(例如来自已经被重构的当前图片的所有像素)中被标识。基于散列的IBC搜索技术被使用以确定用于定位参考块304的BV 306和/或控制编码复杂性。先前重构区域的采样可以在环内滤波之前的编码和/或解码过程(例如解块和/或采样自适应偏移(SAO))期间被维护。
图4描述了局部IBC搜索的示例。局部IBC搜索选项可在编码系统(例如编码器100)的配置期间被规定。使用局部IBC搜索，当前译码单元402的IBC预测可使用有限数目的相邻译码树单元中的先前重构的采样(例如在环内滤波调用之前)来执行。例如，被用于当前CU402的IBC预测的像素可包括位于当前CU 402的左侧的译码树单元(例如诸如CTU 404)的像素和/或当前CTU的先前译码像素(例如诸如区域403，405和406)。由于采样的较小集合在局部IBC搜索期间可被使用，与IBC相关写/读相关联的存储器带宽需求(例如通过屏幕内容译码软件)可被减少。
块向量被约束成具有整数像素分辨率/精度，由此来自参考块的直接采样复制在IBC的运动补偿期间被使用(例如不进行像素插补)。利用这种限制，具有分数像素精度的块向量被剪辑(例如在运动补偿期间)，由此块向量可以指向像素间位置的色度分量。如果对于给定片段，具有来自参考图片列表LX(其中X为0或1)的索引refIdx的图片与当前图片不相同，则剪辑操作可以根据等式1和2进行。否则，剪辑操作可以根据等式3和4进行，其中mvLX[0]和mvLX[1]可表示水平和垂直亮度运动向量，mvCLX[0]和mvCLX[1]可表示水平和垂直色度运动向量，SubWidthC可表示亮度和色度的水平分辨率之间的比率，以及SubHeightC可表示亮度和色度的垂直分辨率之间的比率。对于4:2:0视频，SubWidthC和SubHeightC可等于2。
mvCLX[0]＝mvLX[0]*2/SubWidthC (1)
mvCLX[1]＝mvLX[1]*2/SubHeightC (2)
mvCLX[0]＝((mvLX[0]>>(1+SubWidthC))*8 (3)
mvCLX[1]＝((mvLX[1]>>(1+SubHeightC))*8 (4)
例如因为剪辑可减少译码复杂性和/或(例如当IBC译码的CU具有由插补滤波模糊或扭曲的边界时)改善了IBC译码的CU的质量(例如主观质量和/或客观质量)，此处描述的剪辑操作适用于4:4:4色度格式(利用该格式，色度和亮度分量具有相同分辨率)。对于特定非4:4:4色度格式(例如4:2:0和4:2:2)，由于色度分量具有与亮度分量不同的采样速率(例如在水平和垂直方向中的一者或两者)，剪辑可能引起了色度和亮度分量的失准。这在图5A中进行描述。
图5A描述了使用示例剪辑方法的(例如在运动补偿过程中执行)BV剪辑的效果。在示例中，当前译码单元502可具有4x4的块尺寸，并且视频序列可以4:2:0色度格式获取。视频的亮度和色度采样可分别由圆圈和三角表示。原始BV 504可指向第一参考块506，而剪辑后的BV 508可指向第二参考块510。如果剪辑后的BV 508被用于获取色度参考采样且原始BV 504被用于获取亮度参考采样，则亮度和色度参考采样(例如参考块506，510中的)可能失准。如果当前CU正被IBC译码且具有失准的亮度和色度采样的预测信号被用于预测当前CU，译码效率可能受影响。失准会产生重构信号中(例如沿着相邻对象之间的边界)的不期望的伪像(例如幻影和/或渗色伪像)，其可能损耗了重构视频的主观质量。
分数块向量可被允许并且被用于IBC译码的CU的色度分量。分数块向量被获取(如此处描述)以用于标识一个或多个色度参考采样。分数块向量可以指向分数像素位置。利用插补滤波过程(例如当块向量指向分数像素位置时)来生成针对IBC译码的CU的色度预测采样。例如，返回参考图5A，色度采样(例如在区域506内的那些)可基于分数BV和可应用插补滤波器的长度被标识。插补滤波器可随后被应用到色度采样以获取针对IBC译码的CU的色度预测采样。各种插补滤波器被用于获取色度预测采样。例如，4抽头色度滤波器(例如在HEVC标准中所定义的)可被使用。
如果用于色度分量的分数采样滤波器针对IBC模式被启用，并且如果当前图片包含多个片段(slice)和/或区块(tile)，则位于靠近相邻片段/区块之间的边界的色度参考采样可能不可用于插补滤波。这在图5B中进行描述，其显示了位于片段边界540之外的参考采样P0可能不可于分数色度采样插补。图5B中的圆圈表示在整数位置的色度采样，而三角表示具有分数像素精度的插补色度采样。参考采样P0不可用于色度插补过程的一个示例原因是参考采样不在与当前IBC译码的CU相同的片段/区块(例如参考采样可能在相邻片段/区块中)。另一示例原因可能在于当前图片中的片段/区块可被独立解码。另一示例原因可能在于使用来自先前译码的区域(例如，当前图片的已经被解码的区域)的参考采样来预测当前IBC译码的CU是设计目的。由此，不可用于预测的色度参考采样可能不被用于IBC译码的CU的分数色度采样插补。如此处描述，色度采样被考虑为可用，例如如果其来自已经被解码的当前图片的区域，以及如果其属于与当前CU相同的片段或区块。
使用此处描述的插补过程的示例色度采样推导过程可以通过遵循以下中的一者或多者来执行。例如，当参考图片为当前图片时，亮度运动向量mvLX遵循特定比特流一致性限制。示例限制为变量xRef和yRef基于等式5和6来推导。当用于z扫描顺序块可用性的推导过程利用(xCurr,yCurr)(例如其可被设置成等于(xCb,yCb))被调用，并且相邻亮度位置(xNbY,yNbY)(例如其可被设置成等于(xRef,yRef))作为输入时，输出可等于真(TRUE)。
xRef＝(mvLX[0]％(1<<(1+SubWidthC))＝＝0)？(xPb+(mvLX[0]>>2)):
(xPb+(mvLX[0]>>2)-1) (5)
yRef＝(mvLX[1]％(1<<(1+SubHeightC))＝＝0)？(yPb+(mvLX[1]>>2)):
(yPb+(mvLX[1]>>2)-1) (6)
示例比特流一致性限制可为变量xRef和yRef根据等式7和8被修改。当用于z扫描顺序块可用性的推导过程利用(xCurr,yCurr)(例如其可被设置成等于(xCb,yCb))被调用，并且相邻亮度位置(xNbY,yNbY)(例如其可被设置成等于(xRef,yRef))作为输入时，输出可等于真。
xRef＝(mvLX[0]％(1<<(1+SubWidthC))＝＝0)？(xPb+(mvLX[0]>>2)+
nPbW-1):(xPb+(mvLX[0]>>2)+nPbW+1) (7)
yRef＝(mvLX[1]％(1<<(1+SubHeightC))＝＝0)？(yPb+(mvLX[1]>>2)+
nPbH-1):(yPb+(mvLX[1]>>2)+nPbH+1) (8)
示例比特流一致性限制可以为以下条件中的一者或多者为真。首先，(mvLX[0]>>2)+nPbW+((mvLX[0]％(1<<(1+SubWidthC))＝＝0)？0:2)+xB1的值可小于或等于0。第二，(mvLX[1]>>2)+nPbH+((mvLX[1]％(1<<(1+SubHeightC))＝＝0)？0:2)+yB1的值可小于或等于0。第三，xRef/CtbSizeY-xCurr/CtbSizeY的值可小于或等于yCurr/CtbSizeY-yRef/CtbSizeY的值。
此处描述的比特流一致性限制中的一者或多者可以由编码器(例如编码器100)和/或解码器(例如解码器200)执行。编码器可以按照限制中的一者或多者将视频编码成比特流。在解码比特流之前和/或期间，解码器可以检查限制是否被满足，并且如果限制不符合，则产生差错。
如此处描述，例如如果参考采样属于另一片段/区块(例如不同于当前片段/区块的片段/区块)或者还未被解码，则参考采样不可用于分数色度插补过程。在这些情况下，来自当前片段/区块或者解码区域的填充采样可以被用于分数色度插补过程。这在图5C中进行了描述，其显示了跨片段边界采样填充的示例。图5C中的圆圈可表示在整数位置的色度采样，而三角表示在分数位置的色度采样。如所示，整数采样P0可跨片段边界550，并且由此不可用于色度插补。为了启用色度插补过程，整数采样P1的值被复制到整数采样P0。
被用于基于插补的色度推导(例如用于IBC译码的CU)的参考采样可能来自无效部位(例如未被解码的部位，不同片段或区块等等)。由此，验证可以被执行以例如检查BV是否使用不可用的色度参考采样。验证会给编码器和/或解码器带来复杂性(例如，除了由色度插补过程自身带来的复杂性之外的复杂性)。如此处描述，具有分数像素精度的BV(例如用于色度采样)可以被剪辑到具有相等或较小水平和垂直坐标的附近(例如最近)整数色度采样。返回参考图5A，色度采样516a,516b,516c,516d为通过BV剪辑获取的整数色度采样。然而，这些采样不必为用于预测当前译码单元502的色度采样的最佳参考。例如，存在来自与相应亮度分量的相同块和/或与当前译码单元502更近的其它整数色度采样。
图5D描述了使用示例剪辑方法的BV剪辑的效果(例如在运动补偿过程中)。当前译码单元562具有4x4的块大小，并且视频序列可以4:2:0色度格式被获取。亮度和色度采样分别由圆圈和三角表示。原始BV 564可指向第一参考块566，而剪辑后的BV 568可指向第二参考块570。使用示例剪辑方法(此处将进一步详细描述)，整数色度采样集合可以被推导(例如在图5D的566a,566b,566c,566d)。从示例剪辑方法推导的整数色度采样可包括一个或多个色度采样(例如图5D中示出的566a,566b)，它们与相应的亮度采样来自相同的块。此外，图5D中的整数色度采样566a,566b,566c,566d靠近当前译码单元。由示例BV剪辑方法产生的整数色度采样可用于预测当前译码单元。
IBC预测效率和复杂性之间的折衷可以在获取用于IBC译码的译码单元的色度参考采样期间实现。更特别地，对于给定片段，如果具有来自参考图片列表LX的索引refIdx的图片(例如其中X可以是0或1)不是当前图片，则等式9和10可被使用；如果具有来自参考图片列表LX的索引refIdx的图片是当前图片，等式11和12可被使用。
mvCLX[0]＝mvLX[0]*2/SubWidthC (9)
mvCLX[1]＝mvLX[1]*2/SubHeightC (10)
mvCLX[0]＝sign(mvLX[0])*(abs(mvLX[0])>>(1+SubWidthC))*8 (11)
mvCLX[1]＝sign(mvLX[1])*(abs(mvLX[1])>>(1+
SubHeightC))*8 (12)
用于IBC模式的信令可以与用于帧间模式的信令同一。例如，当前图片中IBC译码的CU可以通过将伪参考图片添加到当前图片的参考图片列表中来作为帧间译码的CU被用信号通知。伪参考图片可以是当前图片的解码版本。伪参考图片可包括例如当前图片的先前重构采样(例如在环内滤波被应用到重构采样之前)。当IBC模式被启用(例如通过将标记curr_pic_as_ref_enabled_flag设置成真)时，当前图片的参考图片列表(例如参考图片列表L0)可以特定顺序构造(例如当前图片之前的一个或多个时间参考图片，当前图片之后的一个或多个时间参考图片以及伪参考图片(此处称作“currPic”))。伪参考图片通过参考参考列表修改操作被插入到参考图片列表。伪参考图片被用于确定是否启用IBC模式。更特别地，如果当前图片的解码版本被包括(例如作为伪参考图片)在参考图片列表L0中(例如在参考图片列表修改之后)，IBC模式被确定为被启用。
附加参考图片缓冲器可被建立(例如在解码的图片缓冲器(DPB)中)以在环内滤波(例如解块和/或采样自适应偏移(SAO))之前存储当前图片的先前重构的采样。存储器访问操作可以被执行以将采样写入参考图片缓冲器/从参考图片缓冲器读取采样。对于当前参考图片列表的修改可以在片段分段报头中用信号通知。在给定图片中的不同片段使用不同参考图片。例如，一些片段可以使用伪参考图片(例如当启用IBC模式时)，而其它片段可以不使用伪参考图片(例如当禁用IBC模式时)。在解码当前片段期间，关于相同图片的未来片段的参考图片列表的信息是未知的。由此，存储器可被访问(例如在编码和解码期间)以在环内滤波之前将采样(例如未滤波采样)写入缓冲存储器(例如即使IBC模式没有被启用用于当前图片中的任何片段)。由于先前操作的结果，译码效率可能被影响，因为当前图片的存储采样可以不作为IBC模式中的参考被使用(例如可以永不使用)。
标记(例如此处描述的curr_pic_as_ref_enabled_flag)可以被设置(例如真)以用信号通知涉及给定序列参数集合(SPS)的片段可被允许使用伪参考图片。伪参考图片可包括当前图片的先前解码的采样(例如在调用环内滤波之前)。伪参考图片被用作用于预测的参考图片(例如在IBC模式中)。当标记(例如curr_pic_as_ref_enabled_flag)被设置成真时，存储缓冲器被分配以在当前图片的采样自适应偏移和解块之前存储像素值。
在完成针对当前片段的参考图片列表修改过程之后，可以确定伪参考图片是否包括在当前图片的最终参考图片列表中。如果伪参考图片不被包括，则IBC模式在片段级可被禁用(例如完全禁用)。如果解码器接收到当前图片的一个或多个片段(例如所有片段)可不使用伪参考图片作为参考的图片级指示，则在解码器侧，与IBC模式相关联的存储器访问操作可被跳过。这种指示允许解码器作出关于是否分配缓冲器来存储伪参考图片的较早决定。
标记(例如use_curr_pic_as_ref_flag)在片段分段报头中使用以指示当前图片是否被包括在当前片段的任何参考图片列表中。比特流一致性约束被添加以确保此附加标记的值对于给定图片的一个或多个片段(例如所有片段)保持相同。表1示出了使用附加标记的示例片段分段报头语法。
表1.示例片段分段报头语法
Figure GDA0003210999880000161
当标记(例如use_curr_pic_as_ref_flag)被设置成等于1时，其可指示当前图片的解码版本被包括在当前片段的的参考图片列表L0中。当附加标记被设置成等于0时，其指示当前图片的解码版本不被包括在当前片段的任何参考图片列表中。当附加标记不存在时，其可被视为标记被设置成等于0。
对于比特流一致性目的，标记的值可被设置成针对与给定图片相关联的一个或多个片段(例如所有片段)的相同值。根据此处描述的方式的示例参考图片列表构造过程在图2中示出。针对参考图片列表L0(例如RefPicList0)的示例构造过程在表3中示出。
表2.示例参考图片列表构造过程
Figure GDA0003210999880000171
表3.示例参考图片列表L0构造过程
Figure GDA0003210999880000172
当IBC模式在SPS中被启用时，比特流一致性约束被施加用于参考图片列表构造(例如不使用表2和3中描述的语法)。在这些约束下，就伪参考图片是否被包括在参考图片列表中而言，给定图片中的一个或多个片段(例如所有片段)的参考图片列表可表现为一致。解码器(例如解码器200)可以在接收到给定图片中的片段的比特流时，通过检查伪图片是否包括在参考图片列表中来评估IBC模式被应用到相同图片的其它片段的可能性。例如，如果片段报头指示伪图片不包括在参考图片列表中，则解码器可以决定跳过与写入/读取当前图片的采样相关联的一个或多个存储器访问操作(例如所有存储器访问操作)。
如此处描述，通过将伪参考图片(例如在环内滤波之前的当前图片的解码版本)添加到当前图片的参考图片列表L0来启用IBC模式。伪参考图片也可以被包括在当前图片的参考图片列表L1中(例如在特定双向预测使用情况中)。例如通过组合两个参考图片的预测信号，一个来自参考图片列表L0，另一个来自参考图片列表L1，双向预测被启用。如果双向预测被启用并且如果伪参考图片仅被包括在参考图片列表L0中，来自伪参考图片的参考块可以与L1中时间参考图片的参考块组合，但是不与L0中其它参考图片(例如非伪参考图片)的参考块组合。针对IBC译码的CU的译码增益由此被影响。
当启用IBC模式时，当前图片的初始参考图片列表可通过将伪参考图片添加到参考图片列表L0和参考图片列表L1(例如针对B片段)来生成。参考图片列表构造过程如以下被描述。表4和表5示出了用于构造参考图片列表L0的示例语法。
表4.示例参考图片列表构造过程
Figure GDA0003210999880000191
表5.示例参考图片列表构造过程
Figure GDA0003210999880000192
表6示出了当片段为B片段时，用于构造列表RefPicListTemp1的示例语法。在示例语法中，变量NumRpsCurrTempList1被设置成等于Max(num_ref_idx_l1_active_minus1+1,NumPicTotalCurr)。
表6.示例参考图片列表构造过程
Figure GDA0003210999880000201
列表RefPicList1使用表7中的示例语法来构造。
表7.示例参考图片列表构造过程
Figure GDA0003210999880000202
如果伪参考图片包括在参考图片列表L0和L1两者中，来自伪参考图片中的两个预测块针对使用双向预测模式译码的CU可被组合。然而，来自伪参考图片的两个参考块之间的双向预测可能发生(尽管块向量可能不同)。这种双向预测可能影响译码效率。比特流一致性约束可被用于阻止组合来自伪参考图片的两个参考块。
至少基于当前图片的图片顺序号(POC)和被用于译码的参考图片的图片顺序号，当前图片中IBC译码的CU可以从帧间译码的CU中区分。更特别地，如果参考图片具有与当前图片相同的POC，可以作出当前CU以IBC模式被译码的确定结果；否则，可以作出当前CU以帧间模式译码的确定结果。
在特定实施方式中，IBC模式是否被启用可以基于附加标准被确定。例如，与当前图片和参考图片相关联的各个层标识(ID)被比较(例如除了比较POC之外)以确定IBC模式是否被启用。作为示例，在HEVC的可分级扩展(SHVC)中，来自相邻层的层间参考图片可被用于预测当前图片。类似地，在HEVC的3D/多视点扩展下，来自相同时间瞬间的相邻视点的视点间参考图片可以被用于预测当前图片。在那些示例场景的任一个中，被用于帧间预测的参考图片可具有与当前图片相同的POC，但是具有不同层ID。由此，为了从帧间译码的CU中区分IBC译码的CU，与参考图片相关联的层ID可以与关联于当前图片的层ID进行比较(例如除了比较图片的POC之外)以确定IBC模式是否被启用。更特别地，如果参考图片和当前图片具有相同POC和相同层ID，可以作出当前CU以IBC模式译码的确定结果。
伪参考图片通常被视为类似时间参考图片。然而，一些区别可能存在于两种类型的参考图片的处理之间。示例区别在于在译码(例如编码和/或解码)当前图片完成之前，伪参考图片可被标记为长期参考图片。一旦译码当前图片被完成，译码后的图片(例如在环内滤波之后)可以被存储在解码后的图片缓冲器中(例如，如果图片被标记为用于译码未来图片的参考图片)，并且伪参考图片可由译码后的当前图片替代(例如在环内滤波已经被应用之后)并且被标记为解码后的图片缓冲器中的短期参考图片。示例区别可以为在一些情况中伪参考图片可能不被用作针对时间运动向量预测(TMVP)的配置的参考图片。示例区别在于，在随机访问点(RAP)，一个或多个时间参考图片(例如所有时间参考图片)可从解码后的图片缓冲器中移除，而针对当前图片的伪参考图片可仍然被保留。
特定视频信号(例如照相机捕捉的视频信号)可以包含照明变化，诸如渐现(fade-in)、淡出(fade-out)、匀滑转换(cross-fade)、消融(dissolve)、闪光(flashes)等等。这些照明变化可以局部(例如在图片部位内)或者全局(例如在整个图片内)发生。加权预测可以被用于利用诸如褪色和消融之类的照明变化(例如在时间相邻图片中)来译码视频序列。在加权预测的示例实现中，帧间预测视频块可例如根据等式13表述的线性关系使用来自一个或多个时间参考的加权采样来预测。
WP(x,y)＝w·P(x,y)+o (13)
P(x,y)和WP(x,y)可为分别在加权预测之前和加权预测之后在位置(x,y)的预测后的像素值，w和o可为在加权预测中使用的权重和偏移。在双向预测使用情况中，加权预测可以按照等式14描述的两个时间预测信号的线性组合中执行。
WP(x,y)＝(w0·P0(x,y)+w1·P1(x,y)+o0+o1)/2 (14)
P0(x,y)和P1(x,y)可为在加权预测之前的第一和第二预测块，WP(x,y)可为在加权预测之后的双向预测信号，w0和w1可为针对每个预测块的权重，o0和o1为针对每个预测块的偏移。
与加权预测相关联的参数可在片段报头中用信号通知(例如给定图片中的不同片段可使用不同加权和偏移来生成针对时间预测的参考块)。对于IBC译码的CU(例如用信号通知作为帧间译码的CU)，加权预测使用从相同图片(例如此处描述的伪参考图片)中获取的预测信号被应用。
用于IBC译码的CU的加权预测以各种方式被禁用。例如与加权预测相关联的标记(例如luma_weight_lx_flag和/或chroma_weight_lx_flag)可以在用信号通知期间(例如在视频比特流中)被设置(例如假或真)以指示加权预测未被应用于IBC译码的CU。例如，加权预测相关标记在IBC译码的CU的用信号通知过程(例如标记在视频比特流中不被发送)期间被跳过。缺少加权预测相关标记可以用作禁用加权预测的指示符。针对当前图片的译码单元是否启用IBC模式，可以基于当前图片和/或与当前图片相关联的参考图片的特征来确定。例如，如此处描述，如果当前图片和参考图片的图片顺序号具有相同值，可以作出IBC模式被应用到当前CU的确定结果(因为参考图片可被确定为此处描述的伪参考图片)。加权预测随后针对IBC译码的CU可被禁用。如果当前图片和参考图片的图片顺序号具有不同值，可以作出帧间模式被用于当前CU的确定结果。加权预测随后针对帧间译码的CU可被启用。在特定实施方式中，与当前图片和参考图片相关联的层ID被进一步比较以确定是否应用IBC模式和/或是否应当启用加权预测。更特别地，如果参考图片和当前图片具有相同POC值和相同层ID值，可以作出IBC模式被应用并且加权预测被禁用的确定结果。如果POC值或层ID不同，可以作出帧间模式被应用并且加权预测被启用的确定结果。
表8示出了用于处理加权预测的第一示例语法，利用该语法，如果与当前图片相关联的参考图片和当前图片的图片顺序号相同，则用信号通知加权预测参数可被禁用。语法可以包括在片段分段报头中。如所示，如果标记luma_weight_l0_flag[i]被设置成等于1，则指示可以为用于使用RefPicList0[i]预测参考图片列表L0的亮度分量的加权因子可以存在。如果标记luma_weight_l0_flag[i]被设置成等于0，则指示可以为相关加权因子可以不存在。如果标记luma_weight_l0_flag[i]不存在，则指示可以为进程应当像标记具有值0一样来进行。如果标记luma_weight_l1_flag[i]被设置成等于1，则指示可以为用于使用RefPicList1[i]预测参考图片列表L1的亮度分量的加权因子可以存在。如果标记luma_weight_l1_flag[i]被设置成等于0，则指示可以为那些加权因子可以不存在。如果标记luma_weight_l1_flag[i]不存在，指示可以为进程应当像标记具有值0一样来进行。
表8.在片段分段报头中的示例加权预测参数语法
Figure GDA0003210999880000241
Figure GDA0003210999880000251
表9示出了用于处理加权预测的第二示例语法，利用该语法，如果与当前图片相关联的参考图片和当前图片的图片顺序号相同并且当前图片和参考图片的层ID也相同，则用信号通知加权预测参数可被禁用。在示例语法中，函数LayerIdCnt(refPic)可被用于获取参考图片refPic的层ID。变量nuh_layer_id可表示当前层的NAL层ID。标记pps_curr_pic_ref_enabled_flag可被用于设置用信号通知加权预测参数的条件。
表9.在片段分段报头中的示例加权预测参数语法
Figure GDA0003210999880000261
Figure GDA0003210999880000271
表9中示出的示例语法可被进一步简化。例如，当IBC模式在图片参数集合(PPS)中启用(例如标记pps_curr_pic_ref_enabled_flag被设置成1)，参考图片可具有与当前图片相同的POC和相同层id。由此，标记pps_curr_pic_ref_enabled_flag可以从信令中移除，简化的语法在表10中呈现。
表10.在片段分段报头中的示例加权预测参数语法
Figure GDA0003210999880000291
Figure GDA0003210999880000301
如表9和表10所示，与当前图片相关联的参考图片的层ID可被检查以确定参考图片是否来自与当前图片相同层。这种确定也可以基于关于参考图片是层间还是视点间参考图片的存储的信息(例如二进制变量)来作出。这种信息在参考图片列表构造过程期间被导出。更特别地，当生成参考图片列表时，如果译码设备(例如解码器200)确定参考图片来自当前层的不同层，译码设备可将相应变量(例如二进制变量)设置成1(或者真)；否则(例如参考图片来自与当前图片相同的层)，译码设备可以将相应变量设置成0(或假)。信息可以被存储(例如在存储器中)。随后，当译码设备解析加权预测参数(例如使用表4中的语法表)时，基于这一二进制变量的值的附加条件可被添加(例如除了POC值检查之外)以确定加权预测参数的用信号通知是否可以被跳过。
如此处描述，当视频块以帧间预测模式译码时，来自先前译码的视频图片的像素可被用于预测当前译码单元。分组差错(例如由于在传输压缩视频比特流期间分组损失)可能在相邻图片之间传播(例如从参考图片到当前图片)。差错传播可能由于例如时间依赖(例如在误差倾向环境)。为了减轻误差传播，帧内译码的块可被引入(例如周期性地)以打破时间依赖。这一技术被称作“帧内刷新”。帧内译码的块可以使用相邻块的先前译码像素作为预测参考。如果这些预测参考使用帧间预测被译码，差错可能通过参考传播到帧内译码的块。
约束帧内预测(CIP)为帧内预测技术，通过此技术，在相邻块作为参考块的使用上可以施加约束以便增强帧内预测的精度。当CIP被启用时，当前CU的帧内预测可使用已经以帧内模式或IBC模式被译码的相邻块的像素。然而，帧内或IBC译码的相邻块可能已经使用其自身已经被帧间预测的参考采样被预测。由此，在帧间预测期间引入的差错可能传播到当前CU。
图6描述了示例场景，其中差错从帧间译码参考块传播到利用CIP译码的当前块。在示例中，当前图片604的当前CU 602(例如时间t)使用水平帧内预测模式被帧内预测。帧内预测可将在相邻块606中的像素使用到当前CU的左侧。相邻块606自身可能已经使用IBC模式被预测(例如使用当前图片604的先前译码块608的像素)。然而，参考块608可能已经使用参考图片612(例如在先前时间t－1)的像素(例如来自块610)被帧间译码。在这种场景中，在(t－1)来自参考图片612的差错可传播到当前图片604中的参考块608。差错可进一步传播到块606，随后到当前CU 602。差错的传播可能打破CIP设计目标(其可包括阻止差错从帧间译码块传播到帧内译码块)。
CIP可被调整以限制以如下方式进行预测：IBC模式译码的块可使用帧内或IBC译码的像素被预测。图7描述了帧内预测可以在CIP被启用时，按照建议被执行。在附图中，来自相邻帧间译码的块的像素被示为空白正方形，而来自相邻帧内译码的块的像素被示为阴影正方形。当CIP被启用，限制(称作“CIP限制”)可以被应用，在该限制下当前块的帧内预测可以使用帧内译码的相邻采样，并且不使用帧间译码的相邻采样。当CIP不被启用时，CIP限制可不应用。
当CIP被启用时，一种或多种下列方法可以被应用。在一示例中，可以当启用CIP时禁用所述IBC模式。例如，IBC模式可通过设置在图片参数集合(PPS)中的标记(例如将curr_pic_as_ref_enabled_flag设置成0)来从高级别禁用。在一示例中，可仅允许帧内译码的CU的采样被用作用于帧内预测的参考采样。相邻帧间译码的CU(包括涉及时间参考图片和/或涉及伪参考图片的帧间译码的CU)的采样可不被用作用于帧内预测的参考采样。在一示例中，如果IBC译码的CU自身已经仅使用帧内译码的CU作为参考，则帧内预测可使用IBC译码的CU作为参考。在该示例中，时间运动向量预测(TMVP)可针对IBC模式而被禁用。注意与第三示例方法相比，在一些实施方式中，来自伪参考图片的IBC译码的采样可不被允许来预测帧内译码的CU。由此，由于时间BV预测的差错可被阻止传播到帧内译码的CU，并且TMVP在这些实施方式中针对IBC模式而被启用。
帧内译码的CU可被允许使用相邻帧内译码的采样。帧内译码的CU可在特定条件下使用相邻IBC译码的采样。例如，如果相邻IBC译码的采样将当前图片的先前译码区域中的帧内译码采样作为参考，则帧内译码的CU可使用相邻IBC译码的采样。基于直接或间接涉及时间参考图片的相邻采样的对CU的帧内预测可被禁止。TMVP针对IBC模式可被禁用。
此处描述的示例方法可被用作比特流一致性限制。此处描述的示例方法可被应用到多种类型的图片。例如，示例方法可被应用到包含常规帧间译码的CU(例如从时间参考图片预测的帧间译码的CU)的图片。一些I片段和P/B片段在其参考图片列表中可包括伪参考图片并且不包括时间参考图片。由此，可以不存在涉及时间参考的帧间译码的CU。由此，在先前解码的时间参考图片中的差错可被阻止传播到当前图片。来自先前重构的块的采样可被用作针对帧内预测的参考采样。
此处描述的示例方法可以被应用(例如仅应用)到I片段和P/B片段，对于这些片段，各个参考图片列表包括时间参考图片。如果当前片段为I片段或P/B片段，对于这些片段，参考图片列表仅包括伪参考图片(例如没有时间参考图片被包括在参考图片列表中)，帧内译码的CU和/或帧间译码的CU可被用于帧内预测的参考。如此处描述，参考图片列表是否仅包括伪参考图片可以通过将与当前图片相关联的图片顺序号和与参考图片列表上的参考图片相关联的各个图片顺序号进行比较来确定。如果与当前图片相关联的图片顺序号和与参考图片中的每个相关联的各个图片顺序号相同，则作出此处描述的一个或多个示例方法不被应用的确定结果。如果当前片段是使用时间参考图片用于预测的P/B片段，则一个或多个这里描述的约束可被应用。例如，所述帧内采样预测过程和时间运动向量预测导出过程按以下进行执行。
关于通用帧内采样预测，针对以z扫描顺序的块的可用性推导过程可以被调用，当前亮度位置(xCurr,yCurr)被设置成等于(xTbY,yTbY)。相邻亮度位置(xNbY,yNbY)被用作输入。输出被分配给表示为availableN的变量。采样p[x][y]按以下导出。如果以下条件中的一者或两者为真，则采样p[x][y]可被标记为不可用于帧内预测。第一条件为变量availableN等于假(或零)。第二条件为pictureCuPredMode[xNbY][yNbY]的值不等于MODE_INTRA，针对当前片段的RefPicList0和RefPicList1中的至少一个图片aPic，DiffPicOrderCnt(aPic,CurrPic)的值不等于0，并且constrained_intra_pred_flag的值等于1(或真)。如果前述条件均不为真，则采样p[x][y]可被标记为“可用于帧内预测”，位置(xNbCmp,yNbCmp)处的采样被分配给p[x][y]。
关于时间亮度运动向量预测的推导过程，变量mvLXCol和availableFlagLXCol按以下导出。如果slice_temporal_mvp_enabled_flag等于0，mvLXCol的分量可被设置成等于0，并且availableFlagLXCol可被设置成等于0。如果参考图片为当前图片，并且constrained_intra_pred标记等于1，其不需要将mvLXCol的两个分量设置为0，以及将availableFlagLXCol设置为0。
第四示例方法可被实现为解码器(例如解码器200)或解码过程的一部分。当决定参考采样是否可用于帧内预测时，解码器可以考虑所描述的与第四示例方法相关联的限制。如果不是所有参考采样可用于使用给定预测模式(例如DC，平面，和/或33方向预测模式)的帧内预测，帧内预测模式可不被应用。特定比特流一致性可被应用，由此涉及当前图片的帧内译码区域的IBC译码的采样可被用于帧内预测。例如，标记(例如constrained_intra_pred_flag)可被设置为等于0以指示相邻译码块的剩余数据和解码采样可被用于帧内预测。对于标记设置为0的情况，可能已经使用不是当前图片的参考图片将解码后的采样译码，或者解码后的采样可能已经在没有这种参考图片的情况下被译码。标记被设置为1以指示CIP可被启用并且帧内预测过程可使用剩余数据和来自相邻译码块的解码后的采样，所述相邻译码块已经被译码而没有使用不是当前图片的参考图片。为了说明，当标记被设置为1并且参考采样A被用于帧内预测时，可以不使用不是当前图片的参考图片来预测参考采样A。此外，在以上示例场景中，如果参考采样A使用来自当前图片的参考采样B来预测，则参考采样B也可使用帧内预测模式来译码。
如此处描述，至少两种类型的搜索(例如图3中所示的全帧IBC搜索和图4中所示的局部IBC搜索)可以以IBC模式执行。IBC搜索的范围可能影响HEVC SCC编解码器的复杂性。例如，全帧IBC搜索可被实现以利用离片存储器来存储当前图片的未滤波的采样。这种存储数据的方式可能比较慢。局部IBC搜索可以被实现以利用片上存储器，其比使用离片存储器更快。
IBC搜索范围上的约束被施加。例如，解码后的BV的最大值被限制。更特别地，两个独立值MaxHorizontalBV和MaxVerticalBV被指定以限制IBC模式的水平和垂直BV的各自最大绝对值。两个限制可以给定相同值或不同值。当被设置为不同值时，两个限制使得能够实现译码效率和解码复杂性(例如对于不同轮廓(profile))之间的不同折衷。对于相符的比特流，水平BV和垂直BV的绝对值可分别等于或小于MaxHorizontalBV和MaxVerticalBV。搜索范围约束可被应用如下。
当参考图片为当前图片时，亮度运动向量mvLX可遵循下列约束。(mvLX[0]>>2)的绝对值可小于或等于MaxHorizontalBV。(mvLX[1]>>2)的绝对值可小于或等于MaxVerticalBV。当在(xCurr,yCurr)被设置成等于(xCb,yCb)、相邻亮度位置(xNbY,yNbY)被设置成等于(xPb+(mvLX[0]>>2)、以及将(yPb+mvLX[1]>>2))作为输入的情况下调用用于z扫描顺序块可用性的推导过程时，输出可等于真。当在(xCurr,yCurr)被设置成等于(xCb,yCb)，相邻亮度位置(xNbY,yNbY)被设置成等于(xPb+(mvLX[0]>>2)+nPbW-1，以及将yPb+(mvLX[1]>>2)+nPbH–1)作为输入的情况下调用用于z扫描顺序块可用性的推导过程时，输出可等于真。
语法元素(诸如，max_hor_block_vector_ibc和max_ver_block_vector_ibc)可在视频参数集合(VPS)、序列参数集合或图片参数集合(PPS)中被用信号通知以指示水平和垂直BV的最大绝对值。表11显示了此处描述的语法元素如何用信号通知的示例。
表11.用于用信号通知BV限制的示例语法
Figure GDA0003210999880000361
变量max_block_vector_present_flag具有值1可指示语法元素max_hor_block_vector_ibc_minus_min_coding_block_size和max_ver_block_vector_ibc_minus_min_coding_block_size存在。变量max_block_vector_present_flag具有值0可指示语法元素max_hor_block_vector_ibc_minus_coding_block_size和max_ver_block_vector_ibc_minus_coding_block_size不存在。当变量max_block_vector_present_flag不存在时，其被视为如同变量存在且具有值0一样。
变量max_hor_block_vector_ibc_minus_min_coding_block_size加MinCbSizeY可规定水平运动向量的最大值，对此参考图片为伪参考图片(例如currPic)。当变量max_hor_block_vector_ibc_minus_min_coding_block_size不存在时，其被推断为pic_width_in_luma_sample–MinCbSizeY。max_hor_block_vector_ibc_minus_min_coding_block_size的值可在0到pic_width_in_luma_samples–MinCbSizeY范围内，包含边界。
变量max_ver_block_vector_ibc_minus_min_coding_block_size加MinCbSizeY可规定垂直运动向量的最大值，对此参考图片为伪参考图片(例如currPic)。当变量max_ver_block_vector_ibc_minus_min_coding_block_size不存在时，其被推断为pic_height_in_luma_samples–MinCbSizeY。max_ver_block_vector_ibc_minus_min_coding_block_size的值可在0到pic_height_in_luma_samples–MinCbSizeY范围内，包括边界。
变量MaxHorizontalBV和MaxVerticalBV可以按如下推导。MaxHorizontalBV＝max_hor_block_vector_ibc_minus_min_coding_block_size+MinCbSizeY。MaxVerticalBV＝max_ver_block_vector_ibc_minus_min_coding_block_size+MinCbSizeY。各种译码算法可以被用于译码最大BV绝对值。例如，两个值可以使用无符号指数Golomb码(ue)被译码。为了减少相关语法的信令开销，约束被施加以将水平和垂直BV的最大绝对值限制到2的幂次，由此其对数值被用信号通知(例如取代实际值)。更特别地，取代于直接用信号通知max_hor_block_vector_ibc_minus_min_coding_block_size和max_ver_block_vector_ibc_minus_min_coding_block_size，两个语法元素log2_max_abs_hor_block_vector_ibc_minus_min_coding_block_size和log2_max_abs_ver_block_vector_ibc_minus_min_coding_block_size可被用信号通知，由此MaxHorizontalBV和MaxVerticalBV的值可被导出。例如使用这些对数值，MaxHorizontalBV和MaxVerticalBV可分别被推导成(1<<log2_max_abs_hor_block_vector_ibc_minus_min_coding_block_size)+MinCbSizeY和(1<<log2_max_abs_ver_block_vector_ibc_minus_min_coding_block_size)+MinCbSizeY。水平和垂直块向量的最大绝对值可被限制成2的倍数，由此，除以2操作的商被用信号通知。例如，两个语法元素max_hor_block_vector_ibc_minus_min_coding_block_size_div2和max_ver_block_vector_ibc_minus_min_coding_block_size_div2被用信号通知以将MaxHorizontalBV和MaxVerticalBV的值分别导出为(max_hor_block_vector_ibc_minus_min_block_size_div2<<1)+MinCbSizeY和(maxs_ver_block_vector_ibc_minus_min_block_size_div2<<1)+MinCbSizeY。
图8A为可以在其中实施此处公开的一个或者多个示例的示例通信系统800的图例。通信系统800可以是将诸如语音、数据、视频、消息、广播等之类的内容提供给多个无线用户的多接入系统。通信系统800可以通过系统资源(包括无线带宽)的共享使得多个无线用户能够访问这些内容。例如，通信系统800可以使用一个或多个信道接入方法，例如码分多址(CDMA)、时分多址(TDMA)、频分多址(FDMA)、正交FDMA(OFDMA)、单载波FDMA(SC-FDMA)等等。
如图8A所示，通信系统800可以包括无线发射/接收单元(WTRU)802a，802b，802c和/或802d(通常统称为WTRU 802)、无线电接入网络(RAN)803/804/805、核心网络806/807/809、公共交换电话网(PSTN)808、因特网810和其他网络812，但可以理解的是所公开的实施方式可以涵盖任意数量的WTRU、基站、网络和/或网络元件。WTRU 802a，802b，802c、802d中的每一个可以是被配置成在无线通信中操作和/或通信的任何类型的装置。作为示例，WTRU802a，802b，802c、802d可以被配置成发送和/或接收无线信号，并且可以包括用户设备(UE)、移动站、固定或移动用户单元、寻呼机、蜂窝电话、个人数字助理(PDA)、智能电话、便携式电脑、上网本、个人计算机、无线传感器、消费电子产品等等。
通信系统800还可以包括基站814a和基站814b。基站814a，814b中每个可以是被配置成与WTRU 802a，802b，802c、802d中的至少一者无线交互，以便于接入一个或多个通信网络(例如核心网络806/807/809、因特网810和/或网络812)的任何类型的装置。例如，基站814a、814b可以是基站收发信站(BTS)、节点B、e节点B、家用节点B、家用e节点B、站点控制器、接入点(AP)、无线路由器以及类似装置。尽管基站814a，814b每个均被描述为单个元件，但是可以理解的是基站814a，814b可以包括任何数量的互联基站和/或网络元件。
基站814a可以是RAN 803/804/805的一部分，该RAN 803/804/805还可以包括诸如基站控制器(BSC)、无线电网络控制器(RNC)、中继节点之类的其他基站和/或网络元件(未示出)。基站814a和/或基站814b可以被配置成在特定地理区域内发送和/或接收无线信号，该特定地理区域可以被称作小区(未示出)。小区还可以被划分成小区扇区。例如与基站814a相关联的小区可以被划分成三个扇区。由此，在一种实施方式中，基站814a可以包括三个收发信机，例如针对所述小区的每个扇区都有一个收发信机。在另一实施方式中，基站814a可以使用多输入多输出(MIMO)技术，并且由此可以针对小区的每个扇区使用多个收发信机。
基站814a、814b可以通过空中接口815/816/817与WTRU 802a，802b，802c、802d中的一者或多者通信，该空中接口815/816/817可以是任何合适的无线通信链路(例如射频(RF)、微波、红外(IR)、紫外(UV)、可见光等)。空中接口815/816/817可以使用任何合适的无线电接入技术(RAT)来建立。
更为具体地，如前所述，通信系统800可以是多接入系统，并且可以使用一个或多个信道接入方案，例如CDMA、TDMA、FDMA、OFDMA、SC-FDMA以及类似的方案。例如，在RAN 803/804/805中的基站814a和WTRU 802a，802b、802c可以实施诸如通用移动电信系统(UMTS)陆地无线电接入(UTRA)之类的无线电技术，其可以使用宽带CDMA(WCDMA)来建立空中接口815/816/817。WCDMA可以包括诸如高速分组接入(HSPA)和/或演进型HSPA(HSPA+)的通信协议。HSPA可以包括高速下行链路分组接入(HSDPA)和/或高速上行链路分组接入(HSUPA)。
在另一实施方式中，基站814a和WTRU 802a，802b、802c可以实施诸如演进型UMTS陆地无线电接入(E-UTRA)之类的无线电技术，其可以使用长期演进(LTE)和/或高级LTE(LTE-A)来建立空中接口815/816/817。
在其他实施方式中，基站814a和WTRU 802a，802b、802c可以实施诸如IEEE 802.16(例如全球微波互联接入(WiMAX))、CDMA2000、CDMA2000 1x、CDMA2000 EV-DO、临时标准2000(IS-2000)、临时标准95(IS-95)、临时标准856(IS-856)、全球移动通信系统(GSM)、增强型数据速率GSM演进(EDGE)、GSM EDGE(GERAN)之类的无线电技术。
举例来讲，图8A中的基站814b可以是无线路由器、家用节点B、家用e节点B或者接入点，并且可以使用任何合适的RAT，以用于促进在诸如公司、家庭、车辆、校园之类的局部区域的通信连接。在一种实施方式中，基站814b和WTRU 802c，802d可以实施诸如IEEE802.11之类的无线电技术以建立无线局域网络(WLAN)。在另一实施方式中，基站814b和WTRU802c，802d可以实施诸如IEEE 802.15之类的无线电技术以建立无线个人局域网络(WPAN)。在又一实施方式中，基站814b和WTRU 802c，802d可以使用基于蜂窝的RAT(例如WCDMA、CDMA2000、GSM、LTE、LTE-A等)以建立超微型(picocell)小区和毫微微小区(femtocell)。如图8A所示，基站814b可以具有至因特网810的直接连接。由此，基站814b不必经由核心网络806/807/809来接入因特网810。
RAN 803/804/805可以与核心网络806/807/809通信，该核心网络可以是被配置成将语音、数据、应用程序和/或网际协议上的语音(VoIP)服务提供到WTRU 802a，802b，802c、802d中的一者或多者的任何类型的网络。例如，核心网络806/807/809可以提供呼叫控制、账单服务、基于移动位置的服务、预付费呼叫、网际互联、视频分配等，和/或执行高级安全性功能，例如用户认证。尽管图8A中未示出，需要理解的是RAN 803/804/805和/或核心网络806/807/809可以直接或间接地与其他RAN进行通信，这些其他RAT可以使用与RAN 803/804/805相同的RAT或者不同的RAT。例如，除了连接到可以采用E-UTRA无线电技术的RAN803/804/805，核心网络806/807/809也可以与使用GSM无线电技术的其他RAN(未显示)通信。
核心网络806/807/809也可以用作WTRU 802a，802b，802c、802d接入PSTN 808、因特网810和/或其他网络812的网关。PSTN 808可以包括提供普通老式电话服务(POTS)的电路交换电话网络。因特网810可以包括互联计算机网络的全球系统以及使用公共通信协议的装置，所述公共通信协议例如传输控制协议(TCP)/网际协议(IP)因特网协议套件的中的TCP、用户数据报协议(UDP)和IP。网络812可以包括由其他服务提供方拥有和/或操作的无线或有线通信网络。例如，网络812可以包括连接到一个或多个RAN的另一核心网络，这些RAN可以使用与RAN 803/804/805相同的RAT或者不同的RAT。
通信系统800中的WTRU 802a，802b，802c、802d中的一些或者全部可以包括多模式能力，即WTRU 802a，802b，802c、802d可以包括用于通过不同无线链路与不同的无线网络进行通信的多个收发信机。例如，图8A中显示的WTRU 802c可以被配置成与使用基于蜂窝的无线电技术的基站814a进行通信，并且与使用IEEE 802无线电技术的基站814b进行通信。
图8B描述了示例WTRU 802的系统框图。如图8B所示，WTRU 802可以包括处理器818、收发信机820、发射/接收元件822、扬声器/麦克风824、键盘826、显示屏/触摸板828、不可移除存储器830、可移除存储器832、电源834、全球定位系统(GPS)芯片组836和其他外围设备838。需要理解的是，在与以上实施方式一致的同时，WTRU 802可以包括上述元件的任何子集。同样，实施方式涵盖基站814a和814b和/或基站814a和814b可以代表的节点可包括此处描述以及图8B描述的元件中的一些或所有，所述节点诸如但不限于收发机站(BTS)，节点B，站点控制器，接入点(AP)，家用节点B，演进型节点B(e节点B)，家用演进型节点B(HeNB)，家用演进型节点B网关和代理节点，等等。
处理器818可以是通用目的处理器、专用目的处理器、常规处理器、数字信号处理器(DSP)、多个微处理器、与DSP核心相关联的一个或多个微处理器、控制器、微控制器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)电路、其他任何类型的集成电路(IC)、状态机等。处理器818可以执行信号译码、数据处理、功率控制、输入/输出处理和/或使得WTRU 802能够在无线环境中操作的其他任何功能。处理器818可以耦合到收发信机820，该收发信机820可以耦合到发射/接收元件822。尽管图8B中将处理器818和收发信机820描述为独立的组件，但是可以理解的是处理器818和收发信机820可以被一起集成到电子封装或者芯片中。
发射/接收元件822可以被配置成通过空中接口815/816/817将信号发送到基站(例如基站814a)，或者从基站(例如基站814a)接收信号。例如，在一种实施方式中，发射/接收元件822可以是被配置成发送和/或接收RF信号的天线。在另一实施方式中，发射/接收元件822可以是被配置成发送和/或接收例如IR、UV或者可见光信号的发射器/检测器。在又一实施方式中，发射/接收元件822可以被配置成发送和接收RF信号和光信号两者。需要理解的是发射/接收元件822可以被配置成发送和/或接收无线信号的任意组合。
此外，尽管发射/接收元件822在图8B中被描述为单个元件，但是WTRU802可以包括任何数量的发射/接收元件822。更特别地，WTRU 802可以使用MIMO技术。由此，在一种实施方式中，WTRU 802可以包括两个或更多个发射/接收元件822(例如多个天线)以用于通过空中接口815/816/817发射和接收无线信号。
收发信机820可以被配置成对将由发射/接收元件822发送的信号进行调制，并且被配置成对由发射/接收元件822接收的信号进行解调。如上所述，WTRU 802可以具有多模式能力。由此，收发信机820可以包括多个收发信机以用于使得WTRU 802能够经由多RAT进行通信，例如UTRA和IEEE802.11。
WTRU 802的处理器818可以被耦合到扬声器/麦克风824、键盘826和/或显示屏/触摸板828(例如，液晶显示(LCD)显示单元或者有机发光二极管(OLED)显示单元)，并且可以从上述装置接收用户输入数据。处理器818还可以向扬声器/麦克风824、键盘826和/或显示屏/触摸板828输出用户数据。此外，处理器818可以访问来自任何类型的合适的存储器中的信息，以及向任何类型的合适的存储器中存储数据，所述存储器例如可以是不可移除存储器830和/或可移除存储器832。不可移除存储器830可以包括随机接入存储器(RAM)、只读存储器(ROM)、硬盘或者任何其他类型的存储器存储装置。可移除存储器832可以包括用户标识模块(SIM)卡、记忆棒、安全数字(SD)存储卡等类似装置。在其他实施方式中，处理器818可以访问来自物理上未位于WTRU 802上而位于诸如服务器或者家用计算机(未示出)上的存储器的数据，以及向上述存储器中存储数据。
处理器818可以从电源834接收功率，并且可以被配置成将功率分配给WTRU 802中的其他组件和/或对至WTRU 802中的其他组件的功率进行控制。电源834可以是任何适用于给WTRU 802加电的装置。例如，电源834可以包括一个或多个干电池(镍镉(NiCd)、镍锌(NiZn)、镍氢(NiMH)、锂离子(Li-ion)等)、太阳能电池、燃料电池等。
处理器818还可以耦合到GPS芯片组836，该GPS芯片组836可以被配置成提供关于WTRU 802的当前位置的位置信息(例如经度和纬度)。作为来自GPS芯片组836的信息的补充或者替代，WTRU 802可以通过空中接口815/816/817从基站(例如基站814a，814b)接收位置信息，和/或基于从两个或更多个相邻基站接收到的信号的定时来确定其位置。需要理解的是，在与实施方式一致的同时，WTRU 802可以通过任何合适的位置确定方法来获取位置信息。
处理器818还可以耦合到其他外围设备838，该外围设备838可以包括提供附加特征、功能性和/或无线或有线连接的一个或多个软件和/或硬件单元。例如，外围设备838可以包括加速度计、电子指南针(e-compass)、卫星收发信机、数码相机(用于照片或者视频)、通用串行总线(USB)端口、震动装置、电视收发信机、免持耳机、
Figure GDA0003210999880000441
单元、调频(FM)无线电单元、数字音乐播放器、媒体播放器、视频游戏播放器单元、因特网浏览器等等。
图8C描述了根据一种实施方式的RAN 803和核心网络806的系统框图。如上所述，RAN 803可以使用UTRA无线电技术通过空中接口815与WTRU 802a、802b、802c通信。RAN 803还可以与核心网络806通信。如图8C所示，RAN 803可以包含节点B 840a、840b、840c，其中节点B 840a、840b、840c每个可以包含一个或多个收发信机，该收发信机通过空中接口815来与WTRU 802a、802b、802c通信。节点B 840a、840b、840c中的每个可以与RAN 803范围内的特定小区(未示出)相关联。RAN 803还可以包括RNC 842a、842b。应该理解的是RAN 803可以包含任意数量的节点B和RNC而仍然与实施方式保持一致。
如图8C所示，节点B 840a、840b可以与RNC 842a进行通信。此外，节点B 840c可以与RNC 842b进行通信。节点B 840a、840b、840c可以通过Iub接口与对应的RNC 842a、842b进行通信。RNC 842a、842b可以通过Iur接口相互进行通信。RNC 842a、842b可以分别被配置成控制与其连接的对应的节点B 840a、840b、840c。此外，RNC 842a、842b可以分别被配置成实施或者支持其它功能，诸如外环功率控制、负载控制、准许控制、分组调度、切换控制、宏分集、安全性功能、数据加密等等。
图8C中所示的核心网络806可以包括媒体网关(MGW)844、移动交换中心(MSC)846、服务GPRS支持节点(SGSN)848，和/或网关GPRS支持节点(GGSN)850。尽管上述元素中的每个被描述为核心网络806的一部分，但是应该理解的是这些元素中的任何一个可以被除了核心网络运营商以外的实体拥有和/或运营。
RAN 803中的RNC 842a可以通过IuCS接口被连接至核心网络806中的MSC 846。MSC846可以被连接至MGW 844。MSC 846和MGW 844可以向WTRU 802a、802b、802c提供至电路交换网络(例如PSTN 808)的接入，从而便于WTRU 802a、802b、802c与传统陆线通信设备之间的通信。
RAN 803中的RNC 842a还可以通过IuPS接口被连接至核心网络806中的SGSN 848。SGSN 848可以被连接至GGSN 850中。SGSN 848和GGSN850可以向WTRU 802a、802b、802c提供至分组交换网络(例如因特网810)的接入，从而便于WTRU 802a、802b、802c与IP使能设备之间的通信。
如以上所述，核心网络806还可以连接至网络812，其中所述网络812可以包含被其他服务提供商拥有和/或运营的其他有线或无线网络。
图8D描述了根据另一种实施方式的RAN 804和核心网络807的系统图。如上所述，RAN 804可以使用E-UTRA无线电技术通过空中接口816与WTRU 802a、802b、802c进行通信。RAN 804还可以与核心网络807进行通信。
RAN 804可以包括e节点B 860a、860b和/或860c，尽管应该理解的是RAN 804可以包含任意数量的e节点B而仍然与实施方式保持一致。e节点B 860a、860b、860c每个可以包含一个或多个收发信机，该收发信机通过空中接口816来与WTRU 802a、802b、802c通信。在一种实施方式中，e节点B 860a、860b、860c可以使用MIMO技术。由此，例如e节点B 860a可以使用多个天线来传送无线信号至WTRU 802a并且从WTRU 802a中接收无线信号。
e节点B 860a、860b、860c中的每个可以与特定小区(未示出)相关联并且可以被配置成在上行链路和/或下行链路中处理无线电资源管理决定、切换决定、用户调度。如图8D中所示，e节点B 860a、860b和/或860c可以通过X2接口彼此进行通信。
图8D中所示的核心网络807可以包括移动性管理网关(MME)862、服务网关864和分组数据网络(PDN)网关866。尽管上述元素中的每个被描述为核心网络807的一部分，但是应该理解的是这些元素中的任何一个可以被除了核心网络运营商以外的实体拥有和/或运营。
MME 862可以通过S1接口被连接到RAN 804中的e节点B 860a、860b、和/或860c中的每个并且可以作为控制节点。例如，MME 862可以负责认证WTRU 802a、802b、802c的用户、承载激活/去激活、在WTRU 802a、802b、802c的初始连接期间选择特定服务网关，等等。MME862也可以为RAN 804与使用其他无线电技术(例如GSM或WCDMA)的其他RAN(未示出)之间的交换提供控制平面功能。
服务网关864可以通过S1接口被连接到RAN 804中的e节点B 860a、860b和/或860c的每个。服务网关864通常可以路由和转发用户数据分组至WTRU 802a、802b、802c，或者路由和转发来自WTRU 802a、802b、802c的用户数据分组。服务网关864也可以执行其他功能，例如在e节点B间切换期间锚定用户平面、当下行链路数据可用于WTRU 802a、802b、802c时触发寻呼、为WTRU 802a、802b、802c管理和存储上下文等等。
服务网关864也可以被连接到PDN网关866，该网关866可以向WTRU802a、802b、802c提供至分组交换网络(例如因特网810)的接入，从而便于WTRU 802a、802b、802c与IP使能设备之间的通信。
核心网络807可以促进与其他网络之间的通信。例如，核心网络807可以向WTRU802a、802b、802c提供至电路交换网络(例如PSTN 808)的接入，从而便于WTRU 802a、802b、802c与传统陆线通信设备之间的通信。例如，核心网络807可以包括，或可以与下述通信：作为核心网络807和PSTN 808之间接口的IP网关(例如，IP多媒体子系统(IMS)服务)。另外，核心网络807可以向WTRU 802a、802b、802c提供至网络812的接入，该网络812可以包含被其他服务提供商拥有和/或运营的其他有线或无线网络。
图8E描述了根据一种实施方式的RAN 805和核心网络809的系统图例。RAN 805可以使用IEEE802.16无线电技术通过空中接口817与WTRU 802a、802b、802c进行通信的接入服务网络(ASN)。正如下文将继续讨论的，WTRU802a、802b、802c、RAN 805和核心网络809的不同功能实体之间的通信链路可以被定义为参考点。
如图8E所示，RAN 805可以包括基站880a、880b和/或880c和ASN网关182，尽管应该理解的是RAN 805可以包含任意数量的基站和ASN网关而仍然与实施方式保持一致。基站880a、880b和/或880c分别与RAN 805中的特定小区(未示出)相关联，并且可以分别包括一个或多个收发信机，该收发信机通过空中接口817来与WTRU 802a、802b、802c通信。在一种实施方式中，基站880a、880b、880c可以使用MIMO技术。由此，例如基站880a可以使用多个天线来传送无线信号至WTRU 802a并且从WTRU802a中接收无线信号。基站880a、880b、880c还可以提供移动性管理功能，例如切换触发、隧道建立、无线电资源管理、业务分类、服务质量(QoS)策略执行，等等。ASN网关182可以作为业务汇聚点且可以负责用户简档的分页、缓存，路由到核心网络809，等等。
WTRU 802a、802b、802c与RAN 805之间的空中接口817可以被定义为执行IEEE802.16规范的R1参考点。另外，WTRU 802a、802b、802c中的每个可以建立与核心网络809间的逻辑接口(未示出)。WTRU 802a、802b、802c与核心网络809间的逻辑接口可以被定义为R2参考点，可以被用来认证、授权、IP主机配置管理和/或移动管理。
基站880a、880b、880c中的每个之间的通信链路可以被定义为包括用于便于WTRU切换和基站之间的数据传输的协议的R8参考点。基站880a、880b、880c和ASN网关882之间的通信链路可以被定义为R6参考点。R6参考点可以包括用于便于基于与WTRU 802a、802b、802c中每个相关的移动事件的移动管理的协议。
如图8E所示，RAN 805可以被连接到核心网络809。RAN 805和核心网络809之间的通信链路可以被定义为例如包括用于便于数据传输和移动管理能力的协议的R3参考点。核心网络809可以包括移动IP本地代理(MIP-HA)884，验证、授权、计费(AAA)服务器886和网关888。尽管每个上述元素被描述为核心网络809的一部分，但是应该理解的是这些元素中的任意一个可以被除了核心网络运营商以外的实体拥有和/或运营。
MIP-HA 184可以负责IP地址管理，且可以使得WTRU 802a、802b、802c在不同的ASN和/或不同的核心网络之间漫游。MIP-HA 184可以向WTRU 802a、802b、802c提供至分组交换网络(例如因特网810)的接入，从而便于WTRU 802a、802b、802c和IP使能设备之间的通信。AAA服务器886可以负责用户认证和支持用户服务。网关888可以促进与其他网络之间的交互工作。例如，网关888可以向WTRU 802a、802b、802c提供至电路交换网络(例如PSTN 808)的接入，从而便于WTRU 802a、802b、802c与传统陆线通信设备之间的通信。另外，网关888可以向WTRU 802a、802b、802c提供至网络812的接入，该网络812可以包含被其他服务提供商拥有和/或运营的其他有线或无线网络。
虽然在图8E中未示出，应该理解的是RAN 805可以被连接到其他ASN且核心网络809可以被连接到其他核心网络。RAN 805和其他ASN之间的通信链路可以被定义为R4参考点，该R4参考点可以包括用于协调RAN 805和其他ASN之间的WTRU 802a、802b、802c移动性的协议。核心网络809和其他核心网络之间的通信链路可以被定义为R5参考点，该R5参考点可以包括用于便于本地核心网络和受访核心网络之间的交互工作的协议。
尽管以上以特定组合描述了特征和元件，但是本领域技术人员将会理解每个特征或元件可以单独使用或者与其它特征和元件的任何组合使用。此外，此处描述的技术可以在由计算机或处理器执行的计算机程序、软件或固件中实施，其中所述计算机程序、软件或固件被包含在计算机可读存储介质中。计算机可读介质的实例包括电子信号(通过有线或无线连接而传送)和计算机可读存储介质。关于计算机可读存储介质的实例包括但不局限于只读存储器(ROM)、随机存取存储器(RAM)、寄存器、缓冲存储器、半导体存储设备、磁介质(例如内部硬盘和可移动磁盘)、磁光介质和CD-ROM光盘和数字多功能光盘(DVD)之类的光介质。与软件有关的处理器可以被用于实施在WTRU、UE、终端、基站、RNC或任何主计算机中使用的无线电频率收发信机。

Claims (17)

1.一种用于对视频进行解码的方法，该方法包括：
接收视频比特流，所述视频比特流包括有关参考图片列表的指示，其中所述参考图片列表包含与当前图片相关联的一个或多个参考图片，且其中所述一个或多个参考图片中的至少一者与所述当前图片的解码部分相关联；
针对所述一个或多个参考图片中的每一者，至少部分基于与所述当前图片相关联的图片顺序号POC和与所述参考图片相关联的POC来确定与所述参考图片相关联的加权预测参数，其中如果与所述当前图片相关联的所述POC和与所述参考图片相关联的所述POC不同，则与所述参考图片相关联的所述加权预测参数被从所述视频比特流获取，且其中至少部分在与所述当前图片相关联的所述POC和与所述参考图片相关联的所述POC相同的情况下，所述加权预测参数不被从所述视频比特流获取；
接收与所述当前图片相关联的视频块、与该视频块相关联的参考图片索引、与所述视频块相关联的亮度运动向量、以及与所述视频块相关联的色度运动向量，其中所述亮度运动向量具有整数像素精度且所述色度运动向量具有分数像素精度；
基于与所述视频块相关联的所述参考图片索引以及与所述一个或多个参考图片中的一者相关联的所述加权预测参数，确定与所述视频块相关联的加权预测参数；以及
使用所述参考图片索引、与所述视频块相关联的所述亮度运动向量、与所述视频块相关联的所述色度运动向量、以及与所述视频块相关联的所述加权预测参数，重构所述视频块。
2.根据权利要求1所述的方法，其中所述视频块被作为帧间译码视频块而被用信令发送。
3.根据权利要求1所述的方法，其中，针对所述一个或多个参考图片中的每一者，在与所述参考图片相关联的所述POC和与所述当前图片相关联的所述POC相同，且与所述参考图片相关联的层标识符ID和与所述当前图片相关联的层ID相同的条件下，与所述参考图片相关联的所述加权预测参数不被从所述视频比特流获取。
4.根据权利要求3所述的方法，其中，针对所述一个或多个参考图片中的每一者，在与所述参考图片相关联的所述POC和与所述当前图片相关联的所述POC相同且与所述参考图片相关联的所述层ID和与所述当前图片相关联的所述层ID不同的条件下，与所述参考图片相关联的所述加权预测参数被从所述视频比特流获取。
5.根据权利要求1所述的方法，该方法还包括：
将与所述当前图片的解码部分相关联的所述一个或多个参考图片中的所述至少一者添加到与所述当前图片相关联的第一参考图片列表；以及
将与所述当前图片的解码部分相关联的所述一个或多个参考图片中的所述至少一者添加到与所述当前图片相关联的第二参考图片列表。
6.根据权利要求5所述的方法，其中所述视频块通过使用双预测模式而被译码。
7.根据权利要求1所述的方法，其中所述确定针对所述一个或多个参考图片中的每一者的所述加权预测参数是在片段级被执行的。
8.一种视频解码设备，该视频解码设备包括：
处理器，被配置成：
接收视频比特流，所述视频比特流包括有关参考图片列表的指示，其中所述参考图片列表包含与当前图片相关联的一个或多个参考图片，且其中所述一个或多个参考图片中的至少一者与所述当前图片的解码部分相关联；
针对所述一个或多个参考图片中的每一者，至少部分基于与所述当前图片相关联的图片顺序号POC和与所述参考图片相关联的POC来确定与所述参考图片相关联的加权预测参数，其中如果与所述当前图片相关联的所述POC和与所述参考图片相关联的所述POC不同，则与所述参考图片相关联的所述加权预测参数被从所述视频比特流获取，且其中至少部分在与所述当前图片相关联的所述POC和与所述参考图片相关联的所述POC相同的情况下，所述加权预测参数不被从所述视频比特流获取；
接收与所述当前图片相关联的视频块、与该视频块相关联的参考图片索引、与所述视频块相关联的亮度运动向量、以及与所述视频块相关联的色度运动向量，其中所述亮度运动向量具有整数像素精度且所述色度运动向量具有分数像素精度；
基于与所述视频块相关联的所述参考图片索引以及与所述一个或多个参考图片中的一者相关联的所述加权预测参数，确定与所述视频块相关联的加权预测参数；以及
使用所述参考图片索引、与所述视频块相关联的所述亮度运动向量、与所述视频块相关联的所述色度运动向量、以及与所述视频块相关联的所述加权预测参数，重构所述视频块。
9.根据权利要求8所述的视频解码设备，其中所述视频块被作为帧间译码视频块而被用信令发送。
10.根据权利要求8所述的视频解码设备，其中，针对所述一个或多个参考图片中的每一者，所述处理器被配置为：在与所述参考图片相关联的所述POC和与所述当前图片相关联的所述POC相同，且与所述参考图片相关联的层标识符ID和与所述当前图片相关联的层ID相同的条件下，不获取与所述参考图片相关联的所述加权预测参数。
11.根据权利要求10所述的视频解码设备，其中，针对所述一个或多个参考图片中的每一者，所述处理器被配置为：在与所述参考图片相关联的所述POC和与所述当前图片相关联的所述POC相同且与所述参考图片相关联的所述层ID和与所述当前图片相关联的所述层ID不同的条件下，从所述视频比特流获取与所述参考图片相关联的所述加权预测参数。
12.根据权利要求8所述的视频解码设备，其中，所述处理器还被配置为：
将与所述当前图片的解码部分相关联的所述一个或多个参考图片中的所述至少一者添加到与所述当前图片相关联的第一参考图片列表；以及
将与所述当前图片的解码部分相关联的所述一个或多个参考图片中的所述至少一者添加到与所述当前图片相关联的第二参考图片列表。
13.根据权利要求12所述的视频解码设备，其中所述视频块通过使用双预测模式而被译码。
14.根据权利要求8所述的视频解码设备，其中所述处理器被配置成在片段级确定针对所述一个或多个参考图片中的每一者的所述加权预测参数。
15.一种用于对视频进行编码的方法，所述方法包括：
将关于参考图片列表的指示添加到视频比特流，其中所述参考图片列表包括与当前图片相关联的一个或多个参考图片，且其中所述一个或多个参考图片中的至少一者与所述当前图片的解码部分相关联；
对于所述一个或多个参考图片中的每个参考图片，至少部分地基于与所述当前图片相关联的图片顺序号POC以及与所述参考图片相关联的POC，确定是否将与所述参考图片相关联的加权预测参数包括在所述视频比特流中，其中，在与所述参考图片相关联的所述POC不同于与所述当前图片相关联的所述POC的条件下，与所述参考图片相关联的所述加权预测参数被包括在所述视频比特流中，并且其中，至少部分地在与所述参考图片相关联的所述POC和与所述当前图片相关联的所述POC相同的条件下，加权预测参数不被包括在所述视频比特流中；
确定与所述当前图片相关联的视频块、与所述视频块相关联的参考图片索引、与所述视频块相关联的亮度运动向量和与所述视频块相关联的色度运动向量，其中所述亮度运动向量具有整数像素精度且所述色度运动向量具有分数像素精度；
基于与所述视频块相关联的所述参考图片索引和与所述一个或多个参考图片中的一者相关联的所述加权预测参数，确定与所述视频块相关联的加权预测参数；以及
使用所述参考图片索引、与所述视频块相关联的所述亮度运动向量、与所述视频块相关联的所述色度运动向量和与所述视频块相关联的所述加权预测参数来处理所述视频块。
16.一种视频编码设备，包括：
处理器，被配置为：
将关于参考图片列表的指示添加到视频比特流，其中所述参考图片列表包括与当前图片相关联的一个或多个参考图片，且其中所述一个或多个参考图片中的至少一者与所述当前图片的解码部分相关联；
对于所述一个或多个参考图片中的每个参考图片，至少部分地基于与所述当前图片相关联的图片顺序号POC以及与所述参考图片相关联的POC，确定是否将与所述参考图片相关联的加权预测参数包括在所述视频比特流中，其中，在与所述参考图片相关联的所述POC不同于与所述当前图片相关联的所述POC的条件下，与所述参考图片相关联的所述加权预测参数被包括在所述视频比特流中，并且其中，至少部分地在与所述参考图片相关联的所述POC和与所述当前图片相关联的所述POC相同的条件下，加权预测参数不被包括在所述视频比特流中；
确定与所述当前图片相关联的视频块、与所述视频块相关联的参考图片索引、与所述视频块相关联的亮度运动向量和与所述视频块相关联的色度运动向量，其中所述亮度运动向量具有整数像素精度且所述色度运动向量具有分数像素精度；
基于与所述视频块相关联的所述参考图片索引和与所述一个或多个参考图片中的一者相关联的所述加权预测参数，确定与所述视频块相关联的加权预测参数；以及
使用所述参考图片索引、与所述视频块相关联的所述亮度运动向量、与所述视频块相关联的所述色度运动向量和与所述视频块相关联的所述加权预测参数来处理所述视频块。
17.一种计算机可读介质，包括用于使一个或多个处理器执行根据权利要求1-7或权利要求15中任一项所述的方法的步骤的指令。
CN201680033424.5A 2015-06-08 2016-06-08 用于屏幕内容译码的帧内块复制模式 Active CN107646195B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210630036.2A CN115118973A (zh) 2015-06-08 2016-06-08 用于屏幕内容译码的帧内块复制模式

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201562172645P 2015-06-08 2015-06-08
US62/172,645 2015-06-08
US201562241708P 2015-10-14 2015-10-14
US62/241,708 2015-10-14
US201662297736P 2016-02-19 2016-02-19
US62/297,736 2016-02-19
PCT/US2016/036497 WO2016200984A1 (en) 2015-06-08 2016-06-08 Intra block copy mode for screen content coding

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202210630036.2A Division CN115118973A (zh) 2015-06-08 2016-06-08 用于屏幕内容译码的帧内块复制模式

Publications (2)

Publication Number Publication Date
CN107646195A CN107646195A (zh) 2018-01-30
CN107646195B true CN107646195B (zh) 2022-06-24

Family

ID=56148729

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202210630036.2A Pending CN115118973A (zh) 2015-06-08 2016-06-08 用于屏幕内容译码的帧内块复制模式
CN201680033424.5A Active CN107646195B (zh) 2015-06-08 2016-06-08 用于屏幕内容译码的帧内块复制模式

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202210630036.2A Pending CN115118973A (zh) 2015-06-08 2016-06-08 用于屏幕内容译码的帧内块复制模式

Country Status (7)

Country Link
US (3) US10306240B2 (zh)
EP (2) EP3304907B1 (zh)
JP (3) JP6722701B2 (zh)
KR (4) KR102658290B1 (zh)
CN (2) CN115118973A (zh)
TW (3) TWI816224B (zh)
WO (1) WO2016200984A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11570447B2 (en) 2018-12-28 2023-01-31 Hangzhou Hikvision Digital Technology Co., Ltd. Video coding and video decoding

Families Citing this family (107)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10178403B2 (en) * 2015-06-23 2019-01-08 Qualcomm Incorporated Reference picture list construction in intra block copy mode
GB2547053B (en) * 2016-02-08 2020-07-08 Canon Kk Methods, devices, and computer programs for combining the use of intra-layer prediction and inter-layer prediction with scalability & screen content features
GB2547052B (en) * 2016-02-08 2020-09-16 Canon Kk Methods, devices and computer programs for encoding and/or decoding images in video bit-streams using weighted predictions
US20170244966A1 (en) * 2016-02-20 2017-08-24 Qualcomm Incorporated Weighted prediction for screen content coding and multi-layer coding
CN117499649A (zh) * 2016-04-29 2024-02-02 英迪股份有限公司 图像解码装置、图像编码装置和用于发送比特流的装置
US10805631B2 (en) * 2016-09-23 2020-10-13 Lg Electronics Inc. Method and apparatus for performing prediction using template-based weight
FI127556B (en) 2017-02-06 2018-09-14 Teknologian Tutkimuskeskus Vtt Oy Respiratory analysis method and apparatus
US10674159B2 (en) 2017-07-28 2020-06-02 Microsoft Technology Licensing, Llc Effective intra encoding for screen data
CN107277509B (zh) * 2017-08-03 2019-10-25 重庆邮电大学 一种基于屏幕内容的快速帧内预测方法
KR20200095463A (ko) * 2017-11-01 2020-08-10 브이아이디 스케일, 인크. 병합 모드를 위한 서브-블록 모션 도출 및 디코더측 모션 벡터 정교화
EP3496401A1 (en) * 2017-12-05 2019-06-12 Thomson Licensing Method and apparatus for video encoding and decoding based on block shape
US10986349B2 (en) * 2017-12-29 2021-04-20 Microsoft Technology Licensing, Llc Constraints on locations of reference blocks for intra block copy prediction
US10687071B2 (en) * 2018-02-05 2020-06-16 Tencent America LLC Method and apparatus for video coding
US11012715B2 (en) * 2018-02-08 2021-05-18 Qualcomm Incorporated Intra block copy for video coding
GB2588003B (en) 2018-06-05 2023-04-19 Beijing Bytedance Network Tech Co Ltd Interaction between pairwise average merging candidates and IBC
CN110620933B (zh) 2018-06-19 2022-05-31 北京字节跳动网络技术有限公司 不同参考列表的不同精度
WO2019244117A1 (en) 2018-06-21 2019-12-26 Beijing Bytedance Network Technology Co., Ltd. Unified constrains for the merge affine mode and the non-merge affine mode
WO2019244118A1 (en) 2018-06-21 2019-12-26 Beijing Bytedance Network Technology Co., Ltd. Component-dependent sub-block dividing
US11190764B2 (en) * 2018-07-06 2021-11-30 Qualcomm Incorporated Merged mode dependent intra smoothing (MDIS) and intra interpolation filter switching with position dependent intra prediction combination (PDPC)
MX2021002396A (es) * 2018-08-28 2021-05-12 Huawei Tech Co Ltd Metodo y aparato de particion de imagenes.
PT3834415T (pt) * 2018-09-07 2023-11-07 Huawei Tech Co Ltd Método e aparelho para filtragem de interpolação para predição intra e inter em codificação de vídeo
CN110933412B (zh) 2018-09-19 2023-07-25 北京字节跳动网络技术有限公司 用于帧内块复制的基于历史的运动矢量预测值
TWI815967B (zh) 2018-09-19 2023-09-21 大陸商北京字節跳動網絡技術有限公司 仿射模式編解碼的模式相關自適應調整運動矢量分辨率
US10848782B2 (en) * 2018-09-21 2020-11-24 Tencent America LLC Method and apparatus for video coding
EP3854089A1 (en) 2018-09-21 2021-07-28 Vid Scale, Inc. Complexity reduction and bit-width control for bi-directional optical flow
WO2020065518A1 (en) 2018-09-24 2020-04-02 Beijing Bytedance Network Technology Co., Ltd. Bi-prediction with weights in video coding and decoding
TW202029755A (zh) * 2018-09-26 2020-08-01 美商Ｖｉｄ衡器股份有限公司 視訊編碼雙預測
KR20200040179A (ko) 2018-10-08 2020-04-17 에스케이텔레콤 주식회사 현재 픽처 참조 모드를 이용한 예측 방법 및 영상 복호화 장치
CN111083491A (zh) 2018-10-22 2020-04-28 北京字节跳动网络技术有限公司 细化运动矢量的利用
CN112970262B (zh) 2018-11-10 2024-02-20 北京字节跳动网络技术有限公司 三角预测模式中的取整
WO2020098643A1 (en) 2018-11-12 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Simplification of combined inter-intra prediction
US11178396B2 (en) 2018-11-14 2021-11-16 Tencent America LLC Constrained intra prediction and unified most probable mode list generation
KR20210089149A (ko) * 2018-11-16 2021-07-15 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 인터 및 인트라 통합 예측 모드 가중치
EP3861742A4 (en) 2018-11-20 2022-04-13 Beijing Bytedance Network Technology Co., Ltd. DIFFERENCE CALCULATION BASED ON SPATIAL POSITION
CN113196772A (zh) * 2018-11-29 2021-07-30 北京字节跳动网络技术有限公司 块内拷贝模式和基于子块的运动矢量预测模式之间的交互
CN113228637A (zh) * 2018-12-17 2021-08-06 北京字节跳动网络技术有限公司 依赖于形状的插值滤波器
US20220078453A1 (en) * 2018-12-21 2022-03-10 Samsung Electronics Co., Ltd. Encoding method and device thereof, and decoding method and device thereof
CN113273203B (zh) * 2018-12-22 2024-03-12 北京字节跳动网络技术有限公司 两步交叉分量预测模式
EP3906672A1 (en) * 2018-12-31 2021-11-10 VID SCALE, Inc. Combined inter and intra prediction
KR20230164752A (ko) 2019-01-02 2023-12-04 엘지전자 주식회사 디블록킹 필터링을 사용하는 영상 코딩 방법 및 장치
US20220086475A1 (en) * 2019-01-09 2022-03-17 Lg Electronics Inc. Method and device for signaling whether tmvp candidate is available
WO2020147747A1 (en) 2019-01-15 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Weighted prediction in video coding
WO2020147804A1 (en) 2019-01-17 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Use of virtual candidate prediction and weighted prediction in video processing
EP3895429A4 (en) 2019-01-31 2022-08-10 Beijing Bytedance Network Technology Co., Ltd. CONTEXT FOR CODE AN ADAPTIVE MOTION VECTOR RESOLUTION IN AFFINE MODE
CN113475079A (zh) * 2019-02-01 2021-10-01 北京字节跳动网络技术有限公司 环路整形和帧内块复制之间的相互作用
MX2021008963A (es) 2019-02-02 2021-08-24 Beijing Bytedance Network Tech Co Ltd Manejo de bufer para copia intra-bloque en codificacion de video.
CN113366846A (zh) * 2019-02-02 2021-09-07 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的缓冲区更新
CN113647109A (zh) * 2019-02-17 2021-11-12 北京字节跳动网络技术有限公司 帧内块复制（ibc）模式和非ibc帧间模式的运动候选列表构建
US11632563B2 (en) * 2019-02-22 2023-04-18 Qualcomm Incorporated Motion vector derivation in video coding
AU2020226567A1 (en) * 2019-02-24 2021-09-23 Beijing Bytedance Network Technology Co., Ltd. Joint coding of palette mode usage indication
WO2020173482A1 (en) * 2019-02-27 2020-09-03 Beijing Bytedance Network Technology Co., Ltd. Motion vector coding for screen content coding
WO2020177662A1 (en) * 2019-03-01 2020-09-10 Beijing Bytedance Network Technology Co., Ltd. Implementation aspects in intra block copy in video coding
EP3915265A4 (en) 2019-03-01 2022-06-22 Beijing Bytedance Network Technology Co., Ltd. DIRECTION-BASED PREDICTION FOR INTRA BLOCK COPY IN VIDEO CODING
EP3915252A4 (en) * 2019-03-04 2022-03-23 Beijing Bytedance Network Technology Co., Ltd. IMPLEMENTATION OF ASPECTS IN AN INTRA BLOCK COPY IN VIDEO ENCODING
WO2020177756A1 (en) 2019-03-06 2020-09-10 Beijing Bytedance Network Technology Co., Ltd. Size dependent inter coding
SG11202109482PA (en) * 2019-03-08 2021-09-29 Beijing Bytedance Network Technology Co Ltd Joint coding of palette mode usage indication
CN113545080A (zh) 2019-03-11 2021-10-22 松下电器（美国）知识产权公司 编码装置、解码装置、编码方法和解码方法
CN117499644A (zh) 2019-03-14 2024-02-02 北京字节跳动网络技术有限公司 环路整形信息的信令和语法
JP7307191B2 (ja) 2019-04-01 2023-07-11 北京字節跳動網絡技術有限公司 履歴に基づく動きベクトル予測のための補間フィルタの使用
SG11202110936PA (en) 2019-04-12 2021-11-29 Beijing Bytedance Network Technology Co Ltd Chroma coding mode determination based on matrix-based intra prediction
CN113812150B (zh) * 2019-05-01 2023-11-28 北京字节跳动网络技术有限公司 使用滤波的基于矩阵的帧内预测
US11394990B2 (en) 2019-05-09 2022-07-19 Tencent America LLC Method and apparatus for signaling predictor candidate list size
KR102596735B1 (ko) * 2019-05-16 2023-11-01 후아웨이 테크놀러지 컴퍼니 리미티드 루마 및 크로마 성분에 대한 ibc 전용 버퍼 및 디폴트 값 리프레싱을 사용하는 인코더, 디코더 및 대응하는 방법들
WO2020232355A1 (en) * 2019-05-16 2020-11-19 Bytedance Inc. Intra block copy for screen content coding
JP7332721B2 (ja) * 2019-05-25 2023-08-23 北京字節跳動網絡技術有限公司 イントラブロックコピー符号化ブロックにおけるブロックベクトルの符号化
CN113906752A (zh) 2019-05-30 2022-01-07 联发科技股份有限公司 视频编码系统中用以决定去块滤波决策的视频处理方法和装置
CN113924775B (zh) * 2019-05-31 2023-11-14 北京字节跳动网络技术有限公司 基于矩阵的帧内预测中的限制的上采样
WO2020244610A1 (en) 2019-06-05 2020-12-10 Beijing Bytedance Network Technology Co., Ltd. Context determination for matrix-based intra prediction
CN113966612A (zh) * 2019-06-16 2022-01-21 北京字节跳动网络技术有限公司 屏幕内容编解码根据与运动信息之间的相互作用
JP7338262B2 (ja) * 2019-06-21 2023-09-05 株式会社Ｊｖｃケンウッド 画像符号化装置、画像符号化方法及び画像符号化プログラム
BR112021025916A2 (pt) 2019-06-28 2022-02-15 Bytedance Inc Método de processamento de dados de vídeo, aparelho para processar dados de vídeo, meio de armazenamento e meio de gravação não transitórios legíveis por computador
JP2022539468A (ja) 2019-07-06 2022-09-09 北京字節跳動網絡技術有限公司 映像符号化におけるイントラブロックコピーのための仮想予測バッファ
KR20220030953A (ko) 2019-07-09 2022-03-11 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 적응적 루프 필터링을 위한 샘플 결정
CN114175633B (zh) 2019-07-10 2023-12-29 北京字节跳动网络技术有限公司 用于视频编解码中的帧内块复制的样点标识
WO2021004495A1 (en) * 2019-07-10 2021-01-14 Beijing Bytedance Network Technology Co., Ltd. Sample identification for intra block copy in video coding
KR20220030957A (ko) * 2019-07-11 2022-03-11 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩에서 인트라 블록 카피를 위한 비트스트림 적합 제약
JP7359936B2 (ja) 2019-07-20 2023-10-11 北京字節跳動網絡技術有限公司 パレットモードの使用の指示の条件依存符号化
CN114145013B (zh) 2019-07-23 2023-11-14 北京字节跳动网络技术有限公司 调色板模式编解码的模式确定
EP3991423A4 (en) 2019-07-25 2022-09-07 Beijing Bytedance Network Technology Co., Ltd. MAPPING RESTRICTION FOR INTRABLOC COPY VIRTUAL BUFFER
WO2021013239A1 (en) * 2019-07-25 2021-01-28 Beijing Bytedance Network Technology Co., Ltd. Size restriction for intra-block copy virtual buffer
WO2021018167A1 (en) 2019-07-29 2021-02-04 Beijing Bytedance Network Technology Co., Ltd. Palette mode coding in prediction process
WO2021025416A1 (ko) * 2019-08-04 2021-02-11 엘지전자 주식회사 신택스 결합을 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
WO2021023262A1 (en) 2019-08-06 2021-02-11 Beijing Bytedance Network Technology Co., Ltd. Using screen content coding tool for video encoding and decoding
EP3997872A4 (en) 2019-08-14 2022-10-26 Beijing Bytedance Network Technology Co., Ltd. WEIGHTING FACTORS FOR FILTERING PREDICTION SAMPLES IN INTRA MODE
WO2021027925A1 (en) 2019-08-14 2021-02-18 Beijing Bytedance Network Technology Co., Ltd. Position-dependent intra prediction sample filtering
US11595642B2 (en) 2019-08-14 2023-02-28 Lg Electronics Inc. Image encoding/decoding method and apparatus for determining prediction mode of chroma block by referring to luma sample position, and method for transmitting bitstream
CN114270825A (zh) 2019-08-19 2022-04-01 北京字节跳动网络技术有限公司 基于计数器的帧内预测模式的初始化
CN114270856A (zh) 2019-08-20 2022-04-01 北京字节跳动网络技术有限公司 视频处理中的备选插值滤波器的选择性使用
US11218718B2 (en) * 2019-08-26 2022-01-04 Tencent America LLC Adaptive motion vector resolution signaling
CN114303382A (zh) 2019-09-01 2022-04-08 北京字节跳动网络技术有限公司 视频编解码中预测权重的对准
CN114342400A (zh) 2019-09-02 2022-04-12 北京字节跳动网络技术有限公司 基于色彩格式的编解码模式确定
WO2021043299A1 (en) 2019-09-05 2021-03-11 Beijing Bytedance Network Technology Co., Ltd. Range constrains for block vector in intra-block copy mode
CN114365488A (zh) 2019-09-09 2022-04-15 北京字节跳动网络技术有限公司 视频编解码块的递归划分
CN117615155A (zh) 2019-09-19 2024-02-27 北京字节跳动网络技术有限公司 视频编解码中的参考样点位置推导
KR102649584B1 (ko) 2019-09-21 2024-03-21 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 크로마 인트라 모드에 기초한 크기 제한
EP4018652A4 (en) 2019-09-22 2022-11-02 Beijing Bytedance Network Technology Co., Ltd. FILLING METHOD IN AN ADAPTIVE LOOP FILTER
CN117459723A (zh) 2019-09-23 2024-01-26 北京字节跳动网络技术有限公司 基于虚拟管线数据单元设置帧内块复制虚拟缓冲区
CN114450954A (zh) 2019-09-27 2022-05-06 北京字节跳动网络技术有限公司 不同视频单元之间的自适应环路滤波
EP4026336A4 (en) * 2019-10-05 2022-12-07 Beijing Bytedance Network Technology Co., Ltd. LEVEL-BASED SIGNALING OF VIDEO CODING TOOLS
WO2021068906A1 (en) 2019-10-10 2021-04-15 Beijing Bytedance Network Technology Co., Ltd. Padding process at unavailable sample locations in adaptive loop filtering
WO2021072379A1 (en) * 2019-10-11 2021-04-15 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatus of video coding in 4:4:4 chroma format
US11356698B2 (en) 2019-12-30 2022-06-07 Tencent America LLC Method for parameter set reference constraints in coded video stream
CN115362674A (zh) 2020-03-18 2022-11-18 抖音视界有限公司 帧内块复制缓冲区和调色板预测值更新
US20230188713A1 (en) * 2020-06-04 2023-06-15 Interdigital Vc Holdings France, Sas Neural network based filter in video coding
CN111669581B (zh) * 2020-06-09 2022-12-20 浙江大华技术股份有限公司 视频编码方法及其相关装置
US11979560B2 (en) * 2021-08-25 2024-05-07 Tencent America LLC Intra block copy with an adaptive local reference range
CN114125442B (zh) * 2022-01-29 2022-05-03 腾讯科技（深圳）有限公司 屏幕视频编码模式确定方法、编码方法、装置和计算设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101335902A (zh) * 2007-06-25 2008-12-31 华为技术有限公司 色度补偿方法和装置
CN102104781A (zh) * 2009-12-18 2011-06-22 联咏科技股份有限公司 图像解码器
CN103581690A (zh) * 2012-08-09 2014-02-12 联发科技（新加坡）私人有限公司 视频译码方法、视频译码器、视频编码方法和视频编码器

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7403660B2 (en) * 2003-04-30 2008-07-22 Nokia Corporation Encoding picture arrangement parameter in picture bitstream
JP4834590B2 (ja) 2007-03-28 2011-12-14 株式会社東芝 動画像復号化装置及び動画像復号化方法
EP2445214A1 (en) 2010-10-19 2012-04-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Video coding using temporally coherent dynamic range mapping
US20140321551A1 (en) * 2011-10-21 2014-10-30 Dolby Laboratories Licensing Corporation Weighted predictions based on motion information
KR101418096B1 (ko) * 2012-01-20 2014-07-16 에스케이 텔레콤주식회사 가중치예측을 이용한 영상 부호화/복호화 방법 및 장치
US10200709B2 (en) * 2012-03-16 2019-02-05 Qualcomm Incorporated High-level syntax extensions for high efficiency video coding
US10390041B2 (en) 2012-03-30 2019-08-20 Sun Patent Trust Predictive image coding and decoding using two reference pictures
US9143781B2 (en) * 2012-04-03 2015-09-22 Qualcomm Incorporated Weighted prediction parameter coding
GB2501535A (en) * 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US10375405B2 (en) * 2012-10-05 2019-08-06 Qualcomm Incorporated Motion field upsampling for scalable coding based on high efficiency video coding
US20140198846A1 (en) 2013-01-16 2014-07-17 Qualcomm Incorporated Device and method for scalable coding of video information
US10015515B2 (en) 2013-06-21 2018-07-03 Qualcomm Incorporated Intra prediction from a predictive block
US20150016533A1 (en) 2013-07-12 2015-01-15 Qualcomm Incorporated Intra motion compensation extensions
US9503715B2 (en) * 2013-08-30 2016-11-22 Qualcomm Incorporated Constrained intra prediction in video coding
US20150071357A1 (en) * 2013-09-12 2015-03-12 Qualcomm Incorporated Partial intra block copying for video coding
AU2013228045A1 (en) * 2013-09-13 2015-04-02 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding video data
MX2016004705A (es) * 2013-10-14 2016-07-18 Microsoft Technology Licensing Llc Caracteristicas del modo de prediccion copia de bloque interno para codificacion y decodificacion de imagen y video.
CN105850126B (zh) * 2013-12-24 2019-03-26 株式会社Kt 用于对多层视频信号进行编码/解码的方法和装置
US20150271515A1 (en) * 2014-01-10 2015-09-24 Qualcomm Incorporated Block vector coding for intra block copy in video coding
CN106416243B (zh) 2014-02-21 2019-05-03 联发科技（新加坡）私人有限公司 利用基于帧内图像区块复制预测的视频编码方法
US10432928B2 (en) * 2014-03-21 2019-10-01 Qualcomm Incorporated Using a current picture as a reference for video coding
US9924191B2 (en) * 2014-06-26 2018-03-20 Qualcomm Incorporated Filters for advanced residual prediction in video coding
US9918105B2 (en) 2014-10-07 2018-03-13 Qualcomm Incorporated Intra BC and inter unification
US20170099490A1 (en) * 2015-10-02 2017-04-06 Qualcomm Incorporated Constrained intra-prediction for block copy mode

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101335902A (zh) * 2007-06-25 2008-12-31 华为技术有限公司 色度补偿方法和装置
CN102104781A (zh) * 2009-12-18 2011-06-22 联咏科技股份有限公司 图像解码器
CN103581690A (zh) * 2012-08-09 2014-02-12 联发科技（新加坡）私人有限公司 视频译码方法、视频译码器、视频编码方法和视频编码器

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"Non-CE2 Test1: Intra block copy and inter signalling unification";Chao Pang ET AL;《Joint Collaborative Team on Video Coding (JCT-VC)of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 1120th Meeting: Geneva, CH, 10–18 Feb. 2015》;20150218;第1-3页 *
"Weighted Prediction";Philippe Bordes;《Joint Collaborative Team on Video Coding (JCT-VC)of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG116th Meeting: Torino, IT, 14-22 July, 2011》;20110722;第1-3页 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11570447B2 (en) 2018-12-28 2023-01-31 Hangzhou Hikvision Digital Technology Co., Ltd. Video coding and video decoding

Also Published As

Publication number Publication date
JP2018524872A (ja) 2018-08-30
KR20220051441A (ko) 2022-04-26
EP4040791A1 (en) 2022-08-10
US20210250592A1 (en) 2021-08-12
JP2020162162A (ja) 2020-10-01
CN107646195A (zh) 2018-01-30
WO2016200984A8 (en) 2017-06-22
CN115118973A (zh) 2022-09-27
KR20210019610A (ko) 2021-02-22
TWI750637B (zh) 2021-12-21
US20190238864A1 (en) 2019-08-01
KR102658290B1 (ko) 2024-04-16
JP7253519B2 (ja) 2023-04-06
TWI816224B (zh) 2023-09-21
WO2016200984A1 (en) 2016-12-15
EP3304907B1 (en) 2022-03-23
TW202215848A (zh) 2022-04-16
US20160360210A1 (en) 2016-12-08
KR102216947B1 (ko) 2021-02-18
JP2023093464A (ja) 2023-07-04
US11006130B2 (en) 2021-05-11
TW201709738A (zh) 2017-03-01
US10306240B2 (en) 2019-05-28
KR102390073B1 (ko) 2022-04-25
KR20230080497A (ko) 2023-06-07
EP3304907A1 (en) 2018-04-11
KR20180026396A (ko) 2018-03-12
TW202037172A (zh) 2020-10-01
JP6722701B2 (ja) 2020-07-15
KR102539009B1 (ko) 2023-05-31
TWI694714B (zh) 2020-05-21

Similar Documents

Publication Publication Date Title
CN107646195B (zh) 用于屏幕内容译码的帧内块复制模式
US20220329831A1 (en) Enhanced chroma coding using cross plane filtering
KR101915156B1 (ko) 다수의 레이어 비디오 코딩을 위한 레이어간 참조 화상 강화
KR101840915B1 (ko) 스케일러블 비디오 코딩을 위한 모션 정보 시그널링
US20200336737A1 (en) Method and apparatus for signaling and construction of video coding reference picture lists

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant