CN115152228A - 合并模式、自适应运动向量精度和变换跳过语法 - Google Patents
合并模式、自适应运动向量精度和变换跳过语法 Download PDFInfo
- Publication number
- CN115152228A CN115152228A CN202080094754.1A CN202080094754A CN115152228A CN 115152228 A CN115152228 A CN 115152228A CN 202080094754 A CN202080094754 A CN 202080094754A CN 115152228 A CN115152228 A CN 115152228A
- Authority
- CN
- China
- Prior art keywords
- amvr
- video sequence
- enabled
- indicator
- affine mode
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000033001 locomotion Effects 0.000 title claims abstract description 80
- 239000013598 vector Substances 0.000 title claims abstract description 38
- 230000003044 adaptive effect Effects 0.000 title abstract description 10
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 claims abstract description 317
- 238000000034 method Methods 0.000 claims description 109
- 230000004044 response Effects 0.000 claims description 34
- 238000012545 processing Methods 0.000 claims description 27
- 238000004590 computer program Methods 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 53
- 230000015654 memory Effects 0.000 description 38
- 230000008569 process Effects 0.000 description 31
- 230000006870 function Effects 0.000 description 25
- 238000005516 engineering process Methods 0.000 description 21
- 238000003860 storage Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 14
- 230000011664 signaling Effects 0.000 description 14
- 230000005540 biological transmission Effects 0.000 description 12
- 238000012360 testing method Methods 0.000 description 11
- 230000001413 cellular effect Effects 0.000 description 9
- 238000007726 management method Methods 0.000 description 8
- 230000002093 peripheral effect Effects 0.000 description 8
- 238000013139 quantization Methods 0.000 description 8
- 238000001228 spectrum Methods 0.000 description 8
- 238000005192 partition Methods 0.000 description 7
- 238000005457 optimization Methods 0.000 description 5
- 238000013459 approach Methods 0.000 description 4
- 230000006399 behavior Effects 0.000 description 4
- 239000000969 carrier Substances 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000009466 transformation Effects 0.000 description 4
- 241000023320 Luma <angiosperm> Species 0.000 description 3
- 230000009471 action Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000009795 derivation Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 241000760358 Enodes Species 0.000 description 2
- 101100172132 Mus musculus Eif3a gene Proteins 0.000 description 2
- 230000004913 activation Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000009977 dual effect Effects 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 229910001416 lithium ion Inorganic materials 0.000 description 2
- QELJHCBNGDEXLD-UHFFFAOYSA-N nickel zinc Chemical compound [Ni].[Zn] QELJHCBNGDEXLD-UHFFFAOYSA-N 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 230000003936 working memory Effects 0.000 description 2
- 230000005355 Hall effect Effects 0.000 description 1
- HBBGRARXTFLTSG-UHFFFAOYSA-N Lithium ion Chemical compound [Li+] HBBGRARXTFLTSG-UHFFFAOYSA-N 0.000 description 1
- 241000700159 Rattus Species 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 238000004873 anchoring Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- OJIJEKBXJYRIBZ-UHFFFAOYSA-N cadmium nickel Chemical compound [Ni].[Cd] OJIJEKBXJYRIBZ-UHFFFAOYSA-N 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000009849 deactivation Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- GVVPGTZRZFNKDS-JXMROGBWSA-N geranyl diphosphate Chemical compound CC(C)=CCC\C(C)=C\CO[P@](O)(=O)OP(O)(O)=O GVVPGTZRZFNKDS-JXMROGBWSA-N 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 229910052987 metal hydride Inorganic materials 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 229910052759 nickel Inorganic materials 0.000 description 1
- PXHVJJICTQNCMI-UHFFFAOYSA-N nickel Substances [Ni] PXHVJJICTQNCMI-UHFFFAOYSA-N 0.000 description 1
- -1 nickel metal hydride Chemical class 0.000 description 1
- 229920001690 polydopamine Polymers 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000000411 transmission spectrum Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Mobile Radio Communication Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明公开了一种装置(例如,解码器),该装置可以确定针对视频序列启用仿射模式。该装置可以基于仿射模式自适应运动向量差分辨率(AMVR)启用指示符的值来确定与该视频序列相关联的参数集中是否存在AMVR启用指示符。如果该AMVR启用指示符的该值指示针对该视频序列启用AMVR模式,则该装置可以确定该仿射模式AMVR启用指示符存在于与该视频序列相关联的该参数集中。如果该AMVR启用指示符的该值指示针对该视频序列停用AMVR模式,则该装置可以确定该仿射模式AMVR启用指示符不存在于与该视频序列相关联的该参数集中。该装置可以相应地对该视频序列进行解码。
Description
相关申请的交叉引用
本申请要求2019年12月30日提交的名称为“合并模式、自适应运动向量精度和变换跳过语法(MERGE MODE,ADAPTIVE MOTION VECTOR PRECISION,AND TRANSFORM SKIPSYNTAX)”的欧洲临时专利申请号19306787.3号的优先权,该专利申请全文以引用方式并入,如同在本文完整示出一样。
背景技术
视频编码系统可用于压缩数字视频信号,例如,以减少此类信号所需要的存储和/或传输带宽。视频编码系统可包括基于块的、基于小波的和/或基于对象的系统。可部署基于块的混合视频编码系统。
发明内容
公开了用于自适应运动向量分辨率(AMVR)的系统、方法和工具。装置(例如,解码器)可以确定针对视频序列启用仿射模式。该装置可以基于AMVR启用指示符的值来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中。该装置可以基于确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中来对视频序列进行解码。如果AMVR启用指示符的值指示针对视频序列启用AMVR模式,则该装置可以确定仿射模式AMVR启用指示符存在于与视频序列相关联的参数集中。在示例中,该装置可以响应于确定仿射模式AMVR启用指示符存在于与视频序列相关联的参数集中,获得仿射模式AMVR启用指示符。如果AMVR启用指示符的值指示针对视频序列停用AMVR模式,则该装置可以确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中。在示例中,该装置可以响应于确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中,将仿射模式AMVR启用指示符的值设置为指示在仿射模式被启用的情况下针对视频序列停用AMVR的值。
该装置可以基于通用控制信息(GCI)将AMVR启用指示符的值设置为指示针对该视频序列停用AMVR的值。该装置可以基于指示针对视频序列停用AMVR的AMVR启用指示符的值来确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中。该装置可以将仿射模式AMVR启用指示符的值设置为指示在仿射模式被启用的情况下针对视频序列停用AMVR的值作为响应。
仿射模式AMVR启用指示符可以在与视频序列相关联的参数集中。与视频序列相关联的参数集可包括与视频序列相关联的序列参数集(SPS)。
该装置可以基于仿射模式启用指示符的值而确定针对该视频序列启用仿射模式,且确定仿射模式AMVR启用指示符是否存在于该参数集中的确定可响应于确定针对该视频序列启用仿射模式。仿射模式AMVR启用指示符可以指示是否针对视频序列启用仿射模式和AMVR的组合。
响应于仿射模式AMVR启用指示符指示在仿射模式被启用的情况下针对视频序列启用AMVR,该装置可以基于与视频序列的编码块相关联的编码模式自适应地确定与该编码块相关联的运动向量差的精度。
该装置可以确定针对该视频序列启用帧内块复制(IBC),响应于确定针对该视频序列启用IBC而获得IBC AMVR启用指示符,并基于该IBC AMVR启用指示符而对该视频序列进行解码。
附图说明
图1A是示出在其中一个或多个所公开的实施方案可得以实施的示例性通信系统的系统图。
图1B是根据实施方案的示出可在图1A所示的通信系统内使用的示例性无线发射/接收单元(WTRU)的系统图。
图1C是根据实施方案的示出可在图1A所示的通信系统内使用的示例性无线电接入网络(RAN)和示例性核心网(CN)的系统图。
图1D是根据实施方案的示出可在图1A所示的通信系统内使用的另外一个示例性RAN和另外一个示例性CN的系统图。
图2示出了示例性视频编码器。
图3示出了示例性视频解码器。
图4示出了在其中实现各种方面和示例的系统的示例的框图。
图5示出了确定仿射模式AMVR启用指示符是否存在于参数集中的示例。
图6示出了仿射块的示例性四参数仿射模式模型和子块级运动推导。
图7示出了示例性六参数仿射模式,其中V0、V1和V2是控制点,并且(MVx,MVy)是子块的以位置(x,y)为中心的运动向量。
具体实施方式
现在将参考各种附图来描述例示性实施方案的详细描述。尽管本说明书提供了可能的具体实施的详细示例,但应当指出的是,细节旨在为示例性的,并且绝不限制本申请的范围。
图1A是示出在其中一个或多个所公开的实施方案可得以实现的示例性通信系统500的示意图。通信系统500可为向多个无线用户提供诸如语音、数据、视频、消息、广播等内容的多址接入系统。通信系统500可使多个无线用户能够通过系统资源(包括无线带宽)的共享来访问此类内容。例如,通信系统500可采用一个或多个信道接入方法,诸如码分多址接入(CDMA)、时分多址接入(TDMA)、频分多址接入(FDMA)、正交FDMA(OFDMA)、单载波FDMA(SC-FDMA)、零尾唯一字DFT扩展OFDM(ZT UW DTS-s OFDM)、唯一字OFDM(UW-OFDM)、资源块滤波OFDM、滤波器组多载波(FBMC)等。
如图1A所示,通信系统500可包括无线传输/接收单元(WTRU)502a、502b、502c、502d、RAN 504/513、CN 506/515、公共交换电话网(PSTN)508、互联网510和其他网络512,但应当理解,所公开的实施方案设想了任何数量的WTRU、基站、网络和/或网络元件。WTRU502a、502b、502c、502d中的每一者可以是被配置为在无线环境中操作和/或通信的任何类型的设备。作为示例,WTRU 502a、502b、502c、502d(其中任何一个均可被称为“站”和/或“STA”)可被配置为传输和/或接收无线信号,并且可包括用户装备(UE)、移动站、固定或移动用户单元、基于订阅的单元、寻呼机、蜂窝电话、个人数字助理(PDA)、智能电话、膝上型电脑、上网本、个人计算机、无线传感器、热点或Mi-Fi设备、物联网(IoT)设备、手表或其他可穿戴设备、头戴式显示器(HMD)、车辆、无人机、医疗设备和应用(例如,远程手术)、工业设备和应用(例如,在工业和/或自动处理链环境中操作的机器人和/或其他无线设备)、消费电子设备、在商业和/或工业无线网络上操作的设备等。WTRU 502a、502b、502c和502d中的任一者可互换地称为UE。
通信系统500还可包括基站514a和/或基站514b。基站514a、514b中的每一者可为任何类型的设备,其被配置为与WTRU 502a、502b、502c、502d中的至少一者无线对接以促进对一个或多个通信网络(诸如CN 506/515、互联网510和/或其他网络512)的访问。作为示例,基站514a、514b可为基站收发台(BTS)、节点B、演进节点B、家庭节点B、家庭演进节点B、gNB、NR节点B、站点控制器、接入点(AP)、无线路由器等。虽然基站514a、514b各自被描绘为单个元件,但应当理解,基站514a、514b可包括任何数量的互连基站和/或网络元件。
基站514a可以是RAN 504/513的一部分,该RAN还可包括其他基站和/或网络元件(未示出),诸如基站控制器(BSC)、无线电网络控制器(RNC)、中继节点等。基站514a和/或基站514b可被配置为在一个或多个载波频率(其可被称为小区(未示出))上传输和/或接收无线信号。这些频率可在许可频谱、未许可频谱或许可和未许可频谱的组合中。小区可向特定地理区域提供无线服务的覆盖,该特定地理区域可为相对固定的或可随时间改变。小区可进一步被划分为小区扇区。例如,与基站514a相关联的小区可被划分为三个扇区。因此,在实施方案中,基站514a可包括三个收发器,即,小区的每个扇区一个收发器。在实施方案中,基站514a可采用多输入多输出(MIMO)技术并且可针对小区的每个扇区利用多个收发器。例如,可使用波束成形在所需的空间方向上传输和/或接收信号。
基站514a、514b可通过空中接口516与WTRU 502a、502b、502c、502d中的一者或多者通信,该空中接口可为任何合适的无线通信链路(例如,射频(RF)、微波、厘米波、微米波、红外(IR)、紫外(UV)、可见光等)。可使用任何合适的无线电接入技术(RAT)来建立空中接口516。
更具体地讲,如上所指出,通信系统500可为多址接入系统,并且可采用一个或多个信道接入方案,诸如CDMA、TDMA、FDMA、OFDMA、SC-FDMA等。例如,RAN 504/513中的基站514a和WTRU 502a、502b、502c可实现诸如通用移动电信系统(UMTS)陆地无线电接入(UTRA)之类的无线电技术,其可使用宽带CDMA(WCDMA)来建立空中接口515/516/517。WCDMA可包括诸如高速分组接入(HSPA)和/或演进的HSPA(HSPA+)之类的通信协议。HSPA可包括高速下行链路(DL)分组接入(HSDPA)和/或高速UL分组接入(HSUPA)。
在实施方案中,基站514a和WTRU 502a、502b、502c可实现诸如演进的UMTS陆地无线电接入(E-UTRA)之类的无线电技术,其可使用长期演进(LTE)和/高级LTE(LTE-A)和/或高级LTE Pro(LTE-A Pro)来建立空中接口516。
在实施方案中,基站514a和WTRU 502a、502b、502c可实现诸如NR无线电接入之类的无线电技术,其可使用新无线电(NR)来建立空中接口516。
在实施方案中,基站514a和WTRU 502a、502b、502c可实现多种无线电接入技术。例如,基站514a和WTRU 502a、502b、502c可例如使用双连接(DC)原理一起实现LTE无线电接入和NR无线电接入。因此,WTRU 502a、502b、502c所利用的空中接口可由多种类型的无线电接入技术和/或向/从多种类型的基站(例如,eNB和gNB)发送的传输来表征。
在其他实施方案中,基站514a和WTRU 502a、502b、502c可实现诸如IEEE 802.11(即,无线保真(WiFi))、IEEE 802.16(即,全球微波接入互操作性(WiMAX))、CDMA2000、CDMA2000 1X、CDMA2000 EV-DO、暂行标准2000(IS-2000)、暂行标准95(IS-95)、暂行标准856(IS-856)、全球移动通信系统(GSM)、GSM增强数据率演进(EDGE)、GSM EDGE(GERAN)等无线电技术。
图1A中的基站514b可为例如无线路由器、家庭节点B、家庭演进节点B或接入点,并且可利用任何合适的RAT来促进诸如商业场所、家庭、车辆、校园、工业设施、空中走廊(例如,供无人机使用)、道路等局部区域中的无线连接。在实施方案中,基站514b和WTRU 502c、502d可实现诸如IEEE 802.11之类的无线电技术以建立无线局域网(WLAN)。在实施方案中,基站514b和WTRU 502c、502d可实现诸如IEEE 802.15之类的无线电技术以建立无线个域网(WPAN)。在又一个实施方案中,基站514b和WTRU 502c、502d可利用基于蜂窝的RAT(例如,WCDMA、CDMA2000、GSM、LTE、LTE-A、LTE-A Pro、NR等)来建立微微小区或毫微微小区。如图1A所示,基站514b可具有与互联网510的直接连接。因此,基站514b可不需要经由CN 506/515访问互联网510。
RAN 504/513可与CN 506/515通信,该CN可以是被配置为向WTRU 502a、502b、502c、502d中的一者或多者提供语音、数据、应用和/或互联网协议语音技术(VoIP)服务的任何类型的网络。数据可具有不同的服务质量(QoS)要求,诸如不同的吞吐量要求、延迟要求、误差容限要求、可靠性要求、数据吞吐量要求、移动性要求等。CN 506/515可提供呼叫控制、账单服务、基于移动位置的服务、预付费呼叫、互联网连接、视频分发等,和/或执行高级安全功能,诸如用户认证。尽管未在图1A中示出,但是应当理解,RAN 504/513和/或CN 506/515可与采用与RAN 504/513相同的RAT或不同RAT的其他RAN进行直接或间接通信。例如,除了连接到可利用NR无线电技术的RAN 504/513之外,CN 506/515还可与采用GSM、UMTS、CDMA2000、WiMAX、E-UTRA或WiFi无线电技术的另一RAN(未示出)通信。
CN 506/515也可充当WTRU 502a、502b、502c、502d的网关,以访问PSTN 508、互联网510和/或其他网络512。PSTN 508可包括提供普通老式电话服务(POTS)的电路交换电话网络。互联网510可包括使用常见通信协议(诸如传输控制协议(TCP)、用户数据报协议(UDP)和/或TCP/IP互联网协议组中的互联网协议(IP))的互连计算机网络和设备的全球系统。网络512可包括由其他服务提供商拥有和/或操作的有线和/或无线通信网络。例如,网络512可包括连接到一个或多个RAN的另一个CN,其可采用与RAN 504/513相同的RAT或不同的RAT。
通信系统500中的一些或所有WTRU 502a、502b、502c、502d可包括多模式能力(例如,WTRU 502a、502b、502c、502d可包括用于通过不同无线链路与不同无线网络通信的多个收发器)。例如,图1A所示的WTRU 502c可被配置为与可采用基于蜂窝的无线电技术的基站514a通信,并且与可采用IEEE 802无线电技术的基站514b通信。
图1B是示出示例性WTRU 502的系统图。如图1B所示,WTRU 502可包括处理器518、收发器520、传输/接收元件522、扬声器/麦克风524、小键盘526、显示器/触摸板528、不可移动存储器530、可移动存储器532、电源534、全球定位系统(GPS)芯片组536和/或其他外围设备538等。应当理解,在与实施方案保持一致的同时,WTRU 502可包括前述元件的任何子组合。
处理器518可以是通用处理器、专用处理器、常规处理器、数字信号处理器(DSP)、多个微处理器、与DSP核心相关联的一个或多个微处理器、控制器、微控制器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)电路、任何其他类型的集成电路(IC)、状态机等。处理器518可执行信号编码、数据处理、功率控制、输入/输出处理和/或任何其他功能,这些其他功能使WTRU 502能够在无线环境中工作。处理器518可耦合到收发器520,该收发器可耦合到传输/接收元件522。虽然图1B将处理器518和收发器520描绘为单独的部件,但是应当理解,处理器518和收发器520可在电子封装或芯片中集成在一起。
传输/接收元件522可被配置为通过空中接口516向基站(例如,基站514a)传输信号或从基站接收信号。例如,在一个实施方案中,传输/接收元件522可以是被配置为传输和/或接收RF信号的天线。在一个实施方案中,传输/接收元件522可以是被配置为传输和/或接收例如IR、UV或可见光信号的传输器/检测器。在又一个实施方案中,传输/接收元件522可被配置为传输和/或接收RF和光信号。应当理解,传输/接收元件522可被配置为传输和/或接收无线信号的任何组合。
尽管传输/接收元件522在图1B中被描绘为单个元件,但是WTRU 502可包括任何数量的传输/接收元件522。更具体地讲,WTRU 502可采用MIMO技术。因此,在实施方案中,WTRU502可包括用于通过空中接口516传输和接收无线信号的两个或更多个传输/接收元件522(例如,多个天线)。
收发器520可被配置为调制将由传输/接收元件522传输的信号并且解调由传输/接收元件522接收的信号。如上所指出,WTRU 502可具有多模式能力。例如,因此,收发器520可包括多个收发器,以便使WTRU 502能够经由多种RAT(诸如NR和IEEE 802.11)进行通信。
WTRU 502的处理器518可耦合到扬声器/麦克风524、小键盘526和/或显示器/触摸板528(例如,液晶显示器(LCD)显示单元或有机发光二极管(OLED)显示单元)并且可从其接收用户输入数据。处理器518还可将用户数据输出到扬声器/麦克风524、小键盘526和/或显示器/触摸板528。此外,处理器518可从任何类型的合适存储器(诸如不可移动存储器530和/或可移动存储器532)访问信息,并且将数据存储在任何类型的合适存储器中。不可移动存储器530可包括随机存取存储器(RAM)、只读存储器(ROM)、硬盘或任何其他类型的存储器存储设备。可移动存储器532可包括用户身份模块(SIM)卡、记忆棒、安全数字(SD)存储卡等。在其他实施方案中,处理器518可从未物理上定位在WTRU 502上(诸如,服务器或家用计算机(未示出)上)的存储器访问信息,并且将数据存储在该存储器中。
处理器518可从电源534接收电力,并且可被配置为向WTRU 502中的其他部件分配和/或控制电力。电源534可以是用于为WTRU 502供电的任何合适的设备。例如,电源534可包括一个或多个干电池组(例如,镍镉(NiCd)、镍锌(NiZn)、镍金属氢化物(NiMH)、锂离子(Li-ion)等)、太阳能电池、燃料电池等。
处理器518还可耦合到GPS芯片组536,该GPS芯片组可被配置为提供关于WTRU 502的当前位置的位置信息(例如,经度和纬度)。除了来自GPS芯片组536的信息之外或代替该信息,WTRU 502可通过空中接口516从基站(例如,基站514a、514b)接收位置信息和/或基于从两个或更多个附近基站接收到信号的定时来确定其位置。应当理解,在与实施方案保持一致的同时,该WTRU 502可通过任何合适的位置确定方法来获取位置信息。
处理器518还可耦合到其他外围设备538,该其他外围设备可包括提供附加特征、功能和/或有线或无线连接的一个或多个软件模块和/或硬件模块。例如,外围设备538可包括加速度计、电子指南针、卫星收发器、数字相机(用于照片和/或视频)、通用串行总线(USB)端口、振动设备、电视收发器、免提耳麦、模块、调频(FM)无线电单元、数字音乐播放器、媒体播放器、视频游戏播放器模块、互联网浏览器、虚拟现实和/或增强现实(VR/AR)设备、活动跟踪器等。外围设备538可包括一个或多个传感器,该传感器可为以下一者或多者:陀螺仪、加速度计、霍尔效应传感器、磁力计、方位传感器、接近传感器、温度传感器、时间传感器;地理位置传感器;测高计、光传感器、触摸传感器、磁力计、气压计、手势传感器、生物识别传感器和/或湿度传感器。
WTRU 502可包括全双工无线电台,对于该全双工无线电台,一些或所有信号的传输和接收(例如,与用于UL(例如,用于传输)和下行链路(例如,用于接收)的特定子帧相关联)可为并发的和/或同时的。全双工无线电台可包括干扰管理单元,该干扰管理单元用于经由硬件(例如,扼流圈)或经由处理器(例如,单独的处理器(未示出)或经由处理器518)进行的信号处理来减少和/或基本上消除自干扰。在实施方案中,WTRU 502可包括半双工无线电台,对于该半双工无线电台,一些或所有信号的传输和接收(例如,与用于UL(例如,用于传输)或下行链路(例如,用于接收)的特定子帧相关联)可为并发的和/或同时的。
图1C是示出根据一个实施方案的RAN 504和CN 506的系统图。如上所述,RAN 504可采用E-UTRA无线电技术通过空中接口516与WTRU 502a、502b、502c通信。RAN 504还可与CN 506通信。
RAN 504可包括演进节点B 560a、560b、560c,但是应当理解,RAN 504可包括任何数量的演进节点B,同时保持与实施方案一致。演进节点B 560a、560b、560c各自可包括一个或多个收发器以便通过空中接口516与WTRU 502a、502b、502c通信。在实施方案中,演进节点B 560a、560b、560c可实现MIMO技术。因此,演进节点B 560a例如可使用多个天线来向WTRU 502a传输无线信号和/或从WTRU 502a接收无线信号。
演进节点B 560a、560b、560c中的每一者可与特定小区(未示出)相关联,并且可被配置为处理无线电资源管理决策、切换决策、UL和/或DL中的用户的调度等。如图1C所示,演进节点B 560a、560b、560c可通过X2接口彼此通信。
图1C所示的CN 506可包括移动性管理实体(MME)562、服务网关(SGW)564和分组数据网络(PDN)网关(或PGW)566。虽然前述元件中的每一者被描绘为CN 506的一部分,但是应当理解,这些元件中的任一者可由除CN运营商之外的实体拥有和/或操作。
MME 562可经由S1接口连接到RAN 504中的演进节点B 562a、562b、562c中的每一者,并且可用作控制节点。例如,MME 562可负责认证WTRU 502a、502b、502c的用户、承载激活/去激活、在WTRU 502a、502b、502c的初始附加期间选择特定服务网关等。MME 562可提供用于在RAN 504和采用其他无线电技术(诸如GSM和/或WCDMA)的其他RAN(未示出)之间进行切换的控制平面功能。
SGW 564可经由S1接口连接到RAN 504中的演进节点B 560a、560b、560c中的每一者。SGW 564通常可向/从WTRU 502a、502b、502c路由和转发用户数据分组。SGW 564可执行其他功能,诸如在演进节点B间切换期间锚定用户平面、当DL数据可用于WTRU 502a、502b、502c时触发寻呼、管理和存储WTRU 502a、502b、502c的上下文等。
SGW 564可连接到PGW 566,该PGW可向WTRU 502a、502b、502c提供对分组交换网络(诸如互联网510)的访问,以促进WTRU 502a、502b、502c和启用IP的设备之间的通信。
CN 506可有利于与其他网络的通信。例如,CN 506可为WTRU 502a、502b、502c提供对电路交换网络(诸如,PSTN 508)的访问,以有利于WTRU 502a、502b、502c与传统传统陆线通信设备之间的通信。例如,CN 506可包括用作CN 506与PSTN 508之间的接口的IP网关(例如,IP多媒体子系统(IMS)服务器)或者可与该IP网关通信。另外,CN 506可向WTRU 502a、502b、502c提供对其他网络512的访问,该其他网络可包括由其他服务提供商拥有和/或运营的其他有线和/或无线网络。
尽管WTRU在图1A至图1D中被描述为无线终端,但是可以设想到,在某些代表性实施方案中,这种终端可(例如,临时或永久)使用与通信网络的有线通信接口。
在代表性实施方案中,其他网络512可为WLAN。
处于基础结构基本服务集(BSS)模式的WLAN可具有用于BSS的接入点(AP)以及与AP相关联的一个或多个站点(STA)。AP可具有至分配系统(DS)或将流量携带至和/或携带流量离开BSS的另一种类型的有线/无线网络的接入或接口。源自BSS外部并通向STA的流量可通过AP到达并且可被传递到STA。源自STA并通向BSS外部的目的地的流量可被发送到AP以被传递到相应目的地。BSS内的STA之间的流量可通过AP发送,例如,其中源STA可向AP发送流量,并且AP可将流量传递到目的地STA。BSS内的STA之间的流量可被视为和/或称为点对点流量。可利用直接链路建立(DLS)在源和目的地STA之间(例如,直接在它们之间)发送点对点流量。在某些代表性实施方案中,DLS可使用802.11e DLS或802.11z隧道DLS(TDLS)。使用独立BSS(IBSS)模式的WLAN可不具有AP,并且IBSS内或使用IBSS的STA(例如,所有STA)可彼此直接通信。IBSS通信模式在本文中有时可称为“ad-hoc”通信模式。
当使用802.11ac基础结构操作模式或相似操作模式时,AP可在固定信道(诸如主信道)上传输信标。主信道可为固定宽度(例如,20MHz宽带宽)或经由信令动态设置的宽度。主信道可为BSS的操作信道,并且可由STA用来建立与AP的连接。在某些代表性实施方案中,可例如在802.11系统中实现载波侦听多路访问/冲突避免(CSMA/CA)。对于CSMA/CA,STA(例如,每个STA)(包括AP)可侦听主信道。如果主信道被特定STA侦听/检测和/或确定为繁忙,则特定STA可退避。一个STA(例如,仅一个站)可在给定BSS中在任何给定时间传输。
高吞吐量(HT)STA可使用40MHz宽的信道进行通信,例如,经由主20MHz信道与相邻或不相邻的20MHz信道的组合以形成40MHz宽的信道。
极高吞吐量(VHT)STA可支持20MHz、40MHz、80MHz和/或160MHz宽的信道。40MHz和/或80MHz信道可通过组合连续的20MHz信道来形成。可通过组合8个连续的20MHz信道,或通过组合两个非连续的80MHz信道(这可被称为80+80配置)来形成160MHz信道。对于80+80配置,在信道编码之后,数据可通过可将数据分成两个流的段解析器。可单独地对每个流进行快速傅里叶逆变换(IFFT)处理和时间域处理。可将这些流映射到两个80MHz信道,并且可通过发射STA来传输数据。在接收STA的接收器处,可颠倒上述用于80+80配置的操作,并且可将组合的数据发送到介质访问控制(MAC)。
802.11af和802.11ah支持低于1GHz的操作模式。相对于802.11n和802.11ac中使用的那些,802.11af和802.11ah中减少了信道操作带宽和载波。802.11af支持电视白空间(TVWS)频谱中的5MHz、10MHz和20MHz带宽,并且802.11ah支持使用非TVWS频谱的1MHz、2MHz、4MHz、8MHz和16MHz带宽。根据代表性实施方案,802.11ah可支持仪表类型控制/机器类型通信,诸如宏覆盖区域中的MTC设备。MTC设备可具有某些能力,例如有限的能力,包括支持(例如,仅支持)某些带宽和/或有限的带宽。MTC设备可包括电池寿命高于阈值(例如,以保持非常长的电池寿命)的电池。
可支持多个信道的WLAN系统以及诸如802.11n、802.11ac、802.11af和802.11ah之类的信道带宽包括可被指定为主信道的信道。主信道可具有等于由BSS中的所有STA支持的最大公共操作带宽的带宽。主信道的带宽可由来自在BSS中操作的所有STA的STA(其支持最小带宽操作模式)设置和/或限制。在802.11ah的示例中,对于支持(例如,仅支持)1MHz模式的STA(例如,MTC型设备),主信道可为1MHz宽,即使AP和BSS中的其他STA支持2MHz、4MHz、8MHz、16MHz和/或其他信道带宽操作模式。载波侦听和/或网络分配向量(NAV)设置可取决于主信道的状态。如果主信道繁忙,例如,由于STA(仅支持1MHz操作模式)正在向AP传输,即使大多数频段保持空闲并且可能可用,整个可用频段也可被视为繁忙。
在美国,可供802.11ah使用的可用频段为902MHz至928MHz。在韩国,可用频段为917.5MHz至923.5MHz。在日本,可用频段为916.5MHz至927.5MHz。802.11ah可用的总带宽为6MHz至26MHz,具体取决于国家代码。
图1D是示出根据一个实施方案的RAN 513和CN 515的系统图。如上所指出,RAN513可采用NR无线电技术通过空中接口516与WTRU 502a、502b、502c通信。RAN 513还可与CN515通信。
RAN 513可包括gNB 580a、580b、580c,但是应当理解,在与实施方案保持一致的同时,RAN 513可包括任何数量的gNB。gNB 580a、580b、580c各自可包括一个或多个收发器以便通过空中接口516与WTRU 502a、502b、502c通信。在实施方案中,gNB 580a、580b、580c可实现MIMO技术。例如,gNB 580a、508b可利用波束成形来向gNB 580a、580b、580c传输信号和/或从gNB 180a、180b、180c接收信号。因此,gNB 580a例如可使用多个天线来向WTRU502a传输无线信号和/或从WTRU 502a接收无线信号。在实施方案中,gNB 580a、580b、580c可实现载波聚合技术。例如,gNB 580a可向WTRU 502a(未示出)传输多个分量载波。这些分量载波的子集可在免许可频谱上,而其余分量载波可在许可频谱上。在实施方案中,gNB580a、580b、580c可实现协作多点(CoMP)技术。例如,WTRU 502a可从gNB 580a和gNB 580b(和/或gNB 580c)接收协作传输。
WTRU 502a、502b、502c可使用与可扩展参数集相关联的传输来与gNB 580a、580b、580c通信。例如,OFDM符号间隔和/或OFDM子载波间隔可因不同传输、不同小区和/或无线传输频谱的不同部分而变化。WTRU 502a、502b、502c可使用各种或可扩展长度的子帧或传输时间间隔(TTI)(例如,包含不同数目的OFDM符号和/或持续变化的绝对时间长度)来与gNB580a、580b、580c通信。
gNB 580a、580b、580c可被配置为以独立配置和/或非独立配置与WTRU 502a、502b、502c通信。在独立配置中,WTRU 502a、502b、502c可与gNB 580a、580b、580c通信,同时也不访问其他RAN(例如,诸如演进节点B 560a、560b、560c)。在独立配置中,WTRU 502a、502b、502c可将gNB 580a、580b、580c中的一者或多者用作移动性锚定点。在独立配置中,WTRU 502a、502b、502c可在未许可频带中使用信号与gNB 580a、580b、580c通信。在非独立配置中,WTRU 502a、502b、502c可与gNB 580a、580b、580c通信或连接,同时也与其他RAN(诸如,演进节点B 560a、560b、560c)通信或连接。例如,WTRU 502a、502b、502c可实现DC原理以基本上同时与一个或多个gNB 580a、580b、580c和一个或多个演进节点B 560a、560b、560c通信。在非独立配置中,演进节点B 560a、560b、560c可用作WTRU 502a、502b、502c的移动性锚点,并且gNB 580a、580b、580c可提供用于服务WTRU 502a、502b、502c的附加覆盖和/或吞吐量。
gNB 580a、580b、580c中的每一者可与特定小区(未示出)相关联,并且可被配置为处理无线电资源管理决策、切换决策、UL和/或DL中的用户的调度、网络切片的支持、双连接、NR和E-UTRA之间的互通、用户平面数据朝向用户平面功能(UPF)584a、584b的路由、控制平面信息朝向接入和移动性管理功能(AMF)582a、582b的路由等。如图1D所示,gNB 580a、580b、580c可通过Xn接口彼此通信。
图1D所示的CN 515可包括至少一个AMF 582a、582b、至少一个UPF 584a、584b、至少一个会话管理功能(SMF)583a、583b以及可能的数据网络(DN)585a、585b。虽然前述元件中的每一者被描绘为CN 515的一部分,但是应当理解,这些元件中的任一者可由除CN运营商之外的实体拥有和/或操作。
AMF 582a、582b可在RAN 513中经由N2接口连接到gNBs 580a、580b、580c中的一者或多者,并且可用作控制节点。例如,AMF 582a、582b可负责认证WTRU 502a、502b、502c的用户、网络切片的支持(例如,具有不同要求的不同PDU会话的处理)、选择特定SMF 583a、583b、注册区域的管理、NAS信令的终止、移动性管理等。AMF 582a、582b可使用网络切片,以便基于WTRU 502a、502b、502c所使用的服务的类型来为WTRU 502a、502b、502c定制CN支持。例如,可针对不同的用例(诸如,依赖超高可靠低延迟(URLLC)接入的服务、依赖增强型移动宽带(eMBB)接入的服务、用于机器类型通信(MTC)接入的服务等)建立不同的网络切片。AMF562可提供用于在RAN 513和采用其他无线电技术(诸如LTE、LTE-A、LTE-A Pro和/或非3GPP接入技术,诸如WiFi)的其他RAN(未示出)之间进行切换的控制平面功能。
SMF 583a、583b可经由N11接口连接到CN 515中的AMF 582a、582b。SMF 583a、583b还可经由N4接口连接到CN 515中的UPF 584a、584b。SMF 583a、583b可选择并控制UPF584a、584b,并且配置通过UPF 584a、584b进行的流量路由。SMF 583a、583b可执行其他功能,诸如管理和分配UE IP地址、管理PDU会话、控制策略实施和QoS、提供下行链路数据通知等。PDU会话类型可以是基于IP的、非基于IP的、基于以太网的等。
UPF 584a、584b可经由N3接口连接到RAN 513中的gNB 580a、580b、580c中的一者或多者,这些gNB可向WTRU 502a、502b、502c提供对分组交换网络(诸如互联网510)的访问,以促进WTRU 502a、502b、502c和启用IP的设备之间的通信。UPF 584、584b可执行其他功能,诸如路由和转发分组、实施用户平面策略、支持多宿主PDU会话、处理用户平面QoS、缓冲下行链路分组、提供移动性锚定等。
CN 515可有利于与其他网络的通信。例如,CN 515可包括用作CN 515与PSTN 508之间的接口的IP网关(例如,IP多媒体子系统(IMS)服务器)或者可与该IP网关通信。另外,CN 515可向WTRU 502a、502b、502c提供对其他网络512的访问,该其他网络可包括由其他服务提供商拥有和/或运营的其他有线和/或无线网络。在实施方案中,WTRU 502a、502b、502c可通过UPF 584a、584b经由至UPF 584a、584b的N3接口以及UPF 584a、584b与本地数据网络(DN)585a、585b之间的N6接口连接到DN 585a、585b。
鉴于图1A至图1D以及图1A至图1D的对应描述,本文参照以下中的一者或多者描述的功能中的一者或多者功能或全部功能可由一个或多个仿真设备(未示出)执行:WTRU502a-d、基站514a-b、演进节点B 560a-c、MME 562、SGW 564、PGW 566、gNB 580a-c、AMF582a-b、UPF 584a-b、SMF 583a-b、DN 585a-b和/或本文所述的任何其他设备。仿真设备可以是被配置为模仿本文所述的一个或多个或所有功能的一个或多个设备。例如,仿真设备可用于测试其他设备和/或模拟网络和/或WTRU功能。
仿真设备可被设计为在实验室环境和/或运营商网络环境中实现其他设备的一个或多个测试。例如,该一个或多个仿真设备可执行一个或多个或所有功能,同时被完全或部分地实现和/或部署为有线和/或无线通信网络的一部分,以便测试通信网络内的其他设备。该一个或多个仿真设备可执行一个或多个功能或所有功能,同时临时被实现/部署为有线和/或无线通信网络的一部分。仿真设备可直接耦合到另一个设备以用于测试目的和/或可使用空中无线通信来执行测试。
该一个或多个仿真设备可执行一个或多个(包括所有)功能,同时不被实现/部署为有线和/或无线通信网络的一部分。例如,仿真设备可在测试实验室和/或非部署(例如,测试)有线和/或无线通信网络中的测试场景中使用,以便实现一个或多个部件的测试。该一个或多个仿真设备可为测试装备。经由RF电路系统(例如,其可包括一个或多个天线)进行的直接RF耦合和/或无线通信可由仿真设备用于传输和/或接收数据。
本申请描述了各个方面,包括工具、特征、实施方案、模型、方法等。具体描述了这些方面中的许多方面,并且至少示出个体特性,通常以可能听起来有限的方式描述。然而,这是为了描述清楚,并不限制这些方面的应用或范围。实际上,所有不同的方面可组合和互换以提供进一步的方面。此外,这些方面也可与先前提交中描述的方面组合和互换。
本专利申请中描述和设想的方面可以许多不同的形式实现。本文描述的图2和图3可以提供一些实施方案,但是可以设想其他实施方案,并且图2、图3和图4的讨论不限制具体实施的广度。这些方面中的至少一个方面通常涉及视频编码和解码,并且至少一个其他方面通常涉及发射生成或编码的比特流。这些和其他方面可实现为方法、装置、其上存储有用于根据所述方法中任一种对视频数据编码或解码的指令的计算机可读存储介质,和/或其上存储有根据所述方法中任一种生成的比特流的计算机可读存储介质。
在本申请中,术语“重构”和“解码”可以互换使用,术语“像素”和“样本”可以互换使用,术语“图像”、“图片”和“帧”可以互换使用。
本文描述了各种方法,并且每种方法包括用于实现方法的一个或多个步骤或动作。除非正确操作方法需要特定顺序的步骤或动作,否则可修改或组合特定步骤和/或动作的顺序和/或用途。此外,术语诸如“第一”、“第二”等可用于各种实施方案以修改元件、分量、步骤、操作等,诸如“第一解码”和“第二解码”。除非特定需要,否则使用此类术语并不暗示对修改操作的排序。因此,在这个示例中,第一解码不需要在第二解码之前执行,并且可例如在第二解码之前、期间或重叠的时间段发生。
本专利申请中所述的各种方法和其他方面可用于修改视频编码器100和解码器200的模块(例如,帧内预测、熵编码和/或解码模块(160、260、145、230)),如图2和图3所示。此外,本发明方面不限于VVC或HEVC,并且可应用于例如其他标准和推荐(无论是预先存在的还是未来开发的)以及任何此类标准和推荐的扩展(包括VVC和HEVC)。除非另外指明或技术上排除在外,否则本申请中所述的方面可单独或组合使用。
在本申请中使用各种数值,例如,小于二的MaxNumMergeCand、大于4或5的pic_six_minus_max_num_merge_cand,如果MaxNumMergeCand为1,则MaxNumTriangleMergeCand可以被设置为2,三角形的合并候选的最大数目可以从2到5,对于仿射和IBC的AMVR精度索引(例如,amvr_precision_idx)可以是0或1,对于常规模式的AMVR精度索引可以是0、1或2,对于Y的阵列索引cIdx等于0,对于Cb的阵列索引等于1,对于Cr的阵列索引等于2,no_amvr_constraint_flag等于0或1,sps_amvr_enabled_flag等于0等。具体值是用于示例的目的,并且所描述的方面不限于这些具体值。
图2示出了编码器100。设想了这一编码器100的变型,但是为了清楚起见,下文描述了编码器100而不描述所有预期的变型。
在编码之前,视频序列可经过预编码处理(101),例如,将颜色变换应用到输入彩色图片(例如,从RGB 4:4:4到YCbCr 4:2:0的转换),或执行输入图片分量的重新映射,以便获得对压缩更具弹性的信号分布(例如,使用颜色分量中的一个颜色分量的直方图均衡化)。元数据可与预处理相关联并且附加到比特流。
在编码器100中,图片由编码器元件进行编码,如下所述。以例如CU为单位对要编码的图片进行分区(102)和处理。例如,使用帧内模式或帧间模式对每个单元进行编码。当单元以帧内模式进行编码时,其执行帧内预测(160)。在帧间模式中,执行运动估计(175)和补偿(170)。编码器决定(105)帧内模式或帧间模式中的哪一者用于对单元进行编码,并且通过例如预测模式标记来指示帧内/帧间决策。例如通过从原始图像块减去(110)预测块来计算预测残差。
然后,对预测残差进行变换(125)和量化(130)。对经量化的变换系数以及运动向量和其他语法元素进行熵编码(145),以输出比特流。编码器可跳过变换,并对未变换的残余信号直接应用量化。编码器可绕过变换和量化两者,即,在不应用变换或量化过程的情况下直接对残差进行编码。
编码器对编码块进行解码以提供用于进一步预测的参考。对经量化的变换系数进行解量化(140)和逆变换(150)以对预测残差进行解码。组合(155)经解码的预测残差和预测块,重构图像块。将环路滤波器(165)应用到重构的图像,以执行例如去块效应/SAO(样本自适应偏移)滤波,从而减少编码伪影。将经滤波的图片存储在参考图片缓冲器(180)中。
图3示出了视频解码器200的框图。在解码器200中,比特流由解码器元件进行解码,如下所述。视频解码器200一般执行与如图2所述的编码过程相反的解码过程。编码器100通常还执行视频解码作为对视频数据编码的一部分。例如,编码器100可执行本文呈现的视频解码步骤中的一个或多个视频解码步骤。编码器例如重建所解码的图像,以相对于以下项中的一者或多者维持与解码器的同步:参考图片、熵编码上下文和其他解码器相关状态变量。
具体地,解码器的输入包括视频比特流,该视频比特流可由视频编码器100生成。首先对比特流进行熵解码(230)以获得变换系数、运动向量和其他经编码的信息。图片分区信息指示如何对图片进行分区。因此,解码器可以根据解码图片分区信息划分(235)图片。对变换系数进行解量化(240)和逆变换(250)以对预测残差进行解码。组合(255)经解码的预测残差和预测块,重构图像块。可从帧内预测(260)或运动补偿预测(即帧间预测)(275)获得(270)预测块。向重构图像应用环路滤波器(265)。经滤波的图像存储在参考图片缓冲器(280)中。
经解码的图片还可经历解码后处理(285),例如,逆颜色变换(例如,从YCbCr 4:2:0到RGB 4:4:4的变换)或执行在预编码处理(101)中执行的重新映射过程的逆重新映射。解码后处理可使用在预编码处理中导出并且在比特流中发信号通知的元数据。
图4示出了在其中实现各种方面和实施方案的系统的示例的框图。系统1000可体现为包括下文所述的各个部件的设备,并且被配置为执行本文档中所述的一个或多个方面。此类设备的示例包括但不限于各种电子设备,诸如个人计算机、膝上型计算机、智能电话、平板电脑、数字多媒体机顶盒、数字电视机接收器、个人视频录制系统、连接的家用电器和服务器。系统1000的元件可单独地或组合地体现在单个集成电路(IC)、多个IC和/或分立部件中。例如,在至少一个实施方案中,系统1000的处理和编码器/解码器元件分布在多个IC和/或分立元件上。在各种实施方案中,系统1000经由例如通信总线或通过专用输入和/或输出端口通信地耦接到一个或多个其他系统或其他电子设备。在各种实施方案中,系统1000被配置为实现本文档中所述的一个或多个方面。
系统1000包括至少一个处理器1010,该至少一个处理器被配置为执行加载到其中的指令,以用于实现例如本文档中所述的各个方面。处理器1010可包括嵌入式存储器、输入输出接口和本领域已知的各种其他电路。系统1000包括至少一个存储器1020(例如,易失性存储器设备和/或非易失性存储器设备)。系统1000包括存储设备1040,该存储设备可包括非易失性存储器和/或易失性存储器,包括但不限于电可擦除可编程只读存储器(EEPROM)、只读存储器(ROM)、可编程只读存储器(PROM)、随机存取存储器(RAM)、动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)、闪存、磁盘驱动器和/或光盘驱动器。作为非限制性示例,存储设备1040可包括内部存储设备、附接存储设备(包括可拆和不可拆的存储设备)和/或网络可访问的存储设备。
系统1000包括编码器/解码器模块1030,该编码器/解码器模块被配置为例如处理数据以提供编码视频或解码视频,并且编码器/解码器模块1030可包括其自身的处理器和存储器。编码器/解码器模块1030表示可被包括在设备中以执行编码和/或解码功能的模块。众所周知,设备可包括编码模块和解码模块中的一者或两者。此外,编码器/解码器模块1030可实现为系统1000的独立元件,或者可结合在处理器1010内作为本领域技术人员已知的硬件和软件的组合。
要加载到处理器1010或编码器/解码器1030上以执行本文档中所述的各个方面的程序代码可存储在存储设备1040中,并且随后被加载到存储器1020上以供处理器1010执行。根据各种实施方案,处理器1010、存储器1020、存储设备1040和编码器/解码器模块1030中的一者或多者可在本文档中所述过程的执行期间存储各个项目中的一个或多个项目。此类存储项目可包括但不限于输入视频、解码的视频或部分解码的视频、比特流、矩阵、变量以及处理等式、公式、运算和运算逻辑的中间或最终结果。
在一些实施方案中,处理器1010和/或编码器/解码器模块1030内部的存储器用于存储指令和提供工作存储器以用于在编码或解码期间需要的处理。然而,在其他实施方案中,处理设备外部的存储器(例如,处理设备可以是处理器1010或编码器/解码器模块1030)用于这些功能中的一个或多个功能。外部存储器可以是存储器1020和/或存储设备1040,例如动态易失性存储器和/或非易失性闪存存储器。在若干实施方案中,外部非易失性闪存存储器用于存储例如电视机的操作系统。在至少一个实施方案中,快速外部动态易失性存储器诸如RAM用作视频编码和解码操作的工作存储器,诸如MPEG-2(MPEG是指运动图片专家组,MPEG-2也称为ISO/IEC 13818,并且13818-1也称为H.222,13818-2也称为H.262)、HEVC(HEVC是指高效视频编码,也称为H.265和MPEG-H部分2)或VVC(通用视频编码,由联合视频专家小组(JVET)开发的新标准)。
对系统1000的元件的输入可通过如框1130中所示的各种输入设备提供。此类输入设备包括但不限于:(i)射频(RF)部分,其接收例如由广播器通过空中传输的RF信号;(ii)分量(COMP)输入端子(或一组COMP输入端子);(iii)通用串行总线(USB)输入端子;和/或(iv)高清晰度多媒体接口(HDMI)输入端子。图4中未示出的其他示例包括复合视频。
在各种实施方案中,框1130的输入设备具有如本领域已知的相关联的相应输入处理元件。例如,RF部分可与适用于以下的元件相关联:(i)选择所需的频率(也称为选择信号,或将信号频带限制到一个频带),(ii)下变频选择的信号,(iii)再次频带限制到更窄频带以选择(例如)在某些实施方案中可称为信道的信号频带,(iv)解调下变频和频带限制的信号,(v)执行纠错,以及(vi)解复用以选择所需的数据包流。各种实施方案的RF部分包括用于执行这些功能的一个或多个元件,例如频率选择器、信号选择器、频带限制器、信道选择器、滤波器、下变频器、解调器、纠错器和解复用器。RF部分可包括执行这些功能中的各种功能的调谐器,这些功能包括例如下变频接收信号至更低频率(例如,中频或近基带频率)或至基带。在一个机顶盒实施方案中,RF部分及其相关联的输入处理元件接收通过有线(例如,电缆)介质发射的RF信号,并且通过滤波、下变频和再次滤波至所需的频带来执行频率选择。各种实施方案重新布置上述(和其他)元件的顺序,移除这些元件中的一些元件,和/或添加执行类似或不同功能的其他元件。添加元件可包括在现有元件之间插入元件,例如,插入放大器和模数变换器。在各种实施方案中,RF部分包括天线。
此外,USB和/或HDMI端子可包括用于跨USB和/或HDMI连接将系统1000连接到其他电子设备的相应接口处理器。应当理解,输入处理(例如Reed-Solomon纠错)的各个方面可根据需要例如在单独的输入处理IC内或在处理器1010内实现。类似地,USB或HDMI接口处理的方面可根据需要在单独的接口IC内或在处理器1010内实现。将解调流、纠错流和解复用流提供给各种处理元件,包括例如处理器1010以及编码器/解码器1030,该处理元件与存储器和存储元件结合操作以根据需要处理数据流以呈现在输出设备上。
系统1000的各种元件可设置在集成外壳内。在集成外壳内,各种元件可使用合适的连接布置1140(例如,如本领域已知的内部总线,包括IC间(I2C)总线、布线和印刷电路板)互连并且在其间传输数据。
系统1000包括能够经由通信信道1060与其他设备通信的通信接口1050。通信接口1050可包括但不限于被配置为通过通信信道1060发射和接收数据的收发器。通信接口1050可包括但不限于调制解调器或网卡,并且通信信道1060可例如在有线和/或无线介质内实现。
在各种实施方案中,使用诸如Wi-Fi网络,例如IEEE 802.11(IEEE是指电气和电子工程师协会)之类的无线网络将数据流式发射或以其他方式提供给系统1000。这些实施方案的Wi-Fi信号通过适用于Wi-Fi通信的通信信道1060和通信接口1050接收。这些实施方案的通信信道1060通常连接到接入点或路由器,该接入点或路由器提供对包括互联网的外部网络的访问,以用于允许流式应用和其他云上通信。其它实施方案使用通过输入块1130的HDMI连接传递数据的机顶盒向系统1000提供流式数据。还有其他实施方案使用输入块1130的RF连接向系统1000提供流式数据。如上所述,各种实施方案以非流式的方式提供数据。此外,各种实施方案使用除了Wi-Fi以外的无线网络,例如蜂窝网络或蓝牙网络。
系统1000可将输出信号提供到各种输出设备,包括显示器1100、扬声器1110和其他外围设备1120。各种实施方案的显示器1100包括例如触摸屏显示器、有机发光二极管(OLED)显示器、曲面显示器和/或可折叠显示器中的一者或多者。显示器1100可用于电视机、平板、笔记本、蜂窝电话(移动电话)或其他设备。显示器1100还可与其他部件集成在一起(例如,如在智能电话中),或者是单独的(例如,笔记本电脑的外部监视器)。在实施方案的各种示例中,其他外围设备1120包括独立数字视频光盘(或数字多功能光盘,两个术语都是DVR)、光盘播放器、立体声系统和/或照明系统中的一者或多者。各种实施方案使用提供基于系统1000的输出的功能的一个或多个外围设备1120。例如,盘播放器执行播放系统1000的输出的功能。
在各种实施方案中,控制信号使用诸如AV.Link、消费电子产品控制(CEC)或其他通信协议的信令在系统1000与显示器1100、扬声器1110或其他外围设备1120之间传送,该其他通信协议使得能够在有或没有用户干预的情况下进行设备到设备控制。输出设备可通过相应接口1070、1080和1090经由专用连接通信地耦接到系统1000。另选地,输出设备可使用通信信道1060经由通信接口1050连接到系统1000。显示器1100和扬声器1110可与电子设备(诸如电视机)中的系统1000的其他部件集成在单个单元中。在各种实施方案中,显示接口1070包括显示驱动器,诸如例如定时控制器(T Con)芯片。
另选地,如果输入1130的RF部分是单独机顶盒的一部分,则显示器1100和扬声器1110可选地与其他部件中的一个或多个部件分开。在显示器1100和扬声器1110为外部部件的各种实施方案中,输出信号可经由专用输出连接(包括例如HDMI端口、USB端口或COMP输出)提供。
这些实施方案可由处理器1010或由硬件或由硬件和软件的组合实现的计算机软件执行。作为非限制性示例,这些实施方案可由一个或多个集成电路实现。作为非限制性示例,存储器1020可以是适合于技术环境的任意类型,并且可使用任何适当的数据存储技术来实现,诸如光学存储器设备、磁存储器设备、基于半导体的存储器设备、固定存储器和可移动存储器。作为非限制性示例,处理器1010可以是适合于技术环境的任意类型,并且可涵盖微处理器、通用计算机、专用计算机和基于多核架构的处理器中的一者或多者。当处理器1010包括多个处理器时,该多个处理器可以共享与实施方案相关的操作。
可以执行视频压缩。与合并模式、自适应运动向量分辨率(AMVR)、变换跳过的变换单元(TU)级指示符(TrSkip)和/或约束指示符相关的各种指示可包括在比特中(例如,通过诸如编码器等视频编码设备)。这些指示可以由诸如用于重构视频的解码器之类的视频编码设备接收。语法(例如,高级语法(HLS))中的合并模式相关指示可被信号发送。AMVR相关的指示可以如本文所述的那样发信号通知。TrSkip的TU级标志可以如本文所述的那样被发送。如本文所述,可以发信号通知一个或多个约束标志。
视频编码设备(例如,编码器)可以在图片头部(PH)原始字节序列有效载荷(RBSP)语法中发信号通知将三角分区模式(TPM)候选的最大数目设置为二的检查条件。视频编码设备(例如,解码器)可以基于该检查条件使用TPM执行预测。该视频编码设备可以将TPM/GEO中的多个合并候选从常规合并模式中分离。视频编码设备(例如,解码器)可以使用TPM/GEO和/或常规合并模式中的合并候选的数目执行合并预测。视频编码设备可以发信号通知用于块内复制(IBC)自适应运动向量分辨率(AMVR)的序列参数集(SPS)标志,从而允许在AMVR被激活的情况下进行IBC-AMVR组合。视频编码设备可以从比特流中排除仿射AMVR SPS标志(例如,不在比特流中发信号通知仿射AMVR SPS标志)。该视频编码设备可在编码单元(CU)级发信号通知TrSkip。视频编码设备(例如,解码器)可例如基于在CU级处接收的TrSkip指示确定是否使用TrSkip对变换块进行编码。
视频编码设备(例如,解码器)可以基于约束标志no_amvr_constraint_flag来确定仿射模式AMVR是否被停用,并相应地设置SPS仿射AMVR启用标志。视频编码设备可以基于约束标志no_mts_constraint_flag设置sps_explicit_mts_intra_enabled_flag和sps_explicit_mts_inter_enabled_flag。视频编码设备可以基于约束标志no_transform_skip_constraint_flag设置sps_bdpcm_enabled_flag和sps_bdpcm_chroma_enabled_flag。视频编码设备可以基于约束标志no_bdpcm_constraint_flag设置sps_bdcpm_chroma_enabled_flag。
可以基于(例如,由......控制)高级语法标志来确定三角划分模式(TPM)的合并候选的数目。例如,如果常规合并候选的数目小于2,则合并候选的数目可以被设置为零,并且TPM可以被停用。在一些示例中,即使TPM被标志(例如,SPS标志)激活,其可以在一些条件下被停用。
AMVR可具有(例如,包括)用于常规帧间预测编码单元(CU's)、仿射运动预测CU's和以块内复制(IBC)编码的CU's的不同的分辨率。可发信号通知HLS标志控制AMVR分别用于规则帧间预测的CU's和仿射运动预测的CU's。
尽管可依据编码单元来描述某些示例,但该示例可同等地适用于编码块。因此,在某种意义上,这些术语可互换使用,且依据编码单元描述的示例可同等地适用于编码块。
可以在CU级执行多个变换选择(MTS)和/或低频不可分离变换(LFNST)索引。在一些示例中,TrSkip标志可在TU级被接收,并且TrSkip可被检查以确定CU级MTS和LFNST索引是否被编码。
可以发信号通知一个或多个约束标志集以执行指定的功能和/或避免未界定的行为。常规帧间预测的CU's的合并候选的数目可以与具有TPM的CU's去耦合。TPM可以例如通过去耦合并候选而被激活。将合并候选去耦合可以确保TPM的激活。例如,TPM可以根据合并候选的数目而被激活。指示(例如,SPS标志)可以控制IBC和AMVR的组合,例如,以具有与仿射模式或帧间预测相同的自由度。可在CU级处发信号通知/接收TrSkip标志。
可在图片参数集(PPS)级及/或图片标头(PH)级处编码最大数目的合并候选。规则合并、仿射、三角形和IBC可各自包括特定最大数目的合并候选。在PPS级处,可以对常规合并和TPM的最大数目进行编码。表1显示了示例性PPS语法。
表1-示例性PPS语法
在PH级处,可指示用于编码工具的候选的数目。表2显示了示例性PH语法。
表2-示例性PH语法
在一些示例中,如果常规合并模式的候选的最大数目是1,则TPM可以被停用。例如,视频编码设备(例如,诸如解码器)可以在常规合并模式的候者的最大数目是1时确定在TPM无效的情况下执行预测。表3中显示了示例性合并数据语法。
表3-示例性合并数据语法
在一些示例中,TPM可以被去激活而不管SPS三角形分区启用标志(例如,sps_triangle_enabled_flag)的值,除非三角形合并模式候选的最大数目(例如,MaxNumTriangleMergeCand)大于1。在编码器侧,可在SPS级处启用三角模式,且可以基于合并候选的数目停用三角模式。
可以基于最大合并候选数目(例如MaxNumMergeCand)和/或从最大合并候选数目中减去的最大三角形候选模式数目来确定三角形合并模式候选的最大数目(例如,MaxNumTriangleMergeCand)。表4显示了示例性PH RBSP语义。
表4-示例性图片标头RBSP语义
MaxNumMergeCand的值可以小于二,例如,当pic_six_minus_max_num_merge_cand大于4时(例如,如等式85中所示)。在这种情况下,MaxNumTriangleMergeCand可以被设置为零,merge_triangle_split_dir可以不在merge_data功能处被解码,并且TPM可以被去激活。
在一些示例中,可以将最大数目的TPM候选设置为2。在一些示例中,可以将最小数目的TPM候选设置为2。在一些示例中,可在设置三角形合并模式候选的最大数目之前执行检查。检查条件可以说明如果MaxNumMergeCand等于1,则MaxNumTriangleMergeCand可以被设置为2。在这种情况下,如果TPM的SPS标志被激活,则TPM可以被激活。表5显示了示例性PHRBSP语义。
表5-示例图片标题RBSP语义
常规合并模式的合并候选的最大数目可以与TPM的合并候选的最大数目去耦合。TPM的合并候选的最大数目可以独立于常规合并模式的合并候选的最大数目而被确定。可以基于PPS、PH和/或SPS等中的指示来确定例如,TPM的合并候选的最大数目。例如,指示TPM的合并候选的最大数目的指示可以是或可以包括pic_five_minus_max_num_triangle_cand,如表6、表7和表9所显示。
例如,当单独的合并和TPM指示被发信号通知时(例如,在PPS、PH和/或合并数据语法等中),常规合并模式的合并候选的最大数目可以与TPM的合并候选的最大数目去耦合。例如,当PPS、PH和/或合并数据语法中包括单独的常规合并和TPM指示时,视频编码设备(例如,解码器)可以确定常规合并模式的合并候选的最大数目与TPM的合并候选的最大数目去耦合。表6显示了示例性PPS语法,表7显示了示例性PH语法,表8显示了示例性合并数据语法,且表9显示了示例性PH RBSP语义。
表6-示例性PPS语法
表7-示例性PH语法
表8-示例性合并数据语法
表9-示例性PH RBSP语义
如图所示,可独立地编码用于三角形分割模式的合并候选的最大数目。三角形分割模式的合并候选的最大数目可在从某一值到另一值(例如,从2到5)的范围内。
几何(例如,GEO)预测模式可以是TPM的扩展。几何合并模式(GEO)可用于对块进行编码。GEO可以是帧间预测工具。在GEO中,分裂可在分割边界相对于所考虑块的中间的一或多个角度和/或位移中。在GEO预测模式中,TPM中的三角形可由楔形区代替。可通过用楔形替换(例如,在语法及/或语义中)词语三角形而在GEO预测模式中使用本文中所描述的示例。例如,可独立于常规合并的合并候选的最大数目而编码GEO模式的合并候选的最大数目。可以基于PPS、PH及/或SPS中的指示或类似者确定GEO的合并候选的最大数目。指示GEO的合并候选的最大数目的指示可以是或可以包括例如ic_five_minus_max_num_geo_cand。
AMVR可以被控制在某个级别(例如,SPS级别)。SPS语法可以包括与视频序列相关联的两个或更多个启用指示符。表10显示了示例性SPS语法。例如,SPS语法可包括两个或更多个SPS标志,如表10中所显示。如表10所显示,SPS语法可以包括AMVR启用指示符sps_amvr_enabled_flag和/或仿射模式启用指示符sps_affine_enabled_flag。
表10-示例性SPS语法
第一SPS指示符(例如,AMVR启用指示符sps_amvr_enabled_flag)可控制常规CU的AMVR,包括IBC模式。第二SPS指示符(例如,仿射模式AMVR启用指示符sps_affine_amvr_enabled_flag)可以控制AMVR用于仿射模式(仅作为示例)。表11显示了AmvrShift的示例性规格。规则模式、仿射模式和IBC模式中的一者或多者(例如每个)的精度可以不同,如表11所显示。
表11-AmvrShift的示例性规格
对于仿射模式和/或IBC,AMVR精度指数(例如,amvr_precision_idx)可以是0或1。对于常规模式,AMVR精度指数可以是0、1或2。AMVR精度索引的语义可以例如基于模式而改变。三个AMVR模式(例如,与常规模式、仿射模式和IBC模式相关联)可以不同,并且例如在一些示例中完全不同。可以提供三个SPS指示符(例如,每个AMVR模式一个标志)。
可以针对IBC AMVR来发信号通知/接收IBC AMVR启用指示符(例如,SPS IBC AMVR启用指示符)。IBC AMVR启用指示符可以是SPS_ibc_amvr_enabled_flag。SPS语法可以包括IBC AMVR启用指示符SPS_ibc_amvr_enabled_flag。仿射AMVR启用指示符(例如,SPS仿射AMVR启用指示符)可以控制仿射AMVR组合。仿射AMVR启用指示符可以是sps_affice_amvr_enabled_flag。仿射AMVR启用指示符可以指示是否针对视频序列启用仿射模式和AMVR的组合。参数集(例如,SPS)可与视频序列相关联。示例性SPS语法(例如,用于IBC AMVR)在表12中显示。可以发信号通知/接收IBC AMVR启用指示符以控制IBC AMVR组合,如表12所显示。IBC AMVR启用指示符可指示是否针对视频序列启用IBC与AMVR的组合。表13显示了示例性编码单元语法(例如,用于IBC AMVR)。表14显示了示例性SPS RBSP语义(例如,用于IBCAMVR)。
解码器可以基于IBC AMVR启用指示来确定是否启用IBC AMVR组合(例如,在IBC模式的运动向量编码中使用自适应运动向量差分辨率)。
表12-用于IBC AMVR的示例性SPS语法
表13-用于IBC AMVR的示例性编码单元语法
表14-用于IBC AMVR的示例性SPS RBSP语义
在例如SPS级允许AMVR的条件下,可以允许IBC和AMVR的组合。在例如SPS级允许AMVR的条件下,可以允许仿射模式和AMVR的组合。当在SPS级允许AMVR时,允许IBC和AMVR的组合或者仿射模式和AMVR的组合可以减少可能组合的数量。例如,编码器可以利用IBC、常规模式或仿射模式中的一者或多者来执行AMVR。编码器可以确定是否启用AMVR模式和仿射模式,并确定是否在与视频序列相关联的参数集中包括仿射模式AMVR的指示符(例如,表15或表16中的示例中所示的SPS)。编码器可以利用IBC、常规模式和仿射模式来停用AMVR。例如,如果AMVR可用于被关闭,则对于特定模式(例如,常规模式AMVR、仿射模式AMVR和IBCAMVR)而不是相反的方式,AMVR可以被关闭。例如,可以在不停用IBC、常规模式或仿射模式的情况下关闭(例如,停用)AMVR。
在表15和表16中显示用于IBC AMVR组合和仿射AMVR组合的示例性SPS语法。表15显示了示例性SPS语法(例如,用于具有仿射模式的AMVR组合)。表16显示了示例性SPS语法(例如,用于具有仿射模式的AMVR组合和/或用于具有IBC的AMVR组合)。表15或表16显示了仿射模式和AMVR组合的示例性指示符。如表15和表16所显示,可以基于AMVR是否被启用来确定是否接收仿射模式AMVR启用指示符。例如,如表15所显示,如果针对视频序列启用仿射模式,并且针对视频序列启用AMVR,如AMVR启用指示符sps_amvr_enabled_flag的值所指示的,则仿射模式AMVR启用指示符可以存在于SPS中(例如,表15或表16所显示)并且被接收。如果如AMVR启用指示符sps_amvr_enabled_flag的值所指示的那样针对视频序列停用AMVR,则仿射模式AMVR启用指示符可能不存在于与视频序列相关联的SPS中,并且不被接收。在示例中,可以基于AMVR是否被启用来确定仿射模式AMVR启用指示符sps_affine_amvr_enabled_flag的值。在仿射模式AMVR启用指示符不存在于与视频序列相关联的SPS中的条件下,可以推断仿射模式AMVR启用指示符sps_affine_amvr_enabled_flag的值是指示在仿射模式被启用的情况下针对视频序列停用AMVR的值。
如表15和表16所显示,除了AMVR启用指示符之外,可以基于仿射模式是否被启用来确定是否接收仿射模式AMVR启用指示符。如表15和表16所显示,SPS语法可以包括仿射模式启用指示符sps_affine_enabled_flag。如表15和表16所显示,仿射模式AMVR启用指示符是否可以存在于表15或表16所显示的SPS中可以基于仿射模式启用指示符的值和AMVR启用指示符sps_amvr_enabled_flag的值。例如,如表15和表16所显示,如果如仿射模式启用指示符所指示的针对视频序列启用仿射模式,并且如AMVR启用指示符的值所指示的针对该视频序列启用AMVR,则仿射模式AMVR启用指示符可以存在于表15或表16所显示的SPS中。如果如仿射模式启用指示符所指示的针对视频序列停用仿射模式,则该仿射模式AMVR启用指示符可能不存在于表15或表16所显示的SPS中。
如表16所显示,可以基于AMVR是否被启用(例如sps_amvr_enabled_flag的值)来确定是否接收IBC AMVR启用指示符(例如sps_ibc_amvr_enabled_flag)。在一些示例中,通常,如果AMVR被启用,则AMVR可以经由仿射AMVR启用指示符而被停用以进行仿射,和/或经由IBC AMVR启用指示符而被停用以进行IBC模式。
表15-用于AMVR组合的示例性SPS语法(例如,具有仿射模式)
表16-AMVR组合的示例性SPS语法
在示例中,SPS语法可以不包括仿射模式AMVR启用指示符(例如,仿射AMVR SPS标志)。如果如AMVR启用指示符sps_amvr_enabled_flag的值所指示的,针对视频序列停用AMVR,则编码器可以确定从与视频序列相关联的SPS中排除仿射模式AMVR启用指示符sps_affine_amvr_enabled_flag。
图5示出了用于确定仿射模式AMVR启用指示符是否存在于参数集中的方法的示例,例如如表15-16所显示。本文公开的示例和其他示例可以根据示例性方法500来操作。方法500包括502、504和506。方法500可用于处理视频。在502处,可以确定针对视频序列启用仿射模式。在504处,可以基于AMVR启用指示符的值来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中。在506处,可以基于确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中来对视频序列进行解码。
在确定针对视频序列启用仿射模式时,可以基于AMVR是否被启用来确定在与视频序列相关联的参数集中是否包括仿射模式AMVR启用指示符。可以基于确定在参数集中是否包括仿射模式AMVR启用指示符来生成与视频序列相关联的参数集。
方法500可以由装置执行。该装置可包括一个或多个处理器。与图5中所示的示例相关的操作可以由多个处理器共享或者由一个处理器执行。
在一些示例中,可以不在SPS中发信号通知/接收仿射模式AMVR启用指示符sps_affine_amvr_enabled_flag,例如,如表17所显示。表17显示了示例性SPS语法(例如,用于AMVR)。可以发信号通知AMVR启用指示符(例如sps_amvr_enabled_flag)以启用或停用AMVR。表17显示了用于没有仿射AMVR SPS标志的AMVR的示例性SPS语法。如表17所显示,与视频序列相关联的参数集(例如,SPS)可以不包括仿射模式AMVR启用指示符sps_affine_amvr_enabled_flag,而不管AMVR启用指示符的值和仿射模式启用指示符的值是多少。表18显示了示例性编码单元语法(例如,用于不具有仿射AMVR SPS标志的AMVR)。
表17-示例性SPS语法
表18-示例性编码单元语法
可以在变换单元(TU)级处编码TrSkip,如表19和20所显示。表19显示了示例性编码单元语法。表20显示了示例性TU语法。可在CU级处编码TrSkip。例如,CU级语法可以包括TrSkip指示符(例如,transform_skip_flag)。可在CU级处编码MTS和LFNST,如表19和20所显示。
表19-示例性编码单元语法
表20-示例性TU语法
当在TU级处编码TrSkip时,在一些示例中,变换工具(例如,TrSkip、MTS和LFNST)可能不在同一层被解码。表21显示了示例性CU语法。在示例中,可以在CU级处发信号通知/接收TrSkip指示符(例如,transform_skip_flag),如表21所显示(例如,以提高可读性和适用性)。
表21-示例性CU语法
语法元素transform_skip_flag[x0][y0][cIdx]可说明是否将变换应用于相关联的变换块。阵列索引x0、y0可以说明所考虑的变换块的左上亮度样本相对于图片的左上亮度样本的位置(x0,y0)。阵列索引cIdx可以说明用于颜色分量的指示符;在示例中,Y可以等于0,Cb可以等于1,Cr可以等于2。transform_skip_flag[x0][y0][cIdx](例如,等于1)的值可暗示或说明不将变换应用于相关联的变换块。transform_skip_flag[x0][y0][cIdx](例如,等于0)的另一值可表明或说明确定是否将变换应用于相关联变换块是取决于其他语法元素的。
若干约束标志可以在不同的编码级别停用某些工具。不同的编码级别可以包括例如简档级别。这些约束标志可以被包括在(例如,发信号通知)在解码器参数集(DPS)、视频参数集(VPS)或序列参数集(SPS)处。表22显示了示例性约束指示(例如,标志)。约束标志可以包括表22中所显示的约束标志。如表22所显示,常规约束信息(GCI)可以包括AMVR约束指示符no_amvr_constraint_flag。
表22-示例性约束指示(例如,标志)
在表23中显示了示例性约束标志语义。
表23-示例性约束标志语义
AMVR约束指示符的值可以指示AMVR是否例如在简档级别被启用。在一些示例中,当no_amvr_constraint_flag的值指示AMVR被停用(例如,等于一时)时,sps_amvr_enabled_flag可被设置为指示针对视频序列停用AMVR的值(例如,等于零),但是sps_affice_amvr_enabled_flag可不被设置为指示AMVR被停用的值(例如,等于零)。在这些示例中,no_amvr_constraint_flag可能不会完全停用AMVR,例如,导致诸如解码器之类的设备的未界定的行为。在这些示例中,仿射模式AMVR可以是活动的,而不管no_amvr_constraint_flag的值是多少。如本文的示例中所述(例如,如表15和表16所显示),可以基于是否针对视频序列启用AMVR来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中。如果如由AMVR启用指示符sps_amvr_enabled_flag的值所指示的,针对视频序列停用AMVR,则sps_amvr_enabled_flag可能不存在于与视频序列相关联的参数集中。当no_amvr_constraint_flag的值指示AMVR被停用时,并且因此ps_amvr_enabled_flag被设置为指示针对视频序列停用AMVR的值,在与视频序列相关联的参数集中可能不存在sps_amvr_enabled_flag。no_amvr_constraint_flag可能完全停用AMVR。基于no_amvr_constraint_flag的值,仿射模式AMVR可以是不活动的。
表24显示了示例性约束标志语义。
表24-示例性约束标志语义
如表24中所示的示例所示,当no_amvr_constraint_flag的值指示AMVR被停用(例如,等于一时)时,sps_amvr_enabled_flag可被设置为指示针对视频序列停用AMVR的值(例如,等于零),且是sps_affice_amvr_enabled_flag可被设置为指示AMVR被停用的值(例如,等于零)。
如表24中所示的示例所示,当no_mts_constraint_flag等于一时,sps_mts_enabled_flag可等于零,sps_explicit_mts_intra_enabled_flag可等于零,而sps_explicit_mts_inter_enabled_flag可等于零。
如表24中所示的示例所示,当no_transform_skip_constraint_flag等于一时,sps_transform_skip_enabled_flag可等于零,sps_bdmcmc_enabled_flag可等于零,且sps_bdmcm_chroma_enabled_flag可等于零。
如表24中所示的示例所示,当no_bdmm_constraint_flag等于一时,sps_bdmm_enabled_flag可等于零,而sps_bdmm_chroma_enabled_flag可等于零。
可使用自适应运动向量分辨率(AMVR)。当指示(例如,use_integer_mv_flag)等于切片标头中的某个值(例如,0)时,可以四分之一照度样本为单位发信号发送第一运动向量(例如,CU的运动向量)与第二运动向量(例如,CU的预测运动向量)之间的运动向量差(MVD)。该值可指示是否发信号通知MVD。该值可指示是否以完整样本精度发信号通知MVD。CU级AMVR可用于处理(例如,编码)CU。使用AMVR可允许以不同精度对CU的一个或多个MVD进行编码。根据当前CU的模式(例如,正常AMVR模式或仿射AMVR模式),可自适应地选择当前CU的一个或多个MVD(精度)。例如,可针对正常AMVR模式中的当前CU选择第一MVD精度(例如,四分之一照度样本、半照度样本、完整照度样本或四照度样本精度)。可针对仿射AMVR模式中的当前CU选择第二MVD精度(例如,四分之一照度样本、完整照度样本或1/16照度样本精度)。
例如,如果当前CU具有一个或多个非零MVD分量,则可发信号通知CU级MVD分辨率指示。如果MVD分量(例如,用于参考列表L0和L1的水平和垂直MVD)为零,则可确定(例如,推断)MVD精度(例如,MVD分辨率)为例如四分之一照度样本。
对于具有一个或多个非零MVD分量的CU,可发信号通知指示(例如,第一标志),该指示表明是否将四分之一照度样本MVD精度用于CU。如果指示(例如,第一标志)具有指示将四分之一照度样本MVD精度用于CU的值(例如,0),则可将四分之一照度样本MVD精度用于CU,并且可跳过进一步的信令。如果指示(例如,第一标志)具有指示不将四分之一照度样本MVD精度用于CU的值(例如,1),则可发信号通知指示(例如,第二标志)以指示是否将半照度样本MVD精度用于AMVR CU。如果指示(例如,第二标志)指示将半照度样本MVD精度用于AMVRCU,则可将6抽头插值滤波器(例如,代替可为默认的8抽头插值滤波器)用于半照度样本位置。如果指示(例如,第二标志)指示不将半照度样本MVD精度用于AMVR CU,则可发信号通知指示(例如,第三标志)以指示是否将四照度样本或完整照度样本MVD精度用于AMVR CU。
对于仿射AMVR CU,可使用指示(例如,第二标志)来指示是否使用完整照度样本或1/16照度样本MVD精度。例如,CU的一个或多个运动向量预测因子可被舍入成与MVD的精度相同的精度(例如,在被添加到MVD之前),使得重建的MV具有预期的精度(例如,四分之一照度样本、半照度样本、完整照度样本或四照度样本)。运动向量预测因子可朝向零舍入(例如,负运动向量可朝向正无穷大舍入,并且正运动向量预测因子可朝向负无穷大舍入)。
视频处理设备可例如使用RD检查来确定当前CU的运动向量精度(例如,运动向量分辨率)。视频处理设备可包括编码器。在一些示例中,可跳过对一个或多个MVD精度(例如,除四分之一照度样本MVD精度之外)的RD检查,并且在其他示例中调用(例如,有条件地)。对于正常AMVR模式,可获得(例如,计算)四分之一照度样本MVD精度和/或完整照度样本MV精度的RD成本。例如,可将完整照度样本MVD精度的RD成本与四分之一照度样本MVD精度的RD成本进行比较,以确定是否进一步检查四照度样本MVD精度的RD成本。如果四分之一照度样本MVD精度的RD成本小于完整照度样本MVD精度的RD成本(例如,某个值),则可跳过针对四照度样本MVD精度的RD检查。例如,如果完整照度样本MVD预测的RD成本与四分之一照度样本MVD精度的RD成本的比率在大约1.04-1.1的范围内(例如,1.06),则可跳过针对四照度样本MVD精度的RD检查。如果完整照度样本MVD精度的RD成本(例如,显著)大于先前测试的MVD精度的最佳RD成本,则可跳过半照度样本MVD精度的检查。例如,如果完整照度样本的RD成本与最佳RD成本的比率在大约1.2-1.3的范围内(例如,1.25),则可跳过半照度样本MVD精度的检查。对于仿射AMVR模式,如果在检查仿射合并/跳过模式、合并/跳过模式、四分之一照度样本MVD精度AMVR模式和/或四分之一照度样本MVD精度仿射AMVR模式的速率失真成本之后未选择仿射帧间模式,则可能无法检查1/16照度样本MV精度和/或1像素MV精度仿射帧间模式。在四分之一照度样本MV精度仿射帧间模式中获得的一个或多个仿射参数可用作1/16照度样本和/或四分之一照度样本MV精度仿射帧间模式中的起始搜索点。
仿射运动补偿可用作帧间编码工具。本文可描述使用仿射模式的具体实施。平移运动模型可应用于运动补偿预测。可能存在许多种运动(例如,放大或缩小、旋转、透视运动和/或其他不规则运动)。可应用简化仿射变换运动补偿预测。可例如发信号通知用于帧间编码CU(例如,每个帧间编码CU)的标志,以指示平移运动或仿射运动模型是否应用于帧间预测。可发信号通知标志(例如,如果使用仿射运动的话),以指示仿射运动模型中使用的参数的数目(例如,四个或六个)。
仿射运动模型可以是四参数模型。两个参数可用于平移移动(例如,水平和竖直方向中的每一者一个参数)。一个参数可用于缩放运动。一个参数可用于旋转运动。水平缩放参数可等于竖直缩放参数。水平旋转参数可等于竖直旋转参数。可使用两个运动向量(MV)作为在限定在当前CU的左上角和右上角处的两个控制点位置处的(例如,一个)对来对四参数运动模型进行编码。图6示出了仿射块的示例性四参数仿射模式模型和子块级运动推导。如图6所示,块的仿射运动场可由两个控制点运动向量(V0,V1)描述。基于控制点运动,运动场(vx,vy)可例如根据等式1进行描述:
其中(v0x,v0y)可以是左上角控制点的运动向量,(v1x,v1y)可以是右上角控制点的运动向量,如图6所示,并且w可以是CU的宽度。
仿射运动模型可以是六参数模型。两个参数可用于平移移动(例如,水平和竖直方向中的每一者一个参数)。两个参数可用于缩放运动(例如,水平和竖直方向中的每一者一个参数)。两个参数可用于旋转运动(例如,水平和竖直方向中的每一者一个参数)。可用在三个控制点处的三个MV对六参数运动模型进行编码。图7示出了示例性六参数仿射模式,其中V0、V1和V2是控制点,并且(MVx,MVy)是子块的以位置(x,y)为中心的运动向量。如图7所示,可在CU的左上角、右上角和左下角处定义六参数仿射编码CU的控制点。在左上控制点处的运动可与平移运动有关。在右上控制点处的运动可与在水平方向上的旋转和缩放运动有关。在左下控制点处的运动可与在竖直方向上的旋转和缩放运动有关。在水平方向上的旋转和缩放运动可与在竖直方向上的运动不同。可例如根据等式2和3使用在控制点处的三个MV来推导子块(例如,每个子块)的MV(vx,vy):
其中(v2x,v2y)可以是左下控制点的运动向量,(x,y)可以是子块的中心位置,并且w和h分别可以是CU的宽度和高度。
可基于例如子块的粒度来推导用于用仿射运动模型编码的块的运动场。可例如通过计算子块的中心样本的MV(例如,如图6所示)来推导(例如,每个)子块的MV(例如,根据等式(1))。计算可舍入到例如1/16-pel准确性。所推导的MV可在运动补偿阶段上使用,以生成在当前块内部的子块(例如,每个子块)的预测信号。应用于仿射运动补偿的子块大小可以是例如4×4。可例如迭代地估计4参数仿射模型的四个参数。例如,在步骤k处的一个或多个MV可表示为原始照度信号可表示为I(i,j)。预测照度信号可表示为I′k(i,j)。空间梯度gx(i,j)和gy(i,j)可例如分别用在水平和竖直方向上应用于预测信号I′k(i,j)上的Sobel滤波器推导。等式(1)的导数可例如根据等式4表示:
其中在步骤k处,(a,b)可以是Δ平移参数,并且(c,d)可以是Δ缩放和旋转参数。例如,根据等式5和6,可用坐标推导在控制点处的ΔMV。例如,(0,0)和(w,0)分别可以是左上控制点和右上控制点的坐标。
在照度变化与空间梯度和时间移动之间的关系可例如根据等式7来调配:
可例如使用最小二乘法来推导参数集(a,b,c,d)(例如,因为CU中的样本满足等式8)。在步骤(k+1)处在两个控制点处的可用等式5和6求解,并且它们被舍入到特定精度(例如,1/4pel)。可对在两个控制点处的MV进行修正(例如,使用迭代),直到参数(a,b,c,d)是(例如,全部)零或者已经执行迭代的次数达到(例如,预定义)极限。
可估计六参数仿射模型的六个参数。等式4可例如根据等式9来改变:
其中在步骤k处,(a,b)可以是Δ平移参数,(c,d)可以是水平方向的Δ缩放和旋转参数,并且(e,f)可以是竖直方向的Δ缩放和旋转参数。例如,等式8可根据等式10来改变:
本文的各种具体实施可涉及解码。如本申请中所用,“解码”可涵盖例如对所接收的编码序列执行的过程的全部或部分,以便产生适于显示的最终输出。在各种实施方案中,此类过程包括通常由解码器执行的一个或多个过程,例如熵解码、逆量化、逆变换和差分解码。在各种实施方案中,此类过程还或者可替代地包括由本申请中描述的各种具体实施的解码器执行的过程,例如,在图片标头RBSP语义中发信号通知检查条件,将TPM候选的最小数量限制为两个,在TPM/GEO中将合并候选的数量与常规合并去耦合,发信号通知用于IBCAMVR的SPS标志,如果AMVR被激活则允许IBC和仿射AMVR组合,移除仿射AMVR SPS标志,在CU级发信号通知TrSkip,修改约束标志语义,确定针对视频序列启用仿射模式;基于AMVR启用指示符的值来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中;基于确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中来对视频序列进行解码;如果AMVR启用指示符的值指示针对视频序列启用AMVR模式,则确定仿射模式AMVR启用指示符存在于与视频序列相关联的参数集中;如果AMVR启用指示符的值指示针对视频序列停用AMVR模式,则确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中;响应于确定仿射模式AMVR启用指示符存在于与视频序列相关联的参数集中,获得仿射模式AMVR启用指示符;响应于确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中,将仿射模式AMVR启用指示符的值设置为指示在仿射模式被启用的情况下针对视频序列停用AMVR的值;将AMVR启用指示符的值设置为指示基于GCI针对该视频序列停用AMVR的值;基于指示针对视频序列停用AMVR的AMVR启用指示符的值来确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中;确定该AMVR启用指示符存在于与该视频序列相关联的参数集中;确定与该视频序列相关联的参数集可包括与该视频序列相关联的SPS;基于仿射模式启用指示符的值来确定针对该视频序列启用仿射模式,以及基于该仿射模式启用指示符的值来确定该仿射模式AMVR启用指示符是否存在于该参数集中;基于该仿射模式AMVR启用指示符来确定是否针对该视频序列启用该仿射模式和AMVR的组合;如果仿射模式AMVR启用指示符指示在仿射模式被启用的情况下针对视频序列启用AMVR,则基于与视频序列的编码块相关联的编码模式自适应地确定与该编码块相关联的运动向量差的精度;确定针对该视频序列启用帧内块复制(IBC),响应于确定针对该视频序列启用IBC而获得IBC AMVR启用指示符,并基于该IBC AMVR启用指示符而对该视频序列进行解码。
作为进一步的示例,在实施方案中,“解码”仅是指熵解码,在另一个实施方案中,“解码”仅是指差分解码,并且在又一个实施方案中,“解码”是指熵解码和差分解码的组合。短语“解码过程”是具体地指代操作的子集还是广义地指代更广泛的解码过程基于具体描述的上下文将是清楚的,并且据信将被本领域的技术人员很好地理解。
各种具体实施参与编码。以与上面关于“解码”的讨论类似的方式,如在本申请中使用的“编码”可涵盖例如对输入视频序列执行以便产生编码比特流的全部或部分过程。在各种实施方案中,此类过程包括通常由编码器执行的一个或多个过程,例如,分区、差分编码、变换、量化和熵编码。在各种实施方案中,此类过程还或可替代地包括由本申请中描述的各种具体实施的编码器执行的过程,例如,确定针对视频序列启用仿射模式;基于AMVR启用指示符的值来确定是否在与该视频序列相关联的参数集中包括仿射模式AMVR启用指示符;基于确定是否在与该视频序列相关联的参数集中包括仿射模式AMVR启用指示符来生成与该视频序列相关联的参数集;如果该AMVR启用指示符的值指示针对该视频序列启用AMVR模式,则确定将该仿射模式AMVR启用指示符包括在与该视频序列相关联的参数集中;如果AMVR启用指示符的值指示针对视频序列停用AMVR模式,则确定不将仿射模式AMVR启用指示符包括在与视频序列相关联的参数集中;生成与该视频序列相关联的参数集,该参数集包括AMVR启用指示符;响应于确定在与该视频序列相关联的参数集中不包括该仿射模式AMVR启用指示符,生成与不具有该仿射模式AMVR启用指示符的视频序列相关联的参数集;将该AMVR启用指示符包括在与该视频序列相关联的参数集中;确定与该视频序列相关联的参数集可为与该视频序列相关联的SPS;基于仿射模式启用指示符的值来确定是否针对视频序列启用仿射模式;基于确定是否针对该视频序列启用仿射模式来确定是否将仿射模式AMVR启用指示符包括在参数集中;基于该仿射模式AMVR启用指示符来确定是否针对该视频序列启用该仿射模式和AMVR的组合;确定针对该视频序列启用IBC,响应于确定针对该视频序列启用IBC来确定将IBC AMVR启用指示符包括在与该视频序列相关联的参数集中,以及生成包括该IBC AMVR启用指示符的参数集。
作为进一步的示例,在实施方案中,“编码”仅是指熵编码,在另一个实施方案中,“编码”仅是指差分编码,并且在又一个实施方案中,“编码”是指差分编码和熵编码的组合。短语“编码过程”是具体地指代操作的子集还是广义地指代更广泛的编码过程基于具体描述的上下文将是清楚的,并且据信将被本领域的技术人员很好地理解。
注意,本文使用的语法元素,例如sps_amvr_enabled_flag、sps_affine_enabled_flag、sps_affine_amvr_enabled_flag、sps_ibc_amvr_enabled_flag、sps_ibc_enabled_flag、MaxNumMergeCand、pps_five_cand_minus_max_num_triangle_cand_plus1等是描述性术语。因此,它们不排除使用其他语法元素名称。
当附图呈现为流程图时,应当理解,其还提供了对应装置的框图。类似地,当附图呈现为框图时,应当理解,其还提供了对应的方法/过程的流程图。
各种实施方案是指速率失真优化。具体地,在编码过程期间,通常考虑速率和失真之间的平衡或权衡,这常常考虑到计算复杂性的约束。速率失真优化通常表述为最小化速率失真函数,该速率失真函数是速率和失真的加权和。存在不同的方法解决速率失真优化问题。例如,这些方法可基于对所有编码选项(包括所有考虑的模式或编码参数值)的广泛测试,并且完整评估其编码成本以及重构信号在编码和解码之后的相关失真。更快的方法还可用于降低编码复杂性,特别是对基于预测或预测残差信号而不是重构的残差信号的近似失真的计算。也可使用这两种方法的混合,诸如通过针对可能的编码选项中的仅一些编码选项使用近似失真,而针对其他编码选项使用完全失真。其他方法仅评估可能的编码选项的子集。更一般地,许多方法采用各种技术中任一种来执行优化,但是优化不一定是对编码成本和相关失真两者的完整评估。
本文所述的具体实施和方面可在例如方法或过程、装置、软件程序、数据流或信号中实现。即使仅在单个形式的具体实施的上下文中讨论(例如,仅作为方法讨论),讨论的特征的具体实施也可以其他形式(例如,装置或程序)实现。装置可在例如适当的硬件、软件和固件中实现。方法可在例如一般是指处理设备的处理器中实现,
该处理设备包括例如计算机、微处理器、集成电路或可编程逻辑设备。处理器还包括通信设备,诸如例如计算机、手机、便携式/个人数字助理(“PDA”)以及便于最终用户之间信息通信的其他设备。
对“一个示例”或“示例”或“一个具体实施”或“具体实施”以及它们的其他变型的引用意指结合该示例描述的特定特征、结构、特性等包括在至少一个示例中。因此,在整个本申请的各个地方出现的短语“在一个示例中”或“在示例中”或“在一个具体实施中”或“在具体实施中”以及任何其他变型不一定都指同一示例。
另外,本申请可涉及“确定”各种信息。确定信息可包括例如估计信息、计算信息、预测信息或从存储器检索信息中的一者或多者。
此外,本申请可涉及“访问”各种信息。访问信息可包括例如接收信息、检索信息(例如,从存储器)、存储信息、移动信息、复制信息、计算信息、确定信息、预测信息或估计信息中的一者或多者。
另外,本申请可涉及“接收”各种信息。与“访问”一样,接收旨在为广义的术语。接收信息可包括例如访问信息或检索信息(例如,从存储器)中的一者或多者。此外,在诸如例如存储信息、处理信息、发射信息、移动信息、复制信息、擦除信息、计算信息、确定信息、预测信息或估计信息的操作期间,“接收”通常以一种方式或另一种方式参与。
应当理解,例如,在“A/B”、“A和/或B”以及“A和B中的至少一者”的情况下,使用以下“/”、“和/或”和“至少一种”中的任一种旨在涵盖仅选择第一列出的选项(A),或仅选择第二列出的选项(B),或选择两个选项(A和B)。作为进一步的示例,在“A、B和/或C”和“A、B和C中的至少一者”的情况下,此类短语旨在涵盖仅选择第一列出的选项(A),或仅选择第二列出的选项(B),或仅选择第三列出的选项(C),或仅选择第一列出的选项和第二列出的选项(A和B),或仅选择第一列出的选项和第三列出的选项(A和C),或仅选择第二列出的选项和第三列出的选项(B和C),或选择所有三个选项(A和B和C)。如对于本领域和相关领域的普通技术人员显而易见的是,这可扩展到所列出的尽可能多的项目。
而且,如本文所用,词语“发信号通知”是指(除了别的以外)向对应解码器指示某物。例如,在某些实施方案中,编码器在SPS中发信号通知特定IBC AMVR标记、AMVR启用指示符、仿射模式AMVR启用指示符、GCI约束、仿射模式启用指示符或IBC AMVR启用指示符等。这样,在实施方案中,在编码器侧和解码器侧使用相同的参数。因此,例如,编码器可将特定参数发射(显式信令)到解码器,使得解码器可使用相同的特定参数。相反,如果解码器已具有特定参数以及其他,则可在不发射(隐式信令)的情况下使用信令,以简单允许解码器知道和选择特定参数。通过避免发射任何实际功能,在各种实施方案中实现了位节省。应当理解,信令可以各种方式实现。例如,在各种实施方案中,使用一个或多个语法元素、标记等将信息发信号通知至对应解码器。虽然前面涉及词语“signal(发信号通知)”的动词形式,但是词语“signal(信号)”在本文也可用作名词。
对于本领域的普通技术人员将显而易见的是,具体实施可产生格式化为携带例如可存储或可传输的信息的各种信号。信息可包括例如用于执行方法的指令或由所述具体实施中的一个具体实施产生的数据。例如,可格式化信号以携带所述实施方案的比特流。可格式化此类信号例如为电磁波(例如,使用频谱的射频部分)或基带信号。格式化可包括例如对数据流编码并且用编码的数据流调制载体。信号携带的信息可以是例如模拟或数字信息。已知的是,信号可通过各种不同的有线或无线链路发射。信号可存储在处理器可读介质上。
我们描述了多个实施方案。这些实施方案的特征可在各种权利要求类别和类型中单独地或以任何组合提供。此外,实施方案可包括以下特征、设备或方面中的一者或多者,单独地或以任何组合,跨各种权利要求类别和类型:
解码器可以执行如图5中所描述的方法500。图5示出了用于确定仿射模式AMVR启用指示符是否存在于参数集中的方法的示例,例如如表15-16所显示。例如,解码器可以确定针对视频序列启用仿射模式。该解码器可以基于AMVR启用指示符的值来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中。该解码器可以基于确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中来对视频序列进行解码。如果AMVR启用指示符的值指示针对视频序列启用AMVR模式,则该解码器可以确定仿射模式AMVR启用指示符存在于与视频序列相关联的参数集中。如果AMVR启用指示符的值指示针对视频序列停用AMVR模式,则该解码器可以确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中。在示例中,该解码器可以响应于确定仿射模式AMVR启用指示符存在于与视频序列相关联的参数集中,获得仿射模式AMVR启用指示符。在示例中,该解码器可以响应于确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中,将仿射模式AMVR启用指示符的值设置为指示在仿射模式被启用的情况下针对视频序列停用AMVR的值。解码器可以将AMVR启用指示符的值设置为指示基于GCI针对该视频序列停用AMVR的值。该解码器可以基于指示针对视频序列停用AMVR启用指示符的值来确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中。AMVR启用指示符可以在与视频序列相关联的参数集中。与该视频序列相关联的参数集可包括与该视频序列相关联的SPS。解码器可以基于仿射模式启用指示符的值来确定针对视频序列启用仿射模式,并且对仿射模式AMVR启用指示符是否存在于参数集中的确定可以响应于基于仿射模式启用指示符的值来确定针对视频序列启用仿射模式。仿射模式AMVR启用指示符可以指示是否针对视频序列启用仿射模式和AMVR的组合。响应于仿射模式AMVR启用指示符指示在仿射模式被启用的情况下针对视频序列启用AMVR,该解码器可以基于与视频序列的编码块相关联的编码模式自适应地确定与该编码块相关联的运动向量差的精度。该解码器可以确定针对该视频序列启用帧内块复制(IBC),响应于确定针对该视频序列启用IBC而获得IBC AMVR启用指示符,并基于该IBCAMVR启用指示符而对该视频序列进行解码。
包括熵解码、逆量化、逆变换和差分解码中的一者或多者的解码工具和技术来在解码器中实现如图5所述的方法。这些解码工具和技术可用于实现以下中的一者或多者:确定针对视频序列启用仿射模式;基于AMVR启用指示符的值来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中;基于确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中来对视频序列进行解码;如果AMVR启用指示符的值指示针对视频序列启用AMVR模式,则确定仿射模式AMVR启用指示符存在于与视频序列相关联的参数集中;如果AMVR启用指示符的值指示针对视频序列停用AMVR模式,则确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中;响应于确定仿射模式AMVR启用指示符存在于与视频序列相关联的参数集中,获得仿射模式AMVR启用指示符;响应于确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中,将仿射模式AMVR启用指示符的值设置为指示在仿射模式被启用的情况下针对视频序列停用AMVR的值;将AMVR启用指示符的值设置为指示基于GCI针对视频序列停用AMVR的值;基于指示针对视频序列停用AMVR的AMVR启用指示符的值来确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中;确定该AMVR启用指示符存在于与该视频序列相关联的参数集中;确定与该视频序列相关联的参数集可包括与该视频序列相关联的SPS;基于仿射模式启用指示符的值来确定针对该视频序列启用仿射模式,以及基于该仿射模式启用指示符的值来确定该仿射模式AMVR启用指示符是否存在于该参数集中;基于该仿射模式AMVR启用指示符来确定是否针对该视频序列启用该仿射模式和AMVR的组合;如果仿射模式AMVR启用指示符指示在仿射模式被启用的情况下针对视频序列启用AMVR,则基于与视频序列的编码块相关联的编码模式自适应地确定与该编码块相关联的运动向量差的精度;确定针对该视频序列启用帧内块复制(IBC),响应于针对该视频序列确定启用IBC而获得IBC AMVR启用指示符,并基于该IBCAMVR启用指示符而对该视频序列进行解码;以及与以上项中的任一者有关的其他解码器行为。
编码器可以确定针对视频序列启用仿射模式。编码器可以基于AMVR启用指示符的值来确定是否在与该视频序列相关联的参数集中包括仿射模式AMVR启用指示符。编码器可以基于确定是否在与该视频序列相关联的参数集中包括仿射模式AMVR启用指示符来生成与该视频序列相关联的参数集。如果该AMVR启用指示符的值指示针对该视频序列启用AMVR模式,则该编码器确定将该仿射模式AMVR启用指示符包括在与该视频序列相关联的参数集中。如果AMVR启用指示符的值指示针对视频序列停用AMVR模式,则该编码器确定不将仿射模式AMVR启用指示符包括在与视频序列相关联的参数集中。在示例中,编码器可以生成与视频序列相关联的参数集,包括AMVR启用指示符。在示例中,编码器可以响应于确定在与视频序列相关联的参数集中不包括仿射模式AMVR启用指示符,生成没有仿射模式AMVR启用指示符的参数集。AMVR启用指示符可以在与视频序列相关联的参数集中。与该视频序列相关联的参数集可包括与该视频序列相关联的SPS。编码器可以基于仿射模式启用指示符的值来确定是否针对视频序列启用仿射模式,且确定是否将仿射模式AMVR启用指示符包括在参数集中可以基于确定是否针对视频序列启用仿射模式。仿射模式AMVR启用指示符可以指示是否针对视频序列启用仿射模式和AMVR的组合。编码器可以确定针对该视频序列启用IBC,响应于确定针对该视频序列启用IBC来确定将IBC AMVR启用指示符包括在与该视频序列相关联的参数集中,以及生成包括该IBC AMVR启用指示符的参数集。
可使用包括量化、熵编码、逆量化、逆变换和差分编码中的一者或多者的编码工具和技术来在编码器中实现如本文所述的方法。这些编码工具和技术可用于实现以下中的一者或多者:确定针对视频序列启用仿射模式;基于AMVR启用指示符的值来确定是否在与该视频序列相关联的参数集中包括仿射模式AMVR启用指示符;基于确定是否在与该视频序列相关联的参数集中包括仿射模式AMVR启用指示符来生成与该视频序列相关联的参数集;如果该AMVR启用指示符的值指示针对该视频序列启用AMVR模式,则确定将该仿射模式AMVR启用指示符包括在与该视频序列相关联的参数集中;如果AMVR启用指示符的值指示针对视频序列停用AMVR模式,则确定不将仿射模式AMVR启用指示符包括在与视频序列相关联的参数集中;生成与该视频序列相关联的参数集,该参数集包括AMVR启用指示符;响应于确定在与该视频序列相关联的参数集中不包括该仿射模式AMVR启用指示符,生成与不具有该仿射模式AMVR启用指示符的视频序列相关联的参数集;将该AMVR启用指示符包括在与该视频序列相关联的参数集中;确定与该视频序列相关联的参数集可为与该视频序列相关联的SPS;基于仿射模式启用指示符的值来确定是否针对视频序列启用仿射模式;基于确定是否针对该视频序列启用仿射模式来确定是否将仿射模式AMVR启用指示符包括在参数集中;基于该仿射模式AMVR启用指示符来确定是否针对该视频序列启用该仿射模式和AMVR的组合;确定针对该视频序列启用IBC,响应于针对该视频序列确定启用IBC来确定将IBC AMVR启用指示符包括在与该视频序列相关联的参数集中,以及生成包括该IBC AMVR启用指示符的参数集;以及与以上项中的任一者有关的其他编码器行为。
可将语法元素插入信令中,例如,以使解码器能够识别与执行如图5所述的方法或使用的方法相关联的指示。例如,语法元素可以包括AMVR启用指示符、仿射模式AMVR启用指示符、GCI约束、仿射模式启用指示符或IBC AMVR启用指示符等中的一者或多者。作为示例,解码器可以基于仿射模式AMVR启用指示符的值来确定是否针对视频序列启用仿射模式和AMVR的组合。例如,可以基于要在解码器处应用的语法元素来选择和/或应用图5中描述的方法。例如,解码器可以接收AMVR启用指示符,并且基于AMVR启用指示符的值来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中。
编码器可基于本文的一个或多个示例来调整预测残差。例如,可通过从原始图像块中减去预测视频块来获得残差。例如,编码器可以基于如本文所述的AMVR启用指示符的值来预测视频块。编码器可获得原始图像块并且从原始图像块中减去预测视频块以生成预测残差。
比特流或信号可包括一个或多个语法元素或其变型。例如,比特流或信号可以包括用于AMVR启用指示符、仿射模式AMVR启用指示符、GCI约束、仿射模式启用指示符或IBCAMVR启用指示符等中的一者或多者中的任一者的语法元素。
比特流或信号可包括传达根据本文的一个或多个示例生成的信息的语法。例如,在执行如本文所述的示例时可以生成信息或数据。所生成的信息或数据可在比特流或信号中包括的语法中传达。
使解码器能够以对应于由编码器使用的方式调适残差的语法元素可插入信号中。例如,可使用本文的一个或多个示例来生成残差。
一种方法、过程、装置、存储指令的介质、存储数据的介质或用于创建和/或发射和/或接收和/或解码包括所述的语法元素中的一个或多个语法元素或其变型的比特流或信号的信号。
一种方法、过程、装置、存储指令的介质、存储数据的介质或用于根据所述的示例中的任一个示例创建和/或发射和/或接收和/或解码的信号。
一种方法、过程、装置、存储指令的介质、存储数据的介质,或信号,其根据但不限于以下中的一者或多者:确定是否针对视频序列启用仿射模式;获得仿射模式启用指示符;基于仿射模式启用指示符来确定是否针对视频序列启用仿射模式;基于包括于参数集中的仿射模式启用指示符确定是否针对视频序列启用仿射模式;基于包括在参数集中的AMVR启用指示符来确定是否针对视频序列启用AMVR模式;获得AMVR启用指示符;基于AMVR启用指示符来确定是否针对视频序列启用AMVR模式;基于包括在参数集中的AMVR启用指示符来确定是否针对视频序列启用AMVR模式;基于AMVR启用指示符的值来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中;基于确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中来对视频序列进行解码;如果AMVR启用指示符的值指示针对视频序列启用AMVR模式,则确定仿射模式AMVR启用指示符存在于与视频序列相关联的参数集中;如果AMVR启用指示符的值指示针对视频序列停用AMVR模式,则确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中;响应于确定仿射模式AMVR启用指示符存在于与视频序列相关联的参数集中,获得仿射模式AMVR启用指示符;响应于确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中,将仿射模式AMVR启用指示符的值设置为指示在仿射模式被启用的情况下针对视频序列停用AMVR的值;将AMVR启用指示符的值设置为指示基于GCI针对视频序列停用AMVR的值;基于指示针对视频序列停用AMVR的AMVR启用指示符的值来确定仿射模式AMVR启用指示符不存在于与视频序列相关联的参数集中;确定该AMVR启用指示符存在于与该视频序列相关联的参数集中;确定与该视频序列相关联的参数集可包括与该视频序列相关联的SPS;基于仿射模式启用指示符的值来确定针对该视频序列启用仿射模式,以及基于该仿射模式启用指示符的值来确定该仿射模式AMVR启用指示符是否存在于该参数集中;基于该仿射模式AMVR启用指示符来确定是否针对该视频序列启用该仿射模式和AMVR的组合;响应于仿射模式AMVR启用指示符指示在仿射模式被启用的情况下针对视频序列启用AMVR,基于与视频序列的编码块相关联的编码模式自适应地确定与该编码块相关联的运动向量差的精度;确定针对该视频序列启用帧内块复制(IBC),响应于确定针对该视频序列启用IBC而获得IBC AMVR启用指示符,并基于该IBCAMVR启用指示符而对该视频序列进行解码。
电视机、机顶盒、蜂窝电话、平板电脑或其他电子设备可以根据所描述的示例中的任何示例来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中。
电视机、机顶盒、蜂窝电话、平板电脑或其他电子设备可以根据所描述的示例中的任何示例来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中,并且显示(例如,使用监视器、屏幕或其他类型的显示器)所得图像。
电视机、机顶盒、蜂窝电话、平板电脑或其他电子设备可以选择(例如,使用调谐器)信道来接收包括编码图像的信号,并且根据所描述的示例中的任何示例来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中。
电视机、机顶盒、蜂窝电话、平板电脑或其他电子设备可以(例如,使用天线)通过空中接收包括编码图像的信号,并且根据所描述的示例中的任何示例来确定仿射模式AMVR启用指示符是否存在于与视频序列相关联的参数集中。
尽管上文以特定组合描述了特征和元件,但是本领域的普通技术人员将理解,每个特征或元件可单独使用或以与其他特征和元件的任何组合来使用。另外,本文所述的方法可在结合于计算机可读介质中以供计算机或处理器执行的计算机程序、软件或固件中实现。计算机可读介质的示例包括电子信号(通过有线或无线连接传输)和计算机可读存储介质。计算机可读存储介质的示例包括但不限于只读存储器(ROM)、随机存取存储器(RAM)、寄存器、高速缓存存储器、半导体存储器设备、磁介质(诸如内置硬盘和可移动磁盘)、磁光介质和光介质(诸如CD-ROM磁盘和数字通用光盘(DVD))。与软件相关联的处理器可用于实现用于WTRU、UE、终端、基站、RNC或任何主计算机的射频收发器。
Claims (30)
1.一种用于视频处理的装置,所述装置包括一个或多个处理器,其中所述一个或多个处理器被配置为:
确定针对视频序列启用仿射模式;
基于自适应运动向量差分分辨率(AMVR)启用指示符的值来确定仿射模式AMVR启用指示符是否存在于与所述视频序列相关联的参数集中;以及
基于所述确定所述仿射模式AMVR启用指示符是否存在于与所述视频序列相关联的所述参数集中来对所述视频序列进行解码。
2.根据权利要求1所述的装置,其中,在所述AMVR启用指示符的所述值指示针对所述视频序列启用AMVR模式的条件下,所述一个或多个处理器被配置为确定所述仿射模式AMVR启用指示符存在于与所述视频序列相关联的所述参数集中。
3.根据权利要求1所述的装置,其中,在所述AMVR启用指示符的所述值指示针对所述视频序列停用AMVR模式的条件下,所述一个或多个处理器被配置为确定所述仿射模式AMVR启用指示符不存在于与所述视频序列相关联的所述参数集中。
4.根据权利要求1所述的装置,其中所述一个或多个处理器被配置为响应于确定所述仿射模式AMVR启用指示符存在于与所述视频序列相关联的所述参数集中而获得所述仿射模式AMVR启用指示符。
5.根据权利要求1所述的装置,其中所述一个或多个处理器被配置为响应于确定所述仿射模式AMVR启用指示符不存在于与所述视频序列相关联的所述参数集中而将所述仿射模式AMVR启用指示符的值设置为指示在所述仿射模式被启用的情况下针对所述视频序列停用AMVR的值。
6.根据权利要求1所述的装置,其中所述一个或多个处理器被进一步配置为:
将所述AMVR启用指示符的所述值设置为指示基于常规约束信息(GCI)针对所述视频序列停用AMVR的值;以及
基于指示针对所述视频序列停用AMVR的所述AMVR启用指示符的所述值来确定所述仿射模式AMVR启用指示符不存在于与所述视频序列相关联的所述参数集中。
7.根据权利要求1所述的装置,其中所述一个或多个处理器被进一步配置为:
确定针对所述视频序列启用块内复制(IBC);以及
响应于所述确定针对所述视频序列启用IBC而获得IBC AMVR启用指示符,其中基于所述IBC AMVR启用指示符来对所述视频序列进行解码。
8.根据权利要求1所述的装置,其中所述一个或多个处理器被进一步配置为:
基于指示在启用所述仿射模式的情况下针对所述视频序列启用AMVR的所述仿射模式AMVR启用指示符的值,基于与所述视频序列的编码块相关联的编码模式自适应地确定与所述编码块相关联的运动向量差的精度。
9.一种用于视频处理的装置,所述装置包括一个或多个处理器,其中所述一个或多个处理器被配置为:
确定针对视频序列启用仿射模式;
基于自适应运动向量差分分辨率(AMVR)启用指示符的值来确定是否在与所述视频序列相关联的参数集中包括仿射模式AMVR启用指示符;以及
基于所述确定是否在所述参数集中包括所述仿射模式AMVR启用指示符来生成与所述视频序列相关联的所述参数集。
10.一种用于视频处理的方法,所述方法包括:
确定针对视频序列启用仿射模式;
基于自适应运动向量差分分辨率(AMVR)启用指示符的值来确定仿射模式AMVR启用指示符是否存在于与所述视频序列相关联的参数集中;以及
基于所述确定所述仿射模式AMVR启用指示符是否存在于所述参数集中来对所述视频序列进行解码。
11.根据权利要求10所述的方法,所述方法进一步包括在所述AMVR启用指示符的所述值指示针对所述视频序列启用AMVR的情况下,确定所述仿射模式AMVR启用指示符存在于与所述视频序列相关联的所述参数集中。
12.根据权利要求10所述的方法,所述方法进一步包括在所述AMVR启用指示符的所述值指示针对所述视频序列停用AMVR的情况下,确定所述仿射模式AMVR启用指示符不存在于与所述视频序列相关联的所述参数集中。
13.根据权利要求10所述的方法,所述方法进一步包括响应于确定所述仿射模式AMVR启用指示符存在于与所述视频序列相关联的所述参数集中,获得所述仿射模式AMVR启用指示符。
14.根据权利要求10所述的方法,所述方法进一步包括响应于确定所述仿射模式AMVR启用指示符不存在于与所述视频序列相关联的所述参数集中,将所述仿射模式AMVR启用指示符的值设置为指示在所述仿射模式被启用的情况下停用所述视频序列的AMVR的值。
15.根据权利要求10所述的方法,所述方法进一步包括:
将所述AMVR启用指示符的所述值设置为指示基于常规约束信息(GCI)针对所述视频序列停用AMVR的值;以及
基于指示针对所述视频序列停用AMVR的所述AMVR启用指示符的值来确定所述仿射模式AMVR启用指示符不存在于与所述视频序列相关联的所述参数集中。
16.根据权利要求10所述的方法,所述方法进一步包括:
确定针对所述视频序列启用块内复制(IBC);以及
响应于确定针对所述视频序列启用IBC而获得仿射模式IBC启用指示符,其中基于所述仿射模式IBC启用指示符来对所述视频序列进行解码。
17.根据权利要求10所述的方法,所述方法进一步包括:
响应于所述仿射模式AMVR启用指示符指示在所述仿射模式被启用的情况下针对所述视频序列启用AMVR,基于与所述视频序列的编码块相关联的编码模式自适应地确定与所述编码块相关联的运动向量差的精度。
18.一种用于视频处理的方法,所述方法包括:
确定针对视频序列启用仿射模式;
基于自适应运动向量差分分辨率(AMVR)启用指示符的值来确定是否在与所述视频序列相关联的参数集中包括仿射模式AMVR启用指示符;以及
基于所述确定是否在所述参数集中包括所述仿射模式AMVR启用指示符来生成与所述视频序列相关联的所述参数集。
19.根据权利要求1至8中任一项所述的装置或根据权利要求10至17中任一项所述的方法,其中确定针对所述视频序列启用仿射模式是基于仿射模式启用指示符的值,并且确定所述仿射模式AMVR启用指示符是否存在于所述参数集中是响应于基于所述仿射模式启用指示符的所述值来确定针对所述视频序列启用仿射模式。
20.根据权利要求1至9和19中任一项所述的装置或根据权利要求10至19中任一项所述的方法,其中所述AMVR启用指示符在与所述视频序列相关联的所述参数集中。
21.根据权利要求1至9、19和20中任一项所述的装置或根据权利要求10至20中任一项所述的方法,其中所述仿射模式AMVR启用指示符指示是否针对所述视频序列启用所述仿射模式和AMVR的组合。
22.根据权利要求1至9和19至21中任一项所述的装置或根据权利要求10至21中任一项所述的方法,其中与所述视频序列相关联的所述参数集包括与所述视频序列相关联的SPS。
23.一种非暂态计算机可读介质,所述非暂态计算机可读介质包含根据根据权利要求10至22中任一项所述的方法生成的数据内容。
24.一种计算机可读介质,所述计算机可读介质包括用于使得一个或多个处理器执行根据权利要求10至22中任一项所述的方法的指令。
25.一种计算机程序产品,所述计算机程序产品包括用于在由一个或多个处理器执行时执行根据权利要求10至22中任一项所述的方法的指令。
26.一种设备,所述设备包括:
根据权利要求1至9和19至21中任一项所述的装置;和
以下各项中的至少一者:(i)天线,所述天线被配置为接收信号,所述信号包括表示图像的数据;(ii)频带限制器,所述频带限制器被配置为将所接收的信号限制为包括表示所述图像的所述数据的频带;或(iii)显示器,所述显示器被配置为显示所述图像。
27.根据根据权利要求1至9和19至21中任一项所述的设备,所述设备包括:
TV、移动电话、平板电脑或机顶盒(STB)。
28.一种信号,所述信号包括与根据根据权利要求10至22中任一项所述的方法与所述视频序列相关联的所述参数集。
29.一种装置,所述装置包括:
存取单元,所述存取单元被配置为根据根据权利要求10至22中任一项所述的方法存取包括与所述视频序列相关联的所述参数集的数据;和
传输器,所述传输器被配置为传输包括所述参数集的所述数据。
30.一种方法,所述方法包括:
根据根据权利要求10至22中任一项所述的方法存取包括与所述视频序列相关联的所述参数集的数据;以及
传输包括所述参数集的所述数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310414544.1A CN116527926A (zh) | 2019-12-30 | 2020-12-24 | 合并模式、自适应运动向量精度和变换跳过语法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP19306787 | 2019-12-30 | ||
EP19306787.3 | 2019-12-30 | ||
PCT/EP2020/087882 WO2021136747A1 (en) | 2019-12-30 | 2020-12-24 | Merge mode, adaptive motion vector precision, and transform skip syntax |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310414544.1A Division CN116527926A (zh) | 2019-12-30 | 2020-12-24 | 合并模式、自适应运动向量精度和变换跳过语法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115152228A true CN115152228A (zh) | 2022-10-04 |
Family
ID=69185275
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310414544.1A Pending CN116527926A (zh) | 2019-12-30 | 2020-12-24 | 合并模式、自适应运动向量精度和变换跳过语法 |
CN202080094754.1A Pending CN115152228A (zh) | 2019-12-30 | 2020-12-24 | 合并模式、自适应运动向量精度和变换跳过语法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310414544.1A Pending CN116527926A (zh) | 2019-12-30 | 2020-12-24 | 合并模式、自适应运动向量精度和变换跳过语法 |
Country Status (8)
Country | Link |
---|---|
US (1) | US20230046946A1 (zh) |
EP (1) | EP4085630A1 (zh) |
JP (1) | JP2023508020A (zh) |
KR (1) | KR20220127271A (zh) |
CN (2) | CN116527926A (zh) |
CA (1) | CA3163047A1 (zh) |
TW (1) | TW202143732A (zh) |
WO (1) | WO2021136747A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113906750A (zh) * | 2019-04-30 | 2022-01-07 | 韦勒斯标准与技术协会公司 | 一种使用自适应运动矢量分辨率处理视频信号的方法和装置 |
WO2023057488A1 (en) * | 2021-10-05 | 2023-04-13 | Interdigital Vc Holdings France, Sas | Motion vector coding with input motion vector data |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020129950A1 (en) * | 2018-12-21 | 2020-06-25 | Sharp Kabushiki Kaisha | Systems and methods for performing inter prediction in video coding |
-
2020
- 2020-12-24 EP EP20833927.5A patent/EP4085630A1/en active Pending
- 2020-12-24 JP JP2022538306A patent/JP2023508020A/ja active Pending
- 2020-12-24 CN CN202310414544.1A patent/CN116527926A/zh active Pending
- 2020-12-24 CA CA3163047A patent/CA3163047A1/en active Pending
- 2020-12-24 TW TW109145933A patent/TW202143732A/zh unknown
- 2020-12-24 CN CN202080094754.1A patent/CN115152228A/zh active Pending
- 2020-12-24 WO PCT/EP2020/087882 patent/WO2021136747A1/en unknown
- 2020-12-24 US US17/790,055 patent/US20230046946A1/en active Pending
- 2020-12-24 KR KR1020227026268A patent/KR20220127271A/ko unknown
Also Published As
Publication number | Publication date |
---|---|
KR20220127271A (ko) | 2022-09-19 |
EP4085630A1 (en) | 2022-11-09 |
CN116527926A (zh) | 2023-08-01 |
US20230046946A1 (en) | 2023-02-16 |
JP2023508020A (ja) | 2023-02-28 |
TW202143732A (zh) | 2021-11-16 |
WO2021136747A1 (en) | 2021-07-08 |
CA3163047A1 (en) | 2021-07-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220377344A1 (en) | Systems and methods for versatile video coding | |
CN113826400A (zh) | 用于利用光流的解码器侧运动向量细化的预测细化的方法和装置 | |
US20230046946A1 (en) | Merge mode, adaptive motion vector precision, and transform skip syntax | |
US20220394298A1 (en) | Transform coding for inter-predicted video data | |
US20230045182A1 (en) | Quantization parameter coding | |
CN114600452A (zh) | 用于运动补偿的自适应插值滤波器 | |
US20240196007A1 (en) | Overlapped block motion compensation | |
JP7495433B2 (ja) | オプティカルフローを用いたブロック境界予測リファインメント | |
JP2022549008A (ja) | 双方向オプティカルフローのための切り替え論理 | |
CN114556928A (zh) | 帧内子分区相关的帧内编码 | |
WO2024133058A1 (en) | Gradual decoding refresh padding | |
WO2023194193A1 (en) | Sign and direction prediction in transform skip and bdpcm | |
WO2023057488A1 (en) | Motion vector coding with input motion vector data | |
CA3232975A1 (en) | Template-based syntax element prediction | |
WO2024133767A1 (en) | Motion compensation for video blocks | |
WO2023194556A1 (en) | Implicit intra mode for combined inter merge/intra prediction and geometric partitioning mode intra/inter prediction | |
WO2024002947A1 (en) | Intra template matching with flipping | |
WO2023194558A1 (en) | Improved subblock-based motion vector prediction (sbtmvp) | |
WO2023194604A1 (en) | Template based cclm/mmlm slope adjustment | |
WO2023117861A1 (en) | Local illumination compensation with multiple linear models | |
WO2023118280A1 (en) | Gdr interaction with template based tools in intra slice | |
WO2023057501A1 (en) | Cross-component depth-luma coding | |
WO2024079193A1 (en) | Extended angular prediction modes with decoder side refinement | |
WO2024002895A1 (en) | Template matching prediction with sub-sampling | |
WO2023118259A1 (en) | Video block partitioning based on depth or motion information |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20230925 Address after: Paris France Applicant after: Interactive digital CE patent holdings Ltd. Address before: French Sesong Sevigne Applicant before: Interactive digital VC holding France |
|
TA01 | Transfer of patent application right |