CN110650357B - 视频解码方法及装置 - Google Patents

视频解码方法及装置 Download PDF

Info

Publication number
CN110650357B
CN110650357B CN201910927094.XA CN201910927094A CN110650357B CN 110650357 B CN110650357 B CN 110650357B CN 201910927094 A CN201910927094 A CN 201910927094A CN 110650357 B CN110650357 B CN 110650357B
Authority
CN
China
Prior art keywords
region
resolution
regions
decoding
identification value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910927094.XA
Other languages
English (en)
Other versions
CN110650357A (zh
Inventor
高欣玮
李蔚然
谷沉沉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201910927094.XA priority Critical patent/CN110650357B/zh
Publication of CN110650357A publication Critical patent/CN110650357A/zh
Priority to PCT/CN2020/116642 priority patent/WO2021057684A1/zh
Priority to US17/469,729 priority patent/US11968379B2/en
Application granted granted Critical
Publication of CN110650357B publication Critical patent/CN110650357B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167Position within a video image, e.g. region of interest [ROI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Abstract

本发明公开了一种视频解码方法及装置。其中,该方法包括:采用获取待解码视频帧,其中,待解码视频帧被划分为多个区域;获取多个区域中每个区域对应的待解码数据中携带的语法元素,其中,语法元素用于指示解码每个区域所采用的分辨率,解码多个区域所采用的多个分辨率包括至少两个不同的分辨率;采用每个区域所对应的分辨率对多个区域中的每个区域进行解码的方式。本发明解决了相关技术中采用相同分辨率对视频进行编解码导致峰值信噪比波动较大的技术问题。

Description

视频解码方法及装置
技术领域
本发明涉及计算机领域,具体而言,涉及一种视频解码方法及装置。
背景技术
在现有的视频编码过程中,如图1所示,如果对于视频中的一帧中的不同块都采用了高分辨率进行编码,则在传输的带宽比较小(例如,小于图1中所示的带宽阈值Th)的情况下,对于视频中的一帧中的不同块采用高分辨率进行编码时所对应的峰值信噪比PSNR1要低于对于视频中的一帧中的不同块采用低分辨率进行编码时所对应的峰值信噪比PSNR2,也就是说,在传输带宽较小时采用高分辨率进行编码时的峰值信噪比PSNR1相对较小,失真相对较大。
同理,如果对于视频中的一帧中的不同块都采用了低分辨率进行编码,则在传输的带宽比较大(例如,大于图1中所示的带宽阈值Th)的情况下,对于视频中的一帧中的不同块采用低分辨率进行编码时所对应的峰值信噪比PSNR3要低于对于视频中的一帧中的不同块采用高分辨率进行编码时所对应的峰值信噪比PSNR4,也就是说,在传输带宽较大时采用低分辨率进行编码时的峰值信噪比PSNR3相对较小,失真相对较大。
此外,对于不同类型的视频或者同一视频中的不同帧或者同一帧中的不同块,如图1所示的交点D会移动,从而增加了现有技术中选择哪种分辨率对视频中的帧进行编码的选择难度。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种视频解码方法及装置,以至少解决相关技术中采用相同分辨率对视频进行编解码导致峰值信噪比波动较大的技术问题。
根据本发明实施例的一个方面,提供了一种视频解码方法,包括:
获取待解码视频帧,其中,所述待解码视频帧被划分为多个区域;
获取所述多个区域中每个区域对应的待解码数据中携带的语法元素,其中,所述语法元素用于指示解码所述每个区域所采用的分辨率,解码所述多个区域所采用的多个分辨率包括至少两个不同的分辨率;
采用每个区域所对应的分辨率对所述多个区域中的每个区域进行解码。
根据本发明实施例的另一方面,还提供了一种视频编码方法,包括:
获取待编码视频帧,其中,所述待编码视频帧被划分为多个区域;
采用多个分辨率中对应的分辨率对所述多个区域中的每个区域进行编码,得到所述每个区域对应的编码数据,其中,所述多个分辨率包括至少两个不同的分辨率;
根据所述每个区域对应的分辨率为所述每个区域对应的编码数据添加语法元素,其中,所述语法元素用于指示编码所述每个区域所采用的分辨率。
根据本发明实施例的另一方面,还提供了一种视频解码装置,包括:
第一获取模块,用于获取待解码视频帧,其中,所述待解码视频帧被划分为多个区域;
第二获取模块,用于获取所述多个区域中每个区域对应的待解码数据中携带的语法元素,其中,所述语法元素用于指示解码所述每个区域所采用的分辨率,解码所述多个区域所采用的多个分辨率包括至少两个不同的分辨率;
解码模块,用于采用每个区域所对应的分辨率对所述多个区域中的每个区域进行解码。
可选地,所述第二获取模块,包括:
第一获取单元,包括获取所述每个区域所对应的标识值,其中,所述每个区域所对应的标识值用于指示解码所述每个区域所采用的分辨率。
可选地,所述第二获取模块,包括:
第二获取单元,用于获取所述每个区域所对应的标识值,其中,所述每个区域所对应的标识值用于指示解码所述每个区域所采用的分辨率与解码所述每个区域的前一个区域所采用的分辨率之间的关系;
第一确定单元,用于根据所述标识值和解码所述每个区域的前一个区域所采用的分辨率确定解码所述每个区域所采用的分辨率。
可选地,所述第二获取模块,包括:
第二确定单元,用于在确定所述每个区域对应的标识值为第一标识值的情况下,确定解码所述每个区域所采用的分辨率为所述每个区域的前一个区域对应的分辨率;
第三确定单元,用于在确定所述每个区域对应的标识值为第二标识值的情况下,确定解码所述每个区域所采用的分辨率为与所述每个区域的前一个区域对应的分辨率不同的分辨率。
可选地,所述第一获取模块用于以下之一:
所述多个区域是基于预先确定的视频编解码标准对所述待解码视频帧进行划分得到的多个视频块;
所述多个区域是响应于获取到的输入的区域划分指令对所述待解码视频帧进行划分得到的区域;
所述多个区域是多个Tile区域。
根据本发明实施例的另一方面,还提供了一种视频编码装置,包括:
第三获取模块,用于获取待编码视频帧,其中,所述待编码视频帧被划分为多个区域;
编码模块,用于采用多个分辨率中对应的分辨率对所述多个区域中的每个区域进行编码,得到所述每个区域对应的编码数据,其中,所述多个分辨率包括至少两个不同的分辨率;
添加模块,用于根据所述每个区域对应的分辨率为所述每个区域对应的编码数据添加语法元素,其中,所述语法元素用于指示编码所述每个区域所采用的分辨率。
可选地,所述添加模块,包括:
第四确定单元,用于确定所述每个区域所对应的分辨率在多个标识值中所对应的标识值,其中,所述多个分辨率中不同的分辨率在所述多个标识值中对应不同的标识值;
第一添加单元,用于将所述每个区域所对应的标识值作为所述语法元素添加到所述每个区域对应的编码数据中。
可选地,所述添加模块,包括:
第五确定单元,用于根据所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率之间的关系确定所述每个区域对应的标识值;
第二添加单元,用于将所述每个区域所对应的标识值作为所述语法元素添加到所述每个区域对应的编码数据中。
可选地,所述第五确定单元,包括:
第一确定子单元,用于在所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率相同的情况下,确定所述每个区域对应的标识值为第一标识值;
第二确定子单元,用于在所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率不同的情况下,确定所述每个区域对应的标识值为第二标识值。
根据本发明实施例的另一方面,还提供了一种存储介质,其特征在于,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行上述任一项中所述的方法。
根据本发明实施例的另一方面,还提供了一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为通过所述计算机程序执行上述任一项中所述的方法。
在本发明实施例中,采用获取待解码视频帧,其中,待解码视频帧被划分为多个区域;获取多个区域中每个区域对应的待解码数据中携带的语法元素,其中,语法元素用于指示解码每个区域所采用的分辨率,解码多个区域所采用的多个分辨率包括至少两个不同的分辨率;采用每个区域所对应的分辨率对多个区域中的每个区域进行解码的方式,对于视频中的一帧中的不同块自适应采用对应的分辨率进行编码,这样无论是在传输的带宽比较小的情况下,还是在传输的带宽比较大的情况下,对应的峰值信噪比都相对较大,失真相对较小,从而保证了峰值信噪比能够在一个较小的范围内变化,并且峰值信噪比都相对较大,从而实现了避免对视频进行编解码的峰值信噪比波动较大的技术效果,进而解决了相关技术中采用相同分辨率对视频进行编解码导致峰值信噪比波动较大的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是相关技术中编解码方式的峰值信噪比的示意图;
图2是根据本发明实施例的一种可选的视频解码方法的示意图;
图3是根据本发明实施例的一种可选的视频解码方法的应用环境示意图;
图4是根据本发明可选的实施方式的一种可选的视频解码方法的示意图一;
图5是根据本发明可选的实施方式的一种可选的视频解码方法的示意图二;
图6是根据本发明可选的实施方式的一种可选的视频解码方法的示意图三;
图7是根据本发明可选的实施方式的一种可选的视频解码方法的示意图四;
图8是根据本发明实施例的一种可选的视频解码方法的示意图;
图9是根据本发明实施例的一种可选的视频解码方法的应用环境示意图;
图10是根据本发明可选的实施方式的一种可选的视频编码方法的示意图;
图11是根据本发明实施例的一种可选的视频解码装置的示意图;
图12是根据本发明实施例的一种可选的视频编码装置的示意图;
图13是根据本发明实施例的一种可选的视频编解码方法的应用场景示意图一;
图14是根据本发明实施例的一种可选的视频编解码方法的应用场景示意图二;以及
图15是根据本发明实施例的一种可选的电子装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
根据本发明实施例的一个方面,提供了一种视频解码方法,如图2所示,该方法包括:
S202获取待解码视频帧,其中,所述待解码视频帧被划分为多个区域;
S204,获取所述多个区域中每个区域对应的待解码数据中携带的语法元素,其中,所述语法元素用于指示解码所述每个区域所采用的分辨率,解码所述多个区域所采用的多个分辨率包括至少两个不同的分辨率;
S206,采用每个区域所对应的分辨率对所述多个区域中的每个区域进行解码。
可选地,在本实施例中,上述视频解码方法可以应用于如图3所示的服务器302和客户端304所构成的硬件环境中。如图3所示,服务器302获取待解码视频帧,其中,待解码视频帧被划分为多个区域;获取多个区域中每个区域对应的待解码数据中携带的语法元素,其中,语法元素用于指示解码每个区域所采用的分辨率,解码多个区域所采用的多个分辨率包括至少两个不同的分辨率;采用每个区域所对应的分辨率对多个区域中的每个区域进行解码。服务器302将解码后得到的视频发送给客户端304进行播放。
可选地,在本实施例中,上述视频解码方法可以但不限于应用于音视频处理的场景中。比如:客户端A与客户端B进行视频通话,客户端A侧和客户端B侧分别采集视频画面,对采集到的视频画面进行编码,将编码后的视频发送给对方,在对方对接收到的视频进行解码,并播放解码后的视频。
可选地,在本实施例中,上述视频解码方法还可以但不限于应用于视频文件的播放、视频直播等场景中。
其中,上述客户端可以但不限于为各种类型的应用,例如,在线教育应用、即时通讯应用、社区空间应用、游戏应用、购物应用、浏览器应用、金融应用、多媒体应用、直播应用等。具体的,可以但不限于应用于在上述即时通讯应用中对音视频进行处理的场景中,或还可以但不限于应用于在上述多媒体应用中对音视频进行处理的场景中,以避免对视频进行编解码的峰值信噪比波动较大。上述仅是一种示例,本实施例中对此不做任何限定。
可选地,在本实施例中,待解码视频帧中的不同区域是采用不同分辨率编码得到的。比如:待解码视频帧被划分为4个区域,分别是区域1、区域2、区域3和区域4,其中,区域1是采用分辨率1编码的,区域2和区域3是采用分辨率2编码的,区域4是采用分辨率3编码的。这些编码信息通过待解码数据中携带的语法元素来指示,解码端通过获取语法元素获取到不同区域采用的不同分辨率,从而采用各个区域对应的分辨率对其进行解码。
可选地,在本实施例中,待解码视频帧所包括的多个区域是至少使用两个不同的分辨率进行解码的。
可选地,在本实施例中,用于指示解码每个区域所采用的分辨率的语法元素可以是位于待解码视频帧的固定位置上的一段数据,在该位置上不同的数据值代表了不同的分辨率。可以通过在待解码视频帧上查找该位置来获取语法元素,从而确定各个区域不同的分辨率。
在一个可选的实施方式中,如图4所示,获取到待解码视频帧,其中,待解码视频帧被划分为多个区域,包括:区域1、区域2、区域3和区域4,获取多个区域中每个区域对应的待解码数据中携带的语法元素,其中,区域1对应的语法元素用于指示解码区域1所采用的分辨率为分辨率1,区域2对应的语法元素用于指示解码区域2所采用的分辨率为分辨率2,区域3对应的语法元素用于指示解码区域3所采用的分辨率为分辨率2,区域4对应的语法元素用于指示解码区域4所采用的分辨率为分辨率3,采用分辨率1对区域1进行解码,采用分辨率2对区域2和区域3进行解码,采用分辨率3对区域4进行解码。
可见,通过上述步骤,对于视频中的一帧中的不同块自适应采用对应的分辨率进行编码,这样无论是在传输的带宽比较小的情况下,还是在传输的带宽比较大的情况下,对应的峰值信噪比都相对较大,失真相对较小,从而保证了峰值信噪比能够在一个较小的范围内变化,并且峰值信噪比都相对较大,从而实现了避免对视频进行编解码的峰值信噪比波动较大的技术效果,进而解决了相关技术中采用相同分辨率对视频进行编解码导致峰值信噪比波动较大的技术问题。
作为一种可选的方案,获取所述多个区域中每个区域对应的待解码数据中携带的语法元素,包括:
S1,获取所述每个区域所对应的标识值,其中,所述每个区域所对应的标识值用于指示解码所述每个区域所采用的分辨率。
可选地,在本实施例中,在语法元素中可以直接用不同的标识值来表示不同的分辨率。比如:分辨率1用00表示,分辨率2用01表示,分辨率3用10表示,分辨率4用11表示。需要说明的是,标识值表示分辨率的方式不仅于此,可以采用各种能够区分分辨率的标识值表示方式来指示不同区域采用的不同分辨率。
在一个可选的实施方式中,如图5所示,获取到待解码视频帧,其中,待解码视频帧被划分为多个区域,包括:区域1、区域2、区域3和区域4,获取多个区域中每个区域对应的标识值,其中,区域1对应的标识值为00,可以确定解码区域1所采用的分辨率为分辨率1,区域2对应的标识值为01,可以确定解码区域2所采用的分辨率为分辨率2,区域3对应的标识值为01,可以确定解码区域3所采用的分辨率为分辨率2,区域4对应的标识值为10,可以确定解码区域4所采用的分辨率为分辨率3,采用分辨率1对区域1进行解码,采用分辨率2对区域2和区域3进行解码,采用分辨率3对区域4进行解码。
作为一种可选的方案,获取所述多个区域中每个区域对应的待解码数据中携带的语法元素,包括:
S1,获取所述每个区域所对应的标识值,其中,所述每个区域所对应的标识值用于指示解码所述每个区域所采用的分辨率与解码所述每个区域的前一个区域所采用的分辨率之间的关系;
S2,根据所述标识值和解码所述每个区域的前一个区域所采用的分辨率确定解码所述每个区域所采用的分辨率。
可选地,在本实施例中,当前区域对应的标识值可以是用来指示当前区域的分辨率与当前区域的前一个区域的分辨率之间的关系的。再根据该关系和前一个区域的分辨率确定当前区域的分辨率。
作为一种可选的方案,根据所述标识值和解码所述每个区域的前一个区域所采用的分辨率确定解码所述每个区域所采用的分辨率,还包括:
S1,在确定所述每个区域对应的标识值为第一标识值的情况下,确定解码所述每个区域所采用的分辨率为所述每个区域的前一个区域对应的分辨率;
S2,在确定所述每个区域对应的标识值为第二标识值的情况下,确定解码所述每个区域所采用的分辨率为与所述每个区域的前一个区域对应的分辨率不同的分辨率。
可选地,在本实施例中,分辨率之间的关系可以但不限于包括:分辨率相同或者分辨率不同。使用第一标识值来表示分辨率相同,使用第二标识值来表示分辨率不同。例如:使用1来标识分辨率相同,使用0来表示分辨率不同,或者,使用0来表示分辨率相同,使用1来表示分辨率不同。
可选地,在本实施例中,对于每一个帧中的第一个区域来说,可以使用标识值来直接表示该区域所采用的分辨率,或者,也可以使用标识值来表示其与前一帧中最后一个区域的分辨率之间的关系。
在上述可选的实施方式中,如图6所示,使用0来表示分辨率相同,使用1来表示分辨率不同。用于解码的分辨率包括两种分辨率,分辨率A和分辨率B,那么,获取到待解码视频帧,其中,待解码视频帧被划分为多个区域,包括:区域1、区域2、区域3和区域4,获取多个区域中每个区域对应的标识值,其中,区域1对应的标识值为0,并且可以获取到前一帧的最后一个区域采用的分辨率是分辨率A,可以确定解码区域1所采用的分辨率为分辨率A,区域2对应的标识值为1,可以确定解码区域2所采用的分辨率为分辨率B,区域3对应的标识值为0,可以确定解码区域3所采用的分辨率为分辨率B,区域4对应的标识值为0,可以确定解码区域4所采用的分辨率为分辨率B。
作为一种可选的方案,所述待解码视频帧被划分为多个区域包括以下之一:
S1,所述多个区域是基于预先确定的视频编解码标准对所述待解码视频帧进行划分得到的多个视频块;
S2,所述多个区域是响应于获取到的输入的区域划分指令对所述待解码视频帧进行划分得到的区域;
S3,所述多个区域是多个Tile区域。
可选地,在本实施例中,多个区域可以但不限于采用各种划分方式,例如:采用标准协议中视频块的划分方式,二叉树、三叉树、四叉树等等,每一个视频块为一个区域,或者,可以通过输入的区域划分指令指示区域的划分方式,比如:如图7所示,将视频通话过程中的较小的视频窗口划分为一个区域,作为区域1,较大的视频窗口或者说除较小的视频窗口之外的部分划分为一个区域,作为区域2。区域的划分方式还可以是其他的划分标准,比如:采用分片Tile区域的划分方式划分出的不同的Tile区域。
根据本发明实施例的另一个方面,提供了一种视频编码方法,如图8所示,该方法包括:
S802获取待编码视频帧,其中,所述待编码视频帧被划分为多个区域;
S804,采用多个分辨率中对应的分辨率对所述多个区域中的每个区域进行编码,得到所述每个区域对应的编码数据,其中,所述多个分辨率包括至少两个不同的分辨率;
S806,根据所述每个区域对应的分辨率为所述每个区域对应的编码数据添加语法元素,其中,所述语法元素用于指示编码所述每个区域所采用的分辨率。
可选地,在本实施例中,上述视频编码方法可以应用于如图9所示的服务器902、服务器302、客户端904和客户端304所构成的硬件环境中。如图9所示,服务器902获取到客户端904采集的待编码视频帧,其中,待编码视频帧被划分为多个区域;采用多个分辨率中对应的分辨率对多个区域中的每个区域进行编码,得到每个区域对应的编码数据,其中,多个分辨率包括至少两个不同的分辨率;根据每个区域对应的分辨率为每个区域对应的编码数据添加语法元素,其中,语法元素用于指示编码每个区域所采用的分辨率。服务器902将编码后得到的视频发送给服务器302进行解码。服务器302将解码后的视频发送给客户端304进行播放。
可选地,在本实施例中,上述视频编码方法可以但不限于应用于音视频处理的场景中。比如:客户端A与客户端B进行视频通话,客户端A侧和客户端B侧分别采集视频画面,对采集到的视频画面进行编码,将编码后的视频发送给对方,在对方对接收到的视频进行解码,并播放解码后的视频。
可选地,在本实施例中,上述视频编码方法还可以但不限于应用于视频文件的播放、视频直播等场景中。
其中,上述客户端可以但不限于为各种类型的应用,例如,在线教育应用、即时通讯应用、社区空间应用、游戏应用、购物应用、浏览器应用、金融应用、多媒体应用、直播应用等。具体的,可以但不限于应用于在上述即时通讯应用中对音视频进行处理的场景中,或还可以但不限于应用于在上述多媒体应用中对音视频进行处理的场景中,以避免对视频进行编解码的峰值信噪比波动较大。上述仅是一种示例,本实施例中对此不做任何限定。
可选地,在本实施例中,待编码视频帧中的不同区域采用不同分辨率进行编码。比如:待编码视频帧被划分为4个区域,分别是区域1、区域2、区域3和区域4,其中,区域1是采用分辨率1编码的,为区域1添加用于表示分辨率1的语法元素,区域2和区域3是采用分辨率2编码的,为区域2和区域3添加用于表示分辨率2的语法元素,区域4是采用分辨率3编码的,为区域4添加用于表示分辨率3的语法元素。
可选地,在本实施例中,至少使用两个不同的分辨率对待编码视频帧所包括的多个区域进行编码。
可选地,在本实施例中,用于指示编码每个区域所采用的分辨率的语法元素可以是位于待解码视频帧的固定位置上的一段数据,在该位置上不同的数据值代表了不同的分辨率。可以将代表区域对应的分辨率的语法元素添加在该位置上。
在一个可选的实施方式中,如图10所示,获取到待编码视频帧,其中,待编码视频帧被划分为多个区域,包括:区域1、区域2、区域3和区域4,采用分辨率1对区域1进行编码,采用分辨率2对区域2和区域3进行编码,采用分辨率3对区域4进行编码。为区域1对应的编码数据添加用于表示分辨率1的语法元素1,为区域2和区域3对应的编码数据添加用于表示分辨率2的语法元素2,为区域4对应的编码数据添加用于表示分辨率3的语法元素3。
可见,通过上述步骤,对于视频中的一帧中的不同块自适应采用对应的分辨率进行编码,这样无论是在传输的带宽比较小的情况下,还是在传输的带宽比较大的情况下,对应的峰值信噪比都相对较大,失真相对较小,从而保证了峰值信噪比能够在一个较小的范围内变化,并且峰值信噪比都相对较大,从而实现了避免对视频进行编解码的峰值信噪比波动较大的技术效果,进而解决了相关技术中采用相同分辨率对视频进行编解码导致峰值信噪比波动较大的技术问题。
作为一种可选的方案,根据所述每个区域对应的分辨率为所述每个区域对应的编码数据添加语法元素,包括:
S1,确定所述每个区域所对应的分辨率在多个标识值中所对应的标识值,其中,所述多个分辨率中不同的分辨率在所述多个标识值中对应不同的标识值;
S2,将所述每个区域所对应的标识值作为所述语法元素添加到所述每个区域对应的编码数据中。
可选地,在本实施例中,在语法元素中可以直接用不同的标识值来表示不同的分辨率。比如:分辨率1用00表示,分辨率2用01表示,分辨率3用10表示,分辨率4用11表示。需要说明的是,标识值表示分辨率的方式不仅于此,可以采用各种能够区分分辨率的标识值表示方式来指示不同区域采用的不同分辨率。
作为一种可选的方案,根据所述每个区域对应的分辨率为所述每个区域对应的编码数据添加语法元素,包括:
S1,根据所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率之间的关系确定所述每个区域对应的标识值;
S2,将所述每个区域所对应的标识值作为所述语法元素添加到所述每个区域对应的编码数据中。
可选地,在本实施例中,当前区域对应的标识值可以是用来指示当前区域的分辨率与当前区域的前一个区域的分辨率之间的关系的。根据当前区域的分辨率与前一个区域的分辨率之间的关系确定出每个区域对应的标识值。
作为一种可选的方案,根据所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率之间的关系确定所述每个区域对应的标识值,包括:
S1,在所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率相同的情况下,确定所述每个区域对应的标识值为第一标识值;
S2,在所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率不同的情况下,确定所述每个区域对应的标识值为第二标识值。
可选地,在本实施例中,分辨率之间的关系可以但不限于包括:分辨率相同或者分辨率不同。使用第一标识值来表示分辨率相同,使用第二标识值来表示分辨率不同。例如:使用1来标识分辨率相同,使用0来表示分辨率不同,或者,使用0来表示分辨率相同,使用1来表示分辨率不同。
可选地,在本实施例中,对于每一个帧中的第一个区域来说,可以使用标识值来直接表示该区域所采用的分辨率,或者,也可以使用标识值来表示其与前一帧中最后一个区域的分辨率之间的关系。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
根据本发明实施例的另一个方面,还提供了一种用于实施上述视频解码方法的视频解码装置,如图11所示,该装置包括:
1)第一获取模块112,用于获取待解码视频帧,其中,所述待解码视频帧被划分为多个区域;
2)第二获取模块114,用于获取所述多个区域中每个区域对应的待解码数据中携带的语法元素,其中,所述语法元素用于指示解码所述每个区域所采用的分辨率,解码所述多个区域所采用的多个分辨率包括至少两个不同的分辨率;
3)解码模块116,用于采用每个区域所对应的分辨率对所述多个区域中的每个区域进行解码。
可选地,所述第二获取模块,包括:
第一获取单元,包括获取所述每个区域所对应的标识值,其中,所述每个区域所对应的标识值用于指示解码所述每个区域所采用的分辨率。
可选地,所述第二获取模块,包括:
第二获取单元,用于获取所述每个区域所对应的标识值,其中,所述每个区域所对应的标识值用于指示解码所述每个区域所采用的分辨率与解码所述每个区域的前一个区域所采用的分辨率之间的关系;
第一确定单元,用于根据所述标识值和解码所述每个区域的前一个区域所采用的分辨率确定解码所述每个区域所采用的分辨率。
可选地,所述第二获取模块,包括:
第二确定单元,用于在确定所述每个区域对应的标识值为第一标识值的情况下,确定解码所述每个区域所采用的分辨率为所述每个区域的前一个区域对应的分辨率;
第三确定单元,用于在确定所述每个区域对应的标识值为第二标识值的情况下,确定解码所述每个区域所采用的分辨率为与所述每个区域的前一个区域对应的分辨率不同的分辨率。
可选地,所述第一获取模块用于以下之一:
所述多个区域是基于预先确定的视频编解码标准对所述待解码视频帧进行划分得到的多个视频块;
所述多个区域是响应于获取到的输入的区域划分指令对所述待解码视频帧进行划分得到的区域;
所述多个区域是多个Tile区域。
根据本发明实施例的另一个方面,还提供了一种用于实施上述视频编码方法的视频编码装置,如图12所示,该装置包括:
1)第三获取模块122,用于获取待编码视频帧,其中,所述待编码视频帧被划分为多个区域;
2)编码模块124,用于采用多个分辨率中对应的分辨率对所述多个区域中的每个区域进行编码,得到所述每个区域对应的编码数据,其中,所述多个分辨率包括至少两个不同的分辨率;
3)添加模块126,用于根据所述每个区域对应的分辨率为所述每个区域对应的编码数据添加语法元素,其中,所述语法元素用于指示编码所述每个区域所采用的分辨率。
可选地,所述添加模块,包括:
第四确定单元,用于确定所述每个区域所对应的分辨率在多个标识值中所对应的标识值,其中,所述多个分辨率中不同的分辨率在所述多个标识值中对应不同的标识值;
第一添加单元,用于将所述每个区域所对应的标识值作为所述语法元素添加到所述每个区域对应的编码数据中。
可选地,所述添加模块,包括:
第五确定单元,用于根据所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率之间的关系确定所述每个区域对应的标识值;
第二添加单元,用于将所述每个区域所对应的标识值作为所述语法元素添加到所述每个区域对应的编码数据中。
可选地,所述第五确定单元,包括:
第一确定子单元,用于在所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率相同的情况下,确定所述每个区域对应的标识值为第一标识值;
第二确定子单元,用于在所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率不同的情况下,确定所述每个区域对应的标识值为第二标识值。
本发明实施例的应用环境可以但不限于参照上述实施例中的应用环境,本实施例中对此不再赘述。本发明实施例提供了用于实施上述实时通信的连接方法的一种可选的具体应用示例。
作为一种可选的实施例,上述视频编解码方法可以但不限于应用于如图13所示的对视频进行编解码处理的场景中。在本场景中,对于视频中待编码的第t帧,将第t帧中的区域划分为不同的Tile区域,如图13所示,Tile1区域,Tile2区域,Tile3区域,Tile4区域。图13中的划分方式只是一种示例,本发明实施例对一帧划分得到的区域的数量和形状不做限定。
然后,在不同Tile区域采用不同分辨率分别计算代价(Rate Dictation Cost),使用代价最小对应的分辨率作为Tile区域上使用的分辨率。例如,对于Tile1区域,分别使用预先确定的分辨率集合中的分辨率1、分辨率2、分辨率3计算对应的代价,其中,分辨率2对应的代价最小,则使用分辨率2对Tile1区域中的块进行编码。
通过上述方式,确定出使用分辨率2对Tile1区域中的块进行编码,使用分辨率1对Tile2区域中的块进行编码,使用分辨率1对Tile3区域中的块进行编码,使用分辨率3对Tile4区域中的块进行编码。
在一个可选的实施例中,为了使得解码端知道一个视频帧中的不同块在编码时所使用的分辨率,可以在编码的过程中使用对应的标志位来表示对应的分辨率,例如,对于已编码的一个帧中使用高分辨率进行编码的块,将对应的标志位设置为0,对于使用低分辨率进行编码的块,将对应的标志位设置为1。当然,这种设置方式只是一种示例,还可以采用其他的标志位设置方式,例如,使用高分辨率进行编码的块,将对应的标志位设置为1,对于使用低分辨率进行编码的块,将对应的标志位设置为0。
作为另一个可选的实施例,为了使得解码端知道一个视频帧中的不同块在编码时所使用的分辨率,可以在编码的过程中使用对应的标志位来表示对应的分辨率,例如,若当前块相对于前一个块在编码时使用的分辨率一致,则将当前块对应的标志位设置为0;若当前块相对于前一个块在编码时使用的分辨率不同,则将当前块对应的标志位设置为1。当然,这种设置方式只是一种示例,还可以采用其他的标志位设置方式,例如,若当前块相对于前一个块在编码时使用的分辨率一致,则将当前块对应的标志位设置为1;若当前块相对于前一个块在编码时使用的分辨率不同,则将当前块对应的标志位设置为0。
对于上述不同实施例中的标志位设置方式,在经过熵编码之后,得到待传输的位数是不一样的。
如图14所示,在本发明的视频编码过程中,对于视频中的一帧中的不同块自适应采用对应的分辨率进行编码,这样无论是在传输的带宽比较小(例如,小于图14中所示的带宽阈值Th)的情况下,还是在传输的带宽比较大(例如,大于图14中所示的带宽阈值Th)的情况下,对应的峰值信噪比都相对较大,失真相对较小。
此外,由于对于视频中的一帧中的不同块自适应采用对应的分辨率进行编码,从而不需要在对视频中的帧进行编码时根据不同类型的视频或同一视频的不同帧或同一帧中不同的块所对应的交点(如,图1中的交点)来选择对应的分辨率,降低了编码复杂度。
根据本发明实施例的又一个方面,还提供了一种用于实施上述视频解码的电子装置,如图15所示,该电子装置包括:一个或多个(图中仅示出一个)处理器1502、存储器1504、传感器1506、编码器1508以及传输装置1510,该存储器中存储有计算机程序,该处理器被设置为通过计算机程序执行上述任一项方法实施例中的步骤。
可选地,在本实施例中,上述电子装置可以位于计算机网络的多个网络设备中的至少一个网络设备。
可选地,在本实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1,获取待解码视频帧,其中,所述待解码视频帧被划分为多个区域;
S2,获取所述多个区域中每个区域对应的待解码数据中携带的语法元素,其中,所述语法元素用于指示解码所述每个区域所采用的分辨率,解码所述多个区域所采用的多个分辨率包括至少两个不同的分辨率;
S3,采用每个区域所对应的分辨率对所述多个区域中的每个区域进行解码。
可选地,本领域普通技术人员可以理解,图15所示的结构仅为示意,电子装置也可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑以及移动互联网设备(Mobile Internet Devices,MID)、PAD等终端设备。图15其并不对上述电子装置的结构造成限定。例如,电子装置还可包括比图15中所示更多或者更少的组件(如网络接口、显示装置等),或者具有与图15所示不同的配置。
其中,存储器1504可用于存储软件程序以及模块,如本发明实施例中的视频解码方法和装置对应的程序指令/模块,处理器1502通过运行存储在存储器1504内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的目标组件的控制方法。存储器1504可包括高速随机存储器,还可以包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器1504可进一步包括相对于处理器1502远程设置的存储器,这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
上述的传输装置1510用于经由一个网络接收或者发送数据。上述的网络具体实例可包括有线网络及无线网络。在一个实例中,传输装置1510包括一个网络适配器(NetworkInterface Controller,NIC),其可通过网线与其他网络设备与路由器相连从而可与互联网或局域网进行通讯。在一个实例中,传输装置1510为射频(Radio Frequency,RF)模块,其用于通过无线方式与互联网进行通讯。
其中,具体地,存储器1504用于存储应用程序。
本发明的实施例还提供了一种存储介质,该存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
可选地,在本实施例中,上述存储介质可以被设置为存储用于执行以下步骤的计算机程序:
S1,获取待解码视频帧,其中,所述待解码视频帧被划分为多个区域;
S2,获取所述多个区域中每个区域对应的待解码数据中携带的语法元素,其中,所述语法元素用于指示解码所述每个区域所采用的分辨率,解码所述多个区域所采用的多个分辨率包括至少两个不同的分辨率;
S3,采用每个区域所对应的分辨率对所述多个区域中的每个区域进行解码。
可选地,存储介质还被设置为存储用于执行上述实施例中的方法中所包括的步骤的计算机程序,本实施例中对此不再赘述。
可选地,在本实施例中,本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:闪存盘、只读存储器(Read-Only Memory,ROM)、随机存取器(Random Access Memory,RAM)、磁盘或光盘等。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在上述计算机可读取的存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在存储介质中,包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的客户端,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (9)

1.一种视频解码方法,其特征在于,包括:
获取待解码视频帧,其中,所述待解码视频帧被划分为多个区域,所述多个区域中的每个区域上使用的分辨率是通过如下方式确定的:对于所述多个区域中的每个区域,分别使用预先确定的分辨率集合中的分辨率计算对应的代价,并使用代价最小对应的分辨率作为该区域上使用的分辨率;其中,所述多个区域中的每个区域上的编码数据是自适应采用多个分辨率中对应的分辨率对待编码视频帧中的所述多个区域中的每个区域进行编码,得到的编码数据,使得无论是在传输的带宽小于带宽阈值的情况下,还是在传输的带宽大于所述带宽阈值的情况下,对应的峰值信噪比都相对较大;
获取所述多个区域中每个区域对应的语法元素,其中,所述语法元素用于指示解码所述每个区域所采用的分辨率,解码所述多个区域所采用的多个分辨率包括至少两个不同的分辨率;
采用每个区域所对应的分辨率对所述多个区域中的每个区域进行解码;
其中,所述获取所述多个区域中每个区域对应的待解码数据中携带的语法元素,包括:
获取所述每个区域所对应的标识值,其中,所述每个区域所对应的标识值用于指示解码所述每个区域所采用的分辨率;或者,
获取所述每个区域所对应的标识值,其中,所述每个区域所对应的标识值用于指示解码所述每个区域所采用的分辨率与解码所述每个区域的前一个区域所采用的分辨率之间的关系;根据所述标识值和解码所述每个区域的前一个区域所采用的分辨率确定解码所述每个区域所采用的分辨率。
2.根据权利要求1所述的方法,其特征在于,根据所述标识值和解码所述每个区域的前一个区域所采用的分辨率确定解码所述每个区域所采用的分辨率,包括:
在确定所述每个区域对应的标识值为第一标识值的情况下,确定解码所述每个区域所采用的分辨率为所述每个区域的前一个区域对应的分辨率;
在确定所述每个区域对应的标识值为第二标识值的情况下,确定解码所述每个区域所采用的分辨率为与所述每个区域的前一个区域对应的分辨率不同的分辨率。
3.根据权利要求1所述的方法,其特征在于,所述待解码视频帧被划分为多个区域包括以下之一:
所述多个区域是基于预先确定的视频编解码标准对所述待解码视频帧进行划分得到的多个视频块;
所述多个区域是响应于获取到的输入的区域划分指令对所述待解码视频帧进行划分得到的区域;
所述多个区域是多个Tile区域。
4.一种视频编码方法,其特征在于,包括:
获取待编码视频帧,其中,所述待编码视频帧被划分为多个区域;
自适应采用多个分辨率中对应的分辨率对所述多个区域中的每个区域进行编码,得到所述每个区域对应的编码数据,使得无论是在传输的带宽小于带宽阈值的情况下,还是在传输的带宽大于所述带宽阈值的情况下,对应的峰值信噪比都相对较大,其中,所述多个分辨率包括至少两个不同的分辨率,对于所述多个区域中的每个区域,分别使用预先确定的分辨率集合中的分辨率计算对应的代价,并使用代价最小对应的分辨率作为该区域上使用的分辨率;
根据所述每个区域对应的分辨率为所述每个区域对应的编码数据添加语法元素,其中,所述语法元素用于指示编码所述每个区域所采用的分辨率;
其中,根据所述每个区域对应的分辨率为所述每个区域对应的编码数据添加语法元素,包括:
确定所述每个区域所对应的分辨率在多个标识值中所对应的标识值,其中,所述多个分辨率中不同的分辨率在所述多个标识值中对应不同的标识值;将所述每个区域所对应的标识值作为所述语法元素添加到所述每个区域对应的编码数据中;或者
根据所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率之间的关系确定所述每个区域对应的标识值;将所述每个区域所对应的标识值作为所述语法元素添加到所述每个区域对应的编码数据中。
5.根据权利要求4所述的方法,其特征在于,根据所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率之间的关系确定所述每个区域对应的标识值,包括:
在所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率相同的情况下,确定所述每个区域对应的标识值为第一标识值;
在所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率不同的情况下,确定所述每个区域对应的标识值为第二标识值。
6.一种视频解码装置,其特征在于,包括:
第一获取模块,用于获取待解码视频帧,其中,所述待解码视频帧被划分为多个区域,所述多个区域中的每个区域上使用的分辨率是通过如下方式确定的:对于所述多个区域中的每个区域,分别使用预先确定的分辨率集合中的分辨率计算对应的代价,并使用代价最小对应的分辨率作为该区域上使用的分辨率;其中,所述多个区域中的每个区域上的编码数据是自适应采用多个分辨率中对应的分辨率对待编码视频帧中的所述多个区域中的每个区域进行编码,得到的编码数据,使得无论是在传输的带宽小于带宽阈值的情况下,还是在传输的带宽大于所述带宽阈值的情况下,对应的峰值信噪比都相对较大;
第二获取模块,用于获取所述多个区域中每个区域对应的待解码数据中携带的语法元素,其中,所述语法元素用于指示解码所述每个区域所采用的分辨率,解码所述多个区域所采用的多个分辨率包括至少两个不同的分辨率;
解码模块,用于采用每个区域所对应的分辨率对所述多个区域中的每个区域进行解码;
其中,所述第二获取模块,包括:
第一获取单元,包括获取所述每个区域所对应的标识值,其中,所述每个区域所对应的标识值用于指示解码所述每个区域所采用的分辨率;或者
第二获取单元,用于获取所述每个区域所对应的标识值,其中,所述每个区域所对应的标识值用于指示解码所述每个区域所采用的分辨率与解码所述每个区域的前一个区域所采用的分辨率之间的关系;第一确定单元,用于根据所述标识值和解码所述每个区域的前一个区域所采用的分辨率确定解码所述每个区域所采用的分辨率。
7.一种视频编码装置,其特征在于,包括:
第三获取模块,用于获取待编码视频帧,其中,所述待编码视频帧被划分为多个区域;
编码模块,用于自适应采用多个分辨率中对应的分辨率对所述多个区域中的每个区域进行编码,得到所述每个区域对应的编码数据,使得无论是在传输的带宽小于带宽阈值的情况下,还是在传输的带宽大于所述带宽阈值的情况下,对应的峰值信噪比都相对较大,其中,所述多个分辨率包括至少两个不同的分辨率,对于所述多个区域中的每个区域,分别使用预先确定的分辨率集合中的分辨率计算对应的代价,并使用代价最小对应的分辨率作为该区域上使用的分辨率;
添加模块,用于根据所述每个区域对应的分辨率为所述每个区域对应的编码数据添加语法元素,其中,所述语法元素用于指示编码所述每个区域所采用的分辨率;
其中,所述添加模块,包括:
第四确定单元,用于确定所述每个区域所对应的分辨率在多个标识值中所对应的标识值,其中,所述多个分辨率中不同的分辨率在所述多个标识值中对应不同的标识值;第一添加单元,用于将所述每个区域所对应的标识值作为所述语法元素添加到所述每个区域对应的编码数据中;或者
第五确定单元,用于根据所述每个区域对应的分辨率与所述每个区域的前一个区域对应的分辨率之间的关系确定所述每个区域对应的标识值;第二添加单元,用于将所述每个区域所对应的标识值作为所述语法元素添加到所述每个区域对应的编码数据中。
8.一种存储介质,其特征在于,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行所述权利要求1至5任一项中所述的方法。
9.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为通过所述计算机程序执行所述权利要求1至5任一项中所述的方法。
CN201910927094.XA 2019-09-27 2019-09-27 视频解码方法及装置 Active CN110650357B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201910927094.XA CN110650357B (zh) 2019-09-27 2019-09-27 视频解码方法及装置
PCT/CN2020/116642 WO2021057684A1 (zh) 2019-09-27 2020-09-22 视频解码方法和装置、视频编码方法和装置、存储介质及电子装置
US17/469,729 US11968379B2 (en) 2019-09-27 2021-09-08 Video decoding method and apparatus, video encoding method and apparatus, storage medium, and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910927094.XA CN110650357B (zh) 2019-09-27 2019-09-27 视频解码方法及装置

Publications (2)

Publication Number Publication Date
CN110650357A CN110650357A (zh) 2020-01-03
CN110650357B true CN110650357B (zh) 2023-02-10

Family

ID=68993008

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910927094.XA Active CN110650357B (zh) 2019-09-27 2019-09-27 视频解码方法及装置

Country Status (2)

Country Link
CN (1) CN110650357B (zh)
WO (1) WO2021057684A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110650357B (zh) * 2019-09-27 2023-02-10 腾讯科技(深圳)有限公司 视频解码方法及装置
CN114827669B (zh) * 2022-03-31 2023-08-18 杭州网易智企科技有限公司 一种视频数据的传输方法、装置、介质及设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101282479A (zh) * 2008-05-06 2008-10-08 武汉大学 基于感兴趣区域的空域分辨率可调整编解码方法
CN102883157A (zh) * 2011-07-12 2013-01-16 浙江大学 视频编码方法和视频编码器
CN105900425A (zh) * 2014-01-08 2016-08-24 微软技术许可有限责任公司 表示经编码的比特流中的运动向量

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10200713B2 (en) * 2015-05-11 2019-02-05 Qualcomm Incorporated Search region determination for inter coding within a particular picture of video data
CN105827866A (zh) * 2016-05-18 2016-08-03 努比亚技术有限公司 一种移动终端及控制方法
US11025918B2 (en) * 2016-12-29 2021-06-01 Sony Interactive Entertainment Inc. Foveated video link for VR, low latency wireless HMD video streaming with gaze tracking
CN108495130B (zh) * 2017-03-21 2021-04-20 腾讯科技(深圳)有限公司 视频编码、解码方法和装置、终端、服务器和存储介质
WO2019059721A1 (ko) * 2017-09-21 2019-03-28 에스케이텔레콤 주식회사 해상도 향상 기법을 이용한 영상의 부호화 및 복호화
CN109194923B (zh) * 2018-10-18 2023-08-29 眸芯科技(上海)有限公司 基于局部非均匀分辨率的视频图像处理设备、系统及方法
CN109525842B (zh) * 2018-10-30 2022-08-12 深圳威尔视觉科技有限公司 基于位置的多Tile排列编码方法、装置、设备和解码方法
CN110650357B (zh) * 2019-09-27 2023-02-10 腾讯科技(深圳)有限公司 视频解码方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101282479A (zh) * 2008-05-06 2008-10-08 武汉大学 基于感兴趣区域的空域分辨率可调整编解码方法
CN102883157A (zh) * 2011-07-12 2013-01-16 浙江大学 视频编码方法和视频编码器
CN105900425A (zh) * 2014-01-08 2016-08-24 微软技术许可有限责任公司 表示经编码的比特流中的运动向量

Also Published As

Publication number Publication date
US20210409738A1 (en) 2021-12-30
WO2021057684A1 (zh) 2021-04-01
CN110650357A (zh) 2020-01-03

Similar Documents

Publication Publication Date Title
CN110636294B (zh) 视频解码方法及装置,视频编码方法及装置
CN110519607B (zh) 视频解码方法及装置,视频编码方法及装置
CN104702976A (zh) 一种视频播放方法及设备
CN110650357B (zh) 视频解码方法及装置
WO2021057697A1 (zh) 视频编解码方法和装置、存储介质及电子装置
WO2023142716A1 (zh) 编码方法、实时通信方法、装置、设备及存储介质
CN113098946A (zh) 云桌面场景的识别方法和装置、存储介质及电子装置
CN110545431B (zh) 视频解码方法及装置、视频编码方法及装置
CN110662071B (zh) 视频解码方法和装置、存储介质及电子装置
CN110677692B (zh) 视频解码方法及装置、视频编码方法及装置
CN114466224B (zh) 视频数据的编解码方法和装置、存储介质及电子设备
CN110572672A (zh) 视频编解码方法和装置、存储介质及电子装置
CN110572677A (zh) 视频编解码方法和装置、存储介质及电子装置
CN110677676A (zh) 视频编码方法和装置、视频解码方法和装置及存储介质
CN110582022B (zh) 视频编解码方法和装置及存储介质
CN110636293B (zh) 视频编码、解码方法和装置、存储介质及电子装置
US11968379B2 (en) Video decoding method and apparatus, video encoding method and apparatus, storage medium, and electronic device
CN110677690A (zh) 视频处理方法和装置、存储介质
CN110677653A (zh) 视频编解码方法和装置及存储介质
CN110536134B (zh) 视频编码、解码方法和装置、存储介质及电子装置
CN110677721B (zh) 视频编解码方法和装置及存储介质
CN110572654B (zh) 视频编码、解码方法和装置、存储介质及电子装置
CN110572674B (zh) 视频编解码方法和装置、存储介质及电子装置
CN110636295A (zh) 视频编解码方法和装置、存储介质及电子装置
CN110572653A (zh) 视频编码、解码方法和装置、存储介质及电子装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40019399

Country of ref document: HK

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant