CN106162174B - 一种视频多分辨率编码方法和装置 - Google Patents

一种视频多分辨率编码方法和装置 Download PDF

Info

Publication number
CN106162174B
CN106162174B CN201610799833.8A CN201610799833A CN106162174B CN 106162174 B CN106162174 B CN 106162174B CN 201610799833 A CN201610799833 A CN 201610799833A CN 106162174 B CN106162174 B CN 106162174B
Authority
CN
China
Prior art keywords
frame
video data
prediction mode
video
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610799833.8A
Other languages
English (en)
Other versions
CN106162174A (zh
Inventor
贺坚强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201610799833.8A priority Critical patent/CN106162174B/zh
Publication of CN106162174A publication Critical patent/CN106162174A/zh
Application granted granted Critical
Publication of CN106162174B publication Critical patent/CN106162174B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/577Motion compensation with bidirectional frame interpolation, i.e. using B-pictures

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明实施例提供了一种视频多分辨率编码方法和装置,其中的方法包括:在将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息;根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据。通过该方法,不需要对源视频分别单独编码来一一生成不同分辨率视频,也就不需要在视频处理端单独建立多个编码任务,从而能够大大降低了视频编码过程中的开销,并节省视频处理端资源。

Description

一种视频多分辨率编码方法和装置
技术领域
本发明涉及信息处理技术领域,具体涉及一种视频多分辨率编码方法和装置。
背景技术
视频作为多媒体的主要承载媒质,已经超过文字图片,成为互联网中占据数据量最多的内容提供媒质。各种显示终端,如手机、平板、PC、电视以及背投投影等的发展,多平台广播级视频提供者,如视频网站针对同一个视频往往需要生产多种分辨率格式的视频码流以适应不同的显示终端及用户的不同显示需求。
同时视频总体分辨率上也是由标清往高清、超清的方向发展。由于一些历史原因,不同的标准组织制定的高清和超清的具体分辨率存在差异,这期间产生了各种各样的分辨率标准。
对于视频处理端,如视频编码器而言,压缩效率高和编码速度快是最重要的两个主题。尤其对于互联网视频应用而言,压缩效率高可以大大减少传输带宽和存储成本,是很重要的考量因素。但是,在将源视频编码为各种不同分辨率视频过程中,视频网站通常需要建立多个任务,分别将源视频独立编转码为相应分辨率。因此,视频网站编转码的任务数量大大增加,这意味着需要架设更多的计算服务器、消耗更多计算资源和电力资源且处理效率低。
发明内容
为了解决现有技术中将源视频编码为不同分辨率视频过程中资源消耗多及处理效率低的问题,本发明实施例期望提供一种视频多分辨率编码方法和装置。
本发明实施例提供了一种视频多分辨率编码方法,包括:
在将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息;
根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据。
可选地,所述第一编码信息包括:第一视频数据中每一帧图像的全局信息、每一帧图像中最大编码单元LCU的编码单元CU划分信息、每一帧图像中CU的预测模式及每一帧图像中CU的预测单元PU划分信息、I帧的帧内预测模式、及B帧的预测模式;所述B帧的预测模式包括:帧内预测和帧间预测;
当B帧的预测模式为帧间预测时,所述第一编码信息还包括:B帧中每个PU的运动信息;所述B帧中每个PU的运动信息包括:参考帧范围和运动矢量;
所述每一帧图像的全局信息包括:帧号、图像宽度和高度、帧级量化参数及帧类型。
可选地,所述按照预设存储长度保存所述第一视频数据的第一编码信息,包括:
用四个比特保存帧号、用两个比特保存图像的高度、用两个比特保存图像的宽度、用四个比特保存帧级量化参数、用四个比特保存帧类型;
用二十一个比特或一个比特保存所述CU划分信息;
用三个比特保存所述每一帧图像中CU的PU划分信息;
用六个比特保存所述I帧的帧内预测模式;
用一个比特保存所述B帧的预测模式;其中,当预测模式为帧间预测模式时,用一个字节保存一个参考帧范围、用两个字节保存一个运动矢量。
可选地,所述根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据,包括:
根据所述第一编码信息确定第二视频数据的第二编码信息,其中,所述第二视频数据的第二编码信息是指将所述源视频编码为第二视频数据的信息;
使用所述第二编码信息对所述源视频进行编码,得到第二视频数据。
可选地,所述根据所述第一编码信息确定将所述源视频编码为第二视频数据的第二编码信息,包括:
将第一分辨率和第二分辨率的比值确定为第一视频数据和第二视频数据的缩放比例;
根据所述缩放比例及每一帧图像中LCU的CU划分信息确定第二视频数据中LCU的CU划分信息;
根据所述第一视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定第二视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式;
根据所述第一视频数据中每一帧图像中CU的PU划分信息确定第二视频数据中每一帧图像中CU的PU划分信息。
可选地,所述根据所述缩放比例及每一帧图像中LCU的CU划分信息确定第二视频数据中LCU的CU划分信息,包括:
确定第二视频数据中的各个LCU的坐标;
当所述缩放比例大于1/2且小于1时,则确定第一视频数据中与第二视频数据中各个LCU同层次的CU,将所述确定的CU的CU划分信息确定为第二视频数据中各个LCU的CU划分信息;
当所述缩放比例小于等于1/2时,则确定第一视频数据中较第二视频数据中各个LCU下一层次的CU,将所述确定的下一层次的CU的CU划分信息确定为第二视频数据中各个LCU的CU划分信息。
可选地,所述根据所述第一视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定第二视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式,包括:
将第二视频数据中的帧图像映射至第一视频数据中相应帧图像内;
分别定位第二视频数据中的帧图像中的每一个8×8的CU;
确定定位到的每一个8×8的CU的中心像素点坐标;
确定所述中心像素点坐标所映射至的第一视频数据中相应帧图像内的像素点坐标;
确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
将所述确定的第一视频数据中的8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定为第二视频数据中相应帧图像中8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式。
可选地,所述根据所述第一视频数据中每一帧图像中CU的PU划分信息确定第二视频数据中每一帧图像中CU的PU划分信息,包括:
将第二视频数据中的帧图像映射至第一视频数据中相应帧图像内;
分别定位第二视频数据中的帧图像中CU的PU;
确定定位到的每一个PU的中心像素点坐标;
确定所述中心像素点坐标所映射至的第一视频数据中相应帧图像内的像素点坐标;
确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
将所述确定的第一视频数据中的8×8的CU的PU划分信息确定为第二视频数据中CU的PU划分信息。
本发明实施例还提供了一种视频多分辨率编码装置,包括:
保存模块和编码模块;其中,
所述保存模块,用于在编码模块将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息;
所述编码模块,用于根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据。
可选地,所述第一编码信息包括:第一视频数据中每一帧图像的全局信息、每一帧图像中最大编码单元LCU的编码单元CU划分信息、每一帧图像中CU的预测模式及每一帧图像中CU的PU划分信息、I帧的帧内预测模式、及B帧的预测模式;所述B帧的预测模式包括:帧内预测模式和帧间预测模式;
当B帧的预测模式为帧间预测时,所述第一编码信息还包括:B帧中每个PU的运动信息;所述B帧中每个PU的运动信息包括:参考帧范围和运动矢量;
所述每一帧图像的全局信息包括:帧号、图像宽度和高度、帧级量化参数及帧类型。
可选地,所述保存模块,用于通过以下方式保存所述第一视频数据的第一编码信息:
用四个比特保存帧号、用两个比特保存图像的高度、用两个比特保存图像的宽度、用四个比特保存帧级量化参数、用四个比特保存帧类型;
用二十一个比特或一个比特保存所述CU划分信息;
用三个比特保存所述每一帧图像中CU的PU划分信息;
用六个比特保存所述I帧的帧内预测模式;
用一个比特保存所述B帧的预测模式;当预测模式为帧间预测模式时,还需要用一个字节保存一个参考帧范围、用两个字节保存一个运动矢量。
可选地,所述编码模块,用于根据所述第一编码信息确定第二视频数据的第二编码信息,其中,所述第二视频数据的第二编码信息是指将所述源视频编码为第二视频数据的第二编码信息;还用于使用所述第二编码信息对所述源视频进行编码,得到第二视频数据。
可选地,所述编码模块,包括:确定子模块和编码子模块;其中,
所述确定子模块,用于将第一分辨率和第二分辨率的比值确定为第一视频数据和第二视频数据的缩放比例、以及根据所述缩放比例及每一帧图像中LCU的CU划分信息确定第二视频数据中LCU的CU划分信息、以及根据所述第一视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定第二视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式;
所述编码子模块,用于根据所述第一视频数据中每一帧图像中CU的PU划分信息确定第二视频数据中每一帧图像中CU的PU划分信息。
可选地,所述确定子模块,包括:第一确定单元、第二确定单元及第三确定单元;其中,
所述第一确定单元,用于确定第二视频数据中的各个LCU的坐标;
所述第二确定单元,用于当所述缩放比例大于1/2且小于1时,则确定第一视频数据中与第二视频数据中各个LCU同层次的CU;所述第三确定单元,将所述确定的CU的CU划分信息确定为第二视频数据中各个LCU的CU划分信息;或者,
所述第二确定单元,用于当所述缩放比例小于等于1/2时,确定第一视频数据中较第二视频数据中各个LCU下一层次的CU;所述第三确定单元,用于将所述确定的下一层次的CU的CU划分信息确定为第二视频数据中各个LCU的CU划分信息。
可选地,所述确定子模块,包括:第一映射单元、第一定位单元、第四确定单元、第五确定单元、第六确定单元及第七确定单元;其中,
所述第一映射单元,用于将第二视频数据中的帧图像映射至第一视频数据中相应帧图像内;
所述第一定位单元,用于分别定位第二视频数据中的帧图像中的每一个8×8的CU;
所述第四确定单元,用于确定定位到的每一个8×8的CU的中心像素点坐标;
所述第五确定单元,用于确定所述中心像素点坐标所映射至的第一视频数据中相应帧图像内的像素点坐标;
所述第六确定单元,用于确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
所述第七确定单元,用于将所述确定的第一视频数据中的8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定为第二视频数据中相应帧图像中8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式。
可选地,所述确定子模块,包括:第二映射单元、第二定位单元、第八确定单元、第九确定单元、第十确定单元及第十一确定单元;其中,
所述第二映射单元,用于将第二视频数据中的帧图像映射至第一视频数据中相应帧图像内;
所述第二定位单元,用于分别定位第二视频数据中的帧图像中CU的PU;
所述第八确定单元,用于确定定位到的每一个PU的中心像素点坐标;
所述第九确定单元,用于确定所述中心像素点坐标所映射至的第一视频数据中相应帧图像内的像素点坐标;
所述第十确定单元,用于确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
所述第十一确定单元,用于将所述确定的第一视频数据中的8×8的CU的PU划分信息确定为第二视频数据中CU的PU划分信息。
与现有技术相比,本发明实施例包括以下优点:
本发明实施例所提供的一种视频多分辨率编码方法和装置,在将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息,之后,根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据。该方案具备至少具备以下优点:
现有技术中,在将源视频编码为不同分辨率视频数据时,通常采用对源视频单独编码生成相应分辨率视频数据的方法,显而易见,这种方式需要在视频处理端单独建立多个编码任务,而且每一种分辨率视频编码时,其编码过程中的编码信息的确定是单独进行的,而编码信息的确定过程复杂,因此,需要消耗大量视频处理端资源。
而本发明方法实施例从不同分辨率标准的视频编码过程中编码信息之间的内在联系出发,只需要确定一种分辨率标准下视频编码过程中的编码信息,即可基于一种分辨率标准下视频编码过程中的编码信息将源视频编码为符合其它视频标准的视频。通过这种方式所实现的视频编码方法,不需要对源视频分别单独编码来一一生成不同分辨率视频,也就不需要在视频处理端单独建立多个编码任务,从而能够大大降低了视频编码过程中的开销,并节省视频处理端资源。
附图说明
图1为本发明实施例提供的一种视频多分辨率编码方法流程;
图2为本发明实施例提供的另一种视频多分辨率编码方法流程图;
图3为本发明实施例提供的一个示例性的CU划分过程示意图;
图4为本发明实施例提供的CU划分过程所对应的编码树示意图;
图5为本发明实施例提供的HEVC所支持的8种帧间预测模式示意图;
图6为本发明实施例提供的视频多分辨率编码装置的基本结构图。
具体实施方式
方法实施例一
参照图1,示出了本发明的一种视频多分辨率编码方法实施例的步骤流程图,具体可以包括:
步骤101、在将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息;
具体的,本发明的应用范围包括但不限于以下几种:直播卫星视频服务、数字用户的在线视频服务、数字电视地面广播、基于光网络的有线电视、分组网络上的多媒体服务、实时对话服务、远程视频监控、多媒体邮件、交互式的存储介质、串行存储介质。
具体的,这里的分辨率标准是指以分辨率对视频数据进行区分的标准,常见的分辨率标准包括:1280×720p、1980×1080p、2560×1600p、3960×2160p等等,当然,本发明实施例所指的分辨率标准并不限于以上列举的情况,实际应用中可以包括任何一种分辨率标准。
实际实现中,所述第一编码信息包括但不限于以下信息:第一视频数据中每一帧图像的全局信息、每一帧图像中最大编码单元LCU的编码单元CU划分信息、每一帧图像中CU的预测模式及每一帧图像中CU的预测单元PU划分信息、I帧的帧内预测模式、B帧的预测模式及B帧中每个PU的运动信息。
具体的,按照预设存储长度保存所述第一视频数据的第一编码信息可以是指在保存第一编码信息时,针对每一种信息采用不同的数据格式或者数据存储长度。
步骤102、根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据。
具体的,该方案中,将源视频编码为不同分辨率标准的第一视频数据和第二视频数据时,在获得将源视频编码为符合第一视频标准的第一视频时的第一编码信息后,可以直接基于所述第一编码信息将源视频编码为第二视频数据。
综上,根据本发明方法实施例提供的视频多分辨率编码方法,在将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息,之后,根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据。该方案具备至少具备以下优点:
现有技术中,在将源视频编码为不同分辨率视频数据时,通常采用对源视频单独编码生成相应分辨率视频数据的方法,显而易见,这种方式需要在视频处理端单独建立多个编码任务,而且每一种分辨率视频编码时,其编码过程中的编码信息的确定是单独进行的,而编码信息的确定过程复杂,因此,需要消耗大量视频处理端资源。
而本发明方法实施例从不同分辨率标准的视频编码过程中编码信息之间的内在联系出发,只需要确定一种分辨率标准下视频编码过程中的编码信息,即可基于一种分辨率标准下视频编码过程中的编码信息来将源视频编码为符合其它视频标准的视频。通过这种方式所实现的视频编码方法,不需要对源视频分别单独编码来一一生成不同分辨率视频,也就不需要在视频处理端单独建立多个编码任务,从而能够大大降低了视频编码过程中的开销,并节省视频处理端资源。
方法实施例二
参照图2,示出了本发明的另一种视频多分辨率编码方法实施例的步骤流程图,具体可以包括:
步骤201、在将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息;
通常在获得源视频之后,为了适应不同显示需求,需要将源视频处理为符合不同分辨率标准的视频数据。但是,传统的方法通常是分别对源视频进行编码,从而获得符合不同分辨率标准的视频数据。显然的,这种方式会大大增加视频处理端的编码工作量,消耗大量资源。而本发明方法实施例所提供的方法,旨在对源视频进行编码时,充分利用不同分辨率标准编码时编码信息之间的关联和差异,从而通过一种分辨率标准下的编码信息加速将源视频编码为另一种分辨率标准视频数据的过程。
基于以上考量,本发明方法实施例中,在将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息;这里所说的预设存储长度是指按照预设存储长度对第一编码信息中不同类型的信息进行保存。
在源视频中包含一组连续的帧,帧通常被分为I、B、P三种,其中,I是内部编码帧、P是前向预测帧、B是双向内插帧。也就是说,I帧是一个完整的画面,而B帧和P帧则记录了其相对于I帧的变化。在视频编码领域,以高性能视频编码(HEVC,High Efficiency VideoCoding)为例,对视频图像的编码是以最大编码单元(LCU,largest coding unit)为单位进行的,LCU的大小为64×64个像素,LCU可以被进一步划分为各级CU,CU是编码过程中进行模式决策的基本单元。根据预测模式的不同,CU可以被进一步划分为不同预测单元(PU,Prediction Unit)分割块。例如,一个1280×720大小的帧在编码前会被划分为20×12个LCU,一个1920×1080大小的帧在编码前会被划分为30×17个LCU。CU是进行模式决策和编码的基本单元,CU的大小从64×64到8×8(分别对应最大的编码单元LCU和最小编码单元SCU)。LCU是帧图像划分过程中的基本单位,而一个CU可以从其最大编码单元开始,按照四叉树迭代方式不断被分割为更小的CU,直到达到最小编码单元。这种分割方式以编码单元树形结构组织形成编码树(CU-tree),因此,CU的划分过程,也就是CU划分信息可以通过CU-tree来描述。一个示例性的CU划分过程如图3所示,图3中的CU划分过程所对应的编码树如图4所示。一个CU是否被划分与和它同层的其它CU是否被划分是相互独立的,因此,一个LCU有2^4=512种可能的CU-Tree组合方式。
对于每一个不再进行分割的CU包含着与之关联的预测单元(PU),其中,PU携带了预测处理信息。一个CU有两种编码模式:帧间(inter)模式和帧内(intra)模式。一个CU可以根据预测模式不同划分为不同PU分割块。对于帧内模式,一个CU的PU有2N×2N、N×N两种划分方式;对于帧间模式,一个CU的PU包括2N×2N、N×2N、2N×N、N×N以及非对称运动分割(AMP,Asymmetric Motion Partition)模式,AMP模式中又包含2N×nU、2N×nD、nL×2N、nR×2N四种非对称帧间预测模式,因此,如图5所示,HEVC共支持8种帧间预测模式。
一个CU的具体预测过程是在其内部的PU上进行的,在视频编码中,对于帧内模式而言,最重要的参数之一是帧内预测方向;对帧间模式而言,最重要的参数包括:运动信息,包括:参考方向(前向、或后向、或双向)、参考帧、运动矢量。如果这些信息都可以从已经编码视频数据的编码信息中推测得到或者得到近似的参数,显然将会大大加速将源视频编码为其它分辨率视频的过程,同时也能对更高一层的参数,包括帧类型决策,帧级QP,帧级码率等的确定提供参考。
具体的,所述第一编码信息包括:第一视频数据中每一帧图像的全局信息、每一帧图像中最大编码单元LCU的编码单元CU划分信息、每一帧图像中CU的预测模式及每一帧图像中CU的预测单元PU划分信息、I帧的帧内预测模式、及B帧的预测模式。
在本发明的一种可选实施例中,当B帧的预测模式为帧间预测时,所述第一编码信息还包括:B帧中每个PU的运动信息。
上述方案中,所述每一帧图像的全局信息包括:帧号(可用poc表示)、图像宽度(可用pic_width表示)和高度(可用pic_height表示)、帧级量化参数(QP,quantizationparameter)及帧类型(可用slice_type表示)。
上述方案中,所述预测模式包括:帧内预测和帧间预测。
上述方案中,具体规定了第一编码信息之中所包含的具体信息内容,基于以上信息即可以将源视频编码为不同分辨率标准的视频,对这些信息的选择是对编码质量和执行效率之间进行权衡之后的结果,基于以上信息已经能够保证将源视频编码为不同分辨率视频的编码质量。同时,由于第一编码信息中所包含的具体信息也是在保证编码质量的基础上最大程度上进行精简的结果,因此,该方案能够在降低编码复杂度的基础上保证编码速度。
具体的,所述B帧中每个PU的运动信息包括:参考帧范围和运动矢量。
步骤S201中,所述按照预设存储长度保存所述第一视频数据的第一编码信息,包括:
(1)用四个比特保存帧号、用两个比特保存图像的高度、用两个比特保存图像的宽度、用四个比特保存帧级量化参数、用四个比特保存帧类型;
实际实现中,也可以用四个以上比特保存帧号、用两个以上比特保存图像的高度、用两个以上比特保存图像的宽度、用四个以上比特保存帧级量化参数、用四个以上比特保存图像的宽度;
而为了最大限度节约信息存储空间,优选地,将帧号保存为四比特、将图像的高度保存为两比特、将图像的宽度保存为两比特、将帧级量化参数保存为四比特、将图像的宽度保存为四比特。
(2)用二十一个比特或一个比特保存所述CU划分信息;
当然,也可以采用二十一个以上比特或者一个以上比特保存所述CU划分信息。
而为了最大限度的节省信息存储空间,用二十一个比特或一个比特保存所述CU划分信息,则成为优选方案。
具体的,每一帧图像中可以包括多个LCU,每一个LCU的大小为64×64,对于一个LCU首先用一比特描述是否进行划分,如,用0表示不划分、1表示划分。针对LCU进行划分的情况,因为每一个CU是否往下划分都是独立的,32×32大小的CU层包括四个32×32大小的CU,而16×16大小的CU层有十六个CU,因此,32×32→16×16,即决定32×32大小的CU是否继续划分为16×16时,需要用四比特来描述四个32×32大小的CU是否往下划分;16×16→8×8需要十六比特来描述16×16大小的CU是否继续划分为8×8大小的CU。这样,对一个需要被划分的LCU来说,其CU划分信息,也就是CU_tree只需要二十一比特来描述就足够;针对LCU不进行划分的情况,只需要一比特即可对其CU划分信息进行描述。
(3)用三个比特保存所述每一帧图像中CU的PU划分信息;
由于CU的划分信息最多为八种,因此,需要三比特即可进行描述。
实际实现中,也可以使用三个以上比特保存所述每一帧图像中CU的PU划分信息,而为了节省信息存储空间,则可采用三比特来保存每一帧图像中CU的PU划分信息。
(4)用六个比特保存所述I帧的帧内预测模式;
针对HEVC编码,帧内预测模式包括35种,因此,需要6比特即可对I帧的帧内预测模式进行描述。
实际实现中,也可以使用六个以上比特来保存所述I帧的帧内预测模式;而作为能节省信息存储空间的优选方案,则可以使用六个比特保存所述I帧的帧内预测模式。
(5)用一个比特保存所述B帧的预测模式;其中,所述预测模式包括帧间预测模式和帧内预测,当预测模式为帧间预测模式时,还需要用一个字节保存一个参考帧范围、用两个字节保存一个运动矢量。
对于B帧,在确定B帧中每个LCU的CU划分方式,即得到CU_tree之后,针对每个CU,如果其预测模式为帧内预测,则需要保存帧内预测模式;如果是帧间预测,除保存帧间预测模式之外,还需要保存每个PU的参考帧(索引)的范围和运动信息,对于一个PU来说,最多包括两个运动信息和两个参考帧的范围信息,一个示例性的PU表示如下:{refL0,mvL0,refL1,mvL1},其中,包括两个运动矢量,每个运动矢量仅仅保存整像素部分,用一个字节即可;参考帧(索引)的范围为(-1~4)用一个字节表示即可,这样,最多六个字节即可表示一个PU。但是,对于一些运动信息比较特殊的情况,如{0,0,0,0}以及{-1,0,-1,0}可以设立额外标志位,如0XFE、0XFD,仅仅一个字节即可描述。
实际应用中,也可以用一个以上比特保存所述B帧的预测模式,并且当预测模式为帧间预测模式时,用一个以上字节保存一个参考帧范围、用两个以上字节保存一个运动矢量。
而为了节省信息存储空间,优选采用一个比特保存所述B帧的预测模式、并且当预测模式为帧间预测模式时,用一个字节保存一个参考帧范围、用两个字节保存一个运动矢量。
本发明方法实施例所提供的方法在确定第一视频数据的第一编码信息之后,按照预设存储长度对第一编码信息进行保存,其中,在预设存储长度的设置上,为节省存储空间,对编码信息中各信息的存储长度进行最大程度的精简,并详细规定了第一编码信息中各信息的保存长度。这样,既能够满足对源视频进行不同分辨率标准编码的需要,完整、准确描述出各个信息,又不会造成存储空间的浪费。
步骤202、根据所述第一编码信息确定将所述源视频编码为第二视频数据的第二编码信息;使用所述第二编码信息对所述源视频进行编码,得到第二视频数据。
具体的,所述根据所述第一编码信息确定将所述源视频编码为第二视频数据的第二编码信息,包括:
将第一分辨率和第二分辨率的比值确定为第一视频数据和第二视频数据的缩放比例;
根据所述缩放比例及每一帧图像中LCU的CU划分信息确定第二视频数据中LCU的CU划分信息;
根据所述第一视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定第二视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式;根据所述第一视频数据中每一帧图像中CU的PU划分信息确定第二视频数据中每一帧图像中CU的PU划分信息。
上述方案中,第二视频数据中LCU的CU划分信息、第二视频数据中每一帧图像中CU的预测模式、及第二视频数据中I帧的帧内预测模式、及第二视频数据中B帧的帧内预测模式和帧间预测模式、及第二视频数据中每一帧图像中CU的PU划分信息即为第二编码信息。
具体的,所述根据所述缩放比例及每一帧图像中LCU的CU划分信息确定第二视频数据中LCU的CU划分信息,包括:
确定第二视频数据中的各个LCU的坐标;
当所述缩放比例大于1/2且小于1时,则确定第一视频数据中与第二视频数据中各个LCU同层次的CU,将所述确定的CU的CU划分信息确定为第二视频数据中各个LCU的CU划分信息;
当所述缩放比例小于等于1/2时,则确定第一视频数据中较第二视频数据中各个LCU下一层次的CU,将所述确定的下一层次的CU的CU划分信息确定为第二视频数据中各个LCU的CU划分信息。
具体的,所述根据所述第一视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定第二视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式,包括:
将第二视频数据中的帧图像映射至第一视频数据中相应帧图像内;
分别定位第二视频数据中的帧图像中的每一个8×8的CU;
确定定位到的每一个8×8的CU的中心像素点坐标;
确定所述中心像素点坐标所映射至的第一视频数据中相应帧图像内的像素点坐标;
确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
将所述确定的第一视频数据中的8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定为第二视频数据中相应帧图像中8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式。
具体的,所述根据所述第一视频数据中每一帧图像中CU的PU划分信息确定第二视频数据中每一帧图像中CU的PU划分信息,包括:
将第二视频数据中的帧图像映射至第一视频数据中相应帧图像内;
分别定位第二视频数据中的帧图像中CU的PU;
确定定位到的每一个PU的中心像素点坐标;
确定所述中心像素点坐标所映射至的第一视频数据中相应帧图像内的像素点坐标;
确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
将所述确定的第一视频数据中的8×8的CU的PU划分信息确定为第二视频数据中CU的PU划分信息。
基于以上方法确定第二编码信息,即,第二视频数据中LCU的CU划分信息、第二视频数据中每一帧图像中CU的预测模式、及第二视频数据中I帧的帧内预测模式、及第二视频数据中B帧的帧内预测模式和帧间预测模、及第二视频数据中每一帧图像中CU的PU划分信息之后,即可根据以上信息对源视频进行编码得到符合第二分表率标准的第二视频数据。本领域技术人员能够理解的是,上述方案不限制于只用第一分辨率视频加速第二分辨率,也可以同时加速多个其他分辨率视频编码。
综上,根据本发明方法实施例提供的视频多分辨率编码方法,在将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息,之后,根据所述第一编码信息确定将所述源视频编码为第二视频数据的第二编码信息;使用所述第二编码信息对所述源视频进行编码,得到第二视频数据。该方案具备至少具备以下优点:
现有技术中,在将源视频编码为不同分辨率视频数据时,通常采用对源视频单独编码生成相应分辨率视频数据的方法,显而易见,这种方式需要在视频处理端单独建立多个编码任务,而且每一种分辨率视频编码时,其编码过程中的编码信息的确定是单独进行的,而编码信息的确定过程复杂,因此,需要消耗大量视频处理端资源;
而本发明方法实施例从不同分辨率标准的视频编码过程中编码信息之间的内在联系出发,在将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度对用于将源视频编码为第一视频数据的第一编码信息进行保存,之后,直接根据所保存的第一编码信息确定出将源视频编码为第二视频数据的第二编码信息,从而基于所述确定的第二编码信息直接对源视频进行编码得到第二视频数据,也就是说,第二编码信息可以直接基于第一编码信息进行确定。本领域技术人员都了解的是,在将源视频直接编码为第二视频数据过程中,其第二编码信息的确定过程中相当繁琐和复杂的,尤其是同时将源视频编码为多种不同分辨率的视频数据时,如果针对每一种视频数据都单独确定其编码信息,则每一次编码信息的确定都会消耗很多视频处理端资源。而本发明实施例二所提供的方案中,只需要确定第一视频数据的编码信息,就可以基于所确定的编码信息直接确定用于将源视频编码为第二视频数据的第二编码信息,而从第一编码信息得到第二编码信息只需要利用不同分辨率视频之间的关联和差异,其运算方法简单、便捷,这样,也就可以大大将低视频处理端的资源消耗。
参照图6,示出了本发明一种视频多分辨率编码装置实施例的结构框图,所述装置位于视频处理端,包括:保存模块61和编码模块62;其中,
所述保存模块61,用于在编码模块将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息;
所述编码模块62,用于根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据。
具体的,所述第一编码信息包括:第一视频数据中每一帧图像的全局信息、每一帧图像中最大编码单元LCU的编码单元CU划分信息、每一帧图像中CU的预测模式及每一帧图像中CU的PU划分信息、I帧的帧内预测模式、及B帧的预测模式。
当B帧的预测模式为帧间预测时,所述第一编码信息还包括:B帧中每个PU的运动信息。
所述每一帧图像的全局信息包括:帧号、图像宽度和高度、帧级量化参数及帧类型。
所述预测模式包括:帧内预测和帧间预测。
所述B帧中每个PU的运动信息包括:参考帧范围和运动矢量。
在本发明的一种可选实施例中,所述保存模块61,用于通过以下方式保存所述第一视频数据的第一编码信息:
用四个比特保存帧号、用两个比特保存图像的高度、用两个比特保存图像的宽度、用四个比特保存帧级量化参数、用四个比特保存帧类型;
用二十一个比特或一个比特保存所述CU划分信息;
用三个比特保存所述每一帧图像中CU的PU划分信息;
用六个比特保存所述I帧的帧内预测模式;
用一个比特保存所述B帧的预测模式;其中,所述预测模式包括帧间预测模式和帧内预测,当预测模式为帧间预测模式时,还需要用一个字节保存一个参考帧范围、用两个字节保存一个运动矢量。
在本发明的一种可选实施例中,所述编码模块62,用于根据所述第一编码信息确定将所述源视频编码为第二视频数据的第二编码信息;还用于使用所述第二编码信息对所述源视频进行编码,得到第二视频数据。
在本发明的一种可选实施例中,所述编码模块62,包括:确定子模块和编码子模块;其中,
所述确定子模块,用于将第一分辨率和第二分辨率的比值确定为第一视频数据和第二视频数据的缩放比例、以及根据所述缩放比例及每一帧图像中LCU的CU划分信息确定第二视频数据中LCU的CU划分信息、以及根据所述第一视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定第二视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式;
所述编码子模块,用于根据所述第一视频数据中每一帧图像中CU的PU划分信息确定第二视频数据中每一帧图像中CU的PU划分信息。
在本发明的一种可选实施例中,所述确定子模块,包括:第一确定单元、第二确定单元及第三确定单元;其中,
所述第一确定单元,用于确定第二视频数据中的各个LCU的坐标;
所述第二确定单元,用于当所述缩放比例大于1/2且小于1时,则确定第一视频数据中与第二视频数据中各个LCU同层次的CU;所述第三确定单元,将所述确定的CU的CU划分信息确定为第二视频数据中各个LCU的CU划分信息;或者,
所述第二确定单元,用于当所述缩放比例小于等于1/2时,确定第一视频数据中较第二视频数据中各个LCU下一层次的CU;所述第三确定单元,用于将所述确定的下一层次的CU的CU划分信息确定为第二视频数据中各个LCU的CU划分信息。
在本发明的一种可选实施例中,所述根确定子模块,包括:第一映射单元、第一定位单元、第四确定单元、第五确定单元、第六确定单元及第七确定单元;其中,
所述第一映射单元,用于将第二视频数据中的帧图像映射至第一视频数据中相应帧图像内;
所述第一定位单元,用于分别定位第二视频数据中的帧图像中的每一个8×8的CU;
所述第四确定单元,用于确定定位到的每一个8×8的CU的中心像素点坐标;
所述第五确定单元,用于确定所述中心像素点坐标所映射至的第一视频数据中相应帧图像内的像素点坐标;
所述第六确定单元,用于确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
所述第七确定单元,用于将所述确定的第一视频数据中的8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定为第二视频数据中相应帧图像中8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式。
在本发明的一种可选实施例中,所述确定子模块,包括:第二映射单元、第二定位单元、第八确定单元、第九确定单元、第十确定单元及第十一确定单元;其中,
所述第二映射单元,用于将第二视频数据中的帧图像映射至第一视频数据中相应帧图像内;
所述第二定位单元,用于分别定位第二视频数据中的帧图像中CU的PU;
所述第八确定单元,用于确定定位到的每一个PU的中心像素点坐标;
所述第九确定单元,用于确定所述中心像素点坐标所映射至的第一视频数据中相应帧图像内的像素点坐标;
所述第十确定单元,用于确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
所述第十一确定单元,用于将所述确定的第一视频数据中的8×8的CU的PU划分信息确定为第二视频数据中CU的PU划分信息。
在具体实施过程中,上述保存模块61和编码模块62可以由视频多处理端内的中央处理器(CPU,Central Processing Unit)、微处理器(MPU,Micro Processing Unit)、数字信号处理器(DSP,Digital Signal Processor)或可编程逻辑阵列(FPGA,Field-Programmable Gate Array)来实现。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种视频多分辨率编码方法和装置,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,根据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (12)

1.一种视频多分辨率编码方法,其特征在于,所述方法包括:
在将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息;
根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据;
所述根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据,包括:
根据所述第一编码信息确定所述第二视频数据的第二编码信息,其中,所述第二编码信息是指将所述源视频编码为所述第二视频数据的信息;
使用所述第二编码信息对所述源视频进行编码,得到所述第二视频数据;
其中,所述根据所述第一编码信息确定将所述源视频编码为第二视频数据的第二编码信息,包括:
将所述第一分辨率和所述第二分辨率的比值确定为所述第一视频数据和所述第二视频数据的缩放比例;
根据所述缩放比例及每一帧图像中LCU的CU划分信息确定所述第二视频数据中LCU的CU划分信息;
根据所述第一视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定所述第二视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式;
根据所述第一视频数据中每一帧图像中CU的PU划分信息确定所述第二视频数据中每一帧图像中CU的PU划分信息。
2.根据权利要求1所述的方法,其特征在于,所述第一编码信息包括:所述第一视频数据中每一帧图像的全局信息、每一帧图像中最大编码单元LCU的编码单元CU划分信息、每一帧图像中CU的预测模式及每一帧图像中CU的预测单元PU划分信息、I帧的帧内预测模式、及B帧的预测模式;所述B帧的预测模式包括:帧内预测和帧间预测;
当B帧的预测模式为帧间预测时,所述第一编码信息还包括:所述B帧中每个PU的运动信息;所述B帧中每个PU的运动信息包括:参考帧范围和运动矢量;
所述每一帧图像的全局信息包括:帧号、图像宽度和高度、帧级量化参数及帧类型。
3.根据权利要求2所述的方法,其特征在于,所述按照预设存储长度保存所述第一视频数据的第一编码信息,包括:
用四个比特保存帧号、用两个比特保存图像的高度、用两个比特保存图像的宽度、用四个比特保存帧级量化参数、用四个比特保存帧类型;
用二十一个比特或一个比特保存所述CU划分信息;
用三个比特保存所述每一帧图像中CU的PU划分信息;
用六个比特保存所述I帧的帧内预测模式;
用一个比特保存所述B帧的预测模式;其中,当预测模式为帧间预测模式时,用一个字节保存一个参考帧范围、用两个字节保存一个运动矢量。
4.根据权利要求1所述的方法,其特征在于,所述根据所述缩放比例及每一帧图像中LCU的CU划分信息确定第二视频数据中LCU的CU划分信息,包括:
确定所述第二视频数据中的各个LCU的坐标;
当所述缩放比例大于1/2且小于1时,则确定所述第一视频数据中与所述第二视频数据中各个LCU同层次的CU,将所述确定的CU的CU划分信息确定为所述第二视频数据中各个LCU的CU划分信息;
当所述缩放比例小于等于1/2时,则确定所述第一视频数据中较所述第二视频数据中各个LCU下一层次的CU,将所述确定的下一层次的CU的CU划分信息确定为所述第二视频数据中各个LCU的CU划分信息。
5.根据权利要求1所述的方法,其特征在于,所述根据所述第一视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定第二视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式,包括:
将所述第二视频数据中的帧图像映射至所述第一视频数据中相应帧图像内;
分别定位所述第二视频数据中的帧图像中的每一个8×8的CU;
确定定位到的每一个8×8的CU的中心像素点坐标;
确定所述中心像素点坐标所映射的所述第一视频数据中相应帧图像内的像素点坐标;
确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
将确定的所述第一视频数据中的8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定为所述第二视频数据中相应帧图像中8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式。
6.根据权利要求1所述的方法,其特征在于,所述根据所述第一视频数据中每一帧图像中CU的PU划分信息确定所述第二视频数据中每一帧图像中CU的PU划分信息,包括:
将所述第二视频数据中的帧图像映射至所述第一视频数据中相应帧图像内;
分别定位所述第二视频数据中的帧图像中CU的PU;
确定定位到的每一个PU的中心像素点坐标;
确定所述中心像素点坐标所映射的所述第一视频数据中相应帧图像内的像素点坐标;
确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
将确定的所述第一视频数据中的8×8的CU的PU划分信息确定为第二视频数据中CU的PU划分信息。
7.一种视频多分辨率编码装置,其特征在于,所述装置包括:保存模块和编码模块;其中,
所述保存模块,用于将源视频编码为符合第一分辨率标准的第一视频数据时,按照预设存储长度保存所述第一视频数据的第一编码信息;
所述编码模块,用于根据所述第一编码信息将所述源视频编码为符合第二分辨率标准的第二视频数据;
所述编码模块,用于根据所述第一编码信息确定第二视频数据的第二编码信息,其中,所述第二视频数据的第二编码信息是指将所述源视频编码为第二视频数据的第二编码信息;还用于使用所述第二编码信息对所述源视频进行编码,得到第二视频数据;
所述编码模块,包括:确定子模块和编码子模块;其中,
所述确定子模块,用于将第一分辨率和第二分辨率的比值确定为第一视频数据和第二视频数据的缩放比例、以及根据所述缩放比例及每一帧图像中LCU的CU划分信息确定第二视频数据中LCU的CU划分信息、以及根据所述第一视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定第二视频数据中每一帧图像中CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式;
所述编码子模块,用于根据所述第一视频数据中每一帧图像中CU的PU划分信息确定第二视频数据中每一帧图像中CU的PU划分信息。
8.根据权利要求7所述的装置,其特征在于,所述第一编码信息包括:所述第一视频数据中每一帧图像的全局信息、每一帧图像中最大编码单元LCU的编码单元CU划分信息、每一帧图像中CU的预测模式及每一帧图像中CU的PU划分信息、I帧的帧内预测模式、及B帧的预测模式;所述B帧的预测模式包括:帧内预测模式和帧间预测模式;
当B帧的预测模式为帧间预测时,所述第一编码信息还包括:B帧中每个PU的运动信息;所述B帧中每个PU的运动信息包括:参考帧范围和运动矢量;
所述每一帧图像的全局信息包括:帧号、图像宽度和高度、帧级量化参数及帧类型。
9.根据权利要求8所述的装置,其特征在于,所述保存模块,用于通过以下方式保存所述第一视频数据的第一编码信息:
用四个比特保存帧号、用两个比特保存图像的高度、用两个比特保存图像的宽度、用四个比特保存帧级量化参数、用四个比特保存帧类型;
用二十一个比特或一个比特保存所述CU划分信息;
用三个比特保存所述每一帧图像中CU的PU划分信息;
用六个比特保存所述I帧的帧内预测模式;
用一个比特保存所述B帧的预测模式;当预测模式为帧间预测模式时,还需要用一个字节保存一个参考帧范围、用两个字节保存一个运动矢量。
10.根据权利要求7所述的装置,其特征在于,所述确定子模块,包括:第一确定单元、第二确定单元及第三确定单元;其中,
所述第一确定单元,用于确定第二视频数据中的各个LCU的坐标;
所述第二确定单元,用于当所述缩放比例大于1/2且小于1时,则确定第一视频数据中与第二视频数据中各个LCU同层次的CU;所述第三确定单元,将所述确定的CU的CU划分信息确定为第二视频数据中各个LCU的CU划分信息;或者,
所述第二确定单元,用于当所述缩放比例小于等于1/2时,确定第一视频数据中较第二视频数据中各个LCU下一层次的CU;所述第三确定单元,用于将所述确定的下一层次的CU的CU划分信息确定为第二视频数据中各个LCU的CU划分信息。
11.根据权利要求7所述的装置,其特征在于,所述确定子模块,包括:第一映射单元、第一定位单元、第四确定单元、第五确定单元、第六确定单元及第七确定单元;其中,
所述第一映射单元,用于将第二视频数据中的帧图像映射至第一视频数据中相应帧图像内;
所述第一定位单元,用于分别定位第二视频数据中的帧图像中的每一个8×8的CU;
所述第四确定单元,用于确定定位到的每一个8×8的CU的中心像素点坐标;
所述第五确定单元,用于确定所述中心像素点坐标所映射至的第一视频数据中相应帧图像内的像素点坐标;
所述第六确定单元,用于确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
所述第七确定单元,用于将所述确定的第一视频数据中的8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式确定为第二视频数据中相应帧图像中8×8的CU的预测模式、及I帧的帧内预测模式、及B帧的帧内预测模式和帧间预测模式。
12.根据权利要求7所述的装置,其特征在于,所述确定子模块,包括:第二映射单元、第二定位单元、第八确定单元、第九确定单元、第十确定单元及第十一确定单元;其中,
所述第二映射单元,用于将第二视频数据中的帧图像映射至第一视频数据中相应帧图像内;
所述第二定位单元,用于分别定位第二视频数据中的帧图像中CU的PU;
所述第八确定单元,用于确定定位到的每一个PU的中心像素点坐标;
所述第九确定单元,用于确定所述中心像素点坐标所映射至的第一视频数据中相应帧图像内的像素点坐标;
所述第十确定单元,用于确定所述第一视频数据中相应帧图像内的像素点坐标所在的8×8的CU;
所述第十一确定单元,用于将所述确定的第一视频数据中的8×8的CU的PU划分信息确定为第二视频数据中CU的PU划分信息。
CN201610799833.8A 2016-08-31 2016-08-31 一种视频多分辨率编码方法和装置 Active CN106162174B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610799833.8A CN106162174B (zh) 2016-08-31 2016-08-31 一种视频多分辨率编码方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610799833.8A CN106162174B (zh) 2016-08-31 2016-08-31 一种视频多分辨率编码方法和装置

Publications (2)

Publication Number Publication Date
CN106162174A CN106162174A (zh) 2016-11-23
CN106162174B true CN106162174B (zh) 2019-10-29

Family

ID=57344483

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610799833.8A Active CN106162174B (zh) 2016-08-31 2016-08-31 一种视频多分辨率编码方法和装置

Country Status (1)

Country Link
CN (1) CN106162174B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108600757A (zh) * 2018-05-03 2018-09-28 深圳市网心科技有限公司 宏块类型判定方法、视频转码方法、电子设备和存储介质
JP2022530172A (ja) * 2019-03-11 2022-06-28 アリババ・グループ・ホールディング・リミテッド 適応解像度ビデオ符号化のためのインター符号化
CN110636326A (zh) * 2019-11-14 2019-12-31 广州酷狗计算机科技有限公司 直播视频处理方法及装置、存储介质
CN111225215B (zh) * 2020-04-10 2020-07-24 北京数智鑫正科技有限公司 数据处理方法和系统
CN112752152B (zh) * 2020-12-28 2022-11-25 海信视像科技股份有限公司 投送视频播放方法及显示设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1700771A (zh) * 2005-05-23 2005-11-23 上海广电(集团)有限公司中央研究院 一种增强像素域码流转换方法
CN103546751A (zh) * 2012-07-10 2014-01-29 美国博通公司 视频编码方法和系统
CN104717507A (zh) * 2015-03-31 2015-06-17 北京奇艺世纪科技有限公司 一种视频转码方法及装置
CN105359511A (zh) * 2013-05-24 2016-02-24 索尼克Ip股份有限公司 为了自适应位速率流化而利用自适应量化编码多个视频流的系统和方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1700771A (zh) * 2005-05-23 2005-11-23 上海广电(集团)有限公司中央研究院 一种增强像素域码流转换方法
CN103546751A (zh) * 2012-07-10 2014-01-29 美国博通公司 视频编码方法和系统
CN105359511A (zh) * 2013-05-24 2016-02-24 索尼克Ip股份有限公司 为了自适应位速率流化而利用自适应量化编码多个视频流的系统和方法
CN104717507A (zh) * 2015-03-31 2015-06-17 北京奇艺世纪科技有限公司 一种视频转码方法及装置

Also Published As

Publication number Publication date
CN106162174A (zh) 2016-11-23

Similar Documents

Publication Publication Date Title
CN106162174B (zh) 一种视频多分辨率编码方法和装置
TWI594621B (zh) 於多層視訊寫碼中關於層間預測類型之處理位元流限制
US10178410B2 (en) Method and apparatus of motion information management in video coding
TW201713116A (zh) 在區塊內複製模式中之參考圖像清單結構
US11706417B2 (en) Video decoding method and video decoder
US20220329839A1 (en) Video decoding method and video decoder
JP2023143935A (ja) サブブロック区分モードのためのエンコーダ、デコーダ、および対応する方法
CN115174906B (zh) 几何分割模式的译码过程
CN104010196B (zh) 基于hevc的3d质量可伸缩视频编码
US20170180745A1 (en) Prediction method and Electronic Apparatus of encoding mode of variable resolution
CN112565815B (zh) 文件封装方法、文件传输方法、文件解码方法及相关设备
JP2022537426A (ja) 幾何学的分割モードのためのクロマサンプル重みの導出
CN104506870A (zh) 一种适用于多码流的视频编码处理方法和装置
JP2023515175A (ja) シグナリングスライスヘッダシンタックス要素を簡略化するためのエンコーダ、デコーダおよび対応する方法
CA3103654C (en) Method and apparatus for intra prediction
CN115361582B (zh) 一种视频实时超分辨率处理方法、装置、终端及存储介质
WO2023130896A1 (zh) 媒体数据的数据处理方法、装置、计算机设备及存储介质
JP7286782B2 (ja) 幾何学的区分けモードのためのサンプルの距離の計算
JP7416820B2 (ja) ビデオコーディングにおけるヌルタイルコーディング
US10743009B2 (en) Image processing apparatus and image processing method
RU2814812C2 (ru) Выведение веса выборки цветности для геометрического режима разделения
CN113038277B (zh) 一种视频处理方法和装置
EP3989566A1 (en) Motion information list construction method in video encoding and decoding, device, and apparatus
CN114342407A (zh) 感兴趣区域感知自适应分辨率视频编码
EP2845383A1 (en) Mechanism for facilitating cost-efficient and low-latency encoding of video streams

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant