CN112188180A - 一种处理子块图像的方法及装置 - Google Patents

一种处理子块图像的方法及装置 Download PDF

Info

Publication number
CN112188180A
CN112188180A CN201910602008.8A CN201910602008A CN112188180A CN 112188180 A CN112188180 A CN 112188180A CN 201910602008 A CN201910602008 A CN 201910602008A CN 112188180 A CN112188180 A CN 112188180A
Authority
CN
China
Prior art keywords
image
sub
block
information
subblock
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910602008.8A
Other languages
English (en)
Other versions
CN112188180B (zh
Inventor
虞露
王彬
孙宇乐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Original Assignee
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU filed Critical Zhejiang University ZJU
Priority to CN201910602008.8A priority Critical patent/CN112188180B/zh
Publication of CN112188180A publication Critical patent/CN112188180A/zh
Application granted granted Critical
Publication of CN112188180B publication Critical patent/CN112188180B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/122Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供了一种处理子块图像的方法及装置。该发明用于多媒体领域中,从多视点子块拼接图像的码流中提取子块图像,并利用子块图像渲染为目标图像。本发明给出的方法可以有效降低视点子块拼接图像的码流中子块图像信息所消耗的数据量,提升编码性能。本发明在提出一种处理子块图像的方法的同时,还提出了相应的装置。

Description

一种处理子块图像的方法及装置
技术领域
本发明专利属于子块图像处理领域,具体涉及一种从多视点子块拼接图像中提取子块图像,并利用子块图像渲染目标图像的方法和装置。
背景技术
“沉浸感”作为一种主观评价,是指观看者对多媒体系统建立、显示出来的虚拟场景的感知代入感。随着采集设备和显示设备的能力逐年增强,沉浸式媒体作为一种能够带给观看者强沉浸感的视觉多媒体,其编码、传输和渲染已经成为了市场和研究热点。
随着沉浸式媒体支持观看者观看自由度增加,其带给观看者的视觉沉浸感得到明显增强。观看自由度指的是支持观看者在三维空间沿轴平移和绕三个轴旋转。观看者可以在限定空间中任意移动位置、改变朝向来观看场景,从而获得交互感和运动视差,形成更强的视觉沉浸感。
为了支持多自由度观看场景,沉浸式媒体需要渲染限定空间中任意位置、任意朝向的目标。多视点图像+深度信息是一种有效的沉浸式媒体表达方式,它有多个纹理图像以及对应的深度信息组成的。利用基于深度图像的视点合成技术,该表达方式可以根据任意目标图像的相机参数渲染得到目标图像。但是由于多个视点之间存在巨大的视点间冗余,传输多个视点图像会造成编解码的浪费。
多视点子块拼接图像有效地解决了这个问题。如图2所示,在编解码之前,通过分析多个视点之间特征信息,从每个单视点图像中提取出一个个子块图像,最后将多个子块图像拼接成多视点子块拼接图像。经过这样的操作,需要传输的图像数据量得到了大大的下降,编解码可以有效提升。但是又引发了一个新的问题,多个子块图像被提取、拼接在一起,用于描述子块图像的信息数量显著上升,这也会造成编解码效率的下降。
目前子块图像信息包括但不限于:子块图像的宽度、高度、该子块图像的左上角像素在多视点像中的位置和子块图像的左上角像素在单视点图像中的位置信息,其中,每个信息都用固定长度的二进制位来表示。这些信息不经过熵编码直接存入码流中,随着子块数量的增加,子块图像信息的数据量消耗会更加严重。
发明内容
为了解决上述技术问题,本发明提出了一种处理子块图像的方法及装置。对于子块图像的宽度、高度、该子块图像的左上角像素在多视点像中的位置和子块图像的左上角像素在单视点图像中的位置信息,只需要将这些信息的部分传入码流中。对于解码端,通过计算,从码流中可以恢复出这些信息的完整部分。这样节省子块图像的信息所占的数据量,在相同的码率下,提升多视点子块拼接图像的编码质量和合成目标图像的质量。
本发明的第一目的是提供处理子块图像的方法,包括如下内容:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w、高度信息h、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)和所述单视点图像的相机参数,其中,w和h 各自是m1位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是m2位二进制数,xs,ys各自是m3位二进制数;
分别将w、h放大2的T1次方倍,得出该子块图像的宽度width和高度height,width和height 为(m1+T1)位的二进制数;分别将xp、yp放大2的T2次方倍,得出该子块图像的左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack),x_pack和y_pack为(m2+T2)位的二进制数;分别将xp、yp放大2的T3次方倍,得出该子块图像的左上角像素在单视点图像中的位置 (x_source,y_source),x_source和y_source为(m3+T3)位的二进制数,具体实现可以用乘法或移位操作,
乘法操作如下:
Figure BDA0002119512910000021
Figure BDA0002119512910000022
Figure BDA0002119512910000023
Figure BDA0002119512910000024
Figure BDA0002119512910000025
Figure BDA0002119512910000026
移位操作如下:
Figure BDA0002119512910000027
Figure BDA0002119512910000028
Figure BDA0002119512910000029
Figure BDA00021195129100000210
Figure BDA00021195129100000211
Figure BDA00021195129100000212
其中,T1,T2,T3都是大于0的整数;
从多视点子块拼接图像的(x_pack,y_pack)位置开始,提取宽度为width、高度为height的子块,得到所述所述单视点图像中从位置(x_source,y_source)开始的、宽度为width、高度为 height的子块图像;
使用所述的单视点图像中的子块图像以及所述的相机参数渲染得到目标图像。
所述的一种处理子块图像的方法,其特征还在于,包括:从码流中获取T1,T2和T3,其中T1,T2,T3都是大于2的整数。
所述的一种处理子块图像的方法,其特征还在于,包括:所述的T1等于T2或m1等于m2,m1等于m3
所述的一种处理子块图像的方法,其特征还在于,包括:
从码流中获得多视点子块拼接图像的宽度Wp和高度Hp、所述单视点图像的宽度Ws和高度Hs。
所述的一种处理子块图像的方法,其特征还在于,包括:
通过计算,得出m1,m2和m3,m1取log2Wp、log2Hp的较大值向上取整后加1的数,m2取log2Wp、log2Hp的较大值向上取整后加1的数,m3取log2Ws,log2Hs的较大值向上取整后加1的数。
本发明第二目的是提供一种处理子块图像的装置,其特征在于,包括:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w、高度信息h、所述子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)和所述单视点图像的相机参数,其中,w和h各自是m1位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始, xp,yp各自是m2位二进制数,xs,ys各自是m3位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块该模块分别将w、h放大2的T1次方倍,得出该子块图像的宽度width和高度height,width和height为(m1+T1)位的二进制数;分别将xp、yp放大2的T2次方倍,得出该子块图像的左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack),x_pack和 y_pack为(m2+T2)位的二进制数;分别将xp、yp放大2的T3次方倍,得出该子块图像的左上角像素在单视点图像中的位置(x_source,y_source),x_source和y_source为(m3+T3)位的二进制数,具体实现可以用乘法或移位操作,
乘法操作如下:
Figure BDA0002119512910000031
Figure BDA0002119512910000032
Figure BDA0002119512910000033
Figure BDA0002119512910000034
Figure BDA0002119512910000035
Figure BDA0002119512910000036
移位操作如下:
Figure BDA0002119512910000037
Figure BDA0002119512910000038
Figure BDA0002119512910000039
Figure BDA00021195129100000310
Figure BDA00021195129100000311
Figure BDA00021195129100000312
其中,T1,T2,T3都是大于0的整数;
子块图像提取模块:其输入为多视点子块拼接图像以及所述子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack),输出为所述单视点图像中从位置(x_source,y_source)开始的、宽度为width、高度为height的子块图像,该模块从多视点子块拼接图像中提取出该子块图像;
目标图像渲染模块:其输入为所述的单视点图像中的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染得到目标图像。
所述的一种处理子块图像的装置,其特征还在于,包括:
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块获取T1,T2和T3,其中T1,T2,T3都是大于2的整数;
所述的一种处理子块图像的装置,其特征还在于,包括:
所述的T1等于T2或m1等于m2,m1等于m3
所述的一种处理子块图像的装置,其特征还在于,包括:
所述子块图像信息提取模块中还包括多视点子块拼接图像信息及单视点图像信息提取模块,该模块从码流中获得多视点子块拼接图像的宽度Wp和高度Hp、所述单视点图像的宽度Ws和高度Hs。
所述的一种处理子块图像的装置,其特征还在于,包括:
所述子块图像信息提取模块中还包括m1,m2和m3计算模块,所述m1,m2和m3计算模块得出 m1,m2和m3,m1取log2Wp、log2Hp的较大值向上取整后加1的数,m2取log2Wp、log2Hp的较大值向上取整后加1的数,m3取log2Ws,log2Hs的较大值向上取整后加1的数。
本发明由于采用以上技术方案,其具有以下优点:
子块图像信息占据整个多视点子块拼接图像信息中的大部分,对于子块图像的宽度、高度、该子块图像的左上角像素在多视点像中的位置和子块图像的左上角像素在单视点图像中的位置信息,只需要将这些信息的部分传入码流中。对于解码端,通过计算,从码流中可以恢复出这些信息的完整部分。这样节省子块图像的信息所占的数据量,目前这些子块图像信息使用固定16位二进制数表示,在设定T1=T2=T3=3的情况下,可以节省18.75%的子块图像信息的数据量。
附图说明
结合附图,本发明的其他特点和优点可从下面通过举例来对本发明的原理进行解释的优选实施方式的说明中变得更清楚。
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是发明装置流程图。
图2是多视点子块拼接图像的生成原理图。
具体实施方式
实施例1
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是14位二进制数,xs,ys各自是15位二进制数;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000041
Figure BDA0002119512910000042
Figure BDA0002119512910000043
Figure BDA0002119512910000044
Figure BDA0002119512910000045
Figure BDA0002119512910000046
其中,T1=3,T2=2,T3=1;
从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例2
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000051
Figure BDA0002119512910000052
Figure BDA0002119512910000053
Figure BDA0002119512910000054
Figure BDA0002119512910000055
Figure BDA0002119512910000056
其中,T1=3,T2=2,T3=1;
从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例3
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000057
Figure BDA0002119512910000058
Figure BDA0002119512910000059
Figure BDA00021195129100000510
Figure BDA00021195129100000511
Figure BDA00021195129100000512
其中,T1=T2=3,T3=1;
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例4
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是16位二进制数;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000061
Figure BDA0002119512910000062
Figure BDA0002119512910000063
Figure BDA0002119512910000064
Figure BDA0002119512910000065
Figure BDA0002119512910000066
其中,T1=T2=T3=3;
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例5
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是14位二进制数,xs,ys各自是15位二进制数;
从码流中获取T1=3,T2=2,T3=1;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000067
Figure BDA0002119512910000068
Figure BDA0002119512910000069
Figure BDA00021195129100000610
Figure BDA0002119512910000071
Figure BDA0002119512910000072
从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例6
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
从码流中获取T1=3,T2=2,T3=1;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000073
Figure BDA0002119512910000074
Figure BDA0002119512910000075
Figure BDA0002119512910000076
Figure BDA0002119512910000077
Figure BDA0002119512910000078
从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例7
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
从码流中获取T1=T2=3,T3=1;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000079
Figure BDA00021195129100000710
Figure BDA0002119512910000081
Figure BDA0002119512910000082
Figure BDA0002119512910000083
Figure BDA0002119512910000084
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例8
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是16位二进制数;
从码流中获取T1=T2=T3=3;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000085
Figure BDA0002119512910000086
Figure BDA0002119512910000087
Figure BDA0002119512910000088
Figure BDA0002119512910000089
Figure BDA00021195129100000810
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例9
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
从码流中获取多视点子块拼接图像的宽度Wp=4096、高度Hp=2048;
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:子块图像所属单视点图像的宽度Ws=2048、高度Hs=1024;
通过计算,得出m1,m2和m3,m1取log2Wp、log2Hp的较大值向上取整后+1的数,即13,m2取 log2Wp、log2Hp的较大值向上取整后加1的数,即13,m3取log2Ws,log2Hs的较大值向上取整后加1的数,即12;
从码流中获取所述子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是13位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是13位二进制数,xs,ys各自是12位二进制数;
从码流中获取T1=T2=T3=3;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000091
Figure BDA0002119512910000092
Figure BDA0002119512910000093
Figure BDA0002119512910000094
Figure BDA0002119512910000095
Figure BDA0002119512910000096
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例10
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
从码流中获取多视点子块拼接图像的宽度Wp=4096、高度Hp=2048;
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:子块图像所属单视点图像的宽度Ws=2048、高度Hs=1024;
通过计算,得出m1,m2和m3,m1取log2Wp、log2Hp的较大值向上取整后+1的数,即13,m2取 log2Wp、log2Hp的较大值向上取整后加1的数,即13,m3取log2Ws,log2Hs的较大值向上取整后加1的数,即12;
从码流中获取所述子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是13位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是13位二进制数,xs,ys各自是12位二进制数;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000097
Figure BDA0002119512910000098
Figure BDA0002119512910000099
Figure BDA00021195129100000910
Figure BDA00021195129100000911
Figure BDA00021195129100000912
其中,T1=T2=T3=3;
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例11
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是14位二进制数,xs,ys各自是15位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000101
Figure BDA0002119512910000102
Figure BDA0002119512910000103
Figure BDA0002119512910000104
Figure BDA0002119512910000105
Figure BDA0002119512910000106
Figure BDA0002119512910000107
其中,T1=3,T2=2,T3=1;
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例12
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000111
Figure BDA0002119512910000112
Figure BDA0002119512910000113
Figure BDA0002119512910000114
Figure BDA0002119512910000115
Figure BDA0002119512910000116
其中,T1=3,T2=2,T3=1;
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例13
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000117
Figure BDA0002119512910000118
Figure BDA0002119512910000119
Figure BDA00021195129100001110
Figure BDA00021195129100001111
Figure BDA00021195129100001112
其中,T1=T2=3,T3=1;
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例14
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是16位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000121
Figure BDA0002119512910000122
Figure BDA0002119512910000123
Figure BDA0002119512910000124
Figure BDA0002119512910000125
Figure BDA0002119512910000126
其中,T1=T2=T3=3;
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例15
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是14位二进制数,xs,ys各自是15位二进制数;
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块从码流中获取T1=3,T2=2,T3=1;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000127
Figure BDA0002119512910000128
Figure BDA0002119512910000129
Figure BDA0002119512910000131
Figure BDA0002119512910000132
Figure BDA0002119512910000133
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例16
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块从码流中获取T1=3,T2=2,T3=1;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000134
Figure BDA0002119512910000135
Figure BDA0002119512910000136
Figure BDA0002119512910000137
Figure BDA0002119512910000138
Figure BDA0002119512910000139
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例17
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块从码流中获取T1=T2=3,T3=1;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000141
Figure BDA0002119512910000142
Figure BDA0002119512910000143
Figure BDA0002119512910000144
Figure BDA0002119512910000145
Figure BDA0002119512910000146
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例18
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是16位二进制数;
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块从码流中获取T1=T2=T3=3;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000147
Figure BDA0002119512910000148
Figure BDA0002119512910000149
Figure BDA00021195129100001410
Figure BDA00021195129100001411
Figure BDA00021195129100001412
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例19
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:子块图像所属单视点图像的宽度Ws=2048、高度Hs=1024;
所述子块图像信息提取模块从码流中获取所述子块图像的信息,包括:所述多视点子块拼接图像的宽度Wp=4096、高度Hp=2048;
所述子块图像信息提取模块中还包括m1,m2和m3计算模块,所述m1,m2和m3计算模块得出m1,m2和m3,该模块计算m1取log2Wp、log2Hp的较大值向上取整后+1的数,即13,m2取log2Wp、 log2Hp的较大值向上取整后加1的数,即13,m3取log2Ws,log2Hs的较大值向上取整后加1的数,即12;
所述子块图像信息提取模块从码流中获取所述子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是13位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是13位二进制数,xs,ys各自是12位二进制数;
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块从码流中获取T1=T2=T3=3;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000151
Figure BDA0002119512910000152
Figure BDA0002119512910000153
Figure BDA0002119512910000154
Figure BDA0002119512910000155
Figure BDA0002119512910000156
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例20
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:子块图像所属单视点图像的宽度Ws=2048、高度Hs=1024;
所述子块图像信息提取模块从码流中获取多视点子块拼接图像的宽度Wp=4096、高度Hp=2048;
所述子块图像信息提取模块中还包括m1,m2和m3计算模块,所述m1,m2和m3计算模块得出m1,m2和m3,该模块计算m1取log2Wp、log2Hp的较大值向上取整后+1的数,即13,m2取log2Wp、 log2Hp的较大值向上取整后加1的数,即13,m3取log2Ws,log2Hs的较大值向上取整后加1的数,即12;
所述子块图像信息提取模块从码流中获取所述子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是13位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是13位二进制数,xs,ys各自是12位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000161
Figure BDA0002119512910000162
Figure BDA0002119512910000163
Figure BDA0002119512910000164
Figure BDA0002119512910000165
Figure BDA0002119512910000166
其中,T1=T2=T3=3;
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例21
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是14位二进制数,xs,ys各自是15位二进制数;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000167
Figure BDA0002119512910000168
Figure BDA0002119512910000169
Figure BDA00021195129100001610
Figure BDA00021195129100001611
Figure BDA0002119512910000171
其中,T1=3,T2=2,T3=1;
从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例22
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000172
Figure BDA0002119512910000173
Figure BDA0002119512910000174
Figure BDA0002119512910000175
Figure BDA0002119512910000176
Figure BDA0002119512910000177
其中,T1=3,T2=2,T3=1;
从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例23
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000178
Figure BDA0002119512910000179
Figure BDA0002119512910000181
Figure BDA0002119512910000182
Figure BDA0002119512910000183
Figure BDA0002119512910000184
其中,T1=T2=3,T3=1;
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例24
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是16位二进制数;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000185
Figure BDA0002119512910000186
Figure BDA0002119512910000187
Figure BDA0002119512910000188
Figure BDA0002119512910000189
Figure BDA00021195129100001810
其中,T1=T2=T3=3;
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例25
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是14位二进制数,xs,ys各自是15位二进制数;
从码流中获取T1=3,T2=2,T3=1;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000191
Figure BDA0002119512910000192
Figure BDA0002119512910000193
Figure BDA0002119512910000194
Figure BDA0002119512910000195
Figure BDA0002119512910000196
从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例26
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
从码流中获取T1=3,T2=2,T3=1;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000197
Figure BDA0002119512910000198
Figure BDA0002119512910000199
Figure BDA00021195129100001910
Figure BDA00021195129100001911
Figure BDA00021195129100001912
从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例27
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
从码流中获取T1=T2=3,T3=1;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000201
Figure BDA0002119512910000202
Figure BDA0002119512910000203
Figure BDA0002119512910000204
Figure BDA0002119512910000205
Figure BDA0002119512910000206
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例28
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息 (xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是16位二进制数;
从码流中获取T1=T2=T3=3;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000207
Figure BDA0002119512910000208
Figure BDA0002119512910000209
Figure BDA00021195129100002010
Figure BDA00021195129100002011
Figure BDA00021195129100002012
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例29
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
从码流中获取多视点子块拼接图像的宽度Wp=4096、高度Hp=2048;
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:子块图像所属单视点图像的宽度Ws=2048、高度Hs=1024;
通过计算,得出m1,m2和m3,m1取log2Wp、log2Hp的较大值向上取整后+1的数,即13,m2取 log2Wp、log2Hp的较大值向上取整后加1的数,即13,m3取log2Ws,log2Hs的较大值向上取整后加1的数,即12;
从码流中获取所述子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是13位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是13位二进制数,xs,ys各自是12位二进制数;
从码流中获取T1=T2=T3=3;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000211
Figure BDA0002119512910000212
Figure BDA0002119512910000213
Figure BDA0002119512910000214
Figure BDA0002119512910000215
Figure BDA0002119512910000216
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例30
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
从码流中获取多视点子块拼接图像的宽度Wp=4096、高度Hp=2048;
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:子块图像所属单视点图像的宽度Ws=2048、高度Hs=1024;
通过计算,得出m1,m2和m3,m1取log2Wp、log2Hp的较大值向上取整后+1的数,即13,m2取 log2Wp、log2Hp的较大值向上取整后加1的数,即13,m3取log2Ws,log2Hs的较大值向上取整后加1的数,即12;
从码流中获取所述子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是13位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是13位二进制数,xs,ys各自是12位二进制数;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000217
Figure BDA0002119512910000221
Figure BDA0002119512910000222
Figure BDA0002119512910000223
Figure BDA0002119512910000224
Figure BDA0002119512910000225
其中,T1=T2=T3=3;
从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例31
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是14位二进制数,xs,ys各自是15位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000226
Figure BDA0002119512910000227
Figure BDA0002119512910000228
Figure BDA0002119512910000229
Figure BDA00021195129100002210
Figure BDA00021195129100002211
其中,T1=3,T2=2,T3=1;
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例32
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000231
Figure BDA0002119512910000232
Figure BDA0002119512910000233
Figure BDA0002119512910000234
Figure BDA0002119512910000235
Figure BDA0002119512910000236
其中,T1=3,T2=2,T3=1;
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例33
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000237
Figure BDA0002119512910000238
Figure BDA0002119512910000239
Figure BDA00021195129100002310
Figure BDA00021195129100002311
Figure BDA00021195129100002312
其中,T1=T2=3,T3=1;
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例34
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是16位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000241
Figure BDA0002119512910000242
Figure BDA0002119512910000243
Figure BDA0002119512910000244
Figure BDA0002119512910000245
Figure BDA0002119512910000246
其中,T1=T2=T3=3;
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例35
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是14位二进制数,xs,ys各自是15位二进制数;
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块从码流中获取T1=3,T2=2,T3=1;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000247
Figure BDA0002119512910000248
Figure BDA0002119512910000249
Figure BDA0002119512910000251
Figure BDA0002119512910000252
Figure BDA0002119512910000253
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例36
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块从码流中获取T1=3,T2=2,T3=1;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000254
Figure BDA0002119512910000255
Figure BDA0002119512910000256
Figure BDA0002119512910000257
Figure BDA0002119512910000258
Figure BDA0002119512910000259
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(40,100)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例37
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是14位二进制数;
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块从码流中获取T1=T2=3,T3=1;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000261
Figure BDA0002119512910000262
Figure BDA0002119512910000263
Figure BDA0002119512910000264
Figure BDA0002119512910000265
Figure BDA0002119512910000266
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例38
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是16位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是16位二进制数,xs,ys各自是16位二进制数;
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块从码流中获取T1=T2=T3=3;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000267
Figure BDA0002119512910000268
Figure BDA0002119512910000269
Figure BDA00021195129100002610
Figure BDA00021195129100002611
Figure BDA00021195129100002612
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例39
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:子块图像所属单视点图像的宽度Ws=2048、高度Hs=1024;
所述子块图像信息提取模块从码流中获取所述子块图像的信息,包括:所述多视点子块拼接图像的宽度Wp=4096、高度Hp=2048;
所述子块图像信息提取模块中还包括m1,m2和m3计算模块,所述m1,m2和m3计算模块得出m1,m2和m3,该模块计算m1取log2Wp、log2Hp的较大值向上取整后+1的数,即13,m2取log2Wp、 log2Hp的较大值向上取整后加1的数,即13,m3取log2Ws,log2Hs的较大值向上取整后加1的数,即12;
所述子块图像信息提取模块从码流中获取所述子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是13位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是13位二进制数,xs,ys各自是12位二进制数;
所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块从码流中获取T1=T2=T3=3;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000271
Figure BDA0002119512910000272
Figure BDA0002119512910000273
Figure BDA0002119512910000274
Figure BDA0002119512910000275
Figure BDA0002119512910000276
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例40
本发明实施例提供了一种处理子块图像的装置。
本实施例提供的处理子块图像的方法包括以下模块:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:子块图像所属单视点图像的宽度Ws=2048、高度Hs=1024;
所述子块图像信息提取模块从码流中获取多视点子块拼接图像的宽度Wp=4096、高度Hp=2048;
所述子块图像信息提取模块中还包括m1,m2和m3计算模块,所述m1,m2和m3计算模块得出m1,m2和m3,该模块计算m1取log2Wp、log2Hp的较大值向上取整后+1的数,即13,m2取log2Wp、 log2Hp的较大值向上取整后加1的数,即13,m3取log2Ws,log2Hs的较大值向上取整后加1的数,即12;
所述子块图像信息提取模块从码流中获取所述子块图像的信息,包括:宽度信息w为128、高度信息h为56、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(10,25)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)=(25,56)和所述单视点图像的相机参数,其中,w和h各自是13位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始,xp,yp各自是13位二进制数,xs,ys各自是12位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度 height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块通过以下计算,得到输出:
Figure BDA0002119512910000281
Figure BDA0002119512910000282
Figure BDA0002119512910000283
Figure BDA0002119512910000284
Figure BDA0002119512910000285
Figure BDA0002119512910000286
其中,T1=T2=T3=3;
子块图像提取模块:输入为多视点子块拼接图像,输出为所述子块图像,该模块从多视点子块拼接图像的(80,200)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
目标图像渲染模块:其输入为所述的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例41
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
从码流中获取多视点子块拼接图像的宽度Wp=4096、高度Hp=2048;
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:子块图像所属单视点图像的宽度Ws=2048、高度Hs=1024;
通过计算,得出m2和m3,m2取log2Wp、log2Hp的较大值向上取整后+1的数,即13,m3取log2Ws,log2Hs的较大值向上取整后加1的数,即12;
从码流中获取所述子块图像的信息,包括:该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(256,128)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,xp,yp各自是13位二进制数,xs,ys各自是 12位二进制数;
通过计算,得出m1,m1取log2(Wp-xp)、log2(Hp-yp)的较大值向上取整后加1的数,即 12,
从码流中获取所述子块图像的信息,包括:宽度信息w为56、高度信息h为28,其中,w和h各自是12位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始;
从码流中获取T1=T2=T3=3;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000287
Figure BDA0002119512910000288
Figure BDA0002119512910000291
Figure BDA0002119512910000292
Figure BDA0002119512910000293
Figure BDA0002119512910000294
其中,T1=T2=T3=3;
从多视点子块拼接图像的(2048,1024)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。
实施例42
本发明实施例提供了一种处理子块图像的方法。
本实施例提供的处理子块图像的方法包括:
从码流中获取多视点子块拼接图像的宽度Wp=4096、高度Hp=2048;
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:子块图像所属单视点图像的宽度Ws=2048、高度Hs=1024;
通过计算,得出m2和m3,m2取log2Wp、log2Hp的较大值向上取整后+1的数,即13,m3取log2Ws,log2Hs的较大值向上取整后加1的数,即12;
从码流中获取所述子块图像的信息,包括:该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)=(256,128)、子块图像的左上角像素在单视点图像中的位置信息 (xs,ys)=(25,56)和所述单视点图像的相机参数,其中,xp,yp各自是13位二进制数,xs,ys各自是 12位二进制数;
通过计算,得出m1,m1取log2(Wp-xp)、log2(Hp-yp)的较大值向上取整后加1的数,即 12,
从码流中获取所述子块图像的信息,包括:宽度信息w为56、高度信息h为28,其中,w和h各自是12位二进制数,w(j)表示为w从低到高的第j个二进制位,j从1开始;
通过以下计算,得出该子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source):
Figure BDA0002119512910000295
Figure BDA0002119512910000296
Figure BDA0002119512910000297
Figure BDA0002119512910000298
Figure BDA0002119512910000299
Figure BDA00021195129100002910
其中,T1=T2=T3=3;
从多视点子块拼接图像的(2048,1024)位置开始,提取宽度为1024、高度为448的子块,得到所述的子块图像;
使用所述的子块图像以及所述的相机参数渲染目标图像。

Claims (10)

1.一种处理子块图像的方法,其特征在于,包括:
对于多视点子块拼接图像中的至少一个子块图像,从码流中获取该子块图像的信息,包括:宽度信息w、高度信息h、该子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)和所述单视点图像的相机参数,其中,w和h各自是m1位二进制数,xp,yp各自是m2位二进制数,xs,ys各自是m3位二进制数;
分别将w、h放大2的T1次方倍,得出该子块图像的宽度width和高度height,width和height为(m1+T1)位的二进制数;分别将xp、yp放大2的T2次方倍,得出该子块图像的左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack),x_pack和y_pack为(m2+T2)位的二进制数;分别将xp、yp放大2的T3次方倍,得出该子块图像的左上角像素在单视点图像中的位置(x_source,y_source),x_source和y_source为(m3+T3)位的二进制数,所述T1,T2,T3都是大于0的整数;
从多视点子块拼接图像的(x_pack,y_pack)位置开始,提取宽度为width、高度为height的子块,得到所述单视点图像中从位置(x_source,y_source)开始的、宽度为width、高度为height的子块图像;
使用所述的单视点图像中的子块图像以及所述的相机参数渲染得到目标图像。
2.根据权利1所述的一种处理子块图像的方法,其特征还在于,包括:从码流中获取T1,T2和T3,其中T1,T2,T3都是大于2的整数。
3.根据权利1所述的一种处理子块图像的方法,其特征还在于,包括:所述的T1等于T2或m1等于m2,m1等于m3
4.根据权利1所述的一种处理子块图像的方法,其特征还在于,包括:从码流中获得多视点子块拼接图像的宽度Wp和高度Hp、所述单视点图像的宽度Ws和高度Hs。
5.根据权利4所述的一种处理子块图像的方法,其特征还在于,包括:通过计算,得出m1,m2和m3,m1取log2 Wp、log2 Hp的较大值向上取整后加1的数,m2取log2 Wp、log2 Hp的较大值向上取整后加1的数,m3取log2 Ws,log2 Hs的较大值向上取整后加1的数。
6.一种处理子块图像的装置,其特征在于,包括:
子块图像信息提取模块:其输入为码流,输出为多视点子块拼接图像的其中一个子块图像的信息,包括:宽度信息w、高度信息h、所述子块图像的左上角像素在多视点子块拼接图像中的位置信息(xp,yp)、子块图像的左上角像素在单视点图像中的位置信息(xs,ys)和所述单视点图像的相机参数,其中,w和h各自是m1位二进制数,xp,yp各自是m2位二进制数,xs,ys各自是m3位二进制数;
子块图像信息计算模块:其输入为所述子块图像的信息,输出为子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack)和左上角像素在单视点图像中的位置(x_source,y_source),该模块分别将w、h放大2的T1次方倍,得出该子块图像的宽度width和高度height,width和height为(m1+T1)位的二进制数;分别将xp、yp放大2的T2次方倍,得出该子块图像的左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack),x_pack和y_pack为(m2+T2)位的二进制数;分别将xp、yp放大2的T3次方倍,得出该子块图像的左上角像素在单视点图像中的位置(x_source,y_source),x_source和y_source为(m3+T3)位的二进制数,其中,T1,T2,T3都是大于0的整数;
子块图像提取模块:其输入为多视点子块拼接图像以及所述子块图像的宽度width、高度height、左上角像素在多视点子块拼接图像中的位置(x_pack,y_pack),输出为所述单视点图像中从位置(x_source,y_source)开始的、宽度为width、高度为height的子块图像,该模块从多视点子块拼接图像中提取出该子块图像;
目标图像渲染模块:其输入为所述的单视点图像中的子块图像以及所述的相机参数,输出为目标图像,该模块使用所述的子块图像以及所述的相机参数渲染得到目标图像。
7.根据权利6所述的一种处理子块图像的装置,其特征还在于,包括:所述子块图像信息提取模块中还包括T1,T2和T3获取模块,所述T1,T2和T3获取模块获取T1,T2和T3,其中T1,T2,T3都是大于2的整数。
8.根据权利6所述的一种处理子块图像的装置,其特征还在于,包括:所述的T1等于T2或m1等于m2,m1等于m3。
9.根据权利6所述的一种处理子块图像的装置,其特征还在于,包括:所述子块图像信息提取模块中还包括多视点子块拼接图像信息及单视点图像信息提取模块,该模块从码流中获得多视点子块拼接图像的宽度Wp和高度Hp、所述单视点图像的宽度Ws和高度Hs。
10.根据权利9所述的一种处理子块图像的装置,其特征还在于,包括:
所述子块图像信息提取模块中还包括m1,m2和m3计算模块,所述m1,m2和m3计算模块得出m1,m2和m3,m1取log2 Wp、log2 Hp的较大值向上取整后加1的数,m2取log2 Wp、log2 Hp的较大值向上取整后加1的数,m3取log2 Ws,log2 Hs的较大值向上取整后加1的数。
CN201910602008.8A 2019-07-05 2019-07-05 一种处理子块图像的方法及装置 Active CN112188180B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910602008.8A CN112188180B (zh) 2019-07-05 2019-07-05 一种处理子块图像的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910602008.8A CN112188180B (zh) 2019-07-05 2019-07-05 一种处理子块图像的方法及装置

Publications (2)

Publication Number Publication Date
CN112188180A true CN112188180A (zh) 2021-01-05
CN112188180B CN112188180B (zh) 2022-04-01

Family

ID=73915722

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910602008.8A Active CN112188180B (zh) 2019-07-05 2019-07-05 一种处理子块图像的方法及装置

Country Status (1)

Country Link
CN (1) CN112188180B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113347403A (zh) * 2021-04-19 2021-09-03 浙江大学 一种图像处理方法及装置
WO2023142132A1 (zh) * 2022-01-30 2023-08-03 浙江大学 基于分辨率的解码方法、编码方法、解码器以及编码器
WO2023142127A1 (zh) * 2022-01-30 2023-08-03 浙江大学 编解码方法、装置、设备、及存储介质
WO2024011386A1 (zh) * 2022-07-11 2024-01-18 浙江大学 一种编解码方法、装置、编码器、解码器及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105846828A (zh) * 2016-03-23 2016-08-10 北京裕源大通科技股份有限公司 Iq数据的压缩和解压缩方法、装置和iq数据的传输方法、系统
CN107517385A (zh) * 2016-06-16 2017-12-26 华为技术有限公司 一种视频图像的编解码方法和装置
CN108353179A (zh) * 2015-09-10 2018-07-31 三星电子株式会社 编码设备、解码设备及其编码方法和解码方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108353179A (zh) * 2015-09-10 2018-07-31 三星电子株式会社 编码设备、解码设备及其编码方法和解码方法
CN105846828A (zh) * 2016-03-23 2016-08-10 北京裕源大通科技股份有限公司 Iq数据的压缩和解压缩方法、装置和iq数据的传输方法、系统
CN107517385A (zh) * 2016-06-16 2017-12-26 华为技术有限公司 一种视频图像的编解码方法和装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113347403A (zh) * 2021-04-19 2021-09-03 浙江大学 一种图像处理方法及装置
CN113347403B (zh) * 2021-04-19 2023-10-27 浙江大学 一种图像处理方法及装置
WO2023142132A1 (zh) * 2022-01-30 2023-08-03 浙江大学 基于分辨率的解码方法、编码方法、解码器以及编码器
WO2023142127A1 (zh) * 2022-01-30 2023-08-03 浙江大学 编解码方法、装置、设备、及存储介质
WO2024011386A1 (zh) * 2022-07-11 2024-01-18 浙江大学 一种编解码方法、装置、编码器、解码器及存储介质

Also Published As

Publication number Publication date
CN112188180B (zh) 2022-04-01

Similar Documents

Publication Publication Date Title
CN112188180B (zh) 一种处理子块图像的方法及装置
US10528004B2 (en) Methods and apparatus for full parallax light field display systems
CN106131531B (zh) 视频处理方法和装置
JP5763184B2 (ja) 3次元画像に対する視差の算出
US20190141323A1 (en) Video image encoding method and apparatus, and video image decoding method and apparatus
CN111615715A (zh) 编码/解码体积视频的方法、装置和流
US20080205791A1 (en) Methods and systems for use in 3d video generation, storage and compression
US20150172544A1 (en) Panorama based 3d video coding
CN109314791B (zh) 用于呈现设备的生成流和合成视频的方法、设备和处理器可读介质
WO2021000907A1 (en) Video encoding method with syntax element signaling of guard band configuration of projection-based frame and associated video decoding method and apparatus
CN114007059A (zh) 视频压缩方法、解压方法、装置、电子设备及存储介质
US20150071362A1 (en) Image encoding device, image decoding device, image encoding method, image decoding method and program
CN102026007A (zh) 用于处理视频的方法和系统
CN104904199A (zh) 深度查找表的高效编码方法及装置
CN111492654B (zh) 一种基于立方体的投影方法
CN112806015A (zh) 全向视频的编码和解码
CA2870308A1 (en) View synthesis using low resolution depth maps
WO2021000901A1 (en) Video encoding method with syntax element signaling of packing of projection faces derived from cube-based projection and associated video decoding method and apparatus
WO2021000904A1 (en) Video encoding method with syntax element signaling of mapping function employed by cube-based projection and associated video decoding method
Wang et al. Region-interior painting in contour based depth map coding system
CN116235497A (zh) 一种用于用信号通知基于多平面图像的体积视频的深度的方法和装置
CN102547315B (zh) 立体图像数据压缩方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant