CN105915907A - 全景图的压缩和解压方法、装置及系统 - Google Patents

全景图的压缩和解压方法、装置及系统 Download PDF

Info

Publication number
CN105915907A
CN105915907A CN201610397344.XA CN201610397344A CN105915907A CN 105915907 A CN105915907 A CN 105915907A CN 201610397344 A CN201610397344 A CN 201610397344A CN 105915907 A CN105915907 A CN 105915907A
Authority
CN
China
Prior art keywords
compression
interest
subregion
coefficient
regions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610397344.XA
Other languages
English (en)
Other versions
CN105915907B (zh
Inventor
翁东东
李翔
余兴尧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sweet Technology Co Ltd
Original Assignee
Beijing Sweet Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sweet Technology Co Ltd filed Critical Beijing Sweet Technology Co Ltd
Priority to CN201610397344.XA priority Critical patent/CN105915907B/zh
Publication of CN105915907A publication Critical patent/CN105915907A/zh
Application granted granted Critical
Publication of CN105915907B publication Critical patent/CN105915907B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H04N19/426Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

本申请公开了一种全景图的压缩和解压方法、装置及系统,其通过一种全景图的压缩方法得到压缩图,所述方法包括:将全景图划分为感兴趣区域和非感兴趣区域;对所述非感兴趣区域进行压缩处理;将未压缩的所述感兴趣区域和压缩后的非感兴趣区域合成压缩图。另一方面通过一种压缩图的解压方法获得解压图,所述方法包括提取压缩图中的未压缩的感兴趣区域和压缩的非感兴趣区域;对所述非感兴趣区域进行解压处理;将解压后的非感兴趣区域和感兴趣区域合成为解压图。

Description

全景图的压缩和解压方法、装置及系统
技术领域
本公开一般涉及图像压缩和解压技术领域,尤其涉及全景图的压缩和解压方法、装置及系统。
背景技术
随着高清显示技术的发展,图像的分辨率越来越高,尤其是全景图覆盖了360度的场景,其数据量巨大,对全景图存储和传输造成很大的困难。所以,有必要对全景图进行压缩,以降低存储空间和传输占用的网络资源。
现有的全景技术对所拍摄的球面全景图通常不分巨细地呈现全景相机拍摄到的所有角度画面。这样的全景图不仅数据量大,而且提供了太多用户并不关心的冗余信息。目前已有的压缩方法以提供更快的传输速度、方便用户浏览视频为目的,除了全景图数据外,加入了很多交互用信息。因此占据服务器更大存储空间。
发明内容
鉴于现有技术中的上述缺陷或不足,期望提供一种全景图的压缩和解压方法、装置及系统。
第一方面,提供一种全景图的压缩方法,所述方法包括:
将全景图划分为感兴趣区域和非感兴趣区域;
对所述非感兴趣区域进行压缩处理;
将未压缩的所述感兴趣区域和压缩后的非感兴趣区域合成为压缩图。
第二方面,提供一种压缩图的解压方法,所述方法包括:
提取压缩图中的未压缩的感兴趣区域和压缩的非感兴趣区域;
对所述非感兴趣区域进行解压处理;
将解压后的非感兴趣区域和感兴趣区域合成为解压图。
第三方面,提供一种全景图压缩装置,包括:
全景图划分单元,用于将全景图划分为感兴趣区域和非感兴趣区域;
压缩单元,用于对所述非感兴趣区域进行压缩处理;以及
合成单元,将所述未压缩的感兴趣区域和压缩后的非感兴趣区域合成为压缩图。
第四方面,提供一种压缩图的解压装置,包括:
提取单元,用于提取压缩图中的未压缩的感兴趣区域和压缩的非感兴趣区域;
解压单元,用于对所述非感兴趣区域进行解压处理;
解压合成单元,将解压后的非感兴趣区域和感兴趣区域合成为解压图。
第五方面,提供一种全景图的传输系统,包括:
服务器,包括:
全景图划分单元,用于将全景图划分为感兴趣区域和非感兴趣区域;
压缩单元,用于对所述非感兴趣区域进行压缩处理;以及
合成单元,将所述未压缩的感兴趣区域和压缩后的非感兴趣区域合成为压缩图;
客户端,包括:
提取单元,用于提取压缩图中的未压缩的感兴趣区域和压缩的非感兴趣区域;
解压单元,用于对所述非感兴趣区域进行解压处理;
解压合成单元,将解压后的非感兴趣区域和感兴趣区域合成为解压图。
根据本申请实施例提供的技术方案,通过将未压缩的所述感兴趣区域和压缩后的非感兴趣区域合成为全景压缩图,既减少了全景图的计算量和数据量,又保留感兴趣区域的完整图像信息。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1根据本发明实施例的一种服务器端全景图压缩方法流程图。
图2为根据本发明一实施例的全景图转换的示意图。
图3为根据本发明一实施例的转换后全景图的示意图。
图4为根据本发明一实施例的图3全景图的子区域分布示意图。
图5a为根据本发明一实施例的k阶子区域压缩前示意图。
图5b为根据本发明一实施例的k阶子区域预压缩示意图。
图5c为根据本发明一实施例的k阶子区域压缩后示意图。
图6为根据本发明一实施例的全景压缩图的示意图。
图7为本发明的一种客户端全景压缩图解压方法的流程图。
图8为根据本发明一实施例的一种全景图压缩装置的示意图。
图9为根据本发明一实施例一种全景压缩图的解压装置示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
全景图由于要容纳360°全空间数据,因此占据较大的数据空间。而对其进行适度的像素压缩,能够减少其计算量和数据量,方便储存和传输。
为了便于说明,以本申请应用于传输系统传输全景图为例逐一说明该传输系统、全景图的压缩方法、全景压缩图解压方法、其装置。
本实施例中,该传输系统包括服务器和客户端,服务器端作为全景图压缩装置向客户端提供全景压缩图,客户端作为全景压缩图解压装置解压该全景压缩图展现给客户。原始的全景图可以是服务提供方通过服务器压缩提供给客户,也可以是客户提供原始全景图和压缩要求,请求服务器端进行相应压缩后发送给客户端。
本实施例中的压缩方法,采用对全景图除感兴趣区域以外区域即非感兴趣区域进行渐进压缩的方式,保留全景图感兴趣区域的分辨率,并由感兴趣区域为中心向外逐渐提升压缩系数λ。在客户端收到压缩图并解压后,能够获得感兴趣区域清晰、周围区域模糊程度随距离递增的全景展开图。
请参考图1,给出一种全景图压缩方法的流程图,首先,确定全景图的感兴趣区域和非感兴趣区域(步骤101),感兴趣区域为用户关注区域;其次,对非感兴趣区域进行压缩处理,得到压缩的非感兴趣区域(步骤102);最后,将感兴趣区域和压缩后的非感兴趣区域合成为全景压缩图(步骤103),此全景压缩图就是后续要发送到客户端的图像。
为了压缩的便利,将所述全景图收拢为球面图并沿着经过感兴趣区域中心点经线的对面经线抛开,以获得感兴趣区域为中心的预压缩全景展开图。
请参考图2,其示出了一球面全景图的转换示意图,通过确定感兴趣区域中心点f。根据f点的位置,确定新轴202,使得感兴趣区域中心点f位于转换后全景展开图的中心位置。具体地,将轴线为201经线为203的全景展开图I收拢回球体上,沿着新轴线202和新经线204剖开、展平为全景展开图作为预压缩的图像。其中,感兴趣区域由服务提供方提供或者由用户提供。其中,新经线204经过感兴趣区域中心点f经线的对面经线。
转换后的全景图进入后续的压缩步骤。
请参考图3,其示出了本申请实施例的转换后的全景展开图的示意图。本实施例中的感兴趣区域为矩形区域,m为矩形长度,n为矩形宽度,点f为感兴趣区域中心点。
请参考图4所,给出本发明一实施例的图3全景图的子区域分布示意图。
全景展开图的非感兴趣区域划分为多个子区域;以及对每个所述子区域采用不同压缩系数λ从里环子区域至外环子区域的顺序进行压缩处理,λ为不小于1的数。
本实施例中,非感兴趣区域分为K-1个图像子区域,K根据实际压缩需求来取值,K为不小于1的正整数。,a为全景图的长度,b为全景图的宽度。优选地,非感兴趣区域的纵向余量(b-n)和横向余量(a-m)分别等距离划分为(K-1)个子区域,并以感兴趣区域为中心向外形成(K-1)个环状的图像子区域;对划分的区域由中心向外编号。编号由中心的1阶子区域到最外围的k阶子区域顺序展开。
在一些实施例中,可采用各自不同的多套压缩系数。进一步地,对每个子区域根据距离感兴趣区域的远近确定子区域的压缩系数λ,使得离感兴趣区域越远的子区域的压缩系数λ越大。使用一套或多套子区域的压缩系数λ对所述子区域进行压缩处理,以获得一幅或多幅非感兴趣区域的压缩图;并且所述合成压缩图包括:将未压缩的所述感兴趣区域和所述一幅或多幅非感兴趣区域的压缩图分别合成,以生成一幅或多幅压缩图。
本实施例中,子区域的压缩采用从里环的2阶子区域至k阶子区域的顺序进行压缩。
下面以k阶子区域为例说明具体压缩方法,k阶子区域的压缩系数定为λ。
请参考图5a和5b,分别给出本发明一实施例的k阶子区域压缩前和预压缩后示意图。
将k阶子区域以井字划分法,划分成8个分片,并编号为1、2、3、4、6、7、8、9,编号5(未标出)为k阶子区域的中心部位,图中相当于的未压缩前的1至k-1阶子区域。图5a中为了便于表示和说明,省略了1至k-2阶子区域。划分分片后,对每个分片采用双线插值算法进行预压缩处理和λ系数压缩处理。
其中,预压缩使得当前子区域的内边缘无缝贴合至经λ系数压缩处理的当前子区域的紧邻子区域的外边缘。
如图5a所示,5号区域尺寸为g×h,分别为压缩前k-1阶子区域外围长度与宽度。由于k-1阶子区域经压缩后,外围尺寸变为g’×h’,g’和h’分别小于g和h,从而在k阶子区域和k-1阶子区域之间形成矩形环区域,图中为涂黑区域。预压缩处理即是将k阶子区域内边缘贴合至k-1阶子区域的外边缘,这个步骤与压缩系数λ无关。
具体地,对于正上方的分片2,预压缩前其长度尺寸为g,宽度尺寸为预压缩后长度尺寸为g’,宽度不变。预压缩时,以原尺寸(g,)和新尺寸(g’,)为输入,即可对分片2的图像进行双线性插值,得到如图5b中对应的预压缩后的分片2。分片8的预压缩方式类似。
对于正左方分片4,预压缩前其长度尺寸为宽度尺寸为h,预压缩后长度不变,宽度度尺寸为h’。预压缩时,以原尺寸(h)和新尺寸(h’)为输入,即可对分片4的图像进行双线性插值,得到如图5b中对应的预压缩后的分片4。分片6的预压缩方式类似。
对于边角的分片1、3、7、9只进行平移操作,尺寸保持不变都是
经过上述处理后,如图5b所示k阶子区域内边缘和k-1阶子区域外边缘完美贴合。
预压缩后,正式依据λ系数对每个分片进行压缩处理。该部分请参考图5b和图5c。
由于k-1阶子区域已经压缩完毕,尺寸g’×h’为固定尺寸。
对正上方分片2,压缩前尺寸为压缩后尺寸为其中数值除不尽的情况,只取结果中的商,舍弃余数。以原尺寸(g’,)和新尺寸(g’,)为输入,即可对分片2的图像进行双线性插值,得到如图5c中对应的预压缩后的分片2。分片8的压缩方式类似。
对正左方分片4,压缩前尺寸为压缩后尺寸为其中数值除不尽的情况,只取结果中的商,舍弃余数。以原尺寸(h’)和新尺寸(h’)为输入,即可对分片4的图像进行双线性插值,得到如图5c中对应的预压缩后的分片4。分片6的压缩方式类似。
对左上角分片1,压缩前尺寸为压缩后尺寸为 其中数值除不尽的情况,只取结果中的商,舍弃余数。以原尺寸 和新尺寸为输入,即可对分片1的图像进行双线性插值,得到如图5c中对应的预压缩后的分片1。分片3、7、9的压缩方式类似。
经过上述处理后,得到如图5c所示的k阶子区域的压缩图。同理其他子区域经上述的分片划分、预压缩、λ系数压缩处理后,得到非感兴趣区域的压缩图。显然,与感兴趣区域贴合的2阶子区域可不经过预压缩处理。
将未压缩的所述感兴趣区域和上述非感兴趣区域的压缩图合成,以生成全景压缩图。
请参考图6,给出本发明一实施例的全景压缩图的示意图。。本实施例中,全景压缩图的特点是非感兴趣区域的压缩比分布不均匀,具体地,在一个子区域中边角4个分片的压缩比大于该子区域其他分片的压缩比,使得感兴趣中心区域图像清晰度高于边角区域。
服务器将该全景压缩图传输到客户端,客户端需要对全景压缩图进行解压,请参考图7,本实施例的解压方法如下.
首先,提取压缩图中的未压缩的感兴趣区域和压缩的非感兴趣区域(步骤701);
其次,对非感兴趣区域进行解压处理(步骤702);
最后,将解压后的非感兴趣区域和感兴趣区域合成为全景解压图(步骤703)。
本实施例中,客户端接收的压缩图信息中包含该压缩图的压缩参数,通过该压缩参数可以确定非感兴趣区域的子区域的数量、位置和大小,以及每个子区域的压缩系数,根据确定的子区域的压缩系数对相应的子区域进行解压缩处理。
进一步,根据子区域的压缩系数,客户端确定子区域的分片尺寸,对每个分片采用逆向的双线插值算法,将压缩图像扩展至压缩前尺寸,得到解压后的子区域压缩图。每个子区域经上述解压后,获得全景解压图。
另一方面,本发明的实施例还提供了全景图压缩装置和解压装置的实现方案。请参考图8。
如图8所示的全景图压缩装置包括:全景图划分单元801,用于划分感兴趣区域和非感兴趣区域;压缩单元802,用于对感兴趣区域以外的区域进行压缩处理;合成单元803,将感兴趣区域和压缩后的其他区域合成为全景压缩图。
压缩单元802对图像做轴线的经线的转换,获得以感兴趣区域为中心的预压缩图像。压缩单元802还包括非感兴趣区域划分单元、子区域压缩单元。非感兴趣区域划分单元,用于将非感兴趣区域划分为多个子区域;子区域压缩单元,用于对子区域采用不同压缩系数进行压缩处理。
压缩单元在对所述非感兴趣区域进行压缩处理之前,所述压缩单元用于将所述全景图收拢为球面图并沿着经过感兴趣区域中心点经线的对面经线抛开,以获得感兴趣区域为中心的预压缩全景展开图。详见图2的说明部分。
在一些实施例中,压缩单元包括非感兴趣区域划分单元和子区域压缩单元。非感兴趣区域划分单元,用于将所述非感兴趣区域划分为多个子区域;以及子区域压缩单元,用于对所述子区域采用不同压缩系数λ从里环子区域至外环子区域的顺序进行压缩处理,λ为不小于1的数。子区域压缩单元包括压缩系数分配单元和分片压缩单元。其中,压缩系数分配单元,用于对每个子区域根据距离感兴趣区域的远近确定子区域的压缩系数,使得离感兴趣区域越远的子区域的压缩系数越大。另外,压缩系数分配单元,还用于确定一套或多套子区域的压缩系数,其中每套子区域压缩系数的压缩尺度不同。分片压缩单元,用于将划分子区域分割成至少一个分片,计算每个分片中所有像素点的平均值,将一个分片压缩成一个新像素点,将该平均值赋予分片以作为一个新像素点。分片压缩单元,用于以井字划分法,划分为8个分片;以及对每个分片采用双线插值算法进行预压缩处理和λ系数压缩处理。
在一些实施例中,分片压缩单元还包括分片预压缩单元和分片λ系数压缩单元。分片预压缩单元,采用双线插值算法使得当前子区域的内边缘无缝贴合至当前子区域的经λ系数压缩处理的紧邻子区域外边缘。分片λ系数压缩单元,用于对穿过全景图左右对称线的分片进行纵向的λ系数压缩处理,使得压缩后的纵向尺寸为压缩前的纵向尺寸的1/λ,横向尺寸无变化;用于对穿过全景图上下对称线的分片进行横向的λ系数压缩处理,使得压缩后的横向尺寸为压缩前的横向尺寸的1/λ,横向尺寸无变化,纵向尺寸无变化;以及对位于子区域边角的分片分别进行横向和纵向λ系数压缩处理,使得压缩后的纵向尺寸和横向尺寸分别为压缩前的纵向尺寸横向尺寸的1/λ。
本实施例中,又提供了与该全景图压缩装置对应的解压装置,请参考图9,其包括:提取单元901,用于提取压缩图中未压缩的感兴趣区域和压缩的非感兴趣区域;解压单元902,用于对非感兴趣区域进行解压处理;解压合成单元903,将解压后的非感兴趣区域和感兴趣区域合成为全景解压图。
该解压单元包括确定压缩信息单元和子区域解压单元。该确定压缩信息单元,用于确定非感兴趣区域的子区域数量和各子区域的压缩系数;子区域解压单元,利用确定压缩信息单元所确定的子区域的压缩系数对相应的子区域进行解压缩处理。
该子区域解压单元包括分片解压单元,该分片解压单元,根据压缩系数确定子区域的分片尺寸,对每个分片采用逆向的双线插值算法,将压缩图像扩展至压缩前尺寸。具体地,分片解压单元确定子区域的分片位置和大小,以便确定分片压缩前的尺寸;然后采用逆向的双线插值算法增加分片像素点,使得分片的像素点恢复到压缩前的数量。每个子区域经上述解压后得到解压后的全景图。
本申请还提供一种图像的传输系统,包括:
服务器,包括:
全景图划分单元,用于将全景图划分为感兴趣区域和非感兴趣区域;
压缩单元,用于对所述非感兴趣区域进行压缩处理;以及
合成单元,将所述未压缩的感兴趣区域和压缩后的非感兴趣区域合成为压缩图;
客户端,包括:
提取单元,用于提取压缩图中的未压缩的感兴趣区域和压缩的非感兴趣区域;
解压单元,用于对所述非感兴趣区域进行解压处理;
解压合成单元,将解压后的非感兴趣区域和感兴趣区域合成为解压图。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离所述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (23)

1.一种全景图的压缩方法,其特征在于,所述方法包括:
将全景图划分为感兴趣区域和非感兴趣区域;
对所述非感兴趣区域进行压缩处理;
将未压缩的所述感兴趣区域和压缩后的非感兴趣区域合成压缩图。
2.根据权利要求1所述的方法,其特征在于,对所述非感兴趣区域进行压缩处理之前,所述方法还包括:
将所述全景图收拢为球面图并沿着经过感兴趣区域中心点经线的对面经线抛开,以获得感兴趣区域为中心的预压缩全景展开图。
3.根据权利要求2所述的方法,其特征在于,所述对所述非感兴趣区域进行压缩处理包括:
将所述非感兴趣区域划分为多个子区域;以及
对每个所述子区域采用不同压缩系数λ从里环子区域至外环子区域的顺序进行压缩处理,λ为不小于1的数。
4.根据权利要求3所述的方法,其特征在于,所述对每个所述子区域采用不同压缩系数λ从里环子区域至外环子区域的顺序进行压缩处理,λ为不小于1的数包括:
对每个子区域根据距离感兴趣区域的远近确定子区域的压缩系数λ,使得离感兴趣区域越远的子区域的压缩系数λ越大。
5.根据权利要求4所述的方法,其特征在于,所述对每个所述子区域采用不同压缩系数λ从里环子区域至外环子区域的顺序进行压缩处理,λ为不小于1的数还包括:
确定一套或多套子区域的压缩系数λ,其中每套子区域的压缩系数λ的压缩尺度不同;
使用所述一套或多套子区域的压缩系数λ对所述子区域进行压缩处理,以获得一幅或多幅非感兴趣区域的压缩图;并且
所述合成压缩图包括:将未压缩的所述感兴趣区域和所述一幅或多幅非感兴趣区域的压缩图分别合成,以生成一幅或多幅压缩图。
6.根据权利要求1至5任意一项所述的方法,其特征在于,所述对每个所述子区域采用不同压缩系数λ从里环子区域至外环子区域的顺序进行压缩处理,λ为不小于1的数包括:
每个子区域以井字划分法,划分为8个分片;
对每个分片采用双线插值算法进行预压缩处理和λ系数压缩处理。
7.根据权利要求6所述的方法,其特征在于,所述预压缩处理包括:
采用双线插值算法使得当前子区域的内边缘无缝贴合至经λ系数压缩处理的当前子区域的紧邻子区域外边缘。
8.根据权利要求6所述的方法,其特征在于,所述λ系数压缩处理包括:
对穿过全景图左右对称线的分片进行纵向的λ系数压缩处理,使得压缩后的宽度尺寸为压缩前的宽度尺寸的1/λ,长度尺寸不变;
对穿过全景图上下对称线的分片进行横向的λ系数压缩处理,使得压缩后的长度尺寸为压缩前的长度尺寸的1/λ,宽度尺寸不变;以及
对位于子区域边角的分片分别进行纵向和横向λ系数压缩处理,使得压缩后的宽度尺寸和长度尺寸分别为压缩前的宽度尺寸长度尺寸的1/λ。
9.一种压缩图的解压方法,其特征在于,所述方法包括:
提取压缩图中的未压缩的感兴趣区域和压缩的非感兴趣区域;
对所述非感兴趣区域进行解压处理;
将解压后的非感兴趣区域和感兴趣区域合成为解压图。
10.根据权利要求9的方法,其特征在于,对所述非感兴趣区域进行解压处理包括:
确定非感兴趣区域的子区域数量和各子区域的压缩系数λ;以及
利用所确定的子区域的压缩系数λ对相应的子区域进行解压缩处理。
11.根据权利要求10的方法,其特征在于,利用所确定的子区域的压缩系数λ对相应的子区域进行解压处理包括:
根据所述压缩系数λ确定所述子区域的分片尺寸;以及
对每个分片采用逆向的双线插值算法,将压缩图像扩展至压缩前尺寸。
12.一种全景图压缩装置,其特征在于,包括:
全景图划分单元,用于将全景图划分为感兴趣区域和非感兴趣区域;
压缩单元,用于对所述非感兴趣区域进行压缩处理;以及
合成单元,将所述未压缩的感兴趣区域和压缩后的非感兴趣区域合成为压缩图。
13.根据权利要求12所述的压缩装置,其特征在于,所述压缩单元在对所述非感兴趣区域进行压缩处理之前,所述压缩单元还用于:
将所述全景图收拢为球面图并沿着经过感兴趣区域中心点经线的对面经线抛开,以获得感兴趣区域为中心的预压缩全景展开图。
14.根据权利要求13所述的压缩装置,其特征在于,所述压缩单元包括:
非感兴趣区域划分单元,用于将所述非感兴趣区域划分为多个子区域;以及
子区域压缩单元,用于对所述子区域采用不同压缩系数λ从里环子区域至外环子区域的顺序进行压缩处理,λ为不小于1的数。
15.根据权利要求14所述的压缩装置,其特征在于,所述子区域压缩单元包括:
压缩系数分配单元,用于对每个子区域根据距离感兴趣区域的远近确定子区域的压缩系数λ,使得离感兴趣区域越远的子区域的压缩系数λ越大。
16.根据权利要求15所述的压缩装置,所述压缩系数分配单元还用于:
确定一套或多套子区域的压缩系数λ,其中每套子区域的压缩系数λ的压缩尺度不同,λ为不小于1的数;
使用所述一套或多套子区域的压缩系数λ对所述子区域进行压缩处理,以获得一幅或多幅非感兴趣区域的压缩图;并且
所述合成压缩图包括:将未压缩的所述感兴趣区域和所述一幅或多幅非感兴趣区域的压缩图分别合成,以生成一幅或多幅压缩图。
17.根据权利要求12至16任意一项所述的压缩装置,其特征在于,所述子区域压缩单元还包括:
分片压缩单元,用于以井字划分法,划分为8个分片;以及
对每个分片采用双线插值算法进行预压缩处理和λ系数压缩处理。
18.根据权利要求17所述的压缩装置,其特征在于,所述分片压缩单元还包括:
分片预压缩单元,采用双线插值算法使得当前子区域的内边缘无缝贴合至经λ系数压缩处理的当前子区域的紧邻子区域外边缘。
19.根据权利要求17所述的压缩装置,其特征在于,所述分片压缩单元还包括:
分片λ系数压缩单元,用于对穿过全景图左右对称线的分片进行纵向的λ系数压缩处理,使得压缩后的纵向尺寸为压缩前的纵向尺寸的1/λ,横向尺寸无变化;
所述分片λ系数压缩单元,用于对穿过全景图上下对称线的分片进行横向的λ系数压缩处理,使得压缩后的横向尺寸为压缩前的横向尺寸的1/λ,横向尺寸无变化,纵向尺寸无变化;以及
所述分片λ系数压缩单元,对位于子区域边角的分片分别进行横向和纵向λ系数压缩处理,使得压缩后的纵向尺寸和横向尺寸分别为压缩前的纵向尺寸横向尺寸的1/λ。
20.一种压缩图的解压装置,其特征在于,包括:
提取单元,用于提取压缩图中的未压缩的感兴趣区域和压缩的非感兴趣区域;
解压单元,用于对所述非感兴趣区域进行解压处理;
解压合成单元,将解压后的非感兴趣区域和感兴趣区域合成为解压图。
21.根据权利要求20的解压装置,其特征在于,所述解压单元包括:
确定压缩信息单元,用于确定非感兴趣区域的子区域数量和各子区域的压缩系数λ;
子区域解压单元,利用所述确定压缩信息单元所确定的子区域的压缩系数λ对相应的子区域进行解压缩处理。
22.根据权利要求21的解压装置,其特征在于,所述子区域解压单元包括:
分片解压单元,用于根据所述压缩系数λ确定所述子区域的分片尺寸;以及
分片解压单元,对每个分片采用逆向的双线插值算法,将压缩图像扩展至压缩前尺寸。
23.一种全景图的传输系统,包括:
服务器,包括:
全景图划分单元,用于将全景图划分为感兴趣区域和非感兴趣区域;
压缩单元,用于对所述非感兴趣区域进行压缩处理;以及
合成单元,将所述未压缩的感兴趣区域和压缩后的非感兴趣区域合成为压缩图;
客户端,包括:
提取单元,用于提取压缩图中的未压缩的感兴趣区域和压缩的非感兴趣区域;
解压单元,用于对所述非感兴趣区域进行解压处理;
解压合成单元,将解压后的非感兴趣区域和感兴趣区域合成为解压图。
CN201610397344.XA 2016-06-07 2016-06-07 全景图的压缩方法、装置及系统 Active CN105915907B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610397344.XA CN105915907B (zh) 2016-06-07 2016-06-07 全景图的压缩方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610397344.XA CN105915907B (zh) 2016-06-07 2016-06-07 全景图的压缩方法、装置及系统

Publications (2)

Publication Number Publication Date
CN105915907A true CN105915907A (zh) 2016-08-31
CN105915907B CN105915907B (zh) 2019-07-26

Family

ID=56750315

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610397344.XA Active CN105915907B (zh) 2016-06-07 2016-06-07 全景图的压缩方法、装置及系统

Country Status (1)

Country Link
CN (1) CN105915907B (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106651764A (zh) * 2016-12-29 2017-05-10 北京奇艺世纪科技有限公司 一种全景图压缩方法及装置
CN106875331A (zh) * 2017-01-19 2017-06-20 北京大学深圳研究生院 一种全景图像的非对称映射方法
CN106920501A (zh) * 2017-05-12 2017-07-04 京东方科技集团股份有限公司 显示装置及其驱动方法和驱动电路
CN106935224A (zh) * 2017-05-12 2017-07-07 京东方科技集团股份有限公司 显示装置及其驱动方法和驱动电路
CN107146274A (zh) * 2017-05-05 2017-09-08 上海兆芯集成电路有限公司 图像数据处理系统、纹理贴图压缩和产生全景视频的方法
CN107767808A (zh) * 2017-11-13 2018-03-06 北京京东方光电科技有限公司 一种显示面板的驱动方法、显示驱动电路及显示装置
WO2018072487A1 (zh) * 2016-10-21 2018-04-26 北京大学深圳研究生院 全景视频感兴趣区域的描述方法和编码方法
WO2018184528A1 (en) * 2017-04-05 2018-10-11 Mediatek Inc. Method and apparatus for processing projection-based frame with at least one projection face generated using non-uniform mapping
WO2019062714A1 (en) * 2017-09-27 2019-04-04 Mediatek Inc. PROJECTION-BASED FRAME PROCESSING METHOD COMPRISING AT LEAST ONE CONDITIONED PROJECTION FACE IN A 360 DEGREE VIRTUAL REALITY PROJECTION LAYOUT
CN110115037A (zh) * 2016-12-23 2019-08-09 苹果公司 球面投影运动估计/补偿和模式决策
CN110983914A (zh) * 2019-12-19 2020-04-10 徐工集团工程机械股份有限公司道路机械分公司 一种具有全景贴边压实系统的压路机
CN111768459A (zh) * 2020-06-28 2020-10-13 百度在线网络技术(北京)有限公司 图像处理方法、装置、电子设备及存储介质
US11004173B2 (en) 2017-03-13 2021-05-11 Mediatek Inc. Method for processing projection-based frame that includes at least one projection face packed in 360-degree virtual reality projection layout
US11057643B2 (en) 2017-03-13 2021-07-06 Mediatek Inc. Method and apparatus for generating and encoding projection-based frame that includes at least one padding region and at least one projection face packed in 360-degree virtual reality projection layout
US11494870B2 (en) 2017-08-18 2022-11-08 Mediatek Inc. Method and apparatus for reducing artifacts in projection-based frame

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130083153A1 (en) * 2011-09-30 2013-04-04 Polycom, Inc. Background Compression and Resolution Enhancement Technique for Video Telephony and Video Conferencing
CN103188419A (zh) * 2011-12-31 2013-07-03 北大方正集团有限公司 一种图像压缩方法及其装置
JP2014197806A (ja) * 2013-03-29 2014-10-16 富士フイルム株式会社 画像圧縮装置および画像伸張装置,ならびにこれらの動作制御方法
CN105631809A (zh) * 2015-12-31 2016-06-01 北京理工大学 一种非均匀分辨率球面全景图生成方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130083153A1 (en) * 2011-09-30 2013-04-04 Polycom, Inc. Background Compression and Resolution Enhancement Technique for Video Telephony and Video Conferencing
CN103188419A (zh) * 2011-12-31 2013-07-03 北大方正集团有限公司 一种图像压缩方法及其装置
JP2014197806A (ja) * 2013-03-29 2014-10-16 富士フイルム株式会社 画像圧縮装置および画像伸張装置,ならびにこれらの動作制御方法
CN105631809A (zh) * 2015-12-31 2016-06-01 北京理工大学 一种非均匀分辨率球面全景图生成方法

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10681355B2 (en) 2016-10-21 2020-06-09 Peking University Shenzhen Graduate School Describing method and coding method of panoramic video ROIs
WO2018072487A1 (zh) * 2016-10-21 2018-04-26 北京大学深圳研究生院 全景视频感兴趣区域的描述方法和编码方法
US11818394B2 (en) 2016-12-23 2023-11-14 Apple Inc. Sphere projected motion estimation/compensation and mode decision
CN110115037A (zh) * 2016-12-23 2019-08-09 苹果公司 球面投影运动估计/补偿和模式决策
US10812833B2 (en) 2016-12-29 2020-10-20 Beijing Qiyi Century Science & Technology Co., Ltd. Panoramic image compression method and apparatus
WO2018120888A1 (zh) * 2016-12-29 2018-07-05 北京奇艺世纪科技有限公司 一种全景图压缩方法及装置
CN106651764A (zh) * 2016-12-29 2017-05-10 北京奇艺世纪科技有限公司 一种全景图压缩方法及装置
CN106651764B (zh) * 2016-12-29 2019-10-15 北京奇艺世纪科技有限公司 一种全景图压缩方法及装置
CN106875331A (zh) * 2017-01-19 2017-06-20 北京大学深圳研究生院 一种全景图像的非对称映射方法
WO2018133381A1 (zh) * 2017-01-19 2018-07-26 北京大学深圳研究生院 一种全景图像的非对称映射方法
CN106875331B (zh) * 2017-01-19 2019-04-12 北京大学深圳研究生院 一种全景图像的非对称映射方法
US11057643B2 (en) 2017-03-13 2021-07-06 Mediatek Inc. Method and apparatus for generating and encoding projection-based frame that includes at least one padding region and at least one projection face packed in 360-degree virtual reality projection layout
US11004173B2 (en) 2017-03-13 2021-05-11 Mediatek Inc. Method for processing projection-based frame that includes at least one projection face packed in 360-degree virtual reality projection layout
US10356386B2 (en) 2017-04-05 2019-07-16 Mediatek Inc. Method and apparatus for processing projection-based frame with at least one projection face generated using non-uniform mapping
WO2018184528A1 (en) * 2017-04-05 2018-10-11 Mediatek Inc. Method and apparatus for processing projection-based frame with at least one projection face generated using non-uniform mapping
CN110506291B (zh) * 2017-04-05 2021-05-14 联发科技股份有限公司 一种视频处理方法和装置
GB2573951A (en) * 2017-04-05 2019-11-20 Mediatek Inc Method and apparatus for processing projection-based frame with at least one projection face generated using non-uniform mapping
CN110506291A (zh) * 2017-04-05 2019-11-26 联发科技股份有限公司 处理具有使用非均匀映射生成的至少一个投影面的基于投影的帧的方法和装置
CN107146274A (zh) * 2017-05-05 2017-09-08 上海兆芯集成电路有限公司 图像数据处理系统、纹理贴图压缩和产生全景视频的方法
CN106935224A (zh) * 2017-05-12 2017-07-07 京东方科技集团股份有限公司 显示装置及其驱动方法和驱动电路
CN106920501B (zh) * 2017-05-12 2019-07-09 京东方科技集团股份有限公司 显示装置及其驱动方法和驱动电路
US11404031B2 (en) 2017-05-12 2022-08-02 Boe Technology Group Co., Ltd. Display control device, display control method, and display system
CN106920501A (zh) * 2017-05-12 2017-07-04 京东方科技集团股份有限公司 显示装置及其驱动方法和驱动电路
US11494870B2 (en) 2017-08-18 2022-11-08 Mediatek Inc. Method and apparatus for reducing artifacts in projection-based frame
WO2019062714A1 (en) * 2017-09-27 2019-04-04 Mediatek Inc. PROJECTION-BASED FRAME PROCESSING METHOD COMPRISING AT LEAST ONE CONDITIONED PROJECTION FACE IN A 360 DEGREE VIRTUAL REALITY PROJECTION LAYOUT
CN107767808B (zh) * 2017-11-13 2020-09-08 北京京东方光电科技有限公司 一种显示面板的驱动方法、显示驱动电路及显示装置
CN107767808A (zh) * 2017-11-13 2018-03-06 北京京东方光电科技有限公司 一种显示面板的驱动方法、显示驱动电路及显示装置
WO2019091193A1 (zh) * 2017-11-13 2019-05-16 京东方科技集团股份有限公司 显示面板的驱动方法、显示驱动电路及显示装置
US11176864B2 (en) * 2017-11-13 2021-11-16 Beijing Boe Optoelectronics Technology Co., Ltd. Method for driving a display panel, display drive circuit and display device
CN110983914A (zh) * 2019-12-19 2020-04-10 徐工集团工程机械股份有限公司道路机械分公司 一种具有全景贴边压实系统的压路机
CN111768459A (zh) * 2020-06-28 2020-10-13 百度在线网络技术(北京)有限公司 图像处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN105915907B (zh) 2019-07-26

Similar Documents

Publication Publication Date Title
CN105915907A (zh) 全景图的压缩和解压方法、装置及系统
CN106331850B (zh) 浏览器直播客户端、浏览器直播系统及浏览器直播方法
US10404961B2 (en) Auxiliary data for artifacts—aware view synthesis
CN110599533B (zh) 适用于嵌入式平台的快速单目深度估计方法
KR101253283B1 (ko) 고해상도 영상 재구성 방법 및 시스템
US20100134494A1 (en) Remote shading-based 3d streaming apparatus and method
JP2019067078A (ja) 画像処理方法、及び画像処理プログラム
CN108063946B (zh) 图像编码方法和装置、存储介质及电子装置
CN111669564B (zh) 图像重建方法、系统、设备及计算机可读存储介质
KR102327972B1 (ko) 프로젝션 이미지 구성 방법 및 디바이스
WO2010149842A1 (en) Methods and apparatuses for facilitating generation and editing of multiframe images
KR20070009174A (ko) 이미지 분리 합성 장치 및 방법, 그리고 그것을 이용한이미지 검색방법
TW200929066A (en) Geospatial data system for selectively retrieving and displaying geospatial texture data in successive additive layers of resolution and related methods
CN105933707B (zh) 一种全景视频的压缩方法及装置
KR101982436B1 (ko) 결합 정보를 포함하는 영상 데이터에 대한 디코딩 방법 및 결합 정보를 포함하는 영상 데이터를 인코딩 하는 방법
DE102019215387A1 (de) Zirkularfischaugenkameraarrayberichtigung
CN114004927A (zh) 3d视频模型重建方法、装置、电子设备及存储介质
CN112270755A (zh) 三维场景构建方法、装置、存储介质与电子设备
US20040041816A1 (en) High-dimensional texture drawing apparatus, high-dimensional texture compressing apparatus, high-dimensional texture drawing system, high-dimensional texture drawing method, and high-dimensional texture drawing program
CN108282664A (zh) 图像处理方法、装置、系统及计算机可读存储介质
CN111489323A (zh) 双光场图像融合方法、装置、设备及可读存储介质
CN107564084A (zh) 一种动图合成方法、装置及存储设备
JP5906165B2 (ja) 仮想視点画像合成装置、仮想視点画像合成方法及び仮想視点画像合成プログラム
CN104463790B (zh) 一种图像处理的方法、装置和系统
JP2022513487A (ja) 没入型ビデオビットストリーム処理

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB03 Change of inventor or designer information

Inventor after: Weng Dongdong

Inventor after: Li Xiang

Inventor after: Yu Xingyao

Inventor before: Weng Dongdong

Inventor before: Li Xiang

Inventor before: Yu Xingyao

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant