CN110572569A - 全景图像生成方法及其文件存储格式和浏览方法 - Google Patents

全景图像生成方法及其文件存储格式和浏览方法 Download PDF

Info

Publication number
CN110572569A
CN110572569A CN201910811120.2A CN201910811120A CN110572569A CN 110572569 A CN110572569 A CN 110572569A CN 201910811120 A CN201910811120 A CN 201910811120A CN 110572569 A CN110572569 A CN 110572569A
Authority
CN
China
Prior art keywords
image
panoramic image
panoramic
grid
file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910811120.2A
Other languages
English (en)
Inventor
陈作平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Macaudi (xiamen) Medical Big Data Co Ltd
Mcaudi (xiamen) Medical Diagnosis System Co Ltd
Original Assignee
Macaudi (xiamen) Medical Big Data Co Ltd
Mcaudi (xiamen) Medical Diagnosis System Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Macaudi (xiamen) Medical Big Data Co Ltd, Mcaudi (xiamen) Medical Diagnosis System Co Ltd filed Critical Macaudi (xiamen) Medical Big Data Co Ltd
Priority to CN201910811120.2A priority Critical patent/CN110572569A/zh
Publication of CN110572569A publication Critical patent/CN110572569A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)

Abstract

本申请公开了一种全景图像生成方法,其包括下列步骤:(a)获取区域图像,并存储区域图像金字塔;(b)获取所述区域图像的边缘子区域图像,并计算局部拼接信息;(c)重复所述步骤(a)至所述步骤(b),获取复数个局部拼接信息;(d)根据所述复数个局部拼接信息计算各个所述区域图像在所述全景图像中的位置;(e)由所述区域图像位置和所述区域图像生成所述全景图像的低分辨率版本;(f)将所述全景图像的低分辨率版本切割为网格图像,并存储网格图像金字塔。本申请还公开了一种全景图像文件存储格式。

Description

全景图像生成方法及其文件存储格式和浏览方法
技术领域
本申请涉及全景图像存储领域,特别涉及一种全景图像生成方法及其文件存储格式和浏览方法。
背景技术
在数字成像设备中,成像区域的尺寸受制于图像传感器的面积、图像的成像质量、镜头的视角和放大倍率等,一般都比较小,因而单次成像只能得到针对某个局部范围的区域图像。由这些小的区域图像拼接而成的全景图像可以提供感兴趣区域的全貌,而得到了越来越多的应用。最典型的应用之一来自于数字病理领域:为了将病理医生等相关阅片人员从沉重的镜下阅片工作中解脱出来,需要将传统的物理切片用数字切片扫描仪将其数字化,即,通过扫描仪中的数字成像设备对切片上的感兴趣区域(如病理组织区域)进行成像,从而转化为数字切片(Digital Slide,DS)。由于前述原因,数字成像设备每次只能得到很小区域上的图像(即,视野图像),因而数字切片往往是由在构成感兴趣区域的成百上千个小区域上拍摄的视野图像组合(拼接)而成的全景图像,也称为全切片图像。
由于全景图像是(由区域图像)合成(而来的)图像,空间分辨率一般很高,无法将其存储成单一一个常规的图像格式文件,比如BMP、JPG、PGN等等,而目前业界也没有标准的存储格式,因此需要将其存储为自定义格式。相应地,它们的浏览也需要借助特定相适配的软件(全景浏览软件)来进行。
如前所述,全景图像是由成像设备按时间先后顺序依次在不同的区域上采集到的区域图像拼接而成,因此只有取得了最后一个区域图像才有可能完成整个全景图像的存储。由于无法将全景图像存储为单一图像,需要将全景图像划分为较小的单元图像(UnitImage)进行存储。而为了尽快得到全景图像,需要将采集到的图像数据尽量早地进行存储。同时,为了方便后续的图像浏览,往往会生成多种分辨率图像并进行存储(即,存储图像金字塔)。因此,现有全景图像生成技术都是以边采集、边拼接、边切割、边存储的方法进行,正如图1所示。由此带来的问题是,(a)一般情形下,至少需要存储两行(列)区域图像,因此内存空间要求较高;(b)由于需要边采集边切割,需要的计算资源要求较高;(c)为了得到网格图像,需要图像集是可拼接的,因此全景图像的生成速度与感兴趣区域的连通程度有关。在如图3所示的极限情况下,要等到最后一个区域图像获得后才能判断所有的图像是否可拼接,然后再进行拼接、融合、切割和存储,这极大地延迟了全景图像的生成时间。
发明内容
有鉴于上述现有技术中存在的缺点,本申请的目的在于提供全景图像生成方法及其存储格式,以使得全景图像的生成更加快速,并消耗更少的资源,从而使全景图像能得到更好的应用。
为实现上述目的,本申请提供如下技术方案:
一种全景图像生成方法,包括下列步骤:
(a)获取区域图像,并存储区域图像金字塔;
(b)获取所述区域图像的边缘子区域图像,并计算局部拼接信息;
(c)重复所述步骤(a)至所述步骤(b),获取复数个局部拼接信息;
(d)根据所述复数个局部拼接信息计算各个所述区域图像在所述全景图像中的位置;
(e)由所述区域图像位置和所述区域图像生成所述全景图像的低分辨率版本;
(f)将所述全景图像的低分辨率版本切割为网格图像,并存储网格图像金字塔。
进一步的,所述步骤(b)包括以下子步骤:获取所述区域图像的边缘子区域图像后,删除所述区域图像。
进一步的,所述步骤(b)包括以下子步骤:所述计算局部拼接信息后,将所述边缘子区域图像删除。
进一步的,所述区域图像金字塔包括区域图像金字塔最低分辨率层图像;所述步骤(e)中包括以下子步骤:根据所述区域图像金字塔最低分辨率层图像生成更低一层分辨率的区域图像。
进一步的,所述步骤(e)中包括以下子步骤:根据所述区域图像计算出所述区域图像金字塔最低分辨率层图像的更低一层分辨率的区域图像的位置。
进一步的,所述步骤(e)包括以下子步骤:由所述更低一层分辨率的区域图像及其位置生成所述全景图像的低分辨率版本。
进一步的,由所述全景图像的低分辨率版生成全景图像缩略图。
本申请还公开了一种全景图像文件存储格式,所述全景图像文件存储格式包括文件头和数据区,具有所述存储格式的全景图像文件的生成过程包括以下步骤:
(1)计算所述文件头的大小F0,并生成初始大小为F0的文件;其中,所述文件头的大小F0根据区域图像的尺寸Dr、数目Nr、分辨率数目(即金字塔层数)Lr、预设的网格图像数目Ng、尺寸Dg、分辨率数目Lg、预留的缩略图压缩编码图像所需存储空间大小等这些信息得出:
F0=sizeof(Dr)+sizeof(Nr)+sizeof(Lr)+sizeof(Dg)+sizeof(Ng)+sizeof(Lg)+预留存储缩略图压缩编码图像空间大小(以字节为单位)。
其中,sizeof(x)是计算机编程语言中存储数据对象x所需要的存储量,以字节为单位。
(2)所述区域图像的处理:
a)在所述数据区部写入区域图像金字塔的压缩编码数据块,并记录所述压缩编码数据块的大小及其在所述文件中的存储位置;其中,所述存储位置为所述区域图像金字塔的压缩编码数据块在所述文件中的起始位置;
b)截取所述区域图像的边缘子区域图像,然后删除所述区域图像;
c)与已采集过的相邻的区域图像的边缘子区域图像进行拼接计算,得到并保存拼接信息,然后删除进行过拼接计算的所述边缘子区域图像;
(3)根据步骤(2)中所述拼接信息计算出每个所述区域图像在所述全景图像中的像方位置{P0 i},i=1,2,...,Nr
(4)根据所有所述区域图像在所述全景图像中的位置{P0 i}计算所述区域图像在分辨率Lr下的位置{PLr i},并根据{PLr i}进行拼接融合,得到所述分辨率下的全景图像WLr
(5)根据所述全景图像WLr生成缩略图,并进行压缩编码得到缩略图压缩编码数据块;
(6)根据所述预设的网格图像尺寸对所述全景图像WLr进行非重叠划分,得到网格图像序列{Gj},j=1,2,...,Ng及它们在全景图像WLr中的位置{Q0 j},j=1,2,...,Ng
(7)根据所述预设的网格图像分辨率数目Lg,在所述数据区部写入所述网格图像金字塔的压缩编码数据块,并记录所述网格图像金字塔的压缩编码数据块的大小及其在文件中的存储位置;其中,所述存储位置为所述网格图像金字塔的压缩编码数据块在所述文件中的起始位置;然后删除网格图像金字塔;
(8)由{Q0 j}推算出各网格图像在分辨率Lr+k,k=1,2,...,Lg-1下的像方位置{QLr +k j},并将位置连同步骤(7)所述网格图像压缩编码图像的大小及所述网格图像的所述存储位置等信息一同写入所述数据区;
(9)将所有所述区域图像金字塔的像方位置、存储位置、数据块大小以及所述缩略图压缩编码数据块等信息写入文件头部,从而完成所述全景图像的存储。
进一步的,所述全景图像存储格式中,所述步骤(1)中,所述文件头的大小F0的计算方式为:
F0=sizeof(Dr)+sizeof(Nr)+sizeof(Lr)+sizeof(Dg)+sizeof(Ng)+sizeof(Lg)+预留存储缩略图压
缩编码图像空间大小。其中,sizeof(x)是存储数据对象x所需要的存储量,以字节为单位。
其中,步骤(8)中:
Qj Lr+1=Qj 0/2;
Qj Lr+k=Qj Lr+k-1/2.
本申请还公开了一种全景图像文件浏览方法,包括下列步骤:
(1)输入浏览窗口尺寸、浏览位置信息;
(2)判断浏览对象是否为高分辨率或较高分辨率的所述全景图像;
(3)若步骤(2)的判断结果为是,则根据当前分辨率下区域图像尺寸,计算出用于填充所述浏览窗口的所述区域图像编号序列;
(4)根据步骤(3)所述编号在文件头数据段找出区域图像的压缩编码数据块的位置;
(5)根据步骤(4)所述位置从文件中提取出对应的区域图像的压缩编码数据块;
(6)将所述压缩编码数据块解码,并对重叠区域融合后填充所述浏览窗口;
(7)若步骤(2)的判断结构为否,则根据当前分辨率下网格图像尺寸,计算出用于填充所述浏览窗口的网格图像编号序列;
(8)根据步骤(7)所述编号在所述网格图像位置数据段找出所述网格图像的压缩编码数据块的位置;
(9)根据步骤(8)所述位置从文件中提取出对应的网格图像的压缩编码数据块;
(10)将步骤(9)所述压缩编码数据块解码后填充所述浏览窗口。
与现有技术相比,本申请的优点在于:
(a)可以更快地生成全景图像,且生成速度与感兴趣区域的连通程度无关;
(b)极大地降低了生成全景图像的过程中的内存使用量;
(c)每个区域图像的位置是通过全局最优而非局部最优计算而来,具有更好的拼接质量。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍;显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为现有全景图像生成的技术原理图;
图2为现有技术中全景图像浏览过程示意图;其中,黑色圆点表示当前浏览位置;
图3为一个全景图像的示意图;其中,灰色区域表示感兴趣区域,黑色细线矩形表示成像设备采集到的区域图像,黑色粗线矩形表示切割和用来存储的网格图像。如果按从左至右从上至下顺序采集区域图像,则需要到最后一个图像(右下角)才能构成一个可拼接图像集,进而完成全景图像的生成;
图4为根据本申请提出的全景图像文件存储格式的生成过程;
图5为本申请所提出的全景图像文件浏览方法;
图6为区域图像金字塔示意图;本申请所指区域图像金字塔,是区域图像的塔状多分辨率表示方法,塔的每一层对应区域图像的一种分辨率表示,其中塔底是原始分辨率的区域图像,自底向上是分辨率依次降低的区域图像,且每一层图像由其下面层图像通过下采样得到。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请中的一部分实施例,而不是全部的实施例。给予本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例都属于本申请保护的范围。
请参见图1,图1示出了现有全景图像生成的技术原理。现有技术中,全景图像的生成步骤为:
第1步:采集第一行(列)区域图像,保存在内存的图像队列中,并进行水平(垂直)方向的“拼接”计算。所谓的拼接即是通过图像匹配等算法找出相邻两个区域图像的重叠区域。如果两个相邻区域图像在找出来的重叠区域部分的相关性(相似性)高于给定的阈值,则称这两个图像是“可拼接的”,否则称之为“不可拼接的”。类似地,对若干个水平或垂直方向相邻的区域图像所构成的图像集合,如果从某个图像开始,前后相邻的任意两个图像都是可拼接的,则称该图像集是可拼接的。
第2步:若已到最后一行(列),则进入第5步;否则,采集下一行(列)区域图像,保存在内存的图像队列中,并进行水平和垂直方向的拼接计算。
第3步:对队列中除本行(列)外的图像所构成的所有可拼接图像集{Si},i=1,...,N,如果本行(列)上的所有图像与Si中的任何图像都不可拼接,则将图像集Si进行拼接和融合后切割成大小相同的非重叠网格图像(Grid Image)进行压缩存储,然后将这个图像集Si从队列中移除。
第4步:若当前行(列)已是最后一行(列),转第5步;否则,若队列中所有非本行(列)区域图像与部分或所有本行(列)图像所构成了一个可拼接图像集,则将图像集进行拼接和融合后切割成大小相同的非重叠网格图像(Grid Image)进行压缩存储,然后将所有非本行(列)区域图像从队列中移除,并转第2步;否则,直接转第2步。
第5步:依次将队列中的可拼接图像集进行拼接和融合后切割成大小相同的非重叠网格图像进行存储,并将队列清空。
以上生成过程得到的全景图像文件格式大致包括文件头和网格图像数据两个数据段。其中,文件头包括全景图像的基本信息(比如颜色通道数、分辨率数目、网格图像数目、缩略图等等)和所构成的每个网格图像在全景图像中的像方位置、存储位置、数据块大小等信息;网格图像数据包括每个网格图像及其低分辨率版本的压缩编码数据块。
现有全景图像的浏览过程可以描述如下:
第1步:根据浏览窗口的大小和浏览位置以及网格图像的尺寸,计算出需要用于填充该窗口的网格图像的编号序列{ki},i=1,2,3,...M;
第2步:根据上述序列中的编号在全景图像文件头数据段找到对应的网格图像的位置{Pki},i=1,2,3,...,M;
第3步:根据上述位置序列在文件的网格图像数据段提取出对应的网格图像编码数据块,解码后填充窗口中对应的区域。
该浏览过程的示意图可参见图2。
本申请提出了一种新的全景图像生成方法,对应地给出了新的全景图像存储文件格式以及浏览方法。该方法的生成速度与感兴趣区域的连通程度无关,且最大限度地降低了资源的使用量。具体阐述如下:
本申请提出的方法其原理可以用“先存储、后融合”来概括。即,在全景图像的生成阶段,只需存储区域图像和区域图像的在全景图像中的位置信息,且只对全景图像的低分辨率版本进行切割,并存储切割后的网格图像及其位置信息;在全景图像的浏览阶段,如果浏览的是全景图像的低分辨率版本,则根据当前需要显示的区域把对应分辨率下的网格图像提取出来进行显示,如果浏览的是全景图像的高分辨率版本,则根据当前需要显示的区域提取出对应的区域图像和位置信息进行融合并显示。
根据本申请的一个实施例,本申请所述全景图像的生成方法包括下列步骤:
(a)获取区域图像,并以区域图像金字塔的形式存储;优选的,所存储的区域图像为低分辨率区域图像;
(b)获取所述区域图像的边缘子区域图像,并计算局部拼接信息;优选的,计算局部拼接信息后,将所述边缘子区域图像删除;优选的,还包括以下子步骤:所述计算局部拼接信息后,将所述边缘子区域图像删除。其中,图像金字塔是图像的多分辨率表示法,它是将同一图像多次的进行向下取样,产生不同分辨率下的图像。为便于理解,通常将这些图像表示为金字塔结构:原始图像置于金子塔的底层,越往上分辨率越低;如图6所示。
(c)重复所述步骤(a)至所述步骤(b),获取复数个局部拼接信息;
(d)根据所述复数个局部拼接信息计算各个所述区域图像在所述全景图像中的位置;
(e)由所述区域图像位置和所述区域图像生成所述全景图像;优选的,包括以下子步骤:由所述区域图像位置和所述低分辨率区域图像生成低分辨率全景图像;优选的,还包括以下子步骤:由所述全景图像的低分辨率版生成全景图像缩略图;
(f)将所述全景图像切割为网格图像,并存储网格图像金字塔。
图4示出了根据本申请提出的全景图像文件存储格式的生成过程。所述全景图像文件存储格式包括文件头和数据区,所述全景图像文件存储格式的生成过程包括以下步骤:
(1)计算所述文件头的大小F0,并生成初始大小为F0的文件;其中,所述文件头的大小F0根据区域图像的尺寸Dr、数目Nr、分辨率数目(即金字塔层数)Lr、预设的网格图像数目Ng、尺寸Dg、分辨率数目Lg、预留的缩略图压缩编码图像所需存储空间大小等这些信息得出:
F0=sizeof(Dr)+sizeof(Nr)+sizeof(Lr)+sizeof(Dg)+sizeof(Ng)+sizeof(Lg)+预留存储缩略图压缩编码图像空间大小(以字节为单位)。
其中,sizeof(x)是计算机编程语言中存储数据对象x所需要的存储量,以字节为单位。
(2)所述区域图像的处理:
a)在所述数据区部写入区域图像金字塔的压缩编码数据块,并记录所述压缩编码数据块的大小及其在所述文件中的存储位置;其中,所述存储位置为所述区域图像金字塔的压缩编码数据块在所述文件中的起始位置;
b)截取所述区域图像的边缘子区域图像,然后删除所述区域图像;
c)与已采集过的相邻的区域图像的边缘子区域图像进行拼接计算,得到并保存拼接信息,然后删除进行过拼接计算的所述边缘子区域图像;
(3)根据步骤(2)中所述拼接信息计算出每个所述区域图像在所述全景图像中的像方位置{P0 i},i=1,2,...,Nr
(4)根据所有所述区域图像在所述全景图像中的位置{P0 i}计算所述区域图像在分辨率Lr下的位置{PLr i},并根据{PLr i}进行拼接融合,得到所述分辨率下的全景图像WLr
(5)根据所述全景图像WLr生成缩略图,并进行压缩编码得到缩略图压缩编码数据块;
(6)根据所述预设的网格图像尺寸对所述全景图像WLr进行非重叠划分,得到网格图像序列{Gj},j=1,2,...,Ng及它们在全景图像WLr中的位置{Q0 j},j=1,2,...,Ng
(7)根据所述预设的网格图像分辨率数目Lg,在所述数据区部写入所述网格图像金字塔的压缩编码数据块,并记录所述网格图像金字塔的压缩编码数据块的大小及其在文件中的存储位置;其中,所述存储位置为所述网格图像金字塔的压缩编码数据块在所述文件中的起始位置;然后删除网格图像金字塔;
(8)由{Q0 j}推算出各网格图像在分辨率Lr+k,k=1,2,...,Lg-1下的像方位置{QLr +k j},并将位置连同步骤(7)所述网格图像压缩编码图像的大小及所述网格图像的所述存储位置等信息一同写入所述数据区;
(9)将所有所述区域图像金字塔的像方位置、存储位置、数据块大小以及所述缩略图压缩编码数据块等信息写入文件头部,从而完成所述全景图像的存储。
表1示出了根据本申请的一个实施例生成的全景图像文件存储格式。
与现有技术相比,本申请的优点在于:
(a)可以更快地生成全景图像,且生成速度与感兴趣区域的连通程度无关;
(b)极大地降低了生成全景图像的过程中的内存使用量;
(c)每个区域图像的位置是通过全局最优而非局部最优计算而来,具有更好的拼接质量。

Claims (11)

1.一种全景图像生成方法,其特征在于,包括下列步骤:
(a)获取区域图像,并存储区域图像金字塔;
(b)获取所述区域图像的边缘子区域图像,并计算局部拼接信息;
(c)重复所述步骤(a)至所述步骤(b),获取复数个局部拼接信息;
(d)根据所述复数个局部拼接信息计算各个所述区域图像在所述全景图像中的位置;
(e)由所述区域图像位置和所述区域图像生成所述全景图像的低分辨率版本;
(f)将所述全景图像的低分辨率版本切割为网格图像,并存储网格图像金字塔。
2.根据权利要求1所述的全景图像生成方法,其特征在于,所述步骤(b)包括以下子步骤:获取所述区域图像的边缘子区域图像后,删除所述区域图像。
3.根据权利要求1所述的全景图像生成方法,其特征在于,所述步骤(b)包括以下子步骤:所述计算局部拼接信息后,将所述边缘子区域图像删除。
4.根据权利要求1所述的全景图像生成方法,其特征在于,所述区域图像金字塔包括区域图像金字塔最低分辨率层图像;所述步骤(e)中包括以下子步骤:根据所述区域图像金字塔最低分辨率层图像生成更低一层分辨率的区域图像。
5.根据权利要求4所述的全景图像生成方法,其特征在于,所述步骤(e)中包括以下子步骤:根据所述区域图像计算出所述区域图像金字塔最低分辨率层图像的更低一层分辨率的区域图像的位置。
6.根据权利要求5所述的全景图像生成方法,其特征在于,所述步骤(e)包括以下子步骤:由所述更低一层分辨率的区域图像及其位置生成所述全景图像的低分辨率版本。
7.根据权利要求1所述的全景图像生成方法,其特征在于,所述步骤(e)包括以下子步骤:由所述全景图像的低分辨率版生成全景图像缩略图。
8.一种全景图像文件存储格式,其特征在于,所述全景图像文件存储格式包括文件头和数据区,具有所述存储格式的全景图像文件的生成过程包括以下步骤:
(1)计算所述文件头的大小F0,并生成初始大小为F0的文件;其中,所述文件头的大小F0根据区域图像的尺寸Dr、数目Nr、分辨率数目(即金字塔层数)Lr、预设的网格图像数目Ng、尺寸Dg、分辨率数目Lg、预留的缩略图压缩编码图像所需存储空间大小等这些信息得出:
F0=sizeof(Dr)+sizeof(Nr)+sizeof(Lr)+sizeof(Dg)+sizeof(Ng)+sizeof(Lg)+预留存储缩略图压缩编码图像空间大小(以字节为单位)。
其中,sizeof(x)是计算机编程语言中存储数据对象x所需要的存储量,以字节为单位。
(2)所述区域图像的处理:
a)在所述数据区部写入区域图像金字塔的压缩编码数据块,并记录所述压缩编码数据块的大小及其在所述文件中的存储位置;其中,所述存储位置为所述区域图像金字塔的压缩编码数据块在所述文件中的起始位置;
b)截取所述区域图像的边缘子区域图像,然后删除所述区域图像;
c)与已采集过的相邻的区域图像的边缘子区域图像进行拼接计算,得到并保存拼接信息,然后删除进行过拼接计算的所述边缘子区域图像;
(3)根据步骤(2)中所述拼接信息计算出每个所述区域图像在所述全景图像中的像方位置{P0 i},i=1,2,...,Nr
(4)根据所有所述区域图像在所述全景图像中的位置{P0 i}计算所述区域图像在分辨率Lr下的位置{PLr i},并根据{PLr i}进行拼接融合,得到所述分辨率下的全景图像WLr
(5)根据所述全景图像WLr生成缩略图,并进行压缩编码得到缩略图压缩编码数据块;
(6)根据所述预设的网格图像尺寸对所述全景图像WLr进行非重叠划分,得到网格图像序列{Gj},j=1,2,...,Ng及它们在全景图像WLr中的位置{Q0 j},j=1,2,...,Ng
(7)根据所述预设的网格图像分辨率数目Lg,在所述数据区部写入所述网格图像金字塔的压缩编码数据块,并记录所述网格图像金字塔的压缩编码数据块的大小及其在文件中的存储位置;其中,所述存储位置为所述网格图像金字塔的压缩编码数据块在所述文件中的起始位置;然后删除网格图像金字塔;
(8)由{Q0 j}推算出各网格图像在分辨率Lr+k,k=1,2,...,Lg-1下的像方位置{QLr+k j},并将位置连同步骤(7)所述网格图像压缩编码图像的大小及所述网格图像的所述存储位置等信息一同写入所述数据区;
(9)将所有所述区域图像金字塔的像方位置、存储位置、数据块大小以及所述缩略图压缩编码数据块等信息写入文件头部,从而完成所述全景图像的存储。
9.根据权利要求5所述的全景图像文件存储格式,其特征在于,其中,所述步骤(1)中,所述文件头的大小F0的计算方式为:
F0=sizeof(Dr)+sizeof(Nr)+sizeof(Lr)+sizeof(Dg)+sizeof(Ng)+sizeof(Lg)+预留存储缩略图压缩编码图像空间大小。其中,sizeof(x)是存储数据对象x所需要的存储量,以字节为单位。
10.根据权利要求5所述的全景图像文件存储格式,其特征在于,其中,步骤(8)中:
Qj Lr+1=Qj 0/2;
Qj Lr+k=Qj Lr+k-1/2.
11.一种全景图像文件浏览方法,其特征在于,包括下列步骤:
(1)输入浏览窗口尺寸、浏览位置信息;
(2)判断浏览对象是否为高分辨率或较高分辨率的所述全景图像;
(3)若步骤(2)的判断结果为是,则根据当前分辨率下区域图像尺寸,计算出用于填充所述浏览窗口的所述区域图像编号序列;
(4)根据步骤(3)所述编号在文件头数据段找出区域图像的压缩编码数据块的位置;
(5)根据步骤(4)所述位置从文件中提取出对应的区域图像的压缩编码数据块;
(6)将所述压缩编码数据块解码,并对重叠区域融合后填充所述浏览窗口;
(7)若步骤(2)的判断结构为否,则根据当前分辨率下网格图像尺寸,计算出用于填充所述浏览窗口的网格图像编号序列;
(8)根据步骤(7)所述编号在所述网格图像位置数据段找出所述网格图像的压缩编码数据块的位置;
(9)根据步骤(8)所述位置从文件中提取出对应的网格图像的压缩编码数据块;
(10)将步骤(9)所述压缩编码数据块解码后填充所述浏览窗口。
CN201910811120.2A 2019-10-21 2019-10-21 全景图像生成方法及其文件存储格式和浏览方法 Pending CN110572569A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910811120.2A CN110572569A (zh) 2019-10-21 2019-10-21 全景图像生成方法及其文件存储格式和浏览方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910811120.2A CN110572569A (zh) 2019-10-21 2019-10-21 全景图像生成方法及其文件存储格式和浏览方法

Publications (1)

Publication Number Publication Date
CN110572569A true CN110572569A (zh) 2019-12-13

Family

ID=68776866

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910811120.2A Pending CN110572569A (zh) 2019-10-21 2019-10-21 全景图像生成方法及其文件存储格式和浏览方法

Country Status (1)

Country Link
CN (1) CN110572569A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114222061A (zh) * 2021-12-10 2022-03-22 中国人民解放军96901部队25分队 一种光电周扫的实时图像拼接与交互方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1996379A (zh) * 2006-10-25 2007-07-11 麦克奥迪实业集团有限公司 一种全自动显微图像的拼接、存储和浏览方法
CN101059949A (zh) * 2007-04-03 2007-10-24 广东威创日新电子有限公司 海量图像数据的压缩、存储和显示方法
CN101339570A (zh) * 2008-08-12 2009-01-07 北京航空航天大学 一种高效的海量遥感数据分布式组织管理方法
CN101388043A (zh) * 2008-09-26 2009-03-18 北京航空航天大学 一种基于小块图片的ogc高性能遥感图像地图服务方法
CN103595974A (zh) * 2013-12-01 2014-02-19 北京航空航天大学深圳研究院 一种面向城域的视频地理信息系统及方法
CN103914521A (zh) * 2014-03-20 2014-07-09 北京建筑大学 基于混合瓦片金字塔的街景影像存储的方法及装置
CN103995684A (zh) * 2014-05-07 2014-08-20 广东粤铁瀚阳科技有限公司 超高分辨率平台下的海量影像并行处理显示方法及系统
CN105427235A (zh) * 2015-11-25 2016-03-23 武汉沃亿生物有限公司 一种图像浏览方法及系统
CN105574148A (zh) * 2015-12-16 2016-05-11 麦克奥迪(厦门)医疗诊断系统有限公司 一种数字切片存储系统和数字切片浏览方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1996379A (zh) * 2006-10-25 2007-07-11 麦克奥迪实业集团有限公司 一种全自动显微图像的拼接、存储和浏览方法
CN101059949A (zh) * 2007-04-03 2007-10-24 广东威创日新电子有限公司 海量图像数据的压缩、存储和显示方法
CN101339570A (zh) * 2008-08-12 2009-01-07 北京航空航天大学 一种高效的海量遥感数据分布式组织管理方法
CN101388043A (zh) * 2008-09-26 2009-03-18 北京航空航天大学 一种基于小块图片的ogc高性能遥感图像地图服务方法
CN103595974A (zh) * 2013-12-01 2014-02-19 北京航空航天大学深圳研究院 一种面向城域的视频地理信息系统及方法
CN103914521A (zh) * 2014-03-20 2014-07-09 北京建筑大学 基于混合瓦片金字塔的街景影像存储的方法及装置
CN103995684A (zh) * 2014-05-07 2014-08-20 广东粤铁瀚阳科技有限公司 超高分辨率平台下的海量影像并行处理显示方法及系统
CN105427235A (zh) * 2015-11-25 2016-03-23 武汉沃亿生物有限公司 一种图像浏览方法及系统
CN105574148A (zh) * 2015-12-16 2016-05-11 麦克奥迪(厦门)医疗诊断系统有限公司 一种数字切片存储系统和数字切片浏览方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114222061A (zh) * 2021-12-10 2022-03-22 中国人民解放军96901部队25分队 一种光电周扫的实时图像拼接与交互方法
CN114222061B (zh) * 2021-12-10 2024-03-22 中国人民解放军96901部队25分队 一种光电周扫的实时图像拼接与交互方法

Similar Documents

Publication Publication Date Title
KR102697331B1 (ko) 인물 이미지 복원 방법, 장치, 전자 기기, 기억 매체 및 프로그램 제품
US7986831B2 (en) Image processing apparatus, image processing method and computer program
US10229478B2 (en) Image processing apparatus and image processing method
Rajan et al. Simultaneous estimation of super-resolved scene and depth map from low resolution defocused observations
US6633303B2 (en) Method, system and record medium for generating wide-area high-resolution image
JP5038642B2 (ja) ボリュメトリック画像強調システム及び方法
US7574069B2 (en) Retargeting images for small displays
JP5555706B2 (ja) 高解像度映像獲得装置およびその方法
US8538200B2 (en) Systems and methods for resolution-invariant image representation
US7606441B2 (en) Image processing device and a method for the same
US8180180B2 (en) Method for magnifying images and videos
CN113994366A (zh) 用于视频超分辨率的多阶段多参考自举
KR101028628B1 (ko) 영상 텍스쳐 필터링 방법, 이를 수행하는 프로그램을 기록한 기록매체 및 이를 수행하는 장치
CN111402139A (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
Kiess et al. Seam carving with improved edge preservation
CN113538243B (zh) 基于多视差注意力模块组合的超分辨图像重建方法
JP6121810B2 (ja) シフトアルゴリズムを用いて大容量ソースイメージの特徴点情報を抽出する装置及び方法
JP4990876B2 (ja) 画像処理装置
CN110572569A (zh) 全景图像生成方法及其文件存储格式和浏览方法
KR102374022B1 (ko) 영상 처리 장치 및 방법
US20230401855A1 (en) Method, system and computer readable media for object detection coverage estimation
US20140055644A1 (en) Apparatus and method for extracting object
CN108510438A (zh) 一种图像、视频放大方法和系统
KR102442980B1 (ko) Erp 기반 다시점 360도 영상의 초해상화 방법 및 영상처리장치
JPWO2014077024A1 (ja) 画像処理装置、画像処理方法および画像処理プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191213

RJ01 Rejection of invention patent application after publication