CN111294584B - 三维场景模型的展示方法、装置、存储介质及电子设备 - Google Patents

三维场景模型的展示方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN111294584B
CN111294584B CN202010108550.0A CN202010108550A CN111294584B CN 111294584 B CN111294584 B CN 111294584B CN 202010108550 A CN202010108550 A CN 202010108550A CN 111294584 B CN111294584 B CN 111294584B
Authority
CN
China
Prior art keywords
target
viewpoints
viewpoint
dimensional scene
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010108550.0A
Other languages
English (en)
Other versions
CN111294584A (zh
Inventor
黎晓迎
张宇
李子田
赵文杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Wuyi Vision digital twin Technology Co.,Ltd.
Original Assignee
Dangjia Mobile Green Internet Technology Group Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dangjia Mobile Green Internet Technology Group Co ltd filed Critical Dangjia Mobile Green Internet Technology Group Co ltd
Priority to CN202010108550.0A priority Critical patent/CN111294584B/zh
Publication of CN111294584A publication Critical patent/CN111294584A/zh
Application granted granted Critical
Publication of CN111294584B publication Critical patent/CN111294584B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/275Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本公开涉及一种三维场景模型的展示方法、装置、存储介质及电子设备,该方法通过获取带有视频纹理的三维场景模型,该三维场景模型由预设视频图像经过三维重建生成;确定该预设视频图像中每帧图像对应的相机模型;根据确定的该相机模型确定该三维场景模型对应的多个目标视点;获取多个该目标视点之间的目标路径,该目标路径为展示视角在不同的目标视点之间切换时对应的移动轨迹;按照该目标路径展示不同的目标视点对应的该三维场景模型。这样,获取多个该目标视点之间的目标路径,按照该目标路径展示不同的目标视点对应的该三维场景模型,能够在不同的展示视角下展示监控内容,能够提升监控显示的立体效果,提升用户体验。

Description

三维场景模型的展示方法、装置、存储介质及电子设备
技术领域
本公开涉及图像处理技术领域,具体地,涉及一种三维场景模型的展示方法、装置、存储介质及电子设备。
背景技术
目前的监控视频大多是一组二维层面的帧图像按照时间先后的顺序进行播放的结果,通常由于拍摄监控视频的角度不同,显示的监控效果的差异也较大,但是不管是怎样的拍摄角度,获得的监控效果多好,也基本都是在二维层面,得到的监控效果都会存在立体感较差,空间分步界限不明确的问题。为了克服当前监控视频存在的上述问题,研究者便尝试对该监控视频图像中包含的三维场景进行三维模型重建,并将监控视频图像以视频纹理的方式映射至该重建的三维模型中,从而得到该带有视频纹理的三维场景模型。
然而,在得到该带有视频纹理的三维场景模型之后,如果依然按照该监控视频图像对应的时间顺序进行播放展示的话,不能在多个视角下观看监控效果,不利于提升用户体验。
发明内容
本公开的目的是提供一种三维场景模型的展示方法、装置、存储介质及电子设备,用于解决目前通过监控视频图像得到该带有视频纹理的三维场景模型之后,不能在多个视角下观看监控效果,不利于提升用户体验的技术问题。
为了实现上述目的,在本公开的第一方面提供一种三维场景模型的展示方法,所述方法包括:
获取带有视频纹理的三维场景模型,所述三维场景模型由预设视频图像经过三维重建生成;
确定所述预设视频图像中每帧图像对应的相机模型;
根据确定的所述相机模型确定所述三维场景模型对应的多个目标视点;
获取多个所述目标视点之间的目标路径,所述目标路径为展示视角在不同的目标视点之间切换时对应的移动轨迹;
按照所述目标路径展示不同的目标视点对应的所述三维场景模型。
可选地,所述根据确定的所述相机模型确定所述三维场景模型对应的多个目标视点:
建立每个所述相机模型对应的包围球;
按照所述相机模型的旋转方向在所述包围球上获取多个待定视点;
根据多个所述待定视点的视点质量,从多个所述待定视点中确定至少一个所述目标视点。
可选地,所述根据多个所述待定视点的视点质量,从多个所述待定视点中确定至少一个所述目标视点,包括:
获取每个所述待定视点下所述三维场景模型的投影区域;
确定所述投影区域内包含的所述三维场景模型的轮廓线长度,所述轮廓线长度用于度量所述待定视点的视点质量;
根据多个所述待定视点对应的所述轮廓线长度确定至少一个所述目标视点。
可选地,在每个所述相机模型包括一个目标视点的情况下,所述获取多个所述目标视点之间的目标路径包括:
按照第一预设顺序连接多个所述目标视点,生成所述目标路径。
可选地,在每个所述相机模型包括多个目标视点的情况下,所述获取多个所述目标视点之间的目标路径,包括:
按照预设方式连接每个所述相机模型对应的多个目标视点,以形成每个相机模型对应的子路径;
按照第二预设顺序将每个所述相机模型对应的所述子路径进行首尾相接,以生成所述目标路径。
可选地,所述按照预设方式连接每个所述相机模型对应的多个目标视点,以形成每个相机模型对应的子路径,包括:
获取每个所述目标视点对应的轮廓线长度;
按照所述轮廓线长度由大至小的顺序,连接每个所述相机模型对应的多个目标视点,以形成每个相机模型对应的子路径。
可选地,所述按照预设方式连接每个所述相机模型对应的多个目标视点,以形成每个相机模型对应的子路径,包括:
获取每个所述相机模型对应的多个目标视点中的第一视点和第二视点;
生成每个所述相机模型对应的多个目标视点中相邻的所述目标视点之间的目标连线,以形成视点网格;
将所述视点网格中由所述第一视点依次经过除所述第一视点和所述第二视点之外的其他视点到达所述第二视点的多条路径中距离最小的路径确定为所述子路径。
在本公开的第二方面提供一种三维场景模型的展示装置,所述装置包括:
第一获取模块,用于获取带有视频纹理的三维场景模型,所述三维场景模型由预设视频图像经过三维重建生成;
第一确定模块,用于确定所述预设视频图像中每帧图像对应的相机模型;
第二确定模块,用于根据确定的所述相机模型确定所述三维场景模型对应的多个目标视点;
第二获取模块,获取多个所述目标视点之间的目标路径,所述目标路径为展示视角在不同的目标视点之间切换时对应的移动轨迹;
展示模块,用于按照所述目标路径展示不同的目标视点对应的所述三维场景模型。
可选地,所述第二确定模块包括:
包围球建立子模块,用于建立每个所述相机模型对应的包围球;
获取子模块,用于按照所述相机模型的旋转方向在所述包围球上获取多个待定视点;
确定子模块,用于根据多个所述待定视点的视点质量,从多个所述待定视点中确定至少一个所述目标视点。
可选地,所述确定子模块用于:
获取每个所述待定视点下所述三维场景模型的投影区域;
确定所述投影区域内包含的所述三维场景模型的轮廓线长度,所述轮廓线长度用于度量所述待定视点的视点质量;
根据多个所述待定视点对应的所述轮廓线长度确定至少一个所述目标视点。
可选地,在每个所述相机模型包括一个目标视点的情况下,所述第二获取模块用于:
按照第一预设顺序连接多个所述目标视点,生成所述目标路径。
可选地,在每个所述相机模型包括多个目标视点的情况下,所述第二获取模块,包括:
第一生成子模块,用于按照预设方式连接每个所述相机模型对应的多个目标视点,以形成每个相机模型对应的子路径;
第二生成子模块,用于按照第二预设顺序将每个所述相机模型对应的所述子路径进行首尾相接,以生成所述目标路径。
可选地,所述第一生成子模块,用于:
获取每个所述目标视点对应的轮廓线长度;
按照所述轮廓线长度由大至小的顺序,连接每个所述相机模型对应的多个目标视点,以形成每个相机模型对应的子路径。
可选地,所述第一生成子模块,用于:
获取每个所述相机模型对应的多个目标视点中的第一视点和第二视点;
生成每个所述相机模型对应的多个目标视点中相邻的所述目标视点之间的目标连线,以形成视点网格;
将所述视点网格中由所述第一视点依次经过除所述第一视点和所述第二视点之外的其他视点到达所述第二视点的多条路径中距离最小的路径确定为所述子路径。
在本公开的第三方面提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现以上第一方面所述方法的步骤。
在本公开的第四方面提供一种电子设备,包括:
存储器,其上存储有计算机程序;
处理器,用于执行所述存储器中的所述计算机程序,以实现以上第一方面所述方法的步骤。
上述技术方案,通过获取带有视频纹理的三维场景模型,所述三维场景模型由预设视频图像经过三维重建生成;确定所述预设视频图像中每帧图像对应的相机模型;根据确定的所述相机模型确定所述三维场景模型对应的多个目标视点;获取多个所述目标视点之间的目标路径,所述目标路径为展示视角在不同的目标视点之间切换时对应的移动轨迹;按照所述目标路径展示不同的目标视点对应的所述三维场景模型。这样,获取多个所述目标视点之间的目标路径,按照所述目标路径展示不同的目标视点对应的所述三维场景模型,能够在不同的展示视角下展示监控内容,能够提升监控显示的立体效果,提升用户体验。
本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本公开的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本公开,但并不构成对本公开的限制。在附图中:
图1是本公开一示例性实施例示出的一种三维场景模型的展示方法的流程图;
图2是本公开另一示例性实施例示出的一种三维场景模型的展示方法的流程图;
图3是本公开又一示例性实施例示出的一种三维场景模型的展示装置的框图;
图4是本公开又一示例性实施例示出的另一种三维场景模型的展示装置的框图;
图5是根据一示例性实施例示出的一种电子设备的框图。
具体实施方式
以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本公开,并不用于限制本公开。
在详细介绍本公开的具体实施方式之前,首先对本公开的应用场景进行简单说明,本公开可以应用于对视频图像经过三维重建后得到的三维场景模型进行导览的过程,该视频图像可以是监控视频图像,也可以是其他任何在一定立体场景下拍摄的视频图像,还可以是内容包含立体对象的视频图像;该三维场景模型可以是视频内的具有三维结构的物体或者场景的三维模型,例如立体的建筑物,建筑物内的房间,房间内的冰箱,电视等立体对象的模型。这里以监控视频为例进行说明,目前的监控视频大多是一组二维层面的帧图像按照时间先后的顺序进行播放的结果,通常由于拍摄监控视频的角度不同,显示的监控效果的差异也较大,但是不管是怎样的拍摄角度,获得的监控效果多好,也基本都是在二维层面,得到的监控效果都会存在立体感较差,空间分步界限不明确的问题。为了克服当前监控视频存在的上述问题,本申请的发明人便尝试对该监控视频图像中包含的三维场景进行三维模型重建,并将监控视频图像以视频纹理的方式映射至该重建的三维模型中,从而得到该带有视频纹理的三维场景模型。然而,在得到该带有视频纹理的三维场景模型之后,如果依然按照该监控视频图像对应的时间顺序进行播放展示的话,不能在多个视角下观看监控效果,不利于提升用户体验。
为了解决上述技术问题,本公开提供一种三维场景模型的展示方法、装置、存储介质及电子设备,该方法通过获取带有视频纹理的三维场景模型,该三维场景模型由预设视频图像经过三维重建生成;确定该预设视频图像中每帧图像对应的相机模型;根据确定的该相机模型确定该三维场景模型对应的多个目标视点;获取多个该目标视点之间的目标路径,该目标路径为展示视角在不同的目标视点之间切换时对应的移动轨迹;按照该目标路径展示不同的目标视点对应的该三维场景模型。这样,获取多个该目标视点之间的目标路径,按照该目标路径展示不同的目标视点对应的该三维场景模型,能够在不同的展示视角下展示监控内容,能够提升监控显示的立体效果,提升用户体验。
图1是本公开一示例性实施例示出的一种三维场景模型的展示方法的流程图;参见图1,该方法可以包括以下步骤:
步骤101,获取带有视频纹理的三维场景模型。
其中,该三维场景模型由预设视频图像经过三维重建生成。
本步骤中一种可能的实施方式为:通过该预设视频图像对应的深度图生成该三维场景模型,该深度图用于表示场景表面到深度相机的距离;首先可以通过SDK(SoftwareDevelopment Kit,软件开发工具包)接入该预设视频数据,对该预设视频数据进行解码得到按照时间顺序排列的帧图像,然后按照每帧图像和该图像中场景对应的深度图生成该三维场景模型,并将该预设视频图像以视频纹理的方式映射至该三维场景模型中,从而得到该带有视频纹理的三维场景模型。
需要说明的是,该按照每帧图像和该图像对应的深度图生成该三维场景模型的实施方法可以参考现有技术中的相关方法,此处不再赘述。
步骤102,确定该预设视频图像中每帧图像对应的相机模型。
其中,该相机模型包括相机的内参和外参,该相机的内参可以包括相机的投影中心和焦距,该相机的外参可以包括相机的旋转角度和平移向量。
需要说明的是,该预设视频图像对应多帧图像,其中每帧图像对应一个相机模型,多帧图像可以确定出多个该相机模型。
步骤103,根据确定的该相机模型确定该三维场景模型对应的多个目标视点。
本步骤可以通过以下步骤实现:建立每个该相机模型对应的包围球;按照该相机模型的旋转方向在该包围球上获取多个待定视点;根据多个该待定视点的视点质量,从多个该待定视点中确定至少一个该目标视点。其中,所述根据多个该待定视点的视点质量,从多个该待定视点中确定至少一个该目标视点,可以包括以下步骤:获取每个该待定视点下该三维场景模型的投影区域;确定该投影区域内包含的该三维场景模型的轮廓线长度,该轮廓线长度用于度量该待定视点的视点质量;根据多个该待定视点对应的该轮廓线长度确定至少一个该目标视点。
需要说明的是,该相机的旋转方向可以由该相机的旋转矩阵R得出。该视点质量可以由该待定视点下该三维场景模型的投影区域内包含的该三维场景模型的轮廓线长度来度量,该轮廓线长度越长,在该待定视点下能够显示的三维场景模型的内容越多,该待定视点的视点质量越高,在确定目标视点时可以将轮廓线长度较长的待定视点确定为该目标视点。每个相机模型可以从对应的多个待定视点中确定一个目标视点,也可以从对应的多个待定视点中确定出多个目标视点。
步骤104,获取多个该目标视点之间的目标路径。
其中,该目标路径为展示视角在不同的目标视点之间切换时对应的移动轨迹。
在本步骤中,在每个该相机模型包括一个目标视点的情况下,该获取多个该目标视点之间的目标路径包括:按照第一预设顺序连接多个该目标视点,生成该目标路径。在每个该相机模型包括多个目标视点的情况下,该获取多个该目标视点之间的目标路径,包括:按照预设方式连接每个该相机模型对应的多个目标视点,以形成每个相机模型对应的子路径;按照第二预设顺序将每个该相机模型对应的该子路径进行首尾相接,以生成该目标路径。
需要说明的是,该预设顺序可以是按照目标视点的坐标位置,从左(右)至右(左)或者从上(下)至下(上),也可以是根据目标视点的视点质量由高(低)至低(高)的顺序,还可以是其他人工指定的顺序。另外,所述形成每个相机模型对应的子路径,可以通过以下两种实施方式中的任一种实现:
方式一:获取每个该目标视点对应的轮廓线长度;按照该轮廓线长度由大至小的顺序,连接每个该相机模型对应的多个目标视点,以形成每个相机模型对应的子路径。
方式二:获取每个该相机模型对应的多个目标视点中的第一视点和第二视点;生成每个该相机模型对应的多个目标视点中相邻的该目标视点之间的目标连线,以形成视点网格;将该视点网格中由该第一视点依次经过除该第一视点和该第二视点之外的其他视点到达该第二视点的多条路径中距离最小的路径确定为该子路径。
步骤105,按照该目标路径展示不同的目标视点对应的该三维场景模型。
本步骤中可以生成按照该目标路径展示该三维场景模型的相机路径动画,能够在不同的展示视角下展示监控内容。
上述技术方案,通过获取多个该目标视点之间的目标路径,按照该目标路径展示不同的目标视点对应的该三维场景模型,能够在不同的展示视角下展示监控内容,能够提升监控的立体显示效果,提升用户体验。
图2是本公开另一示例性实施例示出的一种三维场景模型的展示方法的流程图;参见图2,该方法可以包括以下步骤:
步骤201,获取带有视频纹理的三维场景模型。
其中,该三维场景模型由预设视频图像经过三维重建生成。
在本步骤中,可以通过SDK接入该预设视频数据,对该预设视频数据进行解码得到按照时间顺序排列的帧图像,然后按照每帧图像和该图像中场景对应的深度图生成该三维场景模型,并将该预设视频图像以视频纹理的方式映射至该三维场景模型中,从而得到该带有视频纹理的三维场景模型。
需要说明的是,该按照每帧图像和该图像对应的深度图生成该三维场景模型的实施方法可以参考现有技术中的相关方法,此处不再赘述。
步骤202,确定该预设视频图像中每帧图像对应的相机模型。
其中,该相机模型可以通过相机的内参和外参确定,该相机的内参可以包括相机的投影中心和焦距,该相机的外参可以包括相机的旋转角度和平移向量。
需要说明的是,该预设视频图像对应多帧图像,其中每帧图像对应一个相机模型,多帧图像可以确定出多个该相机模型。
步骤203,建立每个该相机模型对应的包围球。
其中,该包围球为该相机模型的外接球,所述根据相机模型生成外接球的具体实施方式可以参考现有技术,本公开对此不作限定。
步骤204,按照该相机模型的旋转方向在该包围球上获取多个待定视点。
需要说明的是,该旋转方向为该相机的拍摄视角的中心线所在的方向,在建立完该相机模型的包围球后,该相机的拍摄视角的中心线会穿过该包围球,在本步骤中可以获取该拍摄视角的中心线与该包围球的交点,可以将该交点确定为该待定视点,还可以在该包围球表面,获取该交点周围预设距离范围内的其他点作为该待定视点。
步骤205,获取每个该待定视点下该三维场景模型的投影区域。
其中,该投影区域为相机在该待定视点处拍摄到该三维场景模型的区域。
步骤206,确定该投影区域内包含的该三维场景模型的轮廓线长度。
其中,该轮廓线长度用于度量该待定视点的视点质量,该轮廓线长度为该投影区域内包含的绘制该三维场景模型的线段对应长度之和。
需要说明的是,该轮廓线长度越长,在该待定视点下能够显示的三维场景模型的内容越多,该待定视点的视点质量越高。
步骤207,根据多个该待定视点对应的该轮廓线长度确定至少一个该目标视点。
示例的,若每个相机模型的包围球上有5个待定视点,需要从5个待定视点确定出3个目标视点时,可以将5个待定视点对应的轮廓线长度按照从大至小的顺序排列,然后将排在前三的3个待定视点确定为该目标视点。
步骤208,确定每个该相机模型对应的该目标视点的数量是否为一。
在本步骤中,若确定每个该相机模型对应的该目标视点的数量为一,则执行步骤209;若确定每个该相机模型对应的该目标视点的数量不为一,则执行步骤210至211。
步骤209,按照第一预设顺序连接多个该目标视点,生成该目标路径。
其中,该第一预设顺序可以是按照目标视点的坐标位置,从左(右)至右(左)或者从上(下)至下(上),也可以是根据目标视点的视点质量由高(低)至低(高)的顺序,还可以是其他人工指定的顺序。
步骤210,按照预设方式连接每个该相机模型对应的多个目标视点,以形成每个相机模型对应的子路径。
本步骤中包括以下两种实施方式:
方式一,获取每个该目标视点对应的轮廓线长度;按照该轮廓线长度由大至小的顺序,连接每个该相机模型对应的多个目标视点,以形成每个相机模型对应的子路径。
方式二,获取每个该相机模型对应的多个目标视点中的第一视点和第二视点;生成每个该相机模型对应的多个目标视点中相邻的该目标视点之间的目标连线,以形成视点网格;将该视点网格中由该第一视点依次经过除该第一视点和该第二视点之外的其他视点到达该第二视点的多条路径中距离最小的路径确定为该子路径。
需要说明的是,该第一视点和该第二视点可以由人工指定,也可以是该多个目标视点中坐标位置距离最远的两个视点。
步骤211,按照第二预设顺序将每个该相机模型对应的该子路径进行首尾相接,以生成该目标路径。
其中,该第二预设顺序可以是按照每个该相机模型的中心位置,从左(右)至右(左)或者从上(下)至下(上),也可以是根据每个该相机模型对应的多个目标视点的平均视点质量由高(低)至低(高)的顺序,还可以是其他人工指定的顺序。
步骤212,按照该目标路径展示不同的目标视点对应的该三维场景模型。
本步骤中可以生成按照该目标路径展示该三维场景模型的相机路径动画,能够在不同的展示视角下展示监控内容。
示例地,监控视频图像包括6帧图像,每帧图像对应一个相机模型,每个相机模型处获取5个待定视点,从5个待定视点中根据每个待定视点对应的投影区域内包含的三维场景模型的轮廓线的长度确定出3个目标视点,则该6帧图像对应的三维场景模型一共包含18个目标视点。在生成该18个目标视点对应的目标路径时,可以先将每个相机模型对应的3个目标视点生成子路径,然后将6个子路径连接成包括18个目标视点的目标路径,并对该目标路径进行平滑处理,最后按照该目标路径在18个目标视点下展示该三维场景模型,这样,能够在不同的视点上展示该三维场景模型,能够提升该三维场景模型的观看效果,提升用户体验。
上述技术方案,通过获取多个该目标视点之间的目标路径,按照该目标路径展示不同的目标视点对应的该三维场景模型,能够在不同的展示视角下展示监控内容,能够提升监控的立体效果,提升用户体验。
图3是本公开又一示例性实施例示出的一种三维场景模型的展示装置的框图;参见图3,该装置包括:
第一获取模块301,用于获取带有视频纹理的三维场景模型,该三维场景模型由预设视频图像经过三维重建生成;
第一确定模块302,用于确定该预设视频图像中每帧图像对应的相机模型;
第二确定模块303,用于根据确定的该相机模型确定该三维场景模型对应的多个目标视点;
第二获取模块304,获取多个该目标视点之间的目标路径,该目标路径为展示视角在不同的目标视点之间切换时对应的移动轨迹;
展示模块305,用于按照该目标路径展示不同的目标视点对应的该三维场景模型。
上述技术方案,通过第二获取模块304获取多个该目标视点之间的目标路径,通过展示模块305按照该目标路径展示不同的目标视点对应的该三维场景模型,能够在不同的展示视角下展示监控内容,能够提升监控的立体效果,提升用户体验。
图4是本公开又一示例性实施例示出的另一种三维场景模型的展示装置的框图;参见图4,该第二确定模块303包括:
包围球建立子模块3031,用于建立每个该相机模型对应的包围球;
获取子模块3032,用于按照该相机模型的旋转方向在该包围球上获取多个待定视点;
确定子模块3033,用于根据多个该待定视点的视点质量,从多个该待定视点中确定至少一个该目标视点。
可选地,该确定子模块3033用于:
获取每个该待定视点下该三维场景模型的投影区域;
确定该投影区域内包含的该三维场景模型的轮廓线长度,该轮廓线长度用于度量该待定视点的视点质量;
根据多个该待定视点对应的该轮廓线长度确定至少一个该目标视点。
可选地,在每个该相机模型包括一个目标视点的情况下,该第二获取模块304用于:
按照第一预设顺序连接多个该目标视点,生成该目标路径。
可选地,在每个该相机模型包括多个目标视点的情况下,该第二获取模块304,包括:
第一生成子模块3041,用于按照预设方式连接每个该相机模型对应的多个目标视点,以形成每个相机模型对应的子路径;
第二生成子模块3042,用于按照第二预设顺序将每个该相机模型对应的该子路径进行首尾相接,以生成该目标路径。
可选地,该第一生成子模块3041,用于:
获取每个该目标视点对应的轮廓线长度;
按照该轮廓线长度由大至小的顺序,连接每个该相机模型对应的多个目标视点,以形成每个相机模型对应的子路径。
可选地,该第一生成子模块3041,用于:
获取每个该相机模型对应的多个目标视点中的第一视点和第二视点;
生成每个该相机模型对应的多个目标视点中相邻的该目标视点之间的目标连线,以形成视点网格;
将该视点网格中由该第一视点依次经过除该第一视点和该第二视点之外的其他视点到达该第二视点的多条路径中距离最小的路径确定为该子路径。
这样,通过获取多个该目标视点之间的目标路径,按照该目标路径展示不同的目标视点对应的该三维场景模型,能够在不同的展示视角下展示监控内容,能够提升监控显示的立体效果,提升用户体验。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图5是根据一示例性实施例示出的一种电子设备的框图。例如,电子设备500可以被提供为一服务器。参照图5,电子设备500包括处理器522,其数量可以为一个或多个,以及存储器532,用于存储可由处理器522执行的计算机程序。存储器532中存储的计算机程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理器522可以被配置为执行该计算机程序,以执行上述的三维场景模型的展示方法。
另外,电子设备500还可以包括电源组件526和通信组件550,该电源组件526可以被配置为执行电子设备500的电源管理,该通信组件550可以被配置为实现电子设备500的通信,例如,有线或无线通信。此外,该电子设备500还可以包括输入/输出(I/O)接口558。电子设备500可以操作基于存储在存储器532的操作系统,例如Windows ServerTM,Mac OSXTM,UnixTM,LinuxTM等等。
在另一示例性实施例中,还提供了一种包括程序指令的计算机可读存储介质,该程序指令被处理器执行时实现上述的三维场景模型的展示方法的步骤。例如,该计算机可读存储介质可以为上述包括程序指令的存储器532,上述程序指令可由电子设备500的处理器522执行以完成上述的三维场景模型的展示方法。
以上结合附图详细描述了本公开的优选实施方式,但是,本公开并不限于上述实施方式中的具体细节,在本公开的技术构思范围内,可以对本公开的技术方案进行多种简单变型,这些简单变型均属于本公开的保护范围。
另外需要说明的是,在上述具体实施方式中所描述的各个具体技术特征,在不矛盾的情况下,可以通过任何合适的方式进行组合,为了避免不必要的重复,本公开对各种可能的组合方式不再另行说明。
此外,本公开的各种不同的实施方式之间也可以进行任意组合,只要其不违背本公开的思想,其同样应当视为本公开所公开的内容。

Claims (10)

1.一种三维场景模型的展示方法,其特征在于,所述方法包括:
获取带有视频纹理的三维场景模型,所述三维场景模型由预设视频图像经过三维重建生成;
确定所述预设视频图像中每帧图像对应的相机模型;
根据确定的所述相机模型确定所述三维场景模型对应的多个目标视点;
获取多个所述目标视点之间的目标路径,所述目标路径为展示视角在不同的目标视点之间切换时对应的移动轨迹;
按照所述目标路径展示不同的目标视点对应的所述三维场景模型。
2.根据权利要求1所述的方法,其特征在于,所述根据确定的所述相机模型确定所述三维场景模型对应的多个目标视点:
建立每个所述相机模型对应的包围球,所述包围球为所述相机模型的外接球;
按照所述相机模型的旋转方向在所述包围球上获取多个待定视点;
根据多个所述待定视点的视点质量,从多个所述待定视点中确定至少一个所述目标视点。
3.根据权利要求2所述的方法,其特征在于,所述根据多个所述待定视点的视点质量,从多个所述待定视点中确定至少一个所述目标视点,包括:
获取每个所述待定视点下所述三维场景模型的投影区域;
确定所述投影区域内包含的所述三维场景模型的轮廓线长度,所述轮廓线长度用于度量所述待定视点的视点质量;
根据多个所述待定视点对应的所述轮廓线长度确定至少一个所述目标视点。
4.根据权利要求1-3任一项所述的方法,其特征在于,在每个所述相机模型包括一个目标视点的情况下,所述获取多个所述目标视点之间的目标路径包括:
按照第一预设顺序连接多个所述目标视点,生成所述目标路径。
5.根据权利要求1-3任一项所述的方法,其特征在于,在每个所述相机模型包括多个目标视点的情况下,所述获取多个所述目标视点之间的目标路径,包括:
按照预设方式连接每个所述相机模型对应的多个目标视点,以形成每个相机模型对应的子路径;
按照第二预设顺序将每个所述相机模型对应的所述子路径进行首尾相接,以生成所述目标路径。
6.根据权利要求5所述的方法,其特征在于,所述按照预设方式连接每个所述相机模型对应的多个目标视点,以形成每个相机模型对应的子路径,包括:
获取每个所述目标视点对应的轮廓线长度;
按照所述轮廓线长度由大至小的顺序,连接每个所述相机模型对应的多个目标视点,以形成每个相机模型对应的子路径。
7.根据权利要求5所述的方法,其特征在于,所述按照预设方式连接每个所述相机模型对应的多个目标视点,以形成每个相机模型对应的子路径,包括:
获取每个所述相机模型对应的多个目标视点中的第一视点和第二视点;
生成每个所述相机模型对应的多个目标视点中相邻的所述目标视点之间的目标连线,以形成视点网格;
将所述视点网格中由所述第一视点依次经过除所述第一视点和所述第二视点之外的其他视点到达所述第二视点的多条路径中距离最小的路径确定为所述子路径。
8.一种三维场景模型的展示装置,其特征在于,所述装置包括:
第一获取模块,用于获取带有视频纹理的三维场景模型,所述三维场景模型由预设视频图像经过三维重建生成;
第一确定模块,用于确定所述预设视频图像中每帧图像对应的相机模型;
第二确定模块,用于根据确定的所述相机模型确定所述三维场景模型对应的多个目标视点;
第二获取模块,获取多个所述目标视点之间的目标路径,所述目标路径为展示视角在不同的目标视点之间切换时对应的移动轨迹;
展示模块,用于按照所述目标路径展示不同的目标视点对应的所述三维场景模型。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-7中任一项所述方法的步骤。
10.一种电子设备,其特征在于,包括:
存储器,其上存储有计算机程序;
处理器,用于执行所述存储器中的所述计算机程序,以实现权利要求1-7中任一项所述方法的步骤。
CN202010108550.0A 2020-02-21 2020-02-21 三维场景模型的展示方法、装置、存储介质及电子设备 Active CN111294584B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010108550.0A CN111294584B (zh) 2020-02-21 2020-02-21 三维场景模型的展示方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010108550.0A CN111294584B (zh) 2020-02-21 2020-02-21 三维场景模型的展示方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN111294584A CN111294584A (zh) 2020-06-16
CN111294584B true CN111294584B (zh) 2020-11-20

Family

ID=71025399

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010108550.0A Active CN111294584B (zh) 2020-02-21 2020-02-21 三维场景模型的展示方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN111294584B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112116719B (zh) * 2020-08-28 2024-05-10 北京五一视界数字孪生科技股份有限公司 三维场景中对象的确定方法、装置、存储介质和电子设备
CN112235559B (zh) * 2020-10-14 2021-09-14 贝壳找房(北京)科技有限公司 用于生成视频的方法、装置和系统
CN114827574A (zh) * 2022-04-26 2022-07-29 北京城市网邻信息技术有限公司 图像处理方法及装置、电子设备及存储介质
CN114900679B (zh) * 2022-05-25 2023-11-21 安天科技集团股份有限公司 一种三维模型展示方法、装置、电子设备及可读存储介质
CN115599276A (zh) * 2022-12-13 2023-01-13 深圳鹏锐信息技术股份有限公司(Cn) 基于人工智能ai三维模型展示方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103136739A (zh) * 2011-11-29 2013-06-05 北京航天长峰科技工业集团有限公司 一种复杂场景下可控摄像机监控视频与三维模型配准方法
CN107341846A (zh) * 2017-06-21 2017-11-10 华中科技大学 一种实时显示大规模三维重建场景的方法及设备
CN109791696A (zh) * 2016-08-24 2019-05-21 苏黎世大学 利用事件摄像机同时进行定位和映射

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9070402B2 (en) * 2006-03-13 2015-06-30 Autodesk, Inc. 3D model presentation system with motion and transitions at each camera view point of interest (POI) with imageless jumps to each POI
JP5442111B2 (ja) * 2009-05-21 2014-03-12 インテル・コーポレーション 画像から高速に立体構築を行なう方法
CN107204045A (zh) * 2017-05-11 2017-09-26 青岛大学附属医院 基于ct图像的虚拟内窥镜系统
CN108564616B (zh) * 2018-03-15 2020-09-01 中国科学院自动化研究所 快速鲁棒的rgb-d室内三维场景重建方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103136739A (zh) * 2011-11-29 2013-06-05 北京航天长峰科技工业集团有限公司 一种复杂场景下可控摄像机监控视频与三维模型配准方法
CN109791696A (zh) * 2016-08-24 2019-05-21 苏黎世大学 利用事件摄像机同时进行定位和映射
CN107341846A (zh) * 2017-06-21 2017-11-10 华中科技大学 一种实时显示大规模三维重建场景的方法及设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
以目标为中心的MCRBR视点空间投影方法;于吉红;《计算机应用与软件》;20130411;全文 *

Also Published As

Publication number Publication date
CN111294584A (zh) 2020-06-16

Similar Documents

Publication Publication Date Title
CN111294584B (zh) 三维场景模型的展示方法、装置、存储介质及电子设备
US10474227B2 (en) Generation of virtual reality with 6 degrees of freedom from limited viewer data
US11902577B2 (en) Three-dimensional data encoding method, three-dimensional data decoding method, three-dimensional data encoding device, and three-dimensional data decoding device
US20200250798A1 (en) Three-dimensional model encoding device, three-dimensional model decoding device, three-dimensional model encoding method, and three-dimensional model decoding method
Koyama et al. Live mixed-reality 3d video in soccer stadium
US10499033B2 (en) Apparatus, a method and a computer program for coding and rendering volumetric video
US20140340404A1 (en) Method and apparatus for generating 3d free viewpoint video
WO2020098530A1 (zh) 画面渲染方法和装置、存储介质及电子装置
BR102017010904A2 (pt) Método, aparelho e fluxo para formato de vídeo imersivo
CN110869980A (zh) 用于将内容分发和呈现为球形视频和3d资产组合的系统和方法
CN103345771A (zh) 一种基于建模的图像高效渲染方法
CN108805979A (zh) 一种动态模型三维重建方法、装置、设备和存储介质
CN107945231A (zh) 一种三维视频播放方法及装置
CN107707899B (zh) 包含运动目标的多视角图像处理方法、装置及电子设备
US20220383476A1 (en) Apparatus and method for evaluating a quality of image capture of a scene
WO2022098606A1 (en) Deferred neural rendering for view extrapolation
CN116188689A (zh) 辐射场的处理方法、存储介质以及计算机终端
CN114549289A (zh) 图像处理方法、装置、电子设备和计算机存储介质
CN116109684A (zh) 面向变电场站在线视频监测二三维数据映射方法及装置
Taguchi et al. Real-time all-in-focus video-based rendering using a network camera array
CN114863014A (zh) 一种三维模型的融合显示方法及设备
CN111508058A (zh) 图像三维重建的方法、装置、存储介质及电子设备
Kwak et al. View synthesis with sparse light field for 6DoF immersive video
CN113793392A (zh) 一种相机参数标定方法及装置
CN113542721B (zh) 深度图处理方法、视频重建方法及相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Room 307, 3 / F, supporting public building, Mantingfangyuan community, qingyanli, Haidian District, Beijing 100086

Patentee after: Beijing Wuyi Vision digital twin Technology Co.,Ltd.

Address before: Room 307, 3 / F, supporting public building, Mantingfangyuan community, qingyanli, Haidian District, Beijing 100086

Patentee before: DANGJIA MOBILE GREEN INTERNET TECHNOLOGY GROUP Co.,Ltd.