CN114419286A - 一种全景漫游方法、装置、电子设备及存储介质 - Google Patents

一种全景漫游方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114419286A
CN114419286A CN202111523115.5A CN202111523115A CN114419286A CN 114419286 A CN114419286 A CN 114419286A CN 202111523115 A CN202111523115 A CN 202111523115A CN 114419286 A CN114419286 A CN 114419286A
Authority
CN
China
Prior art keywords
point
panoramic
color value
panorama
dimensional model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111523115.5A
Other languages
English (en)
Inventor
刘玉丹
何龙兴
卢健智
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong 3vjia Information Technology Co Ltd
Original Assignee
Guangdong 3vjia Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong 3vjia Information Technology Co Ltd filed Critical Guangdong 3vjia Information Technology Co Ltd
Priority to CN202111523115.5A priority Critical patent/CN114419286A/zh
Publication of CN114419286A publication Critical patent/CN114419286A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2012Colour editing, changing, or manipulating; Use of colour codes

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Architecture (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Studio Devices (AREA)

Abstract

本申请提供了一种全景漫游方法、装置、电子设备及存储介质,属于虚拟现实技术领域。本申请通过获取目标方案对应的三维模型及所述三维模型对应的全景点集合;在由所述全景点集合中任一第一全景点漫游至所述全景点集合中任一第二全景点时,确定所述第一全景点对应的第一颜色值和所述第一全景点的第一位置,以及,确定所述第二全景点对应第二颜色值和所述第二全景点的第二位置;针对漫游过程中的任一移动点,基于所述第一颜色值、所述第二颜色值、所述第一位置与所述第二位置的第一距离,以及,所述移动点与所述第二位置的第二距离,确定所述移动点对应的目标颜色值;利用所述目标颜色值对三维模型的顶点在显示屏幕上对应的目标坐标点进行着色。

Description

一种全景漫游方法、装置、电子设备及存储介质
技术领域
本申请涉及虚拟现实技术领域,尤其涉及一种全景漫游方法、装置、电子设备及存储介质。
背景技术
在线家装领域中,全景图是一种常用的表现手段,目前一般通过包括至少两个摄像头的全景摄像装置拍摄空间,其中所有摄像头镜头的视角之和形成大于或等于360度的球面视角,然后将拍摄到的图像传输至图像处理终端,利用处理软件对不同摄像头拍摄的画面进行修饰,使不同摄像头拍摄的画面实现平滑结合,生成360度全景画面。然而,由于实现全景漫游的全景图是2D图片,没有空间的三维数据,缺乏场景全局的展示,空间感不强,场景切换过程比较突兀,并且,切换点浮动在全景图上面,没有真实场景的遮挡效果,用户体验较差。
发明内容
本申请实施例的目的在于提供一种全景漫游方法、装置、电子设备及存储介质,以解决目前全景漫游时空间感不强及场景切换过程突兀的问题。具体技术方案如下:
第一方面,提供了一种全景漫游方法,所述方法包括:
获取目标方案对应的三维模型及所述三维模型对应的全景点集合,所述全景点集合包括多个全景点及多个所述全景点对应的全景图;
在由所述全景点集合中任一第一全景点漫游至所述全景点集合中任一第二全景点时,确定所述第一全景点对应的全景图的第一颜色值和所述第一全景点在所述三维模型中的第一位置,以及,确定所述第二全景点对应的全景图的第二颜色值和所述第二全景点在所述三维模型中的第二位置;
针对漫游过程中的任一移动点,基于所述第一颜色值、所述第二颜色值、所述第一位置与所述第二位置的第一距离,以及,所述移动点与所述第二位置的第二距离,确定所述移动点对应的目标颜色值;
利用所述目标颜色值对目标屏幕点进行着色,其中,所述目标屏幕点为所述三维模型的顶点在显示屏幕上对应的目标坐标点。
在一个可能的实施方式中,所述基于所述第一颜色值、所述第二颜色值、所述第一位置与所述第二位置的第一距离,以及,所述移动点与所述第二位置的第二距离,确定所述移动点对应的目标颜色值,包括:
确定所述第二距离与所述第一距离的第一比例,以及,基于所述第一比例确定第二比例,所述第一比例与所述第二比例的和为一;
将所述第一比例与所述第一颜色值的乘积,和,所述第二比例与所述第二颜色值的乘积的和,确定为所述移动点对应的目标颜色值。
在一个可能的实施方式中,所述方法还包括:
获取所述三维模型的顶点对应的UV坐标;
针对于所述全景点集合中任一全景点,获取所述全景点对应的全景图的图片纹理;
将所述UV坐标和所述图片纹理输入至预设处理模型中,以使所述预设处理模型输出所述全景图对应的颜色值。
在一个可能的实施方式中,所述获取所述三维模型的顶点对应的UV坐标,包括:
获取所述三维模型的顶点对应的物理坐标、相机坐标及所述三维模型对应的模型世界矩阵;
将所述物理坐标与所述模型世界矩阵相乘,得到所述顶点对应的世界坐标;
将所述世界坐标减所述相机坐标,得到目标向量;
将所述目标向量取反得到所述顶点对应的UV坐标。
在一个可能的实施方式中,所述方法还包括:
获取所述三维模型对应的相机投影矩阵、模型世界矩阵及所述三维模型的顶点对应的物理坐标;
将所述相机投影矩阵与所述模型世界矩阵相乘,得到转换矩阵;
将所述物理坐标与所述转换矩阵相乘,得到所述目标坐标点。
第二方面,提供了一种全景漫游装置,所述装置包括:
获取模块,用于获取目标方案对应的三维模型及所述三维模型对应的全景点集合,所述全景点集合包括多个全景点及多个所述全景点对应的全景图;
第一确定模块,用于在由所述全景点集合中任一第一全景点漫游至所述全景点集合中任一第二全景点时,确定所述第一全景点对应的全景图的第一颜色值和所述第一全景点在所述三维模型中的第一位置,以及,确定所述第二全景点对应的全景图的第二颜色值和所述第二全景点在所述三维模型中的第二位置;
第二确定模块,用于针对漫游过程中的任一移动点,基于所述第一颜色值、所述第二颜色值、所述第一位置与所述第二位置的第一距离,以及,所述移动点与所述第二位置的第二距离,确定所述移动点对应的目标颜色值;
着色模块,用于利用所述目标颜色值对目标屏幕点进行着色,其中,所述目标屏幕点为所述三维模型的顶点在显示屏幕上对应的目标坐标点。
在一个可能的实施方式中,所述第二确定模块,具体用于:
确定所述第二距离与所述第一距离的第一比例,以及,基于所述第一比例确定第二比例,所述第一比例与所述第二比例的和为一;
将所述第一比例与所述第一颜色值的乘积,和,所述第二比例与所述第二颜色值的乘积的和,确定为所述移动点对应的目标颜色值。
在一个可能的实施方式中,所述装置还包括输入模块,所述输入模块,用于:
获取所述三维模型的顶点对应的UV坐标;
针对于所述全景点集合中任一全景点,获取所述全景点对应的全景图的图片纹理;
将所述UV坐标和所述图片纹理输入至预设处理模型中,以使所述预设处理模型输出所述全景图对应的颜色值。
在一个可能的实施方式中,所述输入模块,还用于:
获取所述三维模型的顶点对应的物理坐标、相机坐标及所述三维模型对应的模型世界矩阵;
将所述物理坐标与所述模型世界矩阵相乘,得到所述顶点对应的世界坐标;
将所述世界坐标减所述相机坐标,得到目标向量;
将所述目标向量取反得到所述顶点对应的UV坐标。
在一个可能的实施方式中,所述装置还包括转换模块,所述转换模块,用于:
获取所述三维模型对应的相机投影矩阵、模型世界矩阵及所述三维模型的顶点对应的物理坐标;
将所述相机投影矩阵与所述模型世界矩阵相乘,得到转换矩阵;
将所述物理坐标与所述转换矩阵相乘,得到所述目标坐标点。
第三方面,提供了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现第一方面任一所述的方法步骤。
第四方面,提供了一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现第一方面任一所述的方法步骤。
第五方面,提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的全景漫游方法。
本申请实施例有益效果:
本申请实施例提供了一种全景漫游方法、装置、电子设备及存储介质,本申请中,首先,利用设计方案对应的三维模型实现全景漫游,可以增加全景漫游过程中的空间感,并且,三维场景下,场景中的物体可以遮挡切换点,实现真实场景的遮挡效果。另外,针对三维模型中任意两个全景点之间的移动点,利用两个全景点对应的全景图的颜色值及该移动点与全景点之间的距离确定颜色值,进而利用该颜色值为屏幕点进行着色,从而实现在两个全景点之间漫游时,随着漫游位置的改变屏幕点的颜色也相应变化,达到从视觉上感受到在两个全景点之间漫游的过程。
当然,实施本申请的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种全景漫游方法的流程图;
图2为本申请另一实施例提供的一种全景漫游方法的流程图;
图3为本申请另一实施例提供的一种全景漫游方法的流程图;
图4为本申请实施例提供的一种全景漫游处理的流程图;
图5为本申请实施例提供的一种全景漫游装置的结构示意图;
图6为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
由于,目前实现全景漫游的全景图是2D图片,没有空间的三维数据,缺乏场景全局的展示,空间感不强,场景切换过程比较突兀,并且,切换点浮动在全景图上面,没有真实场景的遮挡效果,用户体验较差,为此,本申请实施例提供了一种全景漫游方法,可以应用于实现全景漫游的平台系统。
下面将结合具体实施方式,对本申请实施例提供的一种全景漫游方法进行详细的说明,如图1所示,具体步骤如下:
S101,获取目标方案对应的三维模型及所述三维模型对应的全景点集合,所述全景点集合包括多个全景点及多个所述全景点对应的全景图。
本申请实施例提供的全景漫游方法,可以应用于实现全景漫游的平台系统,该平台系统中包括3D设计软件,可以通过将家装设计方案输入至该3D设计软件,以由3D设计软件输出3D设计模型,该平台系统还包括渲染器,可以通过将3D设计模型输入至该渲染器,已由渲染器输出所有全景点和每个全景点对应的全景图。
在本申请实施例中,目标方案为家装设计方案,三维模型为目标方案对应的3D设计模型,三维模型对应的所有全景点和每个全景点对应的全景图构成全景点集合。
具体地,当用户输入目标方案,系统即可利用3D设计软件输出与目标方案对应的三维模型,进而利用渲染器输出三维模型对应的全景点集合。
S102,在由所述全景点集合中任一第一全景点漫游至所述全景点集合中任一第二全景点时,确定所述第一全景点对应的全景图的第一颜色值和所述第一全景点在所述三维模型中的第一位置,以及,确定所述第二全景点对应的全景图的第二颜色值和所述第二全景点在所述三维模型中的第二位置。
在本申请实施例中,在由该全景点集合中任一第一全景点漫游至该全景点集合中任一第二全景点时,针对第一全景点,确定其对应的全景图的第一颜色值及其在三维模型中的第一位置,第一位置即相机拍摄第一全景点对应的全景图时的相机拍摄位置;针对第二全景点,确定其对应的全景图的第二颜色值及其在三维模型中的第二位置,第二位置即相机拍摄第二全景点对应的全景图时的相机拍摄位置。
S103,针对漫游过程中的任一移动点,基于所述第一颜色值、所述第二颜色值、所述第一位置与所述第二位置的第一距离,以及,所述移动点与所述第二位置的第二距离,确定所述移动点对应的目标颜色值。
在本申请实施例中,移动点为相机由第一全景点漫游至第二全景点过程中经过的位置点,在由该全景点集合中任一第一全景点漫游至该全景点集合中任一第二全景点的过程中包括多个移动点。
针对每个移动点,可以基于第一颜色值、第二颜色值、第一位置与第二位置的第一距离,以及,该移动点与第二位置的第二距离,确定移动点对应的目标颜色值。
可以理解的是,当移动点与第一全景点重合时,第一全景点对应第一颜色值为目标颜色值,同理,当移动点与第二全景点重合时,第二全景点对应的第二颜色值为目标颜色值。
S104,利用所述目标颜色值对目标屏幕点进行着色,其中,所述目标屏幕点为所述三维模型的顶点在显示屏幕上对应的目标坐标点。
在本申请实施例中,目标屏幕点为三维模型的顶点在显示屏幕上对应的目标坐标点。确定移动点对应的目标颜色值后,即可利用该目标颜色值对目标屏幕点进行着色。
本申请实施例中,首先,利用设计方案对应的三维模型实现全景漫游,可以增加全景漫游过程中的空间感,并且,三维场景下,场景中的物体可以遮挡切换点,实现真实场景的遮挡效果。另外,针对三维模型中任意两个全景点之间的移动点,利用两个全景点对应的全景图的颜色值及该移动点与全景点之间的距离确定颜色值,进而利用该颜色值为屏幕点进行着色,从而实现在两个全景点之间漫游时,随着漫游位置的改变屏幕点的颜色也相应变化,达到从视觉上感受到在两个全景点之间漫游的过程。
在本申请又一实施例中,所述S103,可以包括以下步骤:
步骤一,确定所述第二距离与所述第一距离的第一比例,以及,基于所述第一比例确定第二比例,所述第一比例与所述第二比例的和为一。
步骤二,将所述第一比例与所述第一颜色值的乘积,和,所述第二比例与所述第二颜色值的乘积的和,确定为所述移动点对应的目标颜色值。
在本申请实施例中,系统可以确定第二距离与第一距离的第一比例,并利用一减第一比例得到第二比例,即,第一比例与第二比例的和为一。进而利用第一比例和第二比例融合第一颜色值和第二颜色值得到目标颜色值,融合过程具体为,将第一比例与第一颜色值的乘积,和,第二比例与第二颜色值的乘积的和,确定为移动点对应的目标颜色值。
例如,第一位置与第二位置的第一距离为10,移动点与第二位置的第二距离8,则第一比例为0.8,第二比例为0.2,则目标颜色值=第一颜色值*0.8+第二颜色值*0.2。
其中,确定所述第二距离与所述第一距离的第一比例的具体实现过程为:以相机从全景点1移动到全景点2的距离为匀速移动到点2的时间,根据帧频计算刷新相机到全景点2的比例(rate)=相机当前位于的移动点到全景点2的距离/第一距离。从而可以提高计算效率。
本申请实施例中,针对于两个全景点之间的移动点,根据移动点与两个全景点之间距离的比例融合两个全景点对应的颜色值,得到移动点对应的目标颜色值,使移动过程中产生颜色渐变的效果,场景过渡效果自然,让用户的全景漫游体验更加真实。
在本申请又一实施例中,如图2所示,所述方法还可以包括以下步骤:
S201,获取所述三维模型的顶点对应的UV坐标。
S202,针对于所述全景点集合中任一全景点,获取所述全景点对应的全景图的图片纹理。
S203,将所述UV坐标和所述图片纹理输入至预设处理模型中,以使所述预设处理模型输出所述全景图对应的颜色值。
在本申请实施例中,预设处理模型中可以内置二维纹理纹理处理类(texture2D)函数。针对于全景点集合中任一全景点,将其对应的全景图的图片纹理,及三维模型的顶点对应的UV坐标,输入至该预设处理模型,已由预设处理模型输出该全景图对应的颜色值。
其中,S201中,获取所述三维模型的顶点对应的UV坐标的具体实现过程为:获取所述三维模型的顶点对应的物理坐标、相机坐标及所述三维模型对应的模型世界矩阵;将所述物理坐标与所述模型世界矩阵相乘,得到所述顶点对应的世界坐标;将所述世界坐标减所述相机坐标,得到目标向量;将所述目标向量取反得到所述顶点对应的UV坐标。
其中,为了符合系统计算要求,可以预先将三维模型的顶点对应的物理坐标转换为四维坐标后,进行计算。
通过本方案,系统可以根据三维模型的顶点对应的坐标及全景点对应的全景图的图片纹理,确定每个全景点对应的图片的颜色值,进而根据两个全景点对应的图片的颜色值,确定两者之间的移动点对应的颜色值,提高用户在全景漫游时的视觉体验。
在本申请又一实施例中,如图3所示,所述方法还可以包括以下步骤:
S301,获取所述三维模型对应的相机投影矩阵、模型世界矩阵及所述三维模型的顶点对应的物理坐标。
S302,将所述相机投影矩阵与所述模型世界矩阵相乘,得到转换矩阵。
S303,将所述物理坐标与所述转换矩阵相乘,得到所述目标坐标点。
在本申请实施例中,相机投影矩阵与模型世界矩阵可以预先通过计算得到。将相机投影矩阵与模型世界矩阵相乘,可以得到将坐标由物理坐标系转换为屏幕坐标系的转换矩阵,将三维模型的顶点对应的物理坐标与给转换矩阵相乘,即可得到该顶点在显示屏幕中对应的目标坐标点。通过该方案可以快速定位三维模型顶点对应的目标屏幕点。
可选地,本申请又一实施例中,如图4所示,提供了一种全景漫游的处理流程,具体流程如下。
首先,将模型顶点坐标转换成四维坐标,通过模型世界矩阵将四维坐标转换为世界坐标。
然后,针对于全景点1对应的全景图1,利用模型顶点世界坐标减相机拍摄全景图1时对应的相机坐标点1,得到向量(v_targetUv),基于v_targetUv和全景图1对应的图片纹理(cubetexture),使用函数texture2D(cubetexture,v_targetUv),得到全景图1对应的颜色值1。
针对于全景点2对应的全景图2,利用与全景图1相同的过程,得到全景图2对应的颜色值2。
在由全景点1漫游至全景点2(即,当相机由全景点1移动至全景点2)的过程中,根据相机与全景点2的距离,和,全景点1与全景点2的距离,得到距离比例,基于颜色值1、颜色值2以及距离比例,利用混合函数mix混合颜色值1和颜色值2,得到融合颜色值(即目标颜色值)。
另外,通过相机投影矩阵乘模型世界矩阵得到模型显示在屏幕上的屏幕点矩阵(即转换矩阵),利用模型顶点的物理坐标乘屏幕点矩阵,即可得到模型顶点对应的目标屏幕点。
最后,利用融合颜色值对目标屏幕点进行着色。
本申请实施例中,相机在任意两个全景点之间的移动时,利用两个全景点对应的全景图的颜色值及相机所在位置点与全景点之间的距离确定颜色值,进而利用该颜色值为屏幕点进行着色,从而实现在两个全景点之间漫游时,随着漫游位置的改变屏幕点的颜色也相应变化,达到从视觉上感受到在两个全景点之间漫游的过程。
基于相同的技术构思,本申请实施例还提供了一种全景漫游装置,如图5所示,该装置包括:
获取模块501,用于获取目标方案对应的三维模型及所述三维模型对应的全景点集合,所述全景点集合包括多个全景点及多个所述全景点对应的全景图;
第一确定模块502,用于在由所述全景点集合中任一第一全景点漫游至所述全景点集合中任一第二全景点时,确定所述第一全景点对应的全景图的第一颜色值和所述第一全景点在所述三维模型中的第一位置,以及,确定所述第二全景点对应的全景图的第二颜色值和所述第二全景点在所述三维模型中的第二位置;
第二确定模块503,用于针对漫游过程中的任一移动点,基于所述第一颜色值、所述第二颜色值、所述第一位置与所述第二位置的第一距离,以及,所述移动点与所述第二位置的第二距离,确定所述移动点对应的目标颜色值;
着色模块504,用于利用所述目标颜色值对目标屏幕点进行着色,其中,所述目标屏幕点为所述三维模型的顶点在显示屏幕上对应的目标坐标点。
在一个可能的实施方式中,所述第二确定模块,具体用于:
确定所述第二距离与所述第一距离的第一比例,以及,基于所述第一比例确定第二比例,所述第一比例与所述第二比例的和为一;
将所述第一比例与所述第一颜色值的乘积,和,所述第二比例与所述第二颜色值的乘积的和,确定为所述移动点对应的目标颜色值。
在一个可能的实施方式中,所述装置还包括输入模块,所述输入模块,用于:
获取所述三维模型的顶点对应的UV坐标;
针对于所述全景点集合中任一全景点,获取所述全景点对应的全景图的图片纹理;
将所述UV坐标和所述图片纹理输入至预设处理模型中,以使所述预设处理模型输出所述全景图对应的颜色值。
在一个可能的实施方式中,所述输入模块,还用于:
获取所述三维模型的顶点对应的物理坐标、相机坐标及所述三维模型对应的模型世界矩阵;
将所述物理坐标与所述模型世界矩阵相乘,得到所述顶点对应的世界坐标;
将所述世界坐标减所述相机坐标,得到目标向量;
将所述目标向量取反得到所述顶点对应的UV坐标。
在一个可能的实施方式中,所述装置还包括转换模块,所述转换模块,用于:
获取所述三维模型对应的相机投影矩阵、模型世界矩阵及所述三维模型的顶点对应的物理坐标;
将所述相机投影矩阵与所述模型世界矩阵相乘,得到转换矩阵;
将所述物理坐标与所述转换矩阵相乘,得到所述目标坐标点。
本申请实施例中,首先,利用设计方案对应的三维模型实现全景漫游,可以增加全景漫游过程中的空间感,并且,三维场景下,场景中的物体可以遮挡切换点,实现真实场景的遮挡效果。另外,针对三维模型中任意两个全景点之间的移动点,利用两个全景点对应的全景图的颜色值及该移动点与全景点之间的距离确定颜色值,进而利用该颜色值为屏幕点进行着色,从而实现在两个全景点之间漫游时,随着漫游位置的改变屏幕点的颜色也相应变化,达到从视觉上感受到在两个全景点之间漫游的过程。
基于相同的技术构思,本申请实施例还提供了一种电子设备,如图6所示,包括处理器111、通信接口112、存储器113和通信总线114,其中,处理器111,通信接口112,存储器113通过通信总线114完成相互间的通信,
存储器113,用于存放计算机程序;
处理器111,用于执行存储器113上所存放的程序时,实现如下步骤:
获取目标方案对应的三维模型及所述三维模型对应的全景点集合,所述全景点集合包括多个全景点及多个所述全景点对应的全景图;
在由所述全景点集合中任一第一全景点漫游至所述全景点集合中任一第二全景点时,确定所述第一全景点对应的全景图的第一颜色值和所述第一全景点在所述三维模型中的第一位置,以及,确定所述第二全景点对应的全景图的第二颜色值和所述第二全景点在所述三维模型中的第二位置;
针对漫游过程中的任一移动点,基于所述第一颜色值、所述第二颜色值、所述第一位置与所述第二位置的第一距离,以及,所述移动点与所述第二位置的第二距离,确定所述移动点对应的目标颜色值;
利用所述目标颜色值对目标屏幕点进行着色,其中,所述目标屏幕点为所述三维模型的顶点在显示屏幕上对应的目标坐标点。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本申请提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一全景漫游方法的步骤。
在本申请提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一全景漫游方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本申请的具体实施方式,使本领域技术人员能够理解或实现本申请。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种全景漫游方法,其特征在于,所述方法包括:
获取目标方案对应的三维模型及所述三维模型对应的全景点集合,所述全景点集合包括多个全景点及多个所述全景点对应的全景图;
在由所述全景点集合中任一第一全景点漫游至所述全景点集合中任一第二全景点时,确定所述第一全景点对应的全景图的第一颜色值和所述第一全景点在所述三维模型中的第一位置,以及,确定所述第二全景点对应的全景图的第二颜色值和所述第二全景点在所述三维模型中的第二位置;
针对漫游过程中的任一移动点,基于所述第一颜色值、所述第二颜色值、所述第一位置与所述第二位置的第一距离,以及,所述移动点与所述第二位置的第二距离,确定所述移动点对应的目标颜色值;
利用所述目标颜色值对目标屏幕点进行着色,其中,所述目标屏幕点为所述三维模型的顶点在显示屏幕上对应的目标坐标点。
2.根据权利要求1所述的方法,其特征在于,所述基于所述第一颜色值、所述第二颜色值、所述第一位置与所述第二位置的第一距离,以及,所述移动点与所述第二位置的第二距离,确定所述移动点对应的目标颜色值,包括:
确定所述第二距离与所述第一距离的第一比例,以及,基于所述第一比例确定第二比例,所述第一比例与所述第二比例的和为一;
将所述第一比例与所述第一颜色值的乘积,和,所述第二比例与所述第二颜色值的乘积的和,确定为所述移动点对应的目标颜色值。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述三维模型的顶点对应的UV坐标;
针对于所述全景点集合中任一全景点,获取所述全景点对应的全景图的图片纹理;
将所述UV坐标和所述图片纹理输入至预设处理模型中,以使所述预设处理模型输出所述全景图对应的颜色值。
4.根据权利要求3所述的方法,其特征在于,所述获取所述三维模型的顶点对应的UV坐标,包括:
获取所述三维模型的顶点对应的物理坐标、相机坐标及所述三维模型对应的模型世界矩阵;
将所述物理坐标与所述模型世界矩阵相乘,得到所述顶点对应的世界坐标;
将所述世界坐标减所述相机坐标,得到目标向量;
将所述目标向量取反得到所述顶点对应的UV坐标。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述三维模型对应的相机投影矩阵、模型世界矩阵及所述三维模型的顶点对应的物理坐标;
将所述相机投影矩阵与所述模型世界矩阵相乘,得到转换矩阵;
将所述物理坐标与所述转换矩阵相乘,得到所述目标坐标点。
6.一种全景漫游装置,其特征在于,所述装置包括:
获取模块,用于获取目标方案对应的三维模型及所述三维模型对应的全景点集合,所述全景点集合包括多个全景点及多个所述全景点对应的全景图;
第一确定模块,用于在由所述全景点集合中任一第一全景点漫游至所述全景点集合中任一第二全景点时,确定所述第一全景点对应的全景图的第一颜色值和所述第一全景点在所述三维模型中的第一位置,以及,确定所述第二全景点对应的全景图的第二颜色值和所述第二全景点在所述三维模型中的第二位置;
第二确定模块,用于针对漫游过程中的任一移动点,基于所述第一颜色值、所述第二颜色值、所述第一位置与所述第二位置的第一距离,以及,所述移动点与所述第二位置的第二距离,确定所述移动点对应的目标颜色值;
着色模块,用于利用所述目标颜色值对目标屏幕点进行着色,其中,所述目标屏幕点为所述三维模型的顶点在显示屏幕上对应的目标坐标点。
7.根据权利要求6所述的装置,其特征在于,所述第二确定模块,具体用于:
确定所述第二距离与所述第一距离的第一比例,以及,基于所述第一比例确定第二比例,所述第一比例与所述第二比例的和为一;
将所述第一比例与所述第一颜色值的乘积,和,所述第二比例与所述第二颜色值的乘积的和,确定为所述移动点对应的目标颜色值。
8.根据权利要求6所述的装置,其特征在于,所述装置还包括输入模块,所述输入模块,用于:
获取所述三维模型的顶点对应的UV坐标;
针对于所述全景点集合中任一全景点,获取所述全景点对应的全景图的图片纹理;
将所述UV坐标和所述图片纹理输入至预设处理模型中,以使所述预设处理模型输出所述全景图对应的颜色值。
9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-5任一所述的方法步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-5任一所述的方法步骤。
CN202111523115.5A 2021-12-13 2021-12-13 一种全景漫游方法、装置、电子设备及存储介质 Pending CN114419286A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111523115.5A CN114419286A (zh) 2021-12-13 2021-12-13 一种全景漫游方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111523115.5A CN114419286A (zh) 2021-12-13 2021-12-13 一种全景漫游方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN114419286A true CN114419286A (zh) 2022-04-29

Family

ID=81266038

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111523115.5A Pending CN114419286A (zh) 2021-12-13 2021-12-13 一种全景漫游方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114419286A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117934700A (zh) * 2023-11-15 2024-04-26 广州极点三维信息科技有限公司 基于神经渲染的三维家居漫游场景重建方法、系统及介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117934700A (zh) * 2023-11-15 2024-04-26 广州极点三维信息科技有限公司 基于神经渲染的三维家居漫游场景重建方法、系统及介质

Similar Documents

Publication Publication Date Title
CN111127655B (zh) 房屋户型图的构建方法及构建装置、存储介质
CN108665536B (zh) 三维与实景数据可视化方法、装置与计算机可读存储介质
CN107223269B (zh) 三维场景定位方法和装置
US11330172B2 (en) Panoramic image generating method and apparatus
CN109587477B (zh) 一种图像采集设备选择方法、装置、电子设备及存储介质
US20170186219A1 (en) Method for 360-degree panoramic display, display module and mobile terminal
CN109771951B (zh) 游戏地图生成的方法、装置、存储介质和电子设备
CN108939556B (zh) 一种基于游戏平台的截图方法及装置
CN114531553B (zh) 生成特效视频的方法、装置、电子设备及存储介质
CN114895796B (zh) 一种基于全景图的空间交互方法、装置及应用
CN112581632B (zh) 一种房源数据的处理方法和装置
CN108174178A (zh) 一种图像显示方法、装置及虚拟现实设备
CN112734896A (zh) 环境遮蔽渲染方法、装置、存储介质及电子设备
CN116109684A (zh) 面向变电场站在线视频监测二三维数据映射方法及装置
CN111862342B (zh) 增强现实的纹理处理方法、装置、电子设备及存储介质
CN110548289B (zh) 一种三维控件显示的方法和装置
CN110378948B (zh) 3d模型重建方法、装置及电子设备
CN114419286A (zh) 一种全景漫游方法、装置、电子设备及存储介质
CN114782611B (zh) 图像处理方法、装置、存储介质和电子设备
CN113674356B (zh) 相机筛选方法及相关装置
CN114928718A (zh) 视频监控方法、装置、电子设备及存储介质
CN115311414A (zh) 基于数字孪生的实景渲染方法、装置及相关设备
CN111970504A (zh) 利用虚拟投影反向模拟三维球体的展示方法、装置和系统
CN111949173B (zh) 一种全景vr画面切换方法、装置、终端设备及存储介质
WO2024152678A1 (zh) 人体深度图的生成方法、装置、电子设备、存储介质及计算机程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination