CN101605211A - 将虚拟三维建筑与现实环境实拍视频无缝合成的方法 - Google Patents

将虚拟三维建筑与现实环境实拍视频无缝合成的方法 Download PDF

Info

Publication number
CN101605211A
CN101605211A CNA2009101011159A CN200910101115A CN101605211A CN 101605211 A CN101605211 A CN 101605211A CN A2009101011159 A CNA2009101011159 A CN A2009101011159A CN 200910101115 A CN200910101115 A CN 200910101115A CN 101605211 A CN101605211 A CN 101605211A
Authority
CN
China
Prior art keywords
video
image
virtual
cam
building
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2009101011159A
Other languages
English (en)
Other versions
CN101605211B (zh
Inventor
华炜
鲍虎军
秦学英
何凤明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LEIXING TECH Co Ltd HANGZHOU
Original Assignee
LEIXING TECH Co Ltd HANGZHOU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LEIXING TECH Co Ltd HANGZHOU filed Critical LEIXING TECH Co Ltd HANGZHOU
Priority to CN2009101011159A priority Critical patent/CN101605211B/zh
Publication of CN101605211A publication Critical patent/CN101605211A/zh
Application granted granted Critical
Publication of CN101605211B publication Critical patent/CN101605211B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种将虚拟三维建筑与现实环境实拍视频无缝合成的方法。步骤为:1)用摄像机对用于建造建筑物的场地拍摄一段视频;2)在三维图形系统中,构建虚拟三维建筑模型;3)根据视频的每一帧图像,把所有遮挡场地的景物提取出来,生成一帧遮挡物图像,复制剩余的图像生成背景图像;4)根据视频的每一帧图像,在三维图形系统中设置一个虚拟的照相机,绘制出显示虚拟三维建筑模型的建筑物图像;5)把遮挡物图像、建筑物图像、背景图像叠加成一系列新图像;6)把一系列新图像以拍得视频的帧率压缩成新的视频。本发明能将虚拟三维建筑完美地结合到建筑所在环境的实拍视频中,有力地展现将要建造的建筑及其环境的景象。

Description

将虚拟三维建筑与现实环境实拍视频无缝合成的方法
技术领域
本发明涉及将虚拟景物与实拍视频无缝合成的方法,尤其涉及一种将虚拟三维建筑与现实环境实拍视频无缝合成的方法。
背景技术
将虚拟景物与实拍视频的无缝合成是虚拟现实(Virtual Reality)技术的一种运用,将现场视频与计算机产生的三维图形完美无缺地集成在一起,构成一段在现实中无法拍摄到的视频。随着房地产业竞争的加剧,传统的展示手段如平面图、表现图、沙盘、样板房等已经远远无法满足消费者的需要,需要提供将要建造的建筑及其环境的真实视觉感受;在城市规划中,需要对城市建筑、街区景观等规划项目有一种真实的再现,从而大大加快方案设计的速度和质量,提高方案设计和修正的效率。用一段视频介绍房地产商宣传的房产,城市规划中的建筑、街区景观是一种有力的手段,但是在当前现实中,无法拍摄到将要建造的建筑的真实样子,就需要有一种方法把未来的建筑完美地结合到现有环境的实拍视频中。
发明内容
本发明的目的在于针对现有技术需求,即把未来的建筑完美地结合到现有环境的实拍视频中,提出一种将虚拟三维建筑与现实环境实拍视频无缝合成的方法。
将虚拟三维建筑与现实环境实拍视频无缝合成的方法包括以下步骤:
1)用摄像机对用于建造建筑物的场地拍摄一段视频;拍摄的开始时间点Tstart,拍摄地点Psite,视频的帧率Rvideo,并且使用GPS定位仪测得拍摄地点Psite在地球上的经度LONsite、纬度LATsite;在用于建造建筑物的场地上建立一个三维直角坐标系CM;在用于建造建筑物的场地的边界上,以等间距取样本点,并测得这些样本点的经纬度,并转换成三维直角坐标系CM下的坐标;
2)在三维图形系统中,设定其世界坐标系为三维直角坐标系CM,输入用于建造建筑物的场地边界的样本点坐标,并将样本点按序连接起来形成场地多边形;构建虚拟三维建筑模型,虚拟三维建筑模型的底面边界不超出场地多边形的边界;
3)对视频的每一帧图像做如下处理:在视频的第i帧图像Ipic(i)上,把所有显示遮挡住场地的景物的像素提取出来,生成一帧遮挡物图像Ifront(i),在该帧图像上显示遮挡住场地的景物的像素的不透明度为100%,其余像素的不透明度为0%;在第i帧图像Ipic(i)上,设置所有显示遮挡住场地的景物的像素的不透明度为0%,其余像素的不透明度为100%,复制生成背景图像Isite(i);遮挡物图像Ifront(i)、背景图像Isite(i)的分辨率与第i帧图像Ipic(i)的分辨率相同;
4)对视频的每一帧图像做如下处理:利用基于视频的摄像机跟踪技术,计算出摄像机在拍摄第i帧图像Ipic(i)时刻的外部参数Tcam(i)×Rcam(i)和焦距fi,其中Rcam(i)为旋转变换矩阵,Tcam(i)为位移变换矩阵;在三维图形系统中,使用变换公式(Xcam(i),Ycam(i),Zcam(i),1)T=Tcam(i)×Rcam(i)×(XM,YM,ZM,1)T将三维直角坐标系CM中的虚拟三维建筑的模型变换成摄像机三维直角坐标系Ccam(i)中的虚拟三维建筑的模型,其中摄像机三维直角坐标系Ccam(i)为摄像机在拍摄第i帧图像Ipic(i)时刻的摄像机三维直角坐标系,(XM,YM,ZM)为点在三维直角坐标系CM中的坐标,(Xcam(i),Ycam(i),Zcam(i))为点在摄像机三维直角坐标系Ccam(i)中的坐标;在三维图形系统中,设置一个虚拟的照相机,绘制出显示变换后的虚拟三维建筑模型的建筑物图像Ibuild(i),建筑物图像Ibuild(i)中显示建筑的像素的不透明度为100%,其余像素的不透明度为0%;
5)根据视频的每一帧图像做如下处理:把与视频的第i帧图像Ipic(i)相关的遮挡物图像Ifront(i)、建筑物图像Ibuild(i)、背景图像Isite(i)叠加在一起,生成图像Iframe(i)
6)以视频的帧率Rvideo把所有的图像Iframe(i)压缩成新的视频,其中i表示帧的序列号。
所述步骤4)中的在三维图形系统中,设置一个虚拟的照相机,绘制出显示变换后的虚拟三维建筑模型的建筑物图像的步骤为:
1)以虚拟照相机所在点为视点,设置视点变换矩阵为单位矩阵;
2)设置虚拟照相机的视景体的左下角为
Figure G2009101011159D00021
右上角为远裁剪面离视点的距离为Zmax,其中,Fw、Fh分别为摄像机成像底片的宽度、高度,Fw和Fh的值通过查阅摄像机的技术参数获知,fi为摄像机拍摄第i帧图像Ipic(i)时镜头的焦距,Zmax大于所有摄像机三维直角坐标系Ccam(i)下虚拟三维建筑模型上所有点与视点的距离;
3)设置绘制结果输出图像的分辨率与摄像机拍得视频的分辨率相同;
4)设置一个虚拟的模拟太阳光照的平行光源,其亮度由用户输入,确定其方向的方法为:利用公式求得拍摄视频的第i帧图像Ipic(i)的时刻Ti,其中Rvideo为视频的帧率;在三维直角坐标系CM下,计算出经度为LONsite、纬度为LATsite的地点在Ti时刻受到的太阳光的方向;根据坐标系间向量的变换方法,把太阳光在三维直角坐标系CM下的方向变换为在摄像机三维直角坐标系Ccam(i)下的方向,并把变换后的方向作为照射虚拟三维建筑的平行光源的方向;
5)根据上述设置,绘制虚拟三维建筑模型,得到显示虚拟三维建筑模型的建筑物图像。
所述步骤5)中的把与视频的第i帧图像Ipic(i)相关的遮挡物图像Ifront(i)、建筑物图像Ibuild(i)、背景图像Isite(i)叠加在一起,生成图像Iframe(i);的步骤为:
1)生成一张图像Iframe(i),它的分辨率与图像Ipic(i)的分辨率相同,把背景图像Isite(i)上所有像素的颜色值复制给图像Iframe(i)中对应的像素;
2)把建筑物图像Ibuild(i)上所有不透明度为100%的像素的颜色值复制给图像Iframe(i)中对应的像素;
3)把遮挡物图像Ifront(i)上所有不透明度为100%的像素的颜色值复制给图像Iframe(i)中对应的像素。
本发明能将虚拟三维建筑图像完美地结合到建筑所在环境的实拍视频中,有力地展现将要建造的建筑及其环境的景象,能很好地帮助房地产商向客户提供将要建造的建筑及其环境的真实视觉感受,也能很好地再现城市规划中城市建筑、街区景观等规划项目,从而大大加快方案设计的速度和质量,提高方案设计和修正的效率。
具体实施方式
下面根据实施方式对本发明做进一步说明。
将虚拟三维建筑与现实环境实拍视频无缝合成的方法包括以下步骤:
1)用摄像机对用于建造建筑物的场地拍摄一段视频;拍摄的开始时间点Tstart,拍摄地点Psite,视频的帧率Rvideo,并且使用GPS定位仪测得拍摄地点Psite在地球上的经度LONsite、纬度LATsite;在用于建造建筑物的场地上取一个点M,并以M为原点建立一个三维直角坐标系CM,在三维直角坐标系CM中,由x轴与z轴确立的平面与水平地面重合,且z轴指向北极,y轴垂直地面向上;在用于建造建筑物的场地的边界上,以等间距取样本点,并测得这些样本点的经纬度,并转换成三维直角坐标系CM下的坐标,其转换方法如下:
a)用GPS定位仪测得点M在地球上的经度、纬度,记为LONM、LATM,测得样本点P在地球上的经度、纬度,记为LONP、LATP
b)根据公式DMP=R×Arccos(C)×π/180计算出点M与点P之间的距离DMP,其中R为地球半径,π为圆周率,计算C的公式为:
C=sin(LATM)×sin(LATP)+cos(LATM)×cos(LATP)×cos(LONM-LONP);
c)在z轴上取一个点Q,使得直线MQ与直线PQ垂直,根据步骤b)得到线段MQ的长度DMQ,计算向量PM与x轴的夹角 θ = arcsin ( D MQ D MP ) ;
d)计算点P在坐标系CM下的坐标为(DMPcos θ,DMPsinθ);
2)在三维图形系统中,设定其世界坐标系为三维直角坐标系CM,输入用于建造建筑物的场地边界的样本点坐标,并将样本点按序连接起来形成场地多边形;构建虚拟三维建筑模型,虚拟三维建筑模型的底面边界不超出场地多边形的边界;
3)对视频的每一帧图像做如下处理:在视频的第i帧图像Ipic(i)上,把所有显示遮挡住场地的景物的像素提取出来,生成一帧遮挡物图像Ifront(i),在该帧图像上显示遮挡住场地的景物的像素的不透明度为100%,其余像素的不透明度为0%;在第i帧图像Ipic(i)上,设置所有显示遮挡住场地的景物的像素的不透明度为0%,其余像素的不透明度为100%,复制生成背景图像Isite(i);遮挡物图像Ifront(i)、背景图像Isite(i)的分辨率与第i帧图像Ipic(i)的分辨率相同;
4)对视频的每一帧图像做如下处理:根据章国锋的博士论文《视频场景的重建与增强处理》的第2章《基于视频的摄像机跟踪技术》,利用基于视频的摄像机跟踪技术,计算出摄像机在拍摄第i帧图像Ipic(i)时刻的外部参数Tcam(i)×Rcam(i)和焦距fi,其中Rcam(i)为旋转变换矩阵,Tcam(i)为位移变换矩阵;在三维图形系统3ds Max中,使用变换公式(Xcam(i),Ycam(i),Zcam(i),1)T=Tcam(i)×Rcam(i)×(XM,YM,ZM,1)T将三维直角坐标系CM中的虚拟三维建筑的模型变换成摄像机三维直角坐标系Ccam(i)中的虚拟三维建筑的模型,其中摄像机三维直角坐标系Ccam(i)为摄像机在拍摄第i帧图像Ipic(i)时刻的摄像机三维直角坐标系,在摄像机三维直角坐标系Ccam(i)中,以摄像机所在点为原点,z轴与摄像机镜头的轴线重合,且正方向为由镜头指向景物,y轴的正方向为向上,且垂直于摄像机成像画面的横向边缘;(XM,YM,ZM)为点在三维直角坐标系CM中的坐标,(Xcam(i),Ycam(i),Zcam(i))为点在摄像机三维直角坐标系Ccam(i)中的坐标;在三维图形系统3ds Max中,设置一个虚拟的照相机,绘制出显示变换后的虚拟三维建筑模型的建筑物图像Ibuild(i),建筑物图像Ibuild(i)中显示建筑的像素的不透明度为100%,其余像素的不透明度为0%;
5)根据视频的每一帧图像做如下处理:把与视频的第i帧图像Ipic(i)相关的遮挡物图像Ifront(i)、建筑物图像Ibuild(i)、背景图像Isite(i)叠加在一起,生成图像Iframe(i)
6)按照视频和音频压缩国际标准MPEG-2,以视频的帧率Rvideo把所有的图像Iframe(i)压缩成新的视频,其中i表示帧的序列号。
所述步骤4)中的在三维图形系统3ds Max中,设置一个虚拟的照相机,绘制出显示变换后的虚拟三维建筑模型的建筑物图像的步骤为:
1)以虚拟照相机所在点为视点,设置视点变换矩阵为单位矩阵;
2)设置虚拟照相机的视景体的左下角为
Figure G2009101011159D00051
右上角为
Figure G2009101011159D00052
远裁剪面离视点的距离为Zmax,其中,Fw、Fh分别为摄像机成像底片的宽度、高度,Fw和Fh的值通过查阅摄像机的技术参数获知,fi为摄像机拍摄第i帧图像Ipic(i)时镜头的焦距,Zmax大于所有摄像机三维直角坐标系Ccam(i)下虚拟三维建筑模型上所有点与视点的距离;
3)设置绘制结果输出图像的分辨率与摄像机拍得视频的分辨率相同;
4)设置一个虚拟的模拟太阳光照的平行光源,其亮度由用户输入,确定其方向的方法为:利用公式
Figure G2009101011159D00053
求得拍摄视频的第i帧图像Ipic(i)的时刻Ti,其中Rvideo为视频的帧率;在三维直角坐标系CM下,计算出经度为LONsite、纬度为LATsite的地点在Ti时刻受到的太阳光的方向;根据坐标系间向量的变换方法,把太阳光在三维直角坐标系CM下的方向变换为在摄像机三维直角坐标系Ccam(i)下的方向,并把变换后的方向作为照射虚拟三维建筑的平行光源的方向;方向在坐标系间的变换方法为:记太阳光在三维直角坐标系CM下的方向为VM(VMx,VMy,VMz),在摄像机三维直角坐标系Ccam(i)下的方向为Vcam(i)(Vcam(i)x,Vcam(i)y,Vcam(i)z),那么根据公式
(Vcam(i)x,Vcam(i)y,Vcam(i)z,1)T=((Tcam(i)×Rcam(i))-1)T(VMx,VMy,VMz,1)T做变换;
5)根据上述设置,绘制虚拟三维建筑模型,得到显示虚拟三维建筑模型的建筑物图像。
所述步骤5)中的把与视频的第i帧图像Ipic(i)相关的遮挡物图像Ifront(i)、建筑物图像Ibuild(i)、背景图像Isite(i)叠加在一起,生成图像Iframe(i);的步骤为:
1)生成一张图像Iframe(i),它的分辨率与图像Ipic(i)的分辨率相同,把背景图像Isite(i)上所有像素的颜色值复制给图像Iframe(i)中对应的像素;
2)把建筑物图像Ibuild(i)上所有不透明度为100%的像素的颜色值复制给图像Iframe(i)中对应的像素;
3)把遮挡物图像Ifront(i)上所有不透明度为100%的像素的颜色值复制给图像Iframe(i)中对应的像素。

Claims (3)

1、一种将虚拟三维建筑与现实环境实拍视频无缝合成的方法,其特征在于包括以下步骤:
1)用摄像机对用于建造建筑物的场地拍摄一段视频;拍摄的开始时间点Tstart,拍摄地点Psite,视频的帧率Rvideo,并且使用GPS定位仪测得拍摄地点Psite在地球上的经度LONsite、纬度LATsite;在用于建造建筑物的场地上建立一个三维直角坐标系CM;在用于建造建筑物的场地的边界上,以等间距取样本点,并测得这些样本点的经纬度,并转换成三维直角坐标系CM下的坐标;
2)在三维图形系统中,设定其世界坐标系为三维直角坐标系CM,输入用于建造建筑物的场地边界的样本点坐标,并将样本点按序连接起来形成场地多边形;构建虚拟三维建筑模型,虚拟三维建筑模型的底面边界不超出场地多边形的边界;
3)对视频的每一帧图像做如下处理:在视频的第i帧图像Ipic(i)上,把所有显示遮挡住场地的景物的像素提取出来,生成一帧遮挡物图像Ifront(i),在该帧图像上显示遮挡住场地的景物的像素的不透明度为100%,其余像素的不透明度为0%;在第i帧图像Ipic(i)上,设置所有显示遮挡住场地的景物的像素的不透明度为0%,其余像素的不透明度为100%,复制生成背景图像Isite(i);遮挡物图像Ifront(i)、背景图像Isite(i)的分辨率与第i帧图像Ipic(i)的分辨率相同;
4)对视频的每一帧图像做如下处理:利用基于视频的摄像机跟踪技术,计算出摄像机在拍摄第i帧图像Ipic(i)时刻的外部参数Tcam(i)×Rcam(i)和焦距fi,其中Rcam(i)为旋转变换矩阵,Tcam(i)为位移变换矩阵;在三维图形系统中,使用变换公式(Xcam(i),Ycam(i),Zcam(i),1)T=Tcam(i)×Rcam(i)×(XM,YM,ZM,1)T将三维直角坐标系CM中的虚拟三维建筑的模型变换成摄像机三维直角坐标系Ccam(i)中的虚拟三维建筑的模型,其中摄像机三维直角坐标系Ccam(i)为摄像机在拍摄第i帧图像Ipic(i)时刻的摄像机三维直角坐标系,(XM,YM,ZM)为点在三维直角坐标系CM中的坐标,(Xcam(i),Ycam(i),Zcam(i))为点在摄像机三维直角坐标系Ccam(i)中的坐标;在三维图形系统中,设置一个虚拟的照相机,绘制出显示变换后的虚拟三维建筑模型的建筑物图像Ibuild(i),建筑物图像Ibuild(i)中显示建筑的像素的不透明度为100%,其余像素的不透明度为0%;
5)根据视频的每一帧图像做如下处理:把与视频的第i帧图像Ipic(i)相关的遮挡物图像Ifront(i)、建筑物图像Ibuild(i)、背景图像Isite(i)叠加在一起,生成图像Iframe(i)
6)以视频的帧率Rvideo把所有的图像Iframe(i)压缩成新的视频,其中i表示帧的序列号。
2、根据权利要求1所述的一种将虚拟三维建筑与现实环境实拍视频无缝合成的方法,其特征在于所述步骤4)中的在三维图形系统中,设置一个虚拟的照相机,绘制出显示变换后的虚拟三维建筑模型的建筑物图像的步骤为:
1)以虚拟照相机所在点为视点,设置视点变换矩阵为单位矩阵;
2)设置虚拟照相机的视景体的左下角为
Figure A2009101011150003C1
右上角为远裁剪面离视点的距离为Zmax,其中,Fw、Fh分别为摄像机成像底片的宽度、高度,Fw和Fh的值通过查阅摄像机的技术参数获知,fi为摄像机拍摄第i帧图像Ipic(i)时镜头的焦距,Zmax大于所有摄像机三维直角坐标系Ccam(i)下虚拟三维建筑模型上所有点与视点的距离;
3)设置绘制结果输出图像的分辨率与摄像机拍得视频的分辨率相同;
4)设置一个虚拟的模拟太阳光照的平行光源,其亮度由用户输入,确定其方向的方法为:利用公式
Figure A2009101011150003C3
求得拍摄视频的第i帧图像Ipic(i)的时刻Ti,其中Rvideo为视频的帧率;在三维直角坐标系CM下,计算出经度为LONsite、纬度为LATsite的地点在Ti时刻受到的太阳光的方向;根据坐标系间向量的变换方法,把太阳光在三维直角坐标系CM下的方向变换为在摄像机三维直角坐标系Ccam(i)下的方向,并把变换后的方向作为照射虚拟三维建筑的平行光源的方向;
5)根据上述设置,绘制虚拟三维建筑模型,得到显示虚拟三维建筑模型的建筑物图像。
3、根据权利要求1所述的一种将虚拟三维建筑与现实环境实拍视频无缝合成的方法,其特征在于所述步骤5)中的把与视频的第i帧图像Ipic(i)相关的遮挡物图像Ifront(i)、建筑物图像Ibuild(i)、背景图像Isite(i)叠加在一起,生成图像Iframe(i);的步骤为:
1)生成一张图像Iframe(i),它的分辨率与图像Ipic(i)的分辨率相同,把背景图像Isite(i)上所有像素的颜色值复制给图像Iframe(i)中对应的像素;
2)把建筑物图像Ibuild(i)上所有不透明度为100%的像素的颜色值复制给图像Iframe(i)中对应的像素;
3)把遮挡物图像Ifront(i)上所有不透明度为100%的像素的颜色值复制给图像Iframe(i)中对应的像素。
CN2009101011159A 2009-07-23 2009-07-23 将虚拟三维建筑与现实环境实拍视频无缝合成的方法 Expired - Fee Related CN101605211B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009101011159A CN101605211B (zh) 2009-07-23 2009-07-23 将虚拟三维建筑与现实环境实拍视频无缝合成的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009101011159A CN101605211B (zh) 2009-07-23 2009-07-23 将虚拟三维建筑与现实环境实拍视频无缝合成的方法

Publications (2)

Publication Number Publication Date
CN101605211A true CN101605211A (zh) 2009-12-16
CN101605211B CN101605211B (zh) 2011-01-05

Family

ID=41470744

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009101011159A Expired - Fee Related CN101605211B (zh) 2009-07-23 2009-07-23 将虚拟三维建筑与现实环境实拍视频无缝合成的方法

Country Status (1)

Country Link
CN (1) CN101605211B (zh)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102014291A (zh) * 2010-09-30 2011-04-13 杭州镭星科技有限公司 一种获取照相机水平视角大于180时生成左右眼画面对的方法
CN102289845A (zh) * 2011-08-30 2011-12-21 广东省电力设计研究院 一种三维模型绘制方法以及装置
CN102622776A (zh) * 2011-01-31 2012-08-01 微软公司 三维环境重构
CN102917174A (zh) * 2011-08-04 2013-02-06 深圳光启高等理工研究院 应用于电子设备的视频合成方法和系统
CN103785174A (zh) * 2014-02-26 2014-05-14 北京智明星通科技有限公司 一种游戏同一屏幕显示万人的方法和系统
CN104599243A (zh) * 2014-12-11 2015-05-06 北京航空航天大学 一种多视频流与三维场景的虚实融合方法
CN105100640A (zh) * 2015-01-23 2015-11-25 武汉智源泉信息科技有限公司 一种局部配准并行视频拼接方法及系统
WO2016206084A1 (zh) * 2015-06-26 2016-12-29 吴鹏 模拟图像成像方法和模拟眼镜
US9619561B2 (en) 2011-02-14 2017-04-11 Microsoft Technology Licensing, Llc Change invariant scene recognition by an agent
CN106710003A (zh) * 2017-01-09 2017-05-24 成都品果科技有限公司 一种基于OpenGL ES的三维拍照方法和系统
CN107016720A (zh) * 2017-01-19 2017-08-04 江俊昇 建筑规划方法
CN107292954A (zh) * 2017-06-21 2017-10-24 重庆市勘测院 一种三维模型与照片融合方法
CN107391793A (zh) * 2017-06-15 2017-11-24 中国建筑局(集团)有限公司 基于3d扫描技术与mr混合现实技术的建筑结构拆除方法
CN108495032A (zh) * 2018-03-26 2018-09-04 广东欧珀移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN108567441A (zh) * 2017-03-14 2018-09-25 佳能医疗系统株式会社 图像显示系统、图像处理装置以及x射线摄影系统
CN109658488A (zh) * 2018-11-12 2019-04-19 浙江大学 一种虚实融合系统中通过可编程gpu加速解码摄像头视频流的方法
CN109933818A (zh) * 2017-12-15 2019-06-25 星际空间(天津)科技发展有限公司 一种建筑间距自动分析系统
US11215711B2 (en) 2012-12-28 2022-01-04 Microsoft Technology Licensing, Llc Using photometric stereo for 3D environment modeling
CN113923354A (zh) * 2021-09-30 2022-01-11 卡莱特云科技股份有限公司 基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统
US11710309B2 (en) 2013-02-22 2023-07-25 Microsoft Technology Licensing, Llc Camera/object pose from predicted coordinates

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102014291B (zh) * 2010-09-30 2012-07-04 杭州镭星科技有限公司 一种获取照相机水平视角大于180时生成左右眼画面对的方法
CN102014291A (zh) * 2010-09-30 2011-04-13 杭州镭星科技有限公司 一种获取照相机水平视角大于180时生成左右眼画面对的方法
CN102622776A (zh) * 2011-01-31 2012-08-01 微软公司 三维环境重构
CN102622776B (zh) * 2011-01-31 2016-01-13 微软技术许可有限责任公司 三维环境重构
US9619561B2 (en) 2011-02-14 2017-04-11 Microsoft Technology Licensing, Llc Change invariant scene recognition by an agent
CN102917174A (zh) * 2011-08-04 2013-02-06 深圳光启高等理工研究院 应用于电子设备的视频合成方法和系统
CN102289845A (zh) * 2011-08-30 2011-12-21 广东省电力设计研究院 一种三维模型绘制方法以及装置
CN102289845B (zh) * 2011-08-30 2013-04-10 广东省电力设计研究院 一种三维模型绘制方法以及装置
US11215711B2 (en) 2012-12-28 2022-01-04 Microsoft Technology Licensing, Llc Using photometric stereo for 3D environment modeling
US11710309B2 (en) 2013-02-22 2023-07-25 Microsoft Technology Licensing, Llc Camera/object pose from predicted coordinates
CN103785174A (zh) * 2014-02-26 2014-05-14 北京智明星通科技有限公司 一种游戏同一屏幕显示万人的方法和系统
CN103785174B (zh) * 2014-02-26 2016-08-17 北京智明星通科技有限公司 一种游戏同一屏幕显示万人的方法和系统
CN104599243B (zh) * 2014-12-11 2017-05-31 北京航空航天大学 一种多视频流与三维场景的虚实融合方法
CN104599243A (zh) * 2014-12-11 2015-05-06 北京航空航天大学 一种多视频流与三维场景的虚实融合方法
CN105100640B (zh) * 2015-01-23 2018-12-18 武汉智源泉信息科技有限公司 一种局部配准并行视频拼接方法及系统
CN105100640A (zh) * 2015-01-23 2015-11-25 武汉智源泉信息科技有限公司 一种局部配准并行视频拼接方法及系统
WO2016206084A1 (zh) * 2015-06-26 2016-12-29 吴鹏 模拟图像成像方法和模拟眼镜
CN106710003A (zh) * 2017-01-09 2017-05-24 成都品果科技有限公司 一种基于OpenGL ES的三维拍照方法和系统
CN107016720A (zh) * 2017-01-19 2017-08-04 江俊昇 建筑规划方法
CN108567441A (zh) * 2017-03-14 2018-09-25 佳能医疗系统株式会社 图像显示系统、图像处理装置以及x射线摄影系统
CN107391793A (zh) * 2017-06-15 2017-11-24 中国建筑局(集团)有限公司 基于3d扫描技术与mr混合现实技术的建筑结构拆除方法
CN107391793B (zh) * 2017-06-15 2020-11-20 中国建筑一局(集团)有限公司 基于3d扫描技术与mr混合现实技术的建筑结构拆除方法
CN107292954B (zh) * 2017-06-21 2020-12-15 重庆市勘测院 一种三维模型与照片融合方法
CN107292954A (zh) * 2017-06-21 2017-10-24 重庆市勘测院 一种三维模型与照片融合方法
CN109933818A (zh) * 2017-12-15 2019-06-25 星际空间(天津)科技发展有限公司 一种建筑间距自动分析系统
CN109933818B (zh) * 2017-12-15 2023-05-30 星际空间(天津)科技发展有限公司 一种建筑间距自动分析系统
CN108495032A (zh) * 2018-03-26 2018-09-04 广东欧珀移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN109658488A (zh) * 2018-11-12 2019-04-19 浙江大学 一种虚实融合系统中通过可编程gpu加速解码摄像头视频流的方法
CN109658488B (zh) * 2018-11-12 2022-07-19 浙江大学 一种虚实融合系统中通过可编程gpu加速解码摄像头视频流的方法
CN113923354A (zh) * 2021-09-30 2022-01-11 卡莱特云科技股份有限公司 基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统
CN113923354B (zh) * 2021-09-30 2023-08-01 卡莱特云科技股份有限公司 基于多帧图像的视频处理方法、设备及虚拟背景拍摄系统

Also Published As

Publication number Publication date
CN101605211B (zh) 2011-01-05

Similar Documents

Publication Publication Date Title
CN101605211B (zh) 将虚拟三维建筑与现实环境实拍视频无缝合成的方法
CN100594519C (zh) 用球面全景摄像机实时生成增强现实环境光照模型的方法
CN103763479B (zh) 实时高速高清全景视频的拼接装置及其方法
CN103247075A (zh) 基于变分机制的室内环境三维重建方法
CN106373091A (zh) 全景泊车中鸟瞰图像的自动拼接方法、系统及车辆
CN107610185A (zh) 一种鱼眼相机快速标定装置及标定方法
CN106899782A (zh) 一种实现交互式全景视频流地图的方法
CN104427230B (zh) 增强现实的方法和增强现实的系统
CN102984453A (zh) 利用单摄像机实时生成半球全景视频图像的方法及系统
CN102013110A (zh) 三维全景图像生成方法及系统
CN103646394A (zh) 一种基于Kinect摄像机的混合视觉系统标定方法
CN106558017B (zh) 球形显示图像处理方法及系统
CN106023072A (zh) 一种用于曲面大屏幕的图像拼接显示方法
CN108470324A (zh) 一种鲁棒的双目立体图像拼接方法
CN104657103A (zh) 基于深度摄像机的手持cave投影系统
CN101968890A (zh) 基于球面显示的360°全景仿真系统
WO2020151268A1 (zh) 一种3d小行星动态图的生成方法及便携式终端
CN114119889B (zh) 基于跨模态融合的360度环境深度补全和地图重建方法
CN104463956B (zh) 一种月表虚拟场景构建方法及装置
CN113379901A (zh) 利用大众自拍全景数据建立房屋实景三维的方法及系统
CN106780621A (zh) 利用一条直线求解锥镜面折反射摄像机镜面参数的方法
CN108564654B (zh) 三维大场景的画面进入方式
CN104318540B (zh) 一种利用cpu与gpu协同的航空影像在线拼接方法
RU2735066C1 (ru) Способ отображения широкоформатного объекта дополненной реальности
Leberl et al. Aerial computer vision for a 3d virtual habitat

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110105

Termination date: 20140723

EXPY Termination of patent right or utility model