CN108510537B - 3d建模方法和装置 - Google Patents

3d建模方法和装置 Download PDF

Info

Publication number
CN108510537B
CN108510537B CN201710114218.3A CN201710114218A CN108510537B CN 108510537 B CN108510537 B CN 108510537B CN 201710114218 A CN201710114218 A CN 201710114218A CN 108510537 B CN108510537 B CN 108510537B
Authority
CN
China
Prior art keywords
target object
panoramic
camera
image
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710114218.3A
Other languages
English (en)
Other versions
CN108510537A (zh
Inventor
胡治国
李炜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inlife Handnet Co Ltd
Original Assignee
Inlife Handnet Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inlife Handnet Co Ltd filed Critical Inlife Handnet Co Ltd
Priority to CN201710114218.3A priority Critical patent/CN108510537B/zh
Publication of CN108510537A publication Critical patent/CN108510537A/zh
Application granted granted Critical
Publication of CN108510537B publication Critical patent/CN108510537B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明实施例公开了一种3D建模方法和装置。该3D构建方法通过第一摄像头进行旋转获取目标对象的全景色彩图像,确定全景色彩图像中每个像素点对应在目标对象上的第一区域,并记录第一摄像头在拍摄第一区域时旋转形成的第一旋转角度;通过第二摄像头进行旋转以获取目标对象的全景深度图像,确定全景深度图像中每个像素点对应在目标对象上的第二区域,并记录第二摄像头在拍摄第二区域时旋转形成的第二旋转角度;根据全景色彩图像、第一旋转角度,以及全景深度图像、第二旋转角度,构建目标对象的3D模型图像。该方案实现简单,能有效地构建出目标对象的三维轮廓,并提高模型的精确度,实用性较强。

Description

3D建模方法和装置
技术领域
本发明涉及图像处理技术领域,尤其涉及一种3D建模方法和装置。
背景技术
3D(three-dimennsional,即三维图形)建模,通俗来讲就是通过三维制作软件在虚拟三维空间构建出具有三维数据的模型。
相关技术中,3D建模的原理,是根据左右眼视觉角度的不同,将左眼获取的图像与右眼获取的图像进行合成,以构建3D图像。然而以这种方式构建的3D图像仅是某一视角所见图像,而无法预见目标对象的整体轮廓。即便获取多个视角的3D图像进行融合,也会由于无法精确拼接面,导致最终模型存在较大的误差。
发明内容
本发明实施例提供一种3D建模方法和装置,可以有效地构建出目标对象的三维轮廓,提高模型的精确度。
本发明实施例提供一种3D建模方法,包括:
通过第一摄像头进行旋转以获取目标对象的全景色彩图像,确定所述全景色彩图像中每个像素点对应在所述目标对象上的第一区域,并记录所述第一摄像头在拍摄所述第一区域时旋转形成的第一旋转角度;
通过第二摄像头进行旋转以获取所述目标对象的全景深度图像,确定所述全景深度图像中每个像素点对应在所述目标对象上的第二区域,并记录所述第二摄像头在拍摄所述第二区域时旋转形成的第二旋转角度;
根据所述全景色彩图像、第一旋转角度,以及全景深度图像、第二旋转角度,构建所述目标对象的3D模型图像。
相应地,本发明实施例提供了一种3D建模装置,包括:
色彩获取模块,用于通过第一摄像头进行旋转以获取目标对象的全景色彩图像,确定所述全景色彩图像中每个像素点对应在所述目标对象上的第一区域,并记录所述第一摄像头在拍摄所述第一区域时旋转形成的第一旋转角度;
深度获取模块,用于通过第二摄像头进行旋转以获取所述目标对象的全景深度图像,确定所述全景深度图像中每个像素点对应在所述目标对象上的第二区域,并记录所述第二摄像头在拍摄所述第二区域时旋转形成的第二旋转角度;
构建模块,用于根据所述全景色彩图像、第一旋转角度,以及全景深度图像、第二旋转角度,构建所述目标对象的3D模型图像。
本发明实施例提供的3D建模方法,通过第一摄像头进行旋转获取目标对象的全景色彩图像,确定全景色彩图像中每个像素点对应在所述目标对象上的第一区域,并记录第一摄像头在拍摄第一区域时旋转形成的第一旋转角度;通过第二摄像头进行旋转以获取所述目标对象的全景深度图像,确定所述全景深度图像中每个像素点对应在目标对象上的第二区域,并记录第二摄像头在拍摄第二区域时旋转形成的第二旋转角度;根据全景色彩图像、第一旋转角度,以及全景深度图像、第二旋转角度,构建目标对象的3D模型图像。该方案将全景色彩图像和全景深度图像按拍摄时的旋转角度构建3D图像,实现简单,能有效地构建出目标对象的三维轮廓,并提高模型的精确度,实用性较强。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种3D建模方法的流程示意图。
图2是本发明实施例提供的一种全景色彩图像的局部意图。
图3是本发明实施例提供的第一种获取全景色彩图像的场景示意图。
图4是本发明实施例提供的第二种获取全景色彩图像的场景示意图。
图5是本发明实施例提供的第三种获取全景色彩图像的场景示意图。
图6是本发明实施例提供的第四种获取全景色彩图像的场景示意图。
图7是本发明实施例提供的一种全景深度图像的局部意图。
图8是本发明实施例提供的获取全景深度图像的场景示意图。
图9是本发明实施例提供的获取全景色彩图像和全景深度图像的场景示意图。
图10是本发明实施例提供的一种3D模型的示意图。
图11是本发明实施例提供的第一种3D建模装置的结构示意图。
图12是本发明实施例提供的第二种3D建模装置的结构示意图
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的说明书和权利要求书以及上述附图中的术语“第一”、“第二”、“第三”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应当理解,这样描述的对象在适当情况下可以互换。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含。
在本专利文档中,下文论述的图1到图12以及用来描述本发明公开的原理的各实施例仅用于说明,而不应解释为限制本发明公开的范围。所属领域的技术人员将理解,本发明的原理可在任何适当布置的装置中实施。将详细说明示例性实施方式,在附图中示出了这些实施方式的实例。此外,将参考附图详细描述根据示例性实施例的终端。附图中的相同附图标号指代相同的元件。
尽管诸如“第一”、“第二”等术语可用来描述各实施方式,但此类部件不必限于上述术语。上述术语仅用于区分不同部件。例如,在不脱离示例性实施方式的范围的情况下,第一元件可被称为第二元件,类似地,第二元件可被称为第一元件。本文中所用的术语“和/或”包括所列相关条目中的一个或多个条目的任何和所有组合。
本发明说明书中使用的术语仅用来描述特定实施方式,而并不意图显示本发明的概念。除非上下文中有明确不同的意义,否则,以单数形式使用的表达涵盖复数形式的表达。在本发明说明书中,应理解,诸如“包括”、“具有”以及“含有”等术语意图说明存在本发明说明书中揭示的特征、数字、步骤、动作或其组合的可能性,而并不意图排除可存在或可添加一个或多个其他特征、数字、步骤、动作或其组合的可能性。附图中的相同参考标号指代相同部分。
本发明实施例提供一种3D建模方法和装置。以下将分别进行详细说明。
在一优选实施例中,提供一种3D建模方法,如图1所示,流程可以如下:
101、通过第一摄像头进行旋转以获取目标对象的全景色彩图像,确定该全景色彩图像中每个像素点对应在目标对象上的第一区域,并记录第一摄像头在拍摄第一区域时旋转形成的第一旋转角度。
其中,像素点指把图像分割成若干个小方格,则每个小方格称为一个像素点,由这些像素点排列组成的栅格,被称为“光栅”。计算机通过表示这些像素点的位置、颜色、亮度等信息,从而表示出整幅图像。
像素也叫分辨率,是指可以显示出的水平像素和垂直像素的数组,其值通常与若干显示方式相对应。分辨率为m×n时,就是指在等离子屏幕的横向上划分了m个像素点,竖向上划分了n个像素点。像素是衡量数码相机的最重要指标。它是由相机里的光电传感器上的光敏元件数目所决定的,一个光敏元件就对应一个像素。因此像素越大,意味着光敏元件越多,相应的成本就越大。
参考图2和图3。图2为本发明实施例提供的全景色彩图像中像素点的局部示意图,图中示出像素点P1和像素点P2。
在图3中,C1表示第一摄像头,T表示被拍摄的目标对象的局部图,A表示第一摄像头C1的拍摄视野范围角度大小,L1、L2则表示第一摄像头C1的视野中心线。其中,第一区域T1为该全景色彩图像中的像素点P1对应在目标对象T上的区域,第一区域T2则为该全景色彩图像中的像素点P8对应在目标对象T上的区域。本实施例中,将第一区域T1记作拍摄的起始点,即将L1记作第一摄像头C1旋转拍摄的起始线,则当第一摄像头C1的中心线从L1进行旋转至L2所在方向的第一区域T2时,L1与L2之间的旋转角度α则为本发明实施例中第一旋转角度的1/8。
以此类推,分别记录全景色彩图像中每一个像素点对应的旋转角度。
本发明实施例中,旋转第一摄像头的方式可以有多种,比如,可以是第一摄像头自转,也可以是第一摄像头围绕目标对象旋转。
比如,在一些实施方式中,步骤“通过第一摄像头进行旋转以获取目标对象的全景色彩图像”包括以下流程:
沿第一拍摄轨迹移动第一摄像头以采集目标对象的色彩信息,该第一拍摄轨迹环绕目标对象;
对采集到的色彩信息进行处理,得到全景色彩图像。
参考图4和图5。当需采集目标对象X的内部全景色彩信息时,则在目标对象X的内表面规划第一拍摄轨迹。如图4,该第一拍摄轨迹可以为以半径为r1的圆形轨迹,该圆形轨迹环绕目标对象X内表面,以外包围该目标对象X。第一摄像头C1沿该第一拍摄轨迹移动,以采集目标对象X内表面的全景色彩信息。
当需采集目标对象X的外表面全景色彩信息时,则在目标对象X的外部规划第一拍摄轨迹。如图5,该第一拍摄轨迹可以为以半径为r2的圆形轨迹,该圆形轨迹环绕目标对象X的外表面,以内包围该目标对象X。第一摄像头C1沿该第一拍摄轨迹移动,以采集目标对象X外表面的全景色彩信息。
实际应用中,若目标对象为闭合物体,则可以对目标对象进行360度的拍摄,以获取其全景色彩信息。具体地,如图6所示,可以在水平方向进行一次全景拍摄,同样地,在竖直方向也进行一次全景拍摄。以得到目标对象的全方位色彩图像。
102、通过第二摄像头进行旋转以获取目标对象的全景深度图像,确定全景深度图像中每个像素点对应在目标对象上的第二区域,并记录第二摄像头在拍摄第二区域时旋转形成的第二旋转角度。
同样地,参考图7和图8。图7为本发明实施例提供的全景深度图像中像素点的局部示意图,图中示出像素点P3和像素点P4。
在图8中,C2表示第二摄像头,对上述目标对象T进行拍摄。B则表示第二摄像头C2的拍摄视野范围角度大小,L3、L4则表示第二摄像头C2的视野中心线。其中,第二区域T3为该全景深度图像中的像素点Q1对应在目标对象T上的区域,第二区域T4为该全景深度图像中的像素点Q8对应在目标对象T上的区域。本实施例中,将第而区域T3记作拍摄的起始点,即将L3记作第二摄像头C2旋转拍摄的起始线,则当第二摄像头C2的中心线从L3进行旋转至L4所在方向的第二区域T4时,L3与L4之间的旋转角度β则为本发明实施例中第二旋转角度的1/8。
以此类推,分别记录全景深度图像中每一个像素点对应的旋转角度。
在一些实施例中,步骤“通过第二摄像头进行旋转以获取目标对象的全景深度图像”可以包括如下流程:
沿第二拍摄轨迹旋转第二摄像头以获取目标对象的全景衍射离散光斑图,该第二拍摄轨迹环绕目标对象;
将深度信息已知的多个参考衍射离散光斑图,分别与全景衍射离散光斑图进行衍射离散光斑匹配处理,得到对应的多个原始全景深度图像;
比较每一个原始全景深度图像与其对应的参考衍射离散光斑图已知深度的偏离值,确定偏离值最小时对应区域的深度信息;
基于深度信息得到目标对象的全景深度图像。
同样地,该第二拍摄轨迹可以参考上述图4-6中对第一拍摄轨迹的描述。
103、根据全景色彩图像、第一旋转角度,以及全景深度图像、第二旋转角度,构建目标对象的3D模型图像。
在一些实施方式中,第一拍摄轨迹与第二拍摄轨迹相同。
在一些实施例中,步骤“根据全景色彩图像、第一旋转角度,以及全景深度图像、第二旋转角度,构建所述目标对象的3D模型图像的”具体流程可以如下:
根据第一旋转角度和第二旋转角度,将全景深度图像中的每一个像素点与全景色彩图像中的每一个像素点进行匹配,以得到目标对象的色彩-深度图像;
将色彩-深度图像中每一个像素点按照第一旋转角度和/或第二旋转角度建模,以构建目标对象的3D模型图像。
将第一旋转角度与第二旋转角度进行比较,针对目标对象上的同一个区域而言,图像中每个像素点的旋转角度越大意味着像素点个数少。下面将以结合图2、图7以及图9对像素点匹配的步骤进行详细描述。
如图2所示,以第一区域T1对应在全景色彩图像中的像素点为其所在行的第一个像素点P1为例,则第一区域T2对应在全景色彩图像中的像素点为其所在行的第八个像素点P8。在图7中,如图2所示,以第二区域T3对应在全景深度图像中的像素点为其所在行的第一个像素点Q1为例,则第二区域T4对应在全景深度图像中的像素点为其所在行的第八个像素点Q8。
如图9,α>β,也即,当第一旋转角度大于第二旋转角度时,确定全景色彩图像中的像素点个数比全景深度图像中的像素点个数多。因此,可以按照旋转角度的比例,全景色彩图像中的每个像素点对应全景深度图像中的α/β个像素。比如,α/β为2,则P1对应Q1和Q2,P2对应Q3和Q4,…P8对应Q15和Q16…以此类推,直到所有像素匹配完成。可以得到,深度图像中的像素点Q1的色彩为像素点P1的色彩,深度图像中的像素点Q2的色彩为像素点P1的色彩,深度图像中的像素点Q8的色彩为像素点P4的色彩等。由此,可以生成目标对象的色彩-深度图像。
将生成的色彩-深度图像中的每一个像素点按照第二旋转角度β/8进行旋转排列,以构建目标对象的3D模型图像。参考图10,图10是基于图3、图7以及图9构建的一种3D模型的示意图
同样地,α=β,也即,当第一旋转角度等于第二旋转角度时,确定全景色彩图像中的像素点个数与全景深度图像中的像素点个数相同。也即,α/β为1,则P1对应Q1和Q1,P2对应Q2,…P8对应Q8…以此类推,直到所有像素匹配完成。可以得到,深度图像中的像素点Q1的色彩为像素点P1的色彩,深度图像中的像素点Q2的色彩为像素点P2的色彩,深度图像中的像素点Q8的色彩为像素点P8的色彩等。由此,可以生成目标对象的色彩-深度图像。同时,可以间接得出第一摄像头与第二摄像头的像素相同。
将生成的色彩-深度图像中的每一个像素点按照第一旋转角度α/8或第二旋转角度β/8进行旋转排列,以构建目标对象的3D模型图像。
同样地,α<β,也即,当第一旋转角度小于第二旋转角度时,确定全景色彩图像中的像素点个数比全景深度图像中的像素点个数少。比如,α/β为1/2,则P1和P2对应Q1,P3和P4对应Q2,…P7和P8对应Q4…以此类推,直到所有像素匹配完成。可以得到,色彩图像中的像素点P1的深度为像素点Q1表示的深度,色彩图像中的像素点P2的深度为像素点Q1表示的深度,色彩图像中的像素点P8的深度为像素点Q4表示的深度等。由此,可以生成目标对象的色彩-深度图像。
将生成的色彩-深度图像中的每一个像素点按照第一旋转角度α/8进行旋转排列,以构建目标对象的3D模型图像。
由上可知,本发明实施例提供了一种3D建模方法,通过第一摄像头进行旋转获取目标对象的全景色彩图像,确定全景色彩图像中每个像素点对应在所述目标对象上的第一区域,并记录第一摄像头在拍摄第一区域时旋转形成的第一旋转角度,通过第二摄像头进行旋转以获取目标对象的全景深度图像,确定全景深度图像中每个像素点对应在目标对象上的第二区域,并记录第二摄像头在拍摄第二区域时旋转形成的第二旋转角度,然后,根据全景色彩图像、第一旋转角度,以及全景深度图像、第二旋转角度,构建目标对象的3D模型图像。该方案实现简单,能有效地构建出目标对象的三维轮廓,并提高模型的精确度,实用性较强。
在本发明又一实施例中,还提供一种3D建模装置。如图11所示,该3D建模装置可以包括色彩获取模块31、深度获取模块32以及构建模块33,其中:
色彩获取模块31,用于通过第一摄像头进行旋转以获取目标对象的全景色彩图像,确定全景色彩图像中每个像素点对应在目标对象上的第一区域,并记录第一摄像头在拍摄第一区域时旋转形成的第一旋转角度。
深度获取模块32,用于通过第二摄像头进行旋转以获取目标对象的全景深度图像,确定全景深度图像中每个像素点对应在目标对象上的第二区域,并记录第二摄像头在拍摄第二区域时旋转形成的第二旋转角度。
构建模块33,用于根据全景色彩图像、第一旋转角度,以及全景深度图像、第二旋转角度,构建目标对象的3D模型图像。
如图12所示,在一些实施例中,色彩获取模块31包括色彩采集单元311和色彩图像生成单元312,其中:
色彩采集单元311,用于沿第一拍摄轨迹移动第一摄像头以采集所述目标对象的色彩信息,该第一拍摄轨迹环绕目标对象;
色彩图像生成单元312,用于对采集到的色彩信息进行处理,得到全景色彩图像。
继续参考图12,在一些实施例中,深度获取模块32包括光斑获取单元321、光斑处理单元322、确定单元323以及深度图像生成单元324,其中:
光斑获取单元321,用于沿第二拍摄轨迹旋转第二摄像头以获取目标对象的全景衍射离散光斑图,该第二拍摄轨迹环绕所述目标对象;
光斑处理单元322,用于将深度信息已知的多个参考衍射离散光斑图,分别与全景衍射离散光斑图进行衍射离散光斑匹配处理,得到对应的多个原始全景深度图像;
确定单元323,用于比较每一个原始全景深度图像与其对应的参考衍射离散光斑图已知深度的偏离值,确定偏离值最小时对应区域的深度信息;
深度图像生成单元324,用于基于该深度信息得到目标对象的全景深度图像。
在一些实施例中,第一拍摄轨迹与第二拍摄轨迹相同。
在一些实施例中,继续参考图12,构建模块33可以包括:像素点匹配单元331以及3D构建单元332,其中:
像素点匹配单元331,用于根据第一旋转角度和第二旋转角度,将全景深度图像中的每一个像素点与全景色彩图像中的每一个像素点进行匹配,以得到目标对象的色彩-深度图像;
3D构建单元332,用于将所述色彩-深度图像中每一个像素点按照第一旋转角度和/或第二旋转角度建模,以构建目标对象的3D模型图像。
由上可知,本发明实施例提供了一种3D建模装置,通过第一摄像头进行旋转获取目标对象的全景色彩图像,确定全景色彩图像中每个像素点对应在所述目标对象上的第一区域,并记录第一摄像头在拍摄第一区域时旋转形成的第一旋转角度;通过第二摄像头进行旋转以获取所述目标对象的全景深度图像,确定所述全景深度图像中每个像素点对应在目标对象上的第二区域,并记录第二摄像头在拍摄第二区域时旋转形成的第二旋转角度;根据全景色彩图像、第一旋转角度,以及全景深度图像、第二旋转角度,构建目标对象的3D模型图像。该方案将全景色彩图像和全景深度按拍摄时的旋转角度构建3D图像,实现简单,能有效地构建出目标对象的三维轮廓,并提高模型的精确度,实用性较强。
在描述本发明的概念的过程中使用了术语“一”和“所述”以及类似的词语(尤其是在所附的权利要求书中),应该将这些术语解释为既涵盖单数又涵盖复数。此外,除非本文中另有说明,否则在本文中叙述数值范围时仅仅是通过快捷方法来指代属于相关范围的每个独立的值,而每个独立的值都并入本说明书中,就像这些值在本文中单独进行了陈述一样。另外,除非本文中另有指明或上下文有明确的相反提示,否则本文中所述的所有方法的步骤都可以按任何适当次序加以执行。本发明的改变并不限于描述的步骤顺序。除非另外主张,否则使用本文中所提供的任何以及所有实例或示例性语言(例如,“例如”)都仅仅为了更好地说明本发明的概念,而并非对本发明的概念的范围加以限制。在不脱离精神和范围的情况下,所属领域的技术人员将易于明白多种修改和适应。
以上对本发明实施例所提供的一种3D建模方法和装置进行了详细介绍。应理解,本文所述的示例性实施方式应仅被认为是描述性的,用于帮助理解本发明的方法及其核心思想,而并不用于限制本发明。在每个示例性实施方式中对特征或方面的描述通常应被视作适用于其他示例性实施例中的类似特征或方面。尽管参考示例性实施例描述了本发明,但可建议所属领域的技术人员进行各种变化和更改。本发明意图涵盖所附权利要求书的范围内的这些变化和更改。

Claims (8)

1.一种3D建模方法,其特征在于,所述方法包括:
通过第一摄像头进行旋转以获取目标对象的全景色彩图像,确定所述全景色彩图像中每个像素点对应在所述目标对象上的第一区域,并记录所述第一摄像头在拍摄所述第一区域时旋转形成的第一旋转角度;
通过第二摄像头进行旋转以获取所述目标对象的全景深度图像,确定所述全景深度图像中每个像素点对应在所述目标对象上的第二区域,并记录所述第二摄像头在拍摄所述第二区域时旋转形成的第二旋转角度;
根据所述第一旋转角度和所述第二旋转角度,将所述全景深度图像中的每一个像素点与所述全景色彩图像中的每一个像素点进行匹配,以得到所述目标对象的色彩-深度图像;
将所述色彩-深度图像中每一个像素点按照所述第一旋转角度和/或第二旋转角度建模,以构建所述目标对象的3D模型图像。
2.如权利要求1所述的3D建模方法,其特征在于,通过第一摄像头进行旋转以获取目标对象的全景色彩图像的步骤包括:
沿第一拍摄轨迹移动第一摄像头以采集所述目标对象的色彩信息,所述第一拍摄轨迹环绕所述目标对象;
对采集到的色彩信息进行处理,得到所述全景色彩图像。
3.如权利要求2所述的3D建模方法,其特征在于,通过第二摄像头进行旋转以获取所述目标对象的全景深度图像的步骤包括:
沿第二拍摄轨迹旋转第二摄像头以获取目标对象的全景衍射离散光斑图,所述第二拍摄轨迹环绕所述目标对象;
将深度信息已知的多个参考衍射离散光斑图,分别与所述全景衍射离散光斑图进行衍射离散光斑匹配处理,得到对应的多个原始全景深度图像;
比较每一个原始全景深度图像与其对应的参考衍射离散光斑图已知深度的偏离值,确定偏离值最小时对应区域的深度信息;
基于所述深度信息得到目标对象的全景深度图像。
4.如权利要求3所述的3D建模方法,其特征在于,所述第一拍摄轨迹与所述第二拍摄轨迹相同。
5.一种3D建模装置,其特征在于,包括:
色彩获取模块,用于通过第一摄像头进行旋转以获取目标对象的全景色彩图像,确定所述全景色彩图像中每个像素点对应在所述目标对象上的第一区域,并记录所述第一摄像头在拍摄所述第一区域时旋转形成的第一旋转角度;
深度获取模块,用于通过第二摄像头进行旋转以获取所述目标对象的全景深度图像,确定所述全景深度图像中每个像素点对应在所述目标对象上的第二区域,并记录所述第二摄像头在拍摄所述第二区域时旋转形成的第二旋转角度;
像素点匹配单元,用于根据所述第一旋转角度和所述第二旋转角度,将所述全景深度图像中的每一个像素点与所述全景色彩图像中的每一个像素点进行匹配,以得到所述目标对象的色彩-深度图像;
3D构建单元,用于将所述色彩-深度图像中每一个像素点按照所述第一旋转角度和/或第二旋转角度建模,以构建所述目标对象的3D模型图像。
6.如权利要求5所述的3D建模装置,其特征在于,所述色彩获取模块包括:
色彩采集单元,用于沿第一拍摄轨迹移动第一摄像头以采集所述目标对象的色彩信息,所述第一拍摄轨迹环绕所述目标对象;
色彩图像生成单元,用于对采集到的色彩信息进行处理,得到所述全景色彩图像。
7.如权利要求6所述的3D建模装置,其特征在于,所述深度获取模块包括:
光斑获取单元,用于沿第二拍摄轨迹旋转第二摄像头以获取目标对象的全景衍射离散光斑图,所述第二拍摄轨迹环绕所述目标对象;
光斑处理单元,用于将深度信息已知的多个参考衍射离散光斑图,分别与所述全景衍射离散光斑图进行衍射离散光斑匹配处理,得到对应的多个原始全景深度图像;
确定单元,用于比较每一个原始全景深度图像与其对应的参考衍射离散光斑图已知深度的偏离值,确定偏离值最小时对应区域的深度信息;
深度图像生成单元,用于基于所述深度信息得到目标对象的全景深度图像。
8.如权利要求7所述的3D建模装置,其特征在于,所述第一拍摄轨迹与所述第二拍摄轨迹相同。
CN201710114218.3A 2017-02-28 2017-02-28 3d建模方法和装置 Active CN108510537B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710114218.3A CN108510537B (zh) 2017-02-28 2017-02-28 3d建模方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710114218.3A CN108510537B (zh) 2017-02-28 2017-02-28 3d建模方法和装置

Publications (2)

Publication Number Publication Date
CN108510537A CN108510537A (zh) 2018-09-07
CN108510537B true CN108510537B (zh) 2020-06-12

Family

ID=63374321

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710114218.3A Active CN108510537B (zh) 2017-02-28 2017-02-28 3d建模方法和装置

Country Status (1)

Country Link
CN (1) CN108510537B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110490916B (zh) * 2019-04-12 2020-07-17 北京城市网邻信息技术有限公司 三维对象建模方法与设备、图像处理装置及介质
CN112312113B (zh) * 2020-10-29 2022-07-15 贝壳技术有限公司 用于生成三维模型的方法、装置和系统
CN116792811B (zh) * 2022-12-08 2024-06-07 云南钜盛电器科技有限公司 用于智能电暖气的自适应功率调节装置及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103559737A (zh) * 2013-11-12 2014-02-05 中国科学院自动化研究所 一种对象全景建模方法
CN103971378A (zh) * 2014-05-29 2014-08-06 福州大学 一种混合视觉系统中全景图像的三维重建方法
CN106157360A (zh) * 2015-04-28 2016-11-23 宇龙计算机通信科技(深圳)有限公司 一种基于双摄像头的三维建模方法及装置
CN106182778A (zh) * 2016-08-17 2016-12-07 北京中达金桥技术股份有限公司 基于体感技术的快速精准3d打印系统
WO2017027884A1 (en) * 2015-08-13 2017-02-16 Legend3D, Inc. System and method for removing camera rotation from a panoramic video

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130001762A (ko) * 2011-06-28 2013-01-07 삼성전자주식회사 영상 생성 장치 및 방법
US9215448B2 (en) * 2013-01-31 2015-12-15 Here Global B.V. Stereo panoramic images

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103559737A (zh) * 2013-11-12 2014-02-05 中国科学院自动化研究所 一种对象全景建模方法
CN103971378A (zh) * 2014-05-29 2014-08-06 福州大学 一种混合视觉系统中全景图像的三维重建方法
CN106157360A (zh) * 2015-04-28 2016-11-23 宇龙计算机通信科技(深圳)有限公司 一种基于双摄像头的三维建模方法及装置
WO2017027884A1 (en) * 2015-08-13 2017-02-16 Legend3D, Inc. System and method for removing camera rotation from a panoramic video
CN106182778A (zh) * 2016-08-17 2016-12-07 北京中达金桥技术股份有限公司 基于体感技术的快速精准3d打印系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于全景相机和全向激光雷达的致密三维重建;杨力 等;《浙江大学学报(工学版)》;20140831;第48卷(第8期);第1481-1487页 *

Also Published As

Publication number Publication date
CN108510537A (zh) 2018-09-07

Similar Documents

Publication Publication Date Title
CN107431803B (zh) 全景虚拟现实内容的捕捉和渲染
CN103221975B (zh) 三维成像系统
KR101265667B1 (ko) 차량 주변 시각화를 위한 3차원 영상 합성장치 및 그 방법
CN1965578B (zh) 数码3d/360度照相机系统
US9305375B2 (en) High-quality post-rendering depth blur
JP2009037301A (ja) 局所領域分割による自由視点画像の生成方法
CN206563985U (zh) 三维成像系统
TW201118791A (en) System and method for obtaining camera parameters from a plurality of images, and computer program products thereof
CN109559349A (zh) 一种用于标定的方法和装置
JP6683307B2 (ja) 多数のカメラを用いた最適の球形映像獲得方法
EP3072289A1 (en) A light field processing method
CN108510537B (zh) 3d建模方法和装置
CN111445528B (zh) 一种在3d建模中多相机共同标定方法
US10354399B2 (en) Multi-view back-projection to a light-field
CN107809610A (zh) 摄像头参数集算出装置、摄像头参数集算出方法以及程序
JP5267708B2 (ja) 画像処理装置、撮像装置、画像生成方法、及びプログラム
US20210012515A1 (en) Apparatus and a method for obtaining a registration error map representing a level of sharpness of an image
CN105865423B (zh) 双目测距方法、装置和全景图像拼接方法及其系统
CN112648935A (zh) 一种图像处理方法、装置和三维扫描系统
JP6234401B2 (ja) 画像処理装置、撮像装置、画像処理方法、及びプログラム
CN114788254A (zh) 辅助对焦方法、装置及系统
CN110278366A (zh) 一种全景图像虚化方法、终端及计算机可读存储介质
CN113838116B (zh) 确定目标视图的方法、装置、电子设备及存储介质
JP2023062217A (ja) データ生成方法、学習方法及び推定方法
Amini et al. Development of a new stereo‐panorama system based on off‐the‐shelf stereo cameras

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant