CN107615279A - 基于虚拟六面体模型的虚拟三维模型生成 - Google Patents

基于虚拟六面体模型的虚拟三维模型生成 Download PDF

Info

Publication number
CN107615279A
CN107615279A CN201680027534.0A CN201680027534A CN107615279A CN 107615279 A CN107615279 A CN 107615279A CN 201680027534 A CN201680027534 A CN 201680027534A CN 107615279 A CN107615279 A CN 107615279A
Authority
CN
China
Prior art keywords
model
dimensional
hexahedron
data
hexahedral
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680027534.0A
Other languages
English (en)
Other versions
CN107615279B (zh
Inventor
李明学
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aikeskubo Co.,Ltd.
Original Assignee
Haidelongsi Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Haidelongsi Co Ltd filed Critical Haidelongsi Co Ltd
Publication of CN107615279A publication Critical patent/CN107615279A/zh
Application granted granted Critical
Publication of CN107615279B publication Critical patent/CN107615279B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/10Constructive solid geometry [CSG] using solid primitives, e.g. cylinders, cubes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/006Inverse problem, transformation from projection-space into object-space, e.g. transform methods, back-projection, algebraic methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • G06T15/205Image-based rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/20Finite element generation, e.g. wire-frame surface description, tesselation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Architecture (AREA)
  • Computing Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Algebra (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Physics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Processing Or Creating Images (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Generation (AREA)

Abstract

所公开的实施方式包括用于基于三维对象的多个二维截面图像来生成虚拟三维模型的三维模型数据的方法(系统和非暂态计算机存储可读介质)。基于多个虚拟六面体模型来生成三维对象的三维模型。基于对象的二维截面图像中的相应像素来生成多个六面体模型。通过生成对象的包括多个六面体模型的三维模型,可以精确地表示另一对象内的对象。此外,三维模型保证具有闭合形状,因此可以成功地执行三维模型的三维打印。

Description

基于虚拟六面体模型的虚拟三维模型生成
相关申请的交叉引用
本申请根据35 U.S.C.§119(e)要求于2015年4月2日提交的题为“Advanced 3DPolyhedron Engine for Medical Imagery”的第62/142,001号共同未决的美国临时专利申请以及于2016年3月30日提交的题为“Virtual Three-Dimensional Model GenerationBased on Virtual Hexahedron Models”的第15/086,036号美国专利申请的优先权,这两个申请的全部内容通过引用并入本文。
技术领域
本公开内容总体涉及虚拟模型生成的领域,并且具体涉及生成三维虚拟模型的计算机实现过程。
背景技术
三维(3-D)模型提供了对具有复杂形状的对象的理解便利。通过3-D对象的计算机生成的虚拟3-D模型,可以从不同的视点视觉呈现对象的各个部件的形状和布置。此外,可以修改3-D模型以模拟对象被修改或重新定位的情况。此外,可以通过3-D打印机将3-D模型呈现为有形的复制品。
在一个示例中,可以基于2-D截面图像(例如计算机断层摄影(CT)扫描或磁共振成像(MRI)扫描图像)来生成3-D模型。图1示出了包括对象110、120、130、140、160、180(例如颞下颌关节110、180,椎骨孔120、椎骨130和牙齿140、160)的人类受试者的头部的示例CT扫描图像100。示例对象包括骨骼、牙齿或用于确定受试者的医学状态的任何身体部位。
图2A和图2B示出了根据两个CT扫描图像生成3-D模型的示例常规过程。在常规方法中,提取第一CT扫描图像的对象110A、130A、140A、160A和180A的边缘,并且提取第二CT扫描图像的相应对象110B、130B、140B、160B和180B的边缘。通过连接相应的边缘,可以生成3-D模型210、230、240、260和280的表面215、235、245、265和285。因此可以获得分别与对象110、130、140、160和180对应的3-D模型210、230、240、260和280。
然而,通过常规方法生成的3-D模型无法表示放置在另一对象内的对象。例如,通过提取边缘130A、130B并且通过连接边缘130A、130B生成表面235,对象130内的对象120被忽略。因此,通过常规方法获得的3-D模型无法精确表示被其他对象封闭或包围的对象。
此外,通过常规方法生成的3-D模型可能具有未闭合(或开放)的形状。在常规方法中,如果两个边缘被确定为不是同一对象的一部分,则省略两个边缘之间的表面。缺少闭合的表面变成孔,因此导致开放形状。例如,如图3所示,生成孔310A...310F,这是因为围绕孔310的边缘被确定为是不同对象的一部分。由于3-D模型中的这些孔造成的这样的开放形状导致无法区分对象的内部部分和对象的外部部分。因此,具有开放形状的3-D模型无法进行3-D打印或导致3-D模型的3-D打印不准确。
发明内容
实施方式涉及一种基于三维对象的多个二维截面图像来生成三维模型数据的计算机实现方法。方法包括:接收第一组图像数据和第二组图像数据,所述第一组图像数据表示所述多个二维截面图像中的第一截面图像,所述第二组图像数据表示所述多个二维截面图像中的第二截面图像,所述第一截面图像对应于所述三维对象沿三维轴中的一个轴的第一位置,所述第二截面图像对应于所述三维对象沿三维轴中的所述一个轴的与所述第一位置分离的第二位置,所述第一组图像数据和所述第二组图像数据二者均包括多个像素,每个像素与其二维坐标和像素值相关联;从所述第一截面图像的像素中识别第一组像素的第一组二维坐标,所述第一组像素与预定像素值范围内的第一像素值相关联;从所述第二截面图像的像素中识别第二组像素的第二组二维坐标,所述第二组像素与所述预定像素值范围内的第二像素值相关联;生成表示第一六面体模型的第一组六面体数据,所述第一组六面体数据中的每一个与来自所述第一六面体模型的在来自所述第一组二维坐标的相应坐标处的相应六面体模型相关联;生成表示第二六面体模型的第二组六面体数据,所述第二组六面体数据中的每一个与来自所述第二六面体模型的在来自所述第二组二维坐标的相应坐标处的相应六面体模型相关联;以及基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据。
在一个或更多个实施方式中,所述第一六面体模型中的每一个可以具有统一高度,并且所述第二六面体模型中的每一个可以具有统一高度。所述统一高度可以对应于所述第一位置和所述第二位置之间沿着三维轴中的所述一个轴的距离。在一些实施方式中,第一六面体模型和第二六面体模型可以是立方体。
在一个或更多个实施方式中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据包括:联结所述第一六面体模型和所述第二六面体模型中相邻的六面体模型。联结所述第一六面体模型和所述第二六面体模型中相邻的六面体模型可以包括:生成包括联结的六面体模型的闭合表面的坐标的表面数据,联结的六面体模型由所述闭合表面包围。在一个方面中,所述表面数据可以不包括两个相邻六面体模型之间的开放表面的坐标。
在一个或更多个实施方式中,所述六面体模型的闭合表面中的每一个包括两个三角形。
在一个或更多个实施方式中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据还包括:识别联结的六面体模型的要移除的顶点,所述顶点是所述闭合表面的三个三角形的公共顶点,所述三个三角形彼此正交;生成用所述公共顶点的相邻顶点作为其三个顶点的新三角形;以及移除所述顶点和所述三个三角形。
在一个或更多个实施方式中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据包括:识别联结的六面体模型的共享公共边的第一三角形和第二三角形,所述第一三角形和所述第二三角形彼此正交;生成具有三个顶点的新三角形,所述三个顶点包括:所述第一三角形的远离所述公共边的第一顶点、所述第二三角形的远离所述公共边的第二顶点以及作为所述公共边的第一端的第三顶点;以及移除所述公共边的第二端、所述第一三角形和所述第二三角形。
在一个或更多个实施方式中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据包括:识别偏移顶点,所述偏移顶点由三个三角形共享,所述三个三角形中的每一个具有从三角形的中心至所述偏移顶点的远离所述三角形的相邻顶点的距离矢量,所述三个三角形的每一个的距离矢量具有相同的极性;将所述偏移顶点移位至所述偏移顶点的相邻顶点;以及在使所述偏移顶点移位之后,移除重叠的三角形。
在一个或更多个实施方式中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据包括:识别联结的六面体模型的三个侧三角形,所述三个侧三角形共享公共顶点并且被定向在预定表面取向范围内;生成用所述公共顶点的相邻顶点作为其三个顶点的新三角形;以及移除所述公共顶点和所述三个三角形。
在一个或更多个实施方式中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据包括:识别联结的六面体模型的两个直角三角形,所述两个直角三角形共享公共顶点和公共边,所述两个直角三角形的两个直角形成在所述公共顶点处;识别多个边中的最长边,所述多个边中的每一个的一端是所述公共顶点;识别所述多个边中的最短边;获取所述最长边的长度与所述最短边的长度之间的平均值;以及将所述公共顶点朝向所述最长边的远离所述公共顶点的一端移位所述平均值的一半。
在一个或更多个实施方式中,所述方法还包括:接收第三组图像数据,所述第三组图像数据表示所述多个二维截面图像中的第三截面图像,所述第三截面图像对应于所述三维对象沿三维轴中的所述一个轴的第三位置;从所述第三截面图像的像素中识别第三组像素的第三组二维坐标,所述第三组像素与所述预定像素值范围内的第三像素值相关联;以及生成表示第三六面体模型的第三组六面体数据,所述第三组六面体数据中的每一个与来自所述第三六面体模型的在来自所述第三组二维坐标的相应坐标处的相应六面体模型相关联,其中,还基于所述第三组六面体数据来生成所述三维模型数据。
另一实施方式涉及一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质包括用于基于三维对象的多个二维截面图像来生成三维模型数据的指令。所述指令在由处理器执行时使处理器:接收第一组图像数据和第二组图像数据,所述第一组图像数据表示所述多个二维截面图像中的第一截面图像,所述第二组图像数据表示所述多个二维截面图像中的第二截面图像,所述第一截面图像对应于所述三维对象沿三维轴中的一个轴的第一位置,所述第二截面图像对应于所述三维对象沿三维轴中的所述一个轴的与所述第一位置分离的第二位置,所述第一组图像数据和所述第二组图像数据二者均包括二维坐标和像素值,所述第一截面图像和第二截面图像中的每个像素与其二维坐标和像素值相关联;从所述第一截面图像的像素中识别第一组像素的第一组二维坐标,所述第一组像素与预定像素值范围内的第一像素值相关联;从所述第二截面图像的像素中识别第二组像素的第二组二维坐标,所述第二组像素与所述预定像素值范围内的第二像素值相关联;生成表示第一六面体模型的第一组六面体数据,所述第一组六面体数据中的每一个与来自所述第一六面体模型的在来自所述第一组二维坐标的相应坐标处的相应六面体模型相关联;生成表示第二六面体模型的第二组六面体数据,所述第二组六面体数据中的每一个与来自所述第二六面体模型的在来自所述第二组二维坐标的相应坐标处的相应六面体模型相关联;以及基于所述第一组六面体数据和所述第二组六面体数据来生成三维模型数据。在一些实施方式中,第一六面体模型和第二六面体模型可以是立方体。
一个或更多个实施方式涉及一种用于基于三维对象的多个二维截面图像来生成三维模型数据的系统。所述系统包括:处理器;以及非暂态计算机可读存储介质,所述非暂态计算机可读存储介质包括指令,所述指令在由所述处理器执行时使所述处理器:接收第一组图像数据和第二组图像数据,所述第一组图像数据表示所述多个二维截面图像中的第一截面图像,所述第二组图像数据表示所述多个二维截面图像中的第二截面图像,所述第一截面图像对应于所述三维对象沿三维轴中的一个轴的第一位置,所述第二截面图像对应于所述三维对象沿三维轴中的所述一个轴的与所述第一位置分离的第二位置,所述第一组图像数据和所述第二组图像数据二者均包括多个像素,每个像素与其二维坐标和像素值相关联;从所述第一截面图像的像素中识别第一组像素的第一组二维坐标,所述第一组像素与预定像素值范围内的第一像素值相关联;从所述第二截面图像的像素中识别第二组像素的第二组二维坐标,所述第二组像素与所述预定像素值范围内的第二像素值相关联;生成表示第一六面体模型的第一组六面体数据,所述第一组六面体数据中的每一个与来自所述第一六面体模型的在来自所述第一组二维坐标的相应坐标处的相应六面体模型相关联;生成表示第二六面体模型的第二组六面体数据,所述第二组六面体数据中的每一个与来自所述第二六面体模型的在来自所述第二组二维坐标的相应坐标处的相应六面体模型相关联;以及基于所述第一组六面体数据和所述第二组六面体数据来生成三维模型数据。在一些实施方式中,第一六面体模型和第二六面体模型可以是立方体。
附图说明
图1示出了示例二维(2-D)计算机断层扫描图像。
图2A和2B示出了根据常规方法的基于2-D图像生成3-D模型的计算机实现过程。
图3是根据常规方法生成的包括开放形状的示例3-D模型。
图4示出了根据实施方式的示例3-D模型生成系统。
图5是示出了根据实施方式的基于2-D图像数据来生成包括3-D模型的电子表示的3-D模型数据的计算机实现过程的流程图。
图6是示出了根据实施方式的生成3-D模型的电子表示的计算机实现过程的流程图。
图7A示出了根据实施方式的将2-D图像中的像素转换成3-D模型的六面体模型的示例。
图7B示出了根据实施方式的与图1的CT扫描图像对应的3-D模型的示例截面。
图7C是根据实施方式的图7B所示的3-D模型的截面的一部分的展开图。
图7D示出了根据实施方式的针对像素生成六面体模型的示例过程。
图7E示出了根据实施方式的包括多个六面体模型的示例3-D模型。
图7F是根据实施方式的图7E所示的3-D模型的一部分的放大图。
图8是示出了根据实施方式的对3-D模型执行表面优化的计算机实现过程的流程图。
图9是示出了根据实施方式的移除由三个正交表面共享的六面体模型的顶点的计算机实现过程的流程图。
图10A示出了根据图9所示的计算机实现过程的、在移除由三个正交表面共享的六面体模型的顶点之前的示例3-D模型以及在移除该顶点之后的示例3-D模型。
图10B示出了根据图9所示的计算机实现过程的、确定由三个正交表面共享的六面体模型的顶点的示例方法。
图10C示出了根据图9所示的计算机实现过程的、移除由三个正交表面共享的六面体模型的顶点的示例过程。
图11是示出了根据实施方式的合成3-D模型的正交表面的计算机实现过程的流程图。
图12示出了根据图11所示的计算机实现过程的、在合成3-D模型的正交表面之前的示例3-D模型以及在合成正交表面之后的示例3-D模型。
图13是示出了根据实施方式的修整(trim)3-D模型的偏移顶点的计算机实现过程的流程图。
图14A示出了具有偏移顶点的示例3-D模型。
图14B示出了根据图13所示的计算机实现过程的、确定图14A所示的示例3-D模型的偏移顶点的示例过程。
图14C示出了根据图13所示的计算机实现过程的、移除图14A的示例3-D模型的偏移顶点之后的示例表面。
图14D示出了根据图13所示的计算机实现过程的、在修整3-D模型的偏移顶点之前的示例3-D模型以及在修整偏移顶点之后的示例3-D模型。
图15是示出了根据实施方式的合成3-D模型的侧表面的计算机实现过程的流程图。
图16示出了根据图15所示的计算机实现过程的、在合成3-D模型的侧表面之前的示例3-D模型以及在合成侧表面之后的示例3-D模型。
图17是示出了根据实施方式的平衡3-D模型的边的计算机实现过程的流程图。
图18示出了根据图17所示的计算机实现过程的、在平衡3-D模型的边之前的示例3-D模型以及在平衡所述边之后的示例3-D模型。
图19A示出了根据一个实施方式的在对3-D模型执行表面优化之前的包括六面体模型的示例3-D模型以及在执行表面优化之后的示例3-D模型。
图19B示出了根据一个实施方式的在对图7E所示的包括六面体模型的3-D模型执行表面优化之后的示例3-D模型。
图19C是根据实施方式的图19B所示的示例3-D模型的一部分的放大图。
图20示出了根据实施方式的能够从机器可读介质读取指令并且在处理器(或控制器)中执行指令的示例机器(例如计算机)的部件。
具体实施方式
附图(图)和以下描述仅通过说明的方式与优选实施方式相关。本领域技术人员可以将本文公开的结构和方法的替选实施方式视为在不脱离所公开的原理的情况下可以采用的可行替选方案。
现在将详细参考几个实施方式,这几个实施方式的示例被示出在附图中。应注意,只要可行,在附图中可以使用类似或相似的附图标记,并且所述类似或相似的附图标记可以指示类似或相似的功能。附图仅为了说明的目的而描绘了所公开的系统(或方法)的实施方式。本领域技术人员根据下面的描述将容易认识到在不脱离本文描述的原理的情况下可以采用本文示出的结构和方法的替选实施方式。
配置概述
所公开的配置的示例实施方式包括用于基于多个虚拟六面体模型(本文中也称为“六面体模型”)来生成3-D对象的虚拟3-D模型(本文中也称为“3-D模型”)的计算机实现方法(系统和非暂态计算机存储可读介质),所述多个虚拟六面体模型是根据3-D对象的2-D截面图像中的各个像素生成的。六面体模型是具有表示六面体形状的计算机化数据的计算机生成的虚拟单元部件。
不同的截面图像对应于3-D对象沿着3-D轴中的一个轴的不同位置。每个截面图像被划分为多个像素,并且通过2-D坐标和2-D截面图像沿3-D轴中的一个轴的位置来识别2-D截面图像的像素。在虚拟3-D空间中的与2-D坐标和2-D截面图像沿3-D轴中的一个轴的位置对应的位置处,生成与像素对应的六面体模型。
通过生成3-D对象的包括多个六面体模型的3-D模型,其中每个六面体模型对应于2-D截面图像的相应像素,可以精确地表示在另一对象内的对象。此外,3-D模型应当具有闭合的形状,因此可以成功执行3-D模型的3-D打印。
在一方面,3-D模型由可以电子存储或传输的3-D模型数据来表示。本文中的3-D模型数据指的是具有闭合形状的3-D模型的电子表示。3-D模型数据指示3-D模型的部件(例如顶点、边、表面或其任何组合)的结构配置(例如位置、形状、尺寸、颜色等)。3-D模型数据可以由用于生成3D模型的视觉表示的计算系统检索,或者可以应用于3D打印机以生成3-D模型的有形物理表示。
系统概述
图4示出了根据实施方式的示例3-D模型生成系统420。在图4中,系统420接收3-D对象的2-D图像数据410,并且生成对象的3-D模型480。系统420基于2-D图像数据来生成虚拟3-D模型480,并且存储3-D模型的3-D模型数据(即电子表示)。
2-D图像数据是2-D截面图像(例如CT扫描图像、MRI扫描图像等)的电子计算机化表示。2-D图像数据也被称为“2-D图像文件”。针对2-D图像的每个像素,2-D图像的2-D图像文件包括识别像素的2-D坐标和像素的像素值(例如颜色值)。像素值表示由2-D坐标识别的像素的颜色。像素值可以用任何颜色空间格式(例如RGB、YCbCr等)来表示。在一个实施方式中,2-D图像是3-D对象的截面图像,其中,每个2-D图像对应于相应的2-D图像文件。每个2-D图像沿着3-D图像的与2-D图像正交的轴(优选地,以均匀的距离)与另一2-D图像分离。换言之,2D图像数据410表示3-D对象的多个截面,每个截面在3-D对象沿着轴的不同深度处。例如,人类头骨可以由3-D对象的被分开一定距离的数十或数百个2-D截面图像(例如CT扫描或MRI扫描)来表示。2-D截面图像中的每一个包括非常大量的像素,例如数十万或数百万或者在一些情况下甚至更多的像素,这取决于2-D截面图像的分辨率。因此,由于根据本文的实施方式的2-D图像至3-D模型的转换涉及计算机化图像数据的非常大量的计算,因此3-D模型生成系统必须实现为计算机化系统。
系统420是用于生成3-D模型数据的计算装置。在一个实施方式中,系统420包括2-D图像至3-D模型转换模块430(本文中也称为“转换模块430”)、表面优化模块440、处理器450和存储装置460,存储装置460存储计算机化数据例如2-D图像数据或3-D模型数据。在其他实施方式中,与图4所示的相比,系统420包括更多或更少数量的部件。例如,系统420可以包括如下面相对于图20详细描述的另外的部件。
转换模块430基于2-D图像文件来生成3-D模型数据。在一个实施方式中,转换模块430根据在2-D图像文件中识别的坐标和像素值,生成包括六面体模型的3-D模型。针对每个2-D图像文件,转换模块430识别具有预定像素值范围内的像素值的像素,并且针对识别的像素生成六面体模型。例如,转换模块430可以识别具有表示人类骨骼的一定像素颜色范围内的像素值的像素,以便识别在2-D图像文件中表示的3-D对象(例如骨骼)。每个六面体模型与相应的像素相关联,并且在与相应像素的坐标对应的位置处生成。在一个示例中,六面体模型的宽度和长度对应于像素的宽度和长度,并且六面体模型的高度对应于两个2-D图像的相应位置之间沿正交于2-D图像的轴的间隔。因此,可以层叠来自不同2-D图像的六面体模型以形成3-D模型。下面将相对于图6和图7A至图7F详细提供基于2-D图像生成3-D模型的示例步骤。转换模块430生成描述包括六面体模型的3-D模型的结构配置的3-D模型数据,并且将六面体模型存储在存储装置460处。在一个实施方式中,转换模块430被实现为硬件、软件、固件或其组合。
表面优化模块440获取由转换模块430生成的3-D模型数据,并且自动执行操作以平滑3-D模型数据的3-D模型的虚拟表面。包括具有突出顶点或凹陷顶点的六面体模型的3-D模型可能看起来不自然或真实。表面优化模块440修改3-D模型数据以对3-D模型的表面进行合并、重新定位、移除或调整大小。在一个方面,六面体模型的每个表面用三角形表示,并且可以通过对三角形进行修改或变换来平滑3-D模型的表面。下面将相对于图8至图19详细提供平滑3-D模型数据的表面的示例步骤。响应于平滑3-D模型的表面,表面优化模块440将描述具有平滑表面的3-D模型的结构配置的经修改的3-D模型数据存储在存储装置460处。在一个实施方式中,软件优化模块440被实现为硬件、软件、固件或其组合。
处理器450是执行指令的处理单元,并且可以包括通用计算机处理器。在一些实施方式中,可以将处理器450实现在可重新配置的硬件(例如现场可编程门阵列(FPGA))或一个或更多个专用集成电路(ASIC)上。处理器450执行用于执行本文所公开的系统420的功能的指令。在一个实施方式中,处理器450包括多个处理单元,并且可以并行执行多个指令。
存储装置460是用于存储数据的电子存储部件。在一个实施方式中,存储装置460存储用于执行系统420的软件模块(例如转换模块430和/或表面优化模块440)的功能的一个或更多个指令。此外,系统420可以存储2-D图像数据410、3-D模型数据等。所存储的数据可以由系统420的模块或图4中未示出的其他部件访问。例如,输出显示模块(未示出)获取3-D模型数据并且呈现3-D模型的虚拟表示。对于另一示例,3-D打印机获取3-D模型数据并且生成3-D模型的有形物理表示。
图5是示出了根据实施方式的基于2-D图像数据来生成包括3-D模型的电子表示的3-D模型数据的计算机实现过程的流程图。在一个实施方式中,图5中的步骤由图4的系统420来执行。在其他实施方式中,其他实体可以执行步骤中的一些步骤或所有步骤。同样,实施方式可以包括不同和/或另外的步骤,或者以不同的顺序执行步骤。
系统420获取(510)2-D图像数据。2-D图像数据是三维对象的2-D截面图像的电子表示。
系统420接收(515)像素值的用户输入选择。在一个实施方式中,系统420向用户视觉呈现2-D截面图像中的一个,并且用户可以选择感兴趣的像素值。在一个示例中,用户可以选择单个像素值,并且系统根据选择的像素值来识别像素值的范围。用户可以选择多个像素值或多个像素值范围。在另一实施方式中,用户在呈现的2-D截面图像上选择感兴趣的部件(例如图1的牙齿)。在本实施方式中,通过与选择的部件对应的像素的2-D坐标来识别部件的用户选择。系统420识别通过2-D坐标识别的所选择部件的像素值或像素值范围。用户可以选择多个部件,并且系统420识别与通过2-D坐标识别的所选择部件对应的多个像素值或多个像素值范围。
系统420生成(520)包括六面体模型的3-D模型。具体地,对于每个2-D图像文件,系统420识别具有在预定像素值范围内的像素值的像素,并且针对识别的像素生成六面体模型。例如,转换模块430可以识别具有表示人类骨骼的一定像素颜色范围内的像素值的像素,以便识别在2-D图像文件中表示的3-D对象(例如骨骼)并且生成3-D模型。每个六面体模型根据相应像素的坐标和2-D图像沿正交轴线的位置来定位。因此,可以层叠六面体模型以形成具有闭合形状的3-D模型。
系统420执行(530)表面优化。在一个方面中,系统420执行表面优化以自动平滑包括六面体模型的3-D模型的表面。
系统420生成(540)输出3-D模型数据。系统420生成修改的3-D模型的3-D模型数据作为输出3-D模型数据。输出3-D模型数据可以由计算机器处理以呈现3-D模型的视觉表示,或者由3D打印机处理以生成3-D模型的物理表示。
图6是示出了根据实施方式的生成包括六面体模型的3-D模型的电子表示的计算机实现过程的流程图。在一个实施方式中,图6中的步骤是图5中的步骤520的一部分。因此,图6中的步骤由图4的系统420(例如转换模块430)来执行。在其他实施方式中,其他实体可以执行步骤中的一些步骤或所有步骤。同样,实施方式可以包括不同和/或另外的步骤,或者以不同的顺序执行步骤。
系统420生成(610)虚拟3-D空间(本文中也称为“3-D空间”)。3-D空间是计算机化图形系统中可以生成虚拟3-D模型的虚拟空间。系统420接收2-D图像,并且确定2-D图像的数量以及每个2-D图像中的像素的数量。系统420生成虚拟空间,该空间可以包括至少2-D图像中的总像素数,并且在大多数情况下可以包括更多的像素。此外,系统420将2-D图像的2-D坐标映射至3-D空间的相应3-D坐标中。例如,可以将由第三2-D图像的2-D坐标(x,y)识别的像素映射至3-D坐标(x,y,z),其中,z表示2-D图像沿3-D对象的轴的深度,并且x和y是2-D图像内的像素的2-D坐标。由于根据本文中的实施方式,系统420接收多组2-D图像以生成3-D模型数据,因此,每个2-D图像中的像素可以具有取决于像素所属的2-D图像的不同的z坐标数据。例如,一个截面图像中处于(x,y)2-D位置处的像素可以具有3-D坐标(x,y,z1),而另一截面图像中处于相同(x,y)2-D位置处但处于沿3-D对象的轴的不同深度处的另一像素可以具有3-D坐标(x,y,z2)。因此,可以在与像素的2-D坐标对应的3-D坐标处生成与该像素对应的六面体模型。
系统420在3-D对象的多组2-D截面图像中选择(620)2-D图像。在一个方面中,系统420根据2-D图像沿与该2-D图像正交的轴的位置来选择2-D图像。例如,首先选择位于正交轴线的一端(例如底部)处的2-D图像,然后接下来选择处于正交轴线的不同深度处的朝向另一端(例如顶部)的后续2-D图像。
系统420选择(630)具有目标像素值的像素。具体地,系统420识别具有预定像素值范围内的像素值的像素。在一个方法中,预定像素值范围由系统420的用户来限定或者由系统420预先限定。系统420从识别的像素中选择像素。
系统420生成(640)与所选择的像素对应的六面体模型的顶点。系统基于像素的2-D坐标来确定六面体模型的尺寸(例如高度、宽度和长度)和位置,并且基于所确定的六面体模型的尺寸和位置来生成指示六面体模型的顶点的位置的六面体数据。在一个示例中,可以使用3-D空间中的3-D坐标来识别六面体模型的每个顶点。在一些实施方式中,六面体模型可以是立方体模型。
系统420将所选择像素的像素值与相邻像素的像素值进行比较(650)。相邻像素包括同一2-D图像中的像素以及不同2-D图像中的像素(例如在选择的像素的上方/下方)。具体地,系统420针对每个相邻像素比较该相邻像素是否具有预定像素值范围内的像素值。例如,预定像素值范围可以对应于表示人类的3-D对象的骨骼的像素值(颜色值)。
系统420基于像素值的比较来生成(660)六面体模型的表面。在一个实施方式中,响应于确定位于一个方向上的相邻像素具有预定像素值范围内的像素值,系统420确定六面体模型的面向该方向的表面是开放表面。六面体模型的开放表面表示两个六面体模型被联结(adjoin)以共享开放表面。联结的六面体模型被当作单个六面体模型以提高计算效率。响应于确定位于另一方向上的相邻像素具有预定像素值范围外的像素值,系统420确定六面体模型的面向所述另一方向的表面是闭合表面。六面体模型的闭合表面成为3-D模型的用于区分3-D模型的内侧和外侧的表面的一部分。在一个方面中,闭合表面具有与所选择像素的像素值或预定像素值范围的平均值对应的颜色。
系统420生成指示闭合表面的顶点的位置和闭合表面的颜色的六面体数据。在一个实施方式中,六面体模型的每个闭合表面被划分成两个三角形,并且系统420存储包括每个三角形的顶点位置的六面体数据。通过将六面体模型的表面划分成两个三角形,可以执行表面优化,以将六面体模型的矩形或正方形表面修改成包括一个或更多个三角形的任何任意多边形。
系统420确定(670)是否需要针对2-D图像的具有预定像素值范围内的像素值的另外的像素生成六面体模型。响应于确定需要针对2-D图像生成另外的六面体模型,系统420进行至步骤630以选择另一像素并且重复步骤640至660。响应于确定针对2-D图像生成了所有的六面体模型,系统420确定(680)是否存在另外的2-D图像。如果存在另外的2-D图像,则系统420进行至步骤620并且选择下一2-D图像(例如朝向正交轴线的所述另一端的后续图像)并且重复步骤630至670。
在处理所有2-D图像之后,基于六面体模型来生成3-D模型。3-D模型是根据3-D空间的3-D坐标层叠的六面体模型的集合。3-D模型的表面被表示为六面体模型的闭合表面。系统420生成包括六面体数据的3-D模型数据。
在图6所公开的过程中,可以通过步骤650和660针对像素生成六面体模型的闭合表面和开放表面。在其他实施方式中,可以省略步骤650和660。例如,可以针对具有预定像素值范围内的像素值的像素生成分别由闭合表面完全包围的六面体模型,然后可以合并相邻六面体模型以移除共享表面或使用开放表面来代替共享表面。
图7A示出了根据实施方式的将2-D图像710中的像素转换成包括虚拟六面体模型的虚拟3-D模型722的示例。系统420接收作为2-D截面图像的计算机化表示的2-D图像数据(或2-D图像文件)并且生成作为3-D模型的电子表示的3-D模型数据。2-D图像710是3-D对象的截面图像,其中,每个2-D对象沿与2-D图像710正交的轴线700与另一2-D图像分离。每个2-D图像被划分成像素712,并且每个像素由2-D坐标(例如行716和列714)来识别。例如,高分辨率2-D图像包括1080×720个像素(每个图像超过700,000个像素)。2-D图像710沿正交轴线700的位置使得能够使用另一维度来识别2-D图像710中的像素。
系统在3-D空间720中生成包括六面体模型的3-D模型722,其中,根据相应像素的位置来生成每个六面体模型。根据2-D图像710中的总像素数来生成3-D空间。假定高分辨率2-D图像710中的30个(例如每个图像1080×720个像素)可用,则可以生成包括多于2300万个六面体模型的3-D空间720,因此可以生成高分辨率3-D模型722。在一个示例中,行716对应于3-D空间720的宽度724,列714对应于3-D空间720的长度726,以及2-D图像710沿正交轴线700的位置对应于3-D空间720的高度728。因此,第一图像中的像素对应于第一层中的六面体模型,并且沿轴线700在第一图像之后的第二图像中的像素对应于第二层中的六面体模型,第二层沿3-D空间720中的轴线705在第一层上方。因此,可以将以2-D坐标表示的像素映射成3-D坐标,并且可以在与2-D图像中的像素的2-D坐标对应的3-D坐标处生成六面体模型。
在一个实施方式中,系统420接收表示第一图像的第一组图像数据,并且基于第一组图像数据来生成表示第一六面体模型的第一组六面体数据。类似地,系统420接收表示沿轴线700在第一图像之后的第二图像的第二组图像数据,并且基于第二组图像数据来生成第二组六面体数据,第二组六面体数据表示沿轴线705层叠在第一六面体模型的顶部上的第二六面体模型。系统420获取表示沿轴线700的另外图像的另外图像数据,并且生成另外的六面体数据,其表示在沿轴线705的相应水平(或层)处的另外的六面体模型。
图7B示出了根据实施方式的与图1的CT扫描图像对应的3-D模型的示例截面730。在截面730中,在相应像素的位置处生成六面体模型。因此,如图7B所示,可以精确的表示另一对象内的对象。图7C是图7B的部分735的放大图,示出了与图1的另一对象130对应的另一对象740(例如椎骨)内的与图1的对象120对应的内部对象745(例如椎骨孔)被精确地表示。
图7D示出了根据实施方式的针对像素生成六面体模型的示例过程。例如,系统420选择像素P来生成六面体模型780。系统420确定同一2-D图像中的相邻像素768A、768B、768C具有预定像素值范围内的像素值,但是确定相邻像素768D具有预定像素值范围之外的像素值。因此,系统420生成表面信息,该表面信息描述六面体模型780的朝向具有预定像素值范围之外的像素值的像素768D的闭合表面786(786C、786D)的结构配置(例如顶点的位置、表面的颜色等)。在一个方面中,闭合表面786被划分成两个三角形786C和786D。系统420还确定2-D图像的在像素P下方的相邻像素755具有预定像素值范围内的像素值,但是确定2-D图像的在像素P上方的相邻像素775具有预定像素值范围之外的像素值。因此,系统420生成(或更新)六面体模型780的表面信息以包括朝向具有预定像素值范围之外的像素值的像素775的闭合表面782(782A、782B)的结构配置。也可以将闭合表面782划分成两个三角形782A和782B。六面体模型780朝向具有预定像素值范围内的像素值的像素例如朝向像素768A、768B、768C、755不具有闭合表面而是具有开放表面。换言之,六面体模型780的除了闭合表面782、786之外的其余表面被确定为是开放表面,这是因为相邻六面体模型会共享这些开放表面。通过针对3-D空间的正交轴线的不同深度处的每个2-D截面图像中的所有像素重复如图7D(和图6)所描述的过程,即限定具有闭合表面或开放表面的六面体并且联结与2D截面图像中的不同2D截面图像对应的这样的六面体,可以生成由对应于3-D对象的六面体模型构成的3-D模型。
图7E示出了根据实施方式的包括多个六面体模型的示例3-D模型790。系统420基于2-D图像来生成用多个六面体模型表示的人类头骨的3-D模型。图7F是图7E所示的3-D模型的部分792的放大图,以示出3-D模型的六面体模型。由于每个六面体模型具有闭合形状,因此也确保了3-D模型具有闭合形状。
图8是示出了根据实施方式的对3-D模型执行表面优化的计算机实现过程的流程图。包括六面体模型的3-D模型包括由于如图7E和图7F所示的六面体模型的突出顶点或凹陷顶点引起的粗糙表面或凹凸表面。在一个实施方式中,图8中的步骤是图5中的步骤530的一部分。因此,图8中的步骤由图4的系统420(例如表面优化模块440)来执行。在其他实施方式中,其他实体可以执行步骤中的一些步骤或所有步骤。同样,实施方式可以包括不同和/或另外的步骤,或者以不同的顺序执行步骤。
在一个实施方式中,系统420从图5的步骤520接收描述包括六面体模型的3-D模型的3-D模型数据。基于3-D模型数据,系统420移除(810)六面体模型的一个或更多个顶点,其中每个顶点由三个正交表面(例如三个正交三角形)共享。本文中的正交表面是指具有彼此基本正交的两个法矢量的表面。此外,系统420合成(820)六面体模型的正交表面。系统420修整(830)任何多面体的偏移顶点(例如从附近表面突出或凹陷的多面体的顶点)。系统420合成(840)3-D模型的侧表面。本文中的侧表面是指具有基本类似取向的表面(即面向3-D模型外侧的表面)。系统420平衡(850)表面的边(例如三角形的边)。系统420生成描述经修改的3-D模型的结构配置的3-D模型数据。下面相对于图9至图18详细提供了这些步骤的示例过程。
在其他实施方式中,可以以不同的顺序来执行图8所示的步骤中的一些步骤。在一个示例中,步骤830可以在步骤820之前执行,或者步骤840可以在步骤830之前执行。然而,通过以图8所示的顺序执行表面优化,可以节省计算资源并且可以提高处理效率。例如,与在合成正交表面之后修整顶点相比较,在合成正交表面之前修整偏移顶点涉及更多数量的顶点要被修整。类似地,与在修整偏移顶点之后合成侧表面相比,在修整偏移顶点之前合成侧表面涉及更多数量的表面要被合成。
图9是示出了根据实施方式的移除由三个正交表面共享的六面体模型的顶点的计算机实现过程的流程图。在一个实施方式中,图9中的步骤是图8中的步骤810的一部分。因此,图9中的步骤由图4的系统420(例如表面优化模块440)来执行。在其他实施方式中,其他实体可以执行步骤中的一些步骤或所有步骤。同样,实施方式可以包括不同和/或另外的步骤,或者以不同的顺序执行步骤。
系统420从包括六面体模型的3-D模型的多个顶点中选择(910)目标顶点。系统420确定(920)目标顶点是否由三个表面(例如三角形)共享。响应于确定目标顶点由三个表面共享,系统420确定三个角,其中,三个角中的每一个是三个表面中的两个表面的两个法矢量之间的角。如果三个角的和基本上等于270度,则系统420确定目标顶点是要移除的顶点,并且生成(940)用目标顶点的相邻顶点作为其顶点的新表面。系统420移除(950)目标顶点和与该目标顶点耦接的表面。
响应于在步骤920中确定目标顶点不是由三个表面共享或在步骤930中确定三个角之和不是基本上等于270度,系统420进行至步骤960。
系统420确定(960)是否需要检查另外的顶点。响应于确定需要检查另外的顶点,系统420进行至步骤910并且从3-D模型的多个顶点中选择另一目标顶点。如果检查了所有顶点,则系统420结束(970)移除由三个正交表面共享的六面体模型的顶点的过程。
图10A示出了根据图9所示的计算机实现过程的、在移除六面体模型的顶点之前的示例3-D模型1010以及在移除六面体模型的顶点之后的示例3-D模型1050。
在图10A中,3-D模型1010包括包含多个顶点的六面体模型。系统420确定顶点1020A、1020B、1020C、1020D要被移除,这是因为这些顶点中的每一个由三个正交表面共享。系统420还确定顶点1030A、1030B、1030D是顶点1020A的相邻顶点;顶点1030E、1030D、1030F是顶点1020B的相邻顶点;顶点1030D、1030F、1030G是顶点1020C的相邻顶点;以及顶点1030D、1030H、1030G是顶点1020D的相邻顶点。因此,系统420生成用相邻顶点1030A、1030B、1030D作为其顶点的第一三角形S1、用相邻顶点1030E、1030D、1030F作为其顶点的第二三角形S2、用相邻顶点1030D、1030F、1030G作为其顶点的第三三角形S3以及用相邻顶点1030D、1030H、1030G作为其顶点的第四三角形S4。此外,系统420移除分别与顶点1020A、1020B、1020C、1020D耦接的三角形(为了简化,在图10A中未明确示出),并且还移除顶点1020A、1020B、1020D、1020D。
图10B示出了根据图9所示的计算机实现过程的、确定要移除的六面体模型的顶点的示例方法。在图10B所示的示例中,顶点1020C被确定为是要移除的顶点。系统420获取具有顶点1030D、1030F、1020C的三角形T1的第一法矢量N1、具有顶点1020C、1030F、1030G的三角形T2的第二法矢量N2以及具有顶点1030D、1020C、1030G的三角形T3的第三法矢量N3。此外,系统420获取第一法矢量N1与第二法矢量N2之间的角θ1、第二法矢量N2与第三法矢量N3之间的角θ2以及第一法矢量N1与第三法矢量N3之间的角θ3。系统420将角θ1、θ2、θ3相加,并且确定需要移除顶点1020C,因为角θ1、θ2、θ3之和是270度。可以针对顶点1020A、1020B、1020D执行类似的步骤。通过图9所公开的过程,可以将突出顶点(例如顶点1020A、1020B、1020D)以及凹陷顶点(例如顶点1020C)移除以平滑3-D模型的表面。
图10C示出了根据图9所示的计算机实现过程的、移除由三个正交表面共享的六面体模型的顶点的示例过程。六面体模型包括顶点1020A和顶点1020A的相邻顶点1030A、1030B、1030C。由于顶点1020A由三个正交三角形T4、T5、T6共享,因此系统420确定需要移除顶点1020A。系统420生成用相邻顶点1030A、1030B、1030C作为其顶点的新三角形T7。此外,系统移除三角形T4、T5、T6和顶点1020A。
图11是示出了根据实施方式的合成3-D模型的正交表面的计算机实现过程的流程图。在一个实施方式中,图11中的步骤是图8中的步骤820的一部分。因此,图11中的步骤由图4的系统420(例如表面优化模块440)来执行。在其他实施方式中,其他实体可以执行步骤中的一些步骤或所有步骤。同样,实施方式可以包括不同和/或另外的步骤,或者以不同的顺序执行步骤。
系统420从3-D模型的多个顶点中选择(1110)目标顶点。系统420确定(1120)具有作为目标顶点的一端和作为目标顶点的相邻顶点的另一端的边是否由两个表面(例如三角形)共享。响应于确定该边由两个表面共享,系统420确定(1120)共享公共边的两个表面是否彼此正交。响应于确定共享公共边的两个表面彼此正交,系统420确定(1135)要保留目标顶点和相邻顶点中的哪个顶点以及要移除哪个顶点。在一个方面中,系统420确定保留由更多数量的表面共享的顶点,并且移除另一顶点。
系统420生成(1140)用确定要保留的顶点和非公共相邻顶点(即远离公共边的相邻顶点)作为其顶点的新表面。因此,新表面不包括要移除的另一顶点作为其顶点。系统420移除正交表面1150和确定要移除的另一顶点。
响应于在步骤1120中确定没有具有作为由两个表面共享的目标顶点的一端的公共边或在步骤1130中确定共享公共边的两个表面彼此不正交,系统420进行至步骤1160。
系统420确定(1160)是否需要检查另外的顶点。响应于确定需要检查另外的顶点,系统420进行至步骤1110并且从3-D模型的多个顶点中选择另一目标顶点。如果检查了所有顶点,则系统420结束(1170)合成3-D模型的正交表面的过程。
图12示出了根据图11所示的计算机实现过程的、在合成3-D模型1210的正交表面之前的示例3-D模型1210以及在合成正交表面之后的示例3-D模型1250。在一个实施方式中,在如图9、图10A和图10B所示移除由三个正交表面共享的六面体模型的顶点之后获得3-D模型1210。
在图12中,3-D模型1210包括顶点1220及其相邻的顶点1230A、1230B…1230G(在本文中也称为“相邻顶点1230”)。由于第一边1232A由彼此正交的两个三角形B1、B2共享,因此系统420确定需要移除用两个顶点1230A和1220作为两端的第一边1232A。此外,由于与顶点1230A相比,顶点1220由更多数量的三角形共享,因此系统420确定需要移除第一边1232A的顶点1230A并且需要保留顶点1220。类似地,由于第二边1232B由彼此正交的两个三角形B3、B4共享,因此系统420确定需要移除用两个顶点1230D和1220作为两端的第二边1232B。此外,由于与顶点1230D相比,顶点1220由更多数量的三角形共享,因此系统420确定需要移除第二边1232B的顶点1230D并且需要保留顶点1220。系统生成用顶点1220、1230B、1230G作为其顶点的第一三角形B11和具有顶点1220、1230C、1230E的第二三角形B12。此外,系统420移除三角形B1、B2、B3、B4以及顶点1230A和1230D。
图13是示出了根据实施方式的修整3-D模型的偏移顶点(例如从附近表面突出或凹陷的多面体的顶点)的计算机实现过程的流程图。在一个实施方式中,图13中的步骤是图8中的步骤830的一部分。因此,图13中的步骤由图4的系统420(例如表面优化模块440)来执行。在其他实施方式中,其他实体可以执行步骤中的一些步骤或所有步骤。同样,实施方式可以包括不同和/或另外的步骤,或者以不同的顺序执行步骤。
系统420从3-D模型的多个顶点中选择(1310)目标顶点。系统420确定(1320)目标顶点是否由至少三个表面(例如三角形)共享。响应于确定目标顶点由至少三个表面共享,系统420针对至少三个表面中的每一个获取(1330)至目标顶点的远离表面的相邻顶点的距离矢量。本文中的距离矢量是指从表面的中心至目标顶点的远离表面的相邻顶点的矢量。表面的每个距离矢量相对于表面的法矢量具有极性。法矢量可以被定义为面向3-D模型外侧的表面的方向。如果表面的距离矢量指向3-D模型的内侧,则距离矢量具有与表面的法矢量不同的极性(或负极性)。相反,如果表面的距离矢量指向3-D模型的外侧,则距离矢量具有与表面的法矢量相同的极性(或正极性)。
系统420基于距离矢量的极性来确定(1340)目标顶点是否是偏移顶点。在一个方面中,如果每个距离矢量具有相同的极性,系统420确定目标矢量是偏移顶点。如果目标矢量都具有负极性,则系统420确定偏移顶点是突出顶点。另一方面,如果目标矢量都具有正极性,则系统420确定偏移顶点是凹陷顶点。如果距离矢量具有不同的极性,则系统420确定目标矢量不是偏移顶点。
系统420使偏移顶点移位(1350)。在一个方法中,目标顶点移位至目标顶点最接近的相邻顶点。系统420移除(1360)任何重叠的表面。因此,任何偏移顶点都被有效地移除,并且可以平滑3-D模型的表面。
响应于在步骤1320中确定目标顶点不由至少三个表面共享或在步骤1340中确定目标顶点不是偏移顶点,系统420进行至步骤1370。
系统420确定(1370)是否需要检查另外的顶点。响应于确定需要检查另外的顶点,系统420进行至步骤1310并且从3-D模型的多个顶点中选择另一目标顶点。如果检查了所有顶点,则系统420结束(1380)修整3-D模型的偏移顶点的过程。
图14A示出了具有包含偏移顶点1410和1430的表面的示例3-D模型。图14A中的示例3-D模型的表面由顶点1410、1420A…1420D、1430和1440A…1440D来限定。顶点1410从附近的表面突出,其中,顶点1440从附近的表面凹陷。
图14B示出了根据如图13所示的计算机实现过程的、确定图14A所示的示例3-D模型的偏移顶点1410和1430的示例过程。
系统420选择由以下四个三角形共享的顶点1410:具有顶点1420A、1420B、1410的第一三角形;具有顶点1420B、1420C、1410的第二三角形;具有顶点1420C、1420D、1410的第三三角形;以及具有顶点1420D、1420A、1410的第四三角形。系统420确定从第一三角形的中心至顶点1420C、1420D的距离矢量、从第二三角形的中心至顶点1420A、1420D的距离矢量、从第三三角形的中心至顶点1420A、1420B的距离矢量以及从第四三角形的中心至顶点1420B、1420C的距离矢量都具有负极性(即指向3-D模型的内侧)。因此,系统420确定顶点1410是偏移顶点(或突出顶点)。
类似地,系统420选择由以下四个三角形共享的顶点1430:具有顶点1440A、1440B、1430的第五三角形;具有顶点1440B、1440C、1430的第六三角形;具有顶点1440C、1440D、1430的第七三角形;以及具有顶点1440D、1440A、1430的第八三角形。系统420确定从第五三角形的中心至顶点1440C、1440D的距离矢量、从第六三角形的中心至顶点1440A、1440D的距离矢量、从第七三角形的中心至顶点1440A、1440B的距离矢量以及从第八三角形的中心至顶点1440B、1440C的距离矢量都具有正极性(即指向3-D模型的外侧)。因此,系统420确定顶点1430是偏移顶点(或凹陷顶点)。
图14C示出了根据图13所示的计算机实现过程的、在移除图14A的示例3-D模型的偏移顶点1410、1430之后的示例表面。系统识别顶点1410的第一最接近的相邻顶点1420A和第二最接近的相邻顶点1440A,并且将顶点1410、1430分别移位至相邻顶点1420A和1440A。在从偏移顶点至其相邻顶点的距离都相等的情况下,系统420可以选择相邻顶点中的任何一个,并且将偏移顶点移位至所选择的相邻顶点。系统420还移除重叠的三角形(例如图14B的第一三角形、第四三角形、第五三角形和第八三角形)。
图14D示出了根据图13所示的计算机实现过程的、在修整3-D模型1450的偏移顶点之前的示例3-D模型1450以及在修整偏移顶点之后的示例3-D模型1480。在一个实施方式中,在如图11和图12所示合成正交表面之后获得3-D模型1450。
在图14D中,3-D模型1450包括顶点1470和相邻顶点1460A、1460B…1460F。系统420通过相对于图13、14A和图14B详细描述的过程确定顶点1470是偏移顶点(例如突出顶点),这是因为共享顶点1470的三角形的所有距离矢量都具有负极性(即指向3-D模型1450的内侧)。因此,系统420将顶点1470移位至其最接近的相邻顶点1460D,并且移除重叠的三角形。
图15是示出了根据实施方式的合成3-D模型的侧表面的计算机实现过程的流程图。在一个实施方式中,图15中的步骤是图8中的步骤840的一部分。因此,图15中的步骤由图4的系统420(例如表面优化模块440)来执行。在其他实施方式中,其他实体可以执行步骤中的一些步骤或所有步骤。同样,实施方式可以包括不同和/或另外的步骤,或者以不同的顺序执行步骤。
系统420从3-D模型的多个顶点中选择(1510)目标顶点。系统420确定(1520)共享目标顶点的表面(例如三角形)是否是具有基本类似取向的侧表面。在一个方法中,系统420根据表面的法矢量确定共享目标顶点的表面的取向。在一个方法中,系统420获取共享目标顶点的表面的平均取向(例如法矢量的平均矢量)。如果表面的取向从平均取向偏离预定取向范围(例如预定矢量范围),则系统420确定该表面不是侧表面。如果共享目标顶点的表面的取向在距平均取向的预定矢量范围内,则系统420确定该表面是侧表面。
响应于确定共享目标顶点的表面是侧表面,系统420使目标顶点移位(1530)。在一个方法中,目标顶点移位至该目标顶点最接近的相邻顶点。系统420移除(1540)任何重叠的表面。侧表面被有效地合成(或合并)为单个表面。
响应于在步骤1520中确定共享目标顶点的表面不是侧表面,系统420进行至步骤1550。
系统420确定(1550)是否需要检查另外的顶点。响应于确定需要检查另外的顶点,系统420进行至步骤1510并且从3-D模型的多个顶点中选择另一目标顶点。如果检查了所有顶点,则系统420结束(1560)合成3-D模型的侧表面的过程。
图16示出了根据图15所示的计算机实现过程的、在合成3-D模型1610的侧表面之前的示例3-D模型1610以及在合成侧表面之后的示例3-D模型1650。
在图16中,3-D模型1610包括顶点1620和相邻顶点1630A、1630B、1630C。顶点1620由以下三角形共享:具有顶点1630A、1630B、1620的第一三角形;具有顶点1630B、1630C、1620的第二三角形;以及具有顶点1630A、1630C、1620的第三三角形。系统420分别获取第一三角形、第二三角形和第三三角形的法矢量V1、V2、V3。系统420获取平均法矢量Vavg,并且确定法矢量V1、V2、V3在距平均矢量的预定矢量范围内。因此,系统420确定共享顶点1620的第一三角形、第二三角形和第三三角形是侧三角形。
系统420将顶点1620移位至其最接近的相邻顶点1630A。在从由侧三角形共享的公共顶点至其相邻顶点的距离都相等的情况下,系统420可以选择相邻顶点中的任何一个,并且将顶点1620移位至所选择的相邻顶点。系统还移除重叠的三角形(例如共享顶点1620的第一三角形和第三三角形)。因此,第一三角形、第二三角形和第三三角形被有效地合并成具有顶点1630A、1630B、1630C的单个三角形。
图17是示出了根据实施方式的平衡3-D模型的边的计算机实现过程的流程图。在一个实施方式中,图17中的步骤是图8中的步骤850的一部分。因此,图17中的步骤由图4的系统420(例如表面优化模块440)来执行。在其他实施方式中,其他实体可以执行步骤中的一些步骤或所有步骤。同样,实施方式可以包括不同和/或另外的步骤,或者以不同的顺序执行步骤。
系统420从3-D模型的多个顶点中选择(1710)目标顶点。系统420确定(1720)目标顶点是否由至少三个表面(例如三角形)共享。响应于确定目标顶点由至少三个表面共享,系统420确定(1730)在目标顶点处是否形成有两个90°角。响应于确定在目标顶点处形成有至少两个90°角,系统420识别(1740)分别用目标顶点作为其一端的最长边和最短边。
系统420基于所识别的最长边和最短边来使目标顶点移位(1750)。在一个方法中,系统420获取最长边的长度与最短边的长度之间的差,并且将目标顶点朝向最长边的另一端移位该差的一半。
响应于在步骤1720中确定目标顶点不是由至少三个三角形共享或在步骤1730中确定在目标顶点处未形成有至少两个90°角,系统420进行至步骤1760。
系统420确定(1760)是否需要检查另外的顶点。响应于确定需要检查另外的顶点,系统420进行至步骤1710并且从3-D模型的多个顶点中选择另一目标顶点。如果检查了所有顶点,则系统420结束(1770)平衡3-D模型的边的过程。
图18示出了根据图17所示的计算机实现过程的、在平衡3-D模型1810的边之前的示例3-D模型1810以及在平衡边之后的示例3-D模型1880。在一个实施方式中,在如图15和图16所示合成侧表面之后获得3-D模型1810。
在图18中,3-D模型1810包括顶点1820和相邻顶点1830A…1830E。系统420确定顶点1820具有共享顶点1820的五个三角形,并且在顶点1820处形成有两个90°角。因此,系统420平衡共享顶点1820的3-D模型1810的边。在一个方面中,系统420识别共享顶点1820的最长边1835A和最短边1835B。系统420获取边1835A的长度与边1835B的长度之间的差,并且将顶点1820朝向顶点1830A移位该差的一半。因此,与平衡之前的3-D模型1810相比,平衡之后的3-D模型1860具有长度更平衡的边。
图19A示出了根据一个实施方式的在对3-D模型1910执行表面优化之前的包括六面体模型的示例3-D模型1910以及在执行表面优化之后的示例3-D模型1950。如图19A所示,通过如相对于图8至图18详细描述的那样执行表面优化,平滑了3-D模型1910的粗糙表面或凸凹表面。
图19B示出了根据一个实施方式的在对如图7E所示的包括六面体模型的3-D模型790执行表面优化之后的示例3-D模型1990。与图7E中的在没有执行如本文所公开的表面优化的情况下的3-D模型790相比,3-D模型1990包括平滑的表面,并且被优化成具有比3-D模型790更真实的形状。
图19C是根据实施方式的图19B所示的示例3-D模型1990的部分1992的放大图。在图19C所示的示例图中,3-D模型1990的表面包括多个三角形以表示人类头骨的复杂形状。
计算机器架构
图20是示出了能够从机器可读介质读取指令并在处理器(或控制器)中执行它们的示例机器的部件的框图。具体地,图20以计算机系统2000的示例形式示出了机器的图形表示,在计算机系统2000内可以执行指令2024(例如软件或程序代码),指令2024用于使机器执行本文中例如使用图1至图19讨论的方法中的任何一个或更多个。在替选实施方式中,该机器操作为独立的装置或者可以与其他机器连接(例如联网)。在联网部署中,机器可以在服务器-客户端网络环境中以服务器机器或客户端机器的功能操作,或者可以操作为对等(或分布式)网络环境中的对等机器。
该机器可以是服务器计算机、客户端计算机、个人计算机(PC)、平板PC、机顶盒(STB)、个人数字助理(PDA)、蜂窝电话、智能电话、网络设备、网络路由器、交换机或网桥,或能够(顺序地或以其他方式)执行指定要由该机器采取的动作的指令2024的任何机器。此外,虽然仅示出了单个机器,但是术语“机器”还应当被认为包括单独地或共同地执行指令2024以执行本文所讨论的方法中的任何一个或更多个的机器的任何集合。
示例计算机系统2000包括一个或更多个处理器(一般地,处理器2002)(例如中央处理单元(CPU)、图形处理单元(GPU)、数字信号处理器(DSP)、一个或更多个专用集成电路(ASIC)、一个或更多个射频集成电路(RFIC)或这些的任何组合)、主存储器2004和静态存储器2006,它们被配置成经由总线2008相互通信。计算机系统2000还可以包括图形显示单元2010(例如等离子体显示面板(PDP)、液晶显示器(LCD)、投影仪或阴极射线管(CRT))。计算机系统2000还可以包括字母数字输入装置2012(例如键盘)、光标控制装置2014(例如鼠标、轨迹球、操纵杆、运动传感器或其他指示工具)、存储单元2016、信号生成装置2018(例如扬声器)以及网络接口装置2020,它们也被配置成经由总线2008进行通信。
存储单元2016包括机器可读介质2022,在机器可读介质2022上存储有用于实现本文所述方法或功能中的任何一个或更多个的指令2024。指令2024也可以在计算机系统2000执行指令2024期间全部或至少部分地驻留在主存储器2004内或处理器2002内(例如处理器的高速缓冲存储器内),主存储器2004和处理器2002也构成机器可读介质。可以经由网络接口装置2020通过网络2026发送或接收指令2024。
虽然机器可读介质2022在示例实施方式中被示出为单个介质,但是术语“机器可读介质”应当被认为包括能够存储指令(例如指令2024)的单个介质或多个介质(例如集中式或分布式数据库或关联的高速缓冲存储器或服务器)。术语“机器可读介质”还应被认为包括能够存储由机器执行并且使机器执行本文所公开的方法中的任何一个或更多个的指令(例如指令2024)的任何介质。术语“机器可读介质”包括但不限于呈固态存储器、光学介质和磁介质的形式的数据存储库。
另外的配置考虑
在一个方面中,本文所公开的原理可以应用于医学应用。例如,可以基于数字成像和医学通信(DICOM)文件格式的2-D截面图像来生成虚拟3-D模型。3-D模型可以由3-D模型数据来表示,该3-D模型数据可以转换成任何常规的3-D描述格式(例如STL格式、3DMAX的3DS格式、MAYA的OBJ格式等)。可以视觉地呈现3-D模型,以帮助确定患者的医疗状况、隔离身体部位的结构问题的原因,或者模拟在执行一定操作(例如牙科植入、整形手术等)之后的情况。此外,可以通过3-D打印将3-D模型呈现为有形的形式,以帮助准备用于手术的医疗设备、生成更换身体部位等。
本文中所公开的原理还可以应用于使用3-D模型的其他应用(例如3-D动画、游戏或3-D CAD等)。
所公开的配置的优点包括生成包含六面体模型的虚拟3-D模型,该六面体模型可以精确地表示具有复杂形状的对象(例如彼此盘绕在一起的对象或置于另一对象内的对象)。例如,用户可以在2-D截面图像上选择几个对象(例如骨骼、动脉、韧带、任何器官或其任何组合),并且生成没有未选择的身体部位的局部3-D模型,以表示如何在虚拟3-D空间中构造所选择的部位。此外,通过基于多个虚拟六面体模型来生成3-D模型,确保了3-D模型具有闭合形状,这使得3-D打印能够精确地执行。
此外,通过如本文所公开的对包括六面体模型的3-D模型执行表面优化,可以在处理资源(例如处理器线程、存储装置容量等)方面以高效的方式平滑3-D模型的粗糙表面或凹凸表面。例如,通过执行如本文所公开的表面优化,待分析以用于平滑包括数千万个六面体模型的3-D模型的表面的顶点和表面(例如三角形)的数量可以减少一个数量级。因此,可以节省处理资源。
在整个说明书中,多个实例可以实现被描述为单个实例的部件、操作或结构。虽然一个或更多个方法的各个操作被示出和描述为单独的操作,但是所述各个操作中的一个或更多个可以并行地执行,并且不需要按照所示的顺序执行操作。作为示例配置中的单独部件呈现的结构和特征可以被实现为组合结构或部件。类似地,作为单个部件呈现的结构和功能可以被实现为单独的部件。这些或其他变型、修改、添加和改进落在本文中的主题的范围内。
某些实施方式在本文中被描述为包括逻辑或多个部件、模块或机构,例如,如图4所示。模块可以构成软件模块(例如在机器可读介质上或在传输信号中实现的代码)或硬件模块。硬件模块是能够执行某些操作的有形单元,并且可以以某种方式配置或布置。在示例实施方式中,一个或更多个计算机系统(例如独立的客户端或服务器计算机系统)或计算机系统的一个或更多个硬件模块(例如处理器或一组处理器)可以通过软件(例如应用或应用部分)被配置为操作以执行如本文所述的某些操作的硬件模块。
在各个实施方式中,硬件模块可以以机械或电子的方式来实现。例如,硬件模块可以包括被永久配置成(例如,作为专用处理器如现场可编程门阵列(FPGA)或专用集成电路(ASIC))执行某些操作的专用电路或逻辑。硬件模块还可以包括由软件临时配置以执行某些操作的可编程逻辑或电路(例如,包含在通用处理器或其他可编程处理器内)。应当理解,在专用和永久配置的电路中或在临时配置的电路(例如,由软件配置)中机械地实现硬件模块的决定可以由成本和时间考虑来驱动。
本文描述的示例方法的各种操作可以至少部分地由被临时配置(例如通过软件)或被永久配置成执行相关操作的一个或更多个处理器例如处理器2002来执行。不管是被临时配置还是被永久配置,这样的处理器可以构成操作以执行一个或更多个操作或功能的处理器实现模块。在一些示例实施方式中,本文所引用的模块可以包括处理器实现模块。
一个或更多个处理器还可以操作以支持在“云计算”环境中或作为“软件即服务”(SaaS)的相关操作的性能。例如,至少一些操作可以由一组计算机(作为包括处理器的机器的示例)来执行,这些操作可以经由网络(例如因特网)以及经由一个或更多个适当的接口(例如应用程序接口)(API))来访问。
某些操作的性能可以分布在一个或更多个处理器中,不仅驻留在单个机器内,而且部署在多个机器之间。在一些示例实施方式中,一个或更多个处理器或处理器实现模块可以位于单个地理位置中(例如在家庭环境、办公室环境或服务器场内)。在其他示例实施方式中,一个或更多个处理器或处理器实现模块可以分布在多个地理位置之间。
在对被存储为机器存储器(例如计算机存储器)内的位或二进制数字信号的数据的操作的算法或符号表示方面呈现了本说明书的一些部分。这些算法或符号表示是数据处理领域中的普通技术人员用于将其工作的实质传达给本领域技术人员的技术的示例。如本文所使用的,“算法”是导致期望结果的自洽操作序列或类似处理。在该上下文中,算法和操作涉及物理量的物理操纵。通常但不一定,这样的量可以具有能够被机器存储、访问、传送、组合、比较或以其他方式操纵的电信号、磁信号或光信号的形式。主要是出于公共使用的原因,有时使用诸如“数据”、“内容”、“位”、“值”、“元件”、“符号”、“字符”、“术语”、“数字”、“数值”等词来指代这样的信号是方便的。然而,这些词仅仅是方便的标签,并且要与适当的物理量相关联。
除非另有明确说明,否则本文使用诸如“处理”、“运算”、“计算”、“确定”、“呈现”、“显示”等词的讨论可以指机器(例如计算机)的动作或处理,所述机器对表示为一个或更多个存储器(例如易失性存储器、非易失性存储器或其组合)、寄存器或接收、存储、发送或显示信息的其他机器部件内的物理(例如电子、磁或光)量的数据进行操纵和转换。
如本文所使用的,对“一个实施方式”或“实施方式”的任何引用表示结合该实施方式描述的特定元件、特征、结构或特性包括在至少一个实施方式中。在说明书中的各个地方出现的短语“在一个实施方式中”不一定都指代同一实施方式。
可以使用表述“耦接”和“连接”以及它们的衍生词来描述一些实施方式。例如,可以使用术语“耦接”来描述一些实施方式,以指示两个或更多个元件处于直接物理或电接触。然而,术语“耦接”也可以意味着两个或更多个元件彼此不直接接触,但仍然彼此协作或相互作用。实施方式不限于该上下文。
如本文所使用的,术语“包括(comprise)”,“包括(comprising)”、“包含(includes)”、“具有(has)”、“具有(having)”或其任何其它变体旨在覆盖非排他性包含。例如,包括一列元件的过程、方法、物品或设备不一定仅限于这些元件,而是可以包括未明确列出的或这些过程、方法、物品或设备固有的元件。此外,除非有明确相反的说明,否则“或”是指包容性的“或”而不是排他性的“或”。例如,通过以下中的任一个,条件A或B满足:A为真(或存在)且B为假(或不存在);A为假(或不存在)且B为真(或存在);以及A和B都为真(或存在)。
此外,使用“一个”或“一”来描述本文实施方式的元件和部件。这只是为了方便并给出本发明的一般意义。该描述应当被阅读为包括一个或至少一个,并且单数也包括复数,除非明显地另有所指。
在阅读本公开之后,本领域技术人员将会理解用于通过本文所公开的原理生成包括虚拟六面体的虚拟3-D模型的3D模型数据的系统和过程的另外的替选结构和功能设计。因此,虽然已经示出和描述了特定实施方式和应用,但是应当理解,所公开的实施方式不限于本文公开的精确构造和部件。在不脱离所附权利要求限定的精神和范围的情况下,可以在本文所公开的方法和装置的布置、操作和细节中进行对本领域技术人员而言明显的各种修改、变化和变型。

Claims (21)

1.一种基于三维对象的多个二维截面图像来生成三维模型数据的计算机实现方法,所述方法包括:
接收第一组图像数据和第二组图像数据,所述第一组图像数据表示所述多个二维截面图像中的第一截面图像,所述第二组图像数据表示所述多个二维截面图像中的第二截面图像,所述第一截面图像对应于所述三维对象沿三维轴中的一个轴的第一位置,所述第二截面图像对应于所述三维对象沿三维轴中的所述一个轴的与所述第一位置分离的第二位置,所述第一组图像数据和所述第二组图像数据二者均包括二维坐标和像素值,所述第一截面图像和所述第二截面图像中的每个像素与其二维坐标和像素值相关联;
从所述第一截面图像的像素中识别第一组像素的第一组二维坐标,所述第一组像素与预定像素值范围内的第一像素值相关联;
从所述第二截面图像的像素中识别第二组像素的第二组二维坐标,所述第二组像素与所述预定像素值范围内的第二像素值相关联;
生成表示第一六面体模型的第一组六面体数据,所述第一组六面体数据中的每一个与来自所述第一六面体模型的在来自所述第一组二维坐标的相应坐标处的相应六面体模型相关联;
生成表示第二六面体模型的第二组六面体数据,所述第二组六面体数据中的每一个与来自所述第二六面体模型的在来自所述第二组二维坐标的相应坐标处的相应六面体模型相关联;以及
基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据。
2.根据权利要求1所述的计算机实现方法,其中,所述第一六面体模型中的每一个具有统一高度,并且所述第二六面体模型中的每一个具有统一高度。
3.根据权利要求2所述的计算机实现方法,所述统一高度对应于所述第一位置和所述第二位置之间沿着三维轴中的所述一个轴的距离。
4.根据权利要求1所述的计算机实现方法,其中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据包括:
联结所述第一六面体模型和所述第二六面体模型中相邻的六面体模型。
5.根据权利要求4所述的计算机实现方法,其中,联结所述第一六面体模型和所述第二六面体模型中相邻的六面体模型包括:
生成包括联结的六面体模型的闭合表面的坐标的表面数据,联结的六面体模型由所述闭合表面包围。
6.根据权利要求5所述的计算机实现方法,其中,所述表面数据不包括两个相邻六面体模型之间的开放表面的坐标。
7.根据权利要求5所述的计算机实现方法,其中,所述六面体模型的闭合表面中的每一个包括两个三角形。
8.根据权利要求7所述的计算机实现方法,其中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据还包括:
识别联结的六面体模型的要移除的顶点,所述顶点是所述闭合表面的三个三角形的公共顶点,所述三个三角形彼此正交;
生成用所述公共顶点的相邻顶点作为其三个顶点的新三角形;以及
移除所述顶点和所述三个三角形。
9.根据权利要求7所述的计算机实现方法,其中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据包括:
识别联结的六面体模型的共享公共边的第一三角形和第二三角形,所述第一三角形和所述第二三角形彼此正交;
生成具有三个顶点的新三角形,所述三个顶点包括:所述第一三角形的远离所述公共边的第一顶点、所述第二三角形的远离所述公共边的第二顶点以及作为所述公共边的第一端的第三顶点;以及
移除所述公共边的第二端、所述第一三角形和所述第二三角形。
10.根据权利要求7所述的计算机实现方法,其中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据包括:
识别偏移顶点,所述偏移顶点由三个三角形共享,所述三个三角形中的每一个具有从三角形的中心至所述偏移顶点的远离所述三角形的相邻顶点的距离矢量,所述三个三角形中的每一个的距离矢量具有相同的极性;
将所述偏移顶点移位至所述偏移顶点的相邻顶点;以及
在使所述偏移顶点移位之后,移除重叠的三角形。
11.根据权利要求7所述的计算机实现方法,其中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据包括:
识别联结的六面体模型的三个侧三角形,所述三个侧三角形共享公共顶点并且被定向在预定表面取向范围内;
生成用所述公共顶点的相邻顶点作为其三个顶点的新三角形;以及
移除所述公共顶点和所述三个三角形。
12.根据权利要求7所述的计算机实现方法,其中,基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据包括:
识别联结的六面体模型的两个直角三角形,所述两个直角三角形共享公共顶点和公共边,所述两个直角三角形的两个直角形成在所述公共顶点处;
识别多个边中的最长边,所述多个边中的每一个的一端是所述公共顶点;
识别所述多个边中的最短边;
获取所述最长边的长度与所述最短边的长度之间的平均值;以及
将所述公共顶点朝向所述最长边的远离所述公共顶点的一端移位所述平均值的一半。
13.根据权利要求1所述的计算机实现方法,还包括:
接收第三组图像数据,所述第三组图像数据表示所述多个二维截面图像中的第三截面图像,所述第三截面图像对应于所述三维对象沿三维轴中的所述一个轴的第三位置;
从所述第三截面图像的像素中识别第三组像素的第三组二维坐标,所述第三组像素与所述预定像素值范围内的第三像素值相关联;以及
生成表示第三六面体模型的第三组六面体数据,所述第三组六面体数据中的每一个与来自所述第三六面体模型的在来自所述第三组二维坐标的相应坐标处的相应六面体模型相关联;
其中,还基于所述第三组六面体数据来生成所述三维模型数据。
14.一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质包括用于基于三维对象的多个二维截面图像来生成三维模型数据的指令,所述指令在由处理器执行时使所述处理器:
接收第一组图像数据和第二组图像数据,所述第一组图像数据表示所述多个二维截面图像中的第一截面图像,所述第二组图像数据表示所述多个二维截面图像中的第二截面图像,所述第一截面图像对应于所述三维对象沿三维轴中的一个轴的第一位置,所述第二截面图像对应于所述三维对象沿三维轴中的所述一个轴的与所述第一位置分离的第二位置,所述第一组图像数据和所述第二组图像数据二者均包括二维坐标和像素值,所述第一截面图像和所述第二截面图像中的每个像素与其二维坐标和像素值相关联;
从所述第一截面图像的像素中识别第一组像素的第一组二维坐标,所述第一组像素与预定像素值范围内的第一像素值相关联;
从所述第二截面图像的像素中识别第二组像素的第二组二维坐标,所述第二组像素与所述预定像素值范围内的第二像素值相关联;
生成表示第一六面体模型的第一组六面体数据,所述第一组六面体数据中的每一个与来自所述第一六面体模型的在来自所述第一组二维坐标的相应坐标处的相应六面体模型相关联;
生成表示第二六面体模型的第二组六面体数据,所述第二组六面体数据中的每一个与来自所述第二六面体模型的在来自所述第二组二维坐标的相应坐标处的相应六面体模型相关联;以及
基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据。
15.根据权利要求14所述的非暂态计算机可读存储介质,其中,所述第一六面体模型中的每一个具有统一高度,并且所述第二六面体模型中的每一个具有统一高度。
16.根据权利要求15所述的非暂态计算机可读存储介质,所述统一高度对应于所述第一位置和所述第二位置之间沿着三维轴中的所述一个轴的距离。
17.根据权利要求14所述的非暂态计算机可读存储介质,其中,在由所述处理器执行时使所述处理器基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据的指令还包括以下指令:所述指令在由所述处理器执行时使所述处理器:
联结所述第一六面体模型和所述第二六面体模型中相邻的六面体模型。
18.根据权利要求17所述的非暂态计算机可读存储介质,其中,在由所述处理器执行时使所述处理器联结所述第一六面体模型和所述第二六面体模型中相邻的六面体模型的指令还包括以下指令:所述指令在由所述处理器执行时使所述处理器:
生成包括联结的六面体模型的闭合表面的坐标的表面数据,联结的六面体模型由所述闭合表面包围。
19.根据权利要求18所述的非暂态计算机可读存储介质,其中,所述表面数据不包括两个相邻六面体模型之间的开放表面的坐标。
20.根据权利要求18所述的非暂态计算机可读存储介质,其中,所述六面体模型的闭合表面中的每一个包括两个三角形。
21.一种用于基于三维对象的多个二维截面图像来生成三维模型数据的系统,所述系统包括:
处理器;以及
非暂态计算机可读存储介质,所述非暂态计算机可读存储介质包括指令,所述指令在由所述处理器执行时使所述处理器:
接收第一组图像数据和第二组图像数据,所述第一组图像数据表示所述多个二维截面图像中的第一截面图像,所述第二组图像数据表示所述多个二维截面图像中的第二截面图像,所述第一截面图像对应于所述三维对象沿三维轴中的一个轴的第一位置,所述第二截面图像对应于所述三维对象沿三维轴中的所述一个轴的与所述第一位置分离的第二位置,所述第一组图像数据和所述第二组图像数据二者均包括二维坐标和像素值,所述第一截面图像和所述第二截面图像中的每个像素与其二维坐标和像素值相关联;
从所述第一截面图像的像素中识别第一组像素的第一组二维坐标,所述第一组像素与预定像素值范围内的第一像素值相关联;
从所述第二截面图像的像素中识别第二组像素的第二组二维坐标,所述第二组像素与所述预定像素值范围内的第二像素值相关联;
生成表示第一六面体模型的第一组六面体数据,所述第一组六面体数据中的每一个与来自所述第一六面体模型的在来自所述第一组二维坐标的相应坐标处的相应六面体模型相关联;
生成表示第二六面体模型的第二组六面体数据,所述第二组六面体数据中的每一个与来自所述第二六面体模型的在来自所述第二组二维坐标的相应坐标处的相应六面体模型相关联;以及
基于所述第一组六面体数据和所述第二组六面体数据来生成所述三维模型数据。
CN201680027534.0A 2015-04-02 2016-03-31 基于虚拟六面体模型的虚拟三维模型生成 Active CN107615279B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562142001P 2015-04-02 2015-04-02
US62/142,001 2015-04-02
US15/086,036 2016-03-30
US15/086,036 US9646411B2 (en) 2015-04-02 2016-03-30 Virtual three-dimensional model generation based on virtual hexahedron models
PCT/US2016/025412 WO2016161198A1 (en) 2015-04-02 2016-03-31 Virtual three-dimensional model generation based on virtual hexahedron models

Publications (2)

Publication Number Publication Date
CN107615279A true CN107615279A (zh) 2018-01-19
CN107615279B CN107615279B (zh) 2020-11-03

Family

ID=57005392

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680027534.0A Active CN107615279B (zh) 2015-04-02 2016-03-31 基于虚拟六面体模型的虚拟三维模型生成

Country Status (6)

Country Link
US (2) US9646411B2 (zh)
EP (1) EP3278252B1 (zh)
JP (1) JP6533593B2 (zh)
KR (1) KR102070945B1 (zh)
CN (1) CN107615279B (zh)
WO (1) WO2016161198A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6711715B2 (ja) * 2016-07-19 2020-06-17 キヤノン株式会社 画像処理装置および画像処理方法
US10503149B2 (en) * 2016-09-30 2019-12-10 Honeywell Federal Manufacturing & Technologies, Llc System, method, and computer program for creating united cellular lattice structure
GB201617507D0 (en) * 2016-10-14 2016-11-30 Axial3D Limited Axial3D UK
US11138790B2 (en) 2016-10-14 2021-10-05 Axial Medical Printing Limited Method for generating a 3D physical model of a patient specific anatomic feature from 2D medical images
US20180276463A1 (en) * 2017-03-27 2018-09-27 VRstudios Inc. Optically detectable markers
US11328417B2 (en) 2017-10-30 2022-05-10 Kowa Company, Ltd. Storage device storing a program capable of improving accuracy of detection of a target object
GB201900437D0 (en) * 2019-01-11 2019-02-27 Axial Medical Printing Ltd Axial3d big book 2
KR102104889B1 (ko) * 2019-09-30 2020-04-27 이명학 가상 입체면 모델에 기초한 3차원 모델 데이터 생성 구현 방법 및 시스템
CN111462204B (zh) * 2020-02-13 2023-03-03 腾讯科技(深圳)有限公司 虚拟模型的生成方法、装置、存储介质以及电子装置
GB202101908D0 (en) 2021-02-11 2021-03-31 Axial Medical Printing Ltd Axial3D pathology

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101110124A (zh) * 2006-02-21 2008-01-23 美国西门子医疗解决公司 利用虚拟切割的背景中体积可视化的系统及方法
CN101198964A (zh) * 2005-01-07 2008-06-11 格斯图尔泰克股份有限公司 使用红外图案照射创建对象的三维图像
US20120002840A1 (en) * 2008-11-21 2012-01-05 Cortius Holding B.V. Method of and arrangement for linking image coordinates to coordinates of reference model
US20140185742A1 (en) * 2012-12-27 2014-07-03 Nuctech Company Limited 3-dimensional model creation methods and apparatuses
CN104252715A (zh) * 2014-09-05 2014-12-31 北京大学 一种基于单幅线条图像的三维立体重建方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE50102069D1 (de) * 2000-09-05 2004-05-27 Mtu Aero Engines Gmbh Verfahren zur veränderung der konstruktion eines bauteils
US7538764B2 (en) * 2001-01-05 2009-05-26 Interuniversitair Micro-Elektronica Centrum (Imec) System and method to obtain surface structures of multi-dimensional objects, and to represent those surface structures for animation, transmission and display
KR100428066B1 (ko) * 2001-02-23 2004-04-27 한국과학기술원 요소크기제어를 위한 육면체유한요소 모델링방법 및 그기록매체
DE60238926D1 (de) * 2001-08-31 2011-02-24 Dassault Systemes Solidworks Gleichzeitige benutzung von 2d- und 3d-modellierungsdaten
CA2364601A1 (en) * 2001-12-03 2003-06-03 Utar Scientific Inc. Computer-assisted hologram forming method and apparatus
US6825838B2 (en) * 2002-10-11 2004-11-30 Sonocine, Inc. 3D modeling system
WO2008063081A2 (en) 2006-11-23 2008-05-29 Oslo Universitetssykehus Hf A method for visualising a three-dimensional image of a human body part
WO2010099109A1 (en) 2009-02-24 2010-09-02 Bell Helicopter Textron Inc. System and method for mapping two-dimensional image data to a three-dimensional faceted model
KR101190491B1 (ko) * 2011-06-27 2012-10-12 박덕용 2차원 캐드 도면을 3차원 캐드 도면으로 자동 변환하는 캐드 프로그램을 이용한 구조물 설계 방법
KR101608253B1 (ko) * 2011-08-09 2016-04-01 인텔 코포레이션 이미지 기반 멀티 뷰 3d 얼굴 생성
JP5814853B2 (ja) 2012-04-18 2015-11-17 富士フイルム株式会社 立体モデルデータ生成装置および方法並びにプログラム
KR20140001532A (ko) * 2012-06-27 2014-01-07 한국전자통신연구원 중강 공간 콘텐츠 저작 장치 및 그 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101198964A (zh) * 2005-01-07 2008-06-11 格斯图尔泰克股份有限公司 使用红外图案照射创建对象的三维图像
CN101110124A (zh) * 2006-02-21 2008-01-23 美国西门子医疗解决公司 利用虚拟切割的背景中体积可视化的系统及方法
US20120002840A1 (en) * 2008-11-21 2012-01-05 Cortius Holding B.V. Method of and arrangement for linking image coordinates to coordinates of reference model
US20140185742A1 (en) * 2012-12-27 2014-07-03 Nuctech Company Limited 3-dimensional model creation methods and apparatuses
CN104252715A (zh) * 2014-09-05 2014-12-31 北京大学 一种基于单幅线条图像的三维立体重建方法

Also Published As

Publication number Publication date
US20170301146A1 (en) 2017-10-19
CN107615279B (zh) 2020-11-03
KR20170134592A (ko) 2017-12-06
US9928666B2 (en) 2018-03-27
EP3278252A1 (en) 2018-02-07
JP2018514858A (ja) 2018-06-07
US9646411B2 (en) 2017-05-09
JP6533593B2 (ja) 2019-06-19
KR102070945B1 (ko) 2020-01-29
WO2016161198A1 (en) 2016-10-06
EP3278252B1 (en) 2019-10-09
EP3278252A4 (en) 2018-11-07
US20160292909A1 (en) 2016-10-06

Similar Documents

Publication Publication Date Title
CN107615279B (zh) 基于虚拟六面体模型的虚拟三维模型生成
US8368714B2 (en) Curved surface rendering system and method
US9984498B2 (en) Sparse GPU voxelization for 3D surface reconstruction
US8149237B2 (en) Information processing apparatus and program
WO2010004466A1 (en) Three dimensional mesh modeling
CN111581776B (zh) 一种基于几何重建模型的等几何分析方法
JP6902881B2 (ja) 情報処理装置及び三次元モデルの生成方法
JP6863596B6 (ja) データ処理装置及びデータ処理方法
Elber A review of a B-spline based volumetric representation: Design, analysis and fabrication of porous and/or heterogeneous geometries
Noborio et al. Experimental results of 2D depth-depth matching algorithm based on depth camera Kinect v1
Garcia et al. CPU-based real-time surface and solid voxelization for incomplete point cloud
JP2008204318A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
CN111105489A (zh) 数据合成方法和装置、存储介质和电子装置
Shalma et al. A review on 3D image reconstruction on specific and generic objects
JP3928016B2 (ja) 最大角度法を用いた三角形メッシュ生成方法及びプログラム
KR102104889B1 (ko) 가상 입체면 모델에 기초한 3차원 모델 데이터 생성 구현 방법 및 시스템
IL280826B1 (en) Determining the boundary wall surface of a cavity of an organ
KR101651827B1 (ko) 파일 및 병렬 처리를 이용한 객체의 복셀화 방법
Wang et al. STL mesh reconstruction for bio-medical rapid prototyping model
Liu et al. A Method of Touchable 3d Model Reconstruction based on Mixed Reality–A Case Study of Medical Training Applications
Wu et al. A new 3D thinning algorithm extracting medial curves
CN117422884A (zh) 三维目标检测方法、系统、电子设备及存储介质
Jayasudha et al. Review of visualization techniques in computer graphics
Zhang et al. 3-D Modelling of Biological Systems for Biomimetics
CN115761112A (zh) 三维表面重建方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20181207

Address after: Gyeonggi Do, South Korea

Applicant after: Li Mingxue

Address before: American California

Applicant before: Haidelongsi Co., Ltd.

GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210317

Address after: Seoul, Korea

Patentee after: Aikeskubo Co.,Ltd.

Address before: Han Guojingjidao

Patentee before: Li Mingxue