实景语义结构模型的构建方法及装置
技术领域
本发明涉及三维建模技术领域,尤其是涉及一种实景语义结构模型的构建方法及装置。
背景技术
随着城市信息化进程不断推进、地理信息技术与智慧城市的推动,三维模型以及其应用越来越广泛。目前三维模型生产与应用的模式主要为图1的模式,即第一,获取不同形式的数据源;第二,建立三维模型;第三,根据需要对模型挂接属性;第四,数据的存储与组织;第五,三维模型数据的应用与分析。
现有的城市三维模型创建与应用方案主要是通过自动、半自动或人工的方式创建连续Mesh(无线网格网络)或者单体化的三维模型,并通过属性挂接、数据存储、数据应用等环节来满足不同应用场景需求。现有的这些技术流程中还存在诸多问题:第一,对于窗体结构等细节结构需要人工干预生成;第二,无论是倾斜摄影测量建模方式获取的连续Mesh面模型还是其他技术手段的单体化建模方式的模型成果均为单纯的模型的几何数据,需通过二次处理进行属性链接,实际模型上并没有记录这些属性信息,用户若想获取这些信息,只能在第三方浏览器或平台手动测量或者挂接应用属性;第三,单体化建模的技术流程中纹理映射机制不完善;第四,建模工具多样、格式多样,不同数据、应用程序间的数据转换成为一个重要问题;第五,模型数据量大,存在存储、管理、浏览、应用的障碍和瓶颈。
发明内容
有鉴于此,本发明的目的在于提供一种实景语义结构模型的构建方法及装置,以缓解上述技术问题。
第一方面,本发明实施例提供了一种实景语义结构模型的构建方法,其中,该方法包括:获取指定建筑物的输入数据包,其中,输入数据包包括指定建筑物的语义结构模型、指定建筑物的实景影像和实景影像对应的定位信息;提取语义结构模型中包括的指定建筑物的几何信息;根据几何信息和实景影像对应的定位信息,将实景影像映射到语义结构模型对应的位置,以生成实景语义结构模型。
结合第一方面,本发明实施例提供了第一方面的第一种可能的实施方式,其中,该方法还包括:按照预先设置的组织方式对实景语义结构模型进行组织,并将组织后的实景语义结构模型存储至关系型数据库中。
结合第一方面的第一种可能的实施方式,本发明实施例提供了第一方面的第二种可能的实施方式,其中,按照预先设置的组织方式对实景语义结构模型进行组织的步骤包括:获取实景语义结构模型的几何语义和特征语义;其中,几何语义中至少包括线、面、实体的语义,特征类语义至少包含建筑外部构件、建筑内部构件、地址、房间、门窗的语义;根据几何语义和特征类语义对实景语义结构模型进行分类组织,并将分类组织后的实景语义结构模型存储至关系型数据库中。
结合第一方面,本发明实施例提供了第一方面的第三种可能的实施方式,其中,该方法还包括:获取指定建筑物的点云数据和/或DSM数据,根据点云数据和/或DSM数据生成指定建筑物的三维模型;将指定建筑物的语义信息与三维模型进行关联,生成指定建筑物的语义结构模型,其中,语义信息包括指定建筑物的几何信息、标识信息和材质信息。
结合第一方面的第三种可能的实施方式,本发明实施例提供了第一方面的第四种可能的实施方式,其中,根据点云数据和/或DSM数据生成指定建筑物的三维模型之后,该方法还包括:将指定建筑物的三维模型与预先存储的建筑矢量轮廓进行套合,将建筑矢量轮廓以外的数据删除,以建筑矢量轮廓线所在位置的纵向延伸为指定建筑物的边界,对指定建筑物的三维模型进行优化。
结合第一方面,本发明实施例提供了第一方面的第五种可能的实施方式,其中,根据几何信息和实景影像对应的定位信息,将实景影像映射到语义结构模型对应的位置的步骤包括:根据几何信息获取语义结构模型的各模型面的位置坐标信息;将各模型面的位置坐标信息与实景影像对应的定位信息进行匹配;如果位置坐标信息与实景影像对应的定位信息一致,将实景影像映射到语义结构模型对应的模型面上。
第二方面,本发明实施例还提供一种实景语义结构模型的构建装置,其中,该装置包括:第一获取模块,用于获取指定建筑物的输入数据包,其中,输入数据包包括指定建筑物的语义结构模型、指定建筑物的实景影像和实景影像对应的定位信息;提取模块,用于提取语义结构模型中包括的指定建筑物的几何信息;映射模块,用于根据几何信息和实景影像对应的定位信息,将实景影像映射到语义结构模型对应的位置,以生成实景语义结构模型。
结合第二方面,本发明实施例提供了第二方面的第一种可能的实施方式,其中,该装置还包括:存储模块,用于按照预先设置的组织方式对实景语义结构模型进行组织,并将组织后的实景语义结构模型存储至关系型数据库中。
结合第二方面的第一种可能的实施方式,本发明实施例提供了第二方面的第二种可能的实施方式,其中,按照预先设置的组织方式对实景语义结构模型进行组织的步骤包括:获取实景语义结构模型的几何语义和特征语义;其中,几何语义中至少包括线、面、实体的语义,特征类语义至少包含建筑外部构件、建筑内部构件、地址、房间、门窗的语义;根据几何语义和特征类语义对实景语义结构模型进行分类组织,并将分类组织后的实景语义结构模型存储至关系型数据库中。
结合第二方面,本发明实施例提供了第二方面的第三种可能的实施方式,其中,该装置还包括:第二获取模块,用于获取指定建筑物的点云数据和/或DSM数据,根据点云数据和/或DSM数据生成指定建筑物的三维模型;关联模块,用于将指定建筑物的语义信息与三维模型进行关联,生成指定建筑物的语义结构模型,其中,语义信息包括指定建筑物的几何信息、标识信息和材质信息。
本发明实施例带来了以下有益效果:
本发明实施例提供的一种实景语义结构模型的构建方法,获取指定建筑物的输入数据包,其中,输入数据包包括指定建筑物的语义结构模型、指定建筑物的实景影像和实景影像对应的定位信息;提取语义结构模型中包括的指定建筑物的几何信息;根据几何信息和实景影像对应的定位信息,将实景影像映射到语义结构模型对应的位置,以生成实景语义结构模型,有效缓解了人工干预建模效率低、误差大以及无法自动挂接属性、对单体化建模的技术流程中纹理映射机制不完善以及存储的技术问题。
本发明的其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种实景语义结构模型的构建方法的流程图;
图2为本发明实施例提供的一种实景语义结构模型组织示意图;
图3为本发明实施例提供的另一种实景语义结构模型的构建方法的流程图;
图4为本发明实施例提供的一种实景语义结构模型的构建装置结构示意图;
图5为本发明实施例提供的另一种实景语义结构模型的构建装置结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
随着国家城镇化进程的推进,智慧城市当前已成为许多城市市政建设的重点内容。虚拟地理环境作为城市数字化管理的有效平台,是许多智慧化应用的基础。然而,为了对城市土地利用状况、房屋使用情况、人口分布模式等信息进行合理分析和利用,还应该在几何模型的基础上构建符合人类认知习惯的语义模型。建筑物作为城市地理环境中的最主要组成部分之一,其三维语义模型的构建对智慧城市建设具有重要意义。
目前,现有的城市三维模型创建与应用方案主要是通过自动、半自动或人工的方式创建连续Mesh或者单体化的三维模型,并通过属性挂接、数据存储、数据应用等环节来满足不同应用场景需求。现有的这些技术流程中还存在诸多问题:第一,对于窗体结构等细节结构需要人工干预生成;第二,无论是倾斜摄影测量建模方式获取的连续Mesh面模型还是其他技术手段的单体化建模方式的模型成果均为单纯的模型的几何数据,需通过二次处理进行属性链接,实际模型上并没有记录这些属性信息,用户若想获取这些信息,只能在第三方浏览器或平台手动测量或者挂接应用属性;第三,单体化建模的技术流程中纹理映射机制不完善;第四,建模工具多样、格式多样,不同数据、应用程序间的数据转换成为一个重要问题;第五,模型数据量大,存在存储、管理、浏览、应用的障碍和瓶颈,基于此,本发明实施例提供的一种实景语义结构模型的构建方法及装置,可以缓解上述技术问题。
为便于对本实施例进行理解,首先对本发明实施例所公开的一种实景语义结构模型的构建方法进行详细介绍。
实施例一:
本发明实施例提供了一种实景语义结构模型的构建方法,如图1所示的一种实景语义结构模型的构建方法的流程图,该方法包括以下步骤:
步骤S102,获取指定建筑物的输入数据包,其中,输入数据包包括指定建筑物的语义结构模型、指定建筑物的实景影像和实景影像对应的定位信息;
在实际应用时,优选选用无人机对指定建筑物进行空中拍摄,以获取该建筑物的多张实景影像,在利用无人机拍摄建筑物的实景影像的同时记录该多张实景影像对应的定位信息,其中,定位信息包含实景影像的位置坐标信息,并将实景影像对应的定位信息存储至空三加密文件中进行保存和提取应用。
步骤S104,提取语义结构模型中包括的指定建筑物的几何信息;
步骤S106,根据几何信息和实景影像对应的定位信息,将实景影像映射到语义结构模型对应的位置,以生成实景语义结构模型。
具体地,当需要对该建筑物构建的语义结构模型进行纹理映射时,需要从多张实景影像中获取一张纹理最优的实景影像,在大量的倾斜影像中,同一建筑墙面往往在多张影像上可见,并且墙面纹理的分辨率、成像角度以及受遮挡的情况都是不一样的,必须选着质量最好,受遮挡最小的影像对语义结构模型进行纹理映射,本发明实施例中,利用视角法及距离法在多张实景影像中选取一张纹理最优的实景影像,以获取建筑物侧面纹理最优的实景影像为例进行说明,首先需要计算建筑物侧面的法向量以及该侧面的视点方向,然后计算视点方向与法向量的夹角,并比较多张实景影像所求出的夹角,选着夹角最小的实景影像;当夹角最小的实景影像有多张时,基于上述选出的夹角最小的几张实景影像,获取该侧面的位置坐标和视点的位置坐标,计算该侧面和视点的距离,选着距离的最小的实景影像。经过模型面法线与视点夹角最优分析以及模型面与纹理视点距离最优分析的层层约束与组合,提高了纹理选择与定位的准确性。
本发明实施例提供的一种实景语义结构模型的构建方法,获取指定建筑物的输入数据包,其中,输入数据包包括指定建筑物的语义结构模型、指定建筑物的实景影像和实景影像对应的定位信息;提取语义结构模型中包括的指定建筑物的几何信息;根据几何信息和实景影像对应的定位信息,将实景影像映射到语义结构模型对应的位置,以生成实景语义结构模型,有效缓解了人工干预建模效率低、误差大以及无法自动挂接属性、对单体化建模的技术流程中纹理映射机制不完善以及存储的技术问题。
具体实现时,按照预先设置的组织方式对实景语义结构模型进行组织,并将组织后的实景语义结构模型存储至关系型数据库中。
为了便于对实景语义结构模型进行存储,需要将实景语义结构模型按照设定的组织方式进行分类组织后存入关系型数据库中,以方便管理及应用。
其中,按照预先设置的组织方式对实景语义结构模型进行组织的步骤包括:获取实景语义结构模型的几何语义和特征语义;其中,几何语义中至少包括线、面、实体的语义,特征类语义至少包含建筑外部构件、建筑内部构件、地址、房间、门窗的语义;根据几何语义和特征类语义对实景语义结构模型进行分类组织,并将分类组织后的实景语义结构模型存储至关系型数据库中。实景语义结构模型在入库后基于上述组织方式,将模型解析成多个数据库表单,从而完全映射实景语义结构模型,映射后的模型数据符合关系数据库的组织特点。基于Web(World Wide Web,全球广域网)的建库工具,可以同时管理多个模型数据库使得模型管理与应用更为方便;可实现基于数据库对模型数据的快速查询检索、模型数据的更新维护、数据分析、发布,减轻前端压力,适应海量模型的存储与应用。
为了便于对实景语义结构模型进行组织的理解,图2示出了一种实景语义结构模型组织示意图,如图2所示,将实景语义结构模型按照几何语义和特征类语义进行分类组织,并且,又将几何语义细化成曲线类语义、面片类语义以及实体类语义,将特征类语义细化成建筑外部构件、地址语义、建筑内部构件、房间、窗户以及门,其中,建筑外部构件包括烟囱、楼梯、天线、阳台或附加在屋顶以上的楼梯和路等(图2中未示出)。
在图1的基础上,图3示出了另一种实景语义结构模型的构建方法的流程图,其中,步骤S306到步骤S310的过程可以参考上述图1中步骤S102到步骤S106对应的过程,在此不再赘述。
如图3所示,该方法还包括以下步骤:
步骤S302,获取指定建筑物的点云数据和/或DSM数据,根据点云数据和/或DSM数据生成指定建筑物的三维模型;
具体地,激光扫描点云数据是采用三维激光扫描仪获取的真实建筑物表面的空间采样点的坐标数据,激光扫描点云数据的获取方式可以包括以下任意一种:航空无人飞行器激光扫描、地面激光点云扫描车、背包式激光点云扫描设备等。DSM(Digital SurfaceModel,数字地表模型)数据包括了地面、地表建筑物、桥梁和树木等高度的高程信息,可以通过倾斜摄影等方式获取。常见的DSM数据包括:历史存储DSM、航空摄影测量方式生产获得的DSM数据等。指定建筑物的三维模型是利用点云数据和/或DSM数据中的一种数据或这两种数据构建的。
步骤S304,将指定建筑物的语义信息与三维模型进行关联,生成指定建筑物的语义结构模型,其中,语义信息包括指定建筑物的几何信息、标识信息和材质信息。
通常,语义信息包括标识信息、几何信息以及材质信息,其中,标识信息主要有每个模型对象的ID(Identification,身份标识号码)、该对象每个面的ID、房顶的建模方式等,几何建模完成后,系统会自动给数据中的每个模型对象与子对象分配一定长度的ID。几何信息主要包括该模型对象主要定义房顶是倾斜角度、房顶重要几何结构的距离长度属性等,几何信息可以根据激光扫面点云或DSM数据的特征点自动测量而获得。材质信息可以根据输入的高光谱数据分析并解析模型对象的建筑材质而获得。为三维模型中的每个模型面设置一个唯一对应的标识信息,将语义信息中包含的标识信息与三维模型中的每个模型面的标识信息进行相匹配,将语义信息赋予该三维模型的对应模型面上。
在实际使用时,根据点云数据和/或DSM数据生成指定建筑物的三维模型之后,该方法还包括:将指定建筑物的三维模型与预先存储的建筑矢量轮廓进行套合,将建筑矢量轮廓以外的数据删除,以建筑矢量轮廓线所在位置的纵向延伸为指定建筑物的边界,对指定建筑物的三维模型进行优化。
具体实现时,在本发明实施例中,点云数据和DSM数据为控制建筑物顶部高程与轮廓的主要信息,提取过程根据DEM(Digital Elevation Matrix,数字高程模型)/DTM(Digital Terrain Model,数字地面模型)获取建筑物所在的地面高程,从而获取精确的建筑物底和顶的高程与轮廓信息;为了进一步对生成的三维模型的轮廓进行优化,利用DLG(Digital Line Graphic,数字线划地图)/建筑轮廓矢量线来约束建筑轮廓,以生成精确的建筑三维模型。
具体地,根据几何信息和实景影像对应的定位信息,将实景影像映射到语义结构模型对应的位置的步骤包括:根据几何信息获取语义结构模型的各模型面的位置坐标信息;将各模型面的位置坐标信息与实景影像对应的定位信息进行匹配;如果位置坐标信息与实景影像对应的定位信息一致,将实景影像映射到语义结构模型对应的模型面上。
通常,将获取的纹理最优的实景影像映射到该语义结构模型上的过程是:将语义结构模型中各模型面的位置坐标信息和实景影像位置坐标信息进行匹配,将实景影像位置坐标信息与语义结构模型中各模型面的位置坐标信息一致的实景影像映射到对应的模型面上,以生成实景语义结构模型。
实施例二:
在上述实施例的基础上,本发明实施例还提供了一种实景语义结构模型的构建装置,如图4所示的一种实景语义结构模型的构建装置结构示意图,该装置包括:
第一获取模块402,用于获取指定建筑物的输入数据包,其中,输入数据包包括指定建筑物的语义结构模型、指定建筑物的实景影像和实景影像对应的定位信息;
提取模块404,用于提取语义结构模型中包括的指定建筑物的几何信息;
映射模块406,用于根据几何信息和实景影像对应的定位信息,将实景影像映射到语义结构模型对应的位置,以生成实景语义结构模型。
进一步,按照预先设置的组织方式对实景语义结构模型进行组织的步骤包括:获取实景语义结构模型的几何语义和特征语义;其中,几何语义中至少包括线、面、实体的语义,特征类语义至少包含建筑外部构件、建筑内部构件、地址、房间、门窗的语义;根据几何语义和特征类语义对实景语义结构模型进行分类组织,并将分类组织后的实景语义结构模型存储至关系型数据库中。
在图4的基础上,图5示出了另一种实景语义结构模型的构建装置结构示意图,该装置还包括:
第二获取模块502,用于获取指定建筑物的点云数据和/或DSM数据,根据点云数据和/或DSM数据生成指定建筑物的三维模型;
关联模块504,用于将指定建筑物的语义信息与三维模型进行关联,生成指定建筑物的语义结构模型,其中,语义信息包括指定建筑物的几何信息、标识信息和材质信息。
本发明实施例提供的实景语义结构模型的构建装置,与上述实施例提供的实景语义结构模型的构建方法具有相同的技术特征,所以也能解决相同的技术问题,达到相同的技术效果。
本发明实施例还提供了一种计算机存储介质,其中,用于存储计算机程序指令,当计算机执行计算机程序指令时,执行上述的方法。
本发明实施例所提供的实景语义结构模型的构建方法及装置的计算机程序产品,包括存储了程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行前面方法实施例中所述的方法,具体实现可参见方法实施例,在此不再赘述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上实施例,仅为本发明的具体实施方式,用以说明本发明的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发明进行了详细的说明,本领域技术人员应当理解:任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。