CN114490569B - 地块历史数据追溯方法、装置、设备及存储介质 - Google Patents
地块历史数据追溯方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN114490569B CN114490569B CN202111618229.8A CN202111618229A CN114490569B CN 114490569 B CN114490569 B CN 114490569B CN 202111618229 A CN202111618229 A CN 202111618229A CN 114490569 B CN114490569 B CN 114490569B
- Authority
- CN
- China
- Prior art keywords
- data
- historical
- target
- layer
- parcel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/219—Managing data history or versioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/29—Geographical information databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/906—Clustering; Classification
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种地块历史数据追溯方法、装置、设备及存储介质,该方法包括:获取目标地块的图层分类信息,并根据图层分类信息通过预设空间时态模型确定目标地块对应的历史版本图层数据集;获取目标地块的最小外包围盒和几何数据;根据最小外包围盒和几何数据对历史版本图层数据集中的各历史版本图层数据进行处理,获得目标地块的历史追溯数据集。由于本发明是根据目标地块的图层分类信息通过预设空间时态模型确定历史版本图层数据集,根据目标地块的最小外包围盒和几何数据对各历史版本图层数据处理获得目标地块的历史追溯数据集,解决了现有技术中在对地块进行历史数据追溯时数据检索和处理效率低的技术问题,提高了地块历史数据追溯的效率。
Description
技术领域
本发明涉及空间数据处理技术领域,尤其涉及一种地块历史数据追溯方法、装置、设备及存储介质。
背景技术
传统的空间数据存储模型主要利用数据库的属性字段对数据进行版本标记,然后再利用时间段属性进行查询,但不同版本的地块存在不同的属性信息,同时由于数据生产单位及人员的差异造成字段名称不统一,因此对多时间段的数据进行存储时,可能需要不断增加字段来满足不同时间属性的需要,同时需要对数据进行集中统一管理,造成数据中心数据存储压力过大,数据统一标准化成本高等问题。随着数据表的记录也会越来越多,当超过数据库存储的数据性能瓶颈时,就会极大的影响数据的检索效率。
随着第三次全国国土调查业务的展开和大数据技术的应用,国土空间数据的管理开始从粗放化管理到精细化管理的转变,因此需要通过各种技术手段,按照各业务部门管理的实际需求,实现对数据的深入挖掘应用,也因而对土地基础数据的保障需求全面性、应用服务的深入性、计算分析的时效性提出了更高的要求。与传统数据挖掘手段相比,土地空间数据分析具有数据敏感性、拓扑一致性、计算密集性等显著特征,而且国土业务中的数据组织也具有区域性的特点和时态性特点。传统架构的存储方法、现有通用型的空间大数据存储方法和数据统计手段,都不能很好为国土空间数据的统计分析提供有效支撑,在I/O性能、业务适用性方面存在制约,因此如何提高地块历史数据的追溯效率成为亟待解决的技术问题。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供了一种地块历史数据追溯方法、装置、设备及存储介质,旨在解决现有技术中地块历史数据追溯效率低的技术问题。
为实现上述目的,本发明提供了一种地块历史数据追溯方法,所述方法包括以下步骤:
获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集;
获取所述目标地块的最小外包围盒和几何数据;
根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集。
可选地,所述预设空间时态模型包括数据索引层,所述获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集,包括:
获取目标地块的图层分类信息,并根据所述图层分类信息确定所述目标地块的空间范围数据和时态索引;
根据所述空间范围数据和所述时态索引通过所述数据索引层确定所述目标地块的数据索引信息;
根据所述数据索引信息确定所述目标地块对应的历史版本图层数据集。
可选地,所述预设空间时态模型还包括数据存储层和数据访问中间件,所述根据所述数据索引信息确定所述目标地块对应的历史版本图层数据集,包括:
根据所述索引信息通过所述数据访问中间件从所述数据存储层查询所述目标地块的初始历史版本数据集;
通过所述数据访问中间件对所述初始历史版本数据集中的各初始历史版本数据进行格式化处理,获得所述目标地块对应的历史版本图层数据集。
可选地,所述根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集,包括:
获取所述历史版本图层数据集的数据量,并根据数据处理节点的节点信息和所述数据量将所述历史版本图层数据集划分为若干个子历史版本图层数据集;
根据所述最小外包围盒和所述几何数据对各子历史版本图层数据集进行处理,获得若干个结果数据集;
按照时间顺序将所述若干个结果数据集归类处理,获得所述目标地块的历史追溯数据集。
可选地,所述节点信息包括节点配置和节点数量,所述获取所述历史版本图层数据集的数据量,并根据数据处理节点信息和所述数据量将所述历史版本图层数据集划分为若干个子历史版本图层数据集,包括:
获取所述历史版本图层数据集的数据量,并根据各数据处理节点的节点配置确定各数据处理节点的权重;
根据所述权重、所述数据量和所述节点数量确定各数据处理节点的数据处理量;
根据各数据处理节点的数据处理量将所述历史版本图层数据集划分为若干个子历史版本图层数据集。
可选地,所述根据所述最小外包围盒和所述几何数据对各子历史版本图层数据集进行处理,获得若干个结果数据集,包括:
根据所述最小外包围盒对各子历史版本图层数据集进行空间叠加处理,获得若干个初始地块图层数据集;
根据所述几何数据对各初始地块图层数据集进行空间叠加处理,获得若干个任务地块图层数据集;
对所述若干个任务地块图层数据集中的图层数据进行图形分割处理,获得若干个结果图层数据集。
可选地,所述按照时间顺序将所述若干个结果数据集进行归类处理,获得所述目标地块的历史追溯数据集,包括:
获取所述若干个结果图层数据集中各类型地块的面积和所述目标地块的面积;
根据各类型地块的面积和所述目标地块的面积确定各结果图层数据集中各类型地块的面积比例;
将各结果图层数据集中各类型地块的面积比例按照时间顺序归类处理,获得所述目标地块的历史追溯数据集。
此外,为实现上述目的,本发明还提出一种地块历史数据追溯装置,所述装置包括:
确定模块,用于获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集;
获取模块,用于获取所述目标地块的最小外包围盒和几何数据;
处理模块,用于根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集。
此外,为实现上述目的,本发明还提出一种地块历史数据追溯设备,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的地块历史数据追溯程序,所述地块历史数据追溯程序配置为实现如上文所述的地块历史数据追溯方法的步骤。
此外,为实现上述目的,本发明还提出一种存储介质,所述存储介质上存储有地块历史数据追溯程序,所述地块历史数据追溯程序被处理器执行时实现如上文所述的地块历史数据追溯方法的步骤。
本发明获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集;获取所述目标地块的最小外包围盒和几何数据;根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集。由于本发明是根据目标地块的图层分类信息通过预设空间时态模型确定目标地块的历史版本图层数据集,根据目标地块的最小外包围盒和几何数据对各历史版本图层数据处理获得目标地块的历史追溯数据集,解决了现有技术中在对地块进行历史数据追溯时数据检索和处理效率低的技术问题,提高了地块历史数据追溯的效率。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的地块历史数据追溯设备的结构示意图;
图2为本发明地块历史数据追溯方法第一实施例的流程示意图;
图3为本发明地块历史数据追溯方法第一实施例的预设空间时态模型示意图;
图4为本发明地块历史数据追溯方法第二实施例的流程示意图;
图5为本发明地块历史数据追溯方法第三实施例的流程示意图;
图6为本发明地块历史数据追溯方法第三实施例的对目标地块进行历史数据追溯总的流程示意图;
图7为本发明地块历史数据追溯装置第一实施例的结构框图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的地块历史数据追溯设备结构示意图。
如图1所示,该地块历史数据追溯设备可以包括:处理器1001,例如中央处理器(Central Processing Unit,CPU),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(Wireless-Fidelity,WI-FI)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory,RAM),也可以是稳定的非易失性存储器(Non-Volatile Memory,NVM),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的结构并不构成对地块历史数据追溯设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及地块历史数据追溯程序。
在图1所示的地块历史数据追溯设备中,网络接口1004主要用于与网络服务器进行数据通信;用户接口1003主要用于与用户进行数据交互;本发明地块历史数据追溯设备中的处理器1001、存储器1005可以设置在地块历史数据追溯设备中,所述地块历史数据追溯设备通过处理器1001调用存储器1005中存储的地块历史数据追溯程序,并执行本发明实施例提供的地块历史数据追溯方法。
本发明实施例提供了一种地块历史数据追溯方法,参照图2,图2为本发明地块历史数据追溯方法第一实施例的流程示意图。
本实施例中,所述地块历史数据追溯方法包括以下步骤:
步骤S1:获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集。
需要说明的是,本实施例的执行主体可以是一种具有数据处理、网络通信以及程序运行功能的计算服务设备,例如平板电脑、个人电脑、手机等,或者是一种能够实现上述功能的电子设备、地块历史数据追溯设备等。以下以地块历史数据追溯设备为例,对本实施例及下述各实施例进行说明。
可以理解的是,目标地块可以是需要进行历史数据追溯的地块;图层分类信息包括用地类型、地块编号、时间属性、空间范围等信息;历史版本图层数据集可以是目标地块的历史版本图层构成的数据集,其中历史版本图层为目标地块在各历史时期对应的图层。
应该理解的是,预设空间时态模型可以是预先设置的用于对目标地块进行历史版本图层数据检索的模型。
在具体实现中,地块历史数据追溯设备获取目标地块的用地类型、地块编号、时间属性、空间范围等信息,并根据上述信息通过预设空间时态模型确定需要进行历史数据追溯的地块的历史版本图层数据集。
步骤S2:获取所述目标地块的最小外包围盒和几何数据。
可以理解的是,最小外包围盒可以是目标地块集合区域的最小外接矩形;几何数据可以是目标地块的尺寸数据。
步骤S3:根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集。
应该理解的是,根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中各历史版本图层数据进行处理可以是:先根据最小外包围盒对各历史版本图层数据进行预处理,获得初始历史版本图层数据集,再根据几何数据对初始历史版本图层数据集中的各初始历史版本图层数据进行处理,获得目标地块的地块历史数据集,将地块历史数据集中的数据按照对应的历史时间进行归类,获得目标地块的历史追溯数据集。
可以理解的是,历史追溯数据集可以是根据目标地块的历史数据及对应的历史时间构成的可以对目标地块的历史地块数据进行追溯数据集。
在具体实现中,地块历史数据追溯设备获取目标地块的用地类型、空间范围、时间属性、地块编号等信息,根据上述信息通过预先设置的用于对目标地块进行历史版本图层数据检索的模型确定目标地块对应的历史版本图层数据集,地块历史数据追溯设备获取目标地块的最小外包围盒和几何数据,先根据最小外包围盒对各历史版本图层数据集进行预处理获得初始历史版本图层数据集,再通过几何数据对初始历史版本图层数据集中的数据进行处理,获得地块历史数据集,将地块历史数据集中的数据按照时间顺序进行归类,获得目标地块的历史追溯数据集。
进一步地,为了提高目标地块历史版本图层数据的检索效率,所述预设空间时态模型包括数据索引层,所述步骤S1包括:
步骤S11:获取目标地块的图层分类信息,并根据所述图层分类信息确定所述目标地块的空间范围数据和时态索引。
可以理解的是,图层分类信息包括目标地块的用地类型、地块编号、时间属性和空间范围等信息,可从图层分类信息中获得目标地块的空间范围数据和时态索引。
应该理解的是,空间范围数据可以是目标地块的在空间中的几何尺寸数据,可根据目标地块的边界线确定;时态索引可以是需要追溯的目标地块历史数据的索引。
步骤S12:根据所述空间范围数据和所述时态索引通过所述数据索引层确定所述目标地块的数据索引信息。
应该理解的是,根据空间范围数据和时态索引通过数据索引层确定目标地块的索引信息可以是根据空间范围数据确定检索的目标数据以及该目标数据对应的目标数据库,根据时态索引通过数据索引层确定检索数据时的历史时间范围,所述目标数据库和所述历史时间范围构成数据索引信息。
步骤S13:根据所述数据索引信息确定所述目标地块对应的历史版本图层数据集。
应该理解的是,根据数据索引信息确定目标地块对应的历史版本图层数据集可以是根据数据索引信息在目标数据库中检索历史时间范围内的目标数据,检索到的目标数据构成目标地块对应的历史版本图层数据集。
在具体实现中,地块历史追溯设备根据目标地块的图层分类信息确定目标地块的空间范围数据和时态索引,根据空间范围数据确定要检索的目标数据以及目标数据对应的目标数据库,根据时态索引确定要检索的数据的历史时间范围,目标数据及历史时间范围构成数据索引信息,根据数据索引信息在目标数据库中检索处于开始时间单范围内的历史版本图层数据,获得目标地块的历史版本图层数据集。
进一步地,为了提高目标地块历史版本图层数据的处理效率,所述预设空间时态模型还包括数据存储层和数据访问中间件,所述步骤S13包括:
步骤S131:根据所述索引信息通过所述数据访问中间件从所述数据存储层查询所述目标地块的初始历史版本数据集。
可以理解的是,数据存储层包括多个数据库;数据访问中间件可根据索引信息从数据存储层中检索与目标地块对应的初始历史版本数据,获得初始历史版本数据集。
步骤S132:通过所述数据访问中间件对所述初始历史版本数据集中的各初始历史版本数据进行格式化处理,获得所述目标地块对应的历史版本图层数据集。
应该理解的是,通过数据访问中间件对各初始历史版本数据进行格式化处理获得历史版本图层数据集可以是数据访问中间件对从不同数据检索到的初始历史版本数据的格式进行转换,获得格式一致的数据,组成历史版本图层数据集。
在具体实现中,可参照图3,预设空间时态模型由数据存储层、数据索引层、数据访问中间件和分布式任务调度层构成;数据存储层由各种不同的数据源组成,包括基于oracle的空间数据图层(oracle spatial,arcgis sde),postgresql(postgis空间扩展)数据库,人大金仓数据库,shapefile文件,HDFS文件存储等数据库,通过统一的数据访问接口对外提供数据访问;数据索引层是对数据的元数据进行集中管理,支持数据存储层中不同类型的数据的元数据索引,包括数据源连接,数据表字段元数据管理,数据的历史版本索引管理等;数据访问中间件根据数据索引层的索引信息,提供对不同数据源数据的快速访问接口以及常用增加、删除、修改改、查询等数据操作,还支持对数据进行格式转换、数据动态缓存、数据切分划块等;分布式任务调度层可根据数据的空间密度和时态索引对数据处理任务进行划分。
本实施例获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集;获取所述目标地块的最小外包围盒和几何数据;根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集。由于本实施例是根据目标地块的图层分类信息通过预设空间时态模型确定目标地块的历史版本图层数据集,根据目标地块的最小外包围盒和几何数据对各历史版本图层数据处理获得目标地块的历史追溯数据集,解决了现有技术中在对地块进行历史数据追溯时数据检索和处理效率低的技术问题,提高了地块历史数据追溯的效率。
参考图4,图4为本发明地块历史数据追溯方法第二实施例的流程示意图。
基于上述第一实施例,在本实施例中,所述步骤S3包括:
步骤S31:获取所述历史版本图层数据集的数据量,并根据数据处理节点的节点信息和所述数据量将所述历史版本图层数据集划分为若干个子历史版本图层数据集。
可以理解的是,获取历史版本图层数据集的数据量可以是获取历史版本图层数据集中的历史版本图层数据的个数,例如历史版本图层数据集为D{d1,d2,d3,...,dn},则数据量为n,其中的每个数据对应不同的历史时刻。
应该理解的是,节点信息可以是数据处理节点的数据处理能力信息;根据节点信息和数据量将历史版本图层数据集划分为若干个子历史版本数据集可以是根据各数据节点的数据处理能力信息和数据量将历史版本图层数据集划分为若干个子历史版本图层数据集,将若干个子历史版本图层数据集分别发送至对应的数据处理节点进行处理。
步骤S32:根据所述最小外包围盒和所述几何数据对各子历史版本图层数据集进行处理,获得若干个结果数据集。
应该理解的是,本实施例通过若干个数据处理节点分别处理接收到的子历史版本图层数据集,在此以其中一个节点处理处理子历史版本图层数据集为例进行说明。
在具体实现中,地块历史数据追溯设备根据最小外包围盒和几何数据通过数据处理节点处理接收到的子历史版本图层数据集中历史版本图层数据,获得若干个结果数据集。
步骤S33:按照时间顺序将所述若干个结果数据集归类处理,获得所述目标地块的历史追溯数据集。
在具体实现中,阿静若干个结果数据集中的数据按照时间顺序归类,即可获得目标地块的历史追溯数据集。
进一步地,为了提高数据处理的效率,所述节点信息包括节点配置和节点数量,所述步骤S31包括:
步骤S311:获取所述历史版本图层数据集的数据量,并根据各数据处理节点的节点配置确定各数据处理节点的权重。
应该理解的是,节点配置可以是数据处理节点的CPU和内存等影响数据处理效率的参数配置;根据数据处理节点的节点配置确定各数据处理节点的权重可以是根据各数据处理节点的CPU和内存的参数配置确定各数据处理节点的权重,数据处理节点的参数配置越高,其权重越大。
步骤S312:根据所述权重、所述数据量和所述节点数量确定各数据处理节点的数据处理量。
在具体实现中,各数据处理节点的数据处理量可通过下式确定:
式中,Ci为第i个节点的数据处理量;qi为第i个节点权重;n为数据量;k为节点数量。
步骤S313:根据各数据处理节点的数据处理量将所述历史版本图层数据集划分为若干个子历史版本图层数据集。
在具体实现中,各数据处理节点可同时处理数据,也可利用部分数据处理节点处理数据;在所有数据处理节点均参数数据处理时,子历史版本图层数据集的个数就等于节点数量;若仅利用部分数据处理节点处理数据时,可根据每个数据处理节点的实际数据处理能力将历史版本图层数据集划分为若干个子历史版本图层数据集。
本实施例获取所述历史版本图层数据集的数据量,并根据数据处理节点的节点信息和所述数据量将所述历史版本图层数据集划分为若干个子历史版本图层数据集;根据所述最小外包围盒和所述几何数据对各子历史版本图层数据集进行处理,获得若干个结果数据集;按照时间顺序将所述若干个结果数据集归类处理,获得所述目标地块的历史追溯数据集,采用分布式数据处理的方法,提高了数据处理的效率。
参考图5,图5为本发明地块历史数据追溯方法第三实施例的流程示意图。
基于上述各实施例,在本实施例中,步骤S32包括:
步骤S321:根据所述最小外包围盒对各子历史版本图层数据集进行空间叠加处理,获得若干个初始地块图层数据集。
应该理解的是,本实施例以其中一个子历史版本图层数据集为例进行说明;若该子历史版本图层数据集中有m个数据,根据目标地块的最小外包围盒对m个历史版本图层数据分别进行空间叠加处理,获得初始地块图层数据集,其中初始地块图层数据集中数据为初始地块图层数据,其几何数据与最小外包围盒的集合数据相同,可初步确定目标地块的历史空间区域,其中初始地块图层数据集可用A{a1,a2,...,am}表示。
步骤S322:根据所述几何数据对各初始地块图层数据集进行空间叠加处理,获得若干个任务地块图层数据集。
可以理解的是,根据目标地块的几何数据对各初始地块图层数据进行叠加处理,可将最小外包围盒内大于目标地块空间范围的数据去除,获得与目标地块的空间范围数据一致的任务地块图层数据,其中任务地块图层数据集可用B{b1,b2,...,bm}表示。
步骤S323:对所述若干个任务地块图层数据集中的图层数据进行图形分割处理,获得若干个结果图层数据集。
应该理解的是,可通过Sutherland-Hodgman算法对各初始地块图层数据进行图形切割处理,将任务地块图层数据集中不同用地类型的地块切割开,即可获得与目标地块的用地类型不一致的图层数据,不一致的图层数据组成结果图层数据集,可用C{c1,c2,...,cm}表示。
进一步地,为了提高地块历史数据追溯的效率,所述按照时间顺序将所述若干个结果数据集进行归类处理,获得所述目标地块的历史追溯数据集,包括:获取所述若干个结果图层数据集中各类型地块的面积和所述目标地块的面积;根据各类型地块的面积和所述目标地块的面积确定各结果图层数据集中各类型地块的面积比例;将各结果图层数据集中各类型地块的面积比例按照时间顺序归类处理,获得所述目标地块的历史追溯数据集。
应该理解的是,地块历史数据追溯设备获取各结果图层数据集中各类型地块的面积和目标地块的面积,并计算各类型地块的面积占目标地块面积的比例,按照时间顺序将各类型地块面积占目标地块的面积比例进行归类,获得目标地块的历史追溯数据集,该数据集中可反映在各历史阶段,目标地块的空间范围内各类型地块的比例,其中历史追溯数据集可用X{x1,x2,...,xm}表示。
在具体实现中,参照图6,在开始对目标地块进行历史数据追溯时,通过预设时态空间模型获得历史版本图层数据集,然后进行分布式任务划分,将历史版本图层数据集划分为m个数据集,分别对m个数据集中的数据依次进行空间叠加处理、图形分割处理、将处理结果归类处理,最后将结果汇总获得目标地块的历史追溯数据集。
本实施例根据所述最小外包围盒对各子历史版本图层数据集进行空间叠加处理,获得若干个初始地块图层数据集;根据所述几何数据对各初始地块图层数据集进行空间叠加处理,获得若干个任务地块图层数据集;对所述若干个任务地块图层数据集中的图层数据进行图形分割处理,获得若干个结果图层数据集。提高了数据处理的效率。
此外,本发明实施例还提出一种存储介质,所述存储介质上存储有地块历史数据追溯程序,所述地块历史数据追溯程序被处理器执行时实现如上文所述的地块历史数据追溯方法的步骤。
参照图7,图7为本发明地块历史数据追溯装置第一实施例的结构框图。
如图7所示,本发明实施例提出的地块历史数据追溯装置包括:确定模块10、获取模块20和处理模块30。
确定模块10,用于获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集;
获取模块20,用于获取所述目标地块的最小外包围盒和几何数据;
处理模块30,用于根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集。
本实施例获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集;获取所述目标地块的最小外包围盒和几何数据;根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集。由于本实施例是根据目标地块的图层分类信息通过预设空间时态模型确定目标地块的历史版本图层数据集,根据目标地块的最小外包围盒和几何数据对各历史版本图层数据处理获得目标地块的历史追溯数据集,解决了现有技术中在对地块进行历史数据追溯时数据检索和处理效率低的技术问题,提高了地块历史数据追溯的效率。
基于本发明上述地块历史数据追溯装置第一实施例,提出本发明地块历史数据追溯装置的第二实施例。
在本实施例中,所述获取模块10,还用于获取目标地块的图层分类信息,并根据所述图层分类信息确定所述目标地块的空间范围数据和时态索引;根据所述空间范围数据和所述时态索引通过所述数据索引层确定所述目标地块的数据索引信息;根据所述数据索引信息确定所述目标地块对应的历史版本图层数据集;所述预设空间时态模型包括数据索引层。
所述获取模块10,还用于根据所述索引信息通过所述数据访问中间件从所述数据存储层查询所述目标地块的初始历史版本数据集;通过所述数据访问中间件对所述初始历史版本数据集中的各初始历史版本数据进行格式化处理,获得所述目标地块对应的历史版本图层数据集;所述预设空间时态模型还包括数据存储层和数据访问中间件。
所述处理模块30,还用于获取所述历史版本图层数据集的数据量,并根据数据处理节点的节点信息和所述数据量将所述历史版本图层数据集划分为若干个子历史版本图层数据集;根据所述最小外包围盒和所述几何数据对各子历史版本图层数据集进行处理,获得若干个结果数据集;按照时间顺序将所述若干个结果数据集归类处理,获得所述目标地块的历史追溯数据集。
所述处理模块30,还用于获取所述历史版本图层数据集的数据量,并根据各数据处理节点的节点配置确定各数据处理节点的权重;根据所述权重、所述数据量和所述节点数量确定各数据处理节点的数据处理量;根据各数据处理节点的数据处理量将所述历史版本图层数据集划分为若干个子历史版本图层数据集。
所述处理模块30,还用于根据所述最小外包围盒对各子历史版本图层数据集进行空间叠加处理,获得若干个初始地块图层数据集;根据所述几何数据对各初始地块图层数据集进行空间叠加处理,获得若干个任务地块图层数据集;对所述若干个任务地块图层数据集中的图层数据进行图形分割处理,获得若干个结果图层数据集。
所述处理模块30,还用于获取所述若干个结果图层数据集中各类型地块的面积和所述目标地块的面积;根据各类型地块的面积和所述目标地块的面积确定各结果图层数据集中各类型地块的面积比例;将各结果图层数据集中各类型地块的面积比例按照时间顺序归类处理,获得所述目标地块的历史追溯数据集。
本发明地块历史数据追溯装置的其他实施例或具体实现方式可参照上述各方法实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器/随机存取存储器、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (8)
1.一种地块历史数据追溯方法,其特征在于,所述方法包括:
获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集;
获取所述目标地块的最小外包围盒和几何数据,所述几何数据为尺寸数据;
根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集;
所述根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集,包括:
根据所述最小外包围盒对各子历史版本图层数据集进行空间叠加处理,获得若干个初始地块图层数据集,其中初始地块图层数据集中数据为初始地块图层数据,其几何数据与最小外包围盒的集合数据相同,初步确定目标地块的历史空间区域;
将最小外包围盒内大于目标地块空间范围的数据去除,获得与目标地块的空间范围数据一致的任务地块图层数据集;
将任务地块图层数据集中不同用地类型的地块切割开,获得与目标地块的用地类型不一致的图层数据,不一致的图层数据组成若干个结果图层数据集;
获取所述若干个结果图层数据集中各类型地块的面积和所述目标地块的面积;
根据各类型地块的面积和所述目标地块的面积确定各结果图层数据集中各类型地块的面积比例;
将各结果图层数据集中各类型地块的面积比例按照时间顺序归类处理,获得所述目标地块的历史追溯数据集。
2.如权利要求1所述的方法,其特征在于,所述预设空间时态模型包括数据索引层,所述获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集,包括:
获取目标地块的图层分类信息,并根据所述图层分类信息确定所述目标地块的空间范围数据和时态索引;
根据所述空间范围数据和所述时态索引通过所述数据索引层确定所述目标地块的数据索引信息;
根据所述数据索引信息确定所述目标地块对应的历史版本图层数据集。
3.如权利要求2所述的方法,其特征在于,所述预设空间时态模型还包括数据存储层和数据访问中间件,所述根据所述数据索引信息确定所述目标地块对应的历史版本图层数据集,包括:
根据所述索引信息通过所述数据访问中间件从所述数据存储层查询所述目标地块的初始历史版本数据集;
通过所述数据访问中间件对所述初始历史版本数据集中的各初始历史版本数据进行格式化处理,获得所述目标地块对应的历史版本图层数据集。
4.如权利要求1所述的方法,其特征在于,所述根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集,包括:
获取所述历史版本图层数据集的数据量,并根据数据处理节点的节点信息和所述数据量将所述历史版本图层数据集划分为若干个子历史版本图层数据集。
5.如权利要求4所述的方法,其特征在于,所述节点信息包括节点配置和节点数量,所述获取所述历史版本图层数据集的数据量,并根据数据处理节点的节点信息和所述数据量将所述历史版本图层数据集划分为若干个子历史版本图层数据集,包括:
获取所述历史版本图层数据集的数据量,并根据各数据处理节点的节点配置确定各数据处理节点的权重;
根据所述权重、所述数据量和所述节点数量确定各数据处理节点的数据处理量;
根据各数据处理节点的数据处理量将所述历史版本图层数据集划分为若干个子历史版本图层数据集。
6.一种地块历史数据追溯装置,其特征在于,所述装置包括:
确定模块,用于获取目标地块的图层分类信息,并根据所述图层分类信息通过预设空间时态模型确定所述目标地块对应的历史版本图层数据集;
获取模块,用于获取所述目标地块的最小外包围盒和几何数据;
处理模块,用于根据所述最小外包围盒和所述几何数据对所述历史版本图层数据集中的各历史版本图层数据进行处理,获得所述目标地块的历史追溯数据集;
所述处理模块,还用于根据所述最小外包围盒对各子历史版本图层数据集进行空间叠加处理,获得若干个初始地块图层数据集,其中初始地块图层数据集中数据为初始地块图层数据,其几何数据与最小外包围盒的集合数据相同,初步确定目标地块的历史空间区域;将最小外包围盒内大于目标地块空间范围的数据去除,获得与目标地块的空间范围数据一致的任务地块图层数据集;将任务地块图层数据集中不同用地类型的地块切割开,获得与目标地块的用地类型不一致的图层数据,不一致的图层数据组成若干个结果图层数据集;获取所述若干个结果图层数据集中各类型地块的面积和所述目标地块的面积;根据各类型地块的面积和所述目标地块的面积确定各结果图层数据集中各类型地块的面积比例;将各结果图层数据集中各类型地块的面积比例按照时间顺序归类处理,获得所述目标地块的历史追溯数据集。
7.一种地块历史数据追溯设备,其特征在于,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的地块历史数据追溯程序,所述地块历史数据追溯程序配置为实现如权利要求1至5中任一项所述的地块历史数据追溯方法的步骤。
8.一种存储介质,其特征在于,所述存储介质上存储有地块历史数据追溯程序,所述地块历史数据追溯程序被处理器执行时实现如权利要求1至5任一项所述的地块历史数据追溯方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111618229.8A CN114490569B (zh) | 2021-12-27 | 2021-12-27 | 地块历史数据追溯方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111618229.8A CN114490569B (zh) | 2021-12-27 | 2021-12-27 | 地块历史数据追溯方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114490569A CN114490569A (zh) | 2022-05-13 |
CN114490569B true CN114490569B (zh) | 2022-11-15 |
Family
ID=81496528
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111618229.8A Active CN114490569B (zh) | 2021-12-27 | 2021-12-27 | 地块历史数据追溯方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114490569B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105608127A (zh) * | 2015-12-16 | 2016-05-25 | 江西理工大学 | 一种农地权属公示图自动生成方法 |
CN109739943A (zh) * | 2018-12-14 | 2019-05-10 | 中国测绘科学研究院 | 面向自然资源矢量地表覆盖变化统计处理方法 |
CN111324685A (zh) * | 2020-02-28 | 2020-06-23 | 天津完美引力科技有限公司 | 一种历史地图数据的处理的方法、装置和系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9229952B1 (en) * | 2014-11-05 | 2016-01-05 | Palantir Technologies, Inc. | History preserving data pipeline system and method |
-
2021
- 2021-12-27 CN CN202111618229.8A patent/CN114490569B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105608127A (zh) * | 2015-12-16 | 2016-05-25 | 江西理工大学 | 一种农地权属公示图自动生成方法 |
CN109739943A (zh) * | 2018-12-14 | 2019-05-10 | 中国测绘科学研究院 | 面向自然资源矢量地表覆盖变化统计处理方法 |
CN111324685A (zh) * | 2020-02-28 | 2020-06-23 | 天津完美引力科技有限公司 | 一种历史地图数据的处理的方法、装置和系统 |
Non-Patent Citations (3)
Title |
---|
土地调查更新数据双向索引模型研究;谈媛媛;《国土资源信息化》;20181231(第2期);第38-44页 * |
基于ArcSDE的版本管理与历史回溯设计与实现;邹时林等;《东华理工大学学报(自然科学版)》;20081231(第04期);全文 * |
基于历史关系数据库的时空数据库实现研究;黄勇奇等;《遥感学报》;20080915(第05期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN114490569A (zh) | 2022-05-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20230334030A1 (en) | System and method for slowly changing dimension and metadata versioning in a multidimensional database environment | |
US20230084389A1 (en) | System and method for providing bottom-up aggregation in a multidimensional database environment | |
CN113778967B (zh) | 长江流域数据采集处理与资源共享系统 | |
US12099907B2 (en) | Automated geospatial data analysis | |
US9367574B2 (en) | Efficient query processing in columnar databases using bloom filters | |
CN112699175A (zh) | 一种数据治理系统及其方法 | |
EP2249299A1 (en) | Contextualizing business intelligence reports based on context driven information | |
CN106897954A (zh) | 智慧城市时空信息云平台 | |
EP2290578A1 (en) | Method and system to configure security rights based on contextual information | |
Bakli et al. | HadoopTrajectory: a Hadoop spatiotemporal data processing extension | |
CN104050213B (zh) | 包括数据分类的查询处理系统 | |
Lewis et al. | Lidar data management pipeline; from spatial database population to web-application visualization | |
CN111708895B (zh) | 一种知识图谱系统的构建方法及装置 | |
CN115222374A (zh) | 一种基于大数据处理的政务数据服务系统 | |
CN112330227A (zh) | 基于数字化城管业务构建的城市管理能力评价方法和系统 | |
CN109688223B (zh) | 生态环境数据资源共享方法及装置 | |
CN114490569B (zh) | 地块历史数据追溯方法、装置、设备及存储介质 | |
CN112100177A (zh) | 数据存储方法、装置、计算机设备及存储介质 | |
CN117390011A (zh) | 报表数据处理方法、装置、计算机设备和存储介质 | |
CN111382165A (zh) | 一种移动国土管理系统 | |
Scholl et al. | Optimizing distance-based methods for large data sets | |
US20210216575A1 (en) | Graph analysis of geo-temporal information | |
CN112632408A (zh) | 基于互联网与智能技术的环境地质调查系统 | |
Yang et al. | Optimizing Taxi Route Planning Based on Taxi Trajectory Data Analysis | |
CN113590732B (zh) | 遥感解译样本点的显示方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |