CN113918572A - 基于行政区划边界的农业统计数据自动匹配与校正的方法 - Google Patents
基于行政区划边界的农业统计数据自动匹配与校正的方法 Download PDFInfo
- Publication number
- CN113918572A CN113918572A CN202111276341.8A CN202111276341A CN113918572A CN 113918572 A CN113918572 A CN 113918572A CN 202111276341 A CN202111276341 A CN 202111276341A CN 113918572 A CN113918572 A CN 113918572A
- Authority
- CN
- China
- Prior art keywords
- data
- year
- field
- statistical
- database
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
- G06F16/2365—Ensuring data consistency and integrity
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2462—Approximate or statistical queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Probability & Statistics with Applications (AREA)
- Computer Security & Cryptography (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种基于行政区划边界的农业统计数据自动匹配与校正的方法,其特征在于,包括以下步骤:第1步:标准数据库准备;第2步:统计数据库与行政区划数据挂接;第3步:类型A统计数据的栅格化;第4步:类型B统计数据的栅格化;第5步:类型C统计数据的栅格化,与耕地不相关或不受耕地影响的类型C数据挂接;第6步:生成其他年份的统计栅格数据;第7步:对不同年份的栅格数据提取属性表并进行合并。本发明专利采用数据库、地理空间分析技术,实现对不同年份的县级农业统计数据实现自动匹配,从而实现基于行政区的统计数据校正。该方法可以用于全国范围或者省级范围的农业统计数据的匹配处理与校正。
Description
技术领域
本发明属于资源环境技术领域,尤其涉及一种基于行政区划边界的县级农业统计数据自动匹配的方法。
背景技术
每年行政区划都发生变更,例如由于乡镇、县市的合并或拆分,行政区划的边界会发生相应的变化,行政区划代码也常常发生相应的变化。县级统计数据通常以县市作为统计单元,每个年份的统计数据也是在当年的行政区划基础上进行统计汇总。由于省份、县市行政区划变化,在使用农业统计数据进行多年的趋势分析时,会出现行政区划不一致、数据不一致的情况,如某个县市由于行政区划的拆分,耕地面积相应减少,进而引起变更前后年份统计的粮食总产数据差异过大的现象。总之,由于行政区划的变更,对农业统计数据的使用主要存在以下三方面的问题:1)行政区划名称变更引起的匹配问题;2)由于行政区划的合并、拆分、变更,引起在变更年份前后统计数据的不一致问题;3)以某一年行政区划代码的为基准进行长时间序列分析时,其他年份都需要与该年份的行政区划代码进行匹配,工作量大。
发明内容
本发明所要解决的技术问题是针对现有技术的不足提供一种基于行政区划边界的农业统计数据自动匹配与校正的方法。
本发明的技术方案如下:
一种基于行政区划边界的农业统计数据自动匹配与校正的方法,包括以下步骤:
第1步:标准数据库准备
第2步:统计数据库与行政区划数据挂接
第3步:类型A统计数据的栅格化
第4步:类型B统计数据的栅格化
第5步:类型C统计数据的栅格化,与耕地不相关或不受耕地影响的类型C数据挂接;
第6步:生成其他年份的统计栅格数据
按照以上步骤,选择相应年份的农业统计数据、土地利用数据和行政区划数据,生成该年份的统计栅格数据,保存在不同的目录下;
第7步:对不同年份的栅格数据提取属性表并进行合并。
所述的方法,所述的第1步,具体方法为:
A11、准备行政区划数据库:准备与农业统计数据相对应年份的行政区划矢量数据,矢量图中的行政区划代码与名称与当年行政区划代码发布的标准代码和名称保持一致,数据保存为File GDB格式的数据库,GDB数据库名称为AdminZone,矢量图层命名方式为:BOUNT+四位年份;同时将行政区划转换为栅格格式,输出栅格图层名为RBOUNT+四位年份;行政区划空间数据若是地理坐标系,需要进行投影转换,根据行政区划范围,转换为相应的投影坐标系;
A12、准备土地利用数据库:准备与行政区划范围相一致仅且包含耕地的土地利用栅格格式数据,数据保存为File GDB格式的数据库,数据库名为Landuse,数据库图层命名方式:Landuse+四位年份;耕地栅格大小与行政区划栅格大小保持一致;若土地利用数据为矢量格式,使用ArcGIS中的Feature to Raster工具,转换为栅格数据;若不能获取所有年份土地利用数据,可以采用最近年份土地利用数据或者选择不同年代的土地利用数据替代;
A13、准备农业统计数据库:提取与行政区划矢量图年份一致的农业统计数据,农业统计数据指粮食、经济不同作物的播种面积、单位面积产量、总产量,猪、牛、羊存栏量养殖相关数据,氮、磷、钾、复合肥折纯施用量;农业统计数据分为以下三类:类型A:与耕地相关的单位强度农业统计数据;类型B:与耕地相关非强度的总产类型数据;类型C:与耕地不相关的农业统计数据;农业统计数据库为ACCESS格式的数据库,数据库名称为AgriData,数据表命名方式为:Stat+四位年份,不同年份的农业统计数据保存为一个独立的数据表;
A14、数据库字段标准化:对字段名称进行标准化,字段名称采用英文字母名称,符合数据库字段命名规范,不使用特殊字符;
A15、创建属性表:在农业统计数据库中增加数据表Desc,Desc数据表包含两个字段FieldName、FieldType,分别表示需要处理的数据项以及该数据项所归属的类别;
A16、字段分类:根据数据属性对每个字段分别划分为不同的类别,类别为A13中所描述的类别,用字母A、B、C分别表示不同类型的数据;
A17、数据表提取:将步骤A13中的Stat表根据类型提取生成Stat+年份_A、Stat+年份_B、Stat+年份_C表,可保存在AgriData数据库中;
A18、栅格数量提取:使用Zonal Statistics as Table分区统计工具,以该年份的行政区划作为分区图层,以行政区划ID作为分区统计字段,对土地利用栅格数据进行分区统计,获得每个行政单元下的耕地栅格数;输出表格式:ZL+年份;同样,对行政区划栅格数据进行统计,获得每个行政单元的栅格数,输出表格式:ZB+年份;
A19、统计数据更新:通过对统计数据表B(Stat+年份_B)的每个字段除以土地利用栅格统计表(ZL+年份)的Count字段进行更新,通过对统计数据表C(Stat+年份_C)的每个字段除以行政区划栅格统计表(ZB+年份)中的Count字段进行更新,换算得出每个栅格所代表的数据。
所述的方法,所述的第2步,具体方法为:
A20、描述表提取:根据步骤A16将Desc表根据类型提取生成Desc_A、Desc_B、Desc_C表,可保存在临时数据库Temp中。
A21、属性数据与空间数据挂接:使用关联(Add Join)工具,基于公共字段,将Stat+年份_A、Stat+年份_B、Stat+年份_C属性数据表与矢量行政区划图层BOUNT2000挂接,输出图层命名方式分别为:BOUNT+年份A、BOUNT+年份B、BOUNT+年份C。
所述的方法,所述的第3步,具体方法为:使用Modelbuilder中的迭代字段值(Iterate Field Values)迭代器工具,以Desc_A表作为输入表,设置FieldName作为输入字段,循环读取Desc_A表中FieldName的每一条记录,每条记录即为图层(BOUNT+年份A)属性表所对应的字段名;使用要素转栅格(Feature to Raster)工具,将图层(BOUNT+年份A)属性表中所对应的字段转换为浮点类型的栅格图层;再使用Extract by Mask工具将耕地栅格数据作为掩膜对栅格数据进行裁切,输出图层用字段名作为图层名,输出图层名格式为:字段名.TIF,统一保存在RasterA目录下。
所述的方法,所述的第4步,具体方法为:使用字段迭代器(Iterate Fields)循环读取每一个字段,以Desc_B表作为输入表,设置FieldName作为输入字段,循环读取Desc_B表中FieldName的每一条记录,每条记录即为图层(BOUNT+年份B)属性表所对应的字段名;使用要素转栅格(Feature to Raster)工具,将图层(BOUNT+年份B)属性表中所对应的字段转换为浮点类型的栅格图层;输出图层用字段名作为图层名,输出图层名格式为:字段名.TIF,统一保存在RasterB目录下。
所述的方法,所述的第5步,具体方法为:使用字段迭代器(Iterate Fields)循环读取每一个字段,以Desc_C表作为输入表,设置FieldName作为输入字段,循环读取Desc_C表中FieldName的每一条记录,每条记录即为图层(BOUNT+年份B)属性表所对应的字段名;使用要素转栅格(Feature to Raster)工具,将图层(BOUNT+年份C)属性表中所对应的字段转换为浮点类型的栅格图层;输出图层用字段名作为图层名,输出图层名格式为:字段名.TIF,统一保存在RasterC目录下。
所述的方法,所述的第7步,具体方法为:
A71、采用Iterate Rasters栅格迭代器,对类型A(RasterA内目录下)循环读取每个栅格图层,基于Zonal Statistics as Table分区统计工具,使用某一年份的行政区划图作为基准,进行分区统计,统计类型选择平均值(Mean),输出属性表,并进行属性表的合并;
A72、采用Iterate Rasters栅格迭代器,对类型B(RasterB内目录下)循环读取每个栅格图层,基于Zonal Statistics as Table分区统计工具,使用基准行政区划图,进行分区统计,统计类型选择合计(Sum),输出属性表,并进行属性表的合并;
A73、采用Iterate Rasters栅格迭代器,对类型C(RasterC内目录下)循环读取每个栅格图层,基于Zonal Statistics as Table分区统计工具,使用基准行政区划图,进行分区统计,统计类型选择合计(Sum),输出属性表,并进行属性表的合并;
A74、对步骤A71-A73的属性表进行合并,形成该年份的统计数据表;
A75、同样,对其他年份的统计栅格数据,按照步骤A71-A74进行分区统计,形成其他年份的统计数据表。
本发明专利采用数据库、地理空间分析技术,实现对不同年份的县级农业统计数据实现自动匹配,从而实现基于行政区的统计数据校正。该方法可以用于全国范围或者省级范围的农业统计数据的匹配处理与校正。
附图说明
图1为本发明的方法流程图;
具体实施方式
以下结合具体实施例,对本发明进行详细说明。
本发明的方法流程如图1所示:
第1步:标准数据库准备
A11、准备行政区划数据库:准备与农业统计数据相对应年份的行政区划矢量数据(若统计数据为县级,行政区划也为县级),矢量图中的行政区划代码与名称与当年行政区划代码发布的标准代码和名称保持一致,数据保存为File GDB格式的数据库,GDB数据库名称为AdminZone,矢量图层命名方式为:BOUNT+四位年份;同时将行政区划转换为栅格格式,输出栅格图层名为RBOUNT+四位年份;行政区划空间数据若是地理坐标系,需要进行投影转换,根据行政区划范围,转换为相应的投影坐标系;
A12、准备土地利用数据库:准备与行政区划范围相一致仅且包含耕地的土地利用栅格格式数据,数据保存为File GDB格式的数据库,数据库名为Landuse,数据库图层命名方式:Landuse+四位年份;耕地栅格大小与行政区划栅格大小保持一致;若土地利用数据为矢量格式,使用ArcGIS中的Feature to Raster工具,转换为栅格数据;若不能获取所有年份土地利用数据,可以采用最近年份土地利用数据或者选择不同年代的土地利用数据替代;
A13、准备农业统计数据库:提取与行政区划矢量图年份一致的农业统计数据(如2000年的统计数据),农业统计数据主要指粮食、经济等不同作物的播种面积、单位面积产量、总产量,猪、牛、羊存栏量等养殖相关数据,氮、磷、钾、复合肥折纯施用量等;农业统计数据分为以下三类:类型A:与耕地相关的单位强度农业统计数据,如粮食单位面积产量;类型B:与耕地相关非强度的总产类型数据,如播种面积、粮食总产、肥料折纯量;类型C:与耕地不相关的农业统计数据,如养殖存栏量数据;农业统计数据库为ACCESS格式的数据库,数据库名称为AgriData,数据表命名方式为:Stat+四位年份,不同年份的农业统计数据保存为一个独立的数据表。
A14、数据库字段标准化:对字段名称进行标准化,字段名称采用英文字母名称,符合数据库字段命名规范,不使用特殊字符。
A15、创建属性表:在农业统计数据库中增加数据表Desc,Desc数据表包含两个字段FieldName、FieldType,分别表示需要处理的数据项以及该数据项所归属的类别。
A16、字段分类:根据数据属性对每个字段分别划分为不同的类别,类别见A13中所描述,用字母A、B、C分别表示不同类型的数据。
A17、数据表提取:将步骤A13中的Stat表根据类型提取生成Stat+年份_A、Stat+年份_B、Stat+年份_C表,可保存在AgriData数据库中;
A18、栅格数量提取:使用Zonal Statistics as Table分区统计工具,以该年份的行政区划作为分区图层,以行政区划ID作为分区统计字段,对土地利用栅格数据进行分区统计,获得每个行政单元下的耕地栅格数;输出表格式:ZL+年份;同样,对行政区划栅格数据进行统计,获得每个行政单元的栅格数,输出表格式:ZB+年份;
A19、统计数据更新:通过对统计数据表B(Stat+年份_B)的每个字段除以土地利用栅格统计表(ZL+年份)的Count字段进行更新,通过对统计数据表C(Stat+年份_C)的每个字段除以行政区划栅格统计表(ZB+年份)中的Count字段进行更新,换算得出每个栅格所代表的数据。
第2步:统计数据库与行政区划数据挂接
A20、描述表提取:根据步骤A16将Desc表根据类型提取生成Desc_A、Desc_B、Desc_C表,可保存在临时数据库Temp中。
A21、属性数据与空间数据挂接:使用关联(Add Join)工具,基于公共字段,将Stat+年份_A、Stat+年份_B、Stat+年份_C属性数据表与矢量行政区划图层BOUNT2000挂接,输出图层命名方式分别为:BOUNT+年份A、BOUNT+年份B、BOUNT+年份C。
第3步:类型A统计数据的栅格化
使用Modelbuilder中的迭代字段值(Iterate Field Values)迭代器工具,以Desc_A表作为输入表,设置FieldName作为输入字段,循环读取Desc_A表中FieldName的每一条记录,每条记录即为图层(BOUNT+年份A)属性表所对应的字段名;使用要素转栅格(Feature to Raster)工具,将图层(BOUNT+年份A)属性表中所对应的字段转换为浮点类型的栅格图层;再使用Extract by Mask工具将耕地栅格数据作为掩膜对栅格数据进行裁切,输出图层用字段名作为图层名,输出图层名格式为:字段名.TIF,统一保存在RasterA目录下。
第4步:类型B统计数据的栅格化
使用字段迭代器(Iterate Fields)循环读取每一个字段,以Desc_B表作为输入表,设置FieldName作为输入字段,循环读取Desc_B表中FieldName的每一条记录,每条记录即为图层(BOUNT+年份B)属性表所对应的字段名;使用要素转栅格(Feature to Raster)工具,将图层(BOUNT+年份B)属性表中所对应的字段转换为浮点类型的栅格图层;输出图层用字段名作为图层名,输出图层名格式为:字段名.TIF,统一保存在RasterB目录下。
第5步:类型C统计数据的栅格化,与耕地不相关或不受耕地影响的类型C数据挂接:
使用字段迭代器(Iterate Fields)循环读取每一个字段,以Desc_C表作为输入表,设置FieldName作为输入字段,循环读取Desc_C表中FieldName的每一条记录,每条记录即为图层(BOUNT+年份B)属性表所对应的字段名;使用要素转栅格(Feature to Raster)工具,将图层(BOUNT+年份C)属性表中所对应的字段转换为浮点类型的栅格图层;输出图层用字段名作为图层名,输出图层名格式为:字段名.TIF,统一保存在RasterC目录下。
第6步:生成其他年份的统计栅格数据
按照以上步骤,选择相应年份的农业统计数据、土地利用数据和行政区划数据,生成该年份的统计栅格数据,保存在不同的目录下。
第7步:对不同年份的栅格数据提取属性表并进行合并
A71、采用Iterate Rasters栅格迭代器,对类型A(RasterA内目录下)循环读取每个栅格图层,基于Zonal Statistics as Table分区统计工具,使用某一年份的行政区划图作为基准,进行分区统计,统计类型选择平均值(Mean),输出属性表,并进行属性表的合并;
A72、采用Iterate Rasters栅格迭代器,对类型B(RasterB内目录下)循环读取每个栅格图层,基于Zonal Statistics as Table分区统计工具,使用基准行政区划图,进行分区统计,统计类型选择合计(Sum),输出属性表,并进行属性表的合并;
A73、采用Iterate Rasters栅格迭代器,对类型C(RasterC内目录下)循环读取每个栅格图层,基于Zonal Statistics as Table分区统计工具,使用基准行政区划图,进行分区统计,统计类型选择合计(Sum),输出属性表,并进行属性表的合并;
A74、对步骤A71-A73的属性表进行合并,形成该年份的统计数据表。
A75、同样,对其他年份的统计栅格数据,按照步骤A71-A74进行分区统计,形成其他年份的统计数据表。
下面以2000年、2010年、2020年省级农业统计数据、行政区划图、土地利用栅格数据为例,对本发明进行进一步详细描述:
本发明的运行环境为地理信息系统软件ArcGIS Pro 2.6以及Modelbuilder环境下运行;
第1步:标准数据库准备
1.1准备行政区划数据库:要求行政区划矢量数据与农业统计数据的年份相对应,行政区划矢量数据中行政区划代码和名称与当年发布的标准代码和名称保持一致,空间数据保存为File GDB格式的数据库。行政区划图坐标系为Albers投影坐标系。
GDB数据库名称:AdminZone
矢量图层名称:BOUNT2000
栅格图层名称:RBOUNT2000
1.2准备土地利用数据库:提取行政区划范围相一致的仅仅包含耕地的土地利用栅格数据,保存为File GDB格式的数据库。
GDB数据库名称:Landuse
栅格图层名称:Land2000
1.3准备农业统计数据库:提取行政区划矢量图年份一致的农业统计数据,保存为mdb格式的数据库。农业统计数据包括种植、养殖、化肥等相关数据。同事对字段名称进行标准化,注意字段名称要符合字段命名规范。
数据库名称:AgriData
数据表名称:Stat2000
1.4统计数据库标准化并创建属性表::在农业统计数据库AgriData中增加数据表Desc,包含两个字段FieldName、FieldType,分别表示需要处理的字段以及该数据项所归属的类别。将Stat2000的字段整理到数据表Desc中。
数据库名称:AgriData
数据表名称:Desc
1.5字段分类和数据表提取:根据1.4描述的类型,从分别提取A、B、C三种不同类型数据表,保存在格式为mdb的AgriData数据库。
数据库名称:AgriData
数据表名称:Stat2000_A、Stat2000_B、Stat2000_C
1.6栅格数量提取:使用Zonal Statistics as Table分区统计工具,使用分区统计(Zonal Statistics)工具,以BOUNT2000作为分区图层,行政区划PID作为分区统计字段,对Land2000进行分区统计,获得每个行政单元下的耕地栅格数;输出表:ZL2000;同样,以BOUNT2000作为分区图层,对RBount2000进行统计,获得每个行政单元的栅格数,输出表:ZB2000;
1.7统计数据更新:通过对统计数据表B(Stat+年份_B)的每个字段除以土地利用栅格统计表(ZL+年份)的Count字段进行更新,通过对统计数据表C(Stat+年份_C)的每个字段除以行政区划栅格统计表(ZB+年份)中的Count字段进行更新,换算得出每个栅格所代表的数据;更新Stat2000_B、Stat2000_C数据表:Stat2000_B、Stat2000_C分别与ZL2000、ZB2000挂接;挂接后,Stat2000_B、Stat2000_C数据表分别除以对应的栅格数,换算得出每个栅格所代表的数据。
第2步:统计数据库与行政区划数据挂接
2.1根据1.4描述的类型,从Desc分别提取A、B、C三种不同类型数据表,保存在格式为mdb的Temp数据库。
数据库名称:temp
数据表名称:Desc_A、Desc_B、Desc_C
2.2属性数据与空间数据挂接:使用关联(Add Join)工具,基于公共字段(如ID、省名等),将Stat2000_A、Stat2000_B、Stat2000_C数据表与矢量行政区划图层BOUNT2000挂接。
GDB数据库名称:AdminZone
输出图层名称:BOUNT2000A、BOUNT 2000B、BOUNT 2000C
第3步:类型A统计数据的栅格化
3.1使用Modelbuilder中的迭代字段值(Iterate Field Values)迭代器工具,以Desc_A表作为输入表,字段(Field)设置为FieldName,数据类型(Data Type)设置为Field,复选跳过空值(Skip Null Values),循环读取Desc_A表中FieldName的每一条记录,每条记录即为图层BOUNT2000A属性表所对应的字段名。
3.2使用要素转栅格(Feature to Raster)工具,将图层BOUNT2000A属性表中所对应的字段转换为浮点类型的栅格图层,输出图层名格式为:字段名.TIF。
3.4循环读取Desc_A属性表中每个字段作为栅格图层输出,统一保存在RasterA目录下。
第4步:类型B统计数据的栅格化
4.1使用迭代字段值(Iterate Field Values)迭代器工具,以Desc_B表作为输入表,字段(Field)设置为FieldName,数据类型(Data Type)设置为Field,复选跳过空值(Skip Null Values),循环读取Table_B表中FieldName的每一条记录,每条记录即为图层BOUNT2000B属性表所对应的字段名。
4.2使用要素转栅格(Feature to Raster)工具,将图层BOUNT2000B属性表中所对应的字段转换为浮点类型的栅格图层,输出图层名格式为:字段名.TIF。
4.3循环读取Desc_B属性表中每个字段作为栅格图层输出,统一保存在RasterB目录下。
第5步:类型C统计数据的栅格化
5.1使用迭代字段值(Iterate Field Values)迭代器工具,以Desc_C表作为输入表,字段(Field)设置为FieldName,数据类型(Data Type)设置为Field,复选跳过空值(Skip Null Values),循环读取Table_C表中FieldName的每一条记录,每条记录即为图层BOUNT2000C属性表所对应的字段名。
5.2使用要素转栅格(Feature to Raster)工具,将图层BOUNT2000C属性表中所对应的字段转换为浮点类型的栅格图层,输出图层名格式为:字段名.TIF。
5.3循环读取Desc_C属性表中每个字段作为栅格图层输出,统一保存在RasterC目录下。
第6步:生成其他年份的统计栅格数据
按照步骤1-5,选择相应年份的农业统计数据、土地利用数据和行政区划数据,生成该年份的统计栅格数据,如选择2010、2020年农业统计数据,生成相应的栅格图层,保存在不同的目录下。
第7步:对不同年份的栅格数据提取属性表并进行合并
7.1选择某一年份作为基准,例如选择2020年行政区划图作为基准,分别对不同年份的农业统计栅格数据进行提取。
7.2采用Iterate Rasters栅格迭代器,循环读取2000年统计数据目录下的RasterA目录下的每个栅格图层,基于Zonal Statistics as Table分区统计工具,统计类型选择平均值(Mean),输出属性表,并进行属性表的合并;
7.3采用Iterate Rasters栅格迭代器,循环读取2000年统计数据目录的RasterB目录下的每个栅格图层,基于Zonal Statistics as Table分区统计工具,统计类型选择合计(Sum),输出属性表,并进行属性表的合并;
7.4采用Iterate Rasters栅格迭代器,循环读取2000年统计数据目录的RasterC目录下的每个栅格图层,基于Zonal Statistics as Table分区统计工具,统计类型选择合计(Sum),输出属性表,并进行属性表的合并。
7.5对7.2-7.4步骤中的属性表进行合并,生成2000年的农业统计数据表。
7.6循环7.2-7.5步骤,可生成基于2020年行政区划的2010、2020年的农业统计数据表。
应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。
Claims (7)
1.一种基于行政区划边界的农业统计数据自动匹配与校正的方法,其特征在于,包括以下步骤:
第1步:标准数据库准备;
第2步:统计数据库与行政区划数据挂接;
第3步:类型A统计数据的栅格化;
第4步:类型B统计数据的栅格化;
第5步:类型C统计数据的栅格化,与耕地不相关或不受耕地影响的类型C数据挂接;
第6步:生成其他年份的统计栅格数据;
按照以上步骤,选择相应年份的农业统计数据、土地利用数据和行政区划数据,生成该年份的统计栅格数据,保存在不同的目录下;
第7步:对不同年份的栅格数据提取属性表并进行合并。
2.根据权利要求1所述的方法,其特征在于,所述的第1步,具体方法为:
A11、准备行政区划数据库:准备与农业统计数据相对应年份的行政区划矢量数据,矢量图中的行政区划代码与名称与当年行政区划代码发布的标准代码和名称保持一致,数据保存为File GDB格式的数据库,GDB数据库名称为AdminZone,矢量图层命名方式为:BOUNT+四位年份;同时将行政区划转换为栅格格式,输出栅格图层名为RBOUNT+四位年份;行政区划空间数据若是地理坐标系,需要进行投影转换,根据行政区划范围,转换为相应的投影坐标系;
A12、准备土地利用数据库:准备与行政区划范围相一致仅且包含耕地的土地利用栅格格式数据,数据保存为File GDB格式的数据库,数据库名为Landuse,数据库图层命名方式:Landuse+四位年份;耕地栅格大小与行政区划栅格大小保持一致;若土地利用数据为矢量格式,使用ArcGIS中的Feature to Raster工具,转换为栅格数据;若不能获取所有年份土地利用数据,可以采用最近年份土地利用数据或者选择不同年代的土地利用数据替代;
A13、准备农业统计数据库:提取与行政区划矢量图年份一致的农业统计数据,农业统计数据指粮食、经济不同作物的播种面积、单位面积产量、总产量,猪、牛、羊存栏量养殖相关数据,氮、磷、钾、复合肥折纯施用量;农业统计数据分为以下三类:类型A:与耕地相关的单位强度农业统计数据;类型B:与耕地相关非强度的总产类型数据;类型C:与耕地不相关的农业统计数据;农业统计数据库为ACCESS格式的数据库,数据库名称为AgriData,数据表命名方式为:Stat+四位年份,不同年份的农业统计数据保存为一个独立的数据表;
A14、数据库字段标准化:对字段名称进行标准化,字段名称采用英文字母名称,符合数据库字段命名规范,不使用特殊字符;
A15、创建属性表:在农业统计数据库中增加数据表Desc,Desc数据表包含两个字段FieldName、FieldType,分别表示需要处理的数据项以及该数据项所归属的类别;
A16、字段分类:根据数据属性对每个字段分别划分为不同的类别,类别为A13中所描述的类别,用字母A、B、C分别表示不同类型的数据;
A17、数据表提取:将步骤A13中的Stat表根据类型提取生成Stat+年份_A、Stat+年份_B、Stat+年份_C表,可保存在AgriData数据库中;
A18、栅格数量提取:使用Zonal Statistics as Table分区统计工具,以该年份的行政区划作为分区图层,以行政区划ID作为分区统计字段,对土地利用栅格数据进行分区统计,获得每个行政单元下的耕地栅格数;输出表格式:ZL+年份;同样,对行政区划栅格数据进行统计,获得每个行政单元的栅格数,输出表格式:ZB+年份;
A19、统计数据更新:通过对统计数据表B(Stat+年份_B)的每个字段除以土地利用栅格统计表(ZL+年份)的Count字段进行更新,通过对统计数据表C(Stat+年份_C)的每个字段除以行政区划栅格统计表(ZB+年份)中的Count字段进行更新,换算得出每个栅格所代表的数据。
3.根据权利要求1所述的方法,其特征在于,所述的第2步,具体方法为:
A20、描述表提取:根据步骤A16将Desc表根据类型提取生成Desc_A、Desc_B、Desc_C表,可保存在临时数据库Temp中。
A21、属性数据与空间数据挂接:使用关联(Add Join)工具,基于公共字段,将Stat+年份_A、Stat+年份_B、Stat+年份_C属性数据表与矢量行政区划图层BOUNT2000挂接,输出图层命名方式分别为:BOUNT+年份A、BOUNT+年份B、BOUNT+年份C。
4.根据权利要求1所述的方法,其特征在于,所述的第3步,具体方法为:使用Modelbuilder中的迭代字段值(Iterate Field Values)迭代器工具,以Desc_A表作为输入表,设置FieldName作为输入字段,循环读取Desc_A表中FieldName的每一条记录,每条记录即为图层(BOUNT+年份A)属性表所对应的字段名;使用要素转栅格(Feature to Raster)工具,将图层(BOUNT+年份A)属性表中所对应的字段转换为浮点类型的栅格图层;再使用Extract by Mask工具将耕地栅格数据作为掩膜对栅格数据进行裁切,输出图层用字段名作为图层名,输出图层名格式为:字段名.TIF,统一保存在RasterA目录下。
5.根据权利要求1所述的方法,其特征在于,所述的第4步,具体方法为:使用字段迭代器(Iterate Fields)循环读取每一个字段,以Desc_B表作为输入表,设置FieldName作为输入字段,循环读取Desc_B表中FieldName的每一条记录,每条记录即为图层(BOUNT+年份B)属性表所对应的字段名;使用要素转栅格(Feature to Raster)工具,将图层(BOUNT+年份B)属性表中所对应的字段转换为浮点类型的栅格图层;输出图层用字段名作为图层名,输出图层名格式为:字段名.TIF,统一保存在RasterB目录下。
6.根据权利要求1所述的方法,其特征在于,所述的第5步,具体方法为:使用字段迭代器(Iterate Fields)循环读取每一个字段,以Desc_C表作为输入表,设置FieldName作为输入字段,循环读取Desc_C表中FieldName的每一条记录,每条记录即为图层(BOUNT+年份B)属性表所对应的字段名;使用要素转栅格(Feature to Raster)工具,将图层(BOUNT+年份C)属性表中所对应的字段转换为浮点类型的栅格图层;输出图层用字段名作为图层名,输出图层名格式为:字段名.TIF,统一保存在RasterC目录下。
7.根据权利要求1所述的方法,其特征在于,所述的第7步,具体方法为:
A71、采用Iterate Rasters栅格迭代器,对类型A(RasterA内目录下)循环读取每个栅格图层,基于Zonal Statistics as Table分区统计工具,使用某一年份的行政区划图作为基准,进行分区统计,统计类型选择平均值(Mean),输出属性表,并进行属性表的合并;
A72、采用Iterate Rasters栅格迭代器,对类型B(RasterB内目录下)循环读取每个栅格图层,基于Zonal Statistics as Table分区统计工具,使用基准行政区划图,进行分区统计,统计类型选择合计(Sum),输出属性表,并进行属性表的合并;
A73、采用Iterate Rasters栅格迭代器,对类型C(RasterC内目录下)循环读取每个栅格图层,基于Zonal Statistics as Table分区统计工具,使用基准行政区划图,进行分区统计,统计类型选择合计(Sum),输出属性表,并进行属性表的合并;
A74、对步骤A71-A73的属性表进行合并,形成该年份的统计数据表;
A75、同样,对其他年份的统计栅格数据,按照步骤A71-A74进行分区统计,形成其他年份的统计数据表。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111276341.8A CN113918572B (zh) | 2021-10-29 | 2021-10-29 | 基于行政区划边界的农业统计数据自动匹配与校正的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111276341.8A CN113918572B (zh) | 2021-10-29 | 2021-10-29 | 基于行政区划边界的农业统计数据自动匹配与校正的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113918572A true CN113918572A (zh) | 2022-01-11 |
CN113918572B CN113918572B (zh) | 2022-06-07 |
Family
ID=79244038
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111276341.8A Active CN113918572B (zh) | 2021-10-29 | 2021-10-29 | 基于行政区划边界的农业统计数据自动匹配与校正的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113918572B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116993810A (zh) * | 2023-07-25 | 2023-11-03 | 中国农业科学院农业资源与农业区划研究所 | 一种综合考虑中心点和面积的土壤普查样点提取方法 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1341901A (zh) * | 2001-01-04 | 2002-03-27 | 中国科学院南京土壤研究所 | 农业生态多维数据管理技术 |
CN101593210A (zh) * | 2008-12-30 | 2009-12-02 | 中国科学院地理科学与资源研究所 | 一种提高空间分辨率和更新速度的人口统计方法及系统 |
CN102023983A (zh) * | 2009-09-11 | 2011-04-20 | 首都师范大学 | 统计时空数据库及其管理方法 |
US20160308954A1 (en) * | 2015-04-20 | 2016-10-20 | Wilbur-Elllis Company | Systems and Methods for Cloud-Based Agricultural Data Processing and Management |
CN106096051A (zh) * | 2016-06-29 | 2016-11-09 | 泰华智慧产业集团股份有限公司 | 基于统计数据及空间数据联动的产业信息展示系统及方法 |
CN109960781A (zh) * | 2019-03-21 | 2019-07-02 | 中国农业科学院农业资源与农业区划研究所 | 一种更新全球作物总产量栅格数据的方法 |
CN112669976A (zh) * | 2021-03-18 | 2021-04-16 | 清华大学 | 基于生态环境变化的人群健康评估方法及系统 |
CN112700137A (zh) * | 2020-12-30 | 2021-04-23 | 中山大学 | 一种基于地理信息数据的流域单元用水量划分方法 |
CN113155498A (zh) * | 2021-03-26 | 2021-07-23 | 中国科学院城市环境研究所 | 一种高分辨率建筑运行能耗碳排放测定方法、系统及设备 |
-
2021
- 2021-10-29 CN CN202111276341.8A patent/CN113918572B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1341901A (zh) * | 2001-01-04 | 2002-03-27 | 中国科学院南京土壤研究所 | 农业生态多维数据管理技术 |
CN101593210A (zh) * | 2008-12-30 | 2009-12-02 | 中国科学院地理科学与资源研究所 | 一种提高空间分辨率和更新速度的人口统计方法及系统 |
CN102023983A (zh) * | 2009-09-11 | 2011-04-20 | 首都师范大学 | 统计时空数据库及其管理方法 |
US20160308954A1 (en) * | 2015-04-20 | 2016-10-20 | Wilbur-Elllis Company | Systems and Methods for Cloud-Based Agricultural Data Processing and Management |
CN106096051A (zh) * | 2016-06-29 | 2016-11-09 | 泰华智慧产业集团股份有限公司 | 基于统计数据及空间数据联动的产业信息展示系统及方法 |
CN109960781A (zh) * | 2019-03-21 | 2019-07-02 | 中国农业科学院农业资源与农业区划研究所 | 一种更新全球作物总产量栅格数据的方法 |
CN112700137A (zh) * | 2020-12-30 | 2021-04-23 | 中山大学 | 一种基于地理信息数据的流域单元用水量划分方法 |
CN112669976A (zh) * | 2021-03-18 | 2021-04-16 | 清华大学 | 基于生态环境变化的人群健康评估方法及系统 |
CN113155498A (zh) * | 2021-03-26 | 2021-07-23 | 中国科学院城市环境研究所 | 一种高分辨率建筑运行能耗碳排放测定方法、系统及设备 |
Non-Patent Citations (5)
Title |
---|
S. SINGLA 等: "Raptor Zonal Statistics: Fully Distributed Zonal Statistics of Big Raster + Vector Data", 《2020 IEEE INTERNATIONAL CONFERENCE ON BIG DATA (BIG DATA)》 * |
刘志 等: "集成多源数据的飞机增雨地理要素提取", 《成都信息工程大学学报》 * |
曹明 等: "基于ArcGIS的河套灌区水土资源数据库的开发", 《人民长江》 * |
王卷乐 等: "中国乡镇(街道)人口密度数据集(2010年)", 《中国科学数据(中英文网络版)》 * |
郭兆夏 等: "基于GIS商州市农业气候区划信息服务系统", 《陕西气象》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116993810A (zh) * | 2023-07-25 | 2023-11-03 | 中国农业科学院农业资源与农业区划研究所 | 一种综合考虑中心点和面积的土壤普查样点提取方法 |
CN116993810B (zh) * | 2023-07-25 | 2024-02-20 | 中国农业科学院农业资源与农业区划研究所 | 一种综合考虑中心点和面积的土壤普查样点提取方法 |
Also Published As
Publication number | Publication date |
---|---|
CN113918572B (zh) | 2022-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Vogelmann et al. | Regional land cover characterization using Landsat Thematic Mapper data and ancillary data sources | |
Yuan et al. | Remodeling census population with spatial information from Landsat TM imagery | |
Elliott et al. | The parallel system for integrating impact models and sectors (pSIMS) | |
Matthews et al. | Methane emission from rice cultivation: Geographic and seasonal distribution of cultivated areas and emissions | |
CN112435292B (zh) | 一种基于遥感影像的水稻种植面积提取方法 | |
CN113918572B (zh) | 基于行政区划边界的农业统计数据自动匹配与校正的方法 | |
US20210378182A1 (en) | Method and computer system for assisting user in plant care | |
CN114625820A (zh) | 一种面向人工智能遥感影像解译的样本库系统及组织方法 | |
Klimanova et al. | Regional trends of land use and land cover transformation in Brazil in 2001-2012 | |
Barten et al. | Short‐stature maize reduced wind damage during the 2020 midwestern derecho, improving yields and greenhouse gas outcomes | |
Beza et al. | Expansion of sugarcane monoculture: associated impacts and management measures in the semi-arid East African Rift Valley, Ethiopia | |
CN105550220A (zh) | 一种异构系统的取数的方法及装置 | |
Ahmed et al. | GIS-based land suitability mapping for rubber cultivation in Seremban, Malaysia | |
Serna‐Chavez et al. | Spatial scale dependence of factors driving climate regulation services in the Americas | |
CN109960781B (zh) | 一种更新全球作物总产量栅格数据的方法 | |
CN113610622A (zh) | 一种基于多源数据的土地价值评估方法及装置 | |
US7188029B1 (en) | System and method for determining and presenting differences in plant productivity in variable locations and environments | |
CN112926857A (zh) | 一种高效城市规划容积率自动校正系统及方法 | |
MacLean | Changes in Area and Ownership of Timberland in Western Oregon, 1961-86 | |
CN113032334B (zh) | 一种wrf模式下垫面数据的处理方法 | |
Song et al. | Research on the Indicator for Measuring Nitrous Oxide Emission from Crop Residue | |
Jagannathan et al. | Applications of geographical information systems in economic analysis: a case study of Uganda | |
Reis et al. | Temporal stability of stratifications using different dendrometric variables and geostatistical interpolation | |
Zhai et al. | Spatial data management method with GeoSOT grid | |
Dumortier et al. | Towards an integrated global agricultural greenhouse gas model: Greenhouse Gases from Agriculture Simulation Model (GreenAgSiM) |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |