CN116166767A - 一种基于云计算的测绘地理信息数据采集方法及系统 - Google Patents

一种基于云计算的测绘地理信息数据采集方法及系统 Download PDF

Info

Publication number
CN116166767A
CN116166767A CN202310456304.8A CN202310456304A CN116166767A CN 116166767 A CN116166767 A CN 116166767A CN 202310456304 A CN202310456304 A CN 202310456304A CN 116166767 A CN116166767 A CN 116166767A
Authority
CN
China
Prior art keywords
data
node
module
data analysis
mapping
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310456304.8A
Other languages
English (en)
Inventor
苗元欣
赵雪松
刘欢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fifth Geological Brigade of Shandong Provincial Bureua of Geology and Mineral Resources of Fifth Geological and Mineral Exploration Institute of Shandong Province
Original Assignee
Fifth Geological Brigade of Shandong Provincial Bureua of Geology and Mineral Resources of Fifth Geological and Mineral Exploration Institute of Shandong Province
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fifth Geological Brigade of Shandong Provincial Bureua of Geology and Mineral Resources of Fifth Geological and Mineral Exploration Institute of Shandong Province filed Critical Fifth Geological Brigade of Shandong Provincial Bureua of Geology and Mineral Resources of Fifth Geological and Mineral Exploration Institute of Shandong Province
Priority to CN202310456304.8A priority Critical patent/CN116166767A/zh
Publication of CN116166767A publication Critical patent/CN116166767A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/258—Data format conversion from or to a database
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29—Geographical information databases
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Remote Sensing (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种基于云计算的测绘地理信息数据采集方法及系统，属于测绘地理信息领域，涉及云计算技术，通过现代测量仪器获取地理测绘数据，并发送至数据存储模块；提出信息解析模块获取数据存储模块内存储的数据包并进行标分值分析，根据标分值BF分配对应数量的数据解析节点，算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ，并根据节点允用因数YJ对数据解析节点进行降序排列；根据数据解析节点的排列顺序筛选对应的数据解析节点数量SL的数据解析节点；并将筛选出的数据解析节点标记为目标节点，利用目标节点对对应数据包进行数据解析，根据节点允用因数进行数据解析节点的选取可以提高数据解析的效率。

Description

一种基于云计算的测绘地理信息数据采集方法及系统
技术领域
本发明属于测绘地理信息领域，涉及云计算技术，具体是一种基于云计算的测绘地理信息数据采集方法及系统。
背景技术
地理信息系统可以简单定义为是一种采集、存储、管理、分析、显示和应用地理信息的计算机系统。GIS是地理学和信息技术相结合的产物，它为解决各种与空间位置相关的问题提供了新的技术方法。
传统意义的测绘方式已经不能满足测绘精度和效率的要求。而地理信息系统(GIS)在测绘领域的广泛应用，大大提高测绘工作效率和数据的现实性。
为此，本发明提出一种基于云计算的测绘地理信息数据采集方法及系统。
发明内容
本申请的目的是提供一种基于云计算的测绘地理信息数据采集方法及系统，为了解决传统意义的测绘方式已经不能满足测绘精度和效率的要求的问题。
为实现上述目的，本申请的一方面实施例提供了一种基于云计算的测绘地理信息数据采集系统，包括数据采集模块、数据存储模块、信息解析模块、节点匹配模块以及算力监测模块；
所述数据采集模块用于获取地理测绘数据并临时存储在数据记录仪或便携计算机内，还用于将采集的地理测绘数据打包发送至数据存储模块；
所述数据存储模块对数据包识别并存储；还用于发送数据结构化信号至信息解析模块；
所述信息解析模块分别对不同的数据包进行解析处理，形成结构化数据，将结构化数据以及原始数据包保存至云计算平台；
信息解析模块包括若干数据解析节点，并将数据包的字节大小标记为Dbi；其中的i表示数据包对应的数据采集模块的编号，i=1,2……n；将该数据包从数据采集模块传输至数据存储模块的传输时长标记为Ti；
利用计算公式计算标分值BF，其中标分值BF的计算公式为：
BF=Dbi×a1+Ti×a2
公式中，a1、a2分别为字节大小和传输时长系数因子；
信息解析模块将计算获得的标分值BF发送至节点匹配模块；
所述节点匹配模块根据获得的标分值BF确定对应的数据解析节点的数量SL；
所述算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ，并根据节点允用因数YJ对数据解析节点进行降序排列；
根据数据解析节点的排列顺序筛选对应的数据解析节点数量SL的数据解析节点；并将筛选出的数据解析节点标记为目标节点，利用目标节点对对应数据包进行数据解析。
优选地，数据采集模块采集的数据通过测绘地理信息词典实现标准化，在数据存储于数据记录仪或便携计算机的硬盘时，以数值输入和选择项的方式存储。
优选地，所述数据采集模块将数据发送至数据存储模块前，还包括采集分区过程，包括：
获取将要进行地理信息采集的测绘区，根据测绘区的面积将测绘区分成若干个采集区域；
采集区域分割的方式为等面积分割或者按照经度纬度进行分割；
在采集区域确定后，每个采集区域内均设置有数据采集模块。
优选地，根据计算获得的标分值BF确定对应的数据解析节点的数量SL的过程为：
根据标分值BF确定对应的数据解析节点数量需求范围，再根据数据解析节点数量需求范围确定对应的节点数量，对应的节点数量为数据解析节点数量需求范围内最小值到最大值中的任意一个整数值。
优选地，数据存储模块内存储有标分值BF与数据解析节点数量需求范围对应表。
优选地，算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ的过程为：
算力监测模块按照预设间隔采集数据解析节点的算力占用率并标记为Nc，建立算力占用率Nc随时间变化的曲线图；
当曲线图处于上升阶段时，对曲线图进行求导获取占用率变化速率曲线图；将数据解析节点的实时算力占用率变化速率标记为Vt，其中Vt取正数；
将Vt与预设速率阈值相比较；若Vt大于预设速率阈值，则表示数据解析节点忙于数据运算，在对应的曲线图中截取对应的曲线段进行标注；
在预设时间内，统计标注曲线段的数量为R1，将所有的标注曲线段对时间进行积分得到标注参考能量WE，利用公式：
WR=R1×d1+WE×d2
计算得到数据解析节点的运算热度值WR，其中d1、d2均为系数因子；
获取数据解析节点的当前算力占用率为Nt，利用公式YJ=(1-Nt)×d3/(WR×d4)计算得到数据解析节点的节点允用因数YJ，其中d3、d4均为系数因子；
算力监测模块用于将各个数据解析节点的节点允用因数YJ打上时间戳并存储至数据存储模块。
优选地，算力监测模块的工作过程还包括：
当计算得出的数据解析节点的节点允用因数YJ大于第一充余阈值或小于第二充余阈值时，生成调度信号并发送至算力调度模块；
其中，第一充余阈值大于第二充余阈值；
算力调度模块接收到调度信号后对该数据解析节点的算力资源进行调度。
本申请的另一方面实施例提供了一种基于云计算的测绘地理信息数据采集方法，包括以下步骤：
步骤S101：获取将要进行地理信息采集的测绘区，根据测绘区的面积将测绘区分成若干个采集区域；每个采集区域内设置有数据采集模块；
步骤S102：数据采集模块获取位置、距离和方位等地理测绘数据存储在数据记录仪或便携计算机的硬盘上，并组合为数据包发送至数据存储模块；
步骤S103：信息解析模块获取数据存储模块内存储的数据包并进行标分值分析；
将数据包的字节大小标记为Dbi；其中的i表示数据包对应的数据采集模块的编号，i=1,2……n；将该数据包从数据采集模块传输至数据存储模块的传输时长标记为Ti；
利用计算公式计算标分值BF，其中标分值BF的计算公式为：
BF=Dbi×a1+Ti×a2
公式中，a1、a2分别为字节大小和传输时长系数因子；
步骤S104：算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ，并根据节点允用因数YJ对数据解析节点进行降序排列；节点匹配模块根据计算获得的标分值BF确定对应的数据解析节点的数量SL；利用目标节点对对应数据包进行数据解析。
优选地，算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ的过程为：
算力监测模块按照预设间隔采集数据解析节点的算力占用率并标记为Nc，建立算力占用率Nc随时间变化的曲线图；
当曲线图处于上升阶段时，对曲线图进行求导获取占用率变化速率曲线图；将数据解析节点的实时算力占用率变化速率标记为Vt，其中Vt取正数；
将Vt与预设速率阈值相比较；若Vt大于预设速率阈值，则表示数据解析节点忙于数据运算，在对应的曲线图中截取对应的曲线段进行标注；
在预设时间内，统计标注曲线段的数量为R1，将所有的标注曲线段对时间进行积分得到标注参考能量WE，利用公式：
WR=R1×d1+WE×d2
计算得到数据解析节点的运算热度值WR，其中d1、d2均为系数因子；
获取数据解析节点的当前算力占用率为Nt，利用公式YJ=(1-Nt)×d3/(WR×d4)计算得到数据解析节点的节点允用因数YJ，其中d3、d4均为系数因子；
算力监测模块用于将各个数据解析节点的节点允用因数YJ打上时间戳并存储至数据存储模块。
优选地，算力监测模块的工作过程还包括：
当计算得出的数据解析节点的节点允用因数YJ大于第一充余阈值或小于第二充余阈值时，生成调度信号并发送至算力调度模块；
其中，第一充余阈值大于第二充余阈值；
算力调度模块接收到调度信号后对该数据解析节点的算力资源进行调度。
与现有技术相比，本发明的有益效果是：
1、本发明设置数据采集模块，通过现代测量仪器获取地理测绘数据，采集的数据通过测绘地理信息词典实现标准化，数据采集模块通过有线或无线的方式将内部存储的数据发送至数据存储模块；数据存储模块接收到多个数据采集模块发送的数据包后，发送数据结构化信号至信息解析模块，信息解析模块分别对不同数据包进行解析处理，形成结构化数据，将结构化数据以及原始数据保存至云计算平台，以供测绘专业人员进行查看审阅；
2、本发明提出信息解析模块获取数据存储模块内存储的数据包并进行标分值分析，根据标分值BF分配对应数量的数据解析节点，算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ，并根据节点允用因数YJ对数据解析节点进行降序排列；根据数据解析节点的排列顺序筛选对应的数据解析节点数量SL的数据解析节点；并将筛选出的数据解析节点标记为目标节点，利用目标节点对对应数据包进行数据解析，根据节点允用因数进行数据解析节点的选取可以提高数据解析的效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对现有技术和实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明一种基于云计算的测绘地理信息数据采集系统的结构框图；
图2为本发明一种基于云计算的测绘地理信息数据采集方法的流程框图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
实施例1：
具体请参照图1，一种基于云计算的测绘地理信息数据采集系统，包括数据采集模块、数据存储模块、信息解析模块、节点匹配模块、算力监测模块以及算力调度模块；
其中，所述数据采集模块包括若干以全球定位仪、激光测距仪、全站仪等为代表的现代测量仪器和数据记录仪；
全球定位仪和激光测距仪、全站仪等用于直接获取位置、距离和方位等地理测绘数据；且全球定位仪和激光测距仪、全站仪等可直接与数据记录仪连接，将所测得的大量位置、距离和方位数据储存在数据记录仪内，亦或者直接存储在便携计算机的硬盘上。
需要进行说明的是，采集的数据通过测绘地理信息词典实现标准化，在数据存储于数据记录仪或便携计算机的硬盘时，主要以数值输入和选择项为主，此种数据存储的方式可以极大地提高现场数据采集的工作效率，同时数据的标准化对后续数据统计分析工作效率和准确率都有较大的提高。
本申请中的测绘地理信息数据采集系统还包括有数据存储模块，所述数据存储模块用于对不同采集区域的数据记录仪或便携计算机的硬盘内的数据进行存储；所述数据记录仪或便携计算机即数据采集模块通过有线或无线的方式将内部存储的数据发送至数据存储模块。
需要进行说明的是，所述数据采集模块将数据发送至数据存储模块前，还包括采集分区过程，包括：
获取将要进行地理信息采集的测绘区，根据测绘区的面积将测绘区分成若干个采集区域；
采集区域分割的方式可以为等面积分割，或者按照经度纬度进行分割；
同时，在采集区域确定后，每个采集区域内均设置有数据采集模块。
本发明的方式可以实现多个采集区域数据的协同采集，且每个数据采集模块均具备采集编号，数据与采集编号（数据采集模块的ID）进行关联；
在数据采集模块与数据存储模块数据进行数据传输的过程中，数据存储模块识别不同的数据包，并将所有数据包进行汇总后统一存储至数据存储模块；
所述数据存储模块接收到多个数据采集模块发送的数据包后，发送数据结构化信号至信息解析模块，信息解析模块分别对不同数据包进行解析处理，形成结构化数据，将结构化数据以及原始数据保存至云计算平台，以供测绘专业人员进行查看审阅；
其中，信息解析模块用于从数据包中解析出测绘用数据，针对不同测绘用数据的类型生成结构化文本和图像。
需要进行补充的是，信息解析模块包括若干数据解析节点，本申请中的节点匹配模块与信息解析模块相互连接；用于获取数据存储模块内存储的数据包并进行标分值分析，根据标分值BF分配对应数量的数据解析节点，具体的过程包括以下步骤：
将数据包的字节大小标记为Dbi；其中的i表示数据包对应的数据采集模块的编号，i=1,2……n；将该数据包从数据采集模块传输至数据存储模块的传输时长标记为Ti；
利用计算公式计算标分值BF，其中标分值BF的计算公式为：
BF=Dbi×a1+Ti×a2
公式中，a1、a2分别为字节大小和传输时长系数因子；
节点匹配模块根据计算获得的标分值BF确定对应的数据解析节点的数量SL。
在本申请中，根据计算获得的标分值BF确定对应的数据解析节点的数量SL的过程为：
根据标分值BF确定对应的数据解析节点数量需求范围，再根据数据解析节点数量需求范围确定对应的节点数量，本申请中的对应的节点数量为数据解析节点数量SL；
其中，对应的节点数量一般选择数据解析节点数量需求范围最大值到最小值中的任意一个整数值均可，优选地，对应的节点数量选取数据解析节点数量需求范围最小值；
需要进行说明的是，数据存储模块内存储有标分值BF与数据解析节点数量需求范围对应表；
其中，算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ，并根据节点允用因数YJ对数据解析节点进行降序排列；
根据数据解析节点的排列顺序筛选对应的数据解析节点数量SL的数据解析节点；并将筛选出的数据解析节点标记为目标节点，利用目标节点对对应数据包进行数据解析，根据节点允用因数进行数据解析节点的选取可以提高数据解析的效率；
其中，算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ的过程为：
算力监测模块按照预设间隔采集数据解析节点的算力占用率并标记为Nc，建立算力占用率Nc随时间变化的曲线图；
当曲线图处于上升阶段时，对曲线图进行求导获取占用率变化速率曲线图；将数据解析节点的实时算力占用率变化速率标记为Vt，其中Vt取正数；
将Vt与预设速率阈值相比较；若Vt大于预设速率阈值，则表示数据解析节点忙于数据运算，在对应的曲线图中截取对应的曲线段进行标注；
在预设时间内，统计标注曲线段的数量为R1，将所有的标注曲线段对时间进行积分得到标注参考能量WE，利用公式：
WR=R1×d1+WE×d2
计算得到数据解析节点的运算热度值WR，其中d1、d2均为系数因子；
获取数据解析节点的当前算力占用率为Nt，利用公式YJ=(1-Nt)×d3/(WR×d4)计算得到数据解析节点的节点允用因数YJ，其中d3、d4均为系数因子；
算力监测模块用于将各个数据解析节点的节点允用因数YJ打上时间戳并存储至数据存储模块。
在本实施例中，算力监测模块的工作过程还包括：
当计算得出的数据解析节点的节点允用因数YJ大于第一充余阈值或小于第二充余阈值时，生成调度信号并发送至算力调度模块；
其中，第一充余阈值大于第二充余阈值；
算力调度模块接收到调度信号后对该数据解析节点的算力资源进行调度。
本实施例提出的基于云计算的测绘地理信息数据采集系统，设置数据采集模块，通过现代测量仪器获取地理测绘数据，采集的数据通过测绘地理信息词典实现标准化，数据采集模块通过有线或无线的方式将内部存储的数据发送至数据存储模块；数据存储模块接收到多个数据采集模块发送的数据包后，发送数据结构化信号至信息解析模块，信息解析模块分别对不同数据包进行解析处理，形成结构化数据，将结构化数据以及原始数据保存至云计算平台，以供测绘专业人员进行查看审阅。
本发明提出信息解析模块获取数据存储模块内存储的数据包并进行标分值分析，根据标分值BF分配对应数量的数据解析节点，算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ，并根据节点允用因数YJ对数据解析节点进行降序排列；根据数据解析节点的排列顺序筛选对应的数据解析节点数量SL的数据解析节点；并将筛选出的数据解析节点标记为目标节点，利用目标节点对对应数据包进行数据解析，根据节点允用因数进行数据解析节点的选取可以提高数据解析的效率。
实施例2：
具体请参照图2，一种基于云计算的测绘地理信息数据采集方法，包括以下步骤：
步骤S101：获取将要进行地理信息采集的测绘区，根据测绘区的面积将测绘区分成若干个采集区域；每个采集区域内设置有数据采集模块；
步骤S102：数据采集模块获取位置、距离和方位等地理测绘数据存储在数据记录仪或便携计算机的硬盘上，并组合为数据包发送至数据存储模块；
步骤S103：信息解析模块获取数据存储模块内存储的数据包并进行标分值分析；
将数据包的字节大小标记为Dbi；其中的i表示数据包对应的数据采集模块的编号，i=1,2……n；将该数据包从数据采集模块传输至数据存储模块的传输时长标记为Ti；
利用计算公式计算标分值BF，其中标分值BF的计算公式为：
BF=Dbi×a1+Ti×a2
公式中，a1、a2分别为字节大小和传输时长系数因子；
步骤S104：算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ，并根据节点允用因数YJ对数据解析节点进行降序排列；节点匹配模块根据计算获得的标分值BF确定对应的数据解析节点的数量SL；利用目标节点对对应数据包进行数据解析。
其中，还包括算力监测模块按照预设间隔采集数据解析节点的算力占用率并标记为Nc，建立算力占用率Nc随时间变化的曲线图；
当曲线图处于上升阶段时，对曲线图进行求导获取占用率变化速率曲线图；将数据解析节点的实时算力占用率变化速率标记为Vt，其中Vt取正数；
将Vt与预设速率阈值相比较；若Vt大于预设速率阈值，则表示数据解析节点忙于数据运算，在对应的曲线图中截取对应的曲线段进行标注；
在预设时间内，统计标注曲线段的数量为R1，将所有的标注曲线段对时间进行积分得到标注参考能量WE，利用公式：
WR=R1×d1+WE×d2
计算得到数据解析节点的运算热度值WR，其中d1、d2均为系数因子；
获取数据解析节点的当前算力占用率为Nt，利用公式YJ=(1-Nt)×d3/(WR×d4)计算得到数据解析节点的节点允用因数YJ，其中d3、d4均为系数因子；
算力监测模块用于将各个数据解析节点的节点允用因数YJ打上时间戳并存储至数据存储模块。
在本实施例中，算力监测模块的工作过程还包括：
当计算得出的数据解析节点的节点允用因数YJ大于第一充余阈值或小于第二充余阈值时，生成调度信号并发送至算力调度模块；
其中，第一充余阈值大于第二充余阈值；
算力调度模块接收到调度信号后对该数据解析节点的算力资源进行调度。
本实施例提出的基于云计算的测绘地理信息数据采集方法，通过现代测量仪器获取地理测绘数据，采集的数据通过测绘地理信息词典实现标准化，数据采集模块通过有线或无线的方式将内部存储的数据发送至数据存储模块；数据存储模块接收到多个数据采集模块发送的数据包后，发送数据结构化信号至信息解析模块，信息解析模块分别对不同数据包进行解析处理，形成结构化数据，将结构化数据以及原始数据保存至云计算平台，以供测绘专业人员进行查看审阅。
利用信息解析模块获取数据存储模块内存储的数据包并进行标分值分析，根据标分值BF分配对应数量的数据解析节点，算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ，并根据节点允用因数YJ对数据解析节点进行降序排列；根据数据解析节点的排列顺序筛选对应的数据解析节点数量SL的数据解析节点；并将筛选出的数据解析节点标记为目标节点，利用目标节点对对应数据包进行数据解析，根据节点允用因数进行数据解析节点的选取可以提高数据解析的效率。
上述公式均是去除量纲取其数值计算，公式是由采集大量数据进行软件模拟得到最接近真实情况的一个公式，公式中的预设参数和预设阈值由本领域的技术人员根据实际情况设定或者大量数据模拟获得。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其他实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种基于云计算的测绘地理信息数据采集系统，其特征在于，包括数据采集模块、数据存储模块、信息解析模块、节点匹配模块以及算力监测模块；
所述数据采集模块用于获取地理测绘数据并临时存储在数据记录仪或便携计算机内，还用于将采集的地理测绘数据打包发送至数据存储模块；
所述数据存储模块对数据包识别并存储；还用于发送数据结构化信号至信息解析模块；
所述信息解析模块分别对不同的数据包进行解析处理，形成结构化数据，将结构化数据以及原始数据包保存至云计算平台；
信息解析模块包括若干数据解析节点，并将数据包的字节大小标记为Dbi；其中的i表示数据包对应的数据采集模块的编号，i=1,2……n；将该数据包从数据采集模块传输至数据存储模块的传输时长标记为Ti；
利用计算公式计算标分值BF，其中标分值BF的计算公式为：
BF=Dbi×a1+Ti×a2
公式中，a1、a2分别为字节大小和传输时长系数因子；
信息解析模块将计算获得的标分值BF发送至节点匹配模块；
所述节点匹配模块根据获得的标分值BF确定对应的数据解析节点的数量SL；
所述算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ，并根据节点允用因数YJ对数据解析节点进行降序排列；
根据数据解析节点的排列顺序筛选对应的数据解析节点数量SL的数据解析节点；并将筛选出的数据解析节点标记为目标节点，利用目标节点对对应数据包进行数据解析。
2.根据权利要求1所述的一种基于云计算的测绘地理信息数据采集系统，其特征在于，数据采集模块采集的数据通过测绘地理信息词典实现标准化，在数据存储于数据记录仪或便携计算机的硬盘时，以数值输入和选择项的方式存储。
3.根据权利要求2所述的一种基于云计算的测绘地理信息数据采集系统，其特征在于，所述数据采集模块将数据发送至数据存储模块前，还包括采集分区过程，包括：
获取将要进行地理信息采集的测绘区，根据测绘区的面积将测绘区分成若干个采集区域；
采集区域分割的方式为等面积分割或者按照经度纬度进行分割；
在采集区域确定后，每个采集区域内均设置有数据采集模块。
4.根据权利要求3所述的一种基于云计算的测绘地理信息数据采集系统，其特征在于，根据计算获得的标分值BF确定对应的数据解析节点的数量SL的过程为：
根据标分值BF确定对应的数据解析节点数量需求范围，再根据数据解析节点数量需求范围确定对应的节点数量，对应的节点数量为数据解析节点数量需求范围内最小值到最大值中的任意一个整数值。
5.根据权利要求4所述的一种基于云计算的测绘地理信息数据采集系统，其特征在于，数据存储模块内存储有标分值BF与数据解析节点数量需求范围对应表。
6.根据权利要求5所述的一种基于云计算的测绘地理信息数据采集系统，其特征在于，算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ的过程为：
算力监测模块按照预设间隔采集数据解析节点的算力占用率并标记为Nc，建立算力占用率Nc随时间变化的曲线图；
当曲线图处于上升阶段时，对曲线图进行求导获取占用率变化速率曲线图；将数据解析节点的实时算力占用率变化速率标记为Vt，其中Vt取正数；
将Vt与预设速率阈值相比较；若Vt大于预设速率阈值，则表示数据解析节点忙于数据运算，在对应的曲线图中截取对应的曲线段进行标注；
在预设时间内，统计标注曲线段的数量为R1，将所有的标注曲线段对时间进行积分得到标注参考能量WE，利用公式：
WR=R1×d1+WE×d2
计算得到数据解析节点的运算热度值WR，其中d1、d2均为系数因子；
获取数据解析节点的当前算力占用率为Nt，利用公式YJ=(1-Nt)×d3/(WR×d4)计算得到数据解析节点的节点允用因数YJ，其中d3、d4均为系数因子；
算力监测模块用于将各个数据解析节点的节点允用因数YJ打上时间戳并存储至数据存储模块。
7.根据权利要求6所述的一种基于云计算的测绘地理信息数据采集系统，其特征在于，算力监测模块的工作过程还包括：
当计算得出的数据解析节点的节点允用因数YJ大于第一充余阈值或小于第二充余阈值时，生成调度信号并发送至算力调度模块；
其中，第一充余阈值大于第二充余阈值；
算力调度模块接收到调度信号后对该数据解析节点的算力资源进行调度。
8.一种基于云计算的测绘地理信息数据采集方法，基于权利要求1-7任一项所述的一种基于云计算的测绘地理信息数据采集系统，其特征在于，包括以下步骤：
步骤S101：获取将要进行地理信息采集的测绘区，根据测绘区的面积将测绘区分成若干个采集区域；每个采集区域内设置有数据采集模块；
步骤S102：数据采集模块获取地理测绘数据存储在数据记录仪或便携计算机的硬盘上，并组合为数据包发送至数据存储模块；
步骤S103：信息解析模块获取数据存储模块内存储的数据包并进行标分值分析；
将数据包的字节大小标记为Dbi；其中的i表示数据包对应的数据采集模块的编号，i=1,2……n；将该数据包从数据采集模块传输至数据存储模块的传输时长标记为Ti；
利用计算公式计算标分值BF，其中标分值BF的计算公式为：
BF=Dbi×a1+Ti×a2
公式中，a1、a2分别为字节大小和传输时长系数因子；
步骤S104：算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ，并根据节点允用因数YJ对数据解析节点进行降序排列；节点匹配模块根据计算获得的标分值BF确定对应的数据解析节点的数量SL；利用目标节点对对应数据包进行数据解析。
9.根据权利要求8所述的一种基于云计算的测绘地理信息数据采集方法，其特征在于，算力监测模块从信息解析模块内获取若干数据解析节点的节点允用因数YJ的过程为：
算力监测模块按照预设间隔采集数据解析节点的算力占用率并标记为Nc，建立算力占用率Nc随时间变化的曲线图；
当曲线图处于上升阶段时，对曲线图进行求导获取占用率变化速率曲线图；将数据解析节点的实时算力占用率变化速率标记为Vt，其中Vt取正数；
将Vt与预设速率阈值相比较；若Vt大于预设速率阈值，则表示数据解析节点忙于数据运算，在对应的曲线图中截取对应的曲线段进行标注；
在预设时间内，统计标注曲线段的数量为R1，将所有的标注曲线段对时间进行积分得到标注参考能量WE，利用公式：
WR=R1×d1+WE×d2
计算得到数据解析节点的运算热度值WR，其中d1、d2均为系数因子；
获取数据解析节点的当前算力占用率为Nt，利用公式YJ=(1-Nt)×d3/(WR×d4)计算得到数据解析节点的节点允用因数YJ，其中d3、d4均为系数因子；
算力监测模块用于将各个数据解析节点的节点允用因数YJ打上时间戳并存储至数据存储模块。
10.根据权利要求9所述的一种基于云计算的测绘地理信息数据采集方法，其特征在于，算力监测模块的工作过程还包括：
当计算得出的数据解析节点的节点允用因数YJ大于第一充余阈值或小于第二充余阈值时，生成调度信号并发送至算力调度模块；
其中，第一充余阈值大于第二充余阈值；
算力调度模块接收到调度信号后对该数据解析节点的算力资源进行调度。
CN202310456304.8A 2023-04-26 2023-04-26 一种基于云计算的测绘地理信息数据采集方法及系统 Pending CN116166767A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310456304.8A CN116166767A (zh) 2023-04-26 2023-04-26 一种基于云计算的测绘地理信息数据采集方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310456304.8A CN116166767A (zh) 2023-04-26 2023-04-26 一种基于云计算的测绘地理信息数据采集方法及系统

Publications (1)

Publication Number Publication Date
CN116166767A true CN116166767A (zh) 2023-05-26

Family

ID=86418654

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310456304.8A Pending CN116166767A (zh) 2023-04-26 2023-04-26 一种基于云计算的测绘地理信息数据采集方法及系统

Country Status (1)

Country Link
CN (1) CN116166767A (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114882025A (zh) * 2022-07-08 2022-08-09 山东一图百景信息技术有限公司 一种基于大数据的地理测绘数据采集处理系统
CN115442375A (zh) * 2022-11-08 2022-12-06 深圳市亲邻科技有限公司 一种基于云边协同技术的物业数字化管理系统
CN116013508A (zh) * 2023-01-18 2023-04-25 苏州市立医院 一种用于眼科的数据采集系统及方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114882025A (zh) * 2022-07-08 2022-08-09 山东一图百景信息技术有限公司 一种基于大数据的地理测绘数据采集处理系统
CN115442375A (zh) * 2022-11-08 2022-12-06 深圳市亲邻科技有限公司 一种基于云边协同技术的物业数字化管理系统
CN116013508A (zh) * 2023-01-18 2023-04-25 苏州市立医院 一种用于眼科的数据采集系统及方法

Similar Documents

Publication Publication Date Title
KR101982159B1 (ko) 카테고리별로 구분된 유동인구 정보를 이용한 유동인구 측정 방법
US9733094B2 (en) Hybrid road network and grid based spatial-temporal indexing under missing road links
CN112035591B (zh) 一种路网匹配方法、装置、设备和存储介质
CN106651036A (zh) 空气质量预报系统
CN107730115A (zh) 一种基于ahp的多源位置轨迹数据的质量评估方法
US12047902B2 (en) Method and apparatus for obtaining emission probability, method and apparatus for obtaining transition probability, and sequence positioning method and apparatus
CN114066184A (zh) 一种区域覆盖的评估方法、装置和电子设备
CN111294730B (zh) 一种网络问题投诉信息处理的方法及装置
CN110019167B (zh) 一种中长期新能源资源资料库构建方法及系统
CN112287503B (zh) 用于交通需求预测的动态空间网络构建方法
CN113852204A (zh) 一种于数字孪生的变电站三维全景监视系统及方法
CN108932554B (zh) 一种风电场流场量测点的配置优化方法及装置
CN116166767A (zh) 一种基于云计算的测绘地理信息数据采集方法及系统
CN116703114A (zh) 一种电力调度数据分类存储方法、系统、装置及介质
Potter et al. Wind power data for grid integration studies
CN115309727A (zh) 一种基于民航气象大数据库的数据构建处理方法及系统
CN115238318A (zh) 一种基于多种采集端的内外业一体化平差处理方法
CN114123190A (zh) 确定电表所属目标台区的方法、装置、电子设备及存储介质
CN115344630A (zh) 基于云平台的水文地质数据管理系统
CN115587010A (zh) 一种告警收敛方法、装置、设备及存储介质
CN112188388A (zh) 一种基于机器学习的混合室内定位方法
CN117763075B (zh) 一种基于云计算的测绘地理信息数据采集系统
CN105046586A (zh) 一种计量点地理信息管理系统
CN111222672A (zh) 空气质量指数aqi的预测方法和装置
CN110087194B (zh) 车联网中基于博弈的位置数据中毒攻击原型系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20230526

RJ01 Rejection of invention patent application after publication