CN107016112A - 一种异构存储系统地图发布的方法 - Google Patents

一种异构存储系统地图发布的方法 Download PDF

Info

Publication number
CN107016112A
CN107016112A CN201710247008.1A CN201710247008A CN107016112A CN 107016112 A CN107016112 A CN 107016112A CN 201710247008 A CN201710247008 A CN 201710247008A CN 107016112 A CN107016112 A CN 107016112A
Authority
CN
China
Prior art keywords
storage system
map
publishing
map publishing
distributed file
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710247008.1A
Other languages
English (en)
Inventor
梅非
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201710247008.1A priority Critical patent/CN107016112A/zh
Publication of CN107016112A publication Critical patent/CN107016112A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29—Geographical information databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G06F3/0611—Improving I/O performance in relation to response time
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Remote Sensing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明属于数字地图技术领域，尤其涉及一种异构存储系统地图发布的方法，包括确定应用步骤、确定结构步骤、开发步骤、指定步骤、地图发布步骤，本发明解决了异构存储系统不能整合到地图发布工具中、地图服务的管理与维护成本高的问题，具有实现地图发布、磁盘容量限制问题、实现异构存储系统地图数据的发布、提高用户体验的有益技术效果。

Description

一种异构存储系统地图发布的方法
技术领域
本发明属于数字地图技术领域，尤其涉及一种异构存储系统地图发布的方法。
背景技术
在目前的主流的地图发布工具当中（例如：GeoWebCachoSe、Geerver等等）都有一个缺点就是不支持异构存储系统。也就是说，异构存储系统的地图数据无法直接通过地图发布工具进行地图发布。所以，当面对海量的遥感地图数据时，磁盘容量上的限制导致海量地图数据在存储、管理和发布上十分困难。而通过分布式异构存储系统对海量遥感地图数据进行存储与管理的话又无法进行地图发布。
目前的常用地图发布方法，大多数都是基于磁盘存储的基础之上的。换而言之，整个流程就是首先在机器上搭建一个地图发布工具的环境，然后再把处理好的地图数据拷贝到该机器的地图发布工具指定磁盘当中，最后地图发布工具直接读取磁盘中的地图数据，实现地图发布，这种地图发布方法，受限于机器磁盘容量的大小。当面对海量地图数据发布问题时，就必须搭建多个地图服务节点，每个地图服务节点承担部分地图数据发布的任务。总之，现有技术存在异构存储系统不能整合到地图发布工具中、地图服务的管理与维护成本高的问题。
发明内容
本发明提供一种异构存储系统地图发布的方法，以解决上述背景技术中异构存储系统不能整合到地图发布工具中、地图服务的管理与维护成本高的问题。
本发明所解决的技术问题采用以下技术方案来实现：一种异构存储系统地图发布的方法，所述地图发布方法包括：
a.确定地图发布工具及其源代码；
b.确定基于异构存储系统的分布式文件存储系统；
c.对地图发布工具源代码上的存储IO读写模块进行兼容性开发，使得地图发布工具对分布式文件存储系统进行IO读写；
d.指定地图发布工具的配置文件中地图数据路径为分布式文件存储系统中的位置
进一步，所述地图发布方法还包括在地图发布后，所述分布式文件存储系统在IO读写时是通过内网进行传输；
进一步，所述分布式文件存储系统在IO读写时，若IO读写较慢，则通过增加带宽的方式提高IO读写速度。
进一步，所述地图发布工具的源代码采用GeoWebCache-1.5.1版源代码。
进一步，所述基于异构存储系统的分布式文件存储系统为基于hadoop和habse的分布式文件存储系统。
本发明的有益效果为：
1本专利由于采用地图发布方法包括：确定地图发布工具及其源代码；确定基于异构存储系统的分布式文件存储系统；对地图发布工具源代码上的存储IO读写模块进行兼容性开发，使得地图发布工具对分布式文件存储系统进行IO读写；指定地图发布工具的配置文件中地图数据路径为分布式文件存储系统中的位置的技术手段，通过改造的地图发布工具，直接读取异构存储系统上的海量地图数据，实现地图发布。
2本专利由于通过对地图发布工具的二次开发，集成异构的存储系统，从而有效解决单一地图服务节点发布海量地图数据上的磁盘容量限制问题。
3本专利通过配置文件指定地图数据在分布式文件存储系统中的位置，从而实现异构存储系统地图数据的发布。
4、本专利由于分布式存储系统在IO读写上是通过内网进行传输，速度会比磁盘读写要慢一点。但是可以通过加大内网带宽的方式来优化，提高分布式存储系统的读写速度，最终消除读写速度对于用户体验上的影响。
附图说明
图1是本发明一种异构存储系统地图发布的方法的工作流程图；
图2是本发明一种异构存储系统地图发布的方法的地图发布后成品图。
具体实施方式
以下结合附图对本发明做进一步描述：
图中：1-确定应用步骤，2-确定结构步骤，3-开发步骤，4-指定步骤，5-地图发布步骤。
实施例：
本实施例包括：如图1所示，一种异构存储系统地图发布的方法，所述地图发布方法包括：
a.确定地图发布工具及其源代码1；
b.确定基于异构存储系统的分布式文件存储系统2；
c.对地图发布工具源代码上的存储IO读写模块进行兼容性开发，使得地图发布工具对分布式文件存储系统进行IO读写3；
由于通过对地图发布工具的二次开发，集成异构的存储系统，从而有效解决单一地图服务节点发布海量地图数据上的磁盘容量限制问题。
d.指定地图发布工具的配置文件中地图数据路径为分布式文件存储系统中的位置4。
通过配置文件指定地图数据在分布式文件存储系统中的位置，从而实现异构存储系统地图数据的发布。
由于采用地图发布方法包括：确定地图发布工具及其源代码；确定基于异构存储系统的分布式文件存储系统；对地图发布工具源代码上的存储IO读写模块进行兼容性开发，使得地图发布工具对分布式文件存储系统进行IO读写；指定地图发布工具的配置文件中地图数据路径为分布式文件存储系统中的位置的技术手段，通过改造的地图发布工具，直接读取异构存储系统上的海量地图数据，实现地图发布。
所述地图发布方法还包括在地图发布后，所述分布式文件存储系统在IO读写时是通过内网进行传输5；
所述分布式文件存储系统在IO读写时，若IO读写较慢，则通过增加带宽的方式提高IO读写速度。
由于分布式存储系统在IO读写上是通过内网进行传输，速度会比磁盘读写要慢一点。但是可以通过加大内网带宽的方式来优化，提高分布式存储系统的读写速度，最终消除读写速度对于用户体验上的影响。
所述地图发布工具的源代码采用GeoWebCache-1.5.1版源代码。
所述基于异构存储系统的分布式文件存储系统为基于hadoop和habse的分布式文件存储系统。
工作原理：如图1所示，本专利所选用的地图发布工具为GeoWebCache-1.5.1版源代码，选用的异构存储系统为基于hadoop和habse的分布式文件存储系统，本方法的实现思路是在GeoWebCache源码的基础上对存储IO读写模块进行兼容性开发，使之能够对基于hadoop和habse的分布式文件存储系统进行IO读写操作，再通过配置文件指定地图数据在分布式文件存储系统中的位置，从而实现异构存储系统地图数据的发布，分布式存储系统在IO读写上是通过内网进行传输，速度会比磁盘读写要慢一点，可以通过加大内网带宽的方式来优化，提高分布式存储系统的读写速度，最终消除读写速度对于用户体验上的影响，本发明解决了异构存储系统不能整合到地图发布工具中、地图服务的管理与维护成本高的问题，具有实现地图发布、磁盘容量限制问题、实现异构存储系统地图数据的发布、提高用户体验的有益技术效果。
利用本发明的技术方案，或本领域的技术人员在本发明技术方案的启发下，设计出类似的技术方案，而达到上述技术效果的，均是落入本发明的保护范围。

Claims (5)

1.一种异构存储系统地图发布的方法，其特征在于，所述地图发布方法包括：
a.确定地图发布工具及其源代码；
b.确定基于异构存储系统的分布式文件存储系统；
c.对地图发布工具源代码上的存储IO读写模块进行兼容性开发，使得地图发布工具对分布式文件存储系统进行IO读写；
d.指定地图发布工具的配置文件中地图数据路径为分布式文件存储系统中的位置。
2.根据权利要求1所述的一种异构存储系统地图发布的方法，其特征在于，所述地图发布方法还包括在地图发布后，所述分布式文件存储系统在IO读写时是通过内网进行传输。
3.根据权利要求2所述的一种异构存储系统地图发布的方法，其特征在于，所述分布式文件存储系统在IO读写时，若IO读写较慢，则通过增加带宽的方式提高IO读写速度。
4.根据权利要求1所述的一种异构存储系统地图发布的方法，其特征在于，所述地图发布工具的源代码采用GeoWebCache-1.5.1版源代码。
5.根据权利要求1所述的一种异构存储系统地图发布的方法，其特征在于，所述基于异构存储系统的分布式文件存储系统为基于hadoop和habse的分布式文件存储系统。
CN201710247008.1A 2017-04-17 2017-04-17 一种异构存储系统地图发布的方法 Pending CN107016112A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710247008.1A CN107016112A (zh) 2017-04-17 2017-04-17 一种异构存储系统地图发布的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710247008.1A CN107016112A (zh) 2017-04-17 2017-04-17 一种异构存储系统地图发布的方法

Publications (1)

Publication Number Publication Date
CN107016112A true CN107016112A (zh) 2017-08-04

Family

ID=59448067

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710247008.1A Pending CN107016112A (zh) 2017-04-17 2017-04-17 一种异构存储系统地图发布的方法

Country Status (1)

Country Link
CN (1) CN107016112A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107506420A (zh) * 2017-08-17 2017-12-22 深圳市康必达中创科技有限公司 一种基于局域网的地理信息图配置方法及系统
CN108711356A (zh) * 2018-02-08 2018-10-26 中国人民解放军61540部队 矢量地理pdf地图制作中地理目标与符号图形配准方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107506420A (zh) * 2017-08-17 2017-12-22 深圳市康必达中创科技有限公司 一种基于局域网的地理信息图配置方法及系统
CN108711356A (zh) * 2018-02-08 2018-10-26 中国人民解放军61540部队 矢量地理pdf地图制作中地理目标与符号图形配准方法
CN108711356B (zh) * 2018-02-08 2020-07-07 中国人民解放军61540部队 矢量地理pdf地图制作中地理目标与符号图形配准方法

Similar Documents

Publication Publication Date Title
CN103218176B (zh) 数据处理方法及装置
CN108595157A (zh) 区块链数据的处理方法、装置、设备和存储介质
CN105608366B (zh) 用户权限控制方法和装置
CN106874066A (zh) 一种虚拟机迁移方法及装置、电子设备
CN107145482A (zh) 基于人工智能的文章生成方法及装置、设备与可读介质
CN104011723A (zh) 状态机晶格中的布尔逻辑
CN103647850B (zh) 一种分布式版本控制系统的数据处理方法、设备及系统
CN103988212A (zh) 用于在状态机中路由的方法及系统
CN103999035A (zh) 用于状态机中的数据分析的方法及系统
CN104869140B (zh) 多集群系统和控制多集群系统的数据存储的方法
CN109669709A (zh) 一种区块链升级的数据迁移方法及数据迁移系统
CN104142892B (zh) 一种数据读写方法、装置及系统
CN109325200A (zh) 获取数据的方法、装置及计算机可读存储介质
CN106843820A (zh) 代码处理方法和装置
CN103927215B (zh) 基于内存盘与SSD硬盘的kvm虚拟机调度的优化方法及系统
CN106375360A (zh) 一种图数据更新方法、装置及系统
CN107016112A (zh) 一种异构存储系统地图发布的方法
CN106250571A (zh) 一种etl数据处理的方法及系统
CN111163149B (zh) 一种基于区块链的智能合约平台方法
CN104459781A (zh) 三维叠前地震数据的随机噪声衰减方法
CN103984554B (zh) 软件设计文档的生成方法及装置
CN102004787A (zh) 基于办公软件插件的多应用场景表单合并的方法
CN111291022B (zh) 一种基于区块链的数据存储系统
CN103430178A (zh) 数据更新方法及装置和产品
CN109101615A (zh) 地震勘探数据处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170804

WD01 Invention patent application deemed withdrawn after publication