CN108320092A - 一种海洋大数据采集以及元数据管理方法 - Google Patents

一种海洋大数据采集以及元数据管理方法 Download PDF

Info

Publication number
CN108320092A
CN108320092A CN201810083551.7A CN201810083551A CN108320092A CN 108320092 A CN108320092 A CN 108320092A CN 201810083551 A CN201810083551 A CN 201810083551A CN 108320092 A CN108320092 A CN 108320092A
Authority
CN
China
Prior art keywords
data
oceanographic
oceanographic data
carried out
ocean
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810083551.7A
Other languages
English (en)
Inventor
钟彦
符才
张艺
李艺渊
黄春桃
何子明
梁田玲
刘木玉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Zhanshu Big Data Co Ltd
Original Assignee
Guangdong Zhanshu Big Data Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Zhanshu Big Data Co Ltd filed Critical Guangdong Zhanshu Big Data Co Ltd
Priority to CN201810083551.7A priority Critical patent/CN108320092A/zh
Publication of CN108320092A publication Critical patent/CN108320092A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/215Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Databases & Information Systems (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Strategic Management (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Tourism & Hospitality (AREA)
  • Operations Research (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Game Theory and Decision Science (AREA)
  • Development Economics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种海洋大数据采集以及元数据管理方法,所述方法包括以下步骤:第一步:通过人为的方式进行海洋大数据的收集,通过派遣工作人员去海洋边进行考察以及数据的收集;第二步:工作人员把收集到的海洋数据进行融合整理,得到一份具体的海洋数据内容报告;第三步:把相应的海洋数据内容报告进行整理解析,通过这个领域的专家对数据进行解析,方便得出海洋数据的结论。本发明使得海洋数据通过物联网方便用户进行查询以及了解,通过物联网能够进行海洋数据之间的交互,方便对海洋数据进行实时更新,方便对相应的海洋数据内容进行及时补充,弥补相应海洋数据的不足,提高海洋数据的使用,方便海洋数据发挥其的作用,展现海洋数据的价值。

Description

一种海洋大数据采集以及元数据管理方法
技术领域
本发明涉及xxx技术领域,具体为一种海洋大数据采集以及元数据管理方法。
背景技术
海洋数据资料浩如烟海.它涵盖了海底地形数据、海洋遥感资料、船测数据、浮标资料、模式同化资料等诸多方面。这些海洋数据资料具有海量性、多类性、模糊性及时空过程性等特点.原始的海洋数据资料不能直接用于分析和挖掘,因此在对数据进行挖掘前要预先对数据进行清洗、转换、选择等预处理。其后的海洋数据挖掘,常用的算法有回归算法、统计分析、聚类分析、关联规则挖掘等。关联数据挖掘是能够有效地发现数据潜在的规律;聚类分析是一种不依赖于预先定义的类和带类标号的训练数据的非监督学习,实现了在未知类别标签样本集的非监督学习,回归分析是一个统计预测模型.用以描述和评估应变量与一个或多个自变量之间的关系。
海洋是一个动态的、连续的、边界模糊的时空信息载体。随着探测设备和信息技术的不断发展,海洋数据获取手段日益增多,海洋信息获取的速度和精度也在不断提高,获取的海洋数据量越来越大,海洋数据已经呈现出海量特征;海洋数据获取手段的多样化以及海洋观测要素的多元化,使得海洋数据类型呈现出多类性特征;同时。海洋时刻处于一个动态变化的过程中,它和大气、陆地密切相关,海洋数据表现为强时空过程性。海洋数据的海量性、多类性、模糊性、时空过程性等特征,使得海洋数据成为大数据的典范。
发明内容
本发明的目的在于提供一种海洋大数据采集以及元数据管理方法,具备数据收集、采集、解析、分类、管理、储存和联网传输的优点,解决了海洋数据不方便进行收集管理,使得海洋数据无法体现其该有的作用和价值的问题。
为实现上述目的,本发明提供如下技术方案:一种海洋大数据采集以及元数据管理方法,所述方法包括以下步骤:
第一步:通过人为的方式进行海洋数据的收集,通过派遣工作人员去海洋边进行考察以及数据的收集;
第二步:工作人员把收集到的海洋数据进行融合整理,得到一份具体的海洋数据内容报告;
第三步:把相应的海洋数据内容报告进行整理解析,通过这个领域的专家对数据进行解析,从而方便得出海洋数据的结论;
第四步:对符合相对应结论的海洋数据进行整体、收集和分类,从而方便对相应的海洋数据进行使用与调阅;
第五步:对分类完成的海洋原始数据进行储存,通过储存对原始数据进行保护,防止原始数据的丢失,通过海洋数据管理单元对海洋数据进行有效管理,方便对海洋数据进行上传,从而方便不同的用户进行海洋数据的调取,使得海洋数据方便为用户提供便捷。
优选的,所述海洋数据收集单元包括人为收集法以及查询收集法,人为收集法为调配相应的工作人员在海洋边进行实地考察,考察过程中对海洋数据进行收集,查询收集法是通过工作人员在互联网上进行数据查找,对查找的海洋数据进行记录收集。
优选的,所述海洋数据采集单元是对数据进行整理,去除重复的海洋数据,度海洋数据进行完整化,去除残缺的海洋数据,使得海洋数据完整化,且保证了海洋数据格式的一定性,方便进行海洋数据后续的解析。
优选的,所述海洋数据解析单元是对海洋数据进行剖析,对海洋数据进行完整的了解,了解海洋数据的真实意义,方便去除不符合的海洋数据,从而方便对海洋数据进行分类管理,对相应的数据进行归类,方便进行排序收集。
优选的,所述海洋数据管理单元是对海洋数据进行管理调配的模块,通过智能电子设备以及大数据的作用下,对海洋数据进行分类管理,方便数据的调配与储存,方便对海洋数据进行实时更新,方便用户第一时间查找海洋数据分类,方便对对应分类的海洋数据进行提取了解,提高海洋数据的管理化。
与现有技术相比,本发明的有益效果如下:
1、本发明海洋数据的采集可以使残缺的数据完整化,将对错误的海洋数据进行纠正,将多余的海洋数据进行去除,将所需的海洋数据挑选出来并且进行数据集成,使其整理成为一个整体的数据模式,将不适应的海洋数据格式转换为所要求的海洋数据格式,方便进行海洋数据的储存与使用,从而方便对海洋数据类型进行相同化、数据格式一致化、数据信息精练化和数据存储集中化,从而提高海洋数据质量,提高海洋数据精度和决策准确度,经过海洋数据采集之后,可以得到所需要的海洋数据集,还可以尽量地减少海洋数据挖掘所付出的代价。
2、本发明海洋数据分类是把相同的海洋数据进行整理融合,从而归为不同类别的海洋数据,海洋数据分析是指用适当的统计分析方法对收集来的大量数据进行分析,提取有用信息和形成结论而对数据加以详细研究和概括总结的过程,海洋数据解析正是对海洋数据进行研究概括总结的过程,通过这一过程可以对海洋数据进行分析,通过分析可以帮助人们作出判断,以便采取适当行动。
3、本发明通过海洋数据管理单元对海洋数据进行管理,数据管理是利用计算机硬件和软件技术对数据进行有效的收集、存储、处理和应用的过程,其目的在于充分有效地发挥数据的作用,实现数据有效管理的关键是数据组织。
4、本发明通过海洋数据上传单元对海洋数据进行上传,使得海洋数据通过物联网方便用户进行查询以及了解,通过物联网能够进行海洋数据之间的交互,方便对海洋数据进行实时更新,方便对相应的海洋数据内容进行及时补充,弥补相应海洋数据的不足,提高海洋数据的使用,方便海洋数据发挥其的作用,展现海洋数据的价值。
附图说明
图1为本发明结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,一种海洋数据采集以及元数据管理方法,方法包括以下步骤:
第一步:通过人为的方式进行海洋数据的收集,通过派遣工作人员去海洋边进行考察以及数据的收集,海洋数据收集单元包括人为收集法以及查询收集法,人为收集法为调配相应的工作人员在海洋边进行实地考察,考察过程中对海洋数据进行收集,查询收集法是通过工作人员在互联网上进行数据查找,对查找的海洋数据进行记录收集;
第二步:工作人员把收集到的海洋数据进行融合整理,得到一份具体的海洋数据内容报告,海洋数据采集单元是对数据进行整理,去除重复的海洋数据,度海洋数据进行完整化,去除残缺的海洋数据,使得海洋数据完整化,且保证了海洋数据格式的一定性,方便进行海洋数据后续的解析,海洋数据的采集可以使残缺的数据完整化,将对错误的海洋数据进行纠正,将多余的海洋数据进行去除,将所需的海洋数据挑选出来并且进行数据集成,使其整理成为一个整体的数据模式,将不适应的海洋数据格式转换为所要求的海洋数据格式,方便进行海洋数据的储存与使用,从而方便对海洋数据类型进行相同化、数据格式一致化、数据信息精练化和数据存储集中化,从而提高海洋数据质量,提高海洋数据精度和决策准确度,经过海洋数据采集之后,可以得到所需要的海洋数据集,还可以尽量地减少海洋数据挖掘所付出的代价;
第三步:把相应的海洋数据内容报告进行整理解析,通过这个领域的专家对数据进行解析,从而方便得出海洋数据的结论,海洋数据解析单元是对海洋数据进行剖析,对海洋数据进行完整的了解,了解海洋数据的真实意义,方便去除不符合的海洋数据,从而方便对海洋数据进行分类管理,对相应的数据进行归类,方便进行排序收集;
第四步:对符合相对应结论的海洋数据进行整体、收集和分类,从而方便对相应的海洋数据进行使用与调阅,海洋数据分类是把相同的海洋数据进行整理融合,从而归为不同类别的海洋数据,海洋数据分析是指用适当的统计分析方法对收集来的大量数据进行分析,提取有用信息和形成结论而对数据加以详细研究和概括总结的过程,海洋数据解析正是对海洋数据进行研究概括总结的过程,通过这一过程可以对海洋数据进行分析,通过分析可以帮助人们作出判断,以便采取适当行动;
第五步:对分类完成的海洋原始数据进行储存,通过储存对原始数据进行保护,防止原始数据的丢失,通过海洋数据管理单元对海洋数据进行有效管理,方便对海洋数据进行上传,从而方便不同的用户进行海洋数据的调取,使得海洋数据方便为用户提供便捷,海洋数据管理单元是对海洋数据进行管理调配的模块,通过智能电子设备以及大数据的作用下,对海洋数据进行分类管理,方便数据的调配与储存,方便对海洋数据进行实时更新,方便用户第一时间查找海洋数据分类,方便对对应分类的海洋数据进行提取了解,提高海洋数据的管理化,通过海洋数据管理单元对海洋数据进行管理,数据管理是利用计算机硬件和软件技术对数据进行有效的收集、存储、处理和应用的过程,其目的在于充分有效地发挥数据的作用,实现数据有效管理的关键是数据组织,通过海洋数据上传单元对海洋数据进行上传,使得海洋数据通过物联网方便用户进行查询以及了解,通过物联网能够进行海洋数据之间的交互,方便对海洋数据进行实时更新,方便对相应的海洋数据内容进行及时补充,弥补相应海洋数据的不足,提高海洋数据的使用,方便海洋数据发挥其的作用,展现海洋数据的价值。
综上所述:该海洋大数据采集以及元数据管理方法,海洋数据的采集可以使残缺的数据完整化,将对错误的海洋数据进行纠正,将多余的海洋数据进行去除,将所需的海洋数据挑选出来并且进行数据集成,使其整理成为一个整体的数据模式,将不适应的海洋数据格式转换为所要求的海洋数据格式,方便进行海洋数据的储存与使用,从而方便对海洋数据类型进行相同化、数据格式一致化、数据信息精练化和数据存储集中化,从而提高海洋数据质量,提高海洋数据精度和决策准确度,经过海洋数据采集之后,可以得到所需要的海洋数据集,还可以尽量地减少海洋数据挖掘所付出的代价,海洋数据分类是把相同的海洋数据进行整理融合,从而归为不同类别的海洋数据,海洋数据分析是指用适当的统计分析方法对收集来的大量数据进行分析,提取有用信息和形成结论而对数据加以详细研究和概括总结的过程,海洋数据解析正是对海洋数据进行研究概括总结的过程,通过这一过程可以对海洋数据进行分析,通过分析可以帮助人们作出判断,以便采取适当行动,通过海洋数据管理单元对海洋数据进行管理,数据管理是利用计算机硬件和软件技术对数据进行有效的收集、存储、处理和应用的过程,其目的在于充分有效地发挥数据的作用,实现数据有效管理的关键是数据组织,通过海洋数据上传单元对海洋数据进行上传,使得海洋数据通过物联网方便用户进行查询以及了解,通过物联网能够进行海洋数据之间的交互,方便对海洋数据进行实时更新,方便对相应的海洋数据内容进行及时补充,弥补相应海洋数据的不足,提高海洋数据的使用,方便海洋数据发挥其的作用,展现海洋数据的价值。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。

Claims (5)

1.一种海洋大数据采集以及元数据管理方法,所述方法包括以下步骤:
第一步:通过人为的方式进行海洋数据的收集,通过派遣工作人员去海洋边进行考察以及数据的收集;
第二步:工作人员把收集到的海洋数据进行融合整理,得到一份具体的海洋数据内容报告;
第三步:把相应的海洋数据内容报告进行整理解析,通过这个领域的专家对数据进行解析,从而方便得出海洋数据的结论;
第四步:对符合相对应结论的海洋数据进行整体、收集和分类,从而方便对相应的海洋数据进行使用与调阅;
第五步:对分类完成的海洋原始数据进行储存,通过储存对原始数据进行保护,防止原始数据的丢失,通过海洋数据管理单元对海洋数据进行有效管理,方便对海洋数据进行上传,从而方便不同的用户进行海洋数据的调取,使得海洋数据方便为用户提供便捷。
2.根据权利要求1所述的一种海洋数据采集以及元数据管理方法,其特征在于:所述海洋数据收集单元包括人为收集法以及查询收集法,人为收集法为调配相应的工作人员在海洋边进行实地考察,考察过程中对海洋数据进行收集,查询收集法是通过工作人员在互联网上进行数据查找,对查找的海洋数据进行记录收集。
3.根据权利要求1所述的一种海洋数据采集以及元数据管理方法,其特征在于:所述海洋数据采集单元是对数据进行整理,去除重复的海洋数据,度海洋数据进行完整化,去除残缺的海洋数据,使得海洋数据完整化,且保证了海洋数据格式的一定性,方便进行海洋数据后续的解析。
4.根据权利要求1所述的一种海洋数据采集以及元数据管理方法,其特征在于:所述海洋数据解析单元是对海洋数据进行剖析,对海洋数据进行完整的了解,了解海洋数据的真实意义,方便去除不符合的海洋数据,从而方便对海洋数据进行分类管理,对相应的数据进行归类,方便进行排序收集。
5.根据权利要求1所述的一种海洋数据采集以及元数据管理方法,其特征在于:所述海洋数据管理单元是对海洋数据进行管理调配的模块,通过智能电子设备以及大数据的作用下,对海洋数据进行分类管理,方便数据的调配与储存,方便对海洋数据进行实时更新,方便用户第一时间查找海洋数据分类,方便对对应分类的海洋数据进行提取了解,提高海洋数据的管理化。
CN201810083551.7A 2018-01-29 2018-01-29 一种海洋大数据采集以及元数据管理方法 Pending CN108320092A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810083551.7A CN108320092A (zh) 2018-01-29 2018-01-29 一种海洋大数据采集以及元数据管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810083551.7A CN108320092A (zh) 2018-01-29 2018-01-29 一种海洋大数据采集以及元数据管理方法

Publications (1)

Publication Number Publication Date
CN108320092A true CN108320092A (zh) 2018-07-24

Family

ID=62887304

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810083551.7A Pending CN108320092A (zh) 2018-01-29 2018-01-29 一种海洋大数据采集以及元数据管理方法

Country Status (1)

Country Link
CN (1) CN108320092A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109636225A (zh) * 2018-12-21 2019-04-16 北京航天泰坦科技股份有限公司 一种智慧海洋大数据监测系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102651093A (zh) * 2012-03-31 2012-08-29 上海海洋大学 一种基于时间序列异常检测技术的海洋信息管理系统
CN103049549A (zh) * 2012-12-27 2013-04-17 国家海洋信息中心 一种海岛数据管理方法和系统
CN106096060A (zh) * 2016-07-06 2016-11-09 吴本刚 海洋网络安全风险防御系统
CN106777370A (zh) * 2017-01-24 2017-05-31 桂林电子科技大学 一种海洋数据采集以及元数据管理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102651093A (zh) * 2012-03-31 2012-08-29 上海海洋大学 一种基于时间序列异常检测技术的海洋信息管理系统
CN103049549A (zh) * 2012-12-27 2013-04-17 国家海洋信息中心 一种海岛数据管理方法和系统
CN106096060A (zh) * 2016-07-06 2016-11-09 吴本刚 海洋网络安全风险防御系统
CN106777370A (zh) * 2017-01-24 2017-05-31 桂林电子科技大学 一种海洋数据采集以及元数据管理方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109636225A (zh) * 2018-12-21 2019-04-16 北京航天泰坦科技股份有限公司 一种智慧海洋大数据监测系统

Similar Documents

Publication Publication Date Title
CN111221920B (zh) 变电设备运维装置的案例库构建方法、装置及计算机存储介质
CN109410238B (zh) 一种基于PointNet++网络的枸杞识别计数方法
CN105843850B (zh) 搜索优化方法和装置
CN104008143B (zh) 基于数据挖掘的职业能力指标体系构建方法
CN101620619B (zh) 一种基于聚类方法的测量数据粗大误差处理系统及处理方法
CN109344285A (zh) 一种面向监控的视频图谱构建和挖掘方法、设备
CN113344050B (zh) 一种基于深度学习的岩性智能化识别方法及系统
CN110020714B (zh) 模型训练及数据分析方法、装置、设备以及存储介质
CN113157800B (zh) 实时发现空中动态目标识别方法
CN112395508B (zh) 一种人工智能人才职位推荐系统及其处理方法
CN115934990B (zh) 基于内容理解的遥感影像推荐方法
CN106844636A (zh) 一种基于深度学习的非结构化数据处理方法
CN109669210B (zh) 基于多种地震属性评价准则的有利区预测方法
CN113158891B (zh) 一种基于全局特征匹配的跨摄像头行人重识别方法
CN106503247A (zh) 一种基于知识发现技术的古籍文献管理系统及方法
CN115438199A (zh) 一种基于智慧城市场景数据中台技术的知识平台系统
Goncalves et al. Gathering alumni information from a web social network
CN106611016A (zh) 一种基于可分解词包模型的图像检索方法
CN103425748B (zh) 一种文档资源建议词的挖掘方法和装置
CN108320092A (zh) 一种海洋大数据采集以及元数据管理方法
CN113886524A (zh) 一种基于短文本的网络安全威胁事件抽取方法
Memon et al. Harvesting covert networks: a case study of the iMiner database
Belhi et al. Deep learning and cultural heritage: the CEPROQHA project case study
CN101527001B (zh) 一种基于专家系统方法的隐秘信息检测系统
CN113313178B (zh) 一种跨域图像示例级主动标注方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180724