CN103200254A - 一种面向水利物联网的多源异构数据的获取与传输方法 - Google Patents

一种面向水利物联网的多源异构数据的获取与传输方法 Download PDF

Info

Publication number
CN103200254A
CN103200254A CN2013101040482A CN201310104048A CN103200254A CN 103200254 A CN103200254 A CN 103200254A CN 2013101040482 A CN2013101040482 A CN 2013101040482A CN 201310104048 A CN201310104048 A CN 201310104048A CN 103200254 A CN103200254 A CN 103200254A
Authority
CN
China
Prior art keywords
data
sensor
unified
source heterogeneous
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2013101040482A
Other languages
English (en)
Inventor
刘海滨
顾顺清
张雁东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Aerospace Zhilian Information Science & Technology Development Co Ltd
Original Assignee
Jiangsu Aerospace Zhilian Information Science & Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Aerospace Zhilian Information Science & Technology Development Co Ltd filed Critical Jiangsu Aerospace Zhilian Information Science & Technology Development Co Ltd
Priority to CN2013101040482A priority Critical patent/CN103200254A/zh
Publication of CN103200254A publication Critical patent/CN103200254A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Arrangements For Transmission Of Measured Signals (AREA)

Abstract

本发明涉及一种面向水利物联网的多源异构数据获取与传输方法,具体步骤如下:a.建立支持广泛互操作的传感器网络,其建立统一数据模型和建立语义信息架构以及处理和推理传感数据的语义服务集合;b.对于传感器网络获得广泛的互操作,其建立统一的传感器节点数据模型,实现对大量的传感器原始数据的规范化处理,从而实现多源数据格式转换的实质性统一。所述的一种面向水利物联网的多源异构数据获取与传输方法,通过对数据的结构化表示与描述,使得多源异构数据通过网络可以实现快速地获取与传输。

Description

一种面向水利物联网的多源异构数据的获取与传输方法
技术领域
本发明涉及物联网感知层终端设备数据获取与传输领域,尤其是一种面向水利物联网的多源异构数据的获取与传输方法。
背景技术
感知层终端设备的数据获取和传输方法是物联网技术和应用的重要研究内容。水利物联网感知层的终端设备(以下定义为传感器)种类繁多(如:水位计、水质检测仪、流量计,泵阀装置、摄录像设备等),传感数据获取方式多样,获取的数据结构及格式不同(如:水位、压力、流量、温度、图像、视频、音频等结构化及非结构化数据),是一种典型的多源异构数据获取模式。其中存在类型各异的结点,每个节点对应于一类传感数据源,这些数据源可能使用着不同的硬件设备,具有独立且各不相同的操作及控制系统、不同的数据管理模式等。就整体而言,数据没有特定的模式描述,每个数据源的信息和组织都不同,构成了异构数据环境。目前,对于每种水利终端设备及其数据获取与传输都要单独进行处理,造成水利物联网应用复杂、通用性差、针对用户需求的系统改造效率低下,如何解决面向水利物联网的多源异构数据获取与传输成为一个技术难题。
发明内容
本发明要解决的技术问题是:为了克服上述中存在的问题,提供了一种面向水利物联网的多源异构数据的获取与传输方法,其实现了针对多种类型的水利终端设备、不同数据结构及格式的统一管理、规范定义、按需配置,提高了水利物联网的系统通用性和开发效率。
本发明解决其技术问题所采用的技术方案是:一种面向水利物联网的多源异构数据获取与传输方法,其特征是具体步骤如下:
a.建立支持广泛互操作的传感器网络,其建立统一数据模型和建立语义信息架构以及处理和推理传感数据的语义服务集合;
b.对于传感器网络获得广泛的互操作,其建立统一的传感器节点数据模型,实现对大量的传感器原始数据的规范化处理,从而实现多源数据格式转换的实质性统一。
传感器节点数据模型包括用于对物理传感器自身特性描述的传感器特性参数、用什么样的方式来表示和保存从环境中获取数据的数据格式、用于传感器感知环境信息的信号处理过程、用于标识传感器节点身份的传感器ID、用于说明传感器节点最近所处的境况以及最近发生的事件的传感器状态、用于数据存储和发送命令中所用的基本数据格式的基础结构、用于传感器节点能提供完整功能集合的服务、接口,
其中传感器特性参数的描述内容包括传感器的唯一标识、通道数量、通道类型、通道采样周期、最大传输率、测量范围、数据编码格式、实际测控数据传输所采用的基础协议、校准多项式函数;
数据格式采用有效和规范的方式来表示和保存从环境中获取的数据;
信号处理过程是采用统一的接口语言和信息模型的信号处理过程;
传感器ID由编号,生产厂家,生产时间和文字描述四个部分组成;
传感器状态采用情景数据和事件状态来存储;
基础结构包括消息结构,响应详细结构,命令结构和数据帧格式;
接口包括物理接口和网络用户接口。
本发明的有益效果是:所述的一种面向水利物联网的多源异构数据获取与传输方法,通过对数据的结构化表示与描述,使得多源异构数据通过网络可以实现快速地获取与传输。
附图说明
下面结合附图和实施例对本发明进一步说明。
图1是本发明所述的一种面向水利物联网的多源异构数据获取与传输方法的传感器数据的整体结构框图;
图2是本发明所述的一种面向水利物联网的多源异构数据获取与传输方法中传感器ID的整体结构框图。
具体实施方式
现在结合附图对本发明作进一步详细的说明。这些附图均为简化的示意图,仅以示意方式说明本发明的基本结构,因此其仅显示与本发明有关的构成。
一种面向水利物联网的多源异构数据获取与传输方法,具体步骤如下:
a.建立支持广泛互操作的传感器网络,其建立统一数据模型和建立语义信息架构以及处理和推理传感数据的语义服务集合;
b.对于传感器网络获得广泛的互操作,其建立统一的传感器节点数据模型,实现对大量的传感器原始数据的规范化处理,从而实现多源数据格式转换的实质性统一。
传感器节点数据模型包括用于对物理传感器自身特性描述的传感器特性参数、用什么样的方式来表示和保存从环境中获取数据的数据格式、用于传感器感知环境信息的信号处理过程、用于标识传感器节点身份的传感器ID、用于说明传感器节点最近所处的境况以及最近发生的事件的传感器状态、用于数据存储和发送命令中所用的基本数据格式的基础结构,
其中传感器特性参数的描述内容包括传感器的唯一标识、通道数量、通道类型、通道采样周期、最大传输率、测量范围、数据编码格式、实际测控数据传输所采用的基础协议、校准多项式函数;
数据格式采用有效和规范的方式来表示和保存从环境中获取的数据,传感数据描述接口标准要求,在传感器网络标准体系中需要一种有效和规范的方式获取,传输和归档传感器数据,而并不关心原始数据格式。这里的数据可以是传感器数据(描述的是一种环境的状态,可以是温度、压力、0/1判断信号或者是视频、声音等),也可以是控制命令(描述的是一种对环境的期望),特别是感测结果的规范描述对于普通终端用户能够有效获取传感信息是至关重要的;
信号处理过程是采用统一的接口语言和信息模型的信号处理过程,以方便开发环境感知系统;
如图2所示,传感器ID由编号,生产厂家,生产时间和文字描述四个部分组成;
传感器状态主要用两个数据结构来存储这些状态,一种是情景数据,表征对象当前的操作状态;另一种是事件状态,表征传感器节点最近发生的事件;
传感器状态采用情景数据和事件状态来存储;
基础结构包括消息结构,响应详细结构,命令结构和数据帧格式。
实施例:
参照传感数据模型,以某个某个多功能压力传感器(以下简称PressSensor)的数据模型及获取与显示程序为例,说明它是其如何利用SDDP来提高自身的可重用性
PressSensor由主处理单元(MSC1202),RS232通信接口,四路传感器通道组成。四路通道分别是压力传感器1,压力传感器2,加速度传感器和温度传感器。该传感器应用广泛,可以安装在水泵装置上,根据压力和加速度数据,判断每个水泵的抽水量,温度传感器用于温度补偿,以应对不同季节恶劣环境。
PressSensor用户数据采集程序用C++语言编写,运行在x86的计算机上。为产生命令数据定义了统一的基于SDDP的程序接口函数GetCommand。只需为GetCommand输入必要的入口参数,就可以产生满足格式需求的命令数据,发送命令读取不携带温度信息的传感数据代码如下:
Figure BDA00002975754200051
此时,当PressSensor使用参数发生变化后,开发人员只需对Sensor001.xml做重要修改,而涉及用户数据采集程序的修改将大大减少。其它涉及到传感器交互的程序代码也与此情况类似。显然,这种以SDDP文件作为传感器使用接口的形式将大大简化开发人员的工作,提高程序可重用性和系统互操作性。
基于采集的数据,用户可以方便地对其进行获取、监控与分析,以多功能压力传感器的温度传感单元及数据为例,基于XML Schema的温度传感单元现场采集的数据可以用XML文档表示如下:
Figure BDA00002975754200061
浏览器显示及温度环境超限提示功能实现代码如下:
Figure BDA00002975754200081
由于在DispXML.xsl文档中对测量的结果进行了判断,测量值23.6大于20,所以该单元格的背景显示品红色,对用户进行提示。使用JavaScript来完成转换,通过周期性地加载XML文档和转换就可以实现数据的自动刷新。
统一的传感数据模型是水利物联网多元异构数据获取与传输的核心,构建本体是获取传感器数据信息的重要途径,可以为后期的系统扩展打好基础。统一的传感数据模型在提高系统程序可重用性的同时也降低开发成本,为建立系统与传感终端间动态的交互协议提供了基础的数据编码格式,也为建立具有广泛互操作性的水资源物联网打好基础。
以上述依据本发明的理想实施例为启示,通过上述的说明内容,相关工作人员完全可以在不偏离本项发明技术思想的范围内,进行多样的变更以及修改。本项发明的技术性范围并不局限于说明书上的内容,必须要根据权利要求范围来确定其技术性范围。

Claims (2)

1.一种面向水利物联网的多源异构数据获取与传输方法,其特征是具体步骤如下:
a.建立支持广泛互操作的传感器网络,其建立统一数据模型和建立语义信息架构以及处理和推理传感数据的语义服务集合;
b.对于传感器网络获得广泛的互操作,其建立统一的传感器节点数据模型,实现对大量的传感器原始数据的规范化处理,从而实现多源数据格式转换的实质性统一。
2.根据权利要求1所述的一种面向水利物联网的多源异构数据获取与传输方法,其特征是:传感器节点数据模型包括用于对物理传感器自身特性描述的传感器特性参数、用什么样的方式来表示和保存从环境中获取数据的数据格式、用于传感器感知环境信息的信号处理过程、用于标识传感器节点身份的传感器ID、用于说明传感器节点最近所处的境况以及最近发生的事件的传感器状态、用于数据存储和发送命令中所用的基本数据格式的基础结构、用于传感器节点能提供完整功能集合的服务、接口,
其中传感器特性参数的描述内容包括传感器的唯一标识、通道数量、通道类型、通道采样周期、最大传输率、测量范围、数据编码格式、实际测控数据传输所采用的基础协议、校准多项式函数;
数据格式采用有效和规范的方式来表示和保存从环境中获取的数据;
信号处理过程是采用统一的接口语言和信息模型的信号处理过程;
传感器ID由编号,生产厂家,生产时间和文字描述四个部分组成;
传感器状态采用情景数据和事件状态来存储;
基础结构包括消息结构,响应详细结构,命令结构和数据帧格式;
接口包括物理接口和网络用户接口。
CN2013101040482A 2013-03-27 2013-03-27 一种面向水利物联网的多源异构数据的获取与传输方法 Pending CN103200254A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2013101040482A CN103200254A (zh) 2013-03-27 2013-03-27 一种面向水利物联网的多源异构数据的获取与传输方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2013101040482A CN103200254A (zh) 2013-03-27 2013-03-27 一种面向水利物联网的多源异构数据的获取与传输方法

Publications (1)

Publication Number Publication Date
CN103200254A true CN103200254A (zh) 2013-07-10

Family

ID=48722609

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2013101040482A Pending CN103200254A (zh) 2013-03-27 2013-03-27 一种面向水利物联网的多源异构数据的获取与传输方法

Country Status (1)

Country Link
CN (1) CN103200254A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104156211A (zh) * 2014-08-08 2014-11-19 北京大学 一种用于传感器的通用数据接口及数据调用方法
CN106020090A (zh) * 2016-07-28 2016-10-12 普奥云信息科技(北京)有限公司 数据包生成装置以及物联网系统
CN107688627A (zh) * 2017-08-21 2018-02-13 北京上格云技术有限公司 物联网数据管理方法、语义数据库和计算机系统
CN108390890A (zh) * 2018-03-27 2018-08-10 吉旗(成都)科技有限公司 一种协议传输的粘包、拼包的方法
CN109814501A (zh) * 2018-12-29 2019-05-28 北京农业信息技术研究中心 一种现场检测设备灵活接入的信息采集系统及方法
WO2019178774A1 (zh) * 2018-03-21 2019-09-26 西门子(中国)有限公司 传感器的模型描述方法和装置
CN110708351A (zh) * 2019-08-30 2020-01-17 深圳鸿智云创科技有限公司 数据传输方法
CN110716706A (zh) * 2019-10-30 2020-01-21 华北水利水电大学 智能人机交互指令转换方法及系统
CN114980030A (zh) * 2022-05-20 2022-08-30 上汽通用五菱汽车股份有限公司 车辆绑定方法、装置、车辆及计算机可读存储介质
CN117135589A (zh) * 2023-09-11 2023-11-28 重庆邮电大学 一种支持多参数动态配置的物联网监测终端及其实现方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008026804A1 (en) * 2006-09-01 2008-03-06 Electronics And Telecommunications Research Institute Usn middleware apparatus and method for generating information based on data from heterogeneous sensor networks and information service providing system using the same
CN101664341A (zh) * 2009-06-16 2010-03-10 大连理工大学 一种远程智能家庭医保方法
CN101762624A (zh) * 2008-12-25 2010-06-30 同济大学 一种基于无线传感网络的水情监测系统
CN102176723A (zh) * 2011-03-25 2011-09-07 北京航空航天大学 一种支持制造资源和能力按需使用和动态协同的制造云系统
CN102438333A (zh) * 2010-09-29 2012-05-02 中兴通讯股份有限公司 一种通用的无线传感器网络系统及其信息处理方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008026804A1 (en) * 2006-09-01 2008-03-06 Electronics And Telecommunications Research Institute Usn middleware apparatus and method for generating information based on data from heterogeneous sensor networks and information service providing system using the same
CN101762624A (zh) * 2008-12-25 2010-06-30 同济大学 一种基于无线传感网络的水情监测系统
CN101664341A (zh) * 2009-06-16 2010-03-10 大连理工大学 一种远程智能家庭医保方法
CN102438333A (zh) * 2010-09-29 2012-05-02 中兴通讯股份有限公司 一种通用的无线传感器网络系统及其信息处理方法
CN102176723A (zh) * 2011-03-25 2011-09-07 北京航空航天大学 一种支持制造资源和能力按需使用和动态协同的制造云系统

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104156211B (zh) * 2014-08-08 2017-02-22 北京大学 一种用于传感器的通用数据接口及数据调用方法
CN104156211A (zh) * 2014-08-08 2014-11-19 北京大学 一种用于传感器的通用数据接口及数据调用方法
CN106020090A (zh) * 2016-07-28 2016-10-12 普奥云信息科技(北京)有限公司 数据包生成装置以及物联网系统
CN106020090B (zh) * 2016-07-28 2019-02-05 普奥云信息科技(北京)有限公司 数据包生成装置以及物联网系统
CN107688627B (zh) * 2017-08-21 2020-03-27 北京上格云技术有限公司 物联网数据管理方法、语义数据库和计算机系统
CN107688627A (zh) * 2017-08-21 2018-02-13 北京上格云技术有限公司 物联网数据管理方法、语义数据库和计算机系统
WO2019178774A1 (zh) * 2018-03-21 2019-09-26 西门子(中国)有限公司 传感器的模型描述方法和装置
CN108390890A (zh) * 2018-03-27 2018-08-10 吉旗(成都)科技有限公司 一种协议传输的粘包、拼包的方法
CN109814501A (zh) * 2018-12-29 2019-05-28 北京农业信息技术研究中心 一种现场检测设备灵活接入的信息采集系统及方法
CN110708351A (zh) * 2019-08-30 2020-01-17 深圳鸿智云创科技有限公司 数据传输方法
CN110716706A (zh) * 2019-10-30 2020-01-21 华北水利水电大学 智能人机交互指令转换方法及系统
CN110716706B (zh) * 2019-10-30 2023-11-14 华北水利水电大学 智能人机交互指令转换方法及系统
CN114980030A (zh) * 2022-05-20 2022-08-30 上汽通用五菱汽车股份有限公司 车辆绑定方法、装置、车辆及计算机可读存储介质
CN117135589A (zh) * 2023-09-11 2023-11-28 重庆邮电大学 一种支持多参数动态配置的物联网监测终端及其实现方法

Similar Documents

Publication Publication Date Title
CN103200254A (zh) 一种面向水利物联网的多源异构数据的获取与传输方法
CN201331406Y (zh) 智能型压力变送器
Barnaghi et al. Sense and sens’ ability: Semantic data modelling for sensor networks
CN100586109C (zh) 基于自定义模板的通用业务数据通讯方法与系统
CN104809650B (zh) 一种异构感知数据的动态适配接入方法
US11423358B2 (en) Electric power software development platform
CN104852960A (zh) 一种智能物联云终端系统
JP2017511942A (ja) プロセス制御システムにおける分散ビッグデータ、プロセス制御デバイス、分散ビッグデータの支援方法、プロセス制御デバイス
CN104967686B (zh) 一种构建面型3s智慧服务商店系统及其设计方法
CN204089882U (zh) 一种碳纤维生产数据实时预测云平台
CN103207920A (zh) 一种元数据并行采集系统
CN110046202A (zh) 基于内存键值数据库的综合电力系统实时数据管理方法
CN102780580A (zh) 一种基于信任的组合服务优化方法
CN112929437A (zh) 基于物联网mqtt技术框架的数据传输系统、方法及装置
CN112464123A (zh) 一种基于微服务的水质监测数据可视化系统及方法
WO2022134878A1 (zh) 数据处理、查询方法、装置、电子设备及存储介质
CN116432998A (zh) 一种面向水质异常监测的大数据内反馈方法及系统
CN104021216A (zh) 消息代理服务器及信息发布订阅方法和系统
Santhanavanich et al. Integration and visualization of heterogeneous sensor data and geospatial information
Esswein et al. Towards ontology-based data quality inference in large-scale sensor networks
CN105916165A (zh) 无线传感器网络及其数据处理方法
CN116910144A (zh) 算力网络资源中心、算力服务系统以及数据处理方法
Maiolo et al. Trends in metering potable water
Smarsly et al. Metamodeling Wireless Communication in Cyber-Physical Systems.
Milenkovic et al. Platform-integrated Sensors and Personalized Sensing in Smart Buildings.

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20130710