CN112445839A - 一种水情自动测报系统数据可用度统计方法 - Google Patents
一种水情自动测报系统数据可用度统计方法 Download PDFInfo
- Publication number
- CN112445839A CN112445839A CN202011241841.3A CN202011241841A CN112445839A CN 112445839 A CN112445839 A CN 112445839A CN 202011241841 A CN202011241841 A CN 202011241841A CN 112445839 A CN112445839 A CN 112445839A
- Authority
- CN
- China
- Prior art keywords
- data
- sum
- accuracy
- availability
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2462—Approximate or statistical queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2477—Temporal data queries
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Probability & Statistics with Applications (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Mathematical Physics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Fuzzy Systems (AREA)
- Arrangements For Transmission Of Measured Signals (AREA)
Abstract
本发明公开了一种水情自动测报系统数据可用度统计方法,该方法通过准确度判断算法和时效性判断算法,分析水雨情数据的准确性和数据的时效性,从而判断数据是否为可用数据,通过可用数据的时间相对于总时间的占比来计算水情自动测报系统数据可用度,从而反映水情自动测报系统数据质量,通过可用度可以反映设备运行状况,从而指导技术人员开展针对性的设备维护。
Description
技术领域
本发明涉及水情数据统计领域,具体涉及一种水情自动测报系统数据可用度统计方法。
背景技术
在水情自动测报系统中,水位遥测站、雨量站、气象站等前端遥测站实时采集水位、流量、雨量、温湿度、风速风向等数据,并通过短信/GPRS信道/4G、Lora、VHF、北斗卫星等通信方式发送给中心站,由中心站的软件系统进行分析、评估,为技术人员提供决策依据,已广泛应用于污水处理、水文、水电等行业生产调度工作。在实际应用中,遥测站所采集的数据准确性、及时性等,影响技术人员的预报精度、调度准确性。如何对水情自动测报系统数据可用度进行统计,客观分析数据质量,是非常有意义的。同时,通过可用度也可以反映设备运行状况,从而指导技术人员开展针对性的设备维护。
发明内容
为解决上述技术问题,本发明提供了一种水情自动测报系统数据可用度统计方法,该方法通过准确度判断算法和时效性判断算法,分析水雨情数据的准确性和数据的时效性,从而判断数据是否为可用数据,通过可用数据的时间相对于总时间的占比来计算水情自动测报系统数据可用度,从而反映水情自动测报系统数据质量。
为了实现上述的技术特征,本发明的目的是这样实现的:一种水情自动测报系统数据可用度统计方法,它包括以下步骤:
步骤S1:确定第n遥测站统计数据的时间段(n≥1):设置数据可用度统计的起始时间,计算统计总运行时间段,记为T;根据该站点的传感器点号,在数据表查询该遥测站点水位/雨量采样的时间间隔,记为Tint;统计总运行时间段的数据总量
步骤S2:根据数据准确度判断算法,判断数据的准确度是否可用,同时统计准确度不可用的数据个数,记为SUM1;计算准确度不可用时间,记为T1,其中,T1=Tint*SUM1;
步骤S3:根据数据时效性判断算法,判断数据的时效性是否可用,同时统计时效性不可用的数据个数,记为SUM2,从而计算该时效性不可用时间,记为T2,其中,T2=Tint*SUM2;
步骤S4:计算总运行时间段内的数据可用时间,记为T3;T3=T-T1-T2;
优选地,所述步骤S2中的数据准确度判断算法的计算方法如下:
a.重置计数器:令SUM1=0;设置变量i=1;设置特征值σ;设置准确度阈值Vth;
b.查询第i个传感器点号测量的数据值,记为Vi,令V0=V1;
c.判断Vi=σ是否成立;如果成立,转到步骤e;如果不成立,转到步骤d;
d.计算前后两个数据的差值的绝对值丨Vi-Vi-1丨>Vth是否成立,若成立,则令SUM1=SUM1+1;如果不成立,则进入下一步;
e.判断i=N是否成立,若不成立,令i=i+1,跳到步骤b;若成立,进入下一步;
f.根据统计的准确性不可用数据SUM1,计算数据准确性不可用时间T1=Tint*SUM1;
g.输出T1,结束计算。
优选地,所述步骤S3中的数据时效性判断算法的计算方法如下:
a.重置计数器:令SUM2=0;设置变量i=1;设置时效性阈值Ts;
b.查询第i个测量站点的数据采集时延,记为ti;
c.判断ti>Ts是否成立;如果成立,则转到步骤d;如果不成立,转到步骤e;
d.令SUM2=SUM2+1;
e.判断i=N是否成立,若不成立,令i=i+1,跳到步骤b;若成立,进入下一步;
f.根据统计的准确性不可用数据SUM2,计算数据准确性不可用时间T2=Tint*SUM2;
g.输出T2,结束计算。
优选地,所述特征值σ是硬件系统设置的故障代码值,当设备故障时数据为故障数据,将传感器采集的数据记录为σ;准确度阈值Vth是相邻数据间跳变的阈值。
优选地,所述时效性阈值Ts是数据采集中数据传输的时延阈值。
本发明提供的一种水情自动测报系统数据可用度统计方法的有益效果如下:
1、本方法可以高效统计水情测报系统的数据可用度,反映数据质量。通过统计分析,可以判断系统设备运行状况,从而有针对性开展设备维护,提高设备维护效率。
2、本方法易于计算,计算人员可以根据实际情况设定判断条件。在水情自动测报系统中,不同遥测站点对生产调度影响不一样。技术人员可以根据生产要求,自定义设置判断条件,或者设置不同计算权重。
3、本方法简单易用,扩展性好。可以用本方法计算单个遥测站点数据可用度,也可以计算系统数据可用度,使用灵活,适用范围广。
附图说明
图1为本发明的数据准确度判断流程图。
图2为本发明的数据时效性判断流程图。
具体实施方式
如下表1所示,水情自动测报系统数据库库表包括:SensorID:传感器点号;Time:数据时间;Value:传感器点号测量值;Delay:数据时延,即传感器数据采集时间与写入数据库的时间差值,用于反映数据时效性指标。
SensorID | Time | Value | Delay |
表1
如图1所示,数据准确度判断流程图用于判断数据是否准确,主要包括两个判断指标:(1)
数据特征值:特征值是硬件系统设置的故障代码值,用于维护人员判断设备故障,如果出现特征值数据,记为σ,说明该数据为错误、不可用的数据;
(2)数据跳变:数据跳变是计算前后两个数据差值,反映测量数据平缓性,在实际运行中,传感器故障、气管淤堵、气管漏气、人为操作或破坏等原因均会导致数据跳变;技术人员可以根据测站属性、重要性等情况,设定切实有效的准确度阈值Vth,数据跳变超过准确度阈值Vth时可以认定该数据为错误、不可用的数据。
如图2所示,时效性判断流程图用于判断数据到数是否及时;在测站实际运行中,测站信道质量、网络设备运行状况、数据库状况等都会影响数据时效性;在实际数据应用中,如果数据来数时间超过一定的时效性将影响系统的实时流量、雨量等实时计算,该数据将无实际应用意义。技术人员可以根据测站属性、重要性等情况,设定切实有效的时效性阈值Ts,数据时效性超过时效性阈值Ts时,则判断该数据为错误、不可用的数据。
如图1~图2所示,一种水情自动测报系统数据可用度统计方法,它包括以下步骤:
步骤S1:确定第n遥测站统计数据的时间段(n≥1):设置数据可用度统计的起始时间,计算统计总运行时间段,记为T;根据该站点的传感器点号,在数据表查询该遥测站点水位/雨量采样的时间间隔,记为Tint;统计总运行时间段的数据总量
步骤S2:根据数据准确度判断算法,判断数据的准确度是否可用,同时统计准确度不可用的数据个数,记为SUM1;计算准确度不可用时间,记为T1,其中,T1=Tint*SUM1;
步骤S3:根据数据时效性判断算法,判断数据的时效性是否可用,同时统计时效性不可用的数据个数,记为SUM2,从而计算该时效性不可用时间,记为T2,其中,T2=Tint*SUM2;
步骤S4:计算总运行时间段内的数据可用时间,记为T3;T3=T-T1-T2;
优选地,所述步骤S2中的数据准确度判断算法的计算方法如下:
a.重置计数器:令SUM1=0;设置变量i=1;设置特征值σ;设置准确度阈值Vth;
b.查询第i个传感器点号测量的数据值,记为Vi,令V0=V1;
c.判断Vi=σ是否成立;如果成立,转到步骤e;如果不成立,转到步骤d;
d.计算前后两个数据的差值的绝对值丨Vi-Vi-1丨>Vth是否成立,若成立,则令SUM1=SUM1+1;如果不成立,则进入下一步;
e.判断i=N是否成立,若不成立,令i=i+1,跳到步骤b;若成立,进入下一步;
f.根据统计的准确性不可用数据SUM1,计算数据准确性不可用时间T1=Tint*SUM1;
g.输出T1,结束计算。
优选地,所述步骤S3中的数据时效性判断算法的计算方法如下:
a.重置计数器:令SUM2=0;设置变量i=1;设置时效性阈值Ts;
b.查询第i个测量站点的数据采集时延,记为ti;
c.判断ti>Ts是否成立;如果成立,则转到步骤d;如果不成立,转到步骤e;
d.令SUM2=SUM2+1;
e.判断i=N是否成立,若不成立,令i=i+1,跳到步骤b;若成立,进入下一步;
f.根据统计的准确性不可用数据SUM2,计算数据准确性不可用时间T2=Tint*SUM2;
g.输出T2,结束计算。
优选地,所述特征值σ是硬件系统设置的故障代码值,当设备故障时数据为故障数据,将传感器采集的数据记录为σ;准确度阈值Vth是相邻数据间跳变的阈值。
优选地,所述时效性阈值Ts是数据采集中数据传输的时延阈值。
优选地,技术人员可以根据测站的重要性、属性对准确度阈值Vth以及时效性阈值Ts进行自定义赋值。
上述的实施例仅为本发明的优选技术方案,而不应视为对于本发明的限制,本申请中的实施例及实施例中的特征在不冲突的情况下,可以相互任意组合。本发明的保护范围应以权利要求记载的技术方案,包括权利要求记载的技术方案中技术特征的等同替换方案为保护范围。即在此范围内的等同替换改进,也在本发明的保护范围之内。
Claims (5)
1.一种水情自动测报系统数据可用度统计方法,其特征在于,它包括以下步骤:
步骤S1:确定第n遥测站统计数据的时间段(n≥1):设置数据可用度统计的起始时间,计算统计总运行时间段,记为T;根据该站点的传感器点号,在数据表查询该遥测站点水位/雨量采样的时间间隔,记为Tint;统计总运行时间段的数据总量
步骤S2:根据数据准确度判断算法,判断数据的准确度是否可用,同时统计准确度不可用的数据个数,记为SUM1;计算准确度不可用时间,记为T1,其中,T1=Tint*SUM1;
步骤S3:根据数据时效性判断算法,判断数据的时效性是否可用,同时统计时效性不可用的数据个数,记为SUM2,从而计算该时效性不可用时间,记为T2,其中,T2=Tint*SUM2;
步骤S4:计算总运行时间段内的数据可用时间,记为T3;T3=T-T1-T2;
2.根据权利要求1所述的一种水情自动测报系统数据可用度统计方法,其特征在于:所述步骤S2中的数据准确度判断算法的计算方法如下:
a.重置计数器:令SUM1=0;设置变量i=1;设置特征值σ;设置准确度阈值Vth;
b.查询第i个传感器点号测量的数据值,记为Vi,令V0=V1;
c.判断Vi=σ是否成立;如果成立,转到步骤e;如果不成立,转到步骤d;
d.计算前后两个数据的差值的绝对值|Vi-Vi-1|>Vth是否成立,若成立,则令SUM1=SUM1+1;如果不成立,则进入下一步;
e.判断i=N是否成立,若不成立,令i=i+1,跳到步骤b;若成立,进入下一步;
f.根据统计的准确性不可用数据SUM1,计算数据准确性不可用时间T1=Tint*SUM1;
g.输出T1,结束计算。
3.根据权利要求1所述的一种水情自动测报系统数据可用度统计方法,其特征在于:所述步骤S3中的数据时效性判断算法的计算方法如下:
a.重置计数器:令SUM2=0;设置变量i=1;设置时效性阈值Ts;
b.查询第i个测量站点的数据采集时延,记为ti;
c.判断ti>Ts是否成立;如果成立,则转到步骤d;如果不成立,转到步骤e;
d.令SUM2=SUM2+1;
e.判断i=N是否成立,若不成立,令i=i+1,跳到步骤b;若成立,进入下一步;
f.根据统计的准确性不可用数据SUM2,计算数据准确性不可用时间T2=Tint*SUM2;
g.输出T2,结束计算。
4.根据权利要求2所述的一种水情自动测报系统数据可用度统计方法,其特征在于:所述特征值σ是硬件系统设置的故障代码值,当设备故障时数据为故障数据,将传感器采集的数据记录为σ;准确度阈值Vth是相邻数据间跳变的阈值。
5.根据权利要求3所述的一种水情自动测报系统数据可用度统计方法,其特征在于:所述时效性阈值Ts是数据采集中数据传输的时延阈值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011241841.3A CN112445839B (zh) | 2020-11-09 | 2020-11-09 | 一种水情自动测报系统数据可用度统计方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011241841.3A CN112445839B (zh) | 2020-11-09 | 2020-11-09 | 一种水情自动测报系统数据可用度统计方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112445839A true CN112445839A (zh) | 2021-03-05 |
CN112445839B CN112445839B (zh) | 2023-09-19 |
Family
ID=74736559
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011241841.3A Active CN112445839B (zh) | 2020-11-09 | 2020-11-09 | 一种水情自动测报系统数据可用度统计方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112445839B (zh) |
Citations (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102419196A (zh) * | 2011-09-02 | 2012-04-18 | 广西远长公路桥梁工程有限公司 | 利用多个水位遥控检测装置自动绘制河流水面线的方法 |
JP2012154911A (ja) * | 2011-01-26 | 2012-08-16 | Ributetsuku:Kk | 非接触型センサーによる水位確認システム |
CN102707339A (zh) * | 2012-05-18 | 2012-10-03 | 福建四创软件有限公司 | 一种利用综合条件对遥测雨水情数据进行纠错的方法 |
CN202584396U (zh) * | 2012-05-02 | 2012-12-05 | 南昌工程学院 | 基于无线传感器和嵌入式微型操作系统的水文遥测站终端 |
CN202614325U (zh) * | 2012-05-18 | 2012-12-19 | 福建四创软件有限公司 | 利用综合条件对遥测雨水情数据进行纠错的水文遥测系统 |
CN103175513A (zh) * | 2013-03-01 | 2013-06-26 | 戴会超 | 水利工程影响下基于物联网的流域水文水质监控系统及方法 |
CN103281523A (zh) * | 2013-06-07 | 2013-09-04 | 四川晨光信息自动化工程有限公司 | 具有视频监控功能及低功耗特性的遥测终端机 |
CN104091413A (zh) * | 2014-07-01 | 2014-10-08 | 济南展飞物联网科技有限公司 | 一种防汛雨水情自动监测系统及其监测方法 |
CN204203682U (zh) * | 2014-09-30 | 2015-03-11 | 国家电网公司 | 水情遥测系统数据采集控制装置 |
CN106289633A (zh) * | 2016-08-30 | 2017-01-04 | 中国长江电力股份有限公司 | 一种水情遥测系统气瓶压力远程监测系统 |
CN106340158A (zh) * | 2015-07-12 | 2017-01-18 | 舒均盛 | 一种智能化水情信息与调度预警系统 |
CN107817538A (zh) * | 2017-11-29 | 2018-03-20 | 江苏南水水务科技有限公司 | 一种小感量大量程翻斗式雨量传感器 |
KR20180083620A (ko) * | 2017-01-13 | 2018-07-23 | (주)노바코스 | 매립지 원격 감시 및 변화 예측 시스템 및 방법 |
CN108319649A (zh) * | 2017-12-27 | 2018-07-24 | 南瑞集团有限公司 | 一种提高水情水调数据质量的系统和方法 |
CN108614312A (zh) * | 2018-06-07 | 2018-10-02 | 安徽赛洋信息科技开发咨询有限公司 | 一种低功耗智能雨水情遥测装置 |
US20190278001A1 (en) * | 2014-07-29 | 2019-09-12 | GroGuru, Inc. | Sensing system and method for use in electromagnetic-absorbing material |
US20190353156A1 (en) * | 2017-04-10 | 2019-11-21 | Logical Concepts, Inc. | Home flood prevention appliance system |
-
2020
- 2020-11-09 CN CN202011241841.3A patent/CN112445839B/zh active Active
Patent Citations (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012154911A (ja) * | 2011-01-26 | 2012-08-16 | Ributetsuku:Kk | 非接触型センサーによる水位確認システム |
CN102419196A (zh) * | 2011-09-02 | 2012-04-18 | 广西远长公路桥梁工程有限公司 | 利用多个水位遥控检测装置自动绘制河流水面线的方法 |
CN202584396U (zh) * | 2012-05-02 | 2012-12-05 | 南昌工程学院 | 基于无线传感器和嵌入式微型操作系统的水文遥测站终端 |
CN102707339A (zh) * | 2012-05-18 | 2012-10-03 | 福建四创软件有限公司 | 一种利用综合条件对遥测雨水情数据进行纠错的方法 |
CN202614325U (zh) * | 2012-05-18 | 2012-12-19 | 福建四创软件有限公司 | 利用综合条件对遥测雨水情数据进行纠错的水文遥测系统 |
CN103175513A (zh) * | 2013-03-01 | 2013-06-26 | 戴会超 | 水利工程影响下基于物联网的流域水文水质监控系统及方法 |
CN103281523A (zh) * | 2013-06-07 | 2013-09-04 | 四川晨光信息自动化工程有限公司 | 具有视频监控功能及低功耗特性的遥测终端机 |
CN104091413A (zh) * | 2014-07-01 | 2014-10-08 | 济南展飞物联网科技有限公司 | 一种防汛雨水情自动监测系统及其监测方法 |
US20190278001A1 (en) * | 2014-07-29 | 2019-09-12 | GroGuru, Inc. | Sensing system and method for use in electromagnetic-absorbing material |
CN204203682U (zh) * | 2014-09-30 | 2015-03-11 | 国家电网公司 | 水情遥测系统数据采集控制装置 |
CN106340158A (zh) * | 2015-07-12 | 2017-01-18 | 舒均盛 | 一种智能化水情信息与调度预警系统 |
CN106289633A (zh) * | 2016-08-30 | 2017-01-04 | 中国长江电力股份有限公司 | 一种水情遥测系统气瓶压力远程监测系统 |
KR20180083620A (ko) * | 2017-01-13 | 2018-07-23 | (주)노바코스 | 매립지 원격 감시 및 변화 예측 시스템 및 방법 |
US20190353156A1 (en) * | 2017-04-10 | 2019-11-21 | Logical Concepts, Inc. | Home flood prevention appliance system |
CN107817538A (zh) * | 2017-11-29 | 2018-03-20 | 江苏南水水务科技有限公司 | 一种小感量大量程翻斗式雨量传感器 |
CN108319649A (zh) * | 2017-12-27 | 2018-07-24 | 南瑞集团有限公司 | 一种提高水情水调数据质量的系统和方法 |
CN108614312A (zh) * | 2018-06-07 | 2018-10-02 | 安徽赛洋信息科技开发咨询有限公司 | 一种低功耗智能雨水情遥测装置 |
Non-Patent Citations (1)
Title |
---|
杨光: "现代水文信息技术在水情遥测中的应用分析", 《黑龙江水利科技》, pages 131 - 133 * |
Also Published As
Publication number | Publication date |
---|---|
CN112445839B (zh) | 2023-09-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110375787B (zh) | 一种计量仪表运行状态在线评价方法 | |
CN115854999B (zh) | 基于场景自适应的h-adcp断面平均流速自校正方法 | |
CN113282576B (zh) | 一种气象数据质量控制方法 | |
CN114862278B (zh) | 一种基于配网雷击数据的输电线雷击风险评估方法及系统 | |
CN109783934A (zh) | 一种基于h-adcp的断面平均流速拟合率定方法 | |
CN113392523A (zh) | 一种基于长历时多测点的污水管网健康状况诊断模型 | |
CN107423544A (zh) | 一种流域水文极值的非平稳性影响指标的确定方法及装置 | |
KR20220093597A (ko) | IoT기반 도시기상관측자료의 품질검사 시스템 | |
CN106855990B (zh) | 核电机组仪表通道测量误差论证方法 | |
CN111260159A (zh) | 一种气象水文耦合洪水测报法 | |
CN203443611U (zh) | 一种用于变电站的噪声采集装置 | |
CN112445839B (zh) | 一种水情自动测报系统数据可用度统计方法 | |
CN113640732A (zh) | 一种基于Pareto分布的电能表计量准确性估计系统和方法 | |
CN113739082A (zh) | 一种基于多区域联合评估的供水管网漏损监测方法 | |
CN116882946A (zh) | 一种基于发电企业数据的智能化管理系统及方法 | |
CN116595345A (zh) | 一种自动化次洪划分与退水修正方法及系统 | |
CN110610256B (zh) | 考虑不同预报情景下预报难度的径流预报水平评价方法 | |
CN114705908A (zh) | 一种智能电表状态监测装置及其使用方法 | |
CN105447289A (zh) | 一种确定特高压单回路可听噪声修正值的方法 | |
CN103344824A (zh) | 基于时标量测的电能量积分方法 | |
CN114091368A (zh) | 一种轴流式水轮机空化状态的识别方法 | |
CN113421170A (zh) | 一种电力工程质量综合优化管理系统以及方法 | |
CN111831635A (zh) | 一种准确提取气象数据的方法及装置 | |
CN112783885A (zh) | 光伏出力数据异常值的剔除方法 | |
CN101923605A (zh) | 铁路防灾风预警方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |