CN110442567A - 一种用于机场自动观测系统的数据融合方法 - Google Patents
一种用于机场自动观测系统的数据融合方法 Download PDFInfo
- Publication number
- CN110442567A CN110442567A CN201910694145.9A CN201910694145A CN110442567A CN 110442567 A CN110442567 A CN 110442567A CN 201910694145 A CN201910694145 A CN 201910694145A CN 110442567 A CN110442567 A CN 110442567A
- Authority
- CN
- China
- Prior art keywords
- data
- fusion
- optimization
- observing system
- raw measurement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种用于机场自动观测系统的数据融合方法,涉及数据融合领域。所述数据融合步骤为:S1:设置前序接收装置,通过前序接收装置采集原始测量数据,再将原始测量数据传送至数据预处理模块;S2:数据预处理模块对原始测量数据进行有效性判断,标识或剔除采集过程中的异常数据,再对剩余数据进行整合,得到优化数据,再将优化数据传送至数据融合模块;S3:数据融合模块采用多传感器数据融合方法对优化数据进行处理,得到格式化数据,并对格式化数据增加时效性标记;S4:将格式化数据传送至各个应用。
Description
技术领域
本发明涉及数据融合领域,特别涉及一种用于机场自动观测系统的数据融合方法。
背景技术
数据融合技术是指利用计算机对按时序获得的若干观测信息,在一定准则下加以自动分析、综合,以完成所需的决策和评估任务而进行的信息处理技术。
目前的民航机场,特别是吞吐量较大的机场,一般建设有多个观测系统,其目的除了对比观测,更重要的是对其观测系统的备份。大部分情况下,建设的各观测系统来自不同的厂家,各系统互相独立。目前机场探测部门主要利用主用设备进行业务作业,当主用设备故障时,业务切换至备用设备或者参考备用设备应用,切换时存在切换不成功或切换时间不可控的风险,当某一气象要素异常时存在不易察觉的风险。
发明内容
本发明的目的在于:提供了一种用于机场自动观测系统的数据融合方法,解决了目前机场探测部门主要利用主用设备进行业务作业,当主用设备故障时,业务切换至备用设备或者参考备用设备应用,切换时存在切换不成功或切换时间不可控的风险,当某一气象要素异常时存在不易察觉的风险的问题。
本发明采用的技术方案如下:
一种用于机场自动观测系统的数据融合方法,所述数据融合步骤为:
S1:设置前序接收装置,通过前序接收装置采集原始测量数据,再将原始测量数据传送至数据预处理模块;
S2:数据预处理模块对原始测量数据进行有效性判断,标识或剔除采集过程中的异常数据,再对剩余数据进行整合,得到优化数据,再将优化数据传送至数据融合模块;
S3:数据融合模块采用多传感器数据融合方法对优化数据进行处理,得到格式化数据,并对格式化数据增加时效性标记;
S4:将格式化数据传送至各个应用。
本发明针对存在多重观测设备的机场,在其业务应用,如对比观测、对外发布实况、联动报警等应用场景下,提出了一套新数据融合方法。第一,本发明增加前置接收装置,该装置可采用软件程序或者硬件如协议转换器组成,主要负责各设备数据的数据引入;第二,增加了数据预处理模块,进行数据处理,主要负责数据的解析及标准化;第三,采用多种手段进行数据融合,对数据进行数据格式化,增加效性标记,如数值有效和时效的标记;第四,向各个应用推送格式化后的数据。
本发明可有效解决存在多套观测设备情况下,当主用设备故障时,业务切换至备用设备或者参考备用设备应用,切换时存在切换不成功或切换时间不可控的风险,当某一气象要素异常时存在不易察觉的风险。应用场景包括观测编发报、预报发报,比对观测及观测告警预警业务。
进一步地,所述S1中的前序接收设备为软件程序。
进一步地,所述S1中的前序接收设备为硬件设备。
进一步地,所述S2中数据预处理模块的运行步骤为:
S5:根据数据预处理请求,将原始测量数据进行数据清洗,去掉数据噪声和无用数据;
S6:通过数据变换将清洗完毕的多个数据源中的数据整合到一个数据库中一致性存储;
S7:对现有的数据按照不同维度进行汇总以得到不同层次的方体,所有的方体联合起来构成数据立方体;
S8:将得到的数据立方体压缩表示,以减小数据量,可得到相近或相同的结果,并进行离散化和概念分层,最终得到预处理后的数据。
进一步地,所述S3中多传感器数据融合方法的步骤为:
S9:采用自适应加权数据融合算法对来自多个前序接收装置的优化数据分配相应的权数;
S10:采用卡尔曼滤波算法对所述相应权数的优化数据进行最优估计,得到局部融合后的优化数据;
S11:采用D-S理论估计算法对所述局部融合后的优化数据中不确定的数据的进行区间估计;
S12:采用多贝叶斯估计算法对所述进行区间估计后的数据进行单独的关联概率分布,以合成一个联合的后验的概率分布函数;
S13:利用联合分布函数输出优化数据的最终融合值。
综上所述,由于采用了上述技术方案,本发明的有益效果是:
1.本发明一种用于机场自动观测系统的数据融合方法,增加前置接收装置,该装置可采用软件程序或者硬件如协议转换器组成,主要负责各设备数据的数据引入;第二,增加了数据预处理模块,进行数据处理,主要负责数据的解析及标准化;第三,采用多种手段进行数据融合,对数据进行数据格式化,增加效性标记,如数值有效和时效的标记;第四,向各个应用推送格式化后的数据。能够有效解决多套观测设备下,数据融合利用问题。
2.本发明一种用于机场自动观测系统的数据融合方法,采用多传感器数据融合方法,可以解决单传感器系统精度低、信息单一以及数据融合计算量大的问题,应用场景包括观测编发报、预报发报,比对观测及观测告警预警业务。
附图说明
本发明将通过例子并参照附图的方式说明,其中:
图1是本发明的流程图。
具体实施方式
本说明书中公开的所有特征,或公开的所有方法或过程中的步骤,除了互相排斥的特征和/或步骤以外,均可以以任何方式组合。
需要说明的是,术语“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
下面结合图1对本发明作详细说明。
实施例1
一种用于机场自动观测系统的数据融合方法,所述数据融合步骤为:
S1:设置前序接收装置,通过前序接收装置采集原始测量数据,再将原始测量数据传送至数据预处理模块;
S2:数据预处理模块对原始测量数据进行有效性判断,标识或剔除采集过程中的异常数据,再对剩余数据进行整合,得到优化数据,再将优化数据传送至数据融合模块;
S3:数据融合模块采用多传感器数据融合方法对优化数据进行处理,得到格式化数据,并对格式化数据增加时效性标记;
S4:将格式化数据传送至各个应用。
实施例2
所述S2中数据预处理模块的运行步骤为:
S5:根据数据预处理请求,将原始测量数据进行数据清洗,去掉数据噪声和无用数据;
S6:通过数据变换将清洗完毕的多个数据源中的数据整合到一个数据库中一致性存储;
S7:对现有的数据按照不同维度进行汇总以得到不同层次的方体,所有的方体联合起来构成数据立方体;
S8:将得到的数据立方体压缩表示,以减小数据量,可得到相近或相同的结果,并进行离散化和概念分层,最终得到预处理后的数据。
其中S5中,数据清洗的方式包括对缺失值的除了和去除噪声数据两大部分;对与缺失值,可采用忽略元组、人工填写、全局常量填充、属性中心度量填充、最可能的值填充等方法;对于去除噪声数据可采用数据光滑技术,通过分箱、回归、离群点分析等方式。
实施例3
所述S3中多传感器数据融合方法的步骤为:
S9:采用自适应加权数据融合算法对来自多个前序接收装置的优化数据分配相应的权数;
S10:采用卡尔曼滤波算法对所述相应权数的优化数据进行最优估计,得到局部融合后的优化数据;
S11:采用D-S理论估计算法对所述局部融合后的优化数据中不确定的数据的进行区间估计;
S12:采用多贝叶斯估计算法对所述进行区间估计后的数据进行单独的关联概率分布,以合成一个联合的后验的概率分布函数;
S13:利用联合分布函数输出优化数据的最终融合值。
本发明采用多传感器数据融合方法,可以解决单传感器系统精度低、信息单一以及数据融合计算量大的问题。其中:
卡尔曼滤波主要用于融合低层次实时动态多传感器冗余数据。它的递推特性使系统处理过程中不需要进行大量的数据存储和计算,而且还能为融合数据提供唯一统计意义下的最优估计。
D-S理论估计算法作用是把来自独立传感器的观测结果合成为一个总的输出结果,再将获得传感器的观测结果并进行推断,将传感器观测结果扩展成目标报告。
多贝叶斯估计算法使得传感器信息依据概率原则进行组合,测量不确定性以条件概率表示,当传感器组的观测坐标一致时,可以直接对传感器的数据进行融合。因为通过使用联合分布函数的似然函数为最小,因此最后能提供多传感器信息的最终的置信度、可靠度高的融合值。
以上所述,仅为本发明的优选实施方式,但本发明的保护范围并不局限于此,任何熟悉本领域的技术人员在本发明所揭露的技术范围内,可不经过创造性劳动想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求书所限定的保护范围为准。
Claims (5)
1.一种用于机场自动观测系统的数据融合方法,其特征在于:所述数据融合步骤为:
S1:设置前序接收装置,通过前序接收装置采集原始测量数据,再将原始测量数据传送至数据预处理模块;
S2:数据预处理模块对原始测量数据进行有效性判断,标识或剔除采集过程中的异常数据,再对剩余数据进行整合,得到优化数据,再将优化数据传送至数据融合模块;
S3:数据融合模块采用多传感器数据融合方法对优化数据进行处理,得到格式化数据,并对格式化数据增加时效性标记;
S4:将格式化数据传送至各个应用。
2.根据权利要求1所述的一种用于机场自动观测系统的数据融合方法,其特征在于:所述S1中的前序接收设备为软件程序。
3.根据权利要求1所述的一种用于机场自动观测系统的数据融合方法,其特征在于:所述S1中的前序接收设备为硬件设备。
4.根据权利要求1所述的一种用于机场自动观测系统的数据融合方法,其特征在于:所述S2中数据预处理模块的运行步骤为:
S5:根据数据预处理请求,将原始测量数据进行数据清洗,去掉数据噪声和无用数据;
S6:通过数据变换将清洗完毕的多个数据源中的数据整合到一个数据库中一致性存储;
S7:对现有的数据按照不同维度进行汇总以得到不同层次的方体,所有的方体联合起来构成数据立方体;
S8:将得到的数据立方体压缩表示,以减小数据量,可得到相近或相同的结果,并进行离散化和概念分层,最终得到预处理后的数据。
5.根据权利要求1所述的一种用于机场自动观测系统的数据融合方法,其特征在于:所述S3中多传感器数据融合方法的步骤为:
S9:采用自适应加权数据融合算法对来自多个前序接收装置的优化数据分配相应的权数;
S10:采用卡尔曼滤波算法对所述相应权数的优化数据进行最优估计,得到局部融合后的优化数据;
S11:采用D-S理论估计算法对所述局部融合后的优化数据中不确定的数据的进行区间估计;
S12:采用多贝叶斯估计算法对所述进行区间估计后的数据进行单独的关联概率分布,以合成一个联合的后验的概率分布函数;
S13:利用联合分布函数输出优化数据的最终融合值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910694145.9A CN110442567A (zh) | 2019-07-30 | 2019-07-30 | 一种用于机场自动观测系统的数据融合方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910694145.9A CN110442567A (zh) | 2019-07-30 | 2019-07-30 | 一种用于机场自动观测系统的数据融合方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110442567A true CN110442567A (zh) | 2019-11-12 |
Family
ID=68432203
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910694145.9A Pending CN110442567A (zh) | 2019-07-30 | 2019-07-30 | 一种用于机场自动观测系统的数据融合方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110442567A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101441718A (zh) * | 2008-12-19 | 2009-05-27 | 福建三元达通讯股份有限公司 | 传感器信息融合装置及其方法 |
CN102831766A (zh) * | 2012-07-04 | 2012-12-19 | 武汉大学 | 基于多传感器的多源交通数据融合方法 |
US20130159350A1 (en) * | 2011-12-19 | 2013-06-20 | Microsoft Corporation | Sensor Fusion Interface for Multiple Sensor Input |
CN106874483A (zh) * | 2017-02-20 | 2017-06-20 | 山东鲁能软件技术有限公司 | 一种基于大数据技术的图形化的数据质量评测的装置及方法 |
CN109581981A (zh) * | 2018-12-06 | 2019-04-05 | 山东大学 | 一种基于数据评估与系统协调模块的数据融合系统及其工作方法 |
-
2019
- 2019-07-30 CN CN201910694145.9A patent/CN110442567A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101441718A (zh) * | 2008-12-19 | 2009-05-27 | 福建三元达通讯股份有限公司 | 传感器信息融合装置及其方法 |
US20130159350A1 (en) * | 2011-12-19 | 2013-06-20 | Microsoft Corporation | Sensor Fusion Interface for Multiple Sensor Input |
CN102831766A (zh) * | 2012-07-04 | 2012-12-19 | 武汉大学 | 基于多传感器的多源交通数据融合方法 |
CN106874483A (zh) * | 2017-02-20 | 2017-06-20 | 山东鲁能软件技术有限公司 | 一种基于大数据技术的图形化的数据质量评测的装置及方法 |
CN109581981A (zh) * | 2018-12-06 | 2019-04-05 | 山东大学 | 一种基于数据评估与系统协调模块的数据融合系统及其工作方法 |
Non-Patent Citations (2)
Title |
---|
林强: "《机器学习、深度学习与强化学习》", 31 May 2019, 知识产权出版社 * |
魏玮等: "基于数据链的海上编队协同作战多传感器数据融合技术", 《舰船电子对抗》 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107086944A (zh) | 一种异常检测方法和装置 | |
CN109709389B (zh) | 针对电力仪表分布式大容量实时数据采样告警方法和系统 | |
CN106646030A (zh) | 基于多数据源及专家规则库的电网故障诊断方法及装置 | |
CN101255950A (zh) | 输油集输系统计量与管道监控智能报警系统 | |
CN101997709A (zh) | 一种根告警数据分析的方法及其系统 | |
CN107069960A (zh) | 一种二次运维管理系统的在线缺陷诊断方法 | |
CN109768895A (zh) | 一种网络切片故障管理方法及系统 | |
CN108696369A (zh) | 一种告警信息处理设备及方法 | |
US8756352B2 (en) | System for managing buffers of time-stamped events | |
CN101984415A (zh) | 一种设定监控指标阈值的方法和装置 | |
CN106205059B (zh) | 一种滑坡蠕变监测的预警系统及方法 | |
CN104092577A (zh) | 一种网络告警通知系统及其通知方法 | |
US20200363460A1 (en) | Lightning estimation apparatus, system, and method | |
CN114500543A (zh) | 一种基于分布式的弹性边缘采集系统及其应用方法 | |
CN115512518A (zh) | 基于时空关联的多种灾害的预警信息处理方法及装置 | |
CN106709659B (zh) | 一种lng加气站设备管理系统 | |
CN110442567A (zh) | 一种用于机场自动观测系统的数据融合方法 | |
CN111026090A (zh) | 物联网设备故障识别方法、系统、装置及可存储介质 | |
CN104916155A (zh) | 一种实时公交信息服务系统 | |
CN117608904A (zh) | 一种故障定位方法、装置、电子设备和存储介质 | |
Ayele et al. | Spare part transportation management in High North | |
CN116853056A (zh) | 基于数据分析的充电桩智能管理系统 | |
CN106161058B (zh) | 一种告警分级方法及装置 | |
CN114926795B (zh) | 信息关联性的确定方法、装置、设备及介质 | |
CN104363422B (zh) | 基于视频监测的输电线路覆冰预警系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191112 |