CN103781116A - 一种基于分布式存储的无线传感网的数据融合方法 - Google Patents
一种基于分布式存储的无线传感网的数据融合方法 Download PDFInfo
- Publication number
- CN103781116A CN103781116A CN201310534263.6A CN201310534263A CN103781116A CN 103781116 A CN103781116 A CN 103781116A CN 201310534263 A CN201310534263 A CN 201310534263A CN 103781116 A CN103781116 A CN 103781116A
- Authority
- CN
- China
- Prior art keywords
- node
- data
- territory
- packet
- time slot
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Mobile Radio Communication Systems (AREA)
Abstract
本发明公开了一种分布式存储的无线传感网的数据融合方法,在空域和时域上联合应用压缩感知技术,各节点在向其邻居节点广播数据之前,对所获得的数据进行了压缩,节点间收发的数据为矢量形式,最终所有节点各个时隙的数据由二维压缩感知数学模型恢复。本发明采样数据量与总数据量之间的比值显著减少,恢复信号与原始信号间的均方误差显著降低,减少了数据扩散过程中的收发数据量,提高了网络能效。
Description
技术领域:
本发明涉及一种基于分布式存储的无线传感网的数据融合方法,属于无线通信技术领域。
背景技术:
无线传感网中的传感器节点是由电池供电的。在大多数情况下,其工作环境恶劣且节点数量很大,很难更换电池,使网络能量受到较大限制,数据收发则是网络能量的主要开销。而传感器节点的部署和时域采样一般非常密集,致使相邻节点和相邻时隙的采样数据有很大的相关性,造成大量数据冗余,增加通信能耗。数据融合是一种能够有效解决上述问题的多源数据处理技术,其基本思想分为两个层次,其一为在数据采集过程中,利用传感节点自身的计算和存储能力,对数据进行处理;其二为将来自多个不同节点的数据做进一步的处理,以消除冗余,减少节点收发数据量。因此,高效的数据融合技术对提高通信效率和能量效率,延长网络寿命至关重要。
近年来提出的分布式存储的无线传感网得到了广泛关注,相对于传统的有中心的无线传感网,它取消了所有源节点向汇聚节点传输数据的过程,取而代之的是节点间以概率广播的方式扩散数据。其数据融合采用的是网络编码与压缩感知相结合的方案,具体的处理方式有:可压缩的数据存储(CStorage),已发表于Proc.2011IEEE GLOBECOM,该方案结合了随机线性网络编码和压缩感知算法,随机线性网络编码的应用减少了数据扩散过程需要的时间和产生的冗余,压缩感知利用了网络节点间数据的相关性,减少了收发数据量;基于分布式存储的可压缩网络编码(CNCDS),已发表于IEEE Trans.Wire.Commu,vol.PP,no.99,pp.1-13,Sep.2013,该方案是CStorage的改进,通过优化数据包的结构,提高了继而用于压缩感知算法的测量矩阵的行相关性,进一步减少了收发数据量,提高 了网络能效。以上两种方案在数据扩散过程中对其进行编码,并存储编码系数,节点下标及编码结果,进而通过访问部分节点,提取其存储数据,利用压缩感知的数学模型,恢复所有节点的原始感知数据。
上述方案利用了各传感节点采样数据间的相关性,大大减少了收发的数据量,实现了数据的高效传输,但是忽略了每个节点相邻时隙采样数据的相关性,在各个时隙上以相同方式重复数据扩散,导致不必要的能量开销。
发明内容:
本发明的目的在于弥补上述方案存在的不足,提出一种在空时二维上联合应用压缩感知的数据融合技术,称为空时可压缩网络编码(ST-CNC)。该方法去除数据空域和时域上相关性,减少冗余和收发数据量,提高了网络能效。
本发明应用于分布式存储的无线传感网中,现有方案充分利用了空域上各节点间数据的相关性,却忽视了时域上各时隙间数据的相关性,因此,可以提出一种在空时二维上对数据进行压缩的数据融合技术,该方法结合网络编码与二维数据的压缩感知,以减少网络冗余和收发数据量。分布式存储的无线传感网中的空时二维数据融合方法可以表示为以下步骤:
①生成随机矩阵D,作为时域测量矩阵,其维数为MT×NT,NT为所取的时隙总数,MT为时域采样点数;
②设全网有N个节点i,i=1,2,..N,各节点i形成各自的初始化数据包,每个初始化数据包由三个域构成,第一个域为随机系数第二个域为节点下标i;第三个域为随机系数、时域测量矩阵和节点获取矢量的乘积其中,X是维数为N×NT的二维矩阵,表示全网节点在各时隙上获取的数据,X(i,:)是指X的第i行,表示节点i在各时隙的数据;
③随机选择S个节点作为源节点;
④源节点j寻找其所有邻居节点,设节点q为所有邻居节点的其中之一,当邻居节点q第二个域与源节点j第二个域无交集,即满足判断条件r(q).a2∩r(j).a2=φ,则进行数据包广播,即该接收节点q进行如下操作:
(1)将源节点j向接收节点q发送的接收数据包的第一个域和第二个域分别与接收节点q形成的初始数据包的第一个域和第二个域合并,
r(q).a1=[r(q).a1,r(j).a1],r(q).a2=[r(q).a2,r(j).a2];
(2)将接收数据包的第三个域与接收节点q形成的初始数据包的第三个域相加,r(q).a3=r(q).a3+r(j).a3;
(3)对接收节点q的初始数据包的三个域进行更新;
⑤接收节点q继续寻找其邻居节点,并以概率Pf向其邻居节点转发其接收数据包,转发过程同步骤④;
⑥在数据扩散过程完成后,汇聚节点随机访问M个节点,记作(q1,q2,…qM),提取其各自的数据包;
⑦根据各数据包三个域的存储,对全网各节点各时隙数据进行恢复。
步骤⑦所有节点各个时隙数据恢复,具体如下:
i.假设接收节点q的数据包为:
r(q).a2=[q,j,k],
其中,X(:,j)是指X的第j列,表示在时隙j上各节点的数据;
其访问的M个节点确定了Φ的M行,同时由第三个域的数据得到测量值y,y=(r(q1).a3 T,r(q2).a3 T,…,r(qM).a3 T)T;
iii.结合时域测量矩阵D,建立二维压缩感知数学模型
x为X矩阵按行优先顺序向量化结果。
iv.用凸优化理论求解x即可对全网节点各时隙数据进行恢复。
与现有的数据融合技术相比,本发明的创新点在于在时域上引入了压缩感知,传输数据为压缩后的矢量,实现了空时二维数据的联合压缩,提高了恢复的准确性,同时进一步去除数据冗余,减少收发数据量,提高网络的能量效率。
本发明的有益效果在于以下几个方面:
1)采样数据量与总数据量之间的比值显著减少;
2)恢复信号与原始信号间的均方误差显著降低;
3)减少了数据扩散过程中的收发数据量,提高了网络能效。
附图说明:
图1为无线传感网的基本结构示意图;
图2为所提出的的数据融合算法流程图;
图3为各种数据融合方法在采用相同参数时,发送数据量的比较;
图4为各种数据融合方法在采用相同参数时,接收数据量的比较。
具体实旖方式:
本实施例在以本发明技术方案为前提下进行实施,给出了详细的实施方式和具体的操作过程,但本发明的保护范围不限于下述的实施例。
①生成高斯随机矩阵D,作为时域的测量矩阵,其维数为MT×NT,NT=10为所取的时隙总数,MT=5为时域采样点数。
②设全网有N个节点,N=1000,各节点形成自己的初始化数据包,如节点i为r(i),由三个域构成,其一r(i).a1为随机系数是以等概率出现的+1或-1;其二r(i).a2中存储的是节点下标i;其三r(i).a3为随机系数,测量矩阵和节 点获取矢量的乘积其中,X是二维矩阵,其维数为N×NT,表示全网节点在各时隙上获取的数据,X(i,:),即X的第i行,表示节点i在各时隙的数据,X(:,j),即X的第j列,表示在时隙j上各节点的数据。
③随机选择S=M个节点作为源节点,M为汇聚节点随机访问的节点数。
④源节点j寻找其所有邻居节点,设节点q为所有邻居节点的其中之一,当邻居节点q第二个域与源节点j第二个域无交集,即满足判断条件r(q).a2∩r(j).a2=φ,则进行数据包广播,即该接收节点q进行如下操作:
(1)将源节点j向接收节点q发送的接收数据包的第一个域和第二个域分别与接收节点q形成的初始数据包的第一个域和第二个域合并,
r(q).a1=[r(q).a1,r(j).a1],r(q).a2=[r(q).a2,r(j).a2];
(2)将接收数据包的第三个域与接收节点q形成的初始数据包的第三个域相加,r(q).a3=r(q).a3+r(j).a3;
(3)对接收节点q的初始数据包的三个域进行更新;
⑤接收节点q继续寻找其邻居节点,并以概率Pf=0.24向其邻居节点转发其接收数据包,转发过程同步骤④;
⑥在数据扩散过程完成后,汇聚节点随机访问M个节点,记作(q1,q2,…qM),提取其中的数据包,本实施例中访问160到200个节点,即M取值为160到200;
⑦根据各数据包三个域的存储,对全网各节点各时隙数据进行恢复。
3、根据第2步所述的分布式存储的无线传感网的数据融合方法,其特征在于,步骤⑦所有节点各个时隙数据恢复,具体如下:
i.假设接收节点q的数据包为:
r(q).a2=[q,j,k],
其中,X(:,j)是指X的第j列,表示在时隙j上各节点的数据;
其访问的M个节点确定了Φ的M行,同时由第三个域的数据得到测量值y,y=(r(q1).a3 T,r(q2).a3 T,…,r(qM).a3 T)T;
iii.结合时域测量矩阵D,建立二维压缩感知数学模型
x为X矩阵按行优先顺序向量化结果。
iv.用凸优化理论求解x即可对全网节点各时隙数据进行恢复。
与现有的数据融合技术相比,本发明的创新点在于在时域上引入了压缩感知,传输数据为压缩后的矢量,实现了空时二维数据的联合压缩,提高了恢复的准确性,同时进一步去除数据冗余,减少收发数据量,提高网络的能量效率。
结合图对本优选实施例做说明:
图1是分布式无线传感网的结构示意图,曲线内表示网络覆盖区域,网络节点分为传感器节点和汇聚节点,传感器节点用于感知获取数据,汇聚节点用于采集传感器处理的结果,通信系统指互联网或卫星系统,将数据传输给远端用户。处理节点用于数据的恢复。
图2是提出的ST-CNC方案的过程描述。
图3和图4表示在相同的数据源和网络参数下,CNCDS,ICStorage和本发明提出的ST-CNC三种数据融合方案中发送和接收数据量的比较,其中,ICStorage方案,仅对CStorage做少许改进,即令中间节点不仅转发接收的数据包,也转发本身数据包,因为CStorage虽然可以成功恢复网络中节点感知的数据,但是其收发数据量过大,为了使比较更有意义,我们采用ICStorage方案。可以看出,发送数据量远小于接收数据量,因为在概率转发中,接收数据并不总 是被转发,同时,相比于ICStorage,CNCDS方案,本发明所提出的ST-CNC方案大幅减少了发送和接收数据量,其中,比CNCDS减少了50%。
Claims (4)
1.一种分布式存储的无线传感网的数据融合方法,其特征在于,在空域和时域上联合应用压缩感知技术,各节点在向其邻居节点广播数据之前,对所获得的数据进行了压缩,节点间收发的数据为矢量形式,最终所有节点各个时隙的数据由二维压缩感知数学模型恢复。
2.根据权利要求1所述的分布式存储的无线传感网的数据融合方法,其特征在于,该方法具体包括如下步骤:
①生成随机矩阵D,作为时域测量矩阵,其维数为MT×NT,NT为所取的时隙总数,MT为时域采样点数;
②设全网有N个节点i,i=1,2,...N,各节点i形成各自的初始化数据包,每个初始化数据包由三个域构成,第一个域为随机系数第二个域为节点下标i;第三个域为随机系数、时域测量矩阵和节点获取矢量的乘积其中,X是维数为N×NT的二维矩阵,表示全网节点在各时隙上获取的数据,X(i,:)是指X的第i行,表示节点i在各时隙的数据;
③随机选择S个节点作为源节点;
④源节点j寻找其所有邻居节点,设节点q为所有邻居节点的其中之一,当邻居节点q第二个域与源节点j第二个域无交集,即满足判断条件r(q).a2∩r(j).a2=φ,则进行数据包广播,即该接收节点q进行如下操作:
(1)将源节点j向接收节点q发送的接收数据包的第一个域和第二个域分别与接收节点q形成的初始数据包的第一个域和第二个域合并,
r(q).a1=[r(q).a1,r(j).a1],r(q).a2=[r(q).a2,r(j).a2];
(2)将接收数据包的第三个域与接收节点q形成的初始数据包的第三个域相加,r(q).a3=r(q).a3+r(j).a3;
(3)对接收节点q的初始数据包的三个域进行更新;
⑤接收节点q继续寻找其邻居节点,并以概率Pf向其邻居节点转发其接收数据包,转发过程同步骤④;
⑥在数据扩散过程完成后,汇聚节点随机访问M个节点,记作(q1,q2,…qM),提取其各自的数据包;
⑦根据各数据包三个域的存储,对全网各节点各时隙数据进行恢复。
3.根据权利要求2所述的分布式存储的无线传感网的数据融合方法,其特征在于,步骤⑦所有节点各个时隙数据恢复,具体如下:
其中,X(:,j)是指X的第j列,表示在时隙j上各节点的数据;
其访问的M个节点确定了Φ的M行,同时由第三个域的数据得到测量值y,y=(r(q1).a3 T,r(q2).a3 T,…,r(qM).a3 T)T;
iii.结合时域测量矩阵D,建立二维压缩感知数学模型
x为X矩阵按行优先顺序向量化结果。
iv.用凸优化理论求解x即可对全网节点各时隙数据进行恢复。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310534263.6A CN103781116B (zh) | 2013-11-01 | 2013-11-01 | 一种基于分布式存储的无线传感网的数据融合方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310534263.6A CN103781116B (zh) | 2013-11-01 | 2013-11-01 | 一种基于分布式存储的无线传感网的数据融合方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103781116A true CN103781116A (zh) | 2014-05-07 |
CN103781116B CN103781116B (zh) | 2017-02-15 |
Family
ID=50572824
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310534263.6A Active CN103781116B (zh) | 2013-11-01 | 2013-11-01 | 一种基于分布式存储的无线传感网的数据融合方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103781116B (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104967611A (zh) * | 2015-05-04 | 2015-10-07 | 东南大学 | 一种基于概率分布的低能耗大规模网络数据安全融合方法 |
CN105162556A (zh) * | 2015-08-19 | 2015-12-16 | 南京邮电大学 | 基于空时相关性的大规模mimo系统信道反馈方法 |
CN105260268A (zh) * | 2015-10-10 | 2016-01-20 | 浪潮(北京)电子信息产业有限公司 | 一种备份存储方法和装置 |
CN106412811A (zh) * | 2016-11-27 | 2017-02-15 | 福建农林大学 | 一种基于数据均匀性加权的传感器网络数据融合方法 |
CN110113413A (zh) * | 2019-04-30 | 2019-08-09 | 江苏汇智达信息科技有限公司 | 一种物联网中数据处理的方法 |
CN110121184A (zh) * | 2019-04-26 | 2019-08-13 | 电子科技大学 | 一种非负约束的分布式在线自适应扩散组合系数优化方法 |
CN110139233A (zh) * | 2018-12-04 | 2019-08-16 | 桂林电子科技大学 | 基于时空特征融合的无线传感器网络数据修复方法 |
CN112788645A (zh) * | 2021-02-22 | 2021-05-11 | 上海交通大学 | 基于自适应压缩感知的分布式邻居节点分布估计方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100082302A1 (en) * | 2008-09-26 | 2010-04-01 | Qualcomm Incorporated | Method and apparatus for under-sampled acquisition and transmission of photoplethysmograph (ppg) data and reconstruction of full band ppg data at the receiver |
CN103347268A (zh) * | 2013-06-05 | 2013-10-09 | 杭州电子科技大学 | 认知传感器网络中基于能量有效性观测的自适应压缩重构方法 |
-
2013
- 2013-11-01 CN CN201310534263.6A patent/CN103781116B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100082302A1 (en) * | 2008-09-26 | 2010-04-01 | Qualcomm Incorporated | Method and apparatus for under-sampled acquisition and transmission of photoplethysmograph (ppg) data and reconstruction of full band ppg data at the receiver |
CN103347268A (zh) * | 2013-06-05 | 2013-10-09 | 杭州电子科技大学 | 认知传感器网络中基于能量有效性观测的自适应压缩重构方法 |
Non-Patent Citations (2)
Title |
---|
NING SUN等: "Data Aggregation Technique Combined Temporal-spatial Correlation with Compressed Sensing in Wireless Sensor Networks", 《2011 IEEE INTERNATIONAL CONFERENCE ON INTELLIGENT COMPUTING AND INTEGRATED SYSTEMS (ICISS)》 * |
XIANJUN YANG等: "Energy-Efficient Distributed Data Storage for Wireless Sensor Networks Based on Compressed Sensing and Network Coding", 《IEEE TRANSACTIONS ON WIRELESS COMMUNICATIONS》 * |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104967611A (zh) * | 2015-05-04 | 2015-10-07 | 东南大学 | 一种基于概率分布的低能耗大规模网络数据安全融合方法 |
CN105162556B (zh) * | 2015-08-19 | 2018-04-10 | 南京邮电大学 | 基于空时相关性的大规模mimo系统信道反馈方法 |
CN105162556A (zh) * | 2015-08-19 | 2015-12-16 | 南京邮电大学 | 基于空时相关性的大规模mimo系统信道反馈方法 |
CN105260268A (zh) * | 2015-10-10 | 2016-01-20 | 浪潮(北京)电子信息产业有限公司 | 一种备份存储方法和装置 |
CN106412811B (zh) * | 2016-11-27 | 2019-08-13 | 福建农林大学 | 一种基于数据均匀性加权的传感器网络数据融合方法 |
CN106412811A (zh) * | 2016-11-27 | 2017-02-15 | 福建农林大学 | 一种基于数据均匀性加权的传感器网络数据融合方法 |
CN110139233A (zh) * | 2018-12-04 | 2019-08-16 | 桂林电子科技大学 | 基于时空特征融合的无线传感器网络数据修复方法 |
CN110139233B (zh) * | 2018-12-04 | 2021-11-09 | 桂林电子科技大学 | 基于时空特征融合的无线传感器网络数据修复方法 |
CN110121184A (zh) * | 2019-04-26 | 2019-08-13 | 电子科技大学 | 一种非负约束的分布式在线自适应扩散组合系数优化方法 |
CN110121184B (zh) * | 2019-04-26 | 2021-02-02 | 电子科技大学 | 一种非负约束的分布式在线自适应扩散组合系数优化方法 |
CN110113413A (zh) * | 2019-04-30 | 2019-08-09 | 江苏汇智达信息科技有限公司 | 一种物联网中数据处理的方法 |
CN112788645A (zh) * | 2021-02-22 | 2021-05-11 | 上海交通大学 | 基于自适应压缩感知的分布式邻居节点分布估计方法 |
CN112788645B (zh) * | 2021-02-22 | 2022-06-21 | 上海交通大学 | 基于自适应压缩感知的分布式邻居节点分布估计方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103781116B (zh) | 2017-02-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103781116A (zh) | 一种基于分布式存储的无线传感网的数据融合方法 | |
CN103052130B (zh) | 一种基于粗糙集的无线多媒体传感器网络数据融合方法 | |
CN105025498A (zh) | 基于网络编码与压缩感知的传感网络分簇式空时压缩方法 | |
CN103906164A (zh) | 海上搜救无线传感器网络拓扑及拓扑控制方法 | |
CN103095423A (zh) | 基于d2d组间通信的多用户协同传输方法 | |
CN101835233B (zh) | 面向无线传感器网络的随机路由的选择方法 | |
CN105338602B (zh) | 一种基于虚拟mimo的压缩数据收集方法 | |
CN108882195A (zh) | 无线传感器网络基于移动目的节点的协作数据收集方法 | |
CN106656286B (zh) | 在无线供能网络中基于mimo传输技术的能量传输系统 | |
CN103220016B (zh) | 一种脉冲超宽带系统正交稀疏字典的产生系统及方法 | |
CN102413471B (zh) | 一种基于链路稳定性估算的无线栅格传感器网络组网方法 | |
CN106209261A (zh) | 基于概率邻域网格的三维UASNs的移动数据收集方法 | |
CN113301519A (zh) | 一种单跳距离增强的星型海洋物联网监测方法与系统 | |
CN109587651A (zh) | 一种无线传感器网络数据汇聚算法 | |
CN101808383B (zh) | 面向矩阵式无线传感器网络的随机路由的选择方法 | |
CN102076050B (zh) | 一种基于保障无线传感器网络融合信息安全的路由方法 | |
CN106603197B (zh) | 一种基于压缩网络编码的高能效无线传感网数据传输方法 | |
CN106230476A (zh) | 不可信中继系统中基于非联合人工噪声的信息安全传输方法 | |
CN102594515A (zh) | 传感器网络节点数据发送方法及装置、重构方法及装置 | |
CN101986585A (zh) | 多用户下信道与网络联合编码的解调前传协作通信方法 | |
Cui et al. | Information recovery via block compressed sensing in wireless sensor networks | |
CN101895957B (zh) | 面向矩阵式无线传感器网络分配权重的随机路由选择方法 | |
CN104244358A (zh) | 一种基于dcs的无线传感网节能路由策略 | |
CN108093455A (zh) | 一种基于时空相关性的高能效无线传感网数据传输方法 | |
CN102332964A (zh) | 基于网络-信道联合编译码的多接入中继协作通信技术 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |