CN107703480A - 基于机器学习的混合核函数室内定位方法 - Google Patents
基于机器学习的混合核函数室内定位方法 Download PDFInfo
- Publication number
- CN107703480A CN107703480A CN201710750490.0A CN201710750490A CN107703480A CN 107703480 A CN107703480 A CN 107703480A CN 201710750490 A CN201710750490 A CN 201710750490A CN 107703480 A CN107703480 A CN 107703480A
- Authority
- CN
- China
- Prior art keywords
- kernel function
- function
- kernel
- algorithm
- training
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/02—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/02—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
- G01S5/06—Position of source determined by co-ordinating a plurality of position lines defined by path-difference measurements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/15—Correlation function computation including computation of convolution operations
- G06F17/153—Multidimensional correlation or convolution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
Abstract
本发明公开了一种基于机器学习的混合核函数室内定位方法。首先,建立指纹地图库并以该指纹库为训练数据集;然后,利用加权求和的方法构造混合核函数,并机器学习算法中的支持向量回归算法和v折交叉验证方法训练得出混合核函数的最佳权重系数和最佳核参数;最后,在权重系数和核参数最佳的前提下,对训练数据集进行离线训练学习,从而分别得出x坐标和y坐标的拟合函数,再利用该拟合函数对目标接收到的RSSI值进行在线学习,从而得出目标的位置坐标。与传统的室内定位算法:BP神经网络算法、K近邻算法、线性核函数算法、多项式核函数算法和高斯核函数算法相比,本发明的算法定位精度更高。
Description
技术领域
本发明涉及无线通信技术、传感器技术,尤其涉及一种基于机器学习的混合核函数室内定位方法属于通信定位技术领域。
背景技术
近年来随着无线传感网络技术的发展,位置服务广泛用于个人和商业应用。传统的定位算法包括基于接收信号强度指示(RSSI)算法,基于到达时间(TOA)、基于到达时间差(TDOA)算法和基于到达角度(AOA)算法[1][2][3]。其中,基于RSSI算法因其低功耗和低成本而广受推崇。
基于RSSI算法又分为两类:分别是测距定位算法[4],指纹定位算法[5][6]。测距定位算法将RSSI通过距离损耗模型转换为距离以后,通过求解数个圆交点的方式,利用最小二乘法进行的定位处理。该算法只考虑短距离衰减,因而只有在房间内进行定位才能取得良好的定位精度。指纹定位算法需先建立指纹地图,待移动终端收到几个基站的信号以后,使用信号的场强组成指纹地图,直接查询指纹地图数据库,从而得到目标的地理位置信息,实现定位。该算法定位精度和稳定性高,但离线阶段工作量大。
机器学习[7][8][9]是近20多年兴起的一门多领域交叉学科,机器学习算法是一类从数据中自动分析获得规律,并利用规律对未知数据进行预测的算法。上世纪90年代中期,统计学习开始成为机器学习的主流技术,支持向量机[10][11][12](Support vectormachine,SVM)算法凭借其优越性能得到了广泛应用。
SVM方法是通过一个非线性映射p,把样本空间映射到一个高维乃至无穷维的特征空间中(Hilbert空间),使得在原来的样本空间中非线性可分的问题转化为在特征空间中的线性可分的问题。当支持向量机的求解只用到内积运算,且在低维输入空间又存在某个函数K(x,x′),它恰好等于在高维空间中这个内积,就可以大大简化计算。这样的函数K(x,x′)就称为核函数[13][14][15]。
当前的支持向量机算法在核函数的选用上以单一核函数为主,但是单一核函数的泛化能力和鲁棒性具有局限性,并不对所有具体问题均适用,且当样本特征含有异构信息、样本规模巨大时,单一核函数的劣势就愈加显现出来。多核学习[16][17][18]则有效弥补了这一点,并且增强了决策函数的可解释性,从而获得比单核模型更优的性能,提高分类正确率和预测精度。
传统的几种定位算法详见:
[1]S.Golden and S.Bateman,“Sensor measurements for Wi-Fi locationwith emphasis on time-of-arrival ranging,”IEEE Trans.Mobile Comput.,vol.6,no.10,pp.1185–1198,2007.
[2]Y.Shen and M.Win,“On the accuracy of localization systems usingwideband antenna arrays,”IEEE Trans.Commun.,vol.58,no.1,pp.270–280,2010.
[3]Z.li Wu,C.hung Li,J.-Y.Ng,and K.R.Leung,“Location estimation viasupport vector regression,”IEEE Trans.Mobile Comput.,vol.6,no.3,pp.311–321,2007.
基于RSSI的两种定位算法详见:
[4]K.Yu,I.Sharp,and Y.J.Guo,Ground-Based Wireless Positioning,Wiley-IEEE Press,2009.
[5]徐小卜.一种基于位置指纹的WSN室内安全定位算法[J].电脑知识与技术,2016,12(9):76-77.
[6]D.Milioris,L.Kriara,A.Papakonstantinou,G.Tzagkarakis,P.Tsakalides,and M.Papadopouli,“Empirical evaluation of signal-strength fingerprintpositioning in wireless LANs,”in Proc.13th ACM International Conference onModeling,Analysis and Simulation of Wireless and Mobile Systems,Bodrum,Turkey,Oct.2010.
机器学习算法详见:
[7]李运.机器学习算法在数据挖掘中的应用[D].北京:北京邮电大学,2014.
[8]王鲁达.基于SVM树型多分类的蜂窝通信系统中节点定位算法研究[D].长沙:湖南大学,2009.
[9]王鲁达,髙守平,方芳,李煜民.基于机器学习的蜂窝网络节点定位算法研究[J].计算机工程与科学,2010,32(8):56-59.
支持向量机算法详见:
[10]范昕伟.支持向量机算法的研究及其应用[D].杭州:浙江大学,2003.
[11]平源.基于支持向量机的聚类及文本分类研究[D].北京:北京邮电大学,2012.
[12]李福坚,吴黎明.一种改进的支持向量机的室内指纹定位技术[J].自动化与信息工程,2014,35(4):29-33.
核函数详见:
[13]S.Mahfouz,F.Mourad-Chehade,P.Honeine,H.Snoussi,J.Farah.Kernel-Based Machine Learning Using Radio-Fingerprints for Localization in WSNs.IEEETransactions on Aerospace and Electronics Systems,2015,51(2):1324-1336.
[14]Scholkopf B,Mika S,Burges C J C,Knirsch P,Muller K R,RatschG.Input space versus feature space in kernel-based methods.IEEE Transactionson Neural Network,1999,10(5):1000-1017.
[15]Rakotomamonjy A,Bach F R,Canu S,Grandvalet Y.More efficiency inmultiple kernel learning.In:Proceedings of the 24th International Conferenceon Machine Learning.Corvalis,Oregon:ACM,2007.775-782.
多核学习算法详见:
[16]周绍磊,廖剑,史贤俊.RBF-SVM的核参数选择方法及其在故障诊断中的应用[J].电子测量与仪器学报,2014,28(3):240-246.
[17]汪洪桥,孙富春,蔡艳宁,陈宁,丁林阁.多核学习方法[J].自动化学报,2010,36(8):1037-1050.
[18]王炜,郭小明,王淑艳,刘丽琴.关于核函数的选取方法[J].辽宁师范大学学报(自然科学版),2008,31(1):1-4.
发明内容
针对以上问题本发明将核函数机器学习算法和无线定位技术相结合,提出了一种基于机器学习的混合核函数室内定位方法。该方法进一步提高了定位精度。首先,建立指纹数据库,构造混合核函数;然后利用支持向量回归和v折交叉验证方法得出最佳核参数和最佳权重系数;最后,将指纹数据库作为训练数据集,并进行离线训练学习得出拟合函数,再通过对目标接收到的RSSI值进行在线学习,得出目标的位置。
为了解决以上问题,本发明采用了如下技术方案:一种基于机器学习的混合核函数室内定位方法,其特征在于,包括如下步骤:
步骤1.利用参考节点的位置坐标(x,y)和接收到的信号强度RSSI建立指纹地图库,并作为训练数据集;
步骤2.利用加权求和的方法构造混合核函数;
步骤3.利用机器学习算法中的支持向量回归算法和v折交叉验证方法训练得出混合核函数的最佳权重系数和最佳核参数;
步骤4.在权重系数和核参数最佳的前提下,对训练数据集进行离线训练学习,从而分别得出x坐标和y坐标的拟合函数;
步骤5.利用得到的拟合函数,对目标接收到的RSSI值进行在线学习,从而得出目标的位置坐标。
所述的步骤1具体包括以下内容:
已知N个参考节点,位置坐标为(xi,yi),i∈(1,2,…,N),一个目标节点,其位置坐标设为(x,y);在离线阶段,目标分别移动到N个参考节点的位置pn=(xn′,yn′),n∈(1,2,…,N),并收集每个位置接收到的RSSI值,形成指纹数据库;令位置pn接收到的RSSI测量值为Γn=(r1,n,r2,n,…rN,n)T,其中ri,n代表从第i个参考节点接收到的RSSI值;因此,x坐标的训练集写成:(Γn,xn′),n∈(1,2,…,N),同理,y坐标的训练集写成:(Γn,yn′),n∈(1,2,…,N)。
所述的步骤2具体包括以下内容:
核函数分为局部核函数和全局核函数两类;高斯核函数是局部核函数,多项式核函数是全局核函数;
两种核函数通过线性加权构成一种全新的核函数,这种新的核函数定义为混合核函数KM:
KM=wKG+(1-w)KL (1)
其中,KG为全局核函数,KL为局部核函数,w为全局核函数在整个核函数中所占的比例,w越大,全局核函数在混合核函数中起的作用越大,反之,越小。
所述的步骤3具体包括以下内容:
首先,选用高斯核函数和多项式核函数来构造混合核函数,权重系数范围为wL<w<wH,搜索步长为Δw=(wH-wL)/n,其中n为预先设定的常数,因此,交叉验证的权重系数可转化为:
wi=wL+iΔw(1≤i≤n) (2)
当wi取定值时,优化过程如下:
(1)将训练集随机分成v份,v≥2;
(2)设第1份为验证集,其余(v-1)份为训练集,用混合核函数训练定义的训练集可得x坐标的拟合函数;再利用验证集可计算得出估计性能的均方误差;重复v次可得平均均方误差及最小均方误差对应的核参数;
(3)将步骤(1)和步骤(2)重复n次可得出所有权重系数对应的平均均方误差和核参数,最小平均均方误差对应的权重系数即为最佳权重系数,此时最小均方误差对应的核参数即为最佳核参数。
所述的步骤4具体包括以下内容:
离线阶段的训练函数可定义为:
fx(Γn)=<wx,ψx(Γn)>+bx,wx∈Rn,bx∈R (3)
其中,wx是权重向量;ψx()是将输入的低维数数据映射到高维特征空间的非线性映射函数,ψx:Rn→H;<,>是内积运算;bx是偏置常量。
根据SVR相关知识,将(3)式的系数求解问题转化为如下优化问题:
其中,wx是权重向量;bx是偏置常量;C是惩罚系数;ε是训练结果和实际坐标之间的偏差;C是惩罚系数;ξi和是松弛变量;
(4)式的优化问题又进一步转化为求解带有Hessian矩阵的二次拉格朗日最大值的问题,其解为:
其中,N是离线训练数据的个数;αx和αx *是拉格朗日乘子向量;Γn和Γj分别为位置pn和pj接收到的RSSI测量值;ψx()是将输入的低维数数据映射到高维特征空间的非线性映射函数,ψx:Rn→H;<,>是内积运算;bx *是最佳阈值;
(5)式中的内积运算是H空间中的内积运算,计算起来相当繁琐,而核函数的引入则巧妙地避开了这一点。核函数定义式为:
K(Γn,Γj)=<ψx(Γn),ψx(Γj)> (6)
其中,Γn和Γj分别为位置pn和pj接收到的RSSI测量值;ψx()是将输入的低维数数据映射到高维特征空间的非线性映射函数,ψx:Rn→H;<,>是内积运算;
因此,x坐标的拟合函数最终转化为:
其中,N是离线训练数据的个数;αx和αx *是拉格朗日乘子向量;Γn和Γj分别为位置pn和pj接收到的RSSI测量值;K(,)是核函数;bx *是最佳阈值;
同理,y坐标的拟合函数最终可转化为:
其中,N是离线训练数据的个数;αy和αy *是拉格朗日乘子向量;Γn和Γj分别为位置pn和pj接收到的RSSI测量值;K(,)是核函数;by *是最佳阈值。
有益效果:
1.本发明将机器学习算法和核函数相结合,提出基于机器学习的混合核函数室内定位算法,与传统室内定位算法:BP神经网络算法、K近邻算法、线性核函数算法、多项式核函数算法和高斯核函数算法相比,定位精度更高。
2.本发明采用基于遍历的v折交叉验证方法能够训练得出混合核函数的最佳权重系数,算法简单易行,可靠性高。
附图说明
图1是本发明的详细流程图;
图2是参数优化的交叉验证流程图;
图3是六种训练数据集下的定位误差的CDF;
图4是六种算法下的定位误差的CDF;
图5是四种算法下的RMSE对比;
图6是六种算法在六种训练数据集下的离线训练时间对比;
图7是六种算法的在线运行时间对比。
具体实施方式
下面结合附图,对本发明做进一步详细的描述。
如图1、2所示,本发明提供了一种基于机器学习的混合核函数室内定位方法,包括如下步骤:
步骤1.利用参考节点的位置坐标(x,y)和接收到的信号强度RSSI建立指纹地图库,并作为训练数据集。
步骤2.利用加权求和的方法构造混合核函数。
步骤3.利用机器学习算法中的支持向量回归算法和v折交叉验证方法训练得出混合核函数的最佳权重系数和最佳核参数。
步骤4.在权重系数和核参数最佳的前提下,对训练数据集进行离线训练学习,从而分别得出x坐标和y坐标的拟合函数。
步骤5.利用得到的拟合函数,对目标接收到的RSSI值进行在线学习,从而得出目标的位置坐标。
发明详述:
1、算法描述
Ⅰ.利用参考节点的位置坐标(x,y)和接收到的信号强度RSSI建立指纹地图库,并作为训练数据集。具体步骤包括如下内容:
已知N个参考节点,位置坐标为(xi,yi),i∈(1,2,…,N),一个目标节点,其位置坐标设为(x,y)。在离线阶段,目标分别移动到N个参考节点的位置pn=(xn′,yn′),n∈(1,2,…,N),并收集每个位置接收到的RSSI值,形成指纹数据库。令位置pn接收到的RSSI测量值为Γn=(r1,n,r2,n,…rN,n)T,其中ri,n代表从第i个参考节点接收到的RSSI值。因此,x坐标的训练集写成:(Γn,xn′),n∈(1,2,…,N),同理,y坐标的训练集写成:(Γn,yn′),n∈(1,2,…,N)。
Ⅱ.利用加权求和的方法构造混合核函数。具体步骤包括如下内容:
核函数分为局部核函数和全局核函数两类。局部核函数只对样本距离相当的小领域内的样本产生影响,插值能力较强,即比较善于提取样本的局部性质。高斯核函数是一个典型的局部核函数。全局核函数则是对样本距离较大的领域内的样本有影响,其插值能力较弱,不善提取样本的局部性质。多项式核函数是典型的全局核函数。
两种核函数通过线性加权构成一种全新的核函数,从而兼顾二者的优势。这种新的核函数定义为混合核函数KM:
KM=wKG+(1-w)KL (1)
其中,KG为全局核函数,KL为局部核函数,w为全局核函数在整个核函数中所占的比例,w越大,全局核函数在混合核函数中起的作用越大,反之,越小。
Ⅲ.利用机器学习算法中的支持向量回归算法和v折交叉验证方法训练得出混合核函数的最佳权重系数和最佳核参数。具体步骤包括如下内容:
参数优化的交叉验证流程图如图2所示。
首先,选用高斯核函数和多项式核函数来构造混合核函数,权重系数范围为wL<w<wH,搜索步长为Δw=(wH-wL)/n(n为预先设定的常数),因此,交叉验证的权重系数可转化为:
wi=wL+iΔw(1≤i≤n) (2)
当wi取某定值时,优化过程如下:
(1)将训练集随机分成v份,v≥2。
(2)设第1份为验证集,其余(v-1)份为训练集,用混合核函数训练定义的训练集可得x坐标的拟合函数。再利用验证集可计算得出估计性能的均方误差(MSE)。重复v次可得平均均方误差及最小均方误差对应的核参数。
(3)将步骤(1)和步骤(2)重复n次可得出所有权重系数对应的平均均方误差和核参数,最小平均均方误差对应的权重系数即为最佳权重系数,此时最小均方误差对应的核参数即为最佳核参数。
Ⅳ.在权重系数和核参数最佳的前提下,对训练数据集进行离线训练学习,从而分别得出x坐标和y坐标的拟合函数。具体步骤包括如下内容:
离线阶段的训练函数可定义为:
fx(Γn)=<wx,ψx(Γn)>+bx,wx∈Rn,bx∈R (3)
其中,wx是权重向量;ψx()是将输入的低维数数据映射到高维特征空间的非线性映射函数,ψx:Rn→H;<,>是内积运算;bx是偏置常量。
根据SVR相关知识,将(3)式的系数求解问题转化为如下优化问题:
其中,wx是权重向量;bx是偏置常量;C是惩罚系数;ε是训练结果和实际坐标之间的偏差;C是惩罚系数;ξi和是松弛变量。
(4)式的优化问题又进一步转化为求解带有Hessian矩阵的二次拉格朗日最大值的问题,其解为:
其中,N是离线训练数据的个数;αx和αx *是拉格朗日乘子向量;Γn和Γj分别为位置pn和pj接收到的RSSI测量值;ψx()是将输入的低维数数据映射到高维特征空间的非线性映射函数,ψx:Rn→H;<,>是内积运算;bx *是最佳阈值。
(5)式中的内积运算是H空间中的内积运算,计算起来相当繁琐,而核函数的引入则巧妙地避开了这一点。核函数定义式为:
K(Γn,Γj)=<ψx(Γn),ψx(Γj)> (6)
其中,Γn和Γj分别为位置pn和pj接收到的RSSI测量值;ψx()是将输入的低维数数据映射到高维特征空间的非线性映射函数,ψx:Rn→H;<,>是内积运算。
因此,x坐标的拟合函数最终转化为:
其中,N是离线训练数据的个数;αx和αx *是拉格朗日乘子向量;Γn和Γj分别为位置pn和pj接收到的RSSI测量值;K(,)是核函数;bx *是最佳阈值。
同理,y坐标的拟合函数最终可转化为:
其中,N是离线训练数据的个数;αy和αy *是拉格朗日乘子向量;Γn和Γj分别为位置pn和pj接收到的RSSI测量值;K(,)是核函数;by *是最佳阈值。
Ⅴ.利用得到的拟合函数,对目标接收到的RSSI值进行在线学习,从而得出目标的位置坐标。
2、仿真结果说明
实验所用机器人平台基于光探测测距,可同时定位和绘图。利用该平台完成指纹数据库的采集。
指纹数据库建立完成后,利用LIBSVM对训练数据进行离线学习,并对待定位目标进行在线预测。交叉验证测试的参数设定为:v=5,wL=0,wH=1,Δw=0.01。并将该算法的定位性能和计算复杂度与BP神经网络算法、K近邻算法、线性核函数算法、多项式核函数算法、高斯核函数算法进行比较。
实验结果如图3、图4、图5、图6、图7所示。
图3是训练数据集大小分别为319、605、837、1078、1311、1550时的定位误差的CDF。由图可知,在其他条件相同的情况下,训练数据集越大,定位误差越小。
图4是BP神经网络算法、K近邻算法、线性核函数算法、多项式核函数算法、高斯核函数算法和本发明算法的定位误差的CDF。由图可知,在其他条件相同的情况下,BP神经网络算法和高斯核函数算法定位误差较大,其余四种定位误差较小。在四种定位误差较小的算法中,本发明算法的定位误差最小。
图5是K近邻算法、线性核函数算法、多项式核函数算法和本发明算法的RMSE对比。由图可知,随着训练数据集的增大,各算法的RMSE均在减小,而当训练数据集大小大于605时本发明算法的RMSE在四种算法中始终保持最小。
图6是BP神经网络算法、K近邻算法、线性核函数算法、多项式核函数算法、高斯核函数算法和本发明算法在六种训练数据集下的离线训练时间对比。随着训练数据集的增大,各算法的离线训练时间均有所增加。众所周知,离线阶段训练出的拟合函数越好,在线阶段的定位精度就越高,而要训练出较好的拟合函数,势必要耗费较长的离线时间,因此,当训练数据集大小相同时,本发明的离线训练时间较长,但离线训练是离线阶段的工作,不会影响在线定位的时间。
图7是BP神经网络算法、K近邻算法、线性核函数算法、多项式核函数算法、高斯核函数算法和本发明算法在在线阶段的运行时间对比。由图可知,K近邻算法的在线运行时间相对较长,其余五种算法的在线运行时间相差无几,且都较短,包括本发明算法。
Claims (5)
1.一种基于机器学习的混合核函数室内定位方法,其特征在于,包括如下步骤:
步骤1.利用参考节点的位置坐标(x,y)和接收到的信号强度RSSI建立指纹地图库,并作为训练数据集;
步骤2.利用加权求和的方法构造混合核函数;
步骤3.利用机器学习算法中的支持向量回归算法和v折交叉验证方法训练得出混合核函数的最佳权重系数和最佳核参数;
步骤4.在权重系数和核参数最佳的前提下,对训练数据集进行离线训练学习,从而分别得出x坐标和y坐标的拟合函数;
步骤5.利用得到的拟合函数,对目标接收到的RSSI值进行在线学习,从而得出目标的位置坐标。
2.根据权利要求1所述的基于机器学习的混合核函数室内定位方法,其特征在于,所述的步骤1具体包括以下内容:
已知N个参考节点,位置坐标为(xi,yi),i∈(1,2,…,N),一个目标节点,其位置坐标设为(x,y);在离线阶段,目标分别移动到N个参考节点的位置pn=(xn′,yn′),n∈(1,2,…,N),并收集每个位置接收到的RSSI值,形成指纹数据库;令位置pn接收到的RSSI测量值为Γn=(r1,n,r2,n,…rN,n)T,其中ri,n代表从第i个参考节点接收到的RSSI值;因此,x坐标的训练集写成:(Γn,xn′),n∈(1,2,…,N),同理,y坐标的训练集写成:(Γn,yn′),n∈(1,2,…,N)。
3.根据权利要求1所述的基于机器学习的混合核函数室内定位方法,其特征在于,所述的步骤2具体包括以下内容:
核函数分为局部核函数和全局核函数两类;高斯核函数是局部核函数,多项式核函数是全局核函数;
两种核函数通过线性加权构成一种全新的核函数,这种新的核函数定义为混合核函数KM:
KM=wKG+(1-w)KL (1)
其中,KG为全局核函数,KL为局部核函数,w为全局核函数在整个核函数中所占的比例,w越大,全局核函数在混合核函数中起的作用越大,反之,越小。
4.根据权利要求1所述的基于机器学习的混合核函数室内定位方法,其特征在于,所述的步骤3具体包括以下内容:
首先,选用高斯核函数和多项式核函数来构造混合核函数,权重系数范围为wL<w<wH,搜索步长为Δw=(wH-wL)/n,其中n为预先设定的常数,因此,交叉验证的权重系数可转化为:
wi=wL+iΔw(1≤i≤n) (2)
当wi取定值时,优化过程如下:
(1)将训练集随机分成v份,v≥2;
(2)设第1份为验证集,其余(v-1)份为训练集,用混合核函数训练定义的训练集可得x坐标的拟合函数;再利用验证集可计算得出估计性能的均方误差;重复v次可得平均均方误差及最小均方误差对应的核参数;
(3)将步骤(1)和步骤(2)重复n次可得出所有权重系数对应的平均均方误差和核参数,最小平均均方误差对应的权重系数即为最佳权重系数,此时最小均方误差对应的核参数即为最佳核参数。
5.根据权利要求1所述的基于机器学习的混合核函数室内定位方法,其特征在于,所述的步骤4具体包括以下内容:
离线阶段的训练函数可定义为:
fx(Γn)=<wx,ψx(Γn)>+bx,wx∈Rn,bx∈R (3)
其中,wx是权重向量;ψx()是将输入的低维数数据映射到高维特征空间的非线性映射函数,ψx:Rn→H;<,>是内积运算;bx是偏置常量。
根据SVR相关知识,将(3)式的系数求解问题转化为如下优化问题:
<mrow>
<munder>
<mrow>
<mi>m</mi>
<mi>i</mi>
<mi>n</mi>
</mrow>
<mrow>
<msub>
<mi>w</mi>
<mi>x</mi>
</msub>
<mo>,</mo>
<msub>
<mi>b</mi>
<mi>x</mi>
</msub>
</mrow>
</munder>
<mfrac>
<mn>1</mn>
<mn>2</mn>
</mfrac>
<mo>|</mo>
<mo>|</mo>
<msub>
<mi>w</mi>
<mi>x</mi>
</msub>
<mo>|</mo>
<msup>
<mo>|</mo>
<mn>2</mn>
</msup>
<mo>+</mo>
<mi>C</mi>
<mrow>
<mo>(</mo>
<mi>&epsiv;</mi>
<mo>+</mo>
<munderover>
<mo>&Sigma;</mo>
<mrow>
<mi>i</mi>
<mo>=</mo>
<mn>1</mn>
</mrow>
<mi>N</mi>
</munderover>
<mo>(</mo>
<mrow>
<msub>
<mi>&xi;</mi>
<mi>i</mi>
</msub>
<mo>+</mo>
<msup>
<msub>
<mi>&xi;</mi>
<mi>i</mi>
</msub>
<mo>*</mo>
</msup>
</mrow>
<mo>)</mo>
<mo>)</mo>
</mrow>
</mrow>
<mrow>
<mi>s</mi>
<mo>.</mo>
<mi>t</mi>
<mo>.</mo>
<mfenced open = "{" close = "">
<mtable>
<mtr>
<mtd>
<mrow>
<msup>
<msub>
<mi>x</mi>
<mi>i</mi>
</msub>
<mo>&prime;</mo>
</msup>
<mo>-</mo>
<mo><</mo>
<msub>
<mi>w</mi>
<mi>x</mi>
</msub>
<mo>,</mo>
<msub>
<mi>&psi;</mi>
<mi>x</mi>
</msub>
<mrow>
<mo>(</mo>
<msub>
<mi>&Gamma;</mi>
<mi>i</mi>
</msub>
<mo>)</mo>
</mrow>
<mo>></mo>
<mo>-</mo>
<msub>
<mi>b</mi>
<mi>x</mi>
</msub>
<mo>&le;</mo>
<mi>&epsiv;</mi>
<mo>+</mo>
<msub>
<mi>&xi;</mi>
<mi>i</mi>
</msub>
</mrow>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<mo><</mo>
<msub>
<mi>w</mi>
<mi>x</mi>
</msub>
<mo>,</mo>
<msub>
<mi>&psi;</mi>
<mi>x</mi>
</msub>
<mrow>
<mo>(</mo>
<msub>
<mi>&Gamma;</mi>
<mi>i</mi>
</msub>
<mo>)</mo>
</mrow>
<mo>></mo>
<mo>+</mo>
<msub>
<mi>b</mi>
<mi>x</mi>
</msub>
<mo>-</mo>
<msup>
<msub>
<mi>x</mi>
<mi>i</mi>
</msub>
<mo>&prime;</mo>
</msup>
<mo>&le;</mo>
<mi>&epsiv;</mi>
<mo>+</mo>
<msubsup>
<mi>&xi;</mi>
<mi>i</mi>
<mo>*</mo>
</msubsup>
</mrow>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<msub>
<mi>&xi;</mi>
<mi>i</mi>
</msub>
<mo>&GreaterEqual;</mo>
<mn>0</mn>
<mo>,</mo>
<msubsup>
<mi>&xi;</mi>
<mi>i</mi>
<mo>*</mo>
</msubsup>
<mo>&GreaterEqual;</mo>
<mn>0</mn>
</mrow>
</mtd>
</mtr>
</mtable>
</mfenced>
<mo>-</mo>
<mo>-</mo>
<mo>-</mo>
<mrow>
<mo>(</mo>
<mn>4</mn>
<mo>)</mo>
</mrow>
</mrow>
其中,wx是权重向量;bx是偏置常量;C是惩罚系数;ε是训练结果和实际坐标之间的偏差;C是惩罚系数;ξi和是松弛变量;
(4)式的优化问题又进一步转化为求解带有Hessian矩阵的二次拉格朗日最大值的问题,其解为:
<mrow>
<msub>
<mi>f</mi>
<mi>x</mi>
</msub>
<mrow>
<mo>(</mo>
<msub>
<mi>&Gamma;</mi>
<mi>n</mi>
</msub>
<mo>)</mo>
</mrow>
<mo>=</mo>
<msubsup>
<mo>&Sigma;</mo>
<mrow>
<mi>j</mi>
<mo>=</mo>
<mn>1</mn>
</mrow>
<mi>N</mi>
</msubsup>
<mrow>
<mo>(</mo>
<msub>
<mi>&alpha;</mi>
<mi>x</mi>
</msub>
<mo>-</mo>
<msup>
<msub>
<mi>&alpha;</mi>
<mi>x</mi>
</msub>
<mo>*</mo>
</msup>
<mo>)</mo>
</mrow>
<mo><</mo>
<msub>
<mi>&psi;</mi>
<mi>x</mi>
</msub>
<mrow>
<mo>(</mo>
<msub>
<mi>&Gamma;</mi>
<mi>j</mi>
</msub>
<mo>)</mo>
</mrow>
<mo>,</mo>
<msub>
<mi>&psi;</mi>
<mi>x</mi>
</msub>
<mrow>
<mo>(</mo>
<msub>
<mi>&Gamma;</mi>
<mi>n</mi>
</msub>
<mo>)</mo>
</mrow>
<mo>></mo>
<mo>+</mo>
<msup>
<msub>
<mi>b</mi>
<mi>x</mi>
</msub>
<mo>*</mo>
</msup>
<mo>-</mo>
<mo>-</mo>
<mo>-</mo>
<mrow>
<mo>(</mo>
<mn>5</mn>
<mo>)</mo>
</mrow>
</mrow>
其中,N是离线训练数据的个数;αx和αx *是拉格朗日乘子向量;Γn和Γj分别为位置pn和pj接收到的RSSI测量值;ψx()是将输入的低维数数据映射到高维特征空间的非线性映射函数,ψx:Rn→H;<,>是内积运算;bx *是最佳阈值;
(5)式中的内积运算是H空间中的内积运算,计算起来相当繁琐,而核函数的引入则巧妙地避开了这一点。核函数定义式为:
K(Γn,Γj)=<ψx(Γn),ψx(Γj)> (6)
其中,Γn和Γj分别为位置pn和pj接收到的RSSI测量值;ψx()是将输入的低维数数据映射到高维特征空间的非线性映射函数,ψx:Rn→H;<,>是内积运算;
因此,x坐标的拟合函数最终转化为:
<mrow>
<msub>
<mi>f</mi>
<mi>x</mi>
</msub>
<mrow>
<mo>(</mo>
<msub>
<mi>&Gamma;</mi>
<mi>n</mi>
</msub>
<mo>)</mo>
</mrow>
<mo>=</mo>
<msubsup>
<mo>&Sigma;</mo>
<mrow>
<mi>j</mi>
<mo>=</mo>
<mn>1</mn>
</mrow>
<mi>N</mi>
</msubsup>
<mrow>
<mo>(</mo>
<msub>
<mi>&alpha;</mi>
<mi>x</mi>
</msub>
<mo>-</mo>
<msup>
<msub>
<mi>&alpha;</mi>
<mi>x</mi>
</msub>
<mo>*</mo>
</msup>
<mo>)</mo>
</mrow>
<mi>K</mi>
<mrow>
<mo>(</mo>
<msub>
<mi>&Gamma;</mi>
<mi>n</mi>
</msub>
<mo>,</mo>
<msub>
<mi>&Gamma;</mi>
<mi>j</mi>
</msub>
<mo>)</mo>
</mrow>
<mo>+</mo>
<msup>
<msub>
<mi>b</mi>
<mi>x</mi>
</msub>
<mo>*</mo>
</msup>
<mo>-</mo>
<mo>-</mo>
<mo>-</mo>
<mrow>
<mo>(</mo>
<mn>7</mn>
<mo>)</mo>
</mrow>
</mrow>
其中,N是离线训练数据的个数;αx和αx *是拉格朗日乘子向量;Γn和Γj分别为位置pn和pj接收到的RSSI测量值;K(,)是核函数;bx *是最佳阈值;
同理,y坐标的拟合函数最终可转化为:
<mrow>
<msub>
<mi>f</mi>
<mi>y</mi>
</msub>
<mrow>
<mo>(</mo>
<msub>
<mi>&Gamma;</mi>
<mi>n</mi>
</msub>
<mo>)</mo>
</mrow>
<mo>=</mo>
<msubsup>
<mo>&Sigma;</mo>
<mrow>
<mi>j</mi>
<mo>=</mo>
<mn>1</mn>
</mrow>
<mi>N</mi>
</msubsup>
<mrow>
<mo>(</mo>
<msub>
<mi>&alpha;</mi>
<mi>y</mi>
</msub>
<mo>-</mo>
<msup>
<msub>
<mi>&alpha;</mi>
<mi>y</mi>
</msub>
<mo>*</mo>
</msup>
<mo>)</mo>
</mrow>
<mi>K</mi>
<mrow>
<mo>(</mo>
<msub>
<mi>&Gamma;</mi>
<mi>n</mi>
</msub>
<mo>,</mo>
<msub>
<mi>&Gamma;</mi>
<mi>j</mi>
</msub>
<mo>)</mo>
</mrow>
<mo>+</mo>
<msup>
<msub>
<mi>b</mi>
<mi>y</mi>
</msub>
<mo>*</mo>
</msup>
<mo>-</mo>
<mo>-</mo>
<mo>-</mo>
<mrow>
<mo>(</mo>
<mn>8</mn>
<mo>)</mo>
</mrow>
</mrow>
其中,N是离线训练数据的个数;αy和αy *是拉格朗日乘子向量;Γn和Γj分别为位置pn和pj接收到的RSSI测量值;K(,)是核函数;by *是最佳阈值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710750490.0A CN107703480B (zh) | 2017-08-28 | 2017-08-28 | 基于机器学习的混合核函数室内定位方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710750490.0A CN107703480B (zh) | 2017-08-28 | 2017-08-28 | 基于机器学习的混合核函数室内定位方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107703480A true CN107703480A (zh) | 2018-02-16 |
CN107703480B CN107703480B (zh) | 2021-03-23 |
Family
ID=61171203
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710750490.0A Active CN107703480B (zh) | 2017-08-28 | 2017-08-28 | 基于机器学习的混合核函数室内定位方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107703480B (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108828519A (zh) * | 2018-05-24 | 2018-11-16 | 桂林电子科技大学 | 一种基于机器学习的高精度室内可见光定位方法 |
CN109019717A (zh) * | 2018-08-28 | 2018-12-18 | 大唐(北京)水务工程技术有限公司 | 一种火电厂脱硫废水智能处理方法及系统 |
CN109100682A (zh) * | 2018-08-01 | 2018-12-28 | 南京邮电大学 | 基于多核极限学习机和接收信号强度的定位方法 |
CN110691319A (zh) * | 2019-09-03 | 2020-01-14 | 东南大学 | 一种使用领域自适应实现异构设备高精度室内定位的方法 |
CN111783837A (zh) * | 2020-06-05 | 2020-10-16 | 西安电子科技大学 | 一种基于多核学习的特征融合方法 |
CN112394320A (zh) * | 2020-04-26 | 2021-02-23 | 南京邮电大学 | 基于支持向量机的室内高精度质心定位方法 |
CN112566055A (zh) * | 2020-11-27 | 2021-03-26 | 巢湖学院 | 一种基于射频指纹匹配的室内定位算法 |
CN114415246A (zh) * | 2022-03-29 | 2022-04-29 | 科大天工智能装备技术(天津)有限公司 | 一种基于机器学习的地下金属物体的定位方法及系统 |
CN114444727A (zh) * | 2021-12-31 | 2022-05-06 | 北京瑞莱智慧科技有限公司 | 核函数近似模型的训练方法、装置、电子模型及存储介质 |
CN116011588A (zh) * | 2023-01-09 | 2023-04-25 | 西安电子科技大学 | 结合机器学习和物理机理的导体目标rcs预测方法 |
CN116912320A (zh) * | 2023-09-13 | 2023-10-20 | 齐鲁空天信息研究院 | 对象高程坐标的定位方法、装置、电子设备及介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106483490A (zh) * | 2016-10-20 | 2017-03-08 | 天津大学 | 基于支持向量机分类的无线定位方法 |
CN106612495A (zh) * | 2015-10-23 | 2017-05-03 | 北斗导航位置服务(北京)有限公司 | 一种基于传播损耗学习的室内定位方法及系统 |
-
2017
- 2017-08-28 CN CN201710750490.0A patent/CN107703480B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106612495A (zh) * | 2015-10-23 | 2017-05-03 | 北斗导航位置服务(北京)有限公司 | 一种基于传播损耗学习的室内定位方法及系统 |
CN106483490A (zh) * | 2016-10-20 | 2017-03-08 | 天津大学 | 基于支持向量机分类的无线定位方法 |
Non-Patent Citations (2)
Title |
---|
AMIRA CHRIKI等: "SVM-Based Indoor Localization in Wireless Sensor Networks", 《2017 13TH INTERNATIONAL WIRELESS COMMUNICATIONS AND MOBILE COMPUTING CONFERENCE (IWCMC)》 * |
HENG FAN等: "WiFi Based Indoor Localization with Multiple Kernel Learning", 《2016 8TH IEEE INTERNATIONAL CONFERENCE ON COMMUNICATION SOFTWARE AND NETWORKS (ICCSN)》 * |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108828519B (zh) * | 2018-05-24 | 2022-08-09 | 桂林电子科技大学 | 一种基于机器学习的高精度室内可见光定位方法 |
CN108828519A (zh) * | 2018-05-24 | 2018-11-16 | 桂林电子科技大学 | 一种基于机器学习的高精度室内可见光定位方法 |
CN109100682A (zh) * | 2018-08-01 | 2018-12-28 | 南京邮电大学 | 基于多核极限学习机和接收信号强度的定位方法 |
CN109019717A (zh) * | 2018-08-28 | 2018-12-18 | 大唐(北京)水务工程技术有限公司 | 一种火电厂脱硫废水智能处理方法及系统 |
CN109019717B (zh) * | 2018-08-28 | 2021-08-24 | 大唐(北京)水务工程技术有限公司 | 一种火电厂脱硫废水智能处理方法及系统 |
CN110691319A (zh) * | 2019-09-03 | 2020-01-14 | 东南大学 | 一种使用领域自适应实现异构设备高精度室内定位的方法 |
CN112394320A (zh) * | 2020-04-26 | 2021-02-23 | 南京邮电大学 | 基于支持向量机的室内高精度质心定位方法 |
CN112394320B (zh) * | 2020-04-26 | 2023-06-23 | 南京邮电大学 | 基于支持向量机的室内高精度质心定位方法 |
CN111783837A (zh) * | 2020-06-05 | 2020-10-16 | 西安电子科技大学 | 一种基于多核学习的特征融合方法 |
CN111783837B (zh) * | 2020-06-05 | 2023-08-15 | 西安电子科技大学 | 一种基于多核学习的特征融合方法 |
CN112566055A (zh) * | 2020-11-27 | 2021-03-26 | 巢湖学院 | 一种基于射频指纹匹配的室内定位算法 |
CN112566055B (zh) * | 2020-11-27 | 2022-06-10 | 巢湖学院 | 一种基于射频指纹匹配的室内定位算法 |
CN114444727A (zh) * | 2021-12-31 | 2022-05-06 | 北京瑞莱智慧科技有限公司 | 核函数近似模型的训练方法、装置、电子模型及存储介质 |
CN114415246A (zh) * | 2022-03-29 | 2022-04-29 | 科大天工智能装备技术(天津)有限公司 | 一种基于机器学习的地下金属物体的定位方法及系统 |
CN116011588A (zh) * | 2023-01-09 | 2023-04-25 | 西安电子科技大学 | 结合机器学习和物理机理的导体目标rcs预测方法 |
CN116912320A (zh) * | 2023-09-13 | 2023-10-20 | 齐鲁空天信息研究院 | 对象高程坐标的定位方法、装置、电子设备及介质 |
CN116912320B (zh) * | 2023-09-13 | 2023-12-22 | 齐鲁空天信息研究院 | 对象高程坐标的定位方法、装置、电子设备及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN107703480B (zh) | 2021-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107703480B (zh) | 基于机器学习的混合核函数室内定位方法 | |
Zheng et al. | Exploiting fingerprint correlation for fingerprint-based indoor localization: A deep learning-based approach | |
CN106851573B (zh) | 基于对数路径损耗模型的联合加权k近邻室内定位方法 | |
Dai et al. | Combination of DNN and improved KNN for indoor location fingerprinting | |
CN107071743B (zh) | 一种基于随机森林的快速KNN室内WiFi定位方法 | |
CN104853435B (zh) | 一种基于概率的室内定位方法和装置 | |
CN109195110B (zh) | 基于层次聚类技术和在线极限学习机的室内定位方法 | |
CN110488222B (zh) | 一种nlos条件下svm与重心坐标相结合的uwb定位方法 | |
CN105120479B (zh) | 终端间Wi-Fi信号的信号强度差异修正方法 | |
CN108495263B (zh) | 一种基于广义多核函数的室内定位方法 | |
CN111366820A (zh) | 局部放电信号的模式识别方法、装置、设备及存储介质 | |
CN111726765A (zh) | 一种面向大规模复杂场景的wifi室内定位方法及系统 | |
CN103885867B (zh) | 一种模拟电路性能的在线评价方法 | |
CN108225332B (zh) | 基于监督的室内定位指纹地图降维方法 | |
Chen et al. | A wifi indoor localization method based on dilated cnn and support vector regression | |
CN116008671A (zh) | 一种基于时差和聚类的闪电定位方法 | |
Hu et al. | A WiFi indoor location tracking algorithm based on improved weighted k nearest neighbors and kalman filter | |
Jia et al. | A DNN-based WiFi-RSSI indoor localization method in IoT | |
Liu et al. | CTSLoc: An indoor localization method based on CNN by using time-series RSSI | |
Wei et al. | RSSI-based location fingerprint method for RFID indoor positioning: a review | |
Ghozali et al. | Indoor positioning system using regression-based fingerprint method | |
Mingzhe et al. | The indoor positioning algorithm research based on improved location fingerprinting | |
Liu et al. | Novel robust indoor device-free moving-object localization and tracking using machine learning with Kalman filter and smoother | |
Yu et al. | An indoor localization of WiFi based on branch-bound algorithm | |
CN105792230A (zh) | 基于rss指纹室内定位系统的接入点和定标点部署方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20211122 Address after: 510000 self compiled a, unit 1902, No. 374 BIS, Beijing Road, Yuexiu District, Guangzhou, Guangdong Province Patentee after: Guangzhou Shiju Network Technology Co.,Ltd. Address before: 210003, 66 new model street, Gulou District, Jiangsu, Nanjing Patentee before: NANJING University OF POSTS AND TELECOMMUNICATIONS |