CN113836123A - 一种基于距离、角度的轨迹清洗方法 - Google Patents
一种基于距离、角度的轨迹清洗方法 Download PDFInfo
- Publication number
- CN113836123A CN113836123A CN202110830853.8A CN202110830853A CN113836123A CN 113836123 A CN113836123 A CN 113836123A CN 202110830853 A CN202110830853 A CN 202110830853A CN 113836123 A CN113836123 A CN 113836123A
- Authority
- CN
- China
- Prior art keywords
- position coordinate
- distance
- data
- coordinate points
- angle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000004140 cleaning Methods 0.000 title claims abstract description 48
- 238000000034 method Methods 0.000 title claims abstract description 31
- 230000003068 static effect Effects 0.000 claims abstract description 11
- 230000000694 effects Effects 0.000 claims abstract description 8
- 238000012544 monitoring process Methods 0.000 claims abstract description 4
- 238000004364 calculation method Methods 0.000 claims description 3
- 238000013500 data storage Methods 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/29—Geographical information databases
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Quality & Reliability (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
本发明公开了一种基于距离、角度的轨迹清洗方法,其特征是:通过监听端口获取引擎发送的位置坐标信息,调用数据清洗模块,通过距离清洗法,去除静止点数据,通过轨迹偏移角度清洗法,清洗掉对于历史轨迹展示没有明显作用的点位数据,保存在数据库中;调用历史轨迹查询接口,获取历史轨迹的点位数据,进行展示。本发明同时考虑了静止对象的坐标数据的处理(通过距离清洗法)和运动中产生的无作用数据的处理(通过轨迹偏移角度清洗法),实现了综合性的数据处理能力,有效提高了数据清洗的质量,减少数据储存,提高查询效率。
Description
技术领域
本发明属于信息技术的技术领域,尤其涉及一种基于距离、角度的轨迹清洗方法。
背景技术
数据清洗是指对收到的数据进行某种规则的减操作,去掉那些错误的,重复的,对使用没有明显作用的数据。
我们在生活工作中,总是会产生各种各样的数据,这些数据有的有用,有的就是数据垃圾,占用着资源,这时候便需要数据清洗。当查询定位资源时,一旦数据量多了,查询也就相应变慢,影响用户体验。
现有的轨迹清洗方案,大多依赖第三方框架,还要自己写算法规则,搭建复杂,或是只进行了错误和重复的清洗,并没有一个很好的效果。
发明内容
本发明的目的是为了解决背景技术中提及的问题,提供一种基于距离、角度的轨迹清洗方法。
为实现上述技术目的,本发明采取的技术方案为:
一种基于距离、角度的轨迹清洗方法,其中:通过监听端口获取引擎发送的位置坐标信息,调用数据清洗模块,通过距离清洗法,去除静止点数据,通过轨迹偏移角度清洗法,清洗掉对于历史轨迹展示没有明显作用的点位数据,保存在数据库中;其中:
距离清洗法为:对获取的连续多个位置坐标点的位置与原始点距离进行判断,这多个位置坐标点中没有一个点位超出预设距离阈值,则认为这多个位置坐标点是静态的,只保留记录点,直至获取的位置坐标点中,有超出预设距离阈值的位置坐标点出现,保存这个位置坐标点,并将这个位置坐标点称为记录点;
轨迹偏移角度清洗法为:判断相邻三个位置坐标点形成的偏移角的角度,当角度位于预设阈值内时,认为这三个位置坐标点在一条直线上,删除中间一个位置坐标点的数据,如相邻三个位置坐标点形成的偏移角的角度位于预设阈值外时,认定这三个位置坐标点为明显转折点,均予以保存。
本发明的进一步的优化方案为:
若连续多个位置坐标点朝着一个方向移动,且相邻三个位置坐标点形成的偏移角的角度位于预设阈值内,每三个应删除的中间位置坐标点中保存至少一个。
相邻三个位置坐标点形成的偏移角的角度计算公式:
对保存在数据库中的数据,能通过调用历史轨迹查询接口,获取历史轨迹的点位数据,进行展示。
本发明通过距离和角度算法进行数据清洗,可以清洗大量的对历史轨迹展示没有明显作用的数据,减少数据储存,提高查询效率。
本发明同时考虑了静止对象的坐标数据的处理(通过距离清洗法)和运动中产生的无作用数据的处理(通过轨迹偏移角度清洗法),实现了综合性的数据处理能力,有效提高了数据清洗的质量。
本发明还进一步的解决了了连续多个位置坐标点朝着一个方向小角度移动导致的误差积少成多的的问题,以椭圆形线为例,椭圆形线上的相邻几个坐标点偏移角均较小,每次都在误差角度方位内,最终会量变引起质变,如果不考虑这种特殊情况,最终清洗后的轨迹就会变成直线,而本发明则限定了若连续多个位置坐标点朝着一个方向移动,且相邻三个位置坐标点形成的偏移角的角度位于预设阈值内,每三个应删除的中间位置坐标点中保存至少一个的方式,极大的保障了圆形、椭圆形等圆滑过渡线轨迹的准确性。
附图说明
图1为距离公式演示图;
图2为静态数据范围分析图,图中a为记录点,圆圈代表预设距离阈值;
图3为初始化队列示意图;
图4为偏移演示图;
图5为角度分析图;
图6为点s、e保存到队列的示意图;
图7为点s、o、e角度分析图;
图8为点s、o、e保存到队列的示意图;
图9为椭圆形线轨迹演示图;
图10为清洗前轨迹示意图;
图11为清洗后轨迹示意图。
具体实施方式
以下结合附图对本发明的实施例作进一步详细描述。
本发明一种基于距离、角度的轨迹清洗方法,其中:通过监听端口获取引擎发送的位置坐标信息,调用数据清洗模块,通过距离清洗法,去除静止点数据,通过轨迹偏移角度清洗法,清洗掉对于历史轨迹展示没有明显作用的点位数据,保存在数据库中;其中:
距离清洗法为:对获取的连续多个位置坐标点的位置与原始点距离进行判断,这多个位置坐标点中没有一个点位超出预设距离阈值,则认为这多个位置坐标点是静态的,只保留记录点,直至获取的位置坐标点中,有超出预设距离阈值的位置坐标点出现,保存这个位置坐标点,并将这个位置坐标点称为记录点;
轨迹偏移角度清洗法为:判断相邻三个位置坐标点形成的偏移角的角度,当角度位于预设阈值内时,认为这三个位置坐标点在一条直线上,删除中间一个位置坐标点的数据,如相邻三个位置坐标点形成的偏移角的角度位于预设阈值外时,认定这三个位置坐标点为明显转折点,均予以保存。
基于距离的判定:如图1所示,
记录一个点a,在之后的数据点中,连续n个数据点,都没有一个点与a的距离大于预设阈值,即判定这些点是静止点;若这些点中,有数据点与记录点距离超过预定值,认为标签是在移动的,轨迹可能是原路返回,亦或是刚好行动,保存点位,如图2所示。
基于角度的判定:记录初始两个点的位置s(起点,定位标签产生的第一个数据)、o(原点,定位标签产生的第二个数据)保存在队列中,如图3所示。
角度计算公式:如图4所示;
当出现第三个位置点e(定位数据产生的第三个数据)时,取出s点,o点,通过判断三个点构成的向量便偏移角,当度数小于预设阈值时,可近似认为是一条直线,保存s点和e点,如图5和6所示。
下次比较时,将最后保存的两点从队列中取出,等效于之前的s、o。
如果角度小于预定阈值,那么此处是一个转角处,将取出的s、o点保存,将e点也要保存。如图7、8所示。
这种算法有一个问题在于:如果我缓慢偏移角度,每次都在误差角度方位内,朝着一个方向移动,量变引起质变,最终我的轨迹还是一条直线,但实际上我可能是走了个半椭圆形,针对这样的情况,我们设置了一个计数器,当连续3个角度小于误差角度时,第三个小于误差角度的保存三个位置点坐标,当中间出现一个其他角度时,这个计数器清零,有效的保障了轨迹的准确性。如图9所示。
轨迹清洗效果展示:如图10和图11所示,未清洗前,数据多达三千多个。清洗后,轨迹数据只有两百多个,并且能很好的展示轨迹。以上仅是本发明的优选实施方式,本发明的保护范围并不仅局限于上述实施例,凡属于本发明思路下的技术方案均属于本发明的保护范围。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理前提下的若干改进和润饰,应视为本发明的保护范围。
Claims (5)
1.一种基于距离、角度的轨迹清洗方法,其特征是:通过监听端口获取引擎发送的位置坐标信息,调用数据清洗模块,通过距离清洗法,去除静止点数据,通过轨迹偏移角度清洗法,清洗掉对于历史轨迹展示没有明显作用的点位数据,保存在数据库中;其中:
距离清洗法为:对获取的连续多个位置坐标点的位置与原始点距离进行判断,这多个位置坐标点中没有一个点位超出预设距离阈值,则认为这多个位置坐标点是静态的,只保留记录点,直至获取的位置坐标点中,有超出预设距离阈值的位置坐标点出现,保存这个位置坐标点,并将这个位置坐标点称为记录点;
轨迹偏移角度清洗法为:判断相邻三个位置坐标点形成的偏移角的角度,当角度位于预设阈值内时,认为这三个位置坐标点在一条直线上,删除中间一个位置坐标点的数据,如相邻三个位置坐标点形成的偏移角的角度位于预设阈值外时,认定这三个位置坐标点为明显转折点,均予以保存。
2.根据权利要求1所述的一种基于距离、角度的轨迹清洗方法,其特征是:若连续多个位置坐标点朝着一个方向移动,且相邻三个位置坐标点形成的偏移角的角度位于预设阈值内,每三个应删除的中间位置坐标点中保存至少一个。
5.根据权利要求1所述的一种基于距离、角度的轨迹清洗方法,其特征是:对保存在数据库中的数据,能通过调用历史轨迹查询接口,获取历史轨迹的点位数据,进行展示。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110830853.8A CN113836123A (zh) | 2021-07-22 | 2021-07-22 | 一种基于距离、角度的轨迹清洗方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110830853.8A CN113836123A (zh) | 2021-07-22 | 2021-07-22 | 一种基于距离、角度的轨迹清洗方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113836123A true CN113836123A (zh) | 2021-12-24 |
Family
ID=78962859
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110830853.8A Pending CN113836123A (zh) | 2021-07-22 | 2021-07-22 | 一种基于距离、角度的轨迹清洗方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113836123A (zh) |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100315904A1 (en) * | 2009-06-09 | 2010-12-16 | Atlas Elektronik Gmbh | Direction-finding method and installation for detection and tracking of successive bearing angles |
CN102663343A (zh) * | 2012-04-26 | 2012-09-12 | 长春理工大学 | 一种多目标轨迹单站自动识别方法 |
CN103312335A (zh) * | 2013-05-20 | 2013-09-18 | 四川智行电子科技有限公司 | 移动gis技术的空间路线矢量数据累积偏移实时压缩方法 |
CN103999113A (zh) * | 2011-12-15 | 2014-08-20 | 富士通株式会社 | 计算方法、计算程序以及计算装置 |
CN105738932A (zh) * | 2016-01-28 | 2016-07-06 | 石家庄市善理通益科技有限公司 | 轨迹的生成方法和装置 |
CN107816989A (zh) * | 2017-10-13 | 2018-03-20 | 中国船舶重工集团公司七五0试验场 | 水下机器人航向数据处理方法和装置 |
CN108681545A (zh) * | 2018-03-23 | 2018-10-19 | 广州北斗物联网有限公司 | 一种行驶轨迹的轨迹点优化方法、装置、设备及介质 |
CN109676613A (zh) * | 2019-02-28 | 2019-04-26 | 武汉工程大学 | 一种误差可控的四轴工业机器人圆弧过渡式平顺轨迹生成方法 |
CN111123336A (zh) * | 2019-09-26 | 2020-05-08 | 深圳市东深电子股份有限公司 | 一种水利巡查定位及离线轨迹优化方法 |
US20200193170A1 (en) * | 2018-12-13 | 2020-06-18 | Ordnance Survey Limited | Determining Position Data |
CN111651437A (zh) * | 2020-04-17 | 2020-09-11 | 北京嘀嘀无限科技发展有限公司 | 一种数据清洗方法、装置、电子设备及存储介质 |
CN112255612A (zh) * | 2020-11-03 | 2021-01-22 | 中国电子科技集团公司第二十八研究所 | 一种雷达航迹随机抖动性评估方法 |
CN112415536A (zh) * | 2020-11-11 | 2021-02-26 | 南京市测绘勘察研究院股份有限公司 | 一种自动获取车载激光点云行车轨迹异常区域的方法 |
CN112764074A (zh) * | 2020-12-30 | 2021-05-07 | 深圳中科讯联科技股份有限公司 | 一种定位导航轨迹的方法、装置及电子设备 |
CN112782658A (zh) * | 2021-03-17 | 2021-05-11 | 成都安智杰科技有限公司 | 一种雷达角度校准方法及装置 |
-
2021
- 2021-07-22 CN CN202110830853.8A patent/CN113836123A/zh active Pending
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100315904A1 (en) * | 2009-06-09 | 2010-12-16 | Atlas Elektronik Gmbh | Direction-finding method and installation for detection and tracking of successive bearing angles |
CN103999113A (zh) * | 2011-12-15 | 2014-08-20 | 富士通株式会社 | 计算方法、计算程序以及计算装置 |
CN102663343A (zh) * | 2012-04-26 | 2012-09-12 | 长春理工大学 | 一种多目标轨迹单站自动识别方法 |
CN103312335A (zh) * | 2013-05-20 | 2013-09-18 | 四川智行电子科技有限公司 | 移动gis技术的空间路线矢量数据累积偏移实时压缩方法 |
CN105738932A (zh) * | 2016-01-28 | 2016-07-06 | 石家庄市善理通益科技有限公司 | 轨迹的生成方法和装置 |
CN107816989A (zh) * | 2017-10-13 | 2018-03-20 | 中国船舶重工集团公司七五0试验场 | 水下机器人航向数据处理方法和装置 |
CN108681545A (zh) * | 2018-03-23 | 2018-10-19 | 广州北斗物联网有限公司 | 一种行驶轨迹的轨迹点优化方法、装置、设备及介质 |
US20200193170A1 (en) * | 2018-12-13 | 2020-06-18 | Ordnance Survey Limited | Determining Position Data |
CN109676613A (zh) * | 2019-02-28 | 2019-04-26 | 武汉工程大学 | 一种误差可控的四轴工业机器人圆弧过渡式平顺轨迹生成方法 |
CN111123336A (zh) * | 2019-09-26 | 2020-05-08 | 深圳市东深电子股份有限公司 | 一种水利巡查定位及离线轨迹优化方法 |
CN111651437A (zh) * | 2020-04-17 | 2020-09-11 | 北京嘀嘀无限科技发展有限公司 | 一种数据清洗方法、装置、电子设备及存储介质 |
CN112255612A (zh) * | 2020-11-03 | 2021-01-22 | 中国电子科技集团公司第二十八研究所 | 一种雷达航迹随机抖动性评估方法 |
CN112415536A (zh) * | 2020-11-11 | 2021-02-26 | 南京市测绘勘察研究院股份有限公司 | 一种自动获取车载激光点云行车轨迹异常区域的方法 |
CN112764074A (zh) * | 2020-12-30 | 2021-05-07 | 深圳中科讯联科技股份有限公司 | 一种定位导航轨迹的方法、装置及电子设备 |
CN112782658A (zh) * | 2021-03-17 | 2021-05-11 | 成都安智杰科技有限公司 | 一种雷达角度校准方法及装置 |
Non-Patent Citations (3)
Title |
---|
ANTONIOS MAKRIS等: "A Comparison of Trajectory Compression Algorithms Over AIS Data", 《IEEE ACCESS》, vol. 9, 28 June 2021 (2021-06-28), pages 92516 - 92530, XP011864418, DOI: 10.1109/ACCESS.2021.3092948 * |
刘磊军;房晨;张磊;鲍苏宁;: "基于运动状态改变的在线全球定位系统轨迹数据压缩", 计算机应用, no. 01, 10 January 2016 (2016-01-10), pages 122 - 127 * |
孟卫东等: "曲线数据压缩算法的研究及应用", 《计算机系统应用》, vol. 28, no. 5, 15 May 2019 (2019-05-15), pages 150 - 155 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Li et al. | Graph-based asynchronous event processing for rapid object recognition | |
CN110675432B (zh) | 一种基于多维特征融合的视频多目标跟踪方法 | |
CN112640380B (zh) | 用于对事件的输入流进行异常检测的设备和方法 | |
JP2021174496A (ja) | 軌跡予測方法及びシステム | |
CN109974743B (zh) | 一种基于gms特征匹配及滑动窗口位姿图优化的视觉里程计 | |
US7567711B2 (en) | Cleaning up of handwriting intra-stroke and inter-stroke overtracing | |
CN110111370B (zh) | 一种基于tld和深度多尺度时空特征的视觉物体跟踪方法 | |
CN110113368B (zh) | 一种基于子轨迹模式的网络行为异常检测方法 | |
CN110032538A (zh) | 一种数据读取系统和方法 | |
CN116088503B (zh) | 动态障碍物检测方法和机器人 | |
CN110363791A (zh) | 一种融合单目标跟踪结果的在线多目标跟踪算法 | |
CN110702093B (zh) | 基于粒子滤波的定位方法、装置、存储介质及机器人 | |
CN113836123A (zh) | 一种基于距离、角度的轨迹清洗方法 | |
CN111813111A (zh) | 一种多机器人协同工作方法 | |
CN114594772A (zh) | 机器人、路径规划方法、装置和存储介质 | |
Hedberg et al. | Implementation of a labeling algorithm based on contour tracing with feature extraction | |
CN108170837A (zh) | 数据离散化方法、装置、计算机设备及存储介质 | |
CN102436535A (zh) | 计算机辅助设计过程中创意拐点的识别方法及系统 | |
CN113762027B (zh) | 一种异常行为的识别方法、装置、设备及存储介质 | |
Mirvahabi et al. | A Flexible Trajectory Compression Algorithm for Multi-Modal Transportation | |
Gurevin et al. | An efficient algorithm for the construction of dynamically updating trajectory networks | |
CN111310824A (zh) | 多角度稠密目标检测抑制优化方法及设备 | |
CN112446420A (zh) | 一种大规模硬盘故障预测领域中的数据预处理算法 | |
CN103885597A (zh) | 空间输入识别方法和系统 | |
TWI790957B (zh) | 一種多目標追蹤的高速數據關聯方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: Floor 4, Building 9, Xuzhuang Software Industry Base, No. 699-8, Xuanwu Avenue, Xuanwu District, Nanjing, Jiangsu 210042 Applicant after: NANJING WO XU WIRELESS CO.,LTD. Address before: Room 401, building 2, Xuzhuang Software industry base, No. 699-8, Xuanwu Avenue, Xuanwu District, Nanjing, Jiangsu 210023 Applicant before: NANJING WO XU WIRELESS CO.,LTD. |