CN107545785A - 一种基于大数据的船舶航道行驶方法 - Google Patents
一种基于大数据的船舶航道行驶方法 Download PDFInfo
- Publication number
- CN107545785A CN107545785A CN201710598522.XA CN201710598522A CN107545785A CN 107545785 A CN107545785 A CN 107545785A CN 201710598522 A CN201710598522 A CN 201710598522A CN 107545785 A CN107545785 A CN 107545785A
- Authority
- CN
- China
- Prior art keywords
- data
- module
- navigation channel
- navigation
- current
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种基于大数据的航舶航道行驶方法,包括数据收集模块采集数据,根据采集的数据经济费用计算模块计算当前航道以及当前航道相关的多条航道行驶到达目的地时所使用的船费及燃油费的,通航时间计算模块计算当前航道以及与当前航道相关的多条航道行驶到达目的地的时间的;然后将上述数据转换,根据获得的数据使用多变量多重回归模型构建网络行为模型;网络行为模型中的SOM模块在已经构建的模型中寻找新的网络参数和预期关键性能指标,验证模块对新的网络参数进行仿真。
Description
技术领域
本发明涉及大数据处理及数据回归领域,具体涉及一种基于大数据的航舶航道行驶方法。
背景技术
船舶航道的设定应满足两个条件,首先要能够安全的行驶船舶,其次能够较快的到达目的地并且花费更小。
航线,指的是船舶在两地间的水面航行路线,每个航次的具体航线,应根据该次的出航航行任务和航行地区的地理、水文、气象等情况,以及船舶当前状况拟定。两地间的航线可能有很多条,在船舶的行驶过程中,船员的航线的制定,对船舶行驶效率至关重要。但是,由于水面上尤其海面上的交通状况、气象状态瞬息万变,无法在行驶前预先获知,因此,在航行前,船员也无法确定两地间哪一条航线能够作为行驶效率最高、耗时耗力最少的最佳航线,而只能在行驶过程中不断修正。现有技术中对船舶航线的修正都是驾驶员在航行过程中根据目测距离水面上的观察结果,结合自己的航行经验来进行制定的,这样的船舶航线修正方案存在以下弊端:(1)驾驶员观测距离有限,决策材料不足,导致航线需要频繁修正;(2)每一个驾驶员的航行经验不同,修正后的航线航行效果也不同,修正后的航线往往不是最佳航线。
因此,需要一种航道交通密度和航道气象指数发布系统,克服现有航线修正方案中过于依赖人力而导致决策过程不够科学的技术问题,通过实时获取船舶的多个相关航道的航道交通密度和航道气象指数,并基于船舶的当前行使速度确定是否发出切换航道信号,为船舶航线的修正提供重要参考,从而保证了航行的效率,提高了船舶运营方的运行效益。
发明内容
为了克服现有技术中存在过于依赖船员的素质来进行航路的切换、面对庞大的数据却无法进行分析处理等缺陷,本发明将提出一种更加精确的船舶航道行驶方法,它依据现在广为流行的大数据方法,较全面的收集并分析各类数据,以数据为基础来对航船航道进行全面分析比较,具有较强的环境适应能力。
本发明采用如下技术方案:
一种基于大数据的航舶航道行驶方法,包括数据收集模块、经济费用计算模块、通航时间计算模块、数据转换模块、构建模型模块、SOM模块、验证模块及概念漂移模块,所述数据收集模块分别与经济费用计算模块及通航时间计算模块连接,所述数据收集模块、经济费用计算模块及通航时间计算模块均与数据转换模块连接,所述数据转换模块与构建模型模块连接,所述构建模型模块与SOM模块及验证模块依次连接,所述验证模块与概念漂移模块连接,具体步骤如下:
S1数据收集模块采集数据,
所述数据收集模块包括用于检测船舶当前行驶速度的船速检测设备;
定位设备与无线数据通信设备连接用于获得船舶的多个相关航道的航道交通和航道气象指数,所述航道交通包括与当前航道相关的多条航道的通航密度及交通信息,所述航道气象指数包括当前水深、波浪、洋流和航道附近风速及风向;
船型数据检测设备,用于检测船舶的船长、水中转头阻矩大小、船体进水侧面积分布、排水量与吃水;
S2根据S1采集的数据经济费用计算模块计算当前航道以及当前航道相关的多条航道行驶到达目的地时所使用的船费及燃油费的;
通航时间计算模块计算当前航道以及与当前航道相关的多条航道行驶到达目的地的时间的;
S3数据转换模块根据S1及S2的数据进行数据转换,具体转换方法包括:
首先根据数据类别对数据进行分类;
然后确定关键性能指标和与其关联的网络参数,并按照其对关键性能指标的影响大小进行排序,接着确定每一个网络参数与相关的关键性能指标的关联向量;
最后对于各个关键性能指标之间公共的网络参数进行排名来建立不同的关键性能指标之间的关系;
S4数据构建模块根据上一步骤获得的数据使用多变量多重回归模型构建网络行为模型;
S5网络行为模型中的SOM模块在已经构建的模型中寻找新的网络参数和预期关键性能指标;
S6验证模块对新的网络参数进行仿真,如果仿真结果显示该网络参数对关键性能指标改进有帮助,则修正模型使用新的网络参数;如果上一步的验证失败了,则将结果反馈至概念漂移模块,概念漂移模块将更新模型的行为模型。
概念漂移模块会周期性的触发。
所述概念漂移模块具体采用时间延边的流分类器,具体方法:先根据当前的数据构建临时决策树,并不断地获取新数据来优化已建立的决策树,若在某时候出现概念漂移,则算法在出现漂移的节点上建立新的代替子树,若替代子树的分类效果优于当前决策子树,则直接取代。
所述S3中对收集的数据进行分类按照安全性、迅速性及经济性。
本发明的有益效果:
(1)本发明充分考虑的会影响到船舶航行的各类数据,在线下训练的时候构建最接近于实际情况的模型;
(2)在线上应用的时候也会及时收集新的数据和情况以备之后线下更新系统模型,该方法具有较强的环境适应能力。
附图说明
图1是本发明的数据收集模块的结构示意图;
图2是本发明的结构示意图;
图3是本发明的工作流程图;
图4是SOM模型示意图。
具体实施方式
下面结合实施例及附图,对本发明作进一步地详细说明,但本发明的实施方式不限于此。
实施例
如图1-图4所示,一种基于大数据的航舶航道行驶方法,硬件部分包括数据收集模块、经济费用计算模块、通航时间计算模块、数据转换模块、构建模型模块、SOM模块、验证模块及概念漂移模块,所述数据收集模块分别与经济费用计算模块及通航时间计算模块连接,所述数据收集模块、经济费用计算模块及通航时间计算模块均与数据转换模块连接,所述数据转换模块与构建模型模块连接,所述构建模型模块与SOM模块及验证模块依次连接,所述验证模块与概念漂移模块连接,
具体步骤包括线下训练阶段及线上应用阶段;
所述线下训练阶段包括
S1数据收集模块收集数据,
所述数据收集模块包括用于检测船舶当前行驶速度的船速检测设备、
定位设备与无线数据通信设备连接用于获得船舶的多个相关航道的航道交通和航道气象指数,所述航道交通包括与当前航道相关的多条航道的通航密度及交通信息,所述航道气象指数包括当前水深、波浪、洋流和航道附近风速及风向;
还包括船型数据检测设备,用于检测船舶的船长、水中转头阻矩大小、船体进水侧面积分布、排水量与吃水。
S2根据S1采集的数据经济费用计算模块计算当前航道以及当前航道相关的多条航道行驶到达目的地时所使用的船费及燃油费的;
通航时间计算模块计算当前航道以及与当前航道相关的多条航道行驶到达目的地的时间的。
S3数据转换模块根据S1及S2的数据进行数据转换,具体转换方法包括:
首先根据数据类别对数据进行分类,根据操作与经营目标(OBOs)对所有收集来的数据进行分类,一旦数据被分类后,则根据OBOs确定关键性能指标,这些关键性能指标需能够精确地反映实际用户的体验和系统性能。例如:船速、航向、船费、燃油费、通航密度。
然后确定关键性能指标和与其关联的网络参数,并按照其对关键性能指标的影响大小进行排序,接着确定每一个网络参数与相关的关键性能指标的关联向量;
接着,对于每一个关键性能指标,找到影响它的网络参数,并估计关键性能指标与相应网络参数的关联程度,这是将这些诸多繁杂的大数据转变为合适的数据的关键。随后根据对关键性能指标的公共网络参数进行排名来确立不同的关键性能指标之间的关系。此步骤使得系统可在OBO类别内和跨OBO类别建立不同关键性能指标之间的互相关,这不仅可以有助于不同SOM功能之间的自协调,而且提供了多目标与整体优化的能力,具有可调谐控制与透明度。
最后对于各个关键性能指标之间公共的网络参数进行排名来建立不同的关键性能指标之间的关系。
S4数据构建模块根据上一步骤获得的数据使用多变量多重回归模型构建网络行为模型;
S5网络行为模型中的SOM模块在已经构建的模型中寻找新的网络参数和预期关键性能指标;
S6验证模块对新的网络参数进行仿真,如果仿真结果显示该网络参数对关键性能指标改进有帮助,则修正模型使用新的网络参数;如果上一步的验证失败了,则将结果反馈至概念漂移模块,概念漂移模块将更新模型的行为模型。在预测分析和机器学习的概念漂移表示目标变量的统计特性随着时间的推移以不可预见的方式变化的现象,随着时间的推移,模型的预测精度将降低,在此运用时间演变的流分类器来解决,即采用使用流动窗口方法的漂移检测机制,滑动窗口方法处理用有限量的输入数据以检测变化并相应地实时反应。
当对数据建模提取了系统和用户行为模型之后,SOM模块可以依靠该系统和用户行为模型来执行各种SOM功能,例如确认新的网络参数和预期新关键性能指标。如果新的网络参数可以数据库中存储的现有知识来判断,就继续观察寻找新的网络参数;如果不行,则用发现的新的网络参数来仿真网络行为,如果模型行为符合预期行为,则继续观察寻找新的网络参数。如果上一步骤中的验证失败了,模型就会反馈到概念漂移模块,进而将更新行为模型。即使上一步骤验证成功了,概念漂移模块也会周期性的出发以及时更新模型以保持其准确性。
概念漂移问题可以通过使用时间演变的流分类器来解决,时间演变的流分类器采用滑动窗口方法的漂移检测机制,处理有限量的输入数据以检测变化并相应的做出实时反应。现在常用的处理概念漂移的方法有概念自适应快速决策树(CVFDT),先根据当前的数据构建临时决策树,并不断地获取新数据来优化已建立的决策树。若在某时候出现概念漂移,则算法在出现漂移的节点上建立新的代替子树。若替代子树的分类效果优于当前决策子树,则直接取代。
所述线上应用阶段,
SOM模块在接受外界输入的时候,将会自动的分为不同的对应区域,不同区域对输入模式有不同的响应特征。在线下训练时,网络随机输入已经经过处理的船舶及航海等相关数据。对某种特定的输入,输出层会有某个节点产生最大响应而获胜,当然在训练开始阶段,这个是不确定的。当相关输入数据改变时,获胜节点也会相应改变。获胜节点周围的节点因侧向相互兴奋作用产生较大影响,于是获胜节点及其优胜领域内的所有节点所连接的权向量均向输入方向作不同程度的调整,距离获胜节点越远,调整力度越小。网络通过这种自组织方式,用大量训练样本调整网络的权值,找到输出层对于特定模式输入敏感的神经元,即可得到根据输入的船舶及航海相关数据所获胜的网络参数和关键性能指标。
上述实施例为本发明较佳的实施方式,但本发明的实施方式并不受所述实施例的限制,其他的任何未背离本发明的精神实质与原理下所作的改变、修饰、替代、组合、简化,均应为等效的置换方式,都包含在本发明的保护范围之内。
Claims (4)
1.一种基于大数据的航舶航道行驶方法,其特征在于,包括数据收集模块、经济费用计算模块、通航时间计算模块、数据转换模块、构建模型模块、SOM模块、验证模块及概念漂移模块,所述数据收集模块分别与经济费用计算模块及通航时间计算模块连接,所述数据收集模块、经济费用计算模块及通航时间计算模块均与数据转换模块连接,所述数据转换模块与构建模型模块连接,所述构建模型模块与SOM模块及验证模块依次连接,所述验证模块与概念漂移模块连接,具体步骤如下:
S1数据收集模块采集数据,
所述数据收集模块包括用于检测船舶当前行驶速度的船速检测设备;
定位设备与无线数据通信设备连接用于获得船舶的多个相关航道的航道交通和航道气象指数,所述航道交通包括与当前航道相关的多条航道的通航密度及交通信息,所述航道气象指数包括当前水深、波浪、洋流和航道附近风速及风向;
船型数据检测设备,用于检测船舶的船长、水中转头阻矩大小、船体进水侧面积分布、排水量与吃水;
S2根据S1采集的数据经济费用计算模块计算当前航道以及当前航道相关的多条航道行驶到达目的地时所使用的船费及燃油费的;
通航时间计算模块计算当前航道以及与当前航道相关的多条航道行驶到达目的地的时间的;
S3数据转换模块根据S1及S2的数据进行数据转换,具体转换方法包括:
首先根据数据类别对数据进行分类;
然后确定关键性能指标和与其关联的网络参数,并按照其对关键性能指标的影响大小进行排序,接着确定每一个网络参数与相关的关键性能指标的关联向量;
最后对于各个关键性能指标之间公共的网络参数进行排名来建立不同的关键性能指标之间的关系;
S4数据构建模块根据上一步骤获得的数据使用多变量多重回归模型构建网络行为模型;
S5网络行为模型中的SOM模块在已经构建的模型中寻找新的网络参数和预期关键性能指标;
S6验证模块对新的网络参数进行仿真,如果仿真结果显示该网络参数对关键性能指标改进有帮助,则修正模型使用新的网络参数;如果上一步的验证失败了,则将结果反馈至概念漂移模块,概念漂移模块将更新模型的行为模型。
2.根据权利要求1所述的航舶航道行驶方法,其特征在于,概念漂移模块会周期性的触发。
3.根据权利要求1所述的航舶航道行驶方法,其特征在于,所述概念漂移模块具体采用时间延边的流分类器,具体方法:先根据当前的数据构建临时决策树,并不断地获取新数据来优化已建立的决策树,若在某时候出现概念漂移,则算法在出现漂移的节点上建立新的代替子树,若替代子树的分类效果优于当前决策子树,则直接取代。
4.根据权利要求1所述的航舶航道行驶方法,其特征在于,所述S3中对收集的数据进行分类按照安全性、迅速性及经济性。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710598522.XA CN107545785A (zh) | 2017-07-21 | 2017-07-21 | 一种基于大数据的船舶航道行驶方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710598522.XA CN107545785A (zh) | 2017-07-21 | 2017-07-21 | 一种基于大数据的船舶航道行驶方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107545785A true CN107545785A (zh) | 2018-01-05 |
Family
ID=60970434
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710598522.XA Pending CN107545785A (zh) | 2017-07-21 | 2017-07-21 | 一种基于大数据的船舶航道行驶方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107545785A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112562415A (zh) * | 2020-11-26 | 2021-03-26 | 中远海运科技股份有限公司 | 船舶航线推荐方法 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102819663A (zh) * | 2012-07-17 | 2012-12-12 | 哈尔滨工程大学 | 一种基于优化的支持向量回归参数的船舶航迹预测方法 |
CN103106793A (zh) * | 2013-01-11 | 2013-05-15 | 福州大学 | 基于实时行车方向和通行时段信息的交通状态判别方法 |
CN103167505A (zh) * | 2011-12-19 | 2013-06-19 | 中国移动通信集团福建有限公司 | 一种小区数据信道配置方法和系统 |
CN103177290A (zh) * | 2013-04-03 | 2013-06-26 | 大连海事大学 | 一种基于在线自组织神经网络的船舶领域模型的辨识方法 |
CN104485020A (zh) * | 2014-07-29 | 2015-04-01 | 王洪燕 | 一种船舶航道行驶方法 |
CN104635704A (zh) * | 2015-01-30 | 2015-05-20 | 武汉理工大学 | 基于模糊聚类和遗传算法的船舶能效管理控制平台及方法 |
CN105005796A (zh) * | 2015-08-10 | 2015-10-28 | 中国人民解放军国防科学技术大学 | 基于层次分析的星载sar图像舰船目标分类方法 |
CN106184649A (zh) * | 2016-07-01 | 2016-12-07 | 中船电子科技有限公司 | 一种基于航行特征数据学习的智能航线节油方法 |
CN106335601A (zh) * | 2016-08-29 | 2017-01-18 | 南通中远川崎船舶工程有限公司 | 一种基于采集并分析大数据的船舶节能方法 |
CN106384507A (zh) * | 2016-09-20 | 2017-02-08 | 宁波大学 | 基于稀疏检测器的行程时间实时估计方法 |
CN106779137A (zh) * | 2016-11-14 | 2017-05-31 | 上海海事大学 | 一种根据海况与操纵条件预测船舶油耗的方法 |
CN106816038A (zh) * | 2017-03-17 | 2017-06-09 | 武汉理工大学 | 一种内河水域异常行为船舶自动识别系统及方法 |
-
2017
- 2017-07-21 CN CN201710598522.XA patent/CN107545785A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103167505A (zh) * | 2011-12-19 | 2013-06-19 | 中国移动通信集团福建有限公司 | 一种小区数据信道配置方法和系统 |
CN102819663A (zh) * | 2012-07-17 | 2012-12-12 | 哈尔滨工程大学 | 一种基于优化的支持向量回归参数的船舶航迹预测方法 |
CN103106793A (zh) * | 2013-01-11 | 2013-05-15 | 福州大学 | 基于实时行车方向和通行时段信息的交通状态判别方法 |
CN103177290A (zh) * | 2013-04-03 | 2013-06-26 | 大连海事大学 | 一种基于在线自组织神经网络的船舶领域模型的辨识方法 |
CN104485020A (zh) * | 2014-07-29 | 2015-04-01 | 王洪燕 | 一种船舶航道行驶方法 |
CN104635704A (zh) * | 2015-01-30 | 2015-05-20 | 武汉理工大学 | 基于模糊聚类和遗传算法的船舶能效管理控制平台及方法 |
CN105005796A (zh) * | 2015-08-10 | 2015-10-28 | 中国人民解放军国防科学技术大学 | 基于层次分析的星载sar图像舰船目标分类方法 |
CN106184649A (zh) * | 2016-07-01 | 2016-12-07 | 中船电子科技有限公司 | 一种基于航行特征数据学习的智能航线节油方法 |
CN106335601A (zh) * | 2016-08-29 | 2017-01-18 | 南通中远川崎船舶工程有限公司 | 一种基于采集并分析大数据的船舶节能方法 |
CN106384507A (zh) * | 2016-09-20 | 2017-02-08 | 宁波大学 | 基于稀疏检测器的行程时间实时估计方法 |
CN106779137A (zh) * | 2016-11-14 | 2017-05-31 | 上海海事大学 | 一种根据海况与操纵条件预测船舶油耗的方法 |
CN106816038A (zh) * | 2017-03-17 | 2017-06-09 | 武汉理工大学 | 一种内河水域异常行为船舶自动识别系统及方法 |
Non-Patent Citations (1)
Title |
---|
郭躬德,陈黎飞,李南: "《电子商务推荐相关技术及其改进机制》", 31 December 2014 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112562415A (zh) * | 2020-11-26 | 2021-03-26 | 中远海运科技股份有限公司 | 船舶航线推荐方法 |
CN112562415B (zh) * | 2020-11-26 | 2022-05-20 | 中远海运科技股份有限公司 | 船舶航线推荐方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Wang et al. | A novel approach for generating routable road maps from vehicle GPS traces | |
Wang et al. | Application of real-coded genetic algorithm in ship weather routing | |
Duz et al. | Real time estimation of local wave characteristics from ship motions using artificial neural networks | |
CN107341497A (zh) | 结合选择性升采样的不均衡数据流加权集成分类预测方法 | |
CN101827002B (zh) | 一种数据流分类的概念漂移检测方法 | |
Virjonen et al. | Ship movement prediction using k-NN method | |
CN106383868A (zh) | 一种基于道路网络的时空轨迹聚类方法 | |
CN108090510A (zh) | 一种基于间隔优化的集成学习方法及装置 | |
CN102176701A (zh) | 一种基于主动学习的网络数据异常检测方法 | |
CN104039008B (zh) | 一种混合定位方法 | |
CN101251896B (zh) | 一种基于多分类器的物体检测系统及方法 | |
CN109710595A (zh) | 基于有限信息的输电走廊鸟害热点图的构建方法 | |
CN108446616A (zh) | 基于全卷积神经网络集成学习的道路提取方法 | |
CN105704031A (zh) | 一种数据传输路径确定方法及装置 | |
Thongniran et al. | Spatio-temporal deep learning for ocean current prediction based on HF radar data | |
Dalang et al. | Stochastic optimization of sailing trajectories in an upwind regatta | |
CN107545785A (zh) | 一种基于大数据的船舶航道行驶方法 | |
Chowdhury et al. | Climate change and coastal morphodynamics: Interactions on regional scales | |
Wang et al. | Xihe: A data-driven model for global ocean eddy-resolving forecasting | |
Vettor et al. | Multi-objective route optimization for onboard decision support system | |
CN104183135B (zh) | 车辆行进开销的估计方法及系统 | |
CN117218897A (zh) | 基于ais数据的内河无人船航线提取方法及系统 | |
Yaseen et al. | Artificial intelligence based flood forecasting for River Hunza at Danyor Station in Pakistan | |
Vettor et al. | Multi-objective evolutionary algorithm in ship route optimization | |
Werth et al. | Surrogate-assisted microscopic traffic simulation-based optimisation of routing parameters |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180105 |
|
RJ01 | Rejection of invention patent application after publication |