CN115460198A - 一种船务文件传输计划确定方法、系统和装置 - Google Patents

一种船务文件传输计划确定方法、系统和装置 Download PDF

Info

Publication number
CN115460198A
CN115460198A CN202211285247.3A CN202211285247A CN115460198A CN 115460198 A CN115460198 A CN 115460198A CN 202211285247 A CN202211285247 A CN 202211285247A CN 115460198 A CN115460198 A CN 115460198A
Authority
CN
China
Prior art keywords
file
transmission
transmitted
ship
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211285247.3A
Other languages
English (en)
Other versions
CN115460198B (zh
Inventor
柏建新
李彦瑾
魏虹雨
杨焕伟
尚红艳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hebei Donglai Engineering Technology Service Co ltd
Original Assignee
Hebei Donglai Engineering Technology Service Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hebei Donglai Engineering Technology Service Co ltd filed Critical Hebei Donglai Engineering Technology Service Co ltd
Priority to CN202211285247.3A priority Critical patent/CN115460198B/zh
Publication of CN115460198A publication Critical patent/CN115460198A/zh
Application granted granted Critical
Publication of CN115460198B publication Critical patent/CN115460198B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/16File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/145Network analysis or design involving simulating, designing, planning or modelling of a network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/147Network analysis or design for predicting network behaviour

Abstract

本说明书的实施例提供一种船务文件传输计划确定方法,所述方法包括:获取待传输的船舶文件及其标记信息;基于所述待传输的船舶文件及所述标记信息,与预设传输清单进行匹配,基于所述预设传输清单中包括的文件类型,确定候选待传输文件;基于船舶的位置数据以及船舶周围的环境数据,通过宽带预测模型,确定传输带宽;其中,所述带宽预测模型包括嵌入层和带宽预测层,所述嵌入层对所述船舶周围的环境数据进行处理,确定影响系数;所述宽带预测层对所述影响系数和所述船舶的位置数据进行处理,确定所述传输宽带;基于所述传输带宽和所述候选待传输文件,确定文件传输计划。

Description

一种船务文件传输计划确定方法、系统和装置
分案说明
本申请是2022年6月27日提交的题为“一种船务文件传输控制方法、系统、装置和存储介质”的中国专利申请CN 202210732209.1的分案申请。
技术领域
本说明书涉及数据传输领域,特别涉及一种船务文件传输计划确定方法、系统和装置。
背景技术
船舶出海一次可能需要较长时间才会返回出发地,有时需要将若干文件批量传回基岸。由于船舶在海上只能利用卫星通信与基岸进行联系,数据传输成本较高,而且传输带宽有限且传输信号不稳定,因此,数据传输的稳定性和成功率往往不能得到很好的保证。
因此,有必要提出一种船务文件传输计划确定方法,以提供更好的传输策略,保证文件能够稳定、成功地传输。
发明内容
本说明书实施例之一提供了一种船务文件传输计划确定方法,所述方法包括:获取待传输的船舶文件及其标记信息;基于所述待传输的船舶文件及所述标记信息,与预设传输清单进行匹配,基于所述预设传输清单中包括的文件类型,确定候选待传输文件;基于船舶的位置数据以及船舶周围的环境数据,通过宽带预测模型,确定传输带宽;其中,所述带宽预测模型包括嵌入层和带宽预测层,所述嵌入层对所述船舶周围的环境数据进行处理,确定影响系数;所述宽带预测层对所述影响系数和所述船舶的位置数据进行处理,确定所述传输宽带;基于所述传输带宽和所述候选待传输文件,确定文件传输计划。
本说明书实施例之一提供了一种船务文件传输计划确定系统,所述系统包括:第一获取模块,所述第一获取模块用于获取待传输的船舶文件及其标记信息;第一确定模块,所述第一确定模块用于基于所述待传输的船舶文件及所述标记信息,与预设传输清单进行匹配,基于所述预设传输清单中包括的文件类型,确定候选待传输文件;第二获取模块,所述第二获取模块用于基于船舶的位置数据以及船舶周围的环境数据,通过宽带预测模型,确定传输带宽;其中,所述带宽预测模型包括嵌入层和带宽预测层,所述嵌入层对所述船舶周围的环境数据进行处理,确定影响系数;所述宽带预测层对所述影响系数和所述船舶的位置数据进行处理,确定所述传输宽带;第二确定模块,所述第二确定模块用于基于所述传输带宽和所述候选待传输文件,确定文件传输计划。
本说明书实施例之一提供了一种船务文件传输计划确定装置,包括处理器,所述处理器用于执行上述船务文件传输计划确定方法。
附图说明
本说明书将以示例性实施例的方式进一步说明,这些示例性实施例将通过附图进行详细描述。这些实施例并非限制性的,在这些实施例中,相同的编号表示相同的结构,其中:
图1是根据本说明书一些实施例所示的船务文件传输控制系统的应用场景示意图;
图2是根据本说明书一些实施例所示的船务文件传输控制系统的示例性模块图;
图3是根据本说明书一些实施例所示的船务文件传输控制方法的示例性流程图;
图4是根据本说明书一些实施例所示的确定文件评估分的示例性示意图;
图5是根据本说明书一些实施例所示的船舶的传输带宽预测模型的模型结构图。
具体实施方式
为了更清楚地说明本说明书实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单的介绍。显而易见地,下面描述中的附图仅仅是本说明书的一些示例或实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图将本说明书应用于其它类似情景。除非从语言环境中显而易见或另做说明,图中相同标号代表相同结构或操作。
应当理解,本文使用的“系统”、“装置”、“单元”和/或“模块”是用于区分不同级别的不同组件、元件、部件、部分或装配的一种方法。然而,如果其他词语可实现相同的目的,则可通过其他表达来替换所述词语。
本说明书中使用了流程图用来说明根据本说明书的实施例的系统所执行的操作。应当理解的是,前面或后面操作不一定按照顺序来精确地执行。相反,可以按照倒序或同时处理各个步骤。同时,也可以将其他操作添加到这些过程中,或从这些过程移除某一步或数步操作。
图1是根据本说明书一些实施例所示的船务文件传输控制系统的应用场景示意图。
如图1所示,在一些实施例中,船务文件传输控制系统的应用场景100可以包括处理设备110、网络120、存储设备130、用户终端140、船务文件150以及船舶160。船务文件传输控制系统可以用于确定船舶160上的船务文件150的大小、种类以及传输顺序。
处理设备110可以处理来自本系统至少一个组件或外部数据源的数据和/或信息。例如,处理设备110可以经由网络120获取船务文件150,并对获取的数据进行处理,确定需要传输的文件大小以及传输顺序等。在一些实施例中,处理设备110可以是本地或远程的。例如,处理设备110可以通过有线或无线的方式从存储设备130、用户终端140和船舶160获取信息和/或数据。在一些实施例中,处理设备110可以在云平台上实现。
网络120可以连接系统的各个组成部分和/或连接系统与外部资源部分。网络120使得各组成部分之间,以及与系统之外其他部分可以进行通信。例如,处理设备110可以通过网络120从存储设备130、用户终端140和船舶160获取信息和/或指令。在一些实施例中,网络120还包括网络接入点,例如基站或网络交换点120-1。
存储设备130可以用于存储数据和/或指令。例如,存储设备130可以存储用户通过用户终端140发出的指令。又例如,存储设备130可以存储处理设备110输出的数据。存储设备130可以包括一个或多个存储组件,每个存储组件可以是一个独立的设备,也可以是其他设备的一部分。在一些实施例中,所述存储设备130可在云平台上实现。
用户终端140可以为用户使用的电子设备,可以包括各类移动设备、智能设备、可穿戴设备等。例如,包括但不限于手机140-1、平板电脑140-2、笔记本140-3等。在一些实施例中,用户可以通过用户终端140向处理设备110发送与确定文件传输顺序有关的指令等。在一些实施例中,用户可以通过用户终端与船舶160进行通信。在另一些实施例中,用户可以通过用户终端140接收处理设备110的处理结果。
船务文件150可以为船舶160上列入传输计划的文件。例如,船务文件可以包括文本文件150-1、音频文件150-2和/或影像文件150-3中的至少一种或其组合。在一些实施例中,船务文件可以储存在存储设备130中。
船舶160可以为出海航行的船舶。例如,船舶160包括但不限于远洋轮船、近海轮船、沿海轮船、内河轮船等。在一些实施例中,船舶160可以基于船务文件150确定文件传输计划,并发送指令至处理设备110和存储设备130等。
需要注意的是,以上对于船务文件传输控制系统的应用场景的描述,仅为描述方便,并不能把本说明书限制在所举实施例范围之内。可以理解,对于本领域的技术人员来说,在了解该相关原理后,可能在不背离这一原理的情况下,对各个组成部分进行任意组合,或者构成子系统与其他组成部分连接。
图2是根据本说明书一些实施例所示的船务文件传输控制系统的示例性模块图。如图2所示,船务文件传输控制系统200可以包括第一获取模块210、第一确定模块220、第二获取模块230和第二确定模块240。
在一些实施例中,第一获取模块210用于获取待传输的船舶文件及其标记信息,关于待传输船舶文件及其标记信息的更多实施例,可参见图3及其相关描述。
在一些实施例中,第一确定模块220用于基于待传输的船舶文件及标记信息,与预设传输清单进行匹配,确定至少一个候选待传输文件,关于与预设传输清单进行匹配确定至少一个候选待传输文件的更多实施例,可参见图3及其相关描述。
在一些实施例中,第二获取模块230用于获取船舶的传输带宽,关于传输带宽的详细描述,以及获取船舶传输带宽的更多实施例,可参见图3及其相关描述。
在一些实施例中,第二确定模块240用于基于传输带宽和至少一个候选待传输文件,确定文件传输计划,关于确定文件传输计划的更多实施例,可参见图3及其相关描述。
需要注意的是,以上对于获取船务文件传输控制系统及其模块的描述,仅为描述方便,并不能把本说明书限制在所举实施例范围之内。可以理解,对于本领域的技术人员来说,在了解该系统的原理后,可能在不背离这一原理的情况下,对各个模块进行任意组合,或者构成子系统与其他模块连接。在一些实施例中,图2中披露的第一获取模块、第一确定模块、第二获取模块和第二确定模块可以是一个系统中的不同模块,也可以是一个模块实现上述的两个或两个以上模块的功能。例如,各个模块可以共用一个存储模块,各个模块也可以分别具有各自的存储模块。诸如此类的变形,均在本说明书的保护范围之内。
图3是根据本说明书一些实施例所示的船务文件传输控制方法的示例性流程图。如图3所示,流程300包括下述步骤。
步骤310,获取待传输的船舶文件及其标记信息。在一些实施例中,步骤310可以由第一获取模块210执行。
待传输的船舶文件可以是指船舶上需要传输到其他地方的文件。例如,待传输的船舶文件可以包括但不限于文本资料、图像、视频、音频等。
标记信息可以是指文件自身的属性信息。例如,标记信息可以是待传输文件的大小、类型、重要性和作用以及文件等级等。
在一些实施例中,可以基于文件数据确定标记信息。例如,可以利用计算机获取文件相关数据,进而确定文件对应的标记信息。又例如,可以人工查看文件,基于文件的内容和相关数据确定文件的标记信息。
步骤320,基于待传输的船舶文件及标记信息,与预设传输清单进行匹配,确定至少一个候选待传输文件。在一些实施例中,步骤320可以由第一确定模块220执行。
预设传输清单可以是指在文件传输前,预先确定的需要传输的文件清单。在一些实施例中,预设传输清单可以基于船务文件相关的管理规范确定。例如,预设传输清单可以包括船务文件相关的管理规范中包含的与船舶安全管理相关的文件,文件类型具体可以包括但不限于船舶航行记录、船舶及设备图纸及说明书、航海图书资料、相关法律法规及技术规范文件等。在一些情况下,待传输清单还可以包括其他的文件,具体可视实际情况确定。
在一些实施例中,可以基于待传输的船舶文件及其标记信息,依据预设传输清单中包括的文件类型与预设传输清单进行匹配,确定至少一个候选待传输文件。
在一些实施例中,可以通过匹配算法基于文件及其标记信息,结合预设传输清单确定准备传输的船务文件。例如,有船舶文件分别为A、B和C,其中文件A被标记为船舶航行记录,文件B被标记为船舶人员信息,文件C被标记为船舶安全管理系统运行记录,其中,若船舶航行记录和船舶安全管理系统运行记录为预设传输清单中包含的文件类型,则可以根据上述文件标记信息,将被标记为船舶航行记录的文件A和被标记为船舶安全管理系统运行记录的文件C确定为候选待传输文件。
在一些实施例中,还可以通过其他方式确定候选待传输文件。例如,人工选择文件类型或指定文件作为候选待传输文件。
步骤330,获取船舶的传输带宽。在一些实施例中,步骤330可以由第二获取模块230执行。
传输带宽可以是指船舶的数据传输能力。例如,传输带宽可以指每秒传输船务文件的数据量等。例如,船舶每秒可以传输的数据量为30MB,则传输带宽为30MB/s。
在一些实施例中,可以基于船舶的位置数据以及船舶周围的环境数据确定传输带宽。其中,环境数据可以包括船舶周围其他船舶的数量、天气、时间等。
在一些情况下,船舶需要采用卫星通信方式进行数据传输,而卫星通信传输带宽有限,且受多种因素的影响传输带宽是不固定的。例如,传输带宽受船舶与接收船务文件地点的距离影响,距离远传输受到的干扰也会相对更多,传输带宽可能受限。又例如,传输带宽受船务文件传输时的天气影响,阴天或大雾天气会影响通信质量,使传输带宽受限。再例如,传输带宽受同时进行通讯的船舶数量影响,同一时间段进行通信的船舶数量越多,可利用的传输带宽越小。
当传输带宽过小时,船务文件的传输也会受到影响,因此需要对实时传输带宽进行预测,以更好地确定文件传输计划。
在一些实施例中,可以通过带宽预测模型预测传输带宽,有关带宽预测模型的详细内容可参见图5及其相关描述。
步骤340,基于传输带宽和至少一个候选待传输文件,确定文件传输计划。
文件传输计划可以包括目标传输文件及目标传输文件的传输顺序。其中,目标传输文件可以指最终确定的需要传输的船舶文件。在一些实施例中,目标传输文件可以通过将传输优先级排序表中的部分文件去除后获取。例如,将传输优先级排序表中排序倒数10位的文件去除,得到文件传输计划,进而确定目标传输文件。
在一些实施例中,在一些实施例中,可以将候选待传输文件基于其评估分按从大到小进行排序,从而确定传输优先级排序表。
评估分可以是指对候选待传输文件的用于确定传输顺序的评分。例如,评估分越高,则待传输的船舶文件的传输优先级越高,其传输顺序的排名越靠前。
在一些实施例中,可以根据候选待传输文件及其标记信息确定其评估分。关于评估分确定方法的更多说明,参见图4及其相关描述。
优先级可以是指待传输的船舶文件在传输时传输顺序的排名等级。例如,文件A比文件B的排名等级高,则文件A的优先级大于文件B的优先级,文件A比文件B优先传输。
在一些实施例中,可以基于传输带宽,从传输优先级排序表中确定文件传输计划。例如,已获取包含30个候选待传输文件的传输优先级排序表,当传输带宽较小和/或传输带宽较不稳定时,可以将传输优先级排序表中排名靠后的20个文件去除,此时传输计划是将前10个候选待传输文件按照优先级排序依次传输;当传输带宽较大且较稳定时,确定传输计划是将30个文件按照优先级排序依次传输。
在一些实施例中,还可以基于候选待传输文件大小,按从小到大的顺序进行传输。可以理解的是,在传输带宽有限且不稳定的条件下,传输小文件所花费的时间较少,传输大文件所花费的时间较多,优先传输小文件,可以尽量传输成功一部分文件,从而避免在优先传输大文件过程中传输中断,导致传输失败。
本说明书的一些实施例,可以对待传输的船舶文件进行处理,并结合传输带宽等,确定最终需要传输的文件及传输顺序,可以在传输带宽有限和/或时间紧张的情况下,优先传输比较重要的文件和/或作用较大的文件等,有利于获得更好的数据传输成功率,避免文件传输过程中数据丢失的风险。
图4是根据本说明书一些实施例所示的确定文件评估分的示例性示意图。
如图4所示,在一些实施例中,可以基于至少一个候选待传输文件中每一个文件之间的相关性,构建关系图,用于表示候选待传输文件之间的相关关系400。
在一些实施例中,相关性可以包括文件之间的引用关系和层级关系。
引用关系是指一个文件中引用了其他文件的部分或全部内容而形成的关系。例如,文件A引用了文件B的部分内容,则文件A和文件B之间存在引用关系。在一些实施例中,一个文件被其他文件的引用次数较多,则说明该文件的重要性较高。
层级关系包括一个文件所包含的内容的范围涵盖了另一文件所包含的所有内容而形成的关系。例如,文件C的内容是船舶安全管理系统管理记录,文件D的内容是船舶安全管理系统维护记录,则文件C的内容范围涵盖了文件D的内容,文件C与文件D之间具有层级关系,且文件C是文件D的上层文件。
层级关系还可以包括文件来源对应的层级关系。例如,船舶公司自行编写的文件、来自于船舶运行过程中的数据文件等。其中,与船舶运行相关度高的文件具有更高的层级。关于文件层级关系的划分还可以包括其他形式,具体可以基于实际文件传输需求确定。
在一些实施例中,文件上下层关系可表示文件的重要性大小,文件的层级越高,重要性越高。
关系图是指由文件对应的多个节点与表示文件之间相关性的边所构成的图。
在一些实施例中,可以基于至少一个候选待传输文件中每一个文件之间的相关性,构建关系图。
关系图的节点包括候选待传输文件,节点属性包括标记信息。关系图的边包括相关性,边属性包括相关性的强度值。
在一些实施例中,关系图的边是有向边,例如,如果文件A引用了文件B,文件B可以指向文件A;如果文件A为文件B的下层文件,则文件B可以指向文件A。
在一些实施例中,相关性的强度值可以根据文件中的引用标签区分。引用标签可以是指文件被引用的内容的类别。例如,文件A可以具有参考规范、运行数据、监控影像等引用标签。不同引用标签对应的相关性的强度值可以不同,如,运行数据的相关性的强度值最高,参考规范的相关性的强度值最低。
在一些实施例中,相关性的强度值可以根据节点之间的引用关系确定。例如,文件A被文件B引用的次数越多,则代表文件A和文件B的节点之间相连的边的相关性的强度值越高。
在一些实施例中,相关性的强度值可以基于节点之间的层级关系确定。例如,文件A是文件B的上层文件,文件B是文件C的上层文件,则文件A也是文件C的上层文件。那么,代表文件A和文件C的节点之间相连的边的相关性的强度值高于文件B与文件A、C之间的相关性强度值。
对于关系图中的每一个节点,基于节点的属性以及与其相连接的边的信息,确定节点对应的候选待传输文件的评估分。通过候选待传输文件之间的关系,可以更好地确定候选待传输文件的重要性,从而有利于获得更合理的文件传输顺序,保证文件传输的效率。
在一些实施例中,可以基于评估模型确定候选待传输文件的评估分。
评估模型可以对输入的标记信息进行分析处理,输出为候选待传输文件的评估分。
在一些实施例中,评估模型可以包括但不限于卷积神经网络(ConvolutionalNeural Networks,CNN)、深度神经网络(Deep Neural Networks,DNN)等一种或多种的组合。评估模型的参数可以通过训练得到。
在一些实施例中,可以基于大量历史传输成功的文件获得多组训练样本,每组训练样本可以包括多个训练数据及训练数据对应的标签。训练数据可以包括历史标记信息,标签可以是基于历史标记信息对应的传输成功的文件的评估分结果(如,人工根据标记信息直接标注的评估分)。将带有标签的训练样本输入初始评估模型,通过训练更新初始评估模型的参数,当训练的模型满足预设条件时(如,损失函数收敛,或损失函数值小于预设值),训练结束,获取训练好的评估模型。
在一些实施例中,评估模型还可以包括依次连接的嵌入层与评估分预测层。在一些实施例中,可以将边的信息输入到嵌入层中,输出为边特征。再将边特征和标记信息输入到评估分预测层中,输出为候选待传输文件的评估分。其中,边的信息可以包括边以及边属性,即相关性和相关性的强度值。边特征可以用特征向量表示。
在一些实施例中,嵌入层可以为卷积神经网络模型,评估分预测层可以为深度神经网络模型。
在一些实施例中,可以对嵌入层与评估分预测层进行联合训练。训练数据样本包括历史边的信息、历史标记信息。训练样本的标签包括评估分。将训练样本中的边的信息输入评估模型中的嵌入层,将嵌入层的输出输入评估模型中的评估分预测层,并基于将评估分预测层的输出和标签构建损失函数,并基于损失函数同时迭代更新嵌入层与评估分预测层的参数,直到预设条件被满足训练完成,得到训练好的嵌入层与评估分预测层。
在一些实施例中,评估分可以通过多轮迭代更新得到。在一些实施例中,通过多轮迭代更新上一轮的评估分,直到迭代符合预设条件时,迭代结束。最后更新的评估分作为最终用于排序的分数。
仅作为示例地,迭代计算每个节点的评估分的过程如下:
在第一轮迭代中,对于每一个节点,基于节点总数、相连节点的数量和相连节点在第一轮迭代中的待更新评估分,确定下一轮迭代的待更新评估分。其中,第一轮迭代中的待更新评估分为初始评估分,初始评估分可以是前述评估模型输出的评估分。
在后续每轮迭代中,基于预设算法,对某节点的预设邻度(如,邻度为1)的节点的待更新评估分进行处理,更新该节点的待更新评估分,得到更新后的评估分。各个节点的更新后的评估分将作为下一轮迭代的待更新评估分。
每轮迭代中,每个节点得到更新后的评估分的预设算法可以如下:
Vi′=p*Vi+q*∑(Uk*Rki),k=1,2,3,...,K;i=1,2,3,...A
其中,Vi′表示更新后的节点i的评估分,即下一轮迭代的待更新评估分;Vi表示本轮待更新的节点i的评估分;p、q为权重系数,Uk表示指向节点i的第k个节点的评估分,Rki表示第k个节点指向第i个节点的边的值(即相关性的强度值),K表示与节点i连接的节点一共有K个;A表示节点总数。
在一些实施例中,可以对该节点和预设邻度节点的待更新评估分加权求和得到更新后的评估分,权重为相关性的强度值。其中,通过对节点的重要性进行加权求和,可以提高评估分准确度。
当符合预设条件时,迭代结束。预设条件可以是函数收敛,或迭代次数达到阈值。其中,迭代收敛的阈值可以与前述评估模型的置信度正相关。评估模型的置信度越高,迭代收敛的阈值越大。
在一些实施例中,迭代次数与传输宽带负相关。传输带宽越大,迭代次数越少,从而节省计算时间,提高效率。
在一些实施例中,传输带宽可以通过带宽预测模型确定,关于带宽预测模型的更多内容可参见图5及其相关描述。
本说明书的一些实施例,基于待传输文件之间的关系确定文件的评估分,根据评估分确定文件的传输顺序,可以提高对待传输文件进行分析处理的效率,从而快速准确地确定文件传输顺序。
图5是根据本说明书一些实施例所示的带宽预测模型的结构示意图。如图5所示,在一些实施例中,带宽预测模型530可以包括以下内容。
带宽预测模型530可以用于预测实时传输带宽。在一些实施例中,带宽预测模型530可以包括但不限于卷积神经网络(Convolutional Neural Networks,CNN)、深度神经网络(Deep Neural Networks,DNN)等一种或多种的组合。
在一些实施例中,带宽预测模型530的输入可以包括船舶的位置数据510和船舶周围的环境数据520,输出可以包括传输带宽540。
其中,船舶的位置数据510是指反映船舶当前位置的数据,例如,船舶所处位置的经纬度(如,北纬38°55’44”,东经121°39’17”)、船舶与岸基的距离(如,10km)等。船舶周围的环境数据520是指反映船舶当前所处位置周围的环境情况的数据。例如,时间数据(如,2018年4月30日15:05等)、天气数据(如,小雨、晴等)、周围(如,5km范围内等)船舶数量(如,0艘、10艘等)。传输带宽540可以是一个范围(如,3.0MB/s~4.5MB/s)。
在一些实施例中,带宽预测模型530可以包括嵌入层531和带宽预测层532。
嵌入层531可以对船舶周围的环境数据520进行处理,确定影响系数550。
影响系数550可以表示船舶周围的环境数据520对传输带宽的影响程度。例如,船舶离岸距离远,受干扰多,传输带宽的使用可能受到限制。白天和夜晚,传输带宽可能不同。雨天等天气会影响通信质量,导致传输带宽减小。船舶的附近有多艘其他船舶使用通信也会限制带宽的使用。在一些实施例中,影响系数可以用特征向量表示。仅作为示例地,特征向量可以被表示为(a、b、c),依次对应时间数据、天气数据和船舶数量对传输带宽的影响程度。例如,(0.1、0.4、0.5),表示时间数据、天气数据和船舶数量对传输带宽的影响程度分别为0.1、0.4、0.5。
嵌入层531的输入可以包括船舶周围的环境数据520,嵌入层531的输出可以包括影响系数550。在一些实施例中,嵌入层可以是卷积神经网络(Convolutional NeuralNetworks,CNN)。
带宽预测层532可以对船舶的位置数据510和影响系数550进行处理,确定传输带宽540。带宽预测层532的输入可以包括船舶的位置数据510和影响系数550,输出可以包括传输带宽540。在一些实施例中,带宽预测层可以是深度神经网络(Deep Neural Networks,DNN)。
在一些实施例中,嵌入层531与带宽预测层532可以通过联合训练得到。训练数据样本包括历史船舶周围的环境数据和历史船舶的位置数据等数据。训练样本的标签包括在该历史船舶周围的环境数据和船舶的位置数据的情况下,完成文件成功传输所对应的历史传输带宽。将训练样本中的历史船舶周围的环境数据输入嵌入层,然后将嵌入层的输出和历史船舶的位置数据输入至带宽预测层,并基于将带宽预测层的输出和标签构建损失函数,并基于损失函数同时迭代更新嵌入层与带宽预测层的参数,直到预设条件被满足训练完成,得到训练好的嵌入层与带宽预测层。其中,预设条件可以是更新后的带宽预测层的损失函数小于阈值、收敛,或训练迭代次数达到阈值。
本说明书的一些实施例,能够结合船舶周围的环境情况(如,实际的天气情况、时间情况、以及周围船舶数量)进行预测,提高传输带宽的预测准确度,进一步基于传输带宽确定传输顺序,提高传输效率。
在一些实施例中,本说明书的一些实施例包括一种船务文件传输控制装置,包括处理器,该处理器用于执行本说明书中的方法。
在一些实施例中,本说明书的一些实施例包括一种计算机可读存储介质,存储介质存储计算机指令,当计算机读取存储介质中的计算机指令后,计算机执行本说明书中方法。
上文已对基本概念做了描述,显然,对于本领域技术人员来说,上述详细披露仅仅作为示例,而并不构成对本说明书的限定。虽然此处并没有明确说明,本领域技术人员可能会对本说明书进行各种修改、改进和修正。该类修改、改进和修正在本说明书中被建议,所以该类修改、改进、修正仍属于本说明书示范实施例的精神和范围。
同时,本说明书使用了特定词语来描述本说明书的实施例。如“一个实施例”、“一实施例”、和/或“一些实施例”意指与本说明书至少一个实施例相关的某一特征、结构或特点。因此,应强调并注意的是,本说明书中在不同位置两次或多次提及的“一实施例”或“一个实施例”或“一个替代性实施例”并不一定是指同一实施例。此外,本说明书的一个或多个实施例中的某些特征、结构或特点可以进行适当的组合。
最后,应当理解的是,本说明书中所述实施例仅用以说明本说明书实施例的原则。其他的变形也可能属于本说明书的范围。因此,作为示例而非限制,本说明书实施例的替代配置可视为与本说明书的教导一致。相应地,本说明书的实施例不仅限于本说明书明确介绍和描述的实施例。

Claims (10)

1.一种船务文件传输计划确定方法,其特征在于,包括:
获取待传输的船舶文件及其标记信息;
基于所述待传输的船舶文件及所述标记信息,与预设传输清单进行匹配,基于所述预设传输清单中包括的文件类型,确定候选待传输文件;
基于船舶的位置数据以及船舶周围的环境数据,通过宽带预测模型,确定传输带宽;其中,所述带宽预测模型包括嵌入层和带宽预测层,所述嵌入层对所述船舶周围的环境数据进行处理,确定影响系数;所述宽带预测层对所述影响系数和所述船舶的位置数据进行处理,确定所述传输宽带;
基于所述传输带宽和所述候选待传输文件,确定文件传输计划。
2.根据权利要求1所述的方法,其特征在于,所述船舶周围的环境数据包括:时间数据、天气数据、周围船舶数量;
所述船舶的位置数据包括:所述船舶所处位置的经纬度、所述船舶与岸基的距离。
3.根据权利要求1所述的方法,其特征在于,所述基于所述传输带宽和所述候选待传输文件,确定文件传输计划,包括:
根据评估模型对所述候选待传输文件的所述标记信息进行处理,确定所述候选待传输文件的文件评估分,所述评估模型为机器学习模型;
根据所述文件评估分确定所述候选待传输文件的传输优先级排序表;
基于所述传输带宽,从所述传输优先级排序表中确定文件传输计划,所述文件传输计划包括目标传输文件及所述目标传输文件的传输顺序。
4.根据权利要求3所述的方法,其特征在于,
所述评估模型包括嵌入层和评估分预测层,所述嵌入层输入为关系图中与所述候选待传输文件对应节点连接的边的信息,输出为边特征;所述评估分预测层的输入为所述边特征和所述候选待传输文件的所述标记信息,输出为所述文件评估分;其中,
所述关系图的节点包括所述候选待传输文件,所述关系图的边包括相关性。
5.根据权利要求4所述的方法,其特征在于,还包括:
对所述文件评估分进行多轮迭代更新,直至迭代符合预设条件,将最后更新的文件评估分用于确定所述传输优先级排序表,其中:
在第一轮迭代中,基于所述关系图中节点总数、与所述候选传输文件对应节点的相连节点的数量和所述相连节点在第一轮迭代中的待更新评估分,确定下一轮迭代的待更新评估分,其中,所述第一轮迭代所述中的待更新评估分为所述评估模型输出的所述文件评估分;
在后续每轮迭代中,基于预设算法,对所述关系图中所述候选传输文件对应节点的预设邻度的其他节点的待更新评估分进行处理,更新所述候选传输文件对应节点的待更新评估分,确定下一轮迭代的待更新评估分。
6.一种船务文件传输计划确定系统,其特征在于,包括:
第一获取模块,所述第一获取模块用于获取待传输的船舶文件及其标记信息;
第一确定模块,所述第一确定模块用于基于所述待传输的船舶文件及所述标记信息,与预设传输清单进行匹配,基于所述预设传输清单中包括的文件类型,确定候选待传输文件;
第二获取模块,所述第二获取模块用于基于船舶的位置数据以及船舶周围的环境数据,通过宽带预测模型,确定传输带宽;其中,所述带宽预测模型包括嵌入层和带宽预测层,所述嵌入层对所述船舶周围的环境数据进行处理,确定影响系数;所述宽带预测层对所述影响系数和所述船舶的位置数据进行处理,确定所述传输宽带;
第二确定模块,所述第二确定模块用于基于所述传输带宽和所述候选待传输文件,确定文件传输计划。
7.根据权利要求6所述的系统,其特征在于,所述第二确定模块,进一步用于:
根据评估模型对所述候选待传输文件的所述标记信息进行处理,确定所述候选待传输文件的文件评估分,所述评估模型为机器学习模型;
根据所述文件评估分确定所述候选待传输文件的传输优先级排序表;
基于所述传输带宽,从所述传输优先级排序表中确定文件传输计划,所述文件传输计划包括目标传输文件及所述目标传输文件的传输顺序。
8.根据权利要求7所述的系统,其特征在于,所述评估模型包括嵌入层和评估分预测层,所述嵌入层输入为关系图中与所述候选待传输文件对应节点连接的边的信息,输出为边特征;所述评估分预测层的输入为所述边特征和所述候选待传输文件的所述标记信息,输出为所述文件评估分;其中,
所述关系图的节点包括所述候选待传输文件,所述关系图的边包括所述相关性。
9.根据权利要求8所述的系统,其特征在于,所述第二确定模块,进一步用于:
对所述文件评估分进行多轮迭代更新,直至迭代符合预设条件,将最后更新的文件评估分用于确定所述传输优先级排序表,其中:
在第一轮迭代中,基于所述关系图中节点总数、与所述候选传输文件对应节点的相连节点的数量和所述相连节点在第一轮迭代中的待更新评估分,确定下一轮迭代的待更新评估分,其中,所述第一轮迭代所述中的待更新评估分为所述评估模型输出的所述文件评估分;
在后续每轮迭代中,基于预设算法,对所述关系图中所述候选传输文件对应节点的预设邻度的其他节点的待更新评估分进行处理,更新所述候选传输文件对应节点的待更新评估分,确定下一轮迭代的待更新评估分。
10.一种船务文件传输计划确定装置,包括处理器,所述处理器用于执行权利要求1~5中任一项所述的方法。
CN202211285247.3A 2022-06-27 2022-06-27 一种船务文件传输计划确定方法、系统和装置 Active CN115460198B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211285247.3A CN115460198B (zh) 2022-06-27 2022-06-27 一种船务文件传输计划确定方法、系统和装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202210732209.1A CN114827132B (zh) 2022-06-27 2022-06-27 一种船务文件传输控制方法、系统、装置和存储介质
CN202211285247.3A CN115460198B (zh) 2022-06-27 2022-06-27 一种船务文件传输计划确定方法、系统和装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202210732209.1A Division CN114827132B (zh) 2022-06-27 2022-06-27 一种船务文件传输控制方法、系统、装置和存储介质

Publications (2)

Publication Number Publication Date
CN115460198A true CN115460198A (zh) 2022-12-09
CN115460198B CN115460198B (zh) 2023-03-31

Family

ID=82520486

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202210732209.1A Active CN114827132B (zh) 2022-06-27 2022-06-27 一种船务文件传输控制方法、系统、装置和存储介质
CN202211285247.3A Active CN115460198B (zh) 2022-06-27 2022-06-27 一种船务文件传输计划确定方法、系统和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202210732209.1A Active CN114827132B (zh) 2022-06-27 2022-06-27 一种船务文件传输控制方法、系统、装置和存储介质

Country Status (1)

Country Link
CN (2) CN114827132B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103947231A (zh) * 2011-11-16 2014-07-23 奥迪股份公司 用于在移动终端设备与至少一个位置固定的数据网络之间传输数据的方法、移动终端设备以及具有移动终端设备的汽车
CN104317658A (zh) * 2014-10-17 2015-01-28 华中科技大学 一种基于MapReduce的负载自适应任务调度方法
CN107276913A (zh) * 2017-05-23 2017-10-20 努比亚技术有限公司 批量文件的传输方法、终端及计算机可读存储介质
CN109213754A (zh) * 2018-03-29 2019-01-15 北京九章云极科技有限公司 一种数据处理系统及数据处理方法
US20190050404A1 (en) * 2016-04-15 2019-02-14 Quantel Limited Media file systems and methods of storing media files in a media file system
CN111597446A (zh) * 2020-05-13 2020-08-28 腾讯科技(深圳)有限公司 基于人工智能的内容推送方法、装置、服务器和存储介质
US20200404044A1 (en) * 2019-06-18 2020-12-24 Software Ag Diversified file transfer
CN112506864A (zh) * 2020-12-18 2021-03-16 北京百度网讯科技有限公司 文件检索的方法、装置、电子设备及可读存储介质
CN113474763A (zh) * 2019-04-05 2021-10-01 思杰系统有限公司 增强型的文件共享系统和方法
CN113904948A (zh) * 2021-11-12 2022-01-07 福州大学 基于跨层的多维参数的5g网络带宽预测系统及方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10437994B1 (en) * 2016-05-25 2019-10-08 Symantec Corporation Systems and methods for determining the reputations of unknown files
CN108737562A (zh) * 2018-06-07 2018-11-02 山东中创软件商用中间件股份有限公司 一种文件传输方法及相关装置
CN108965465B (zh) * 2018-08-09 2021-10-29 清华大学 一种文件传输的方法、装置及计算机存储介质
CN110110715A (zh) * 2019-04-30 2019-08-09 北京金山云网络技术有限公司 文本检测模型训练方法、文本区域、内容确定方法和装置
CN111737161B (zh) * 2020-05-22 2024-03-26 深圳市战音科技有限公司 Flash存储器的文件传输方法、终端及存储介质
CN112528660B (zh) * 2020-12-04 2023-10-24 北京百度网讯科技有限公司 处理文本的方法、装置、设备、存储介质和程序产品
CN112600928A (zh) * 2020-12-17 2021-04-02 北京锐安科技有限公司 文件传输方法、装置、电子设备及介质
CN113596148A (zh) * 2021-07-27 2021-11-02 上海商汤科技开发有限公司 一种数据传输方法、系统、装置、计算设备和存储介质
CN114418463B (zh) * 2022-03-28 2022-07-05 河北东来工程技术服务有限公司 一种船舶任务管理的方法、系统、装置和可读存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103947231A (zh) * 2011-11-16 2014-07-23 奥迪股份公司 用于在移动终端设备与至少一个位置固定的数据网络之间传输数据的方法、移动终端设备以及具有移动终端设备的汽车
CN104317658A (zh) * 2014-10-17 2015-01-28 华中科技大学 一种基于MapReduce的负载自适应任务调度方法
US20190050404A1 (en) * 2016-04-15 2019-02-14 Quantel Limited Media file systems and methods of storing media files in a media file system
CN107276913A (zh) * 2017-05-23 2017-10-20 努比亚技术有限公司 批量文件的传输方法、终端及计算机可读存储介质
CN109213754A (zh) * 2018-03-29 2019-01-15 北京九章云极科技有限公司 一种数据处理系统及数据处理方法
CN113474763A (zh) * 2019-04-05 2021-10-01 思杰系统有限公司 增强型的文件共享系统和方法
US20200404044A1 (en) * 2019-06-18 2020-12-24 Software Ag Diversified file transfer
CN111597446A (zh) * 2020-05-13 2020-08-28 腾讯科技(深圳)有限公司 基于人工智能的内容推送方法、装置、服务器和存储介质
CN112506864A (zh) * 2020-12-18 2021-03-16 北京百度网讯科技有限公司 文件检索的方法、装置、电子设备及可读存储介质
CN113904948A (zh) * 2021-11-12 2022-01-07 福州大学 基于跨层的多维参数的5g网络带宽预测系统及方法

Also Published As

Publication number Publication date
CN115460198B (zh) 2023-03-31
CN114827132B (zh) 2022-09-09
CN114827132A (zh) 2022-07-29

Similar Documents

Publication Publication Date Title
CN111914156B (zh) 自适应标签感知的图卷积网络跨模态检索方法、系统
CN113553682B (zh) 一种数据驱动的多层次船舶航路网络构建方法
CN107289947A (zh) 一种船载智能气象导航系统
CN115410420B (zh) 一种船舶安全航行管理方法和系统
CN112085286A (zh) 一种船舶行为预测模型建立方法及船舶行为预测模型
CN113936275A (zh) 一种基于区域特征对齐的无监督域适应语义分割方法
CN109710842B (zh) 业务信息的推送方法、装置及可读存储介质
CN113836925B (zh) 预训练语言模型的训练方法、装置、电子设备及存储介质
CN110968730A (zh) 音频标记处理方法、装置、计算机设备及存储介质
CN112347218A (zh) 无人船艇的环境地图生成方法及无人船艇感知系统
CN116229170A (zh) 基于任务迁移的联邦无监督图像分类模型训练方法、分类方法及设备
CN113962473A (zh) 船舶航线规划方法、装置、电子设备和存储介质
Mieczyńska et al. DBSCAN algorithm for AIS data reconstruction
US10397747B2 (en) Entity tracking
CN113139051B (zh) 文本分类模型训练方法、文本分类方法、设备和介质
CN115460198B (zh) 一种船务文件传输计划确定方法、系统和装置
CN116226435B (zh) 基于跨模态检索的遥感图像与ais信息的关联匹配方法
CN108052629A (zh) 一种基于高精度dem数据的快速海陆判断方法
CN116992880A (zh) 建筑物名称的识别方法、装置、电子设备和存储介质
Fikioris et al. Optimizing vessel trajectory compression for maritime situational awareness
CN114663751A (zh) 一种基于增量学习技术的输电线路缺陷识别方法和系统
CN114120287A (zh) 数据处理方法、装置、计算机设备和存储介质
Liu et al. Big data analytics for assistance operation identification in ice-covered waters
CN110363369B (zh) 船舶搁置状态判断方法、装置、设备及其存储介质
CN115660539B (zh) 集装箱跟踪数据处理方法、系统、设备、存储介质和芯片

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant