CN115632992A - 数据传输方法、装置、计算机设备和存储介质 - Google Patents

数据传输方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN115632992A
CN115632992A CN202210994888.XA CN202210994888A CN115632992A CN 115632992 A CN115632992 A CN 115632992A CN 202210994888 A CN202210994888 A CN 202210994888A CN 115632992 A CN115632992 A CN 115632992A
Authority
CN
China
Prior art keywords
data
service data
transmission
service
importance level
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210994888.XA
Other languages
English (en)
Inventor
钱学广
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN202210994888.XA priority Critical patent/CN115632992A/zh
Publication of CN115632992A publication Critical patent/CN115632992A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/10Flow control; Congestion control
    • H04L47/24Traffic characterised by specific attributes, e.g. priority or QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/90Buffering arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本申请涉及数据处理领域,可以实现根据业务数据的传输参数异步传输业务数据,解决了流量争抢的问题,提高了数据传输的可靠性与效率。涉及一种数据传输方法、装置、计算机设备和存储介质,该方法包括:当接收到数据请求方的数据传输请求时,确定数据请求方的待传输的至少一个业务数据,并将每个业务数据存储至预设的数据缓存区;确定每个业务数据的传输参数,传输参数包括数据重要级别、请求时间以及数据量;基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方。此外,本申请还涉及区块链技术,业务数据可存储于区块链中。

Description

数据传输方法、装置、计算机设备和存储介质
技术领域
本申请涉及数据处理领域,尤其涉及一种数据传输方法、装置、计算机设备和存储介质。
背景技术
在企业的内部数据系统与外部数据系统对接时,由于业务数据的保密性,通常需要租用网络运营商的专线宽带。在业务数据实时传输过程中,专线宽带的带宽通常是固定的,当请求方较多或业务数据的传输数据量较大时,存在流量争抢的情况,降低了数据传输的效率,同时还容易导致数据传输中断或丢失,降低了数据传输的可靠性的问题。由于专线宽带的费用较高,考虑到成本因素,一般不采用升级专线宽带的带宽来解决流量争抢的问题。
因此,如何提高数据传输的可靠性和效率成为亟需解决的问题。
发明内容
本申请提供了一种数据传输方法、装置、计算机设备和存储介质,通过基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方,可以实现根据业务数据的传输参数异步传输业务数据,解决了流量争抢的问题,提高了数据传输的可靠性与效率。
第一方面,本申请提供了一种数据传输方法,所述方法包括:
当接收到数据请求方的数据传输请求时,确定所述数据请求方的待传输的至少一个业务数据,并将每个所述业务数据存储至预设的数据缓存区;
确定每个所述业务数据的传输参数,所述传输参数包括数据重要级别、请求时间以及数据量;
基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方。
第二方面,本申请还提供了一种数据传输装置,所述装置包括:
数据缓存模块,用于当接收到数据请求方的数据传输请求时,确定所述数据请求方的待传输的至少一个业务数据,并将每个所述业务数据存储至预设的数据缓存区;
传输参数确定模块,用于确定每个所述业务数据的传输参数,所述传输参数包括数据重要级别、请求时间以及数据量;
数据传输模块,用于基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方。
第三方面,本申请还提供了一种计算机设备,所述计算机设备包括存储器和处理器;
所述存储器,用于存储计算机程序;
所述处理器,用于执行所述计算机程序并在执行所述计算机程序时实现如上述的数据传输方法。
第四方面,本申请还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时使所述处理器实现如上述的数据传输方法。
本申请公开了一种数据传输方法、装置、计算机设备和存储介质,通过当接收到数据请求方的数据传输请求时,确定数据请求方的待传输的至少一个业务数据,并将每个业务数据存储至预设的数据缓存区,后续可以将数据缓存区中的业务数据发送至数据接收方,实现异步传输数据;通过确定每个业务数据的传输参数,可以获得每个业务数据的数据重要级别、请求时间以及数据量等传输参数;通过基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方,可以实现根据业务数据的传输参数异步传输业务数据,每次传输单一的业务数据,解决了流量争抢的问题,提高了数据传输的可靠性与效率。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种数据传输方法的示意性流程图;
图2是现有技术中的传输业务数据的示意图;
图3是本申请实施例提供的一种传输业务数据的示意图;
图4是本申请实施例提供的一种传输业务数据的子步骤的示意性流程图;
图5是本申请实施例提供的另一种传输业务数据的子步骤的示意性流程图;
图6是本申请实施例提供的另一种传输业务数据的子步骤的示意性流程图;
图7是本申请实施例提供的一种数据传输装置的示意性框图;
图8是本申请实施例提供的一种计算机设备的结构示意性框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
附图中所示的流程图仅是示例说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解、组合或部分合并,因此实际执行的顺序有可能根据实际情况改变。
应当理解,在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
本申请的实施例提供了一种数据传输方法、装置、计算机设备和存储介质。其中,该数据传输方法可以应用于服务器或终端中,通过基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方,可以实现根据业务数据的传输参数异步传输业务数据,解决了流量争抢的问题,提高了数据传输的可靠性与效率。
其中,服务器可以是独立的服务器,也可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(ContentDelivery Network,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。终端可以是智能手机、平板电脑、笔记本电脑和台式电脑等电子设备。
下面结合附图,对本申请的一些实施方式作详细说明。在不冲突的情况下,下述的实施例及实施例中的特征可以相互组合。
如图1所示,数据传输方法包括步骤S10至步骤S30。
步骤S10、当接收到数据请求方的数据传输请求时,确定所述数据请求方的待传输的至少一个业务数据,并将每个所述业务数据存储至预设的数据缓存区。
需要说明的是,本申请实施例提供的数据传输方法可以应用于内部数据系统向外部数据系统传输业务数据的场景中,通过基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方,可以实现根据业务数据的传输参数异步传输业务数据,解决了流量争抢的问题,提高了数据传输的可靠性与效率。
需要说明的是,内部数据系统与外部数据系统之间设置有防火墙;当在防火墙上开通访问外部数据系统的权限后,用户可以通过专线宽带向外部数据系统传输业务数据。其中,外部数据系统可以是一些政府部门使用的数据系统。
其中,专线宽带可以是SDH(Synchronous Digital Hierarchy,同步数字体系)、MSTP(Multiple Spanning Tree Protocol,多生产树协议)、IPRan(基于IP的传送网)、ATM(Asynchronous Transfer Mode,异步传输模式)等类型。
请参阅图2,图2是现有技术中的传输业务数据的示意图。如图2所示,数据请求方1、数据请求方2、数据请求方3以及数据请求方4可以经防火墙,通过专线宽带实时传输业务数据至外部数据系统。当有多个数据请求方同时传输业务数据、且数据量过大时,专线宽带的带宽无法满足,则会导致流量争抢、传输阻塞的情况出现,还容易导致数据传输中断或丢失。
需要说明的是,数据请求方是指发起数据传输请求的服务器或终端。例如,当需要传输业务数据至外部数据系统时,用户可以通过服务器或终端上的内部数据系统发起数据传输请求。
在本申请实施例中,可以设置一个任务管理组件,用于执行本申请实施例提供的数据传输方法。其中,可以在防火墙上开通任务管理组件通过专线宽带访问外部数据系统的权限,具体的开通过程,在此不作限定。通过开通任务管理组件访问外部数据系统的权限,可以降低因数据请求方变更,需要重复开通新用户访问外部数据系统的权限的频次。
请参阅图3,图3是本申请实施例提供的一种传输业务数据的示意图。如图3所示,当接收到数据请求方的数据传输请求时,任务管理组件可以确定数据请求方的待传输的至少一个业务数据,并将每个业务数据存储至预设的数据缓存区。然后,确定每个业务数据的传输参数,基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方。
示例性的,当多个数据请求方同时发起数据传输请求,可以确定待传输的业务数据有多个。
示例性的,数据缓存区可以是存储介质。其中,存储介质可以包括但不限于智能存储卡(Smart Media Card,SMC)、网络附属存储器(Network Attached Storage,NAS)、安全数字卡(Secure Digital Card,SD Card)以及闪存卡(Flash Card)等等。
在本申请实施例中,为进一步保证上述业务数据的私密和安全性,上述业务数据可以存储于一区块链的节点中。
通过当接收到数据请求方的数据传输请求时,确定数据请求方的待传输的至少一个业务数据,并将每个业务数据存储至预设的数据缓存区,后续可以将数据缓存区中的业务数据发送至数据接收方,实现异步传输数据。
步骤S20、确定每个所述业务数据的传输参数,所述传输参数包括数据重要级别、请求时间以及数据量。
示例性的,可以通过数据传输请求确定业务数据的数据重要级别和请求时间,通过业务数据的占用空间确定数据量。
其中,数据传输请求可以包括数据重要级别;请求时间是指发起数据传输请求的时间,可以根据接收到数据传输请求的时间确定。
需要说明的是,用户在发起数据传输请求时,可以将业务数据的数据重要级别添加至数据传输请求中。从而可以通过解析每个业务数据的数据传输请求,获得每个业务数据的数据重要级别。
通过确定每个业务数据的传输参数,可以获得每个业务数据的数据重要级别、请求时间以及数据量等传输参数。
步骤S30、基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方。
在本申请实施例中,可以基于贪心算法,根据每个业务数据的数据重要级别、请求时间以及数据量,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方。在本申请实施例中,将对如何实现传输业务数据进行详细说明。
需要说明的是,贪心算法的基本思想是找出整体当中每个小的局部的最优解,并且将所有的这些局部最优解合起来形成整体上的一个最优解。
通过基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方,可以实现根据业务数据的传输参数异步传输业务数据,每次传输单一的业务数据,解决了流量争抢的问题,提高了数据传输的可靠性与效率。
请参阅图4,图4是本申请实施例提供的一种传输业务数据的子步骤的示意性流程图,具体可以包括以下步骤S301和步骤S302。
步骤S301、基于预设的数据重要级别与权重值之间的对应关系,根据每个所述业务数据的数据重要级别,确定每个所述业务数据对应的第一权重值。
示例性的,可以预先预定数据重要级别与权重值之间的对应关系,如表1所示。
表1
数据重要级别 权重值
一级 1
二级 2
三级 3
四级 4
五级 5
示例性的,可以基于上述表1中的数据重要级别与权重值之间的对应关系,根据每个业务数据的数据重要级别,确定每个业务数据对应的第一权重值。例如,对于业务数据A,若业务数据A的数据重要级别为一级,则可以确定业务数据A对应的第一权重值为1。又例如,对于业务数据B,若业务数据B的数据重要级别为五级,则可以确定业务数据B对应的第一权重值为5。
步骤S302、基于所述专线宽带,依次将所述数据缓存区中的第一权重值最大的业务数据发送至所述数据接收方。
在本申请实施中,在确定业务数据对应的第一权重值之后,可以根据第一权重值将业务数据发送至数据接收方。其中,第一权重值大的业务数据,优先发送至数据接收方。
示例性的,可以基于专线宽带,依次将数据缓存区中的第一权重值最大的业务数据发送至数据接收方。例如,对于业务数据A、业务数据B和业务数据C,若业务数据A的第一权重值为1,业务数据B的第一权重值为5,业务数据C的第一权重值为3,则先发送业务数据B,再发送业务数据C,最后发送业务数据A。
通过根据每个业务数据的数据重要级别,确定每个业务数据对应的第一权重值,并基于专线宽带,依次将数据缓存区中的第一权重值最大的业务数据发送至数据接收方,可以实现根据数据重要级别传输业务数据,每次传输单一的业务数据,解决了流量争抢的问题,提高了数据传输的可靠性与效率。
需要说明的是,在本申请实施例中,可以根据数据重要级别确定每个业务数据发送至数据接收方的顺序,但当存在数据重要级别相同的业务数据时,可以根据请问时间来确定数据重要级别相同的业务数据的发送顺序。
在一些实施例中,基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方,可以包括:当存在数据重要级别相同的第一业务数据时,基于每个第一业务数据的请求时间,依次将数据缓存区中的请求时间最早的第一业务数据通过专线宽带发送至数据接收方。
示例性的,当存在数据重要级别相同的业务数据B和业务数据D时,若业务数据B的请求时间为a1,业务数据的请求时间为a2,其中,a1<a2,则可以先发送业务数据B,再发送业务数据D。
示例性的,对于数据重要级别相同的第一业务数据时,还可以基于先进先出的方式,依次将数据缓存区中的第一业务数据通过专线宽带发送至数据接收方。例如,当业务数据B和业务数据D的数据重要级别相同时,若业务数据B先于业务数据D存储至数据缓存区,则可以先发送业务数据B,再发送业务数据D。
通过在存在数据重要级别相同的第一业务数据时,基于每个第一业务数据的请求时间,依次将数据缓存区中的请求时间最早的第一业务数据通过专线宽带发送至数据接收方,可以避免数据重要级别相同的业务数据出现流量争抢的问题,提高了传输业务数据的效率和可靠性。
需要说明的是,在本申请实施例中,当存在数据重要级别相同且请求时间相同的业务数据时,可以根据数据重要级别与数据量来确定业务数据的发送顺序。
请参阅图5,图5是本申请实施例提供的另一种传输业务数据的子步骤的示意性流程图,具体可以包括以下步骤S303和步骤S304。
步骤S303、当存在数据重要级别相同且请求时间相同的第二业务数据时,根据每个所述第二业务数据的数据重要级别与数据量,确定每个所述第二业务数据对应的第二权重值。
需要说明的是,对于数据重要级别相同且请求时间相同的第二业务数据,可以根据第二业务数据的数据重要级别与数据量的比值,确定相应第二业务数据对应的第二权重值。可以理解的是,第二权重值相当于第二业务数据的数据重要级别的单位权重值。
在一些实施例中,根据每个第二业务数据的数据重要级别与数据量,确定每个第二业务数据对应的第二权重值,可以包括:基于预设的数据重要级别与权重值之间预设的对应关系,根据每个第二业务数据的数据重要级别,确定每个第二业务数据对应的第一权重值;将每个第二业务数据的第一权重值与数据量的比值,确定为每个第二业务数据对应的第二权重值。
示例性的,可以基于上述表1中的数据重要级别与权重值之间的对应关系,根据每个第二业务数据的数据重要级别,确定每个第二业务数据对应的第一权重值。
示例性的,可以将每个第二业务数据的第一权重值与数据量的比值,确定为每个第二业务数据对应的第二权重值。例如,对于数据重要级别相同且请求时间相同的业务数据A和业务数据E,若业务数据A的第一权重值为1,数据量为5M,业务数据E的第一权重值为1,数据量为10M,则可以确定业务数据A对应的第二权重值为1/5=0.2,业务数据E对应的第二权重值为1/10=0.1。
步骤S304、基于所述专线宽带,依次将所述数据缓存区中的第二权重值最大的第二业务数据发送至所述数据接收方。
示例性的,在确定每个第二业务数据对应的第二权重值之后,可以基于专线宽带,依次将数据缓存区中的第二权重值最大的第二业务数据发送至数据接收方。例如,对于数据重要级别相同且请求时间相同的业务数据A和业务数据E,若业务数据A对应的第二权重值为0.2,业务数据E对应的第二权重值为0.1,则可以先发送业务数据A,再发送业务数据E。
通过在当存在数据重要级别相同且请求时间相同的第二业务数据时,根据每个第二业务数据的数据重要级别与数据量,确定每个第二业务数据对应的第二权重值,并基于专线宽带,依次将数据缓存区中的第二权重值最大的第二业务数据发送至数据接收方,可以避免数据重要级别相同且请求时间相同的业务数据出现流量争抢的问题,提高了传输业务数据的效率和可靠性。
请参阅图6,图6是本申请实施例提供的另一种传输业务数据的子步骤的示意性流程图,具体可以包括以下步骤S305和步骤S306。
步骤S305、当存在传输参数相同的第三业务数据时,根据所述第三业务数据的数量对所述专线宽带进行平分,得到每个所述第三业务数据对应的子专线宽带。
示例性的,传输参数相同的第三业务数据是指数据重要级别、请求时间以及数据量都相同的业务数据。
在本申请实施例中,当存在传输参数相同的第三业务数据时,可以根据第三业务数据的数量对专线宽带进行平分,采用并行传输的方式传输第三业务数据至数据接收方。
示例性的,可以根据第三业务数据的数量对专线宽带的带宽进行平分,得到每个第三业务数据对应的子专线宽带。例如,当存在传输参数相同的第三业务数据的数量为2、专线宽带的带宽为10M时,可以将专线宽带平分为两条带宽为5M的子专线宽带。又例如,当存在传输参数相同的第三业务数据的数量为5、专线宽带的带宽为100M时,可以将专线宽带平分为五条带宽为10M的子专线宽带。
步骤S306、将每个所述第三业务数据通过相应的子专线宽带传输至所述数据接收方。
示例性的,可以创建与第三业务数据的数量匹配的传输任务,执行传输任务,将每个第三业务数据通过相应的子专线宽带传输至数据接收方。
例如,对于数据参数相同的业务数据A和业务数据F,可以创建第一传输任务和第二传输任务;然后,执行第一传输任务,将业务数据A通过带宽为5M的子专线宽带传输至数据接收方,以及,执行第二传输任务,将业务数据F通过另一带宽为5M的子专线宽带传输至数据接收方。
通过在存在传输参数相同的第三业务数据时,根据第三业务数据的数量对专线宽带进行平分,并将每个第三业务数据通过相应的子专线宽带传输至数据接收方,实现通过多路子专线宽带并行传输多个业务数据,可以避免数据参数相同的业务数据出现流量争抢的问题,提高了传输业务数据的效率和可靠性。
在一些实施例中,在基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方之前,本申请实施例提供的数据传输方法还包括:对数据接收方进行网络连通性验证。
示例性的,对数据接收方进行网络连通性验证,可以查看数据接收方的IP地址是否可以正常连通,还可以查看数据接收方的端口是否可以访问。
通过对数据接收方进行网络连通性验证,可以降低业务数据出现传输失败的概率,提高了业务数据的传输效率。
在一些实施例中,在基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方之后,本申请实施例提供的数据传输方法还包括:获取每个业务数据的数据传输结果,并向数据请求方输出数据传输结果,其中,数据传输结果包括传输状态、传输时间以及传输时长。
示例性的,可以数据请求方的显示界面显示传输状态、传输时间以及传输时长等信息。其中,传输状态可以包括传输成功或传输失败。
通过获取每个业务数据的数据传输结果,并向数据请求方输出数据传输结果,可以使得用户方便地查看业务数据的数据传输结果。
在一些实施例中,在基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方之后,本申请实施例提供的数据传输方法还包括:当检测到传输失败的业务数据时,对传输失败的业务数据进行断点续传。
需要说明的是,断点续传是指在上传数据时,将数据划分为几个部分,每一个部分数据采用一个线程进行上传,如果碰到网络故障,可以从已经上传的部分开始继续上传未完成的部分,而没有必要从头开始上传下载。从而,可以节省时间,提高速度。
通过对传输失败的业务数据进行断点续传,可以实现在传输失败时,自动发起断点续传,可以提高业务数据的传输效率,同时,无需用户人工进行操作,节省人力。
上述实施例提供的数据传输方法,通过当接收到数据请求方的数据传输请求时,确定数据请求方的待传输的至少一个业务数据,并将每个业务数据存储至预设的数据缓存区,后续可以将数据缓存区中的业务数据发送至数据接收方,实现异步传输数据;通过确定每个业务数据的传输参数,可以获得每个业务数据的数据重要级别、请求时间以及数据量等传输参数;通过基于贪心算法,根据每个业务数据的传输参数,将数据缓存区中的每个业务数据通过专线宽带发送至数据接收方,可以实现根据业务数据的传输参数异步传输业务数据,每次传输单一的业务数据,解决了流量争抢的问题,提高了数据传输的可靠性与效率;通过在存在传输参数相同的第三业务数据时,根据第三业务数据的数量对专线宽带进行平分,并将每个第三业务数据通过相应的子专线宽带传输至数据接收方,实现通过多路子专线宽带并行传输多个业务数据,可以避免数据参数相同的业务数据出现流量争抢的问题,提高了传输业务数据的效率和可靠性;通过对数据接收方进行网络连通性验证,可以降低业务数据出现传输失败的概率,提高了业务数据的传输效率;通过对传输失败的业务数据进行断点续传,可以实现在传输失败时,自动发起断点续传,可以提高业务数据的传输效率,同时,无需用户人工进行操作,节省人力。
请参阅图7,图7是本申请的实施例还提供一种数据传输装置1000的示意性框图,该数据传输装置用于执行前述的数据传输方法。其中,该数据传输装置可以配置于服务器或终端中。
如图7所示,该数据传输装置1000,包括:数据缓存模块1001、传输参数确定模块1002和数据传输模块1003。
数据缓存模块1001,用于当接收到数据请求方的数据传输请求时,确定所述数据请求方的待传输的至少一个业务数据,并将每个所述业务数据存储至预设的数据缓存区。
传输参数确定模块1002,用于确定每个所述业务数据的传输参数,所述传输参数包括数据重要级别、请求时间以及数据量。
数据传输模块1003,用于基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方。
需要说明的是,所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的装置和各模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
上述的装置可以实现为一种计算机程序的形式,该计算机程序可以在如图8所示的计算机设备上运行。
请参阅图8,图8是本申请实施例提供的一种计算机设备的结构示意性框图。
请参阅图8,该计算机设备包括通过系统总线连接的处理器和存储器,其中,存储器可以包括存储介质和内存储器。其中,存储介质可以是非易失性存储介质,也可以是易失性存储介质。
处理器用于提供计算和控制能力,支撑整个计算机设备的运行。
内存储器为存储介质中的计算机程序的运行提供环境,该计算机程序被处理器执行时,可使得处理器执行任意一种数据传输方法。
应当理解的是,处理器可以是中央处理单元(Central Processing Unit,CPU),该处理器还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中,通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
其中,在一个实施例中,所述处理器用于运行存储在存储器中的计算机程序,以实现如下步骤:
当接收到数据请求方的数据传输请求时,确定所述数据请求方的待传输的至少一个业务数据,并将每个所述业务数据存储至预设的数据缓存区;确定每个所述业务数据的传输参数,所述传输参数包括数据重要级别、请求时间以及数据量;基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方。
在一个实施例中,所述处理器在实现基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方时,用于实现:
基于预设的数据重要级别与权重值之间的对应关系,根据每个所述业务数据的数据重要级别,确定每个所述业务数据对应的第一权重值;基于所述专线宽带,依次将所述数据缓存区中的第一权重值最大的业务数据发送至所述数据接收方。
在一个实施例中,所述处理器在实现基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方时,用于实现:
当存在数据重要级别相同的第一业务数据时,基于每个所述第一业务数据的请求时间,依次将所述数据缓存区中的请求时间最早的第一业务数据通过所述专线宽带发送至所述数据接收方。
在一个实施例中,所述处理器在实现基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方时,用于实现:
当存在数据重要级别相同且请求时间相同的第二业务数据时,根据每个所述第二业务数据的数据重要级别与数据量,确定每个所述第二业务数据对应的第二权重值;基于所述专线宽带,依次将所述数据缓存区中的第二权重值最大的第二业务数据发送至所述数据接收方。
在一个实施例中,所述处理器在实现根据每个所述第二业务数据的数据重要级别与数据量,确定每个所述第二业务数据对应的第二权重值时,用于实现:
基于预设的数据重要级别与权重值之间预设的对应关系,根据每个所述第二业务数据的数据重要级别,确定每个所述第二业务数据对应的第一权重值;将每个所述第二业务数据的第一权重值与数据量的比值,确定为每个所述第二业务数据对应的第二权重值。
在一个实施例中,所述处理器在实现基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方时,用于实现:
当存在传输参数相同的第三业务数据时,根据所述第三业务数据的数量对所述专线宽带进行平分,得到每个所述第三业务数据对应的子专线宽带;将每个所述第三业务数据通过相应的子专线宽带传输至所述数据接收方。
在一个实施例中,所述处理器在实现基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方之后,还用于实现:
获取每个所述业务数据的数据传输结果,并向所述数据请求方输出所述数据传输结果,其中,所述数据传输结果包括传输状态、传输时间以及传输时长。
本申请的实施例中还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序中包括程序指令,所述处理器执行所述程序指令,实现本申请实施例提供的任一项数据传输方法。
例如,该程序被处理器加载,可以执行如下步骤:
当接收到数据请求方的数据传输请求时,确定所述数据请求方的待传输的至少一个业务数据,并将每个所述业务数据存储至预设的数据缓存区;确定每个所述业务数据的传输参数,所述传输参数包括数据重要级别、请求时间以及数据量;基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方。
其中,所述计算机可读存储介质可以是前述实施例所述的计算机设备的内部存储单元,例如所述计算机设备的硬盘或内存。所述计算机可读存储介质也可以是所述计算机设备的外部存储设备,例如所述计算机设备上配备的插接式硬盘,智能存储卡(SmartMedia Card,SMC),安全数字卡(Secure Digital Card,SD Card),闪存卡(Flash Card)等。
进一步地,所述计算机可读存储介质可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等;存储数据区可存储根据区块链节点的使用所创建的数据等。
本申请所指区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain),本质上是一个去中心化的数据库,是一串使用密码学方法相关联产生的数据块,每一个数据块中包含了一批次网络交易的信息,用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层等。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种数据传输方法,其特征在于,包括:
当接收到数据请求方的数据传输请求时,确定所述数据请求方的待传输的至少一个业务数据,并将每个所述业务数据存储至预设的数据缓存区;
确定每个所述业务数据的传输参数,所述传输参数包括数据重要级别、请求时间以及数据量;
基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方。
2.根据权利要求1所述的数据传输方法,其特征在于,所述基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方,包括:
基于预设的数据重要级别与权重值之间的对应关系,根据每个所述业务数据的数据重要级别,确定每个所述业务数据对应的第一权重值;
基于所述专线宽带,依次将所述数据缓存区中的第一权重值最大的业务数据发送至所述数据接收方。
3.根据权利要求1所述的数据传输方法,其特征在于,所述基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方,包括:
当存在数据重要级别相同的第一业务数据时,基于每个所述第一业务数据的请求时间,依次将所述数据缓存区中的请求时间最早的第一业务数据通过所述专线宽带发送至所述数据接收方。
4.根据权利要求1所述的数据传输方法,其特征在于,所述基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方,包括:
当存在数据重要级别相同且请求时间相同的第二业务数据时,根据每个所述第二业务数据的数据重要级别与数据量,确定每个所述第二业务数据对应的第二权重值;
基于所述专线宽带,依次将所述数据缓存区中的第二权重值最大的第二业务数据发送至所述数据接收方。
5.根据权利要求4所述的数据传输方法,其特征在于,所述根据每个所述第二业务数据的数据重要级别与数据量,确定每个所述第二业务数据对应的第二权重值,包括:
基于预设的数据重要级别与权重值之间预设的对应关系,根据每个所述第二业务数据的数据重要级别,确定每个所述第二业务数据对应的第一权重值;
将每个所述第二业务数据的第一权重值与数据量的比值,确定为每个所述第二业务数据对应的第二权重值。
6.根据权利要求1所述的数据传输方法,其特征在于,所述基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方,包括:
当存在传输参数相同的第三业务数据时,根据所述第三业务数据的数量对所述专线宽带进行平分,得到每个所述第三业务数据对应的子专线宽带;
将每个所述第三业务数据通过相应的子专线宽带传输至所述数据接收方。
7.根据权利要求1-6任一项所述的数据传输方法,其特征在于,所述基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方之后,所述方法还包括:
获取每个所述业务数据的数据传输结果,并向所述数据请求方输出所述数据传输结果,其中,所述数据传输结果包括传输状态、传输时间以及传输时长。
8.一种数据传输装置,其特征在于,包括:
数据缓存模块,用于当接收到数据请求方的数据传输请求时,确定所述数据请求方的待传输的至少一个业务数据,并将每个所述业务数据存储至预设的数据缓存区;
传输参数确定模块,用于确定每个所述业务数据的传输参数,所述传输参数包括数据重要级别、请求时间以及数据量;
数据传输模块,用于基于贪心算法,根据每个所述业务数据的传输参数,将所述数据缓存区中的每个所述业务数据通过专线宽带发送至数据接收方。
9.一种计算机设备,其特征在于,所述计算机设备包括存储器和处理器;
所述存储器,用于存储计算机程序;
所述处理器,用于执行所述计算机程序并在执行所述计算机程序时实现如权利要求1至7任一项所述的数据传输方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时使所述处理器实现如权利要求1至7任一项所述的数据传输方法。
CN202210994888.XA 2022-08-18 2022-08-18 数据传输方法、装置、计算机设备和存储介质 Pending CN115632992A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210994888.XA CN115632992A (zh) 2022-08-18 2022-08-18 数据传输方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210994888.XA CN115632992A (zh) 2022-08-18 2022-08-18 数据传输方法、装置、计算机设备和存储介质

Publications (1)

Publication Number Publication Date
CN115632992A true CN115632992A (zh) 2023-01-20

Family

ID=84902568

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210994888.XA Pending CN115632992A (zh) 2022-08-18 2022-08-18 数据传输方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN115632992A (zh)

Similar Documents

Publication Publication Date Title
CN107888562B (zh) 一种平行链接入互联链的数据验证和收发方法、节点及系统
US9501345B1 (en) Method and system for creating enriched log data
CN108712332B (zh) 一种通信方法、系统和装置
US10601735B2 (en) Coalescing messages using a network interface controller
CN111459749B (zh) 基于Prometheus的私有云监控方法、装置、计算机设备及存储介质
CN109831487A (zh) 分片文件验证方法及终端设备
CN109951546B (zh) 基于智能合约的事务请求处理方法、装置、设备和介质
CN107819891A (zh) 数据处理方法、装置、计算机设备和存储介质
CN111899019A (zh) 一种黑名单多方交叉验证和共享的方法及系统
CN110602234B (zh) 区块链网络节点管理方法、装置、设备以及存储介质
US8335843B2 (en) Communication system having multiple communication lines between a transmitter and a receiver
CN111490963A (zh) 基于quic协议栈的数据处理方法、系统、设备及存储介质
CN113259479A (zh) 一种数据处理方法以及设备
CN114546681A (zh) 基于Kafka的消息处理方法、装置、设备及存储介质
CN111432009A (zh) 一种区块链数据的同步方法、装置及电子设备、存储介质
CN117633112A (zh) 一种系统事件的处理方法、设备及存储介质
CN114785805B (zh) 一种数据传输方法、装置、电子设备以及存储介质
CN115632992A (zh) 数据传输方法、装置、计算机设备和存储介质
CN109460182A (zh) 一种数据存储、读取方法及装置
CN111698227A (zh) 信息同步管理方法、装置、计算机系统及可读存储介质
CN115776461A (zh) 投屏方法、设备及存储介质
CN110674068B (zh) 一种板卡间的信息交互方法、分布式板卡及存储介质
CN113419878B (zh) 一种数据操作方法和装置
US11122081B2 (en) Preventing unauthorized access to information resources by deploying and utilizing multi-path data relay systems and sectional transmission techniques
CN114978950B (zh) 基于fpga、cpu协同的网络算法调用方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination