CN110753105A - 数据传输方法、装置、系统、电子设备及存储介质 - Google Patents

Abstract

本发明提供一种数据传输方法、装置、系统、电子设备及存储介质，涉及数据传输技术领域。本发明实施例中，数据上传方可以将数据文件发送给区块链节点，并接收区块链节点根据数据文件返回的校验文件，然后，数据上传方可以将校验文件发送给数据平台，使得数据平台可以根据校验文件从区块链节点所在的区块链中读取对应的数据文件，实现了数据上传方与数据平台之间可以基于各区块链节点构成的区块链进行数据传输，从而使得数据上传方与数据平台之间进行数据传输时，可以避免数据丢失、数据被窃等风险，保证数据的安全性。

Description

数据传输方法、装置、系统、电子设备及存储介质

技术领域

本发明涉及数据传输技术领域，具体而言，涉及一种数据传输方法、装置、系统、电子设备及存储介质。

背景技术

住房公积金一般是指国家机关、国有企业、城镇集体企业、外商投资企业、城镇私营企业以及其他城镇企业、事业单位及其在职员工向公积金中心缴纳的长期储金。全国各地具有多个公积金中心，各公积金中心需要与税务总局间建立公积金贷款利息支出个税抵扣数据传输通道，进行相应的数据传输工作。

现有技术中，各公积金中心与税务总局间实现数据传输的方法通常为：公积金中心基于传输控制协议(Transmission Control Protocol，TCP)将数据文件传输给税务总局，税务总局可以将数据文件存储在甲骨文(Oracle)、结构化查询语言(Structured QueryLanguage，SQLServer)等关系型数据库中。

但是，各公积金中心与税务总局间采用上述现有的数据传输方法进行数据传输时，存在数据丢失、数据被窃等风险，导致数据安全无法得到保证。

发明内容

本发明提供一种数据传输方法、装置、系统、电子设备及存储介质，可以使得各公积金中心与税务总局间进行数据传输时，数据安全可以得到保证。

第一方面，本发明实施例提供一种数据传输方法，该方法应用于数据传输系统的数据上传方，数据传输系统包括：彼此通信连接的至少一个数据上传方、区块链、以及数据平台；其中，任一个数据上传方与至少一个区块链节点通信连接；该方法包括：

数据上传方将数据文件发送给对应的区块链节点；

数据上传方接收区块链节点根据数据文件返回的校验文件；

数据上传方将校验文件发送给数据平台用于根据校验文件从区块链中读取与校验文件对应的数据文件。

可选地，上述数据上传方接收区块链节点根据数据文件返回的校验文件之后，该方法还包括：

数据上传方根据校验文件生成数据文件对应的数据指纹；

数据上传方将数据指纹分别发送给区块链节点和数据平台。

可选地，上述校验文件包括数据文件的上链标识和校验值。

可选地，上述数据上传方根据校验文件生成数据文件对应的数据指纹，包括：

数据上传方根据数据文件的上链标识和校验值按照预设哈希算法计算得到数据文件对应的数据指纹。

可选地，数据上传方对应设置有区块链代理节点；上述数据上传方将数据文件发送给对应的区块链节点，包括：

数据上传方通过区块链代理节点将数据文件按照预设要求的报文发送给对应的区块链节点。

第二方面，本发明实施例提供一种数据传输方法，该方法应用于数据传输系统的数据平台，数据传输系统包括：彼此通信连接的至少一个数据上传方、区块链、以及数据平台；其中，任一个数据上传方与至少一个区块链节点通信连接；该方法包括：

数据平台接收数据上传方发送的校验文件；其中，校验文件由区块链节点根据数据上传方发送的数据文件返回得到；

数据平台根据校验文件从区块链中读取与校验文件对应的数据文件。

可选地，该方法还包括：

数据平台接收数据上传方发送的与校验文件对应的数据文件的数据指纹；其中，数据指纹由数据上传方根据校验文件生成，校验文件包括数据文件的上链标识和校验值；

相应地，上述数据平台根据校验文件从区块链中读取与校验文件对应的数据文件，包括：

数据平台根据校验文件和数据指纹，从区块链中读取与校验文件对应的数据文件，其中，数据指纹根据数据文件的上链标识和校验值按照预设哈希算法计算得到。

可选地，上述数据平台根据校验文件和数据指纹，从区块链中读取与校验文件对应的数据文件，包括：

数据平台根据校验文件和数据指纹、以及区块链中存储的校验文件和数据指纹进行校验；

若校验通过，则数据平台根据校验文件从区块链中读取与校验文件对应的数据文件。

可选地，数据平台包括Hadoop数据库，Hadoop数据库包括：至少一个主节点和多个从节点；上述数据平台根据校验文件从区块链中读取与校验文件对应的数据文件之后，该方法还包括：

数据平台通过主节点按照预设规则将数据文件分别存储至多个从节点中。

第三方面，本发明实施例提供一种数据传输装置，该装置应用于数据传输系统的数据上传方，数据传输系统包括：彼此通信连接的至少一个数据上传方、区块链、以及数据平台；其中，任一个数据上传方与至少一个区块链节点通信连接；该装置包括：第一发送模块和第一接收模块；第一发送模块用于将数据文件发送给对应的区块链节点；第一接收模块用于接收区块链节点根据数据文件返回的校验文件；第一发送模块还用于将校验文件发送给数据平台用于根据校验文件从区块链中读取与校验文件对应的数据文件。

可选地，该装置还包括：生成模块；生成模块用于在第一接收模块接收区块链节点根据数据文件返回的校验文件之后，根据校验文件生成数据文件对应的数据指纹；第一发送模块还用于将数据指纹分别发送给区块链节点和数据平台。

可选地，校验文件包括数据文件的上链标识和校验值。

可选地，生成模块具体用于根据数据文件的上链标识和校验值按照预设哈希算法计算得到数据文件对应的数据指纹。

可选地，数据上传方对应设置有区块链代理节点；第一发送模块具体用于通过区块链代理节点将数据文件按照预设要求的报文发送给对应的区块链节点。

第四方面，本发明实施例提供一种数据传输装置，该装置应用于数据传输系统的数据平台，数据传输系统包括：彼此通信连接的至少一个数据上传方、区块链、以及数据平台；其中，任一个数据上传方与至少一个区块链节点通信连接；该装置包括：第二接收模块和读取模块；第二接收模块用于接收数据上传方发送的校验文件；其中，校验文件由区块链节点根据数据上传方发送的数据文件返回得到；读取模块用于根据校验文件从区块链中读取与校验文件对应的数据文件。

可选地，第二接收模块还用于接收数据上传方发送的与校验文件对应的数据文件的数据指纹；其中，数据指纹由数据上传方根据校验文件生成，校验文件包括数据文件的上链标识和校验值；相应地，读取模块具体用于根据校验文件和数据指纹，从区块链中读取与校验文件对应的数据文件，其中，数据指纹根据数据文件的上链标识和校验值按照预设哈希算法计算得到。

可选地，读取模块具体用于根据校验文件和数据指纹、以及区块链中存储的校验文件和数据指纹进行校验；若校验通过，则根据校验文件从区块链中读取与校验文件对应的数据文件。

可选地，数据平台包括Hadoop数据库，Hadoop数据库包括：至少一个主节点和多个从节点；该装置还包括：存储模块；存储模块用于在读取模块根据校验文件从区块链中读取与校验文件对应的数据文件之后，通过主节点按照预设规则将数据文件分别存储至多个从节点中。

第五方面，本发明实施例提供一种数据传输系统，包括：彼此通信连接的至少一个数据上传方、区块链、以及数据平台；其中，任一个数据上传方与至少一个区块链节点通信连接；数据上传方用于将数据文件发送给区块链节点，接收区块链节点根据数据文件返回的校验文件，并将校验文件发送给数据平台；数据平台用于接收数据上传方发送的校验文件，并根据校验文件从区块链中读取与校验文件对应的数据文件。

第六方面，本发明实施例提供一种电子设备，包括：处理器、存储介质和总线，所述存储介质存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储介质之间通过所述总线通信，所述处理器执行所述机器可读指令，以执行如第一方面或第二方面所述的方法。

第七方面，本发明实施例提供一种存储介质，所述存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行如第一方面或第二方面所述的方法。

本发明的有益效果是：

本发明实施例中，数据上传方可以将数据文件发送给区块链节点，并接收区块链节点根据数据文件返回的校验文件，然后，数据上传方可以将校验文件发送给数据平台，使得数据平台可以根据校验文件从区块链节点所在的区块链中读取对应的数据文件，实现了数据上传方与数据平台之间可以基于各区块链节点构成的区块链进行数据传输，从而使得数据上传方与数据平台之间进行数据传输时，可以避免数据丢失、数据被窃等风险，保证数据的安全性。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1示出了本发明实施例提供的数据传输系统的结构示意图；

图2示出了本发明实施例提供的数据传输方法的流程示意图；

图3示出了本发明实施例提供的数据传输方法的另一流程示意图；

图4示出了本发明实施例提供的数据传输方法的又一流程示意图；

图5示出了本发明实施例提供的数据传输方法的又一流程示意图；

图6示出了本发明实施例提供的数据传输方法的又一流程示意图；

图7示出了本发明实施例提供的数据传输系统的交互示意图；

图8示出了本发明实施例提供的数据传输装置的结构示意图；

图9示出了本发明实施例提供的数据传输装置的另一结构示意图；

图10示出了本发明实施例提供的数据传输装置的又一结构示意图；

图11示出了本发明实施例提供的数据传输装置的又一结构示意图；

图12示出了本发明实施例提供的电子设备的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。在本发明的描述中，还需要说明的是，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

本发明实施例提供一种数据传输系统，图1示出了本发明实施例提供的数据传输系统的结构示意图。

如图1所示，该数据传输系统可以包括：彼此通信连接的至少一个数据上传方100、区块链200、以及数据平台300；其中，任一个数据上传方100与至少一个区块链节点210通信连接。

可选地，该数据传输系统中，区块链节点210可以设置有7个(也可以是3个、4个、8个、9个、或者更多或更少的数量)，各区块链节点210之间可以通过拜占庭共识算法(Practical Byzantine Fault Tolerance，PBFT)保证数据具有一致性。也即，各区块链节点210之间在执行交易(数据传输、数据处理等)前，可以先对比彼此执行的交易是否一致，若一致，则执行交易，否则，不执行交易。执行交易后，可以再对比执行结果是否一致，若一致，则保存交易数据，否则，不保存交易数据。从而，可以保证各区块链节点210的数据具有一致性。

该数据传输系统中，数据上传方100可以用于将数据文件发送给区块链节点210，接收区块链节点210根据数据文件返回的校验文件，并将校验文件发送给数据平台300。数据平台300可以用于接收数据上传方100发送的校验文件，并根据校验文件从区块链200中读取与校验文件对应的数据文件。

例如，可以根据本实施例提供的该数据传输系统构建各公积金中心与税务总局间的数据传输通道，即，可以将各公积金中心作为数据上传方，在税务总局侧可以设置数据平台，用于管理和存储数据。另外，可以通过在不同地域(如需要上传数据的地域)布设多个服务器，多个服务器之间彼此通信连接组成区块链；其中，每个服务器对应一个区块链节点。多个服务器(区块链节点)组成的区块链与数据上传方(各公积金中心)和数据平台(税务总局)之间均可以进行数据传输，数据上传方也可以与数据平台通信连接进行数据传输。数据上传方可以将数据文件发送给区块链节点，实现数据文件的上链，如：数据文件可以包括：账户、金额、交易信息等业务数据。区块链节点接收到数据文件后，可以向数据上报方返回数据文件对应的校验文件；数据上报方可以将校验文件发送给数据平台，数据平台可以根据该校验文件从区块链节点读取其对应的数据文件。

基于上述数据传输系统，本发明实施例提供一种数据传输方法，该方法可以应用于数据传输系统的数据上传方。通过该数据传输方法可以使得数据上传方与数据平台之间进行数据传输时，数据安全可以得到保证。例如，当该数据传输方法应用于各公积金中心与税务总局间的数据传输时，可以保证数据传输的安全性。

需要说明的是，本发明下述各实施例中，将以各公积金中心与税务总局间的数据传输为例，对本发明的技术方案进行详细阐述，但并不用于限制本发明的应用场景，本领域技术人员还可以基于本发明的记载，将本发明的技术方案应用于其他场景中。

图2示出了本发明实施例提供的数据传输方法的流程示意图。

如图2所示，该数据传输方法，可以包括：

S201、数据上传方将数据文件发送给对应的区块链节点。

如上所述，数据文件可以包括各公积金中心的账户、金额、交易信息等业务数据。各公积金中心可以将数据文件发送给对应的区块链节点，实现数据文件的上链。

例如，若区块链节点包括：A、B、C、D，数据上传方与区块链节点A通信连接，则数据上传方可以将数据文件发送给区块链节点A，然后，区块链节点A可以与区块链节点B、C以及D之间通过PBFT算法保证数据具有一致性，即，A、B、C、D四个区块链节点可以共同对数据上传方发送的数据文件进行存储。

部分实施方式中，数据上传方也可以连接多个区块链节点，在将数据文件上链时，数据上传方可以选择其中任意一个通信连接的区块链节点，进行数据文件的上链操作，本发明在此不作限定。

S202、数据上传方接收区块链节点根据数据文件返回的校验文件。

可选地，校验文件可以包括数据文件的上链标识和校验值。其中，上链标识是其所属的校验文件对应的数据文件上链的唯一标识，校验值可以用于校验数据文件上链的完整性。校验文件与数据文件之间为一一对应的映射关系，根据校验文件，可以查询得到对应的数据文件。

例如，在各公积金中心与税务总局之间进行数据传输时，上链标识可以是某次交易(上传数据文件操作)的交易回执，校验值可以是该次交易中数据文件的大小，如：数据容量，或者，若数据文件被拆分为多个数据块进行上传时，校验值还可以是数据块的数量等，本发明在此亦不作限定。

校验文件可以用于解决数据上传方向区块链中上传数据文件时所存在的延时问题。通常而言，数据文件在上传至区块链时，是以一个或多个队列任务的形式进行，如：同一个或同一批数据会被拆分为多个队列任务进行异步上链，上链的时长与数据量的大小有关。而通过校验文件，即可实现对数据的完整性进行验证，以确定同一个或同一批的数据是否全部进入区块链。当队列中还存在未上传完成的数据时，节点可以保持等待状态，待数据上传完整后，向数据上传方返回校验文件。

S203、数据上传方将校验文件发送给数据平台用于根据校验文件从区块链中读取与校验文件对应的数据文件。

如上所述，校验文件可以用于数据平台从区块链中读取与校验文件对应的数据文件。

例如，数据平台可以基于上链标识和校验值，从区块链中确定与校验文件(包括上链标识和校验值)对应的数据文件，并读取该数据文件。数据平台读取到数据文件后，可以数据文件进行存储、使用等后续处理。

由上所述，本发明实施例中，数据上传方可以将数据文件发送给区块链节点，并接收区块链节点根据数据文件返回的校验文件，然后，数据上传方可以将校验文件发送给数据平台，使得数据平台可以根据校验文件从区块链节点所在的区块链中读取对应的数据文件，实现了数据上传方与数据平台之间可以基于各区块链节点构成的区块链进行数据传输，从而使得数据上传方与数据平台之间进行数据传输时，可以避免数据丢失、数据被窃等风险，保证数据的安全性。

图3示出了本发明实施例提供的数据传输方法的另一流程示意图。

可选地，如图3所示，上述数据上传方接收区块链节点根据数据文件返回的校验文件之后，该方法还可以包括：

S301、数据上传方根据校验文件生成数据文件对应的数据指纹。

可选地，数据上传方接收到区块链节点返回的数据文件对应的校验文件之后，可以对校验文件进行计算，获取校验文件对应的数据文件的数据指纹。例如，可以根据数据文件的上链标识和校验值按照预设哈希(HASH)算法计算得到数据文件对应的数据指纹；相应地，数据指纹可以是根据校验文件计算得到的HASH值。

以数据上传方为上述公积金中心为例，公积金中心接收到校验文件后，可以采用SHA-256安全HASH算法对校验文件进行计算，得到的哈希值可以作为校验文件对应的数据文件的数据指纹。

需要说明的是，当校验文件发生更改时，会再次执行上述过程，即，数据文件的数据指纹会随之发生变化。

S302、数据上传方将数据指纹分别发送给区块链节点和数据平台。

可选地，数据上传方还可以将计算得到的数据文件的数据指纹发送到区块链节点，从而将数据指纹存储于区块链中，实现对数据指纹的存证。

数据上传方还可以将数据文件的数据指纹发送给数据平台；数据平台根据校验文件从区块链中读取数据文件之前，可以先基于数据指纹和校验文件，与区块链中存储的数据指纹和校验文件进行校验。若校验通过，则可以允许数据平台读取数据文件，否则，可以禁止数据平台读取数据文件。由于校验文件发生更改会导致数据指纹会随之发生变化，所以，数据平台可以通过比较数据上传方的数据指纹与从区块链中存储的数据指纹是否不同，从而确定校验文件是否被篡改，进而保证校验文件在传输过程中的完整性和准确性。当校验文件被篡改，数据指纹发生变化时，可以终止数据平台从区块链中读取数据文件的操作，以保证数据文件的安全性。

例如，数据平台可以与区块链节点比较数据上传方发送给区块链存储的数据指纹与数据上传方发送给数据平台的数据指纹是否一致，若一致，则表示校验文件未被篡改，数据平台可以正常从区块链中读取校验文件对应的数据文件；若不一致，则表示校验文件发生了变化，可以禁止数据平台根据该校验文件从区块链中读取数据文件。

如上所述，本发明实施例中，如果数据文件在传输过程中，有人篡改了数据文件，会使得校验文件发生变化进而导致数据指纹发生变化，或者有人直接篡改了校验文件，也会导致数据指纹发生变化，然后，通过终止数据平台从区块链中读取数据文件，可以保证一些非法数据文件不会进入数据平台的数据库。

另外，本发明上述实施例中，数据上传方将数据指纹发送到区块链进行存储，还可以使得当出现争议数据文件(数据文件发生异常、如：损坏、丢失、更改等)时，可以根据原始数据文件的数据指纹和校验文件精确定位数据文件的来源，可以更加权威的找出争议数据文件的责任方。

可选地，数据上传方可以对应设置有区块链代理节点。上述数据上传方将数据文件发送给对应的区块链节点，可以包括：数据上传方通过区块链代理节点将数据文件按照预设要求的报文发送给对应的区块链节点。

其中，预设要求可以是指满足区块链传输要求的既定文件格式。例如，数据文件的每行可以表示一个数据单元，该数据单元可以表示一个业务实体。假如数据文件为个人信息文件，则预设格式可以为“每行表示一个客户的个人信息”，如预设格式可以表示为：姓名|@|年龄|@|性别|@|证件号|@|证件类型|@|′\n′。

如上所述，本发明部分实施方式中，可以在数据上传方(各公积金中心)的业务系统侧部署区块链代理节点，该区块链代理节点可以为代理服务器，例如，该代理服务器可以为LINUX服务器、且可以具有开发工具包(Java Development Kit，JDK)1.8的Java运行环境。区块链代理节点可以部署有上链接口，与区块链节点通信连接。数据上传方可以通过区块链代理节点将数据文件上传至区块链节点，即上传至区块链中。

可选地，区块链代理节点与区块链节点之间通过上链接口进行数据传输时，可以通过报文实现，报文可以遵循超文本传输协议表述性状态转移(Hypertext TransferProtocol Representational State Transfer，HTTP REST)规范。HTTP头文件(header)中可以定义报文的控制信息，可以使用直译式脚本语言JS对象简谱(JavaScript ObjectNotation，JSON)格式的报文体定义业务数据。各区块链代理节点的上链接口可以具有相同的HTTP header定义规则，不同的上链接口可以具有不同的报文体定义，本发明在此亦不作限制。

例如，区块链代理节点向区块链节点发送数据文件时，可以通过发送请求报文实现，请求报文的HTTP header定义可以如下表1所示(见下页)：

表1

区块链节点向区块链代理节点返回数据文件对应的校验文件时，可以通过响应报文实现，响应报文的HTTP header定义可以如下表2所示(见下页)：

表2

可选地，区块链代理节点可以为在数据上传方的业务系统侧单独部署的代理服务器，也可以为业务系统的本地服务器，或者还可以是业务系统的局域网内的某台服务器，当区块链代理节点为在数据上传方的业务系统侧单独部署的代理服务器时，业务系统中的数据文件生成后，可以按照前述实施例中所述的报文的形式发送给代理服务器，代理服务器可以以报文的形式再将数据文件发送给区块链节点对应的服务器。也即，业务系统的业务数据生成数据文件后，可以通过报文的形式发送给区块链代理节点，区块链代理节点可以将数据文件再通过报文的形式发送给区块链节点，本发明对此不作限制。

可选地，数据平台根据校验文件从区块链读取对应的数据文件时，也可以采用前述实施例中所述的报文的形式，将校验文件路径通过报文发送给区块链中的节点，本发明在此亦不作限制。

本实施方式中，前述实施例中所述的计算获取数据指纹的过程可以由区块链代理节点的服务器计完成，即，可以由区块链代理节点的服务器计算获取数据指纹。或者其他实施方式中，前述实施例中所述的计算获取数据指纹的过程也可以由公积金中心在本地计算完成，本发明对此不作限定。

可选地，本发明实施例中，为了保证上传至区块链的数据文件安全可靠，还可以在数据上传方(各公积金中心)本地进行较为复杂的技术处理，例如，可以包括：数字签名、数据加密等。一些实施方式中，还可以将数字签名、数据加密等安全加解密算法和相关的处理逻辑封装于区块链代理节点中，从而实现数据上传方与区块链进行通信是，只基于统一的上链接口，简化数据文件上链的作业过程。

基于上述数据传输系统，本发明实施例还提供一种数据传输方法，该方法可以应用于数据传输系统的数据平台。图4示出了本发明实施例提供的数据传输方法的又一流程示意图。

如图4所示，该数据传输方法，可以包括：

S401、数据平台接收数据上传方发送的校验文件。

其中，校验文件由区块链节点根据数据上传方发送的数据文件返回得到。

校验文件已在前述方法实施例中详细描述，在此不再赘述。

S402、数据平台根据校验文件从区块链中读取与校验文件对应的数据文件。

可选地，当数据平台根据校验文件从区块链中读取对应的数据文件时，区块链节点可以将对应的数据文件存储为可供数据平台直接读取的文件格式，如：可以将数据文件存储为后缀名为“.dat”格式的数据文件，从而，数据平台可以直接从该区块链节点读取该目标数据文件。

可选地，该数据传输方法还可以包括：数据平台接收数据上传方发送的与校验文件对应的数据文件的数据指纹。其中，数据指纹由数据上传方根据校验文件生成，校验文件包括数据文件的上链标识和校验值。

相应地，上述数据平台根据校验文件从区块链中读取与校验文件对应的数据文件，可以包括：数据平台根据校验文件和数据指纹，从区块链中读取与校验文件对应的数据文件。其中，数据指纹根据数据文件的上链标识和校验值按照预设哈希算法计算得到。

图5示出了本发明实施例提供的数据传输方法的又一流程示意图。

可选地，如图5所示，上述数据平台根据校验文件和数据指纹，从区块链中读取与校验文件对应的数据文件，可以包括：

S501、数据平台根据校验文件和数据指纹、以及区块链中存储的校验文件和数据指纹进行校验。

S502、若校验通过，则数据平台根据校验文件从区块链中读取与校验文件对应的数据文件。

可选地，若校验不通过，则可以禁止数据平台根据校验文件从区块链中读取数据文件，或者终止数据平台根据校验文件从区块链中读取数据文件的相关操作。

可选地，一种实施方式中，数据平台可以包括Hadoop数据库，Hadoop数据库可以包括：至少一个主节点和多个从节点。上述数据平台根据校验文件从区块链中读取与校验文件对应的数据文件之后，该数据传输方法还可以包括：数据平台通过主节点按照预设规则将数据文件分别存储至多个从节点中。

本实施方式中，数据平台在读取到数据文件后，可以将数据文件存入Hadoop数据库中。其中，Hadoop为开源框架，可以用于编写和运行分布式应用处理大规模数据，其数据来源可以是多种形式，在处理半结构化和非结构化数据上具有更好的性能和更灵活的处理能力。

在数据平台中采用Hadoop数据库存储和处理数据文件，可以使得当存在海量数据文件时，Hadoop数据库可以通过分布式计算能力将需要处理的数据分摊到集群的各个数据节点。例如，Hadoop数据库可以采用主从结构，即，可以包括至少一个主节点和多个从节点(主节点和从节点均可以为服务器)，如：Hadoop数据库可以包括2个主节点和24个从节点。数据平台通过主节点按照预设规则将数据文件分别存储至多个从节点中，可以是指主节点可以将数据文件分成多个较小的数据块，然后通过网络将各数据块相对均匀地放置在不同的从节点中，实现分布式存储。

本实施例提供的应用于数据平台的数据传输方法与前述实施例中所述的应用于数据上传方的数据传输方法相对应，还应同样具有前述实施例中所述的全部有益效果，在此亦不再赘述。

对应的，基于前述实施例中所述，本发明实施例还提供一种数据传输方法，该方法可以应用于数据传输系统中的任一个区块链节点。

图6示出了本发明实施例提供的数据传输方法的又一流程示意图。

如图6所示，该数据传输方法可以包括：

S601、节点接收数据上传方发送的数据文件。

S602、节点根据数据文件，生成对应的校验文件。

S603、节点将校验文件发送给数据上传方。

S604、节点接收数据平台发送的校验文件、以及校验文件对应的数据文件的数据指纹。

S605、节点根据校验文件，从区块链中确定所述校验文件对应的数据文件、以及数据文件的数据指纹并发送给数据平台。

本实施例提供的应用于区块链节点的数据传输方法与前述实施例中所述的应用于数据上传方或数据平台的数据传输方法相对应，同样具有前述实施例中所述的全部有益效果，在此亦不再赘述。

为使本发明实的技术方案更加清楚和完整，本发明实施例现对数据传输系统的完整交互过程作如下说明：

图7示出了本发明实施例提供的数据传输系统的交互示意图。

如图7所示，本发明实施例中，数据传输系统的交互过程可以如下：

①数据上传方将数据文件发送给节点。

②节点根据数据文件生成对应的校验文件。

③节点将校验文件发送给数据上传方。

④数据上传方根据校验文件生成数据指纹。

⑤数据上传方将数据指纹和校验文件发送给数据平台。

⑥数据上传方将数据指纹发送给节点。

⑦数据平台根据校验文件从节点读取对应的数据文件和数据指纹。

基于前述方法实施例中所述的数据传输方法，本申请实施例还对应提供一种数据传输装置，该数据传输装置可以应用于数据传输系统的数据上传方，图8示出了本发明实施例提供的数据传输装置的结构示意图。

如图8所示，该数据传输装置可以包括：第一发送模块11和第一接收模块12。第一发送模块11可以用于将数据文件发送给对应的区块链节点。第一接收模块12可以用于接收区块链节点根据数据文件返回的校验文件。第一发送模块11还可以用于将校验文件发送给数据平台用于根据校验文件从区块链中读取与校验文件对应的数据文件。

图9示出了本发明实施例提供的数据传输装置的另一结构示意图。

可选地，如图9所示，该数据传输装置还可以包括：生成模块13。生成模块13可以用于在第一接收模块12接收区块链节点根据数据文件返回的校验文件之后，根据校验文件生成数据文件对应的数据指纹。第一发送模块11还用于将数据指纹分别发送给区块链节点和数据平台。

可选地，校验文件包括数据文件的上链标识和校验值。

可选地，生成模块13具体可以用于根据数据文件的上链标识和校验值按照预设哈希算法计算得到数据文件对应的数据指纹。

可选地，数据上传方对应设置有区块链代理节点；第一发送模块11具体可以用于通过区块链代理节点将数据文件按照预设要求的报文发送给对应的区块链节点。

基于前述方法实施例中所述的数据传输方法，本申请实施例还对应提供一种数据传输装置，该数据传输装置可以应用于数据传输系统的数据平台，图10示出了本发明实施例提供的数据传输装置的又一结构示意图。

如图10所示，该数据传输装置可以包括：第二接收模块21和读取模块22。第二接收模块21可以用于接收数据上传方发送的校验文件。其中，校验文件由区块链节点根据数据上传方发送的数据文件返回得到。读取模块22可以用于根据校验文件从区块链中读取与校验文件对应的数据文件。

可选地，第二接收模块22还可以用于接收数据上传方发送的与校验文件对应的数据文件的数据指纹；其中，数据指纹由数据上传方根据校验文件生成，校验文件可以包括数据文件的上链标识和校验值。

相应地，读取模块22具体可以用于根据校验文件和数据指纹，从区块链中读取与校验文件对应的数据文件，其中，数据指纹可以根据数据文件的上链标识和校验值按照预设哈希算法计算得到。

可选地，读取模块22具体可以用于根据校验文件和数据指纹、以及区块链中存储的校验文件和数据指纹进行校验；若校验通过，则根据校验文件从区块链中读取与校验文件对应的数据文件。

图11示出了本发明实施例提供的数据传输装置的又一结构示意图。

可选地，数据平台可以包括Hadoop数据库，Hadoop数据库可以包括：至少一个主节点和多个从节点。如图11所示，该数据传输装置还可以包括：存储模块23。存储模块23可以用于在读取模块22根据校验文件从区块链中读取与校验文件对应的数据文件之后，通过主节点按照预设规则将数据文件分别存储至多个从节点中。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的装置的具体工作过程，可以参考前述方法实施例中方法的对应过程，本发明中不再赘述。

本发明实施例还提供一种电子设备，该电子设备可以是部署于数据上传方、数据平台、或作为区块链节点的服务器、或服务器中的数据处理设备等(如：控制芯片)，图12示出了本发明实施例提供的电子设备的结构示意图。

如图12所示，该电子设备可以包括：处理器31、存储介质32和总线(图中未标出)，存储介质32存储有处理器31可执行的机器可读指令，当电子设备运行时，处理器31与存储介质32之间通过总线通信，处理器31执行机器可读指令，以执行如前述方法实施例中所述的数据传输方法。具体实现方式和技术效果类似，在此不再赘述。

为了便于说明，在上述电子设备中仅描述了一个处理器。然而，应当注意，本发明中的电子设备还可以包括多个处理器，因此本发明中描述的一个处理器执行的步骤也可以由多个处理器联合执行或单独执行。例如，若电子设备的处理器执行步骤A和步骤B，则应该理解，步骤A和步骤B也可以由两个不同的处理器共同执行或者在一个处理器中单独执行。例如，第一处理器执行步骤A，第二处理器执行步骤B，或者第一处理器和第二处理器共同执行步骤A和B等。

在一些实施例中，处理器可以包括一个或多个处理核(例如，单核处理器(S)或多核处理器(S))。仅作为举例，处理器可以包括中央处理单元(Central Processing Unit，CPU)、专用集成电路(Application Specific Integrated Circuit，ASIC)、专用指令集处理器(Application Specific Instruction-set Processor，ASIP)、图形处理单元(Graphics Processing Unit，GPU)、物理处理单元(Physics Processing Unit，PPU)、数字信号处理器(Digital Signal Processor，DSP)、现场可编程门阵列(Field ProgrammableGate Array，FPGA)、可编程逻辑器件(Programmable Logic Device，PLD)、控制器、微控制器单元、简化指令集计算机(Reduced Instruction Set Computing，RISC)、或微处理器等，或其任意组合。

本发明实施例还提供一种存储介质，存储介质上存储有计算机程序，计算机程序被处理器运行时执行如前述方法实施例中所述的数据传输方法。具体实现方式和技术效果类似，在此同样不再赘述。

可选地，该存储介质可以是U盘、移动硬盘、ROM、RAM、磁碟或者光盘等。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (14)

1.一种数据传输方法，其特征在于，所述方法应用于数据传输系统的数据上传方，所述数据传输系统包括：彼此通信连接的至少一个数据上传方、区块链、以及数据平台；其中，任一个数据上传方与至少一个区块链节点通信连接；所述方法包括：

数据上传方将数据文件发送给对应的区块链节点；

数据上传方接收所述区块链节点根据所述数据文件返回的校验文件；

数据上传方将所述校验文件发送给数据平台用于根据所述校验文件从所述区块链中读取与所述校验文件对应的数据文件。

2.根据权利要求1所述的方法，其特征在于，所述数据上传方接收所述区块链节点根据所述数据文件返回的校验文件之后，所述方法还包括：

数据上传方根据所述校验文件生成所述数据文件对应的数据指纹；

数据上传方将所述数据指纹分别发送给所述区块链节点和所述数据平台。

3.根据权利要求2所述的方法，其特征在于，所述校验文件包括所述数据文件的上链标识和校验值。

4.根据权利要求3所述的方法，其特征在于，所述数据上传方根据所述校验文件生成所述数据文件对应的数据指纹，包括：

数据上传方根据所述数据文件的上链标识和校验值按照预设哈希算法计算得到所述数据文件对应的数据指纹。

5.根据权利要求1-4任一项所述的方法，其特征在于，所述数据上传方对应设置有区块链代理节点；所述数据上传方将数据文件发送给对应的区块链节点，包括：

数据上传方通过区块链代理节点将所述数据文件按照预设要求的报文发送给对应的区块链节点。

6.一种数据传输方法，其特征在于，所述方法应用于数据传输系统的数据平台，所述数据传输系统包括：彼此通信连接的至少一个数据上传方、区块链、以及数据平台；其中，任一个数据上传方与至少一个区块链节点通信连接；所述方法包括：

数据平台接收数据上传方发送的校验文件；其中，所述校验文件由区块链节点根据所述数据上传方发送的数据文件返回得到；

数据平台根据所述校验文件从区块链中读取与所述校验文件对应的数据文件。

7.根据权利要求6所述的方法，其特征在于，所述方法还包括：

数据平台接收数据上传方发送的与所述校验文件对应的数据文件的数据指纹；其中，所述数据指纹由所述数据上传方根据所述校验文件生成，所述校验文件包括所述数据文件的上链标识和校验值；

相应地，所述数据平台根据所述校验文件从区块链中读取与所述校验文件对应的数据文件，包括：

数据平台根据所述校验文件和所述数据指纹，从区块链中读取与所述校验文件对应的数据文件，其中，所述数据指纹根据所述数据文件的上链标识和校验值按照预设哈希算法计算得到。

8.根据权利要求7所述的方法，其特征在于，所述数据平台根据所述校验文件和所述数据指纹，从区块链中读取与所述校验文件对应的数据文件，包括：

数据平台根据所述校验文件和所述数据指纹、以及区块链中存储的校验文件和数据指纹进行校验；

若校验通过，则数据平台根据所述校验文件从所述区块链中读取与所述校验文件对应的数据文件。

9.根据权利要求6-8任一项所述的方法，其特征在于，所述数据平台包括Hadoop数据库，所述Hadoop数据库包括：至少一个主节点和多个从节点；所述数据平台根据所述校验文件从区块链中读取与所述校验文件对应的数据文件之后，所述方法还包括：

数据平台通过所述主节点按照预设规则将数据文件分别存储至多个所述从节点中。

10.一种数据传输装置，其特征在于，所述装置应用于数据传输系统的数据上传方，所述数据传输系统包括：彼此通信连接的至少一个数据上传方、区块链、以及数据平台；其中，任一个数据上传方与至少一个区块链节点通信连接；所述装置包括：

第一发送模块，用于将数据文件发送给对应的区块链节点；

第一接收模块，用于接收所述区块链节点根据所述数据文件返回的校验文件；

所述第一发送模块，还用于将所述校验文件发送给数据平台用于根据所述校验文件从所述区块链中读取与所述校验文件对应的数据文件。

11.一种数据传输装置，其特征在于，所述装置应用于数据传输系统的数据平台，所述数据传输系统包括：彼此通信连接的至少一个数据上传方、区块链、以及数据平台；其中，任一个数据上传方与至少一个区块链节点通信连接；所述装置包括：

第二接收模块，用于接收数据上传方发送的校验文件；其中，所述校验文件由区块链节点根据所述数据上传方发送的数据文件返回得到；

读取模块，用于根据所述校验文件从区块链中读取与所述校验文件对应的数据文件。

12.一种数据传输系统，其特征在于，包括：彼此通信连接的至少一个数据上传方、区块链、以及数据平台；其中，任一个数据上传方与至少一个区块链节点通信连接；

所述数据上传方用于将数据文件发送给区块链节点，接收所述区块链节点根据所述数据文件返回的校验文件，并将所述校验文件发送给所述数据平台；

所述数据平台用于接收所述数据上传方发送的校验文件，并根据所述校验文件从区块链中读取与所述校验文件对应的数据文件。

13.一种电子设备，其特征在于，包括：处理器、存储介质和总线，所述存储介质存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储介质之间通过所述总线通信，所述处理器执行所述机器可读指令，以执行如权利要求1-9任一项所述的方法。

14.一种存储介质，其特征在于，所述存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行如权利要求1-9任一项所述的方法。

Images