CN110401711B - 数据处理方法、装置、系统及存储介质 - Google Patents

Abstract

本发明公开了一种数据处理方法、装置、系统及存储介质。其中，该方法包括：根据区块链当前的数据处理能力从待处理数据集合中获取目标数据；将所述目标数据写入所述区块链中；获取与所述目标数据对应的处理结果，并记录具有对应关系的所述目标数据和所述处理结果；将具有对应关系的所述目标数据和所述处理结果发送至所述目标数据所对应的目标请求的发送方；或者，接收第三请求的发送方发送的查询请求；从具有对应关系的所述目标数据和所述处理结果中获取所述第三请求对应的第四结果；将所述第四结果发送至所述第三请求的发送方。本发明解决了相关技术中处理用于请求将数据写入区块链的请求时的处理效率较低的技术问题。

Description

数据处理方法、装置、系统及存储介质

本申请是基于2018年08月31日提交中国专利局、申请号为201811021844.9、发明名称“数据处理方法、装置、存储介质及电子装置”的中国专利申请提出的分案申请。

技术领域

本发明涉及计算机领域，具体而言，涉及一种数据处理方法、装置、系统及存储介质。

背景技术

在区块链领域，相关技术中的请求上链(即请求将数据写入区块链)都是在接收到请求后就直接将其所请求上链的数据进行上链处理。但是，这种方式在请求的并发数较大或者区块链处理能力较低的情况下很容易出现请求失败或者上链失败的现象。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种数据处理方法、装置、系统及存储介质，以至少解决相关技术中处理用于请求将数据写入区块链的请求时的处理效率较低的技术问题。

根据本发明实施例的一方面，提供了一种数据处理方法，包括：接收第一请求，其中，所述第一请求用于请求将第一数据写入区块链；将所述第一数据存储到待处理数据集合中；根据所述区块链当前的数据处理能力从所述待处理数据集合中获取目标数据，其中，所述目标数据的数据量小于或者等于所述区块链当前允许处理的数据量；将所述目标数据写入所述区块链中。

根据本发明实施例的一方面，还提供了一种数据处理装置，包括：第一接收模块，用于接收第一请求，其中，所述第一请求用于请求将第一数据写入区块链；第一存储模块，用于将所述第一数据存储到待处理数据集合中；第一获取模块，用于根据所述区块链当前的数据处理能力从所述待处理数据集合中获取目标数据，其中，所述目标数据的数据量小于或者等于所述区块链当前允许处理的数据量；第一写入模块，用于将所述目标数据写入所述区块链中。

根据本发明实施例的一方面，还提供了一种存储介质，其特征在于，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项中所述的数据处理方法。

根据本发明实施例的一方面，还提供了一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为通过所述计算机程序执行上述任一项中所述的数据处理方法。

在本发明实施例中，采用接收第一请求，其中，第一请求用于请求将第一数据写入区块链；将第一数据存储到待处理数据集合中；根据区块链当前的数据处理能力从待处理数据集合中获取目标数据，其中，目标数据的数据量小于或者等于区块链当前允许处理的数据量；将目标数据写入区块链中。接收到用于请求将第一数据写入区块链的第一请求后，可以将第一数据存储在区块链中的待处理数据集合中，并根据区块链当前的数据处理能力从待处理数据集合中获取目标数据进行上链处理，从而避免了接收到大并发数请求时容易造成数据阻塞而导致数据上链效率较低或者数据上链失败的现象发生，增大了请求的并发数，从而实现了提高处理用于请求将数据写入区块链的请求时的处理效率的技术效果，进而解决了相关技术中处理用于请求将数据写入区块链的请求时的处理效率较低的技术问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的一种可选的数据处理方法的示意图；

图2是根据本发明实施例的一种可选的数据处理方法的拓扑结构示意图一；

图3是根据本发明实施例的一种可选的数据处理方法的拓扑结构示意图二；

图4是根据本发明实施例的一种可选的数据处理方法的应用环境示意图；

图5是根据本发明可选的实施方式的一种可选的数据处理方法的示意图；

图6是根据本发明实施例的一种可选的数据处理装置的示意图；

图7是根据本发明实施例的一种可选的数据处理方法的示意图；以及

图8是根据本发明实施例的一种可选的电子装置的示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

根据本发明实施例的一个方面，提供了一种数据处理方法，该数据处理方法可以应用于区块链节点中，区块链节点可以是指区块链网络中参与数据计算处理的计算设备，例如计算机，手机、矿机、台式机或者服务器等拥有计算能力的设备均可作为区块链网络中的节点。例如，在比特币网络中，通过在已连接到互联网的电脑上运行bitcoind程序后，该电脑也就成为了比特币网络中的一个节点。如图1所示，该方法包括：

S102，接收第一请求，其中，第一请求用于请求将第一数据写入区块链；

S104，将第一数据存储到待处理数据集合中，可选的，区块链节点可以将第一数据存储到位于区块链中的待处理数据集合中或者是将第一数据存储到位于区块链之外的待处理数据集合中；

S106，根据区块链当前的数据处理能力从待处理数据集合中获取目标数据，其中，目标数据的数据量小于或者等于区块链当前允许处理的数据量；

S108，将目标数据写入区块链中。

可选地，在本实施例中，区块链的拓扑结构中可以但不限于包括多个节点设备，区块链中的节点设备在功能架构上可以分为区块链应用层和区块链缓冲层，区块链应用层接收到用于请求将第一数据写入区块链的第一请求，区块链缓冲层将第一数据缓存起来，当区块链当前的处理能力满足数据的处理条件时区块链缓冲层将待处理的数据从缓存中取出，再对数据进行写入区块链的处理。比如：将需要上链的数据广播给其他节点，生成区块进行共识，写入区块链等。

可选地，在本实施例中，根据不同的需求可以对区块链缓冲层进行不同的部署，区块链缓冲层可以设置于每个节点设备中，即在每个节点设备中部署一个存储区域和存储机制。或者，区块链缓冲层可以设置于区块链中的部分节点设备中，也就是说，区块链应用层的多个节点设备与区块链缓冲层的缓冲设备之间可以是一对一的连接，也可以是多对一的连接。

可选地，在本实施例中，如图2所示，在区块链的一个可选的拓扑结构中包括多个节点设备，其中，在每个节点设备中部署了一个缓冲区域作为区块链缓冲层，用于存储请求上链的数据。每个节点设备接收到请求后将请求的数据存储在缓冲区域的待处理数据集合中，后续待处理条件满足要求，比如说区块链系统负载低时，再将存储的请求所需要上链的数据广播给其他节点，生成区块进行共识，写入区块链。

可选地，在本实施例中，如图3所示，在区块链的另一个可选的拓扑结构中包括多个缓冲设备作为区块链缓冲层和多个节点设备作为区块链应用层，其中，多个节点设备与多个缓冲设备中有的是一对一的连接关系，有的是多对一的连接关系，再由多个缓冲设备连接到其他节点设备。缓冲设备接收到节点设备发送的请求后将请求的数据存储起来，后续待处理条件满足要求，比如说区块链系统负载低时，再将存储的请求所需要上链的数据广播给其他节点，生成区块进行共识，写入区块链。

可选地，在本实施例中，以区块链缓冲层为部署在每个节点设备的缓冲区域为例，上述数据处理方法可以应用于如图4所示的节点设备402、节点设备404和节点设备406所构成的硬件环境中。如图4所示，以节点设备402的处理过程为例，节点设备402的缓冲层接收节点设备402的应用层发送的第一请求，其中，第一请求用于请求将第一数据写入区块链；将第一数据存储到节点设备402中的待处理数据集合中；根据区块链当前的数据处理能力从待处理数据集合中获取目标数据，其中，目标数据的数据量小于或者等于区块链当前允许处理的数据量；将目标数据写入节点设备404和节点设备406中。

可选地，在本实施例中，上述数据处理方法可以但不限于应用于对待写入区块链的数据进行处理的场景中。其中，上述节点设备可以但不限于应用于各个领域，例如，在线教育领域、即时通讯领域、社区空间领域、游戏领域、购物领域、浏览器领域、金融领域、多媒体领域、直播领域等。具体的，可以但不限于应用于在上述金融领域对待写入区块链的数据进行处理的场景中，或还可以但不限于应用于在上述购物领域对待写入区块链的数据进行处理的场景中，以提高处理用于请求将数据写入区块链的请求时的处理效率。上述仅是一种示例，本实施例中对此不做任何限定。

可选地，在本实施例中，上述数据处理方法可以由区块链中的任意节点执行，也可以由区块链中作为区块链缓冲层的节点设备执行。例如：如果由节点设备作为区块链缓冲层，则由节点设备执行上述步骤S102至步骤S108；除此之外，还可以由区块链之外的设备执行上述数据处理方法。如果由区块链之外的专门的缓冲设备作为区块链的缓冲层，则由由区块链之外的专门的缓冲设备执行上述步骤S102至步骤S108。

可选地，在本实施例中，第一数据可以但不限于被存储在数据库(DB)中，或者也可以通过其他形式进行存储，比如：缓存在节点设备的内存中等等。待处理数据集合可以位于区块链中的某一个节点设备内，也可以位于区块链之外的设备中。

可选地，在本实施例中，第一请求中可以但不限于携带有第一数据。如果第一请求中携带有第一数据，则将第一请求携带的第一数据存储到待处理数据集合中。如果第一请求中没有携带第一数据，则根据第一请求的指示首先获取到第一数据，再将获取到的第一数据存储到待处理数据集合中。

可选地，在本实施例中，第一请求是用于请求将某些数据写入区块链中的，对于不同的区块链实现方式，可能数据写入的方式也不相同，在此将用于请求将数据写入区块链的信息统称为请求。

可选地，在本实施例中，第一请求可以但不限于是执行上述数据处理方法的设备自身产生的，也可以是执行上述数据处理方法的设备所连接的用户终端发送来的。

在一个可选的实施方式中，如图5所示，以区块链缓冲层被部署在节点设备上为例，数据处理的流程包括以下步骤：

步骤1，节点设备的缓冲层接收应用层发送的第一请求，其中，第一请求用于请求将第一数据写入区块链；

步骤2，节点设备的缓冲层将第一数据存储到位于应用存储中的待处理数据集合中；

步骤3，节点设备的缓冲层根据区块链当前的数据处理能力从待处理数据集合中获取目标数据，其中，目标数据的数据量小于或者等于区块链当前允许处理的数据量；

步骤4，节点设备的缓冲层将目标数据写入区块链中所包含的对象区块链节点中。

可以理解的是，所述区块链中所包含的对象区块链节点包括区块链中除执行数据处理方法的节点设备之外的其他任意一个或者多个节点设备。当数据处理方法是由区块链之外的其他设备执行时，所述区块链中所包含的对象区块链节点包括区块链中的任意一个或者多个区块链节点。

可见，通过上述步骤，接收到用于请求将第一数据写入区块链的第一请求后将第一数据存储在区块链中的待处理数据集合中，并根据区块链当前的数据处理能力从待处理数据集合中获取目标数据进行上链处理，从而避免了接收到大并发数请求时容易造成数据阻塞而导致数据上链效率较低或者数据上链失败的现象发生，增大了请求的并发数，从而实现了提高处理用于请求将数据写入区块链的请求时的处理效率的技术效果，进而解决了相关技术中处理用于请求将数据写入区块链的请求时的处理效率较低的技术问题。

作为一种可选的方案，将第一数据存储到待处理数据集合中包括：在区块链当前允许处理的数据量小于或者等于目标数据量的情况下，将第一数据存储到位于区块链中的待处理数据集合中；

根据区块链当前的数据处理能力从待处理数据集合中获取目标数据包括：在区块链当前允许处理的数据量由小于或者等于目标数据量转换为大于目标数据量的情况下，从待处理数据集合中获取目标数据。

可选地，在本实施例中，在将接收到的请求存储到区块链缓冲层的待处理数据集合之后，可以从待处理数据集合中获取一批目标数据发送给区块链，以对这些目标数据执行上链操作，使其能够进行上链。

可选地，在本实施例中，目标数据可以但不限于来自于一个或者多个请求。目标数据是根据区块链当前的数据处理能力获取到的，可以在区块链当前的数据处理能力满足一定条件的时候，从待处理数据集合中获取数据量不大于区块链当前允许处理的数据量的目标数据进行处理。

可选地，在本实施例中，可以在区块链当前允许处理的数据量小于或者等于目标数据量的情况下，将第一数据存储到位于区块链中的待处理数据集合中，而在区块链当前允许处理的数据量大于目标数据量的情况下，直接将第一数据写入区块链中所包含的对象区块链节点中，以保证区块链存储层不会出现请求拥堵的现象，从而提高了请求处理的速度。

可选地，在本实施例中，在将第一数据进行存储之后，可以在条件成熟(比如：区块链系统负载较低)时再将需要上链的第一数据广播给其他节点，生成区块进行共识，写入区块链。

作为一种可选的方案，在将第一数据存储到待处理数据集合中之后，还包括：

S1，在成功存储第一数据的情况下，生成第一存储结果信息，其中，第一存储结果信息用于指示第一数据存储成功；

S2，接收第二请求，其中，第二请求用于请求将第二数据写入区块链；

S3，将第二数据存储到待处理数据集合中。

可选地，在本实施例中，如果第一数据被区块链缓冲层成功存储了，则可以生成一个用于指示所述第一数据存储成功的第一存储结果信息通知区块链应用层可以继续接收其他请求了，区块链应用层可以响应该第一存储结果信息接收用于请求将第二数据写入所述区块链的第二请求，并由区块链缓冲层将第二数据存储到位于区块链中的所述待处理数据集合中，使得区块链应用层不必等待请求的处理结果即可继续接收其他请求，从而实现上链请求的半同步处理，与同步处理的机制相比，该半同步处理机制能够增大请求的并发数，与异步处理的机制相比，该半同步处理机制能够实现对并发数的控制。

在一个可选的实施方式中，以区块链缓冲层被部署在节点设备上为例，数据处理的流程包括以下步骤：

步骤1，节点设备的区块链缓冲层接收区块链应用层发送的第一请求，其中，第一请求用于请求将第一数据写入区块链；

步骤2，节点设备的区块链缓冲层将第一数据存储到位于应用存储中的待处理数据集合中；

步骤3，节点设备的区块链缓冲层在成功存储第一数据的情况下，生成第一存储结果信息并将其发送给区块链应用层，其中，第一存储结果信息用于指示第一数据存储成功；

步骤4，节点设备的区块链应用层响应第一存储结果信息接收第二请求，其中，第二请求用于请求将第二数据写入区块链；

步骤5，节点设备的区块链缓冲层将第二数据存储到位于区块链中的待处理数据集合中；

步骤6，节点设备的缓冲层根据区块链当前的数据处理能力从待处理数据集合中获取目标数据，其中，目标数据的数据量小于或者等于区块链当前允许处理的数据量；

步骤7，节点设备的缓冲层将目标数据写入区块链中所包含的对象区块链节点中。

需要说明的是，在本实施例中，不限定上述步骤6与上述步骤3之间的执行顺序，即节点设备的缓冲层在区块链当前的数据处理能力满足处理条件时即可从待处理数据集合中获取目标数据进行处理。节点设备的区块链应用层在确定第一数据存储成功后即可继续接收其他请求。二者的执行互不影响。

作为一种可选的方案，在将目标数据写入区块链中之后，还包括：

S1，获取与目标数据对应的处理结果，其中，处理结果用于指示目标数据是否成功写入区块链中所包含的对象区块链节点中；

S2，记录具有对应关系的目标数据和处理结果。

可选地，在本实施例中，接收区块链中的节点返回的目标数据的处理结果，并将各个目标数据对应的处理结果记录下来。

可选地，在本实施例中，记录具有对应关系的目标数据和处理结果的方式可以但不限于为在日志中记录目标数据的标识及其对应的处理结果的标识，比如：如表1所示，日志中以表格形式记录了数据1至数据N的处理结果，处理结果为1表示处理成功，为0表示处理失败。

表1

由表1可以查找到各个已处理的数据的处理结果，由表1可以看出数据2、数据4、数据N处理成功了，数据1、数据3处理失败了。

可选地，在本实施例中，记录具有对应关系的目标数据和处理结果的方式可以但不限于为存储具有对应关系的目标数据和处理结果。

作为一种可选的方案，在记录具有对应关系的目标数据和处理结果之后，还包括：

S1，从待处理数据集合中删除目标数据中处理结果为第三结果的第四数据，其中，第三结果用于指示第四数据成功写入区块链中所包含的对象区块链节点中。

可选地，在本实施例中，在记录了目标数据和其对应的处理结果之后，可以将存储的数据中处理成功数据删除，从而能够使存储空间存储更多的数据，以节约资源。

作为一种可选的方案，在获取与目标数据对应的处理结果之后，还包括：

S1，从存储的目标数据中获取记录的处理结果为第一结果的第三数据，其中，第一结果用于指示第三数据未能成功写入区块链中所包含的对象区块链节点中；

S2，将第三数据重新写入区块链中所包含的对象区块链节点中，直至接收到对象区块链节点返回的第二结果，其中，第二结果用于指示第三数据成功写入区块链中所包含的对象区块链节点中。

可选地，在本实施例中，如果在上链过程中，由于网络等系统外异常造成了上链的失败，由于数据缓存机制的存在，可以定期的重放数据，直至数据处理成功，从而提高了数据处理的成功率。

作为一种可选的方案，在接收到对象区块链节点返回的第二结果之后，还包括：

S1，将记录的具有对应关系的第三数据和第一结果更新为具有对应关系的第三数据和第二结果。

可选地，在本实施例中，处理未成功的数据在重新处理成功后，可以对记录的具有对应关系的数据和处理结果进行更新。例如：在表1中的数据1和数据3等等未成功的数据重新发送处理后，接收到用于指示数据1和数据3等等处理成功的处理结果，则如表2所示，将表1中数据1和数据3的处理结果由0更新为1。

表2

数据标识	处理结果
		数据1	1
数据2	1
		数据3	1
数据4	1
		……	……
数据N	1

可选地，在本实施例中，由于第三数据已经处理成功了，可以将存储的第三数据删除，以节省存储空间。

作为一种可选的方案，在记录具有对应关系的目标数据和处理结果之后，还包括：

S1，将具有对应关系的目标数据和处理结果发送至目标数据所对应的目标请求的发送方；或者，

S2，接收第三请求的发送方发送的查询请求，其中，查询请求用于请求查询第三请求所请求写入区块链的数据的处理结果；从具有对应关系的目标数据和处理结果中获取第三请求对应的第四结果；将第四结果发送至第三请求的发送方。

可选地，在本实施例中，可以将得到的处理结果主动通知给请求发送方，或者，也可以接收请求发送方发送的查询请求，响应该查询请求将其请求查询的请求的处理结果发送给请求发送方。

作为一种可选的方案，在将第一数据存储到待处理数据集合中之后，还包括：

S1，在存储第一数据失败的情况下，发送第二存储结果信息至第一请求的发送方，其中，第二存储结果信息用于指示存储第一数据失败；

S2，接收第一请求的发送方响应第二存储结果信息发送的第一请求。

可选地，在本实施例中，如果第一数据存储失败了，则可以将失败的结果发送给请求发送方，请求发送方将根据需要重新发送第一请求。

需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

根据本发明实施例的一个方面，还提供了一种用于实施上述数据处理方法的数据处理装置，如图6所示，该装置包括：

第一接收模块62，用于接收第一请求，其中，第一请求用于请求将第一数据写入区块链；

第一存储模块64，用于将第一数据存储到待处理数据集合中；

第一获取模块66，用于根据区块链当前的数据处理能力从待处理数据集合中获取目标数据，其中，目标数据的数据量小于或者等于区块链当前允许处理的数据量；

第一写入模块68，用于将目标数据写入区块链中。

作为一种可选的方案，第一存储模块64用于：在区块链当前允许处理的数据量小于或者等于目标数据量的情况下，将第一数据存储到位于区块链中的待处理数据集合中；

第一获取模块66用于：在区块链当前允许处理的数据量由小于或者等于目标数据量转换为大于目标数据量的情况下，从待处理数据集合中获取目标数据。

可选地，在本实施例中，在将接收到的请求存储到区块链缓冲层的待处理数据集合之后，可以从待处理数据集合中获取一批目标数据发送给区块链，以对这些目标数据执行上链操作，使其能够进行上链。

可选地，在本实施例中，目标数据可以但不限于来自于一个或者多个请求。目标数据是根据区块链当前的数据处理能力获取到的，可以在区块链当前的数据处理能力满足一定条件的时候，从待处理数据集合中获取数据量不大于区块链当前允许处理的数据量的目标数据进行处理。

可选地，在本实施例中，可以在区块链当前允许处理的数据量小于或者等于目标数据量的情况下，将第一数据存储到位于区块链中的待处理数据集合中，而在区块链当前允许处理的数据量大于目标数据量的情况下，直接将第一数据写入区块链中所包含的对象区块链节点中，以保证区块链存储层不会出现请求拥堵的现象，从而提高了请求处理的速度。

可选地，在本实施例中，在将第一数据进行存储之后，可以在条件成熟(比如：区块链系统负载较低)时再将需要上链的第一数据广播给其他节点，生成区块进行共识，写入区块链。

作为一种可选的方案，上述装置还包括：

生成模块，用于在成功存储第一数据的情况下，生成第一存储结果信息，其中，第一存储结果信息用于指示第一数据存储成功；

第二接收模块，用于接收第二请求，其中，第二请求用于请求将第二数据写入区块链；

第二存储模块，用于将第二数据存储到待处理数据集合中。

可选地，在本实施例中，如果第一数据被区块链缓冲层成功存储了，则可以生成一个用于指示所述第一数据存储成功的第一存储结果信息通知区块链应用层可以继续接收其他请求了，区块链应用层可以响应该第一存储结果信息接收用于请求将第二数据写入所述区块链的第二请求，并由区块链缓冲层将第二数据存储到位于区块链中的所述待处理数据集合中，使得区块链应用层不必等待请求的处理结果即可继续接收其他请求，从而实现上链请求的半同步处理，与同步处理的机制相比，该半同步处理机制能够增大请求的并发数，与异步处理的机制相比，该半同步处理机制能够实现对并发数的控制。

作为一种可选的方案，上述装置还包括：

第二获取模块，用于获取与目标数据对应的处理结果，其中，处理结果用于指示目标数据是否成功写入区块链中所包含的对象区块链节点中；

记录模块，用于记录具有对应关系的目标数据和处理结果。

可选地，在本实施例中，接收区块链返回的目标数据的处理结果，并将各个目标数据对应的处理结果记录下来。

作为一种可选的方案，上述装置还包括：

删除模块，用于从待处理数据集合中删除目标数据中处理结果为第三结果的第四数据，其中，第三结果用于指示第四数据成功写入区块链中所包含的对象区块链节点中。

可选地，在本实施例中，在记录了目标数据和其对应的处理结果之后，可以将存储的数据中处理成功数据删除，从而能够使存储空间存储更多的数据，以节约资源。

作为一种可选的方案，上述装置还包括：

第三获取模块，用于从存储的目标数据中获取记录的处理结果为第一结果的第三数据，其中，第一结果用于指示第三数据未能成功写入区块链中所包含的对象区块链节点中；

第二写入模块，用于将第三数据重新写入区块链中所包含的对象区块链节点中，直至接收到所述对象区块链节点返回的第二结果，其中，第二结果用于指示第三数据成功写入区块链中所包含的对象区块链节点中。

可选地，在本实施例中，如果在上链过程中，由于网络等系统外异常造成了上链的失败，由于数据缓存机制的存在，可以定期的重放数据，直至数据处理成功，从而提高了数据处理的成功率。

作为一种可选的方案，上述装置还包括：

更新模块，用于将记录的具有对应关系的第三数据和第一结果更新为具有对应关系的第三数据和第二结果。

可选地，在本实施例中，处理未成功的数据在处理成功后，可以对记录的具有对应关系的数据和处理结果进行更新。可选地，在本实施例中，由于第三数据已经处理成功了，可以将存储的第三数据删除，以节省存储空间。

作为一种可选的方案，上述装置还包括：

第一发送模块，用于将具有对应关系的目标数据和处理结果发送至目标数据所对应的目标请求的发送方；或者，

处理模块，用于接收第三请求的发送方发送的查询请求，其中，查询请求用于请求查询第三请求所请求写入区块链的数据的处理结果；从具有对应关系的目标数据和处理结果中获取第三请求对应的第四结果；将第四结果发送至第三请求的发送方。

可选地，在本实施例中，可以将得到的处理结果主动通知给请求发送方，或者，也可以接收请求发送方发送的查询请求，响应该查询请求将其请求查询的第五请求的处理结果发送给请求发送方。

作为一种可选的方案，上述装置还包括：

第二发送模块，用于在存储第一数据失败的情况下，发送第二存储结果信息至第一请求的发送方，其中，第二存储结果信息用于指示存储第一数据失败；

第三接收模块，用于接收第一请求的发送方响应第二存储结果信息发送的第一请求。

可选地，在本实施例中，如果第一数据存储失败了，则可以将失败的结果发送给请求发送方，请求发送方将根据需要重新发送第一请求。

本发明实施例的应用环境可以但不限于参照上述实施例中的应用环境，本实施例中对此不再赘述。本发明实施例提供了用于实施上述实时通信的连接方法的一种可选的具体应用示例。

如图7所示的时序图，作为一种可选的实施例，上述数据处理方法可以但不限于应用于上链请求的半同步处理的场景中。在本场景中，基于BFT-RAFT等可以承载大并发的共识协议基础上，致力于解决在高并发场景下，提高应用上链速度的技术问题。在应用层高并发的情况下，将上链速度提升至每秒万级，并保证极高的上链成功率。

该半同步的上链处理模式适用于游戏，电商等需要大并发上链的场景，解决在大并发场景下，系统稳定性和上链速度之间的平衡问题，可以在保证系统稳定的情况下，保证最大的上链速度，以提升用户体验。

半同步上链模式为：在区块链应用层和区块链存储之间，增加一个区块链缓冲层。该层接收应用的请求，并将请求缓存至DB或其他存储中，然后返回给应用缓存成功的信息，再异步进行上链操作。应用层后续可以通过查询或者等待通知得到上链结果。如图7所示，半同步上链模式的流程包括以下步骤：

步骤1，区块链应用层接收到用户发送的上链请求。

步骤2，区块链应用层对数据进行一些处理。

步骤3，区块链应用层向区块链缓冲层发送上链请求。

步骤4，区块链缓冲层将用户请求临时缓存至应用存储中，并向区块链应用层返回缓存成功信息。

步骤5，后续区块链缓冲层与区块链存储交互对存储的请求进行上链处理，并接收区块链存储返回的上链结果。

步骤6，区块链缓冲层将接收到的上链结果更新到应用存储中。

步骤7，区块链缓冲层异步向区块链应用层通知上链结果。

可选地，在本实施例中，对上链失败的处理如下：如果在上链过程中，由于网络等系统外异常造成的失败，由于缓存机制的存在，可以定期的重放请求。

通过上述步骤，由于提前缓存了应用层上链的请求，在上链失败后，可以自发重试，提高上链成功率。应用层不必等待上链结果，上链结果后续可以等通知或者查询得知。可以增大应用层的并发量。通过该模式可以有效的控制并发量，当应用层面临很大压力的时候，把处理不过来的请求缓存后，后续通过额外的批跑或者脚本进行重放，延迟上链。从而保证系统的稳定性。

根据本发明实施例的又一个方面，还提供了一种用于实施上述数据处理的电子装置，如图8所示，该电子装置包括：一个或多个(图中仅示出一个)处理器802、存储器804、传感器806、编码器808以及传输装置810，该存储器中存储有计算机程序，该处理器被设置为通过计算机程序执行上述任一项方法实施例中的步骤。

可选地，在本实施例中，上述电子装置可以为位于计算机网络的多个网络设备中的至少一个网络设备。

可选地，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：

S1，接收第一请求，其中，第一请求用于请求将第一数据写入区块链；

S2，将第一数据存储到待处理数据集合中；

S3，根据区块链当前的数据处理能力从待处理数据集合中获取目标数据，其中，目标数据的数据量小于或者等于区块链当前允许处理的数据量；

S4，将目标数据写入区块链中。

可选地，本领域普通技术人员可以理解，图8所示的结构仅为示意，电子装置也可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑以及移动互联网设备(Mobile Internet Devices，MID)、PAD等终端设备。图8其并不对上述电子装置的结构造成限定。例如，电子装置还可包括比图8中所示更多或者更少的组件(如网络接口、显示装置等)，或者具有与图8所示不同的配置。

其中，存储器802可用于存储软件程序以及模块，如本发明实施例中的数据处理方法和装置对应的程序指令/模块，处理器804通过运行存储在存储器802内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的目标组件的控制方法。存储器802可包括高速随机存储器，还可以包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器802可进一步包括相对于处理器804远程设置的存储器，这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

上述的传输装置810用于经由一个网络接收或者发送数据。上述的网络具体实例可包括有线网络及无线网络。在一个实例中，传输装置810包括一个网络适配器(NetworkInterface Controller，NIC)，其可通过网线与其他网络设备与路由器相连从而可与互联网或局域网进行通讯。在一个实例中，传输装置810为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。

其中，具体地，存储器802用于存储应用程序。

本发明的实施例还提供了一种存储介质，该存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。

可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的计算机程序：

S1，接收第一请求，其中，第一请求用于请求将第一数据写入区块链；

S2，将第一数据存储到待处理数据集合中；

S3，根据区块链当前的数据处理能力从待处理数据集合中获取目标数据，其中，目标数据的数据量小于或者等于区块链当前允许处理的数据量；

S4，将目标数据写入区块链中。

可选地，存储介质还被设置为存储用于执行上述实施例中的方法中所包括的步骤的计算机程序，本实施例中对此不再赘述。

可选地，在本实施例中，本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(Read-Only Memory，ROM)、随机存取器(Random Access Memory，RAM)、磁盘或光盘等。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在上述计算机可读取的存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在存储介质中，包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。

在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的客户端，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (13)

1.一种数据处理方法，其特征在于，包括：

接收区块链应用层发送的第一上链请求，将第一数据存储到待处理数据集合中，其中，所述第一上链请求是所述区块链应用层根据接收到的数据上链请求触发的，所述第一上链请求用于请求将所述第一数据写入区块链中，所述待处理数据集合是应用存储中用于存储接收到的请求写入所述区块链中的数据；

生成第一存储结果信息，将所述第一存储结果信息发送给所述区块链应用层，其中，所述第一存储结果信息用于指示成功将所述第一数据存储至所述待处理数据集合中；

响应于所述第一存储结果信息，接收第二上链请求，将第二数据存储到所述待处理数据集合中，其中，所述第二上链请求用于请求将所述第二数据写入所述区块链；

根据区块链当前的数据处理能力从所述待处理数据集合中获取目标数据，其中，所述目标数据的数据量小于或者等于所述区块链当前允许处理的数据量；

将所述目标数据写入所述区块链中；

接收所述区块链返回的所述目标数据对应的上链处理结果，将所述上链处理结果更新至所述应用存储中，并向所述区块链应用层通知所述上链处理结果，其中，所述处理结果用于指示所述目标数据是否成功写入所述区块链中所包含的对象区块链节点中；

获取所述上链处理结果，并记录具有对应关系的所述目标数据和所述上链处理结果；

将具有对应关系的所述目标数据和所述上链处理结果发送至所述目标数据所对应的目标请求的发送方；或者，接收第三请求的发送方发送的查询请求，其中，所述查询请求用于请求查询所述第三请求所请求写入所述区块链的数据的处理结果；从具有对应关系的所述目标数据和所述处理结果中获取所述第三请求对应的第四结果；将所述第四结果发送至所述第三请求的发送方。

2.根据权利要求1所述的方法，其特征在于，在记录具有对应关系的所述目标数据和所述上链处理结果之后，所述方法还包括：

从所述待处理数据集合中删除所述目标数据中所述上链处理结果为第三结果的第四数据，其中，所述第三结果用于指示所述第四数据成功写入所述区块链中所包含的对象区块链节点中。

3.根据权利要求1所述的方法，其特征在于，在获取所述上链处理结果之后，所述方法还包括：

从存储的所述目标数据中获取记录的所述上链处理结果为第一结果的第三数据，其中，所述第一结果用于指示所述第三数据未能成功写入所述区块链中所包含的对象区块链节点中；

将所述第三数据重新写入所述区块链中所包含的对象区块链节点中，直至接收到所述对象区块链节点返回的第二结果，其中，所述第二结果用于指示所述第三数据成功写入所述区块链中所包含的对象区块链节点中。

4.根据权利要求3所述的方法，其特征在于，接收到所述对象区块链节点返回的第二结果之后，所述方法还包括：

将记录的具有对应关系的所述第三数据和所述第一结果更新为具有对应关系的所述第三数据和所述第二结果。

5.根据权利要求1所述的方法，其特征在于，

所述将所述第一数据存储到待处理数据集合中包括：在所述区块链当前允许处理的数据量小于或者等于目标数据量的情况下，将所述第一数据存储到位于所述区块链中的待处理数据集合中；

根据所述区块链当前的数据处理能力从所述待处理数据集合中获取目标数据包括：在所述区块链当前允许处理的数据量由小于或者等于所述目标数据量转换为大于所述目标数据量的情况下，从所述待处理数据集合中获取所述目标数据。

6.根据权利要求1所述的方法，其特征在于，在将所述第一数据存储到所述待处理数据集合中之后，所述方法还包括：

在存储所述第一数据失败的情况下，发送第二存储结果信息至所述第一上链请求的发送方，其中，所述第二存储结果信息用于指示存储所述第一数据失败；

接收所述第一上链请求的发送方响应所述第二存储结果信息发送的所述第一上链请求。

7.一种数据处理系统，其特征在于，包括：请求的发送方和区块链，其中，所述区块链中包括目标区块链节点和对象区块链节点，所述请求的发送方将请求发送至所述目标区块链节点，

所述目标区块链节点接收区块链应用层发送的第一上链请求，将第一数据存储到待处理数据集合中，其中，所述第一上链请求是所述区块链应用层根据接收到的数据上链请求触发的，所述第一上链请求用于请求将所述第一数据写入区块链中，所述待处理数据集合是应用存储中用于存储接收到的请求写入所述区块链中的数据；

生成第一存储结果信息，将所述第一存储结果信息发送给所述区块链应用层，其中，所述第一存储结果信息用于指示成功将所述第一数据存储至所述待处理数据集合中；

响应于所述第一存储结果信息，接收第二上链请求，将第二数据存储到所述待处理数据集合中，其中，所述第二上链请求用于请求将所述第二数据写入所述区块链；

所述目标区块链节点根据所述区块链当前的数据处理能力从所述待处理数据集合中获取目标数据，其中，所述目标数据的数据量小于或者等于所述区块链当前允许处理的数据量；

所述目标区块链节点将所述目标数据写入所述区块链中所包含的所述对象区块链节点中；

所述目标区块链节点接收所述区块链返回的所述目标数据对应的上链处理结果，将所述上链处理结果更新至所述应用存储中，并向所述区块链应用层通知所述上链处理结果，其中，所述处理结果用于指示所述目标数据是否成功写入所述区块链中所包含的对象区块链节点中；

所述目标区块链节点获取所述上链处理结果，并记录具有对应关系的所述目标数据和所述上链处理结果；

所述目标区块链节点将具有对应关系的所述目标数据和所述上链处理结果发送至所述目标数据所对应的目标请求的发送方；或者，接收第三请求的发送方发送的查询请求，其中，所述查询请求用于请求查询所述第三请求所请求写入所述区块链的数据的处理结果；从具有对应关系的所述目标数据和所述处理结果中获取所述第三请求对应的第四结果；将所述第四结果发送至所述第三请求的发送方。

8.根据权利要求7所述的系统，其特征在于，所述目标区块链节点还用于：

在记录具有对应关系的所述目标数据和所述上链处理结果之后，从所述待处理数据集合中删除所述目标数据中所述上链处理结果为第三结果的第四数据，其中，所述第三结果用于指示所述第四数据成功写入所述区块链中所包含的对象区块链节点中。

9.根据权利要求7所述的系统，其特征在于，所述目标区块链节点还用于：

在获取与所述目标数据对应的所述上链处理结果之后，从存储的所述目标数据中获取记录的所述处理结果为第一结果的第三数据，其中，所述第一结果用于指示所述第三数据未能成功写入所述区块链中所包含的对象区块链节点中；

将所述第三数据重新写入所述区块链中所包含的对象区块链节点中，直至接收到所述对象区块链节点返回的第二结果，其中，所述第二结果用于指示所述第三数据成功写入所述区块链中所包含的对象区块链节点中。

10.根据权利要求9所述的系统，其特征在于，所述目标区块链节点还用于：

接收到所述对象区块链节点返回的第二结果之后，将记录的具有对应关系的所述第三数据和所述第一结果更新为具有对应关系的所述第三数据和所述第二结果。

11.一种数据处理装置，其特征在于，包括：

第一接收模块，用于接收区块链应用层发送的第一上链请求，其中，所述第一上链请求是所述区块链应用层根据接收到的数据上链请求触发的，所述第一上链请求用于请求将第一数据写入区块链中；

第一存储模块，用于将所述第一数据存储到待处理数据集合中，其中，所述待处理数据集合是应用存储中用于存储接收到的请求写入所述区块链中的数据；

生成模块，用于生成第一存储结果信息，将所述第一存储结果信息发送给区块链应用层，其中，所述第一存储结果信息用于指示成功将所述第一数据存储至所述待处理数据集合中；

第二接收模块，用于响应于所述第一存储结果信息，接收第二上链请求，其中，所述第二上链请求用于请求将第二数据写入所述区块链；

第二存储模块，用于将所述第二数据存储到所述待处理数据集合中；

第一获取模块，用于根据区块链当前的数据处理能力从所述待处理数据集合中获取目标数据，其中，所述目标数据的数据量小于或者等于所述区块链当前允许处理的数据量；

第一写入模块，用于将所述目标数据写入所述区块链中；

结果接收模块，用于接收所述区块链返回的所述目标数据对应的上链处理结果，将所述上链处理结果更新至所述应用存储中，并向所述区块链应用层通知所述上链处理结果，其中，所述处理结果用于指示所述目标数据是否成功写入所述区块链中所包含的对象区块链节点中；

第二获取模块，用于获取所述上链处理结果；

记录模块，用于记录具有对应关系的目标数据和所述上链处理结果；

第一发送模块，用于将具有对应关系的目标数据和所述上链处理结果发送至目标数据所对应的目标请求的发送方；或者，处理模块，用于接收第三请求的发送方发送的查询请求，其中，查询请求用于请求查询第三请求所请求写入区块链的数据的处理结果；从具有对应关系的目标数据和处理结果中获取第三请求对应的第四结果；将第四结果发送至第三请求的发送方。

12.一种计算机可读存储介质，其特征在于，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行所述权利要求1至6任一项中所述的方法。

13.一种电子装置，其特征在于，所述电子装置包括存储器和处理器，所述存储器存储有计算机程序，所述处理器被设置为通过执行所述计算机程序实现所述权利要求1至6任一项中所述的方法。

Images