CN114301790B - 一种数据传输方法及装置 - Google Patents
一种数据传输方法及装置 Download PDFInfo
- Publication number
- CN114301790B CN114301790B CN202111476857.7A CN202111476857A CN114301790B CN 114301790 B CN114301790 B CN 114301790B CN 202111476857 A CN202111476857 A CN 202111476857A CN 114301790 B CN114301790 B CN 114301790B
- Authority
- CN
- China
- Prior art keywords
- data
- data information
- editing
- fragments
- unique identifier
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 63
- 238000000034 method Methods 0.000 title claims abstract description 60
- 230000000694 effects Effects 0.000 claims abstract description 133
- 239000012634 fragment Substances 0.000 claims abstract description 121
- 230000006399 behavior Effects 0.000 abstract description 2
- 230000000903 blocking effect Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 7
- 230000000051 modifying effect Effects 0.000 description 6
- 238000013467 fragmentation Methods 0.000 description 5
- 238000006062 fragmentation reaction Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Information Transfer Between Computers (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明是关于一种数据传输方法及装置,用以保证大数据场景下的服务器端正常稳定运行,以此保证商家数据的正确存储且极端情况下产生错误不阻断用户行为。该方法包括:获取用户在活动创建页面输入的数据信息;对所述数据信息进行分片处理得到多个数据分片;将多个数据分片依次发送给后端服务器,包括:向后端服务器的创建接口发送数据分片,直到首次发送成功,获取后端服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符后返回的唯一标识符;后续每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
Description
技术领域
本发明涉及计算机技术领域,尤其涉及一种数据传输方法及装置。
背景技术
在电商行业中商家往往需要设置一些促销活动来吸引买家下单,促销活动例如包括商品的优惠折扣,这就需要商家在对应电商系统内的管理后台(比如d.weidian.com)对一些商品进行个性的活动设置(比如限时折扣),以达到促销的优惠折扣属性设置。活动的设置过程分为创建和编辑。
如图1所示为传统模式的创建流程,在步骤101中,商家进入创建流程,在步骤102中,前端进行页面呈现,商家在前端设置活动名称、活动时间、活动商品等信息,在步骤103中,前端还可以对内容的输入、设置进行确定。在步骤104中,商家点击保存活动的选项。在步骤105中,商家在前端设置的活动名称、活动时间、活动商品等信息,统一由前端页面打包为form表单内容通过post方式一次性传递给后端服务器。后端服务器接收到前端传递的数据后便开始进行必要的商品校验,以校验通过后的存储动作,存储过程完毕即活动保存成功,活动保存成功即对应商品的优惠折扣属性生效,商家刚刚所设置的对应商品便具备了个性的优惠折扣属性,买家可以通过访问店铺或商品来查看购买。然而,如果商品数据过多,例如包括3000个商品数据,商品数据太多,这么多的商品数据后端服务器是无法按照预期来完成商品的校验和信息的保存的,电商行业内的单接口超时一般为100ms-200ms,一般情况下只可以一次性校验+保存几十个商品维度数据,如果刻意调高超时时间,会对服务器造成很大压力从而影响其他服务线程,同时一旦超时失败就是提交的商品信息全部失败,完全阻断了商家的操作。服务器端无法在正常时间内(200ms)处理完成,服务器端超时,意味着活动无法保存成功,影响商家促销。
如图2所示,商家还可以对创建过的活动进行二次修改(即编辑),在步骤201中,商家进入编辑流程,在步骤202中,前端根据url里的活动ID去获取活动原始数据信息,在步骤203中,前端页面呈现出活动原始数据信息,商家开始对该活动内参与的商品范围进行必要的增加新商品、删除已参加活动的商品、修改已参加活动商品的优惠折扣属性(比如创建时设置的是打1折,现在可以通过修改变成打2折)等操作,在步骤204中,前端还可以对内容的输入、设置进行确定。在步骤205中,商家点击保存活动的选项。在步骤206中,商家设置结束后,前端将所有商品数据打包为form表单内容通过post方式一次性传递给后端服务器进行同样的校验和存储,以此达到修改活动的效果。在上述修改活动的过程中,同样存在商品数据过多,会对服务器造成很大压力从而影响其他服务线程,同时一旦超时失败就是提交的商品信息全部失败,完全阻断了商家的操作的问题,并且,用户进行编辑可能只是对局部商品进行编辑,这个时候将所有活动内的商品数据都传递给后端,会造成无用的资源浪费,也会加重服务器端的压力,更容易造成超时。
发明内容
为克服相关技术中存在的问题,本发明实施例提供一种数据传输方法及装置。所述技术方案如下:
根据本发明实施例的第一方面,提供一种数据传输方法,应用于前端,包括:
获取用户在活动创建页面输入的数据信息;
对所述数据信息进行分片处理得到多个数据分片;
将多个数据分片依次发送给后端服务器,包括:
向后端服务器的创建接口发送数据分片,直到首次发送成功,获取后端服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符后返回的唯一标识符;
后续每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
在一个实施例中,所述方法还包括:
当检测到用户进入已创建活动的编辑页面时,根据所述已创建活动的唯一标识符获取所述已创建活动的原始数据信息并显示在编辑页面中,所述原始数据信息是前端根据所述已创建活动的唯一标识符请求后端服务器获取的;
获取用户在所述编辑页面执行编辑操作后的第一数据信息;
将所述第一数据信息与所述原始数据信息进行比较,获取编辑数据信息;
对所述编辑数据信息进行分片处理得到多个数据分片;
将多个数据分片依次发送给后端服务器,包括:每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
在一个实施例中,所述将所述第一数据信息与所述原始数据信息进行比较,获取编辑数据信息,包括:
将所述第一数据信息与所述原始数据信息进行比较,确定出编辑数据信息的类别,所述类别包括新增的数据、修改的数据、删除的数据,在所述编辑数据信息中标记所述类别。
在一个实施例中,在发送数据分片过程中,若当前数据分片发送失败,则发送下一个数据分片。
在一个实施例中,所述方法还包括:
记录发送失败的数据分片;
在所有数据分片发送完毕后,若存在发送失败的数据分片,则提示用户重试。
根据本发明实施例的第二方面,提供一种页数据传输装置,其特征在于,应用于前端,包括:
第一获取模块,用于获取用户在活动创建页面输入的数据信息;
第一处理模块,用于对所述数据信息进行分片处理得到多个数据分片;
第一发送模块,用于将第一处理模块中的多个数据分片依次发送给后端服务器,包括:
向后端服务器的创建接口发送数据分片,直到首次发送成功,获取后端服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符后返回的唯一标识符;
后续每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
在一个实施例中,所述装置还包括:
第二获取模块,用于当检测到用户进入已创建活动的编辑页面时,根据所述已创建活动的唯一标识符获取所述已创建活动的原始数据信息并显示在编辑页面中,所述原始数据信息是前端根据所述已创建活动的唯一标识符请求后端服务器获取的;
第三获取模块,用于获取用户在所述编辑页面执行编辑操作后的第一数据信息;
第四获取模块,将所述第一数据信息与所述原始数据信息进行比较,获取编辑数据信息;
第二处理模块,用于对所述编辑数据信息进行分片处理得到多个数据分片;
第二发送模块,用于将第二处理模块的多个数据分片依次发送给后端服务器,包括:每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
在一个实施例中,所述第四获取模块用于:将所述第一数据信息与所述原始数据信息进行比较,确定出编辑数据信息的类别,所述类别包括新增的数据、修改的数据、删除的数据,在所述编辑数据信息中标记所述类别。
在一个实施例中,所述第一发送模块、第二发送模块,还用于:在发送数据分片过程中,若当前数据分片发送失败,则发送下一个数据分片。
在一个实施例中,所述第一发送模块、第二发送模块,还用于:
记录发送失败的数据分片;
在所有数据分片发送完毕后,若存在发送失败的数据分片,则提示用户重试。
根据本发明实施例的第三方面,提供一种数据传输装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行上述任一方法的步骤。
本发明的实施例提供的技术方案可以包括以下有益效果:
本发明技术方案采用分片发送的方式与服务器端交互处理数据,并且即便个别数据分片出错,也不阻断流程,可继续进行后面的分片传输,保证大数据场景下的服务器端正常稳定运行。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本发明。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是现有技术的活动创建流程。
图2是现有技术的活动编辑流程。
图3是根据示例性实施例示出的数据传输方法的流程图;
图4是根据示例性实施例示出的数据传输方法的流程图;
图5是根据示例性实施例示出的数据传输方法的模块图;
图6是根据示例性实施例示出的数据传输方法的模块图;
图7是根据示例性实施例示出的数据传输装置的模块图;
图8是根据示例性实施例示出的数据传输装置的模块图;
图9是根据示例性实施例示出的用于数据传输的装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
相关技术中,用户在前端创建活动或修改活动的过程中,如果某一活动内的数据信息量非常多,在保存活动时,这么多的数据信息量后端服务器是无法按照预期来完成商品的校验和信息的保存的,电商行业内的单接口超时一般为100ms-200ms,一般情况下只可以一次性校验+保存几十个商品维度数据,如果刻意调高超时时间,会对服务器造成很大压力从而影响其他服务线程,同时一旦超时失败就是提交的商品信息全部失败,完全阻断了商家的操作。基于此,本发明实施例提出一种数据传输方法,可解决数据传输中出现的问题。
图3示例性示出了本发明实施例所提供的数据传输方法的流程图。本数据传输方法可以应用于前端,前端为用户提供创建活动和修改活动的页面。
根据图3所示,该数据传输方法具体包括如下步骤S301至S303:
在步骤S301中,获取用户在活动创建页面输入的数据信息。
例如,前端提供给用户创建活动的页面,用户进入创建活动的页面并在创建活动页面中输入数据信息。在一实施例中,创建的活动例如为商品打折活动,那么,创建活动页面中需要输入活动名称、活动时间、活动商品等数据信息,其中活动商品的数据信息例如包括优惠折扣属性等。当用户确认数据信息输入完毕时,可以点击页面中的保存选项,此时前端就可以获取用户在活动创建页面中输入的数据信息。
在步骤S302中,对所述数据信息进行分片处理得到多个数据分片。
在一实施例中,可以由前端js代码对数据信息进行分片处理。分片处理的规则可以根据实际需要进行设置。例如,在一实施例中,可以按照每个分片包括20个商品数据的规则进行分片。在其他实施例中,也可以采用其他分片规则。其中,由于是创建活动,那么每个数据信息都是新增的,可以在每个数据分片内的数据信息中携带该新增类别。
在步骤S303中,将多个数据分片依次发送给后端服务器,包括:
向后端服务器的创建接口发送数据分片,直到首次发送成功,获取后端服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符后返回的唯一标识符;
后续每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
其中,后端服务器的创建接口用于向数据库(比如mysql)插入(insert)一条新的数据,执行过程相对简单,无需查询和修改,直接插入新的数据,插入数据成功则活动开始生效,同时数据库产生一条新的记录(该条记录一般对应一个唯一的主键索引ID,也就是活动的唯一标识符,方便后续进行更新、编辑操作)。后端服务器的编辑接口用于将数据库(比如mysql)中的某条记录(根据活动的唯一标识符判定需要操作的是哪条记录)进行更新操作,需要配合where关键字进行处理,以此来标明具体修改的是哪一条,同时update还需要在前置判断一下当前要更新的记录是否真实存在,更新数据成功则活动会应用新的数据,数据库不会在编辑的时候产生新的活动唯一标识符。
本实施例中,在首次发送数据分片时,首先是向后端服务器的创建接口发送,当发送成功后,服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符,并将唯一标识符返回给前端。如果发送失败,后端服务器未能成功在数据库中创建新数据记录以及活动的唯一标识符,那么就继续下一个数据分片的发送,此时仍然是请求后端服务器的创建接口,直到发送成功,服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符,并将唯一标识符返回给前端。
在获取到活动的唯一标识符后,数据分片的发送就有所不同,例如,向后端服务器的创建接口发送的第一个数据分片就成功,那么接下来的第二个数据分片以及以后的数据分片的发送,则携带该唯一标识符请求后端服务器的编辑接口即可,后端服务器的编辑接口将根据唯一标识符对对应的数据记录进行编辑,由于每个数据分片内的数据信息的类别都是新增,因此,编辑接口将每个数据分片都新增到该唯一标识符对应的数据记录中。
本实施例中,在活动创建(包括后边编辑)的时候只希望在数据库增加(更新)一个数据集即可(产生一个活动ID或更新某个活动ID下的数据),所以在数据分片请求开始处理后,任意一个数据分片请求成功就表明后端服务器的insert操作成功(数据库有了一条新的数据,即便几个分片的创建接口会请求失败,也不会阻断流程,前端会记录下错误的数据,继续下一个分片),这个时候前端拿到后端服务返回的活动ID,后续操作就是将剩余的分片依次更新到这个活动ID内即可,因此使用编辑接口,且整个分片请求的队列都是不阻断的,任意一个分片请求报错前端都会记录下错误内容,继续下一个分片,在最后将错误信息统一提示给用户,引导重试等操作。
本发明中,对创建活动的数据信息进行了分片处理,并且还利用后端服务器的编辑接口来支持创建活动的数据分片的传输。可以保证大数据量的数据传输,无上限满足商家设置诉求,无需任何额外成本开支。
在本发明的另一实施例中,在创建活动的基础上,进一步针对编辑活动也提出了数据传输方法,图4示例性示出了本发明实施例所提供的数据传输方法的流程图。根据图4所示,该数据传输方法具体包括如下步骤S401至S405:
在步骤S401中,当检测到用户进入已创建活动的编辑页面时,根据所述已创建活动的唯一标识符获取所述已创建活动的原始数据信息并显示在编辑页面中,所述原始数据信息是前端根据所述已创建活动的唯一标识符请求后端服务器获取的。
其中,前端为用户提供已创建活动的编辑页面。此时前端页面js已经在创建活动时就获取到该活动的唯一标识符,并且该活动在创建活动时在后端服务器的数据库中已经具有一部分数据信息即原始数据信息,此时,前端首先根据所述已创建活动的唯一标识符请求后端服务器的获取活动信息接口,将该活动的数据库中的信息(即原始数据信息)获取出来,然后将获取的原始数据信息显示在编辑页面。
在步骤S402中,获取用户在编辑页面执行编辑操作后的第一数据信息。
用户在活动编辑页面中,可以对数据信息进行编辑,包括新增数据信息、删除数据信息、修改数据信息等编辑操作。用户确认编辑完毕时,则可以点击活动保存选项,此时,就可以获取用户在所述编辑页面执行操作后该页面中的所有数据信息即第一数据信息。
在步骤S403中,将第一数据信息与原始数据信息进行比较,获取编辑数据信息。
其中,前端将第一数据信息与原始数据信息进行比较,确定实际有修改的编辑数据信息。也就是说,只有用户在原始数据信息上新增的数据、修改的数据、删除的数据才能作为编辑数据信息。
在一实施例中,在确定编辑数据信息时,还可以确定出编辑数据信息的类别,所述类别包括新增的数据、修改的数据、删除的数据,在所述编辑数据信息中标记出所述类别。
在步骤S404中,对编辑数据信息进行分片处理得到多个数据分片。
在一实施例中,可以由前端js代码对编辑数据信息进行分片处理。分片处理的规则可以根据实际需要进行设置。例如,在一实施例中,可以按照每个分片包括20个商品数据的规则进行分片。在其他实施例中,也可以采用其他分片规则。
在一实施例中,编辑数据信息中还标记出编辑数据信息的类别,指示该编辑数据信息是新增的,还是修改的,或者是删除的。明确了信息数据的操作类别,是新增(类别参数例如为:add)的还是删除(类别参数例如为:del)的还是局部修改(类别参数例如为:modify)的,提高了服务器端的数据处理能力。
在步骤S405中,将多个数据分片依次发送给后端服务器,包括:每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
在对已创建的活动进行编辑时,由于已经获取了该活动的唯一标识符,那么在发送编辑数据分片时,就可以携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
在本实施例中,对于编辑活动的数据,只传输在原始数据信息上新增的数据、修改的数据、删除的数据。即只处理操作过的,无需处理未经修改的数据,从而即采用增量更新的方式从源头(前端页面)减少没有必要的数据交互,大幅提升用户使用体验和服务器端效能、大幅降低服务器端处理时长。采用分片循环发送的方式与服务器端交互处理数据,保证大数据场景下的服务器端正常稳定运行,以此保证商家数据的正确存储且极端情况下产生错误不阻断用户行为。
在本发明一实施例中,在发送数据分片过程中,若当前数据分片发送失败,则发送下一个数据分片。采用分片循环的方式保证某些数据即便出错,也不阻断流程,可继续发送后面的数据分片。
在本发明一实施例中,所述方法还包括:
记录发送失败的数据分片;
在所有数据分片发送完毕后,若存在发送失败的数据分片,则提示用户重试。
下面结合两个具体实施例进一步详细说明本发明的技术方案:
图5示例性示出了本发明实施例所提供的数据传输方法的流程图。如图5所示,该数据传输方法具体包括如下步骤S501至S508:
在步骤S501中,用户进入创建流程。用户可以从前端提供的页面进入创建流程。
在步骤S502中,前端进行页面呈现,用户开始设置,包括活动名称、活动时间、活动商品。在该实施例中,例如用户设置3000个商品数据。
在步骤S503中,前端判断内容输入、设置正确。
在步骤S504中,用户点击保存活动。
在步骤S505中,前端对用户输入的商品数据进行分片。在该实施例中,设置每个分片20个上述数据,分片的大小可根据实际服务器能力进行调整。
在步骤S506中,前端开始请求服务器创建接口来发送数据分片。
在步骤S507中,某一数据分片请求成功后,则服务器创建接口会返回活动ID(活动唯一标识);后续发送数据分片就统一带着该活动ID去请求服务器编辑接口(不再需要创建接口);依次向该活动内灌输商品(等同于编辑模式下向活动内新增活动商品);请求失败的数据分片会被记录,不影响整体流程。
在步骤S508中,所有数据分片请求完毕,有失败记录则提示用户重试,没有失败记录则活动创建流程结束。
如图6所示,图6示例性示出了本发明实施例所提供的数据传输方法的流程图。如图6所示,该数据传输方法具体包括如下步骤S601至S608:
在步骤S601中,用户进入编辑流程。用户可以从前端提供的页面进入编辑流程。
在步骤S602中,前端根据URL里的活动ID去获取活动原始数据信息。用户在前端请求进入编辑流程时,前端在URL(Uniform Resource Locator,统一资源定位器),即网页地址里就加入了用户请求的活动的活动ID,该活动ID是在创建活动时前端就获取到的。
在步骤S603中,前端页面带着活动原始数据呈现,用户开始编辑,包括活动名称、活动时间、活动商品。
在步骤S604中,前端确认内容输入、设置正确。
在步骤S605中,用户点击保存活动。
在步骤S606中,前端js(JavaScript的简称,一种直译式脚本语言)开始对用户本次操作后页面内的所有活动商品数据与进入页面时获取到的活动原始数据信息做比较。
在步骤S607中,得到用户本次操作实际有修改的活动商品数据并标记分类,重新组装为一个新的商品数据:提交商品数据;同时,本次没有任何操作和修改的商品数据剔除掉,不做提交,保持之前的数据库里的设置。
在步骤S608中,准备开始分片地将提交商品数据发送请求到服务器端,即对提交商品数据进行分片。例如,每片可以为20个,可根据实际服务器能力作调整。
在步骤S609中,开始请求服务器编辑接口。
在步骤S610中,所有数据分片都统一带着活动ID去请求编辑接口,依次向该活动内灌输商品(商品数据包括新增的、修改的、删除的),请求失败的分片会被记录,不影响整体流程。
在步骤S611中,所有分片请求完毕,有失败记录则提示用户重试;没有失败记录则活动编辑流程结束。
最后,需要明确的是:本领域技术人员可根据实际需求,将上述多个实施例进行自由组合。
下述为本发明装置实施例,可以用于执行本发明方法实施例。
图7是根据示例性实施例示出的数据传输装置的结构示意图,该装置可通过软件、硬件或者两者的结合实现成为电子设备的部分或者全部。根据图7所示,该数据传输装置包括第一获取模块701、第一显示模块702和第一发送模块703,其中:
第一获取模块701,用于获取用户在活动创建页面输入的数据信息;
第一处理模块702,用于对所述数据信息进行分片处理得到多个数据分片;
第一发送模块703,用于将第一处理模块中的多个数据分片依次发送给后端服务器,包括:
向后端服务器的创建接口发送数据分片,直到首次发送成功,获取后端服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符后返回的唯一标识符;
后续每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
本发明实施例所提供的数据传输装置,对创建活动的数据信息进行了分片处理,并且还利用后端服务器的编辑接口来支持创建活动的数据分片的传输。可以保证大数据量的数据传输,无上限满足商家设置诉求,无需任何额外成本开支。
在一个实施例中,参考图8所示,该数据发送装置还包括:
第二获取模块704,用于当检测到用户进入已创建活动的编辑页面时,根据所述已创建活动的唯一标识符获取所述已创建活动的原始数据信息并显示在编辑页面中,所述原始数据信息是前端根据所述已创建活动的唯一标识符请求后端服务器获取的;
第三获取模块705,用于获取用户在所述编辑页面执行编辑操作后的第一数据信息;
第四获取模块706,将所述第一数据信息与所述原始数据信息进行比较,获取编辑数据信息;
第二处理模块707,用于对所述编辑数据信息进行分片处理得到多个数据分片;
第二发送模块708,用于将第二处理模块的多个数据分片依次发送给后端服务器,包括:每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
在一个实施例中,所述第四获取模块706用于:
将所述第一数据信息与所述原始数据信息进行比较,确定出编辑数据信息的类别,所述类别包括新增的数据、修改的数据、删除的数据,在所述编辑数据信息中标记所述类别。
在一个实施例中,所述第一发送模块703、第二发送模块708,还用于:在发送数据分片过程中,若当前数据分片发送失败,则发送下一个数据分片。
在一个实施例中,所述第一发送模块703、第二发送模块708,还用于:记录发送失败的数据分片;在所有数据分片发送完毕后,若存在发送失败的数据分片,则提示用户重试。
关于上述实施例中的装置,其各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本发明实施例还提供一种数据传输装置,该装置包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,处理器被配置为执行:
获取用户在活动创建页面输入的数据信息;
对所述数据信息进行分片处理得到多个数据分片;
将多个数据分片依次发送给后端服务器,包括:
向后端服务器的创建接口发送数据分片,直到首次发送成功,获取后端服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符后返回的唯一标识符;
后续每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
图9是根据示例性实施例示出的用于数据传输装置的结构框图。例如,装置60可被提供为一计算机或服务器。装置60包括处理组件602,其进一步包括一个或多个处理器,以及由存储器604所代表的存储器资源,用于存储可由处理组件602的执行的指令,例如应用程序。存储器604中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件602被配置为执行指令,以执行上述方法。
装置60还可以包括一个电源组件606被配置为执行装置60的电源管理,一个有线或无线网络接口608被配置为将装置60连接到网络,和一个输入/输出(I/O)接口610。装置60可以操作基于存储在存储器604的操作系统。
本发明实施例还提供一种非临时性计算机可读存储介质,当存储介质中的指令由装置60的处理器执行时,使得装置60能够执行上述的数据传输方法,所述方法包括:
获取用户在活动创建页面输入的数据信息;
对所述数据信息进行分片处理得到多个数据分片;
将多个数据分片依次发送给后端服务器,包括:
向后端服务器的创建接口发送数据分片,直到首次发送成功,获取后端服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符后返回的唯一标识符;
后续每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
本领域技术人员在考虑说明书及实践这里公开的公开后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由所附的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围应由所附的权利要求来限制。
Claims (8)
1.一种数据传输方法,其特征在于,应用于前端,包括:
获取用户在活动创建页面输入的数据信息;
对所述数据信息进行分片处理得到多个数据分片;
将多个数据分片依次发送给后端服务器,包括:
向后端服务器的创建接口发送数据分片,直到首次发送成功,获取后端服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符后返回的唯一标识符;
后续每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片;
所述方法还包括:
当检测到用户进入已创建活动的编辑页面时,根据所述已创建活动的唯一标识符获取所述已创建活动的原始数据信息并显示在编辑页面中,所述原始数据信息是前端根据所述已创建活动的唯一标识符请求后端服务器获取的;
获取用户在所述编辑页面执行编辑操作后的第一数据信息;
将所述第一数据信息与所述原始数据信息进行比较,获取编辑数据信息;
对所述编辑数据信息进行分片处理得到多个数据分片;
将多个数据分片依次发送给后端服务器,包括:每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
2.根据权利要求1所述的方法,其特征在于,所述将所述第一数据信息与所述原始数据信息进行比较,获取编辑数据信息,包括:
将所述第一数据信息与所述原始数据信息进行比较,确定出编辑数据信息的类别,所述类别包括新增的数据、修改的数据、删除的数据,在所述编辑数据信息中标记所述类别。
3.根据权利要求1所述的方法,其特征在于,在发送数据分片过程中,若当前数据分片发送失败,则发送下一个数据分片。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
记录发送失败的数据分片;
在所有数据分片发送完毕后,若存在发送失败的数据分片,则提示用户重试。
5.一种数据传输装置,其特征在于,应用于前端,包括:
第一获取模块,用于获取用户在活动创建页面输入的数据信息;
第一处理模块,用于对所述数据信息进行分片处理得到多个数据分片;
第一发送模块,用于将第一处理模块中的多个数据分片依次发送给后端服务器,包括:
向后端服务器的创建接口发送数据分片,直到首次发送成功,获取后端服务器的创建接口在数据库中为所述活动创建一条新数据记录以及唯一标识符后返回的唯一标识符;
后续每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片;
所述装置还包括:
第二获取模块,用于当检测到用户进入已创建活动的编辑页面时,根据所述已创建活动的唯一标识符获取所述已创建活动的原始数据信息并显示在编辑页面中,所述原始数据信息是前端根据所述已创建活动的唯一标识符请求后端服务器获取的;
第三获取模块,用于获取用户在所述编辑页面执行编辑操作后的第一数据信息;
第四获取模块,将所述第一数据信息与所述原始数据信息进行比较,获取编辑数据信息;
第二处理模块,用于对所述编辑数据信息进行分片处理得到多个数据分片;
第二发送模块,用于将第二处理模块的多个数据分片依次发送给后端服务器,包括:每次发送数据分片时,携带所述唯一标识符,并向后端服务器的编辑接口发送数据分片,以使后端服务器的编辑接口根据唯一标识符对对应的数据记录进行编辑,直至发送完所有数据分片。
6.根据权利要求5所述的装置,其特征在于,所述第四获取模块用于:
将所述第一数据信息与所述原始数据信息进行比较,确定出编辑数据信息的类别,所述类别包括新增的数据、修改的数据、删除的数据,在所述编辑数据信息中标记所述类别。
7.根据权利要求5所述的装置,其特征在于,
所述第一发送模块、第二发送模块,还用于:在发送数据分片过程中,若当前数据分片发送失败,则发送下一个数据分片;
所述第一发送模块、第二发送模块,还用于:记录发送失败的数据分片;在所有数据分片发送完毕后,若存在发送失败的数据分片,则提示用户重试。
8.一种数据传输装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为执行权利要求1-4任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111476857.7A CN114301790B (zh) | 2021-12-02 | 2021-12-02 | 一种数据传输方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111476857.7A CN114301790B (zh) | 2021-12-02 | 2021-12-02 | 一种数据传输方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114301790A CN114301790A (zh) | 2022-04-08 |
CN114301790B true CN114301790B (zh) | 2024-02-13 |
Family
ID=80966173
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111476857.7A Active CN114301790B (zh) | 2021-12-02 | 2021-12-02 | 一种数据传输方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114301790B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108459824A (zh) * | 2017-12-19 | 2018-08-28 | 西安华为技术有限公司 | 一种数据修改写方法及装置 |
CN108881461A (zh) * | 2018-07-02 | 2018-11-23 | 深圳市茁壮网络股份有限公司 | 一种数据传输方法、装置及系统 |
CN112632008A (zh) * | 2020-12-29 | 2021-04-09 | 华录光存储研究院(大连)有限公司 | 一种数据分片的传输方法、装置及计算机设备 |
CN112969198A (zh) * | 2021-02-24 | 2021-06-15 | 天冕信息技术(深圳)有限公司 | 数据传输方法、终端及存储介质 |
CN113326242A (zh) * | 2020-02-28 | 2021-08-31 | 阿里巴巴集团控股有限公司 | 数据处理方法、装置、电子设备及计算机存储介质 |
CN113568884A (zh) * | 2021-09-26 | 2021-10-29 | 武汉四通信息服务有限公司 | 一种文件管理方法、装置、电子设备及存储介质 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104750599A (zh) * | 2013-12-30 | 2015-07-01 | 鸿富锦精密工业(武汉)有限公司 | 使用保留系统及使用保留方法 |
CN104572960B (zh) * | 2014-12-29 | 2018-07-06 | 北京奇虎科技有限公司 | 一种搜索的方法及装置 |
-
2021
- 2021-12-02 CN CN202111476857.7A patent/CN114301790B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108459824A (zh) * | 2017-12-19 | 2018-08-28 | 西安华为技术有限公司 | 一种数据修改写方法及装置 |
CN108881461A (zh) * | 2018-07-02 | 2018-11-23 | 深圳市茁壮网络股份有限公司 | 一种数据传输方法、装置及系统 |
CN113326242A (zh) * | 2020-02-28 | 2021-08-31 | 阿里巴巴集团控股有限公司 | 数据处理方法、装置、电子设备及计算机存储介质 |
CN112632008A (zh) * | 2020-12-29 | 2021-04-09 | 华录光存储研究院(大连)有限公司 | 一种数据分片的传输方法、装置及计算机设备 |
CN112969198A (zh) * | 2021-02-24 | 2021-06-15 | 天冕信息技术(深圳)有限公司 | 数据传输方法、终端及存储介质 |
CN113568884A (zh) * | 2021-09-26 | 2021-10-29 | 武汉四通信息服务有限公司 | 一种文件管理方法、装置、电子设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114301790A (zh) | 2022-04-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108153670B (zh) | 一种接口测试方法、装置及电子设备 | |
CN111222070B (zh) | 数据处理方法、装置、设备及存储介质 | |
CN109922132B (zh) | 表单请求处理的方法、装置、电子设备及存储介质 | |
US10362086B2 (en) | Method and system for automating submission of issue reports | |
US20100241518A1 (en) | Transaction automation and client-side capture of form schema information | |
US12106268B2 (en) | System and method for detection and validation of electronic data feeds | |
CN110837356B (zh) | 一种数据处理方法和装置 | |
US10719385B2 (en) | Method and apparatus for improved error handling | |
US11533387B2 (en) | Interface engine architecture | |
US20160292143A1 (en) | System and method for automated online wizard generation | |
CN104657274B (zh) | 软件界面测试方法及装置 | |
US8046638B2 (en) | Testing of distributed systems | |
US10394637B2 (en) | Systems and methods for data validation and processing using metadata | |
US10769220B1 (en) | Systems, apparatuses, and methods of processing and managing web traffic data | |
CN113076729B (zh) | 用于报表导入的方法及系统、可读存储介质及电子设备 | |
CN113642308B (zh) | 基于数据可变的数据导入方法、系统、设备及存储介质 | |
US11709693B1 (en) | Systems and methods for developing digital experience applications | |
CN114301790B (zh) | 一种数据传输方法及装置 | |
CN111506594B (zh) | 一种大数据查询平台及其管理方法和数据查询方法 | |
CN109597819B (zh) | 用于更新数据库的方法和装置 | |
CN112437002A (zh) | 一种基于rcs消息的点餐方法、系统、设备及存储介质 | |
CN107977459B (zh) | 报表生成方法及装置 | |
CN115409014A (zh) | 单据模板生成方法、装置、计算机设备和存储介质 | |
CN112287027A (zh) | 数据库同步方法、装置、设备及存储介质 | |
CN114116730B (zh) | 一种接口管理方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |