CN110147354B - 批量数据编辑方法、装置、计算机设备及存储介质 - Google Patents

批量数据编辑方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN110147354B
CN110147354B CN201910320207.XA CN201910320207A CN110147354B CN 110147354 B CN110147354 B CN 110147354B CN 201910320207 A CN201910320207 A CN 201910320207A CN 110147354 B CN110147354 B CN 110147354B
Authority
CN
China
Prior art keywords
data
batch
transmitted
parameters
cache content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910320207.XA
Other languages
English (en)
Other versions
CN110147354A (zh
Inventor
宋扬名
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201910320207.XA priority Critical patent/CN110147354B/zh
Publication of CN110147354A publication Critical patent/CN110147354A/zh
Priority to PCT/CN2019/101926 priority patent/WO2020211233A1/zh
Application granted granted Critical
Publication of CN110147354B publication Critical patent/CN110147354B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/16File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/172Caching, prefetching or hoarding of files

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种批量数据编辑方法、装置、计算机设备及存储介质。本发明提供的方法包括:将预设的分割符号按照第一分割规则插入批量数据,并将包含分割符号的批量数据记录为待传入参数;接收复制指令,确认待传入参数中的批量数据的各属性对应的属性值是否为非空数据,在所有属性值均为非空数据时,将待传入参数存储至复制缓存空间;通过分割符号验证待传入参数的数据格式是否与预设数据格式相符;当相符时,则判断第一缓存内容是否与待传入参数相同;若并不相同,则提示是否需要用待传入参数覆盖第一缓存内容;当需要时,则将待传入参数覆盖第一缓存内容上,得到第二缓存内容。本发明提供的方法在对批量数据进行编辑的过程中相对灵活简单。

Description

批量数据编辑方法、装置、计算机设备及存储介质
技术领域
本发明涉及数据处理领域,尤其涉及一种批量数据编辑方法、装置、计算机设备及存储介质。
背景技术
目前在系统实现批量交易的过程中(比如银行系统的批量金融交易),相关工作人员需将规定格式的文本文件或者excel文件(文件中包含批量数据)导入批量交易的系统中,因此可能会导致工作人员的工作相对繁琐,并且对导入的文件有较多的格式限制;有的批量交易的系统编辑设置了太多文件编辑规则,且大多数规则比较死板,容易导致系统编辑文件太过复杂。因此,寻找一种能够更加智能快捷导入批量数据和对批量数据的编辑更灵活简单的技术方案成为本领域技术人员亟需解决的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种批量数据编辑方法、装置、计算机设备及存储介质,用于兼容批量数据的各种不同的数据格式,且对批量数据编辑相对灵活简单。
一种批量数据编辑方法,包括:
将预设的分割符号按照第一分割规则插入批量交易中的批量数据,并将包含所述分割符号的所述批量数据记录为待传入参数,所述批量数据是指由多个属性组成的集合,且每一个所述属性对应于一个或多个属性值,所述第一分割规则是指按照预设数据格式在所述批量数据中的不同所述属性之间插入分割符号;
接收复制指令,确认所述待传入参数中的所述批量数据的各所述属性对应的所述属性值是否为非空数据,在所有所述属性值均为所述非空数据时,将所述待传入参数存储至复制缓存空间;
通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符;
当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式相符时,则判断所述复制缓存空间中已存在的第一缓存内容是否与所述待传入参数相同;
若所述第一缓存内容与所述待传入参数并不相同,则提示是否需要用所述待传入参数覆盖所述第一缓存内容;
当需要用所述待传入参数覆盖所述第一缓存内容时,则将所述待传入参数覆盖所述第一缓存内容上,得到第二缓存内容。
一种批量数据编辑装置,包括:
插入模块,用于将预设的分割符号按照第一分割规则插入批量交易中的批量数据,并将包含所述分割符号的所述批量数据记录为待传入参数,所述批量数据是指由多个属性组成的集合,且每一个所述属性对应于一个或多个属性值,所述第一分割规则是指按照预设数据格式在所述批量数据中的不同所述属性之间插入分割符号;
确认模块,用于接收复制指令,确认所述待传入参数中的所述批量数据的各所述属性对应的所述属性值是否为非空数据,在所有所述属性值均为所述非空数据时,将所述待传入参数存储至复制缓存空间;
验证模块,用于通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符;
第一判断模块,用于当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式相符时,则判断所述复制缓存空间中已存在的第一缓存内容是否与所述待传入参数相同;
第一提示模块,用于若所述第一缓存内容与所述待传入参数并不相同,则提示是否需要用所述待传入参数覆盖所述第一缓存内容;
第一覆盖模块,用于当需要用所述待传入参数覆盖所述第一缓存内容时,则将所述待传入参数覆盖所述第一缓存内容上,得到第二缓存内容。
一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述批量数据编辑方法。
一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述批量数据编辑方法。
上述批量数据编辑方法、装置、计算机设备及存储介质,将预设的分割符号按照第一分割规则插入批量交易中的批量数据,并将包含所述分割符号的所述批量数据记录为待传入参数,所述批量数据是指由多个属性组成的集合,且每一个所述属性对应于一个或多个属性值,所述第一分割规则是指按照预设数据格式在所述批量数据中的不同所述属性之间插入分割符号;接收复制指令,确认所述待传入参数中的所述批量数据的各所述属性对应的所述属性值是否为非空数据,在所有所述属性值均为所述非空数据时,将所述待传入参数存储至复制缓存空间;通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符;当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式相符时,则判断所述复制缓存空间中已存在的第一缓存内容是否与所述待传入参数相同;若所述第一缓存内容与所述待传入参数并不相同,则提示是否需要用所述待传入参数覆盖所述第一缓存内容;当需要用所述待传入参数覆盖所述第一缓存内容时,则将所述待传入参数覆盖所述第一缓存内容上,得到第二缓存内容。本发明通过预设的分割符号去编辑批量交易中的批量数据后形成待传入参数,从而可以对批量数据的数据格式进行兼容,不局限于导入的文件类型;且在批量数据导入后,通过第一分割规则对批量数据进行分割生成待传入参数,并在复制缓存空间中对属于非空数据的待传入参数进行数据内容判定之后将其覆盖至该复制缓存空间中的第一缓存内容中,如此,对批量数据的编辑规则相对比较灵活和简单。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一实施例中批量数据编辑方法的一应用环境示意图;
图2是本发明一实施例中批量数据编辑方法的一流程图;
图3是本发明一实施例中批量数据编辑方法步骤S30在一个应用环境下的流程示意图;
图4是本发明一实施例中批量数据编辑方法步骤在一个应用环境下需要重复提交的流程示意图;
图5是本发明一实施例中批量数据编辑方法步骤在一个应用环境下判断第二缓存内容的数据大小是否大于复制缓存空间的大小的流程示意图;
图6是本发明一实施例中批量数据编辑方法步骤S100在一个应用环境下的流程示意图;
图7是本发明一实施例中批量数据编辑方法步骤在一个应用环境下校验第二缓存内容中的待传入参数中的各属性是否发生数据错误的流程示意图;
图8是本发明一实施例中批量数据编辑装置的结构示意图;
图9是本发明一实施例中计算机设备的一示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明提供的批量数据编辑方法,可应用在如图1的应用环境中,其中,客户端通过网络与服务器进行通信。其中,客户端可以但不限于各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备。服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一实施例中,如图2所示,提供一种批量数据编辑方法,以该方法应用在图1中的服务器为例进行说明,包括如下步骤:
S10,将预设的分割符号按照第一分割规则插入批量交易中的批量数据,并将包含所述分割符号的所述批量数据记录为待传入参数,所述批量数据是指由多个属性组成的集合,且每一个所述属性对应于一个或多个属性值,所述第一分割规则是指按照预设数据格式在所述批量数据中的不同所述属性之间插入分割符号。
在此步骤中,所述批量交易(比如银行系统的批量金融交易)可能涉及到大量的批量数据;所述批量数据是由多个属性组成的集合(比如交易过程出现的数量、价钱和总价等),而所述属性包括一个到多个属性值(比如不同季度的数量、价钱和总价的数值),且所述批量交易中的批量数据是指不同格式的文件(比如word、TXT、excel等)中的文件数据。具体地,服务器可以按照所述第一分割规则将一种或多种预设的分割符号(包括但不限于“空格”、“/”、“|”和”:”等其中的一种或多种)插入所述批量交易中的所述批量数据的属性之间;在插入时,根据所述第一分割规则选择应用哪种分割符号,同时,一个分割符号的插入位置为所述批量数据的两个不同属性之间,但两个相邻的分割符号之间间隔多少个属性,可以根据需求进行设定,比如,两个相邻的分割符号之间可能间隔有两个属性,且每一个属性均对应至少一个属性值;在将分割符号插入批量数据之后,服务器可以将所述批量数据分割成具有统一的预设数据格式(即批量数据中的不同属性被按照第一分割规则中的预设数据格式进行分割)的批量数据,并将所述具有统一的预设数据格式的批量数据(包含所述分割符号的所述批量数据)作为所述待传入参数。
S20,接收复制指令,确认所述待传入参数中的所述批量数据的各所述属性对应的所述属性值是否为非空数据,在所有所述属性值均为所述非空数据时,将所述待传入参数存储至复制缓存空间。
可以理解的是,所述复制指令是指服务器复制所述待传入参数的动作;所述非空数据是指所述待传入参数中的所述批量数据的各所述属性存在所述属性值(即一个数据有着一个ID,但是存在与该ID其他相关的信息,如数值等)。具体地,在监听到服务器当前存在复制所述待传入参数的动作时,服务器首先不是直接将所述待传入参数复制至复制缓存空间,而是需要先确认所述待传入参数中的所述批量数据的各所述属性对应的所述属性值是否为非空数据时(比如上述例子提到的数量、价钱和总价属性的每一项都分别对应着不同季度的非空数据,此时,所述批量数据的各所述属性对应的所述属性值均为非空数据),若均为非空数据,才将所述待传入参数复制存储至所述复制缓存空间。
具体地,当所述待传入参数中的所述批量数据的各所述属性对应的所述属性值均为所述非空数据时,则可以说明所述待传入参数中的所述批量数据的各所述属性全部存在所述属性值。此时,服务器可以提示所述待传入参数中的各所述属性对应的所述属性值。否则,则可以说明所述需传入的参数中的所述批量数据的一个或多个所述属性对应的所述属性值存在空数据。此时,该批量数据中对应的所述属性值由于存在空数据而可能会导致对该批量数据的计算不准确(因为一个属性值对应的是空数据,可能是遗漏了对该属性值的具体数值的录入,若为该种情况,此时利用该批空数据进行运算,其计算之后的数据必然有误),此时服务器可以提示相关技术人员查找所述需传入的参数中的所述批量数据的各所述属性对应的所述属性值存在空数据的原因并给出对应的解决措施。
S30,通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符。
可以理解的是,在将所述分割符号是按照所述预设数据格式插入所述批量交易中的所述批量数据的各所述属性之间时,可能会出现所述批量数据的各所述属性被分割错误从而造成分割之后的所述待传入参数的数据格式与预设数据格式不符的情况。比如,正确的分割格式(即预设数据格式为“aaaa|bbbbb|ddddd;dddd|eeee|tttt|eeee;”),而错误的分割格式(批量数据被分割后的数据格式为“aaaab|bbbbd|ddddd|;ddd|eee|ett|tte|eee;”)。此时,服务器需要去验证所述复制缓存空间中的所述待传入参数的当前被分割之后的数据格式是否正确。当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式不符时,则可以说明所述复制缓存空间内容中的所述待传入参数的各所述属性被分割错误;当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式相符时,则可以说明所述复制缓存空间内容中的所述待传入参数的各所述属性被分割正确。
进一步地,如图3所示,所述通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符,包括:
S301,获取预设数据格式中设定的所述分割符号的类型和排布顺序及相邻的两个分割符号之间间隔的所述属性的数量。
其中,所述预设数据格式中包含本次对该批量数据进行分割的分割符号的类型(同一个批量数据中可以使用一个或多个分割符号)、各所述分割符号的排布顺序(比如,如果有在所述批量数据中需要插入两个以上的分割符号时,若两个分割符号分别为1和2,此时各所述分割符号的排布顺序可以为112112或者121212等)和相邻的两个所述分割符号之间间隔的所述属性值的数量(相邻的两个所述分割符号之间间隔的所述属性值的数量可以根据需求设定,比如,该数量可以为1个或2个)。
S302,检测所述缓存空间内容中的待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序是否一致,同时检测所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量是否相同。
也即,当所述待传入参数的数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序一致,且所述待传入参数与所述预设数据格式中相邻的两个分割符号之间的间隔的所述属性的数量相同时,则可以说明所述缓存空间内容中的所述待传入参数是按照所述预设数据格来进行分割;当所述待传入参数的数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序不一致,或所述待传入参数与所述预设数据格式中相邻的两个分割符号之间的间隔的所述属性的数量不相同时,则可以说明所述缓存空间内容中的所述待传入参数未按照所述预设数据格来进行分割。
S303,在所述待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序一致,且所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量相同时,确认所述缓存空间内容中的所述待传入参数的所述数据格式与所述预设数据格式相符。
也即,当所述待传入参数的数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序一致,且所述待传入参数与所述预设数据格式中相邻的两个分割符号之间的间隔的所述属性的数量相同时,则可以说明所述缓存空间内容中的所述待传入参数是按照所述预设数据格来进行分割。
S304,在所述待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型或排布顺序不一致,或所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量不相同时,确认所述缓存空间内容中的所述待传入参数的所述数据格式与所述预设数据格式不相符。
也即,当所述待传入参数的数据格式与所述预设数据格式中设定的所述分割符号的类型或排布顺序不一致,或所述待传入参数与所述预设数据格式中相邻的两个分割符号之间的间隔的所述属性的数量不相同时,或上述的两种以上情况发生,都可以说明所述缓存空间内容中的所述待传入参数未按照所述预设数据格来进行分割。
需要说明的是,所述步骤S30之后,还可以去判断所述复制缓存空间内容中的所述待传入参数的各所述属性是否存在属性重复出现的问题,若所述复制缓存空间内容中的所述待传入参数的各所述属性存在属性重复出现的问题,则提示所述复制缓存空间内容中的所述待传入参数的各所述属性存在属性重复出现的问题(比如人工可能对所述批量数据中的属性重复录入)并结束所述批量交易(由于每一项批量交易的批量数据中的每个属性都是唯一的,当出现重复的属性会影响批量交易的结果,因此需要将其关闭),若所述缓存空间内容中的所述待传入参数的各所述属性未存在属性重复出现的问题,则进行下一步步骤判断所述复制缓存空间中已存在的第一缓存内容是否与所述待传入参数相同。
S40,当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式相符时,则判断所述复制缓存空间中已存在的第一缓存内容是否与所述待传入参数相同。
可以理解的是,当所述复制缓存空间的所述待传入参数的数据格式与所述预设数据格式相符时,则可以说明所述复制缓存空间中的所述待传入参数被分割正确。此时,服务器可以进行判断所述复制缓存空间中的已存在所述第一缓存内容是否与所述待传入参数部分或全部相同。在另一实施例上,当所述复制缓存空间的所述待传入参数的数据格式与所述预设数据格式不符时,则可以说明所述复制缓存空间中的所述待传入参数被分割错误,此时,服务器可以提示所述复制缓存空间的所述待传入参数的数据格式错误并结束所述批量交易(由于所述待传入参数的数据格式与所述预设数据格式不符时,各个不同的所述属性可能会被分割在一起,影响批量交易的结果)。
S50,若所述第一缓存内容与所述待传入参数并不相同,则提示是否需要用所述待传入参数覆盖所述第一缓存内容。
可以理解的是,当所述第一缓存内容与所述待传入参数并不相同时,则说明所述待传入参数并未与所述第一缓存内容发生重复。此时,提示是否需要用所述待传入参数覆盖所述第一缓存内容,是指提示是否将并不重复的所述待传入参数和所述第一缓存内容进行衔接。
S60,当需要用所述待传入参数覆盖所述第一缓存内容时,则将所述待传入参数覆盖所述第一缓存内容上,得到第二缓存内容。
可以理解的是,当需要覆盖提交与所述第一缓存内容不同的所述待传入参数时,则服务器都可以将所述待传入参数进行覆盖(由于所述第一缓存内容与所述待传入参数并不相同,且所述第一缓存内容代表此前传入所述复制缓存空间的待传入参数,此时,将所述待传入参数覆盖所述第一缓存内容上是指服务器可以将所述待传入参数衔接到所述第一缓存内容上)在所述第一缓存内容上从而更新得到所述第二的缓存内容(包含衔接之后的所述待传入参数和所述第一缓存内容)。
在另一实施中,当无需用所述待传入参数覆盖所述第一缓存内容(无需覆盖也即代表不允许将所述待传入参数以覆盖的方式将所述待传入参数存储至所述复制缓存空间中,但是,由于每一项批量交易在交易过程中均必须需要保存相关数据,因此在不允许存储所述待传入参数时,该批量交易将无法继续进行,需要将其关闭)时,则服务器提示无需覆盖提交所述待传入参数后,结束所述批量交易。
在另一实施中,如图4所示,所述步骤S40之后,还包括:
S70,若所述第一缓存内容与所述待传入参数部分或全部相同,则提示是否需要重复提交与所述第一缓存内容部分或全部相同的所述待传入参数。
可以理解的是,当所述复制缓存空间中的第一缓存内容中存在部分或全部的所述待传入参数时,则说明所述待传入参数与所述第一缓存内容部分或全部相同,此时,可以通过下述方法去判断所述第一缓存内容与所述待传入参数部分或全部相同:
判断所述待传入参数与所述第一缓存内容是否部分或全部匹配成功,在此步骤中,当判断结果为所述待传入参数与所述第一缓存内容完全不匹配时,则说明所述第一缓存内容并不与所述待传入参数相同;当判断结果为所述待传入参数与所述第一缓存内容部分或全部匹配成功时,则说明所述待传入参数与所述第一缓存内容发生部分或全部相同。
S80,当需要重复提交与所述第一缓存内容相同的所述待传入参数时,则将所述待传入参数覆盖所述第一缓存内容上,得到所述第二缓存内容。
可以理解的是,当需要重复提交与所述第一缓存内容相同的所述待传入参数时,则服务器都可以将所述待传入参数覆盖(由于所述第一缓存内容存在与所述待传入参数部分或全部相同的内容,此时,服务器可以将所述待传入参数中与所述第一缓存内容部分或全部相同的内容重叠之后相衔接,也即,覆盖之后的所述第一缓存内容与所述待传入参数中相同的内容仅保留其中一份即可)在所述第一缓存内容上,从而更新得到所述第二的缓存内容(所述待传入参数与所述第一缓存内容存在相同的交集内容)。在另一实施中,当无需要重复提交与所述第一缓存内容相同的所述待传入参数时,则服务器提示无需重复提交所述待传入参数后结束所述批量交易,也即,由于每一项批量交易在交易过程中均必须需要提交相关数据(也即所述待传入参数),因此在不允许提交所述待传入参数时,该批量交易将无法继续进行,需要将其关闭。
进一步地,如图5所示,所述步骤S60或S80之后,还包括:
S90,判断第二缓存内容的数据大小是否大于复制缓存空间的大小。
可以理解的是,由于所述复制缓存空间的大小是有限制的,当判断结果为所述第二缓存内容的数据大小大于所述复制缓存空间的大小时,则说明所述第二缓存内容的数据大小大于限制的大小;当判断结果为所述第二缓存内容的数据大小小于或等于所述复制缓存空间的大小时,则说明所述第二缓存内容的数据大小小于或等于限制的大小。
S100,若所述第二缓存内容的数据大小大于所述复制缓存空间的大小,则使用第二分割规则对所述第二缓存内容进行分割,并将被分割成多个批次数据的所述第二缓存内容进行提交后,在页面展示所述第二缓存内容,所述第二分割规则是指将所述第二缓存内容划分为相等数据大小的多个批次数据。
可以理解的是,当所述第二缓存内容的数据大小大于所述复制缓存空间的大小时,说明所述第二缓存空间的数据大小大于限制的大小(即超过所述复制缓存空间的大小)。此时,可以将被分割成多个批次数据的所述第二缓存内容提交给正在处理所述批量交易的服务器,服务器将所述第二缓存内容在客户端上进行所述批量交易的页面上进行展示。
进一步地,如图6所示,为了判断被分割成多个批次数据的所述第二缓存内容是能否一次性提交完成,所述步骤S100中,所述将被分割成多个批次数据的所述第二缓存内容进行提交,包括:
S1001,获取所述第二缓存内容被分割之后的批次数据的数量。
可以理解的是,上述步骤S90中,由于所述复制缓存空间的大小是有限制的,因此服务器使用所述第二分割规则对所述第二缓存内容进行分割,得到被分割成多个批次数据的所述第二缓存内容,此时,服务器可以记录被分割成多个批次数据的所述第二缓存内容的批次数据的数量。
S1002,判断所述批次数据的数量是否大于预设的并发批次数阈值。
其中,所述预设的并发批次数阈值是指服务器允许同时提交的批次数据的数量。
可以理解的是,由于处理被分割成多个批次数据的所述第二缓存内容的接口也是有并发批次数据的数量限制,因此服务器判断所述批次数据的数量是否大于预设的并发批次数阈值,当判断结果为所述批次数据的数量大于所述预设的并发批次数阈值时,则说明所述批次数据的数量已超过限制的数量(可能会造成服务器崩溃的现象),即服务器不能同时提交被分割成多个批次数据的所述第二缓存内容;当判断结果为所述批次数据的数量小于或等于所述预设的并发批次数阈值时,则说明所述批次数据的数量未超过限制的数量,即服务器可以同时提交被分割成多个批次数据的所述第二缓存内容。
S1003,若所述批次数据的数量大于所述预设的并发批次数阈值,则将数量与所述并发批次数阈值相等的所述批次数据进行提交,并继续判断剩余未提交的所述批次数据的数量是否大于所述并发批次数阈值,直至剩余未提交的所述批次数据的数量小于或等于所述并发批次数阈值。
可以理解的是,当所述批次数据的数大于所述预设的并发批次数阈值时,则说明所述批次数据的数已超过限制的数量(可能会造成服务器崩溃的现象),即服务器不能同时提交被分割成多个批次的所述第二缓存内容。
S1004,若所述批次数据的数量小于或等于所述预设的并发批次数阈值,则将所有所述批次数据进行提交。
当所述批次数据的数量小于或等于所述预设的并发批次数阈值时,则说明所述批次数据的数量未超过限制的数量,即服务器可以同时提交被分割成的所有批次数据。
S110,若所述第二缓存内容的数据大小小于或等于所述复制缓存空间的大小,则在所述页面直接展示所述第二缓存内容。
可以理解的是,当所述第二缓存内容的数据大小小于或等于所述复制缓存空间的大小时,则说明所述第二缓存内容的数据大小小于或等于限制的大小(即不会超过所述复制缓存空间的大小)。此时,服务器可以客户端上的页面直接展示所述第二缓存内容,而无需将其分割为批次数据。
进一步地,如图7所示,所述步骤S60或S80之后,还包括:
S120,校验所述第二缓存内容中的所述待传入参数中的各所述属性是否发生数据错误。
可以理解的是,所述数据错误包括了数据损失和数据异常增加,所述数据损失是指在计算机遭受病毒损害、人为因素的文件丢失或者存储设备的物理损坏以后,造成的对个人、集体有价值的信息数据的丢失;所述数据异常增加可能是由于无关数据的导入(无关属性值附属在属性上)或者所述属性对应的所述属性值发生重复的原因。由于发生上述数据错误,会造成所述第二缓存内容中的所述待传入参数中的各所述属性发生数据错误。此时,需要检验所述第二缓存内容中的所述待传入参数中的各所述属性是否发生了数据错误。
进一步地,所述校验所述第二缓存内容中的所述待传入参数中的各所述属性是否发生了数据损失,包括:
获取所述分割符号插入所述批量数据之后的待传入参数的数据大小,同时获取覆盖所述第二缓存内容中的待传入参数的数据大小。
可以理解的是,所述分割符号插入所述批量数据之后,其的数据大小是固定的,且服务器也未开始处理已被所述分割符号插入的所述批量数据(如流程中未发生数据损失和数据异常增加问题),从而不会影响所述分割符号插入所述批量数据之后的所述待传入参数的数据大小;而覆盖所述第二缓存内容中的所述待传入参数的数据大小在流程中可能发生了步骤S120提到的数据损失情况和数据大小增加的问题(无关属性值附属在属性上或者属性对应的属性值发生重复)。
检测所述第二缓存内容中的所述待传入参数的数据大小是否等于所述待传入参数的数据大小。
可以理解的是,所述第二缓存内容的所述待传入参数的数据大小可能会由于上述步骤S120提到的情况从而造成所述数据错误。此时,服务器检测所述第二缓存内容中的所述待传入参数的数据大小是否等于所述待传入参数的数据大小从而确定所述第二缓存内容的所述待传入参数中的各所述属性是否发生了数据错误。
当所述第二缓存内容的数据大小小于所述待传入参数的数据大小时,则提示所述第二缓存内容的所述待传入参数中的一个或多个所述属性发生数据损失。
可以理解的是,当所述第二缓存内容的数据大小小于所述待传入参数的数据大小时,则说明所述第二缓存内容的所述待传入参数中的一个或者多个所述属性发生了数据损失从而造成了所述数据错误。
当所述第二缓存内容的数据大小等于所述待传入参数的数据大小时,则提示所述第二缓存内容各所述属性并未发生所述数据错误。
可以理解的是,当所述第二缓存内容的数据大小等于所述待传入参数的数据大小时,则说明所述第二缓存内容的所述待传入参数中的一个或者多个所述属性未发生所述数据错误,也可以说明所述第二缓存内容的所述待传入参数中的各所述属性均为正确数据。
当所述第二缓存内容的数据大小大于所述待传入参数的数据大小时,则提示所述第二缓存内容的所述待传入参数中的一个或多个所述属性发生数据异常增加。
可以理解的是,当所述第二缓存内容的数据大小大于所述待传入参数的数据大小时,则说明所述第二缓存内容的所述待传入参数中的一个或者多个所述属性发生了数据异常增加从而造成了所述数据错误。
S130,当所述第二缓存内容中的所述待传入参数的各所述属性未发生所述数据错误时,则提交与所述第二缓存内容关联的所述批量交易后结束所述批量交易。
可以理解的是,当所述第二缓存内容中的所述待传入参数中的各所述属性未发生所述数据错误时,说明所述第二缓存内容中的所述待传入参数的各所述属性为数据正确。此时,可以提交与所述第二缓存内容关联的所述批量交易给服务器后结束所述批量交易。
S140,当所述第二缓存内容中的所述待传入参数的各所述属性未发生所述数据错误时,则提交与所述第二缓存内容关联的所述批量交易后结束所述批量交易。
可以理解的是,当所述第二缓存内容中的所述待传入参数的一个或多个所述属性发生所述数据错误时,说明所述第二缓存内容中的所述待传入参数的一个或多个所述属性为所述错误数据。
需要说明的是,为了保证所述批量交易无留下缓存痕迹,保障所述第二缓存内容中的数据安全,所述步骤S140之后,还可以提示所述相关技术人员是否需要清理所述第二缓存内容。
综上所述,上述提供了一种批量数据编辑方法,将预设的分割符号按照第一分割规则插入批量交易中的批量数据,并将包含所述分割符号的所述批量数据记录为待传入参数,所述批量数据是指由多个属性组成的集合,且每一个所述属性对应于一个或多个属性值,所述第一分割规则是指按照预设数据格式在所述批量数据中的不同所述属性之间插入分割符号;接收复制指令,确认所述待传入参数中的所述批量数据的各所述属性对应的所述属性值是否为非空数据,在所有所述属性值均为所述非空数据时,将所述待传入参数存储至复制缓存空间;通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符;当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式相符时,则判断所述复制缓存空间中已存在的第一缓存内容是否与所述待传入参数相同;若所述第一缓存内容与所述待传入参数并不相同,则提示是否需要用所述待传入参数覆盖所述第一缓存内容;当需要用所述待传入参数覆盖所述第一缓存内容时,则将所述待传入参数覆盖所述第一缓存内容上,得到第二缓存内容。本发明通过预设的分割符号去编辑批量交易中的批量数据后形成待传入参数,从而可以对批量数据的数据格式进行兼容,不局限于导入的文件类型;且在批量数据导入后,通过第一分割规则对批量数据进行分割生成待传入参数,并在复制缓存空间中对属于非空数据的待传入参数进行数据内容判定之后将其覆盖至该复制缓存空间中的第一缓存内容中,如此,对批量数据的编辑规则相对比较灵活和简单。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
在一实施例中,提供一种批量数据编辑装置,该批量数据编辑装置与上述实施例中批量数据编辑方法一一对应。如图8所示,该批量数据编辑装置包括插入模块11、确认模块12、验证模块13、第一判断模块14、第一提示模块15和第一覆盖模块16。各功能模块详细说明如下:
插入模块11,用于将预设的分割符号按照第一分割规则插入批量交易中的批量数据,并将包含所述分割符号的所述批量数据记录为待传入参数,所述批量数据是指由多个属性组成的集合,且每一个所述属性对应于一个或多个属性值,所述第一分割规则是指按照预设数据格式在所述批量数据中的不同所述属性之间插入分割符号;
确认模块12,用于接收复制指令,确认所述待传入参数中的所述批量数据的各所述属性对应的所述属性值是否为非空数据,在所有所述属性值均为所述非空数据时,将所述待传入参数存储至复制缓存空间;
验证模块13,用于通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符;
第一判断模块14,用于当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式相符时,则判断所述复制缓存空间中已存在的第一缓存内容是否与所述待传入参数相同;
第一提示模块15,用于若所述第一缓存内容与所述待传入参数并不相同,则提示是否需要用所述待传入参数覆盖所述第一缓存内容;
第一覆盖模块16,用于当需要用所述待传入参数覆盖所述第一缓存内容时,则将所述待传入参数覆盖所述第一缓存内容上,得到第二缓存内容。
进一步地,所述验证模块包括:
第一获取子模块,用于获取预设数据格式中设定的所述分割符号的类型和排布顺序及相邻的两个分割符号之间间隔的所述属性的数量;
第一检测子模块,用于检测所述缓存空间内容中的待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序是否一致,同时检测所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量是否相同;
第一确认子模块,用于在所述待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序一致,且所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量相同时,确认所述缓存空间内容中的所述待传入参数的所述数据格式与所述预设数据格式相符;
第二确认子模块,用于在所述待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型或排布顺序不一致,或所述待传入参数与所述预设数据格式中相邻的两个分割符号之间的间隔的所述属性的数量不相同时,确认所述缓存空间内容中的所述待传入参数的所述数据格式与所述预设数据格式不相符。
进一步地,所述批量数据编辑装置还包括:
第二提示模块,用于若所述第一缓存内容与所述待传入参数部分或全部相同,则提示是否需要重复提交与所述第一缓存内容部分或全部相同的所述待传入参数;
第二覆盖模块,用于当需要重复提交与所述第一缓存内容相同的所述待传入参数时,则将所述待传入参数覆盖所述第一缓存内容上,得到所述第二缓存内容。
进一步地,所述批量数据编辑装置还包括:
第二判断模块,用于判断第二缓存内容的数据大小是否大于复制缓存空间的大小;
分割模块,用于若所述第二缓存内容的数据大小大于所述复制缓存空间的大小,则使用第二分割规则对所述第二缓存内容进行分割,并将被分割成多个批次数据的所述第二缓存内容进行提交后,在页面展示所述第二缓存内容,所述第二分割规则是指将所述第二缓存内容划分为相等数据大小的多个批次数据;
展示模块,用于若所述第二缓存内容的数据大小小于或等于所述复制缓存空间的大小,则在所述页面直接展示所述第二缓存内容。
进一步地,所述分割模块包括:
第二获取子模块,用于获取所述第二缓存内容被分割之后的批次数据的数量;
判断子模块,用于判断所述批次数据的数量是否大于预设的并发批次数阈值;
第一提交子模块,用于若所述批次数据的数量大于所述预设的并发批次数阈值,则将数量与所述并发批次数阈值相等的所述批次数据进行提交,并继续判断剩余未提交的所述批次数据的数量是否大于所述并发批次数阈值,直至剩余未提交的所述批次数据的数量小于或等于所述并发批次数阈值;
第二提交子模块,用于若所述批次数据的数量小于或等于所述预设的并发批次数阈值,则将所有所述批次数据进行提交。
进一步地,所述批量数据编辑装置还包括:
校验模块,用于校验所述第二缓存内容中的所述待传入参数中的各所述属性是否发生数据错误;
第一提交模块,用于当所述第二缓存内容中的所述待传入参数的各所述属性未发生所述数据错误时,则提交与所述第二缓存内容关联的所述批量交易后结束所述批量交易;
第二提交模块,用于当所述第二缓存内容中的所述待传入参数的各所述属性未发生所述数据错误时,则提交与所述第二缓存内容关联的所述批量交易后结束所述批量交易。
进一步地,所述校验模块包括:
第三获取子模块,用于获取所述分割符号插入所述批量数据之后的待传入参数的数据大小,同时获取覆盖第二缓存内容中的所述待传入参数的数据大小;
第二检测子模块,用于检测所述第二缓存内容中的所述待传入参数的数据大小是否等于所述待传入参数的数据大小;
第一提示子模块,用于当所述第二缓存内容的数据大小小于所述待传入参数的数据大小时,则提示所述第二缓存内容的所述待传入参数中的一个或多个所述属性发生数据损失;
第二提示子模块,用于当所述第二缓存内容的数据大小等于所述待传入参数的数据大小时,则提示所述第二缓存内容各所述属性并未发生所述数据错误;
第三提示子模块,用于当所述第二缓存内容的数据大小大于所述待传入参数的数据大小时,则提示所述第二缓存内容的所述待传入参数中的一个或多个所述属性发生数据异常增加。
关于批量数据编辑装置的具体限定可以参见上文中对于批量数据编辑方法的限定,在此不再赘述。上述批量数据编辑装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图9所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储批量数据编辑方法中涉及到的数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种批量数据编辑方法。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述实施例中批量数据编辑方法的步骤,例如图2所示的步骤S10至步骤S60。或者,处理器执行计算机程序时实现上述实施例中批量数据编辑装置的各模块/单元的功能,例如图8所示模块11至模块16的功能。为避免重复,这里不再赘述。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述实施例中批量数据编辑方法的步骤,例如图2所示的步骤S10至步骤S60。或者,计算机程序被处理器执行时实现上述实施例中批量数据编辑装置的各模块/单元的功能,例如图8所示模块11至模块16的功能。为避免重复,这里不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本发明所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。

Claims (9)

1.一种批量数据编辑方法,其特征在于,包括:
将预设的分割符号按照第一分割规则插入批量交易中的批量数据,并将包含所述分割符号的所述批量数据记录为待传入参数,所述批量数据是指不同格式的文件中的文件数据,由多个属性组成的集合,且每一个所述属性对应于一个或多个属性值,所述第一分割规则是指按照预设数据格式在所述批量数据中的不同所述属性之间插入分割符号;
接收复制指令,确认所述待传入参数中的所述批量数据的各所述属性对应的所述属性值是否为非空数据,在所有所述属性值均为所述非空数据时,将所述待传入参数存储至复制缓存空间;
通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符;
所述通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符,包括:
获取预设数据格式中设定的所述分割符号的类型和排布顺序及相邻的两个分割符号之间间隔的所述属性的数量;
检测所述缓存空间内容中的待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序是否一致,同时检测所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量是否相同;
在所述待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序一致,且所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量相同时,确认所述缓存空间内容中的所述待传入参数的所述数据格式与所述预设数据格式相符;
在所述待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型或排布顺序不一致,或所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量不相同时,确认所述缓存空间内容中的所述待传入参数的所述数据格式与所述预设数据格式不相符;
当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式相符时,则判断所述复制缓存空间中已存在的第一缓存内容是否与所述待传入参数相同;
若所述第一缓存内容与所述待传入参数并不相同,则提示是否需要用所述待传入参数覆盖所述第一缓存内容;
当需要用所述待传入参数覆盖所述第一缓存内容时,则将所述待传入参数覆盖所述第一缓存内容上,得到第二缓存内容;所述待传入参数覆盖所述第一缓存内容上是将所述待传入参数衔接到所述第一缓存内容上。
2.根据权利要求1所述的批量数据编辑方法,其特征在于,所述当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式相符时,则判断所述复制缓存空间中已存在的第一缓存内容是否与所述待传入参数相同之后,还包括:
若所述第一缓存内容与所述待传入参数部分或全部相同,则提示是否需要重复提交与所述第一缓存内容部分或全部相同的所述待传入参数;
当需要重复提交与所述第一缓存内容相同的所述待传入参数时,则将所述待传入参数覆盖所述第一缓存内容上,得到所述第二缓存内容。
3.根据权利要求2所述的批量数据编辑方法,其特征在于,所述得到所述第二缓存内容之后,还包括:
判断第二缓存内容的数据大小是否大于复制缓存空间的大小;
若所述第二缓存内容的数据大小大于所述复制缓存空间的大小,则使用第二分割规则对所述第二缓存内容进行分割,并将被分割成多个批次数据的所述第二缓存内容进行提交后,在页面展示所述第二缓存内容,所述第二分割规则是指将所述第二缓存内容划分为相等数据大小的多个批次数据;
若所述第二缓存内容的数据大小小于或等于所述复制缓存空间的大小,则在所述页面直接展示所述第二缓存内容。
4.根据权利要求3所述的批量数据编辑方法,其特征在于,所述被分割成多个批次数据的所述第二缓存内容进行提交,包括:
获取所述第二缓存内容被分割之后的批次数据的数量;
判断所述批次数据的数量是否大于预设的并发批次数阈值;
若所述批次数据的数量大于所述预设的并发批次数阈值,则将数量与所述并发批次数阈值相等的所述批次数据进行提交,并继续判断剩余未提交的所述批次数据的数量是否大于所述并发批次数阈值,直至剩余未提交的所述批次数据的数量小于或等于所述并发批次数阈值;
若所述批次数据的数量小于或等于所述预设的并发批次数阈值,则将所有所述批次数据进行提交。
5.根据权利要求2所述的批量数据编辑方法,其特征在于,所述得到所述第二缓存内容之后,还包括:
校验所述第二缓存内容中的所述待传入参数中的各所述属性是否发生数据错误;
当所述第二缓存内容中的所述待传入参数的各所述属性未发生所述数据错误时,则提交与所述第二缓存内容关联的所述批量交易后结束所述批量交易;
当所述第二缓存内容中的所述待传入参数的一个或者多个所述属性发生所述数据错误时,获取与发生所述数据错误的所述属性对应的所述批量交易中的所述批量数据中的所述属性,并将与发生所述数据错误的所述属性对应的所述批量交易中的所述批量数据中的所述属性替换所述第二缓存内容中发生所述数据错误的所述属性,并提交与所述第二缓存内容关联的所述批量交易后结束所述批量交易。
6.根据权利要求5所述的批量数据编辑方法,其特征在于,所述校验所述第二缓存内容中的所述待传入参数中的各所述属性是否发生了数据错误,包括:
获取所述分割符号插入所述批量数据之后的待传入参数的数据大小,同时获取覆盖第二缓存内容中的所述待传入参数的数据大小;
检测所述第二缓存内容中的所述待传入参数的数据大小是否等于所述待传入参数的数据大小;
当所述第二缓存内容的数据大小小于所述待传入参数的数据大小时,则提示所述第二缓存内容的所述待传入参数中的一个或多个所述属性发生数据损失;
当所述第二缓存内容的数据大小等于所述待传入参数的数据大小时,则提示所述第二缓存内容各所述属性并未发生所述数据错误;
当所述第二缓存内容的数据大小大于所述待传入参数的数据大小时,则提示所述第二缓存内容的所述待传入参数中的一个或多个所述属性发生数据异常增加。
7.一种批量数据编辑装置,其特征在于,包括:
插入模块,用于将预设的分割符号按照第一分割规则插入批量交易中的批量数据,并将包含所述分割符号的所述批量数据记录为待传入参数,所述批量数据是指不同格式的文件中的文件数据,由多个属性组成的集合,且每一个所述属性对应于一个或多个属性值,所述第一分割规则是指按照预设数据格式在所述批量数据中的不同所述属性之间插入分割符号;
确认模块,用于接收复制指令,确认所述待传入参数中的所述批量数据的各所述属性对应的所述属性值是否为非空数据,在所有所述属性值均为所述非空数据时,将所述待传入参数存储至复制缓存空间;
验证模块,用于通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符;
所述通过所述分割符号验证所述复制缓存空间中的所述待传入参数的数据格式是否与所述预设数据格式相符,包括:
获取预设数据格式中设定的所述分割符号的类型和排布顺序及相邻的两个分割符号之间间隔的所述属性的数量;
检测所述缓存空间内容中的待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序是否一致,同时检测所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量是否相同;
在所述待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型和排布顺序一致,且所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量相同时,确认所述缓存空间内容中的所述待传入参数的所述数据格式与所述预设数据格式相符;
在所述待传入参数的所述数据格式与所述预设数据格式中设定的所述分割符号的类型或排布顺序不一致,或所述待传入参数与所述预设数据格式中相邻的两个所述分割符号之间的间隔的所述属性的数量不相同时,确认所述缓存空间内容中的所述待传入参数的所述数据格式与所述预设数据格式不相符;
第一判断模块,用于当所述复制缓存空间中的所述待传入参数的所述数据格式与所述预设数据格式相符时,则判断所述复制缓存空间中已存在的第一缓存内容是否与所述待传入参数相同;
第一提示模块,用于若所述第一缓存内容与所述待传入参数并不相同,则提示是否需要用所述待传入参数覆盖所述第一缓存内容;
第一覆盖模块,用于当需要用所述待传入参数覆盖所述第一缓存内容时,则将所述待传入参数覆盖所述第一缓存内容上,得到第二缓存内容;所述待传入参数覆盖所述第一缓存内容上是将所述待传入参数衔接到所述第一缓存内容上。
8.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至6中任一项所述批量数据编辑方法。
9.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述批量数据编辑方法。
CN201910320207.XA 2019-04-19 2019-04-19 批量数据编辑方法、装置、计算机设备及存储介质 Active CN110147354B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910320207.XA CN110147354B (zh) 2019-04-19 2019-04-19 批量数据编辑方法、装置、计算机设备及存储介质
PCT/CN2019/101926 WO2020211233A1 (zh) 2019-04-19 2019-08-22 批量数据编辑方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910320207.XA CN110147354B (zh) 2019-04-19 2019-04-19 批量数据编辑方法、装置、计算机设备及存储介质

Publications (2)

Publication Number Publication Date
CN110147354A CN110147354A (zh) 2019-08-20
CN110147354B true CN110147354B (zh) 2023-06-02

Family

ID=67589754

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910320207.XA Active CN110147354B (zh) 2019-04-19 2019-04-19 批量数据编辑方法、装置、计算机设备及存储介质

Country Status (2)

Country Link
CN (1) CN110147354B (zh)
WO (1) WO2020211233A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110147354B (zh) * 2019-04-19 2023-06-02 平安科技(深圳)有限公司 批量数据编辑方法、装置、计算机设备及存储介质
CN112422682A (zh) * 2020-11-18 2021-02-26 青岛海尔科技有限公司 数据发送方法及装置、存储介质、电子装置
CN115102936B (zh) * 2022-06-22 2023-11-21 苏州达家迎信息技术有限公司 批量信息上传方法、装置、存储介质及电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1992015080A1 (en) * 1991-02-20 1992-09-03 Shobunsha Publications Inc. Improved map production method
CN103177064A (zh) * 2012-12-05 2013-06-26 师建中 一种自动取录电子文档中指定内容的方法
CN103853844A (zh) * 2014-03-24 2014-06-11 南开大学 基于Hadoop的关系表非冗余键集合识别方法
CN104331446A (zh) * 2014-10-28 2015-02-04 北京临近空间飞行器系统工程研究所 一种基于内存映射的海量数据预处理方法
WO2015070232A1 (en) * 2013-11-11 2015-05-14 Amazon Technologies, Inc. Data stream ingestion and persistence techniques
CN108920478A (zh) * 2018-04-16 2018-11-30 宁波三星医疗电气股份有限公司 基于小系统的批量数据分段采集方法
CN108959598A (zh) * 2017-07-15 2018-12-07 沈阳建筑大学 基于gis的cad数据导入到swmm的方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8904348B2 (en) * 2006-04-18 2014-12-02 Ca, Inc. Method and system for handling errors during script execution
CN101515291A (zh) * 2009-03-26 2009-08-26 北京泰合佳通信息技术有限公司 一种将数据批量导入数据库的方法及系统
CN106407442B (zh) * 2016-09-28 2019-11-29 中国银行股份有限公司 一种海量文本数据处理方法及装置
CN110147354B (zh) * 2019-04-19 2023-06-02 平安科技(深圳)有限公司 批量数据编辑方法、装置、计算机设备及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1992015080A1 (en) * 1991-02-20 1992-09-03 Shobunsha Publications Inc. Improved map production method
CN103177064A (zh) * 2012-12-05 2013-06-26 师建中 一种自动取录电子文档中指定内容的方法
WO2015070232A1 (en) * 2013-11-11 2015-05-14 Amazon Technologies, Inc. Data stream ingestion and persistence techniques
CN103853844A (zh) * 2014-03-24 2014-06-11 南开大学 基于Hadoop的关系表非冗余键集合识别方法
CN104331446A (zh) * 2014-10-28 2015-02-04 北京临近空间飞行器系统工程研究所 一种基于内存映射的海量数据预处理方法
CN108959598A (zh) * 2017-07-15 2018-12-07 沈阳建筑大学 基于gis的cad数据导入到swmm的方法
CN108920478A (zh) * 2018-04-16 2018-11-30 宁波三星医疗电气股份有限公司 基于小系统的批量数据分段采集方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
执法记录仪数据管理系统的设计与实现;李敏;《中国优秀硕士学位论文全文数据库 信息科技辑》;20180715;第I138-579页 *

Also Published As

Publication number Publication date
CN110147354A (zh) 2019-08-20
WO2020211233A1 (zh) 2020-10-22

Similar Documents

Publication Publication Date Title
CN110008455B (zh) 表格编辑方法、装置、计算机设备和存储介质
CN110147354B (zh) 批量数据编辑方法、装置、计算机设备及存储介质
CN110648127B (zh) 资源转移方法、装置、计算机设备和存储介质
CN111309524A (zh) 分布式存储系统故障恢复方法、装置、终端及存储介质
CN110659256A (zh) 多机房同步方法、计算设备及计算机存储介质
CN113448862B (zh) 软件版本测试方法、装置及计算机设备
CN110334303A (zh) 表单校验方法、装置、计算机设备和存储介质
CN111475494A (zh) 一种海量数据处理方法、系统、终端及存储介质
CN110674145B (zh) 数据一致性的检测方法、装置、计算机设备和存储介质
CN111444208B (zh) 一种数据更新方法及相关设备
CN111522881B (zh) 业务数据处理方法、装置、服务器及存储介质
CN107092671B (zh) 一种元信息管理的方法及设备
CN112579571B (zh) 监控数据配置、数据监控方法、装置、设备及存储介质
CN112463042B (zh) 一种数据卷导入数据校验方法、装置、终端及存储介质
CN115277677A (zh) 批量档案挂接方法、装置、计算机设备及存储介质
CN114218188A (zh) 数据迁移方法、装置、设备及存储介质
CN114490415A (zh) 业务测试方法、计算机设备、存储介质和计算机程序产品
CN110716863A (zh) 一种强制访问控制规则测试方法、系统、终端及存储介质
CN108959486A (zh) 审计字段信息获取方法、装置、计算机设备和存储介质
CN117132283A (zh) 识别方法、装置、计算机设备、存储介质和程序产品
CN110162507B (zh) 快照覆写方法、装置、计算机设备及存储介质
CN110704218B (zh) 数据处理方法、装置、计算机设备和存储介质
CN111079192B (zh) 网页内容自我保护方法以及服务器
CN117709362A (zh) 多语言资源的修改方法、装置、计算机设备和存储介质
CN116340161A (zh) 云主机性能测试方法、装置、存储介质以及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant