CN111177241A - 一种数据处理方法、装置、系统、电子设备及其存储介质 - Google Patents
一种数据处理方法、装置、系统、电子设备及其存储介质 Download PDFInfo
- Publication number
- CN111177241A CN111177241A CN201911307235.4A CN201911307235A CN111177241A CN 111177241 A CN111177241 A CN 111177241A CN 201911307235 A CN201911307235 A CN 201911307235A CN 111177241 A CN111177241 A CN 111177241A
- Authority
- CN
- China
- Prior art keywords
- processing
- data
- item
- created
- standby
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 238000012545 processing Methods 0.000 claims abstract description 289
- 238000001514 detection method Methods 0.000 claims abstract description 29
- 238000000034 method Methods 0.000 claims abstract description 8
- 230000003993 interaction Effects 0.000 claims description 10
- 230000002159 abnormal effect Effects 0.000 claims description 4
- 238000004590 computer program Methods 0.000 claims description 3
- 238000013499 data model Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 230000003203 everyday effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000002547 anomalous effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
- G06F16/2471—Distributed queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/16—Real estate
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Data Mining & Analysis (AREA)
- Tourism & Hospitality (AREA)
- Computing Systems (AREA)
- Economics (AREA)
- Software Systems (AREA)
- Probability & Statistics with Applications (AREA)
- Mathematical Physics (AREA)
- Fuzzy Systems (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据处理方法、装置、系统、电子设备及其存储介质,该方法包括:接收录入的用于创建处理项的待处理数据,根据所述待处理数据创建对应的处理项;按预定检测方式检测所述处理项是否创建成功,如果所述处理项创建失败,则在预建的数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。本申请提供了一种高可用的备用方案,通过检测所述处理项是否创建成功,在本地创建所述备用处理项用于所述后续处理,解决了由于创建所述处理项失败,造成无法正常处理所述待处理数据创建所述处理项进行后续处理的技术问题。
Description
技术领域
本发明涉及计算机领域,尤其是一种数据处理方法、装置、系统、电子设备及其存储介质。
背景技术
目前,大型业务系统通常采用分布式设计,多个子系统之间进行信息交互。比如,在房屋交易系统中,系统会包括业务方和服务提供方,两者通过信息交互完成回调、重试、检索等并保持信息的一致性,其中,经纪人可以通过系统中的客源列表录入交易上的必要信息,比如客户需求、带看、约带看、标签、合作、推荐,当查询检索的条件比较复杂,客源数据量也比较大时,大数据监听业务数据库发生的变更,引入搜索端(即搜索平台)搜索客户数据源生成对应结构化的数据。
因此,房屋交易平台的分布式设计中可以包括业务方、大数据(即数据处理存储平台)、搜索平台三方可能会出现数据消费不及时,导致经纪人录入客户,搜索平台没有创建对应的客源模型,经纪人也无法在列表中获取正常的列表数据,此时如果重新录入已经存在的手机号码以创建客源模型时,会显示号码已经存在,无法创建,影响用户体验。
所以发明人发现现有技术中至少存在如下问题,由于创建所述处理项失败,造成无法正常处理所述待处理数据创建所述处理项的技术问题。
发明内容
本申请提供了一种数据处理方法,该方法包括:
接收录入的用于创建处理项的待处理数据,其中,所述处理项为根据所述待处理数据按照预定创建方式创建并用于后续处理的数据项;
根据所述待处理数据创建对应的处理项;
按预定检测方式检测所述处理项是否创建成功,如果所述处理项创建失败,则在预建的数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。
可选地,所述按预定检测方式检测所述处理项是否创建成功步骤后,该方法还包括:
如果所述处理项创建成功,则获取所述处理项进行所述后续处理。
可选地,所述按预定检测方式检测所述处理项是否创建成功包括:
将所述处理项存储于预置的延迟序列中,其中,所述延迟序列为按照预定排列顺序存储所述处理项并具有配置预置时间端口的存储序列;
按照预定时间配置方式通过所述预置时间端口配置所述预置时间;
按照所述预定排列顺序和所述预置时间检测所述延迟序列中的所述处理项是否创建成功。
本申请提供了一种数据处理系统,该系统包括:搜索端和业务端,以及数据库;
所述业务端用于接收录入的用于创建处理项的待处理数据,其中,所述处理项为根据所述待处理数据按照预定创建方式创建并用于后续处理的数据项;
所述搜索端用于根据所述待处理数据创建对应的处理项;
所述业务端用于按预定检测方式检测所述处理项是否创建成功,如果所述处理项创建失败,则在所述数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。
可选地,所述业务端还用于将所述处理项存储于预置的延迟序列中,其中,所述延迟序列为按照预定排列顺序存储所述处理项并具有配置预置时间端口的存储序列;
按照预定时间配置方式通过所述预置时间端口配置所述预置时间;
按照所述预定排列顺序和所述预置时间检测所述延迟序列中的所述处理项是否创建成功。
可选地,所述业务端设置有配置开关,所述配置开关用于选择是否直接通过所述数据库建立所述备用处理项。
可选地,所述业务端在所述按预定检测方式检测所述处理项是否创建成功步骤前,还用于判断所述业务端与所述搜索端之间的数据交互是否处于正常状态,
如果所述业务端与所述搜索端之间的数据交互处于非正常状态,则自动在所述数据库中建立备用数据项,从所述数据库中获取所述备用处理项进行所述后续处理。
本申请还提供一种数据配置装置,该装置包括:
录入模块,用于接收录入的用于创建处理项的待处理数据,其中,所述处理项为根据所述待处理数据按照预定创建方式创建并用于后续处理的数据项;
创建模块,用于根据所述待处理数据创建对应的处理项;
检测模块,用于按预定检测方式检测所述处理项是否创建成功,如果所述处理项创建失败,则在预建的数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。
可选地,所述检测模块,用于述按预定检测方式检测所述处理项是否创建成功步骤后,
如果所述处理项创建成功,则获取所述处理项进行所述后续处理。
可选地,该装置还包括:
存储模块,用于将所述处理项存储于预置的延迟序列中,其中,所述延迟序列为按照预定排列顺序存储所述处理项并具有配置预置时间端口的存储序列;
配置模块,用于按照预定时间配置方式通过所述预置时间端口配置所述预置时间;
所述检测模块,还用于按照所述预定排列顺序和所述预置时间检测所述延迟序列中的所述处理项是否创建成功。
本申请还提供了一种电子设备,所述装置包括:处理器和存储器;
所述存储器中存储有可被所述处理器执行的应用程序,用于使得所述处理器执行所述的数据处理方法的步骤。
本申请还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现所述的数据处理方法的步骤。
如上可见,基于上述实施例,本申请提供了一种高可用的备用方案,通过检测所述处理项是否创建成功,在本地创建所述备用处理项用于所述后续处理,解决了由于创建所述处理项失败,造成无法正常处理所述待处理数据创建所述处理项的技术问题。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明数据处理方法的流程100示意图;
图2为本发明数据处理方法的流程200示意图;
图3为本发明数据处理系统的示意图;
图4为本发明数据处理装置的架构示意图;
标记说明
101 录入模块
102 创建模块
103 检测模块
104 存储模块
105 配置模块
201 搜索端
202 业务端
203 数据库
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
以下我们以房屋交易系统为例对下面的实施例进行解释说明,需要指出的是房屋交易系统只是为了更好说明本申请的举例,并非是对本申请的具体限定。房屋交易系统通过分布式设计建立搜索平台和业务端,以及数据库。三方可以是装载于不同设备,也可以在同一设备进行构建,无论是在同一设备还是分别装载在不同设备,所述搜索平台和所述业务端,以及所述数据库都是可以独立进行数据处理和存储的子系统。
图1为本发明数据处理方法的流程100示意图。如图1所示,在一实施例中,本申请提供一种数据处理方法,该方法包括:
S101,接收录入的用于创建处理项的待处理数据,其中,所述处理项为根据所述待处理数据按照预定创建方式创建并用于后续处理的数据项。
在本步骤中提供了一种录入所述待处理数据的具体实施方式,在所述房屋交易系统的示例中,所述待处理数据可以理解为经纪人通过信息录入端口记录的客户信息,比如,客户的个人基本信息、需要、带看、约带看、标签、合作、推荐等等信息。这里的所述后续处理在所述房屋交易系统中可以理解为展示相关信息。
S102,根据所述待处理数据创建对应的处理项。
在本步骤中提供了一种创建所述处理项的具体实施方式,这些数据会以客户为单位根据所述待处理数据生成相应的处理项。这里的所述处理项即可以理解为根据所述搜索平台按照用户筛选条件过滤出的所述待处理数据,这些所述待处理数据会以通过所述筛选条件创建的数据模型,基于所述数据模型将所述待处理数据中需要搜索的数据剥离并嵌入所述数据模型。比如,A客户的客户信息包括姓名为XXX,居住地YYY,身份证号码ZZZ,可以搜索叫XXX姓名的客户信息,于是我们需要根据将筛选条件设定为姓名为XXX,获取对应的所述客户信息,因此所述搜索平台会创建一个所述数据模型,即姓名为XXX,包括姓名、居住地、身份证号的列表。
S103,按预定检测方式检测所述处理项是否创建成功,如果所述处理项创建失败,则在预建的数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。
在本步骤中提供了一种检测所述处理项的具体实施方式,如果所述处理项未被成功创建,则在预建的所述数据库中创建备用处理项,这个所述备用处理项可以理解为所述处理项等效的数据项,用于完成所述后续处理。在房屋交易系统中,所述备用处理项可以理解为经纪人和客户的对应关系存储在所述数据库中,并将所述备用处理项用于展示代替从所述搜索平台调用创建所述处理项的方式。
在本实施例中提供了一种数据处理方法,首先接收录入的用于创建处理项的待处理数据,其中,所述处理项为根据所述待处理数据按照预定创建方式创建并用于后续处理的数据项;在所述房屋交易系统中可以理解为通过经纪人录入或者按照其他预定触发模式,再或者通过其他自动模式录入所述待处理数据,即客户的信息。然后再根据所述待处理数据创建对应的所述处理项,即所述列表,再然后按预定检测方式检测所述处理项是否创建成功,如果所述处理项创建失败,则在预建的数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。对所述处理项进行检测,如果未能正确创建所述处理项,则根据所述待处理数据在预建的所述数据库中创建所述备用处理项,需要指出的是所述数据库例如可以为redis数据库,并且redis的所述数据库可以分配到多台设备中,按照现在所述房屋交易系统的实际情况(例如经纪人每天录入的录客量),将redis的所述数据库分配到例如15台设备中,可以有效防止内存溢出。另外,redis的所述数据库是一个高性能的key-value非关系内存型数据库。
在一实施例中,所述按预定检测方式检测所述处理项是否创建成功步骤后,该方法还包括:
如果所述处理项创建成功,则获取所述处理项进行所述后续处理。
本实施例提供了检测所述处理项的另一具体实施方式,即当检测所述处理项成功创建后则获取所述处理项进行所述后续处理。在房屋交易系统中,当所述处理项,即所述列表被创建成功后,如果创建成功则直接将所述列表进行展示,这里的展示即可以理解为所述后续处理。
图2为本发明数据处理方法的流程200示意图。如图2所示,在一实施例中,所述按预定检测方式检测所述处理项是否创建成功包括:
S201,将所述处理项存储于预置的延迟序列中,其中,所述延迟序列为按照预定排列顺序存储所述处理项并具有配置预置时间端口的存储序列。
在本步骤中提供了一种存储所述处理项在所述延迟序列中的具体实施方式。当创建完成所述处理项以后,会将所述处理项存储在一个所述延迟序列中,即DelayQueue队列。需要指出的是这个所述延迟序列具有配置所述预定时间的端口,所述预定时间可以理解为是一个时间值。需要指出的是除了时间上的配置外,所述处理项在存储于所述延迟序列中时还具有所述预定排列顺序,比如所述房屋交易系统中,所述处理项可能是经纪人录入的多个客户的所述待处理数据,相应地,多个客户的所述待处理数据则可能被创建为多个所述处理项存储于所述延迟序列中,因此其会通过一个所述预定排列顺序存储于所述延迟序列中。
S202,按照预定时间配置方式通过所述预置时间端口配置所述预置时间。
在本步骤中提供了一种可以通过所述预置时间端口配置所述预置时间的具体实施方式,我们例如可以配置所述预置时间为5秒至60秒中的任意值。
S203,按照所述预定排列顺序和所述预置时间检测所述延迟序列中的所述处理项是否创建成功。
在本步骤中提供了一种检测所述延迟序列的具体实施方式,对所述延迟序列中所述处理项的处理可以理解为在建立的维护线程中进行获取,即循环从所述延迟序列中按照所述预置时间,比如三十秒,按照所述预定排列顺序获取所述处理项,所述预定排列顺序我们可以利用所述处理项对应设置编号的形式实现。
在本实施例中提供了一种所述预定检测方式检测所述处理项是否创建成功的具体实施方式。将所述处理项按照所述预定排列顺序存储于所述存储序列中,所述延迟序列具有所述配置预置时间端口,按照预定时间配置方式通过所述预置时间端口配置所述预置时间,即用户可以通过所述配置预置时间端口配置所述预置时间,也可以通过触发条件或者自动配置所述预置时间,需要指出的是所述配置预置时间端口为可以通过上述用户或者自动方式配置所述预置时间的端口。按照所述预定排列顺序和所述预置时间检测所述延迟序列中的所述处理项是否创建成功。在本实施例中可以理解为通过线程循环从所述延迟序列中取出所述处理项,并通过所述处理项的编号检测所述搜索平台是否成功创建所述处理项,当然通过所述编号判断只是检测的一种具体实施方式,此时根据所述预置时间可以理解为存储所述处理项后间隔一个所述预置时间后将所述处理项取出,比如当所述预置时间被配置为三十秒,存储所述处理项三十秒后仍然没有成功创建所述处理项,则会根据所述待处理数据创建所述备用处理项,并将所述备用处理项进行所述后续处理,在所述房屋交易系统中可以理解为根据所述待处理数据创建经纪人和客户的对应关系并存储于所述数据库,标识所述经纪人通过所述数据库展示所述客户的所述待处理数据。在这个过程中,无论是否可以成功创建所述处理项,都可以进行所述备用处理项。在房屋交易系统中,我们可以理解为无论经纪人录入的所述待处理数据是否可以生成客户的所述列表都可以进行展示,解决了由于创建所述处理项失败,造成无法正常处理所述待处理数据创建所述处理项进行所述后续处理的技术问题。
图3为本发明数据处理系统的示意图。如图3所示,在一实施例中,本申请提供了一种数据处理系统,该系统包括:搜索端201和业务端202,以及数据库203;
所述业务端用于接收录入的用于创建处理项的待处理数据,其中,所述处理项为根据所述待处理数据按照预定创建方式创建并用于后续处理的数据项;
所述搜索端用于根据所述待处理数据创建对应的处理项;
所述业务端用于按预定检测方式检测所述处理项是否创建成功,如果所述处理项创建失败,则在所述数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。
在本实施例中提供了一种分布式系统的具体实施方式,本实施例中我们可以理解所述系统包括搜索端,即上述的所述搜索平台,所述业务端可以理解为所述待处理数据的输入端,以及进行所述后续处理的处理端,所述数据库则可以理解为所述业务端的redis分布式数据库。正常情况下,所述搜索端会与所述业务端进行正常的信息交互,所述待处理数据从所述业务端录入后会交互到所述搜索端建立所述处理项,并调用所述搜索端的所述处理项进行所述后续处理。在房屋交易系统中,则通过经纪人通过所述业务端录入的所述待处理数据,即客户信息,交互到所述搜索端通过所述客户信息创建所述列表,即所述处理项。最终将所述处理项进行所述后续处理,即将所述列表进行展示,但是在实际应用过程中,经常由于未能有效消化所述待处理数据导致所述处理项不能成功创建,因为经纪人每天的录入量均很大,如此庞大的数据量很容易造成所述处理项创建失败,因此,如果我们检测所述处理项未能创建成功,在本地的所述数据库中创建所述备用处理项,在所述房屋交易系统中,可以理解为在所述业务端创建需要进行所述后续处理,即展示的数据项并存储于所述数据库中,并从所述数据库中调用所述备用处理项,进行所述后续处理,即进行展示。作为所述业务端的经纪人可以将所述备用处理项展示给客户,不会因为所述处理项的创建失败导致无法显示所述列表。
可选地,所述业务端还用于将所述处理项存储于预置的延迟序列中,其中,所述延迟序列为按照预定排列顺序存储所述处理项并具有配置预置时间端口的存储序列;
按照预定时间配置方式通过所述预置时间端口配置所述预置时间;
按照所述预定排列顺序和所述预置时间检测所述延迟序列中的所述处理项是否在所述搜索端创建成功。
在本实施例中提供了在所述系统中如果进行检测所述处理项,正常情况下,所述业务端中会预置一个所述延迟序列,所述延迟序列具有所述配置预置时间端口,用户可以通过所述配置预置时间端口配置所述预置时间,所述待处理数据的录入可能创建多个处理项,在所述房屋交易系统中可以理解为不同的客户对应的所述待处理数据,比如所述客户信息都可以以不同客户创建为多个所述处理项,这些所述处理项会按照所述预定排列顺序存储于所述延迟序列中,按照所述预定排列顺序将所述处理项取出,并在间隔所述预置时间后判断是否可以在所述搜索端正确创建成功。
可选地,所述业务端设置有配置开关,所述配置开关用于选择是否直接通过所述数据库建立所述备用处理项。
在本实施例中提供了一种设置所述配置开关的具体实施方式。当所述搜索端出现大量异常,短时间无法恢复时,则用户可以通过所述配置开关直接切换数据来源,即在所述数据库创建所述备用处理项。
可选地,所述业务端在所述按预定检测方式检测所述处理项是否创建成功步骤前,还用于判断所述业务端与所述搜索端之间的数据交互是否处于正常状态,
如果所述业务端与所述搜索端之间的数据交互处于非正常状态,则自动在所述数据库中建立备用数据项,从所述数据库中获取所述备用处理项进行所述后续处理。
在本实施例中出现所述业务端与所述搜索端出现网络异常或者数据传输转换失败时,所述系统可以通过所述搜索端的一个反馈值来判断,通常所述反馈值为0时,可以判断所述搜索端和所述业务端之间的交互出现异常,此时所述系统可以自动在所述数据库中建立所述备用数据项并进行所述后续处理。
另外,当所述搜索端与所述业务端产生数据不一致的情况下,则通过全量数据修复。比如我们设定一个预定时间,例如1天进行一次全量修复。
图4为本发明数据处理装置的架构示意图。如图4所示,在一实施例中,本申请还提供一种数据配置装置,该装置包括:
录入模块101,用于接收录入的用于创建处理项的待处理数据,其中,所述处理项为根据所述待处理数据按照预定创建方式创建并用于后续处理的数据项;
创建模块102,用于根据所述待处理数据创建对应的处理项;
检测模块103,用于按预定检测方式检测所述处理项是否创建成功,如果所述处理项创建失败,则在预建的数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。
可选地,所述检测模块103,用于所述按预定检测方式检测所述处理项是否创建成功步骤后,
如果所述处理项创建成功,则获取所述处理项进行所述后续处理。
可选地,该装置还包括:
存储模块104,用于将所述处理项存储于预置的延迟序列中,其中,所述延迟序列为按照预定排列顺序存储所述处理项并具有配置预置时间端口的存储序列;
配置模块105,用于按照预定时间配置方式通过所述预置时间端口配置所述预置时间;
所述检测模块103,还用于按照所述预定排列顺序和所述预置时间检测所述延迟序列中的所述处理项是否创建成功。
在一实施例中,本申请还提供了一种电子设备,所述装置包括:处理器和存储器;
所述存储器中存储有可被所述处理器执行的应用程序,用于使得所述处理器执行所述的数据处理方法的步骤。
在一实施例中,本申请还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现所述的数据处理方法的步骤。
实际应用中,所述的计算机可读介质可以是上述实施例中描述的设备/装置/系统中所包含的,也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序,当上述一个或多个程序被执行时,实现所描述的数据的图像数据处理方法。
根据本申请公开的实施例,计算机可读存储介质可以是非易失性的计算机可读存储介质,例如可以包括但不限于:便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件,或者上述的任意合适的组合,但不用于限制本申请保护的范围。在本申请公开的实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。
Claims (10)
1.一种数据处理方法,其特征在于,该方法包括:
接收录入的用于创建处理项的待处理数据,其中,所述处理项为根据所述待处理数据按照预定创建方式创建并用于后续处理的数据项;
根据所述待处理数据创建对应的处理项;
按预定检测方式检测所述处理项是否创建成功,
如果所述处理项创建失败,则在预建的数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。
2.根据权利要求1所述的数据处理方法,其特征在于,所述按预定检测方式检测所述处理项是否创建成功步骤后,该方法还包括:
如果所述处理项创建成功,则获取所述处理项进行所述后续处理。
3.根据权利要求1或2所述的数据处理方法,其特征在于,所述按预定检测方式检测所述处理项是否创建成功包括:
将所述处理项存储于预置的延迟序列中,其中,所述延迟序列为按照预定排列顺序存储所述处理项并具有配置预置时间端口的存储序列;
按照预定时间配置方式通过所述预置时间端口配置所述预置时间;
按照所述预定排列顺序和所述预置时间检测所述延迟序列中的所述处理项是否创建成功。
4.一种数据处理系统,其特征在于,该系统包括:搜索端和业务端,以及数据库;
所述业务端用于接收录入的用于创建处理项的待处理数据,其中,所述处理项为根据所述待处理数据按照预定创建方式创建并用于后续处理的数据项;
所述搜索端用于根据所述待处理数据创建对应的处理项;
所述业务端用于按预定检测方式检测所述处理项是否创建成功,
如果所述处理项创建失败,则在所述数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。
5.根据权利要求4所述的数据处理系统,其特征在于,
所述业务端还用于将所述处理项存储于预置的延迟序列中,其中,所述延迟序列为按照预定排列顺序存储所述处理项并具有配置预置时间端口的存储序列;
按照预定时间配置方式通过所述预置时间端口配置所述预置时间;
按照所述预定排列顺序和所述预置时间检测所述延迟序列中的所述处理项是否在所述搜索端创建成功。
6.根据权利要求4或5所述的数据处理系统,其特征在于,所述业务端设置有配置开关,所述配置开关用于选择是否直接通过所述数据库建立所述备用处理项。
7.根据所述权利要求4或5所述的数据处理系统,其特征在于,
所述业务端在所述按预定检测方式检测所述处理项是否创建成功步骤前,还用于判断所述业务端与所述搜索端之间的数据交互是否处于正常状态,
如果所述业务端与所述搜索端之间的数据交互处于非正常状态,则自动在所述数据库中建立备用数据项,从所述数据库中获取所述备用处理项进行所述后续处理。
8.一种数据配置装置,其特征在于,该装置包括:
录入模块,用于接收录入的用于创建处理项的待处理数据,其中,所述处理项为根据所述待处理数据按照预定创建方式创建并用于后续处理的数据项;
创建模块,用于根据所述待处理数据创建对应的处理项;
检测模块,用于按预定检测方式检测所述处理项是否创建成功,如果所述处理项创建失败,则在预建的数据库中创建备用处理项之后,从所述数据库中获取所述备用处理项进行所述后续处理,其中,所述备用处理项为用于所述后续处理对应所述处理项的备用数据项。
9.一种电子设备,其特征在于,所述装置包括:处理器和存储器;
所述存储器中存储有可被所述处理器执行的应用程序,用于使得所述处理器执行如权利要求1至3中任一项所述的数据处理方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1至3任一项所述的数据处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911307235.4A CN111177241A (zh) | 2019-12-18 | 2019-12-18 | 一种数据处理方法、装置、系统、电子设备及其存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911307235.4A CN111177241A (zh) | 2019-12-18 | 2019-12-18 | 一种数据处理方法、装置、系统、电子设备及其存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111177241A true CN111177241A (zh) | 2020-05-19 |
Family
ID=70648847
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911307235.4A Pending CN111177241A (zh) | 2019-12-18 | 2019-12-18 | 一种数据处理方法、装置、系统、电子设备及其存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111177241A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112769630A (zh) * | 2021-04-06 | 2021-05-07 | 北京焦点新干线信息技术有限公司 | 开盘场景的流量回放方法及装置 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105787771A (zh) * | 2014-12-16 | 2016-07-20 | 航天信息股份有限公司 | 一种提升网络发票系统中数据交互稳定性的方法及系统 |
CN108345664A (zh) * | 2018-02-02 | 2018-07-31 | 网易(杭州)网络有限公司 | 一种文件同步的方法、介质、系统和电子设备 |
CN109783468A (zh) * | 2018-12-04 | 2019-05-21 | 网联清算有限公司 | 数据库切换方法及系统、介质和计算机系统 |
CN109918360A (zh) * | 2019-02-28 | 2019-06-21 | 携程旅游信息技术(上海)有限公司 | 数据库平台系统、创建方法、管理方法、设备及存储介质 |
CN110377402A (zh) * | 2018-04-12 | 2019-10-25 | 腾讯科技(深圳)有限公司 | 业务数据处理方法、装置、存储介质及计算机设备 |
CN110392884A (zh) * | 2017-02-23 | 2019-10-29 | 易享信息技术有限公司 | 自动化的自修复数据库系统及实现其的方法 |
-
2019
- 2019-12-18 CN CN201911307235.4A patent/CN111177241A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105787771A (zh) * | 2014-12-16 | 2016-07-20 | 航天信息股份有限公司 | 一种提升网络发票系统中数据交互稳定性的方法及系统 |
CN110392884A (zh) * | 2017-02-23 | 2019-10-29 | 易享信息技术有限公司 | 自动化的自修复数据库系统及实现其的方法 |
CN108345664A (zh) * | 2018-02-02 | 2018-07-31 | 网易(杭州)网络有限公司 | 一种文件同步的方法、介质、系统和电子设备 |
CN110377402A (zh) * | 2018-04-12 | 2019-10-25 | 腾讯科技(深圳)有限公司 | 业务数据处理方法、装置、存储介质及计算机设备 |
CN109783468A (zh) * | 2018-12-04 | 2019-05-21 | 网联清算有限公司 | 数据库切换方法及系统、介质和计算机系统 |
CN109918360A (zh) * | 2019-02-28 | 2019-06-21 | 携程旅游信息技术(上海)有限公司 | 数据库平台系统、创建方法、管理方法、设备及存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112769630A (zh) * | 2021-04-06 | 2021-05-07 | 北京焦点新干线信息技术有限公司 | 开盘场景的流量回放方法及装置 |
CN112769630B (zh) * | 2021-04-06 | 2021-06-25 | 北京焦点新干线信息技术有限公司 | 开盘场景的流量回放方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10437703B2 (en) | Correlation of source code with system dump information | |
CN103595807B (zh) | 一种数据同步更新方法和装置 | |
CN110225078B (zh) | 一种应用服务更新方法、系统及终端设备 | |
CN109408262B (zh) | 一种业务数据处理方法及相关设备 | |
US9639434B2 (en) | Auto-didacted hierarchical failure recovery for remote access controllers | |
CN110555150B (zh) | 一种数据监控方法、装置、设备和存储介质 | |
US20170199903A1 (en) | System for backing out data | |
CN111767173A (zh) | 网络设备数据处理方法、装置、计算机设备和存储介质 | |
CN109408361A (zh) | Monkey测试复原方法、装置、电子设备及计算机可读存储介质 | |
CN111680104B (zh) | 数据同步方法、装置、计算机设备及可读存储介质 | |
CN111858468A (zh) | 分布式文件系统元数据校验方法、系统、终端及存储介质 | |
CN110648126A (zh) | 支付类型配置方法、装置、服务器及存储介质 | |
CN114020432A (zh) | 任务异常处理方法、装置及任务异常处理系统 | |
CN111177241A (zh) | 一种数据处理方法、装置、系统、电子设备及其存储介质 | |
CN106897063B (zh) | 一种基于efi将os启动项永久添加至bios中的方法及系统 | |
CN111694724B (zh) | 分布式表格系统的测试方法、装置、电子设备及存储介质 | |
US20230244565A1 (en) | Systems and Methods for Pause-Correct-Replay Workflow Customization | |
CN112818204B (zh) | 一种业务的处理方法、装置、设备及存储介质 | |
CN115269252A (zh) | 应用程序故障处理方法、装置、设备及存储介质 | |
CN114490415A (zh) | 业务测试方法、计算机设备、存储介质和计算机程序产品 | |
CN108958827B (zh) | 一种处理程序升级故障的方法和系统 | |
CN110221952B (zh) | 业务数据的处理方法及装置、业务数据处理系统 | |
CN109144967B (zh) | 一种用于改进分布式计算系统的维护系统及方法 | |
CN111835566A (zh) | 一种系统故障管理方法、装置及系统 | |
CN110457300B (zh) | 一种公共测试库的清理方法及装置、电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |