CN109815256A - 一种数据处理方法、装置、电子设备和存储介质 - Google Patents

一种数据处理方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN109815256A
CN109815256A CN201811574156.5A CN201811574156A CN109815256A CN 109815256 A CN109815256 A CN 109815256A CN 201811574156 A CN201811574156 A CN 201811574156A CN 109815256 A CN109815256 A CN 109815256A
Authority
CN
China
Prior art keywords
service
service identification
service request
request data
screening
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811574156.5A
Other languages
English (en)
Inventor
刘希伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Poly Polytron Technologies Inc
Juhaokan Technology Co Ltd
Original Assignee
Poly Polytron Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Poly Polytron Technologies Inc filed Critical Poly Polytron Technologies Inc
Priority to CN201811574156.5A priority Critical patent/CN109815256A/zh
Publication of CN109815256A publication Critical patent/CN109815256A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例提供了一种数据处理方法、装置、电子设备和存储介质,其中,所述方法包括:获取业务请求数据;依据所述业务请求数据,生成业务标识;判断所述业务标识与预置筛选数据库中的筛选标识是否匹配;若所述业务标识与预置筛选数据库中的筛选标识不匹配,则响应所述业务请求数据;若所述业务标识与预置筛选数据库中的筛选标识匹配,则返回预置的错误状态消息。本发明实施例可以实现对业务请求数据进行筛选,避免重复响应业务标识相同的业务请求数据,有效避免了业务故障的同时,也可以解决现有技术中,需要对业务请求数据和响应业务请求数据后的结果数据进行一致性处理,导致对业务请求数据的处理逻辑复杂的问题。

Description

一种数据处理方法、装置、电子设备和存储介质
技术领域
本发明涉及通信技术领域,特别是涉及一种数据处理方法、装置、电子设备和存储介质。
背景技术
随着终端和互联网技术的快速发展,人们经常采用终端连接至不同的服务器,以实现自身需求,例如:线上支付、线上购物等。
当终端向服务器发送业务请求时,可能存在网络原因(例如:网络波动)、人为因素(例如:用户多次发送相同业务请求)等,使得服务器在正常处理了业务请求后,仍然收到相同的业务请求,会导致服务器多次处理用户的同一个业务请求,造成业务故障(例如:重复支付同一订单)。
现有的技术中,一般是通过在一段时间内请求进行去重和数据一致性进行处理,根据服务器中的数据情况和业务的规则来解决重复接收同一业务请求的情况,增加了服务器的维护成本。
发明内容
鉴于上述问题,提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种数据处理方法、装置、电子设备和存储介质。
为了解决上述问题,本发明实施例公开了一种数据处理方法,所述方法包括:
获取业务请求数据;
依据所述业务请求数据,生成业务标识;
判断所述业务标识与预置筛选数据库中的筛选标识是否匹配;
若所述业务标识与预置筛选数据库中的筛选标识不匹配,则响应所述业务请求数据;
若所述业务标识与预置筛选数据中的筛选标识库匹配,则返回预置的错误状态消息。
优选地,所述依据所述业务请求数据生成业务标识的步骤,包括:
解析所述业务请求数据,提取所述业务请求数据中的业务信息;
对所述业务信息进行哈希转换,生成第一哈希值;
采用所述第一哈希值,生成所述业务标识。
优选地,所述判断所述业务标识与预置筛选数据库中的筛选标识是否匹配的步骤,包括:
当所述筛选数据库中存在与所述业务标识一致的筛选标识时,确定所述业务标识与所述筛选标识匹配;
当所述筛选数据库中不存在与所述业务标识一致的筛选标识时,确定所述业务标识与所述筛选标识不匹配。
优选地,当所述筛选数据库中不存在与所述业务标识一致的筛选标识时,所述方法还包括:
确定所述业务标识为新的筛选标识;
将所述新的筛选标识保存至所述筛选数据库。
优选地,所述筛选数据库配置有对应的线程,所述线程设置有唯一对应的线程标识;在所述依据所述业务请求数据,生成业务标识的步骤之后,所述方法还包括:
对所述业务标识进行哈希转换,生成第二哈希值;
确定与所述第二哈希值匹配的目标线程标识;
将所述业务标识发送至与所述目标线程标识对应的目标线程。
优选地,所述方法还包括:
确定将所述业务标识发送至所述目标线程对应的第一时间戳;
确定与当前时刻对应的第二时间戳;
计算所述第二时间戳与第一时间戳的差值,生成请求时间;
当所述请求时间大于预设时间阈值时,在所述目标线程中删除所述业务标识。
优选地,在所述判断所述业务标识与预置筛选数据库中的筛选标识是否匹配的步骤之前,所述方法还包括:
判断所述业务请求数据是否包含预设的重试标识;
若所述业务请求数据包含预设的重试标识,则将所述业务标识确定为新的筛选标识;
将所述新的筛选标识保存至所述筛选数据库;
响应所述业务请求数据。
优选地,所述响应所述业务请求数据的步骤,包括:
执行所述业务信息;
确定与所述业务信息对应的业务处理结果;
返回所述业务处理结果。
本发明实施例还公开了一种数据处理装置,所述装置包括:
获取模块,用于获取业务请求数据;
标识模块,用于依据所述业务请求数据,生成业务标识;
判断模块,用于判断所述业务标识与预置筛选数据库中的筛选标识是否匹配;若所述业务标识与预置筛选数据库中的筛选标识不匹配,则调用响应模块;若所述业务标识与预置筛选数据库中的筛选标识匹配,则调用报错模块;
所述响应模块,用于响应所述业务请求数据;
所述报错模块,用于返回预置的错误状态消息。
优选地,所述标识模块包括:
解析子模块,用于解析所述业务请求数据,提取所述业务请求数据中的业务信息;
第一哈希子模块,用于对所述业务信息进行哈希转换,生成第一哈希值;
业务标识子模块,用于采用所述第一哈希值,生成所述业务标识。
优选地,所述判断模块包括:
第一匹配子模块,用于当所述筛选数据库中存在与所述业务标识一致的筛选标识时,确定所述业务标识与所述筛选标识匹配;
第二匹配子模块,用于当所述筛选数据库中不存在与所述业务标识一致的筛选标识时,确定所述业务标识与所述筛选标识不匹配。
优选地,所述装置还包括:
筛选标识确定模块,用于确定所述业务标识为新的筛选标识;
筛选标识添加模块,用于将所述新的筛选标识保存至所述筛选数据库。
优选地,所述筛选数据库配置有对应的线程,所述线程设置有唯一对应的线程标识;所述装置还包括:
第二哈希模块,用于对所述业务标识进行哈希转换,生成第二哈希值;
线程确定模块,用于确定与所述第二哈希值匹配的目标线程标识;
标识发送模块,用于将所述业务标识发送至与所述目标线程标识对应的目标线程。
优选地,所述装置还包括:
第一时间戳模块,用于确定将所述业务标识发送至所述目标线程对应的第一时间戳;
第二时间戳模块,用于确定与当前时刻对应的第二时间戳;
请求时间模块,用于计算所述第二时间戳与第一时间戳的差值,生成请求时间;
标识删除模块,用于当所述请求时间大于预设时间阈值时,在所述目标线程中删除所述业务标识。
优选地,所述装置还包括:
重试标识模块,用于判断所述业务请求数据是否包含预设的重试标识;若所述业务请求数据包含预设的重试标识,则调用所述筛选标识确定模块、所述筛选标识添加模块、所述响应模块。
优选地,所述响应模块包括:
执行业务子模块,用于执行所述业务信息;
业务结果子模块,用于确定与所述业务信息对应的业务处理结果;
结果返回子模块,用于返回所述业务处理结果。
本发明实施例还公开了电子设备,包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上所述的数据处理方法的步骤。
本发明实施例还公开了计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上所述的数据处理方法的步骤。
本发明实施例包括以下优点:通过在获取业务请求数据后,生成与业务请求数据唯一对应的业务标识,当业务标识与筛选数据库不匹配时响应业务请求数据,当业务标识与筛选数据库匹配时则返回预置的错误状态消息,从而实现对业务请求数据进行筛选,避免重复响应业务标识相同的业务请求数据,有效避免了业务故障的同时,也可以解决现有技术中,需要对业务请求数据和响应业务请求数据后的结果数据进行一致性处理,导致对业务请求数据的处理逻辑复杂的问题。
附图说明
图1是本发明的一种数据处理方法实施例的步骤流程图;
图2是本发明的一种数据处理装置实施例的结构框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
参照图1,示出了本发明的一种数据处理方法实施例的步骤流程图,具体可以包括如下步骤:
本发明实施例可以应用于服务器,服务器与一个或多个客户端连接通信。客户端可以在生成业务请求数据之后,将业务请求数据发送至与其连接的服务器。
步骤101,获取业务请求数据;
业务请求数据为请求执行指定任务的数据。
业务请求数据可以由客户端生成并发送至服务器,服务器可以根据业务请求数据,确定客户端请求服务器执行的指定任务,例如:请求客户端接收音频。
步骤102,依据所述业务请求数据,生成业务标识;
可以根据接收到的业务请求数据,生成与业务请求数据唯一对应的业务标识。业务标识可以是一个有限位的字符串。
在本发明的一种优选实施例中,步骤102可以包括:
子步骤S11,解析所述业务请求数据,提取所述业务请求数据中的业务信息;
对业务请求数据进行解析,业务请求数据中可能包括有多种信息(例如:日志信息、传输标识、终端标识、业务标识等)。从业务请求数据包含的信息中提取业务信息。业务信息为客户端请求服务器进行响应的信息,例如:请求确认支付指定订单,请求上传指定视频等。
子步骤S12,对所述业务信息进行哈希转换,生成第一哈希值;
采用哈希算法(例如:MD5算法、MD4算法、SHA-1算法),对业务信息进行转换,生成第一哈希值,第一哈希值与业务信息唯一匹配。
例如:业务请求数据A的包含业务信息a、业务请求数据B包含业务信息b、业务请求数据C的包含业务信息a,则业务请求数据A和业务请求数据C的第一哈希值相同,业务请求数据A和业务请求数据B的第一哈希值不相同。
子步骤S13,采用所述第一哈希值,生成所述业务标识。
第一哈希值可以是一个有限位的字符串,第一哈希值可以由数字和/或字母组成。可以将完整的第一哈希值作为业务标识,或者将第一哈希值中的指定位为业务标识,由于第一哈希值与业务信息唯一匹配,从而业务标识也与业务信息唯一匹配。例如:可以采用MD5算法对业务信息进行哈希转换,则第一哈希值为与业务信息唯一对应的MD5值。第一哈希值为32位的字符串,可以基于对计算资源和存储资源的考虑,将完整的32位字符作为业务标识,也可以将第一哈希值中的一定数量位(例如:16位)的字符生成业务标识。
例如:对业务信息进行哈希转换后,生成的第一哈希值为9da2461f43ba4889113bb68592d7a7ed。可以直接将第一哈希值确定为业务标识信息,或者将第一哈希值中的第8至第23位(即43ba4889113bb685)作为业务标识。
步骤103,判断所述业务标识与预置筛选数据库中的筛选标识是否匹配;
在本发明的一种优选实施例中,步骤103可以包括:
子步骤S21,当所述筛选数据库中存在与所述业务标识一致的筛选标识时,确定所述业务标识与所述筛选标识匹配;
子步骤S22,当所述筛选数据库中不存在与所述业务标识一致的筛选标识时,确定所述业务标识与所述筛选标识不匹配。
其中,筛选标识可以为历史业务标识。
通过将业务标识与筛选数据中的筛选标识进行匹配,从而对业务标识进行筛选,进一步地,由于筛选标识为历史业务标识,业务标识与业务信息唯一对应,通过判断当前业务信息是否与历史业务信息一致,从而实现对业务信息进行筛选。
步骤104,若所述业务标识与预置筛选数据库中的筛选标识不匹配,则响应所述业务请求数据;
当业务标识与预置筛选数据库中的筛选标识不匹配时,服务器确定没有处理过与当前业务请求数据对应的业务信息,则响应该业务请求数据。
在本发明的一种优选实施例中,响应所述业务请求数据的步骤可以包括:执行所述业务信息;确定与所述业务信息对应的业务处理结果;返回所述业务处理结果。
例如:客户端向服务器发送的业务请求数据中,业务信息为请求上传指定视频。则响应业务请求数据可以为:服务器接收该视频,并对该视频进行存储。服务器在确定接收并存储该视频后,生成上传视频处理结果(例如:成功,或失败),并向客户端返回该视频处理结果。
在本发明的一种优选实施例中,当所述筛选数据库中不存在与所述业务标识一致的筛选标识时,还包括如下步骤:确定所述业务标识为新的筛选标识;将所述新的筛选标识保存至所述筛选数据库;所述筛选数据库存储在内存中。
通过将与响应的业务请求数据对应的业务标识进行存储,增加筛选数据库中的筛选标识,从而记录已经处理过的业务信息,防止重复处理包含有相同业务信息的业务请求数据,避免发生业务故障。
其中,内存可以包括随机存储器以及只读存储器,随机存储器用于快速读取筛选标识,只读存储器用以永久存储筛选标识。在随机存储器发生故障或者断电使得筛选标识丢失时,可以从只读存储器中重新获取筛选标识。
步骤105,若所述业务标识与预置筛选数据库中的筛选标识匹配,则返回预置的错误状态消息。
当确定业务标识与筛选数据库匹配,服务器确定已处理过相同的业务信息,则不执行该业务信息,并向客户端返回错误状态信息(例如:202状态码),客户端可以根据该错误状态信息,确定服务器已接收到对应的业务请求数据,但没有执行业务请求数据中的业务信息。
通过在获取业务请求数据后,生成与业务请求数据唯一对应的业务标识,当业务标识与筛选数据库不匹配时响应业务请求数据,当业务标识与筛选数据库匹配时则返回预置的错误状态消息,从而实现对业务请求数据进行筛选,避免重复响应业务标识相同的业务请求数据,有效避免了业务故障的同时,也可以解决现有技术中,需要对业务请求数据和响应业务请求数据后的结果数据进行一致性处理,导致业务请求数据处理逻辑复杂的问题。
在本发明的一种优选实施例中,所述筛选数据库配置设置有对应的线程,所述线程设置有唯一对应的线程标识,还可以包括如下步骤:对所述业务标识进行哈希转换,生成第二哈希值;确定与所述第二哈希值匹配的目标线程标识;将所述业务标识发送至与所述目标线程标识对应的目标线程。
线程标识可以由有限位的字符组成,且组成线程标识所包含字符与组成第一哈希值的字符相同,以保证第二哈希值能够与其中一个线程标识匹配。第二哈希值可以是业务标识中依次排序的一个或多个字符,并将业务标识发送至与业务标识匹配的线程标识对应的目标线程,并由目标线程执行步骤103,以及步骤104和步骤105中的一个。由于业务标识与业务信息唯一匹配,从而实现相同的业务信息对应的业务标识,都能发送至相同的目标线程。通过采用不同的线程处理业务标识信息,进而采用不同的线程执行不同的业务信息,从而实现保证
在实际应用中,可以在线程中建立kafka输入队列和kafka输出队列,kafka输入队列用于接收和存储业务标识信息,kafka输出队列用于存储和发送错误状态消息或者业务处理结果。
在一种优选示例中,可以是由每一个线程对应一个独立的筛选数据库。
例如:第一哈希值由0、1、2、3、4、5、6、7、8、9、a、b、c、d、e、f中的字符组成,则线程标识也需要由0、1、2、3、4、5、6、7、8、9、a、b、c、d、e、f中的字符组成。筛选数据库设置有16个线程,对16个线程依次配置有0、1、2、3、4、5、6、7、8、9、a、b、c、d、e、f的线程标识。业务标识9da2461f43ba4889113bb68592d7a7ed进行哈希转换,生成第二哈希值,其中,第二哈希值为业务标识的首个字符即9,则确定线程标识为“9”的线程为目标线程,并将业务标识(9da2461f43ba4889113bb68592d7a7ed)发送至目标线程。
在本发明的一种优选实施例中,在将所述业务标识发送至与所述目标线程标识对应的目标线程之后,还可以包括如下步骤:确定将所述业务标识发送至所述目标线程对应的第一时间戳;确定与当前时刻对应的第二时间戳;计算所述第二时间戳与第一时间戳的差值,生成请求时间;当所述请求时间大于预设时间阈值时,在所述目标线程中删除所述业务标识。
通过第一时间戳和第二时间戳,确定目标线程存储业务标识的持续时间即请求时间,当请求时间大于时间阈值(例如:10分钟)时,在目标线程中删除业务标识,从而防止目标线程中存储的业务标识过多,导致占用的资源过多,影响其他线程的正常工作。
例如:当业务标识发送至目标线程的时间(即第一时间戳)为13时20分53秒,且时间阈值为十分钟。若当前时间(即第二时间戳)为13时25分32秒,即此时第二时间戳与第一时间戳的差值为4分37秒,则暂时不删除该业务标识。随着当前时间的后移,若当前时间(即第二时刻)为13时20分54秒,即此时第二时间戳与第一时间戳的差值为10分1秒,则在目标线程中删除将该业务标识。在实际应用中,可以按照预设频率(例如:1次/秒)计算每一个业务标识对应的请求时间,防止计算请求时间占用过多的计算资源。
在本发明的一种优选实施例中,在步骤103之前还可以包括如下步骤:判断所述业务请求数据是否包含预设的重试标识;若所述业务请求数据包含重试标识,则将所述业务标识确定为新的筛选标识;将所述新的筛选标识保存至所述筛选数据库;响应所述业务请求数据。
业务请求数据可能包含有重试标识,重试标识用于确定存在与当前业务请求数据具有相同业务信息的其他业务请求数据。对业务请求数据进行解析后,可以判断业务请求数据是否包含有预设的重试标识。客户端可以组合业务信息和重试标识生成业务请求数据。
当确定接收到的业务请求数据不包含重试标识时,则确定没有获取到与当前业务请求数据具有相同业务信息的其他业务请求数据,即首次接收到与该业务信息对应的业务请求数据。则将依据该业务请求数据生成业务标识作为新的筛选标识,将新的筛选标识添加至筛选数据库中,并响应该业务请求数据。响应该业务请求数据的过程包括:执行所述业务信息;确定与所述业务信息对应的业务处理结果;返回所述业务处理结果。当确定接收到的业务请求数据包含重试标识时,则执行步骤103。
在一种示例中,还可以是每一业务请求数据中包含有首发标识或者重试标识。当确定接收到的业务请求数据包含首发标识时,则确定没有获取到与当前业务请求数据具有相同业务信息的其他业务请求数据。
在本发明实施例中,通过在获取业务请求数据后,生成与业务请求数据唯一对应的业务标识,在确定业务请求数据中不包含重试标识时,直接响应业务请求数据,在确定请求数据中不包含重试标识时,判断业务标识信息是否与筛选数据库匹配,当业务标识与筛选数据库不匹配时响应业务请求数据,当业务标识与筛选数据库匹配时则返回预置的错误状态消息,从而实现对业务请求数据进行二次筛选,在无需改变业务处理逻辑的同时,有效地对业务请求数据中的业务信息进行了去重处理,避免了由于重复执行相同的业务信息而导致业务故障和造成资源浪费的问题。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参照图2,示出了本发明的一种数据处理装置实施例的结构框图,具体可以包括如下模块:
获取模块201,用于获取业务请求数据;
标识模块202,用于依据所述业务请求数据,生成业务标识;
判断模块203,用于判断所述业务标识与预置筛选数据库中的筛选标识是否匹配;若所述业务标识与预置筛选数据库中的筛选标识不匹配,则调用响应模块204;若所述业务标识与预置筛选数据库中的筛选标识匹配,则调用报错模块205;
所述响应模块204,用于响应所述业务请求数据;
所述报错模块205,用于返回预置的错误状态消息。
在本发明的一种优选实施例中,所述标识模块202包括:
解析子模块,用于解析所述业务请求数据,提取所述业务请求数据中的业务信息;
第一哈希子模块,用于对所述业务信息进行哈希转换,生成第一哈希值;
业务标识子模块,用于采用所述第一哈希值,生成所述业务标识。
在本发明的一种优选实施例中,所述判断模块203包括:
第一匹配子模块,用于当所述筛选数据库中存在与所述业务标识一致的筛选标识时,确定所述业务标识与所述筛选标识匹配;
第二匹配子模块,用于当所述筛选数据库中不存在与所述业务标识一致的筛选标识时,确定所述业务标识与所述筛选标识不匹配。
在本发明的一种优选实施例中,所述装置还包括:
筛选标识确定模块,用于确定所述业务标识为新的筛选标识;
筛选标识添加模块,用于将所述新的筛选标识保存至所述筛选数据库。
在本发明的一种优选实施例中,所述筛选数据库配置有对应的线程,所述线程设置有唯一对应的线程标识;所述装置还包括:
第二哈希模块,用于对所述业务标识进行哈希转换,生成第二哈希值;
线程确定模块,用于确定与所述第二哈希值匹配的目标线程标识;
标识发送模块,用于将所述业务标识发送至与所述目标线程标识对应的目标线程。
在本发明的一种优选实施例中,所述装置还包括:
第一时间戳模块,用于确定将所述业务标识发送至所述目标线程对应的第一时间戳;
第二时间戳模块,用于确定与当前时刻对应的第二时间戳;
请求时间模块,用于计算所述第二时间戳与第一时间戳的差值,生成请求时间;
标识删除模块,用于当所述请求时间大于预设时间阈值时,在所述目标线程中删除所述业务标识。
在本发明的一种优选实施例中,所述装置还包括:
重试标识模块,用于判断所述业务请求数据是否包含预设的重试标识;若所述业务请求数据包含预设的重试标识,则调用所述筛选标识确定模块、所述筛选标识添加模块、所述响应模块204。
在本发明的一种优选实施例中,所述响应模块204包括:
执行业务子模块,用于执行所述业务信息;
业务结果子模块,用于确定与所述业务信息对应的业务处理结果;
结果返回子模块,用于返回所述业务处理结果。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本发明实施例还提供了电子设备,包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上所述的数据处理方法的步骤。
本发明实施例还提供了计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上所述的数据处理方法的步骤。
本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上,使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例做出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对本发明所提供的一种数据处理方法、装置、电子设备和存储介质,进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (11)

1.一种数据处理方法,其特征在于,所述方法包括:
获取业务请求数据;
依据所述业务请求数据,生成业务标识;
判断所述业务标识与预置筛选数据库中的筛选标识是否匹配;
若否,则响应所述业务请求数据;
若是,则返回预置的错误状态消息。
2.根据权利要求1所述的方法,其特征在于,所述依据所述业务请求数据生成业务标识的步骤,包括:
解析所述业务请求数据,提取所述业务请求数据中的业务信息;
对所述业务信息进行哈希转换,生成第一哈希值;
采用所述第一哈希值,生成所述业务标识。
3.根据权利要求2所述的方法,其特征在于,所述判断所述业务标识与预置筛选数据库中的筛选标识是否匹配的步骤,包括:
当所述筛选数据库中存在与所述业务标识一致的筛选标识时,确定所述业务标识与所述筛选标识匹配;
当所述筛选数据库中不存在与所述业务标识一致的筛选标识时,确定所述业务标识与所述筛选标识不匹配。
4.根据权利要求3所述的方法,其特征在于,当所述筛选数据库中不存在与所述业务标识一致的筛选标识时,所述方法还包括:
确定所述业务标识为新的筛选标识;
将所述新的筛选标识保存至所述筛选数据库。
5.根据权利要求2所述的方法,其特征在于,所述筛选数据库配置有对应的线程,所述线程设置有唯一对应的线程标识;在所述依据所述业务请求数据,生成业务标识的步骤之后,所述方法还包括:
对所述业务标识进行哈希转换,生成第二哈希值;
确定与所述第二哈希值匹配的目标线程标识;
将所述业务标识发送至与所述目标线程标识对应的目标线程。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
确定将所述业务标识发送至所述目标线程对应的第一时间戳;
确定与当前时刻对应的第二时间戳;
计算所述第二时间戳与第一时间戳的差值,生成请求时间;
当所述请求时间大于预设时间阈值时,在所述目标线程中删除所述业务标识。
7.根据权利要求1所述的方法,其特征在于,在所述判断所述业务标识与预置筛选数据库中的筛选标识是否匹配的步骤之前,所述方法还包括:
判断所述业务请求数据是否包含预设的重试标识;
若是,则将所述业务标识确定为新的筛选标识;
将所述新的筛选标识保存至所述筛选数据库;
响应所述业务请求数据。
8.根据权利要求2或7所述的方法,其特征在于,所述响应所述业务请求数据的步骤,包括:
执行所述业务信息;
确定与所述业务信息对应的业务处理结果;
返回所述业务处理结果。
9.一种数据处理装置,其特征在于,所述装置包括:
获取模块,用于获取业务请求数据;
标识模块,用于依据所述业务请求数据,生成业务标识;
判断模块,用于判断所述业务标识与预置筛选数据库中的筛选标识是否匹配;若所述业务标识与预置筛选数据库中的筛选标识不匹配,则调用响应模块;若所述业务标识与预置筛选数据库中的筛选标识匹配,则调用报错模块;
所述响应模块,用于响应所述业务请求数据;
所述报错模块,用于返回预置的错误状态消息。
10.电子设备,其特征在于,包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至8中任一项所述的数据处理方法的步骤。
11.计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的数据处理方法的步骤。
CN201811574156.5A 2018-12-21 2018-12-21 一种数据处理方法、装置、电子设备和存储介质 Pending CN109815256A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811574156.5A CN109815256A (zh) 2018-12-21 2018-12-21 一种数据处理方法、装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811574156.5A CN109815256A (zh) 2018-12-21 2018-12-21 一种数据处理方法、装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
CN109815256A true CN109815256A (zh) 2019-05-28

Family

ID=66602229

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811574156.5A Pending CN109815256A (zh) 2018-12-21 2018-12-21 一种数据处理方法、装置、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN109815256A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110661863A (zh) * 2019-09-20 2020-01-07 政采云有限公司 一种请求处理方法、装置及电子设备和存储介质
CN111010447A (zh) * 2019-12-23 2020-04-14 北京奇艺世纪科技有限公司 一种数据通信方法及装置
CN111159298A (zh) * 2019-12-31 2020-05-15 欧普照明股份有限公司 业务请求处理方法、装置、电子设备及存储介质
CN111190709A (zh) * 2019-11-19 2020-05-22 泰康保险集团股份有限公司 处理请求的方法、装置、电子设备及可读存储介质
CN111200830A (zh) * 2020-01-02 2020-05-26 腾讯科技(深圳)有限公司 数据传输方法及装置、电子设备
CN111222306A (zh) * 2020-01-06 2020-06-02 广州虎牙科技有限公司 数据处理方法和装置、电子设备和存储介质
CN112104569A (zh) * 2020-07-28 2020-12-18 苏宁云计算有限公司 报文数据处理方法、装置、计算机设备和存储介质
CN112559506A (zh) * 2020-12-22 2021-03-26 卫宁健康科技集团股份有限公司 健康数据处理方法、装置、处理设备及存储介质
CN112883073A (zh) * 2021-03-22 2021-06-01 北京同邦卓益科技有限公司 数据筛选方法、装置、设备、可读存储介质以及产品
CN113051076A (zh) * 2021-03-23 2021-06-29 湖南快乐阳光互动娱乐传媒有限公司 一种请求数据处理方法和装置
CN114840562A (zh) * 2022-07-04 2022-08-02 深圳市茗格科技有限公司 业务数据的分布式缓存方法、装置、电子设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104184832A (zh) * 2014-09-10 2014-12-03 北京国双科技有限公司 网络应用中的数据提交方法及装置
CN104754424A (zh) * 2013-12-26 2015-07-01 乐视网信息技术(北京)股份有限公司 一种节点列表访问方法及装置
CN105959151A (zh) * 2016-06-22 2016-09-21 中国工商银行股份有限公司 一种高可用的流式处理系统及方法
US20180189395A1 (en) * 2014-11-11 2018-07-05 Alibaba Group Holding Limited Processing service data
CN108459917A (zh) * 2018-03-15 2018-08-28 欧普照明股份有限公司 一种消息分配部件、消息处理系统以及消息分配方法
CN109003071A (zh) * 2018-05-31 2018-12-14 阿里巴巴集团控股有限公司 支付方法、装置及设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104754424A (zh) * 2013-12-26 2015-07-01 乐视网信息技术(北京)股份有限公司 一种节点列表访问方法及装置
CN104184832A (zh) * 2014-09-10 2014-12-03 北京国双科技有限公司 网络应用中的数据提交方法及装置
US20180189395A1 (en) * 2014-11-11 2018-07-05 Alibaba Group Holding Limited Processing service data
CN105959151A (zh) * 2016-06-22 2016-09-21 中国工商银行股份有限公司 一种高可用的流式处理系统及方法
CN108459917A (zh) * 2018-03-15 2018-08-28 欧普照明股份有限公司 一种消息分配部件、消息处理系统以及消息分配方法
CN109003071A (zh) * 2018-05-31 2018-12-14 阿里巴巴集团控股有限公司 支付方法、装置及设备

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110661863A (zh) * 2019-09-20 2020-01-07 政采云有限公司 一种请求处理方法、装置及电子设备和存储介质
CN111190709A (zh) * 2019-11-19 2020-05-22 泰康保险集团股份有限公司 处理请求的方法、装置、电子设备及可读存储介质
CN111190709B (zh) * 2019-11-19 2024-04-12 泰康保险集团股份有限公司 处理请求的方法、装置、电子设备及可读存储介质
CN111010447A (zh) * 2019-12-23 2020-04-14 北京奇艺世纪科技有限公司 一种数据通信方法及装置
CN111159298A (zh) * 2019-12-31 2020-05-15 欧普照明股份有限公司 业务请求处理方法、装置、电子设备及存储介质
CN111159298B (zh) * 2019-12-31 2024-03-29 欧普照明股份有限公司 业务请求处理方法、装置、电子设备及存储介质
CN111200830B (zh) * 2020-01-02 2022-04-26 腾讯科技(深圳)有限公司 数据传输方法及装置、电子设备
CN111200830A (zh) * 2020-01-02 2020-05-26 腾讯科技(深圳)有限公司 数据传输方法及装置、电子设备
CN111222306A (zh) * 2020-01-06 2020-06-02 广州虎牙科技有限公司 数据处理方法和装置、电子设备和存储介质
CN112104569A (zh) * 2020-07-28 2020-12-18 苏宁云计算有限公司 报文数据处理方法、装置、计算机设备和存储介质
CN112559506A (zh) * 2020-12-22 2021-03-26 卫宁健康科技集团股份有限公司 健康数据处理方法、装置、处理设备及存储介质
CN112883073A (zh) * 2021-03-22 2021-06-01 北京同邦卓益科技有限公司 数据筛选方法、装置、设备、可读存储介质以及产品
CN112883073B (zh) * 2021-03-22 2024-04-05 北京同邦卓益科技有限公司 数据筛选方法、装置、设备、可读存储介质以及产品
CN113051076A (zh) * 2021-03-23 2021-06-29 湖南快乐阳光互动娱乐传媒有限公司 一种请求数据处理方法和装置
CN114840562A (zh) * 2022-07-04 2022-08-02 深圳市茗格科技有限公司 业务数据的分布式缓存方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN109815256A (zh) 一种数据处理方法、装置、电子设备和存储介质
CN106888135A (zh) 一种任务状态的查询方法和装置
CN105530272B (zh) 一种应用数据的同步方法和装置
KR101904436B1 (ko) 깨진 네트워크 연결들의 기계 학습 기반 식별
US8141151B2 (en) Non-intrusive monitoring of services in a service-oriented architecture
CN109873863B (zh) 服务的异步调用方法和装置
CN111931189B (zh) Api接口转用风险检测方法、装置和api服务系统
CN113517985B (zh) 文件数据处理方法、装置、电子设备及计算机可读介质
CN111651140B (zh) 基于工作流的服务方法及装置
CN105556918B (zh) 一种资源下载方法及电子设备
CN107315672B (zh) 用于监控服务器的方法和装置
CN107688978B (zh) 用于检测重复订单信息的方法及装置
CN109214846B (zh) 信息存储方法和装置
CN108933802B (zh) 用于监控操作的方法和装置
CN114205325A (zh) 消息发送方法、装置、服务器及存储介质
CN114819679A (zh) 一种客服会话质检方法和装置
CN114422576A (zh) 一种会话清理方法、装置、计算机设备和可读存储介质
CN111752847A (zh) 接口比对方法和微服务器、计算机可读存储介质、电子设备
CN113157911A (zh) 一种服务验证方法和装置
CN109901970B (zh) 一种视联网终端的监控方法和装置
CN115391827B (zh) 日志信息存储方法、装置、设备、计算机可读介质和产品
CN113595827B (zh) 云网络监控方法和装置、电子设备、计算机介质
CN106294403A (zh) 跨网络操作数据库的方法、系统、客户端和服务器
CN115292081A (zh) 信息发送方法、装置、电子设备、介质和计算机程序产品
CN115378882A (zh) 流数据处理方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190528

RJ01 Rejection of invention patent application after publication