CN111640027B - 业务数据的处理、业务的处理方法、装置及电子设备 - Google Patents
业务数据的处理、业务的处理方法、装置及电子设备 Download PDFInfo
- Publication number
- CN111640027B CN111640027B CN202010472102.9A CN202010472102A CN111640027B CN 111640027 B CN111640027 B CN 111640027B CN 202010472102 A CN202010472102 A CN 202010472102A CN 111640027 B CN111640027 B CN 111640027B
- Authority
- CN
- China
- Prior art keywords
- user
- operation data
- expiration time
- expired
- pipeline operation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/06—Asset management; Financial planning or analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- Technology Law (AREA)
- Human Resources & Organizations (AREA)
- Operations Research (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Strategic Management (AREA)
- Game Theory and Decision Science (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种业务数据的处理、业务的处理方法、装置及电子设备，涉及计算机的技术领域，包括：在Redis集群中获取到期时间序列，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息；基于所述到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据，本申请缓解了现有的技术时效性较差的技术问题。
Description
技术领域
本发明涉及计算机信息处理技术领域，尤其是涉及一种业务数据的处理、业务的处理方法、装置及电子设备。
背景技术
在金融风控领域，为了将风险控制在有效范围内，对用户的行为需要设置各种限制策略，例如最近两小时支付成功次数不超过3次。在金融风控系统中，类似的统计规则成千上万。在基于时间规则的风控的基本处理流程中，对事件统计的效率和事件到期的时效性要求特别高。
针对事件统计的效率和事件到期的时效性，在现有的技术方案中，可以通过以下几种方式来实现：(1)、基于扫库模式扫描到期事件；(2)、基于时序数据库处理到期事件；(3)、基于复杂事件处理系统CEP和大数据组件。
但是，基于扫库模式扫描到期事件的方式频繁扫库对数据库稳定性影响大，性能低，分布式环境下操作复杂。基于时序数据库处理到期事件的方式相比第(1)种模式效率更高，业务可根据时序获取到期的流水并触发相应的处理逻辑，扫描时需要对表加读锁，防止多重消费，消费完后再删除到期记录流水，因此该方法的流程较长，性能偏低。基于复杂事件处理系统CEP和大数据组件的方式需要自定义规则模式和事件处理逻辑，CEP系统维护成本高，动态增加规则和处理逻辑不够灵活，并发性能有限；大数据组件在维护数据时需要针对规则做不同时间段统计信息的维护，时间段交叉导致重复记录成本高。
发明内容
有鉴于此，本发明的目的在于提供一种业务数据的处理、业务的处理方法、装置及电子设备，以缓解了现有的技术时效性较差的技术问题。
第一方面，本发明实施例提供了一种业务数据的处理方法，包括：获取Redis集群中的到期时间序列，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息；基于所述到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据。
进一步地，所述方法还包括：读取所述Redis集群的到期队列中的已到期的用户流水操作数据；基于读取到的已到期的用户流水操作数据更新用户流水操作数据的统计结果，其中，更新之后的所述统计结果为未到期的用户流水操作数据的统计结果。
进一步地，所述到期时间序列存储在所述Redis集群的ZSET数据结构表中。
第二方面，本发明实施例提供了一种业务的处理方法，包括：获取用户发送的应用请求；在统计结果集群中获取用户流水操作数据的统计结果，其中，所述统计结果为基于上述第一方面中任一项所述的方法所确定出的到期队列确定的统计结果，所述到期队列中包含用户的已到期的流水操作数据；若基于所述用户流水操作的统计结果确定出所述应用请求未触发风险控制规则，则将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息。
进一步地，将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中包括：获取所述应用请求所对应的风险控制规则，其中，所述风险控制规则用于表征用户流水操作数据的有效时长；基于所述有效时长确定所述目标用户流水操作数据的到期时间信息，得到目标到期时间信息；将所述目标到期时间信息和所述目标到期时间信息的标识信息存储在所述Redis集群的到期时间序列中。
进一步地，所述到期时间序列存储在所述Redis集群的ZSET数据结构表中。
进一步地，所述方法还包括：向规则引擎发送所述目标用户流水操作数据，以使所述规则引擎通过所述目标用户流水操作数据更新所述统计结果。
进一步地，所述方法还包括：在Redis集群中获取到期时间序列；基于所述到期时间序列中的到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据。
进一步地，所述方法还包括：在所述Redis集群的到期队列中读取已到期的用户流水操作数据；基于读取到的已到期的用户流水操作数据更新所述统计结果，其中，更新之后的所述统计结果为未到期的用户流水操作数据的统计结果。
第三方面，本发明实施例提供了一种业务数据的处理装置，包括：第一获取单元，用于获取Redis集群中的到期时间序列，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息；确定单元，用于基于所述到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；转存单元，用于将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据。
第四方面，本发明实施例提供了一种业务的处理装置，包括：第二获取单元，用于获取用户发送的应用请求；第三获取单元，用于在统计结果集群中获取用户流水操作数据的统计结果，其中，所述统计结果为基于上述第一方面中任一项所述的方法所确定出的到期队列确定的统计结果，所述到期队列中包含用户的已到期的流水操作数据；存储单元，用于若基于所述用户流水操作的统计结果确定出所述应用请求未触发风险控制规则，则将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息。
第五方面，本发明实施例提供了一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述第一方面中任一项所述的方法的步骤，或者，上述第二方面中任一项所述的方法的步骤。
第六方面，本发明实施例提供了一种具有处理器可执行的非易失的程序代码的计算机可读介质，所述程序代码使所述处理器执行上述第一方面中任一项所述的方法的步骤，或者，上述第二方面中任一项所述的方法的步骤。
在本发明实施例中，首先，获取Redis集群中的到期时间序列，然后，基于所述到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；最后，将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，到期队列中包含所述用户的已到期的流水操作数据。通过上述描述可知，在本申请中，利用Redis集群记录用户操作流水数据，以及用户操作流水数据映射到其对应的到期队列的方式，使得本申请的技术方案支持百万级并发读写，且本申请能够自动高效过滤出已到期的用户流水操作数据，业务无需扫库；极大提高了风控的时效性，进而缓解了现有的技术时效性较差的技术问题。
本发明的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的一种业务数据的处理方法的流程图；
图2是根据本发明实施例的一种业务的处理方法的流程图；
图3是根据本发明实施例的另一种业务的处理方法的流程图；
图4是根据本发明实施例的一种业务数据的处理装置的示意图；
图5是根据本发明实施例的一种业务的处理装置的示意图；
图6是根据本发明实施例的一种电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例一：
根据本发明实施例，提供了一种业务数据的处理方法的实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种业务数据的处理方法的流程图，如图1所示，该方法包括如下步骤：
步骤S102，获取Redis集群中的到期时间序列，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息。
在本申请中，可以在Redis集群中设置流水扫描模块，进而，通过该流水扫描模块获取到期时间序列。其中，流水扫描模块可独立部署，也可内嵌到Redis进程中，本申请对此不做具体限定。
在本申请中，可以设置在满足预设触发条件的情况下，获取Redis集群中的到期时间序列，其中，该预设触发条件可以包括：到期时间序列中的用户流水操作数据到期时，到期时间序列的扫描时间到达时。
例如，可以设置流水扫描模块按照预设时间间隔扫描Redis中的到期时间序列，其中，预设时间间隔可以根据实际需要来进行设定。
除此之外，还可以为到期时间序列中的用户流水操作数据设置一个触发机制，例如，在到期时间序列中的用户流水操作数据到期时，生成一个触发信息，该触发信息用于触发流水扫描模块扫描Redis中的到期时间序列。
在一个可选的实施方式中，到期时间序列存储在所述Redis集群的ZSET数据结构表中。在ZSET数据结构表中，score为记录对应统计项的到期时间信息，member为key的关键字，其中，key表示用户流水操作数据的标识信息，例如，流水号等信息。
步骤S104，基于所述到期时间信息确定所述到期时间序列中已到期的用户流水操作数据。
在本申请中，流水扫描模块在对Redis中的到期时间序列进行扫描之后，扫描得到用户流水操作数据和其到期时间信息。接下来，通过到期时间信息确定用户流水操作数据中的已到期的用户流水操作数据。
步骤S106，将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据。
在本申请中，在确定出已到期的用户流水操作数据之后，就可以将其转存到所述Redis集群的到期队列LIST中。
在本发明实施例中，首先，获取Redis集群中的到期时间序列，然后，基于所述到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；最后，将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据。通过上述描述可知，在本申请中，利用Redis集群记录用户操作流水数据，以及用户操作流水数据映射到其对应的到期队列的方式，使得本申请的技术方案支持百万级并发读写，且本申请能够自动高效过滤出已到期的用户流水操作数据，业务无需扫库；极大提高了风控的时效性，进而缓解了现有的技术时效性较差的技术问题。
需要说明的是，在本申请中，可以通过流水服务设备执行上述步骤S102至步骤S106。
在本申请的一个可选的实施方式中，还可以读取所述Redis集群的到期队列中的已到期的用户流水操作数据；然后，基于读取到的已到期的用户流水操作数据更新用户流水操作数据的统计结果，其中，更新之后的所述统计结果为未到期的用户流水操作数据的统计结果。
具体地，在本申请中，业务集群可以定期向流水服务设备发送数据读取请求，以请求读取到期队列LIST中的数据。流水服务设备在获取到该读取请求之后，在到期队列LIST中读取已到期的用户流水操作数据，然后，基于读取到的已到期的用户流水操作数据更新用户流水操作数据的统计结果。例如，可以将读取到的已到期的用户流水操作数据发送到业务引擎中，以使业务引擎基于已到期的用户流水操作数据更新用户流水操作数据的统计结果。
下面举例说明上述统计结果，举例如下：
统计规则：最近两小时支付成功次数不超过3次。
从表1中可以看出，从9:00～10:30这一个半小时支付次数达到3次，在10:40支付时因触发统计规则生效，导致支付失败；11:00时9:00的支付记录到期，支付统计计数减1，因此在11:10分可继续支付成功。
也就是说，在本申请中，统计结果可以理解为：从9:00～10:30这一个半小时支付次数达到3次。或者，从9:15～11:10这段时间内支付次数达到3次。
表1
| 时间 | 操作说明 | 支付统计 | 备注 |
| 9：00 | 支付成功 | pay_cnt＝1 | |
| 9：15 | 支付成功 | pay_cnt＝2 | |
| 10：30 | 支付成功 | Pay_cnt＝3 | |
| 10：40 | 支付失败 | 支付次数超限 | |
| 11：00 | 流水到期 | Pay_cnt＝2 | 9点的支付计数取消 |
| 11:10 | 支付成功 | Pay_cnt＝3 |
如表1所示，在11:00时，9:00的用户流水操作数据已到期，此时，在统计结果中清除该用户流水操作数据的计数，例如，将统计结果：从9:00～10:30这一个半小时支付次数达到3次，更新为：从9:15～11:10这段时间内支付次数达到3次。
实施例二：
根据本发明实施例，还提供了一种业务的处理方法的实施例。
图2是根据本发明实施例的一种业务的处理方法的流程图，如图2所示，该方法包括如下步骤：
步骤S202，获取用户发送的应用请求；
步骤S204，在统计结果集群中获取用户流水操作数据的统计结果，其中，所述统计结果为基于上述实施例一中任一项所述的方法所确定出的到期队列确定的统计结果，所述到期队列中包含用户的已到期的流水操作数据；
步骤S206，若基于所述用户流水操作的统计结果确定出所述应用请求未触发风险控制规则，则将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息。
需要说明的是，在本申请中，可以通过业务集群执行上述步骤S202至步骤S206所描述的过程。
具体地，在本申请中，业务集群在获取到用户通过目标客户端发送的应用请求之后，向统计结果集群发送查询请求，统计结果集群在获取到该查询请求之后，获取用户流水操作数据的统计结果，并向业务集群返回该统计结果。业务集群在获取到该统计结果之后，判断应用请求是否触发了风险控制规则，如果是，则拒绝应用请求；否则，将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中。
在本申请中，利用Redis集群记录用户操作流水数据，以及用户操作流水数据映射到其对应的到期时间的方式，使得本申请的技术方案支持百万级并发读写，且本申请能够自动高效过滤出已到期的用户流水操作数据，业务无需扫库；极大提高了风控的时效性，进而缓解了现有的技术时效性较差的技术问题。
在一个可选的实施方式中，步骤S206，将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中包括如下过程：
步骤S2061，获取所述应用请求所对应的风险控制规则，其中，所述风险控制规则用于表征用户流水操作数据的有效时长；
步骤S2062，基于所述有效时长确定所述目标用户流水操作数据的到期时间信息，得到目标到期时间信息；
步骤S2063，将所述目标到期时间信息和所述目标到期时间信息的标识信息存储在所述Redis集群的到期时间序列中。
需要说明的是，在本申请中，例如，风险控制规则可以为最近两小时支付成功次数不超过3次，那么可以基于该风险控制规则确定出用户流水操作数据的有效时长为2个小时。此时，就可以基于该有效时长确定目标用户流水操作数据的到期时间信息，例如，如果目标用户流水操作数据的操作时间为9点，那么目标用户流水操作数据的到期时间信息为11点。
在确定出目标用户流水操作数据的到期时间信息之后，就可以将目标到期时间信息和所述目标到期时间信息的标识信息存储在所述Redis集群的到期时间序列中，其中，标识信息即为目标用户流水操作数据的流水号。
在一个可选的实施方式中，到期时间序列存储在所述Redis集群的ZSET数据结构表中。在ZSET数据结构表中，score为记录对应统计项的到期时间信息，member为key的关键字，其中，key表示用户流水操作数据的标识信息，例如，流水号等信息。
在一个可选的实施方式中，业务集群在获取到用户通过目标客户端发送的应用请求之后，向统计结果集群发送查询请求，统计结果集群在获取到该查询请求之后，获取用户流水操作数据的统计结果，并向业务集群返回该统计结果。业务集群在获取到该统计结果之后，判断应用请求是否触发了风险控制规则，如果是，则拒绝应用请求；否则，还可以向规则引擎发送所述目标用户流水操作数据，以使所述规则引擎通过所述目标用户流水操作数据更新所述统计结果。
具体地，在本申请中，规则引擎在获取到该目标用户流水操作数据之后，执行正向统计操作，其中，正向统计操作即为规则引擎按照风险控制规则，利用目标用户流水操作数据更新相应统计结果，并写入统计结果集群。例如，如上述表1所示，若用户在11:10分支付成功，则更新统计结果，即对支付统计的数据执行加1的操作，并将该统计结果写入统计结果集群中。
在一个可选的实施方式中，在本申请中，该方法还可以在Redis集群中获取到期时间序列；基于所述到期时间序列中的到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据。
具体地，在本申请中，可以在Redis集群中设置流水扫描模块，进而，通过该流水扫描模块获取到期时间序列。其中，流水扫描模块可独立部署，也可内嵌到Redis进程中，本申请对此不做具体限定。
在本申请中，可以设置流水扫描模块按照预设时间间隔扫描Redis中的到期时间序列，其中，预设时间间隔可以根据实际需要来进行设定。
除此之外，还可以为到期时间序列中的用户流水操作数据设置一个触发机制，例如，在到期时间序列中的用户流水操作数据到期时，生成一个触发信息，该触发信息用于触发流水扫描模块扫描Redis中的到期时间序列。
在一个可选的实施方式中，到期时间序列存储在所述Redis集群的ZSET数据结构表中。在ZSET数据结构表中，score为记录对应统计项的到期时间信息，member为key的关键字，其中，key表示用户流水操作数据的标识信息，例如，流水号等信息。
在本申请中，流水扫描模块在对Redis中的到期时间序列进行扫描之后，扫描得到用户流水操作数据和其到期时间信息。接下来，通过到期时间信息确定用户流水操作数据中的已到期的用户流水操作数据。
在本申请中，在确定出已到期的用户流水操作数据之后，就可以将其转存到所述Redis集群的到期队列LIST中。
在本申请的一个可选的实施方式中，还可以在所述Redis集群的到期队列中读取已到期的用户流水操作数据；然后，基于读取到的已到期的用户流水操作数据更新用户流水操作数据的统计结果，其中，更新之后的所述统计结果为未到期的用户流水操作数据的统计结果。
具体地，在本申请中，业务集群可以定期向流水服务设备发送数据读取请求，以请求读取到期队列LIST中的数据。流水服务设备在获取到该读取请求之后，在到期队列LIST中读取已到期的用户流水操作数据，然后，基于读取到的已到期的用户流水操作数据更新用户流水操作数据的统计结果。例如，可以将读取到的已到期的用户流水操作数据发送到业务引擎中，以使业务引擎基于已到期的用户流水操作数据更新用户流水操作数据的统计结果。
实施例三：
图3是根据本发明实施例的另一种业务的处理方法的流程图，如图3所示，该方法包括如下过程：
获取用户发送的应用请求；并在统计结果集群中获取用户流水操作数据的统计结果；以及判断应用请求是否触发了风险控制规则；若是，则拒绝应用请求，否则执行下述步骤；
将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中；其中，到期时间序列存储在所述Redis集群的ZSET数据结构表中。在ZSET数据结构表中，score为记录对应统计项的到期时间信息，member为key的关键字，其中，key表示用户流水操作数据的标识信息，例如，流水号等信息；
业务集群将目标用户流水操作数据发送到规则引擎，规则引擎在获取到该目标用户流水操作数据之后，执行正向统计操作；
规则引擎按照风险控制规则，利用目标用户流水操作数据更新相应统计结果，并写入统计结果集群。例如，如上述表1所示，若用户在11:10分支付成功，则更新统计结果，即对支付统计的数据执行加1的操作，并将该统计结果写入统计结果集群中；
流水扫描模块，定期和定量的扫描Redis中的到期时间序列ZSET，将已到期的记录转存到到期队列LIST中；其中，流水扫描模块可独立部署，也可内嵌到Redis进程中，本申请对此不做具体限定；
业务集群定期从Redis集群的到期队列LIST中读取已到期的用户流水操作数据，并将其发送到规则引擎，执行逆向统计操作；
规则引擎按照风险控制规则，利用已到期的用户流水操作数据更新相应统计结果，并写入统计结果集群。
通过上述描述可知，在本申请中，利用Redis集群记录用户操作流水数据，以及用户操作流水数据映射到其对应的到期队列的方式，使得本申请的技术方案支持百万级并发读写，且本申请能够自动高效过滤出已到期的用户流水操作数据，业务无需扫库；极大提高了风控的时效性，进而缓解了现有的技术时效性较差的技术问题。且本申请的技术方案中，业务可灵活调整风险控制规则，包括风险控制规则的数量和规则模式，可实时生效；且在本申请中规则引擎独立部署，且无状态，可水平扩展。
实施例四：
本发明实施例还提供了一种业务数据的处理装置，该业务数据的处理装置主要用于执行本发明实施例上述内容所提供的业务数据的处理方法，以下对本发明实施例提供的业务数据的处理装置做具体介绍。
图4是根据本发明实施例的一种业务数据的处理装置的示意图，如图4所示，该业务数据的处理装置主要包括第一获取单元41，确定单元42和转存单元43，其中：
第一获取单元41，用于获取Redis集群中的到期时间序列，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息；
确定单元42，用于基于所述到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；
转存单元43，用于将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据。
在本申请中，利用Redis集群记录用户操作流水数据，以及用户操作流水数据映射到其对应的到期队列的方式，使得本申请的技术方案支持百万级并发读写，且本申请能够自动高效过滤出已到期的用户流水操作数据，业务无需扫库；极大提高了风控的时效性，进而缓解了现有的技术时效性较差的技术问题。
可选地，该装置还用于：读取所述Redis集群的到期队列中的已到期的用户流水操作数据；基于读取到的已到期的用户流水操作数据更新用户流水操作数据的统计结果，其中，更新之后的所述统计结果为未到期的用户流水操作数据的统计结果。
可选地，所述到期时间序列存储在所述Redis集群的ZSET数据结构表中。
实施例五：
本发明实施例还提供了一种业务的处理装置，该业务的处理装置主要用于执行本发明实施例上述内容所提供的业务的处理方法，以下对本发明实施例提供的业务的处理装置做具体介绍。
图5是根据本发明实施例的一种业务的处理装置的示意图，如图5所示，该业务的处理装置主要包括第二获取单元51，第三获取单元52和存储单元53，其中：
第二获取单元51，用于获取用户发送的应用请求；
第三获取单元52，用于在统计结果集群中获取用户流水操作数据的统计结果，其中，所述统计结果为基于上述实施例一中任一项所述的方法所确定出的到期队列确定的统计结果，所述到期队列中包含用户的已到期的流水操作数据；
存储单元53，用于若基于所述用户流水操作的统计结果确定出所述应用请求未触发风险控制规则，则将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息。
在本申请中，利用Redis集群记录用户操作流水数据，以及用户操作流水数据映射到其对应的到期队列的方式，使得本申请的技术方案支持百万级并发读写，且本申请能够自动高效过滤出已到期的用户流水操作数据，业务无需扫库；极大提高了风控的时效性，进而缓解了现有的技术时效性较差的技术问题。
可选地，存储单元用于：获取所述应用请求所对应的风险控制规则，其中，所述风险控制规则用于表征用户流水操作数据的有效时长；基于所述有效时长确定所述目标用户流水操作数据的到期时间信息，得到目标到期时间信息；将所述目标到期时间信息和所述目标到期时间信息的标识信息存储在所述Redis集群的到期时间序列中。
可选地，所述到期时间序列存储在所述Redis集群的ZSET数据结构表中。
可选地，该装置还用于：向规则引擎发送所述目标用户流水操作数据，以使所述规则引擎通过所述目标用户流水操作数据更新所述统计结果。
可选地，该装置还用于：在Redis集群中获取到期时间序列；基于所述到期时间序列中的到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据。
可选地，该装置还用于：在所述Redis集群的到期队列中读取已到期的用户流水操作数据；基于读取到的已到期的用户流水操作数据更新所述统计结果，其中，更新之后的所述统计结果为未到期的用户流水操作数据的统计结果。
本发明实施例所提供的装置，其实现原理及产生的技术效果和前述方法实施例相同，为简要描述，装置实施例部分未提及之处，可参考前述方法实施例中相应内容。
实施例六：
参见图6，本发明实施例还提供一种电子设备100，包括：处理器60，存储器61，总线62和通信接口63，所述处理器60、通信接口63和存储器61通过总线62连接；处理器60用于执行存储器61中存储的可执行模块，例如计算机程序。
其中，存储器61可能包含高速随机存取存储器(RAM，Random Access Memory)，也可能还包括非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器。通过至少一个通信接口63(可以是有线或者无线)实现该系统网元与至少一个其他网元之间的通信连接，可以使用互联网，广域网，本地网，城域网等。
总线62可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图6中仅用一个双向箭头表示，但并不表示仅有一根总线或一种类型的总线。
其中，存储器61用于存储程序，所述处理器60在接收到执行指令后，执行所述程序，前述本发明实施例任一实施例揭示的流过程定义的装置所执行的方法可以应用于处理器60中，或者由处理器60实现。
处理器60可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器60中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器60可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(Digital SignalProcessing，简称DSP)、专用集成电路(Application Specific Integrated Circuit，简称ASIC)、现成可编程门阵列(Field-Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器61，处理器60读取存储器61中的信息，结合其硬件完成上述方法的步骤。
另外，在本发明实施例的描述中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。
在本发明的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。
Claims (12)
1.一种业务数据的处理方法，其特征在于，包括：
获取Redis集群中的到期时间序列，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息；
基于所述到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；
将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据；
所述方法还包括：
读取所述Redis集群的到期队列中的已到期的用户流水操作数据；
基于读取到的已到期的用户流水操作数据更新用户流水操作数据的统计结果，其中，更新之后的所述统计结果为未到期的用户流水操作数据的统计结果；
所述方法还包括：
获取通过目标客户端发送的应用请求，并向统计结果集群发送查询请求；其中，所述统计结果集群在获取到所述查询请求后，获取基于所述到期队列而确定的用户流水操作数据的统计结果，并传输所述统计结果；
获取所述统计结果，并判断所述应用请求是否触发风险控制规则；如果是，则拒绝所述应用请求；否则，向规则引擎发送所述应用请求所对应的目标用户流水操作数据，以使所述规则引擎通过所述目标用户流水操作数据更新所述统计结果。
2.根据权利要求1所述的方法，其特征在于，所述到期时间序列存储在所述Redis集群的ZSET数据结构表中。
3.一种业务的处理方法，其特征在于，包括：
获取用户发送的应用请求；
在统计结果集群中获取用户流水操作数据的统计结果，其中，所述统计结果为基于上述权利要求1至2中任一项所述的方法所确定出的到期队列而确定的统计结果，所述到期队列中包含用户的已到期的流水操作数据；
若基于所述用户流水操作的统计结果确定出所述应用请求未触发风险控制规则，则将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息。
4.根据权利要求3所述的方法，其特征在于，将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中包括：
获取所述应用请求所对应的风险控制规则，其中，所述风险控制规则用于表征用户流水操作数据的有效时长；
基于所述有效时长确定所述目标用户流水操作数据的到期时间信息，得到目标到期时间信息；
将所述目标到期时间信息和所述目标到期时间信息的标识信息存储在所述Redis集群的到期时间序列中。
5.根据权利要求4所述的方法，其特征在于，所述到期时间序列存储在所述Redis集群的ZSET数据结构表中。
6.根据权利要求3所述的方法，其特征在于，所述方法还包括：
向规则引擎发送所述目标用户流水操作数据，以使所述规则引擎通过所述目标用户流水操作数据更新所述统计结果。
7.根据权利要求3所述的方法，其特征在于，所述方法还包括：
在Redis集群中获取到期时间序列；
基于所述到期时间序列中的到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；
将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据。
8.根据权利要求7所述的方法，其特征在于，所述方法还包括：
在所述Redis集群的到期队列中读取已到期的用户流水操作数据；
基于读取到的已到期的用户流水操作数据更新所述统计结果，其中，更新之后的所述统计结果为未到期的用户流水操作数据的统计结果。
9.一种业务数据的处理装置，其特征在于，包括：
第一获取单元，用于获取Redis集群中的到期时间序列，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息；
确定单元，用于基于所述到期时间信息确定所述到期时间序列中已到期的用户流水操作数据；
转存单元，用于将所述已到期的用户流水操作数据转存到所述Redis集群的到期队列中，其中，所述到期队列中包含所述用户的已到期的流水操作数据；
该装置还用于：读取所述Redis集群的到期队列中的已到期的用户流水操作数据；基于读取到的已到期的用户流水操作数据更新用户流水操作数据的统计结果，其中，更新之后的所述统计结果为未到期的用户流水操作数据的统计结果；
所述第一获取单元还用于：
获取通过目标客户端发送的应用请求，并向统计结果集群发送查询请求；其中，所述统计结果集群在获取到所述查询请求后，获取基于所述到期队列而确定的用户流水操作数据的统计结果，并传输所述统计结果；获取所述统计结果，并判断所述应用请求是否触发风险控制规则；如果是，则拒绝所述应用请求；否则，向规则引擎发送所述应用请求所对应的目标用户流水操作数据，以使所述规则引擎通过所述目标用户流水操作数据更新所述统计结果。
10.一种业务的处理装置，其特征在于，包括：
第二获取单元，用于获取用户发送的应用请求；
第三获取单元，用于在统计结果集群中获取用户流水操作数据的统计结果，其中，所述统计结果为基于上述权利要求1至2中任一项所述的方法所确定出的到期队列确定的统计结果，所述到期队列中包含用户的已到期的流水操作数据；
存储单元，用于若基于所述用户流水操作的统计结果确定出所述应用请求未触发风险控制规则，则将所述应用请求所对应的目标用户流水操作数据存储在Redis集群的到期时间序列中，其中，所述到期时间序列包括：用户流水操作数据和用户流水操作数据的到期时间信息。
11.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现上述权利要求1至2中任一项所述的方法的步骤，或者，上述权利要求3至8中任一项所述的方法的步骤。
12.一种具有处理器可执行的非易失的程序代码的计算机可读介质，其特征在于，所述程序代码使所述处理器执行上述权利要求1至2中任一项所述的方法的步骤，或者，上述权利要求3至8中任一项所述的方法的步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010472102.9A CN111640027B (zh) | 2020-05-28 | 2020-05-28 | 业务数据的处理、业务的处理方法、装置及电子设备 |
| PCT/CN2021/082782 WO2021238369A1 (zh) | 2020-05-28 | 2021-03-24 | 业务数据处理方法及装置、业务处理方法及装置以及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010472102.9A CN111640027B (zh) | 2020-05-28 | 2020-05-28 | 业务数据的处理、业务的处理方法、装置及电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111640027A CN111640027A (zh) | 2020-09-08 |
| CN111640027B true CN111640027B (zh) | 2023-09-12 |
Family
ID=72332384
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010472102.9A Active CN111640027B (zh) | 2020-05-28 | 2020-05-28 | 业务数据的处理、业务的处理方法、装置及电子设备 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN111640027B (zh) |
| WO (1) | WO2021238369A1 (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111640027B (zh) * | 2020-05-28 | 2023-09-12 | 北京金山云网络技术有限公司 | 业务数据的处理、业务的处理方法、装置及电子设备 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2010121398A1 (en) * | 2009-04-24 | 2010-10-28 | Telefonaktiebolaget L M Ericsson (Publ) | A method and a system for providing mbms counting |
| US9590885B1 (en) * | 2013-03-13 | 2017-03-07 | Sprint Communications Company L.P. | System and method of calculating and reporting of messages expiring from a queue |
| CN108108416A (zh) * | 2017-12-14 | 2018-06-01 | 上海斐讯数据通信技术有限公司 | redis数据过期处理的方法和装置 |
| CN109241128A (zh) * | 2018-07-16 | 2019-01-18 | 北京百度网讯科技有限公司 | 一种过期事件自动触发方法及系统 |
| CN110033171A (zh) * | 2019-03-19 | 2019-07-19 | 阿里巴巴集团控股有限公司 | 一种识别金融企业风险的方法、系统平台和介质 |
| CN110543486A (zh) * | 2019-08-28 | 2019-12-06 | 北京奇艺世纪科技有限公司 | 数据变更方法、装置及服务器 |
| CN110636130A (zh) * | 2019-09-23 | 2019-12-31 | 上海钧正网络科技有限公司 | 延时消息处理方法、装置、计算机设备和存储介质 |
| CN110827094A (zh) * | 2019-11-15 | 2020-02-21 | 湖南快乐阳光互动娱乐传媒有限公司 | 广告投放的反作弊方法及系统 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8595268B2 (en) * | 2010-09-28 | 2013-11-26 | Garantia Data Ltd. | System, methods, and media for compressing non-relational database objects |
| US20160063436A1 (en) * | 2014-08-29 | 2016-03-03 | Peter Andrew Coles | Optimal bundling of routes in a courier marketplace |
| CN111640027B (zh) * | 2020-05-28 | 2023-09-12 | 北京金山云网络技术有限公司 | 业务数据的处理、业务的处理方法、装置及电子设备 |
-
2020
- 2020-05-28 CN CN202010472102.9A patent/CN111640027B/zh active Active
-
2021
- 2021-03-24 WO PCT/CN2021/082782 patent/WO2021238369A1/zh active Application Filing
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2010121398A1 (en) * | 2009-04-24 | 2010-10-28 | Telefonaktiebolaget L M Ericsson (Publ) | A method and a system for providing mbms counting |
| US9590885B1 (en) * | 2013-03-13 | 2017-03-07 | Sprint Communications Company L.P. | System and method of calculating and reporting of messages expiring from a queue |
| CN108108416A (zh) * | 2017-12-14 | 2018-06-01 | 上海斐讯数据通信技术有限公司 | redis数据过期处理的方法和装置 |
| CN109241128A (zh) * | 2018-07-16 | 2019-01-18 | 北京百度网讯科技有限公司 | 一种过期事件自动触发方法及系统 |
| CN110033171A (zh) * | 2019-03-19 | 2019-07-19 | 阿里巴巴集团控股有限公司 | 一种识别金融企业风险的方法、系统平台和介质 |
| CN110543486A (zh) * | 2019-08-28 | 2019-12-06 | 北京奇艺世纪科技有限公司 | 数据变更方法、装置及服务器 |
| CN110636130A (zh) * | 2019-09-23 | 2019-12-31 | 上海钧正网络科技有限公司 | 延时消息处理方法、装置、计算机设备和存储介质 |
| CN110827094A (zh) * | 2019-11-15 | 2020-02-21 | 湖南快乐阳光互动娱乐传媒有限公司 | 广告投放的反作弊方法及系统 |
Non-Patent Citations (1)
| Title |
|---|
| 基于规则引擎及智能阈值的实时业务风控系统;张鲁男;常宝岗;梅利;;通信技术(第11期);146-150 * |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2021238369A1 (zh) | 2021-12-02 |
| CN111640027A (zh) | 2020-09-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110830581B (zh) | 提升区块链响应速度的方法、区块链应用系统及相关设备 | |
| CN111090663B (zh) | 事务并发控制方法、装置、终端设备及介质 | |
| CN108829782B (zh) | 数据表清理方法、服务器及计算机可读存储介质 | |
| CN111640027B (zh) | 业务数据的处理、业务的处理方法、装置及电子设备 | |
| CN110781372B (zh) | 一种优化网站的方法、装置、计算机设备及存储介质 | |
| CN111767327B (zh) | 数据流间具有依赖关系的数据仓库构建方法与系统 | |
| CN104077082A (zh) | 网络投票数据存储方法和装置 | |
| CN108319694B (zh) | 一种历史数据的自动清理方法及装置 | |
| CN112084201B (zh) | 分布式账本处理方法和装置、存储介质和电子设备 | |
| CN112241474A (zh) | 信息处理方法、装置和存储介质 | |
| CN107295059A (zh) | 业务推送量的统计系统及方法 | |
| CN105550347B (zh) | 数据处理方法及装置 | |
| CN114265845A (zh) | 一种延时任务的处理方法、装置和电子设备 | |
| CN114638689A (zh) | 一种信用信息生成方法、装置、系统和电子设备 | |
| JP2018005300A (ja) | データベース管理装置、データベース管理方法、およびデータベース管理プログラム | |
| JP6325728B2 (ja) | データベース管理装置、データベース管理方法、およびデータベース管理プログラム | |
| CN106294090A (zh) | 一种数据统计方法和装置 | |
| CN111428928A (zh) | 路径规划方法、装置、介质及计算机设备 | |
| CN105359180B (zh) | 有效性控制系统、终端设备和方法 | |
| CN113810414B (zh) | 移动客户端域名过滤方法、装置、电子设备及存储介质 | |
| CN110648208B (zh) | 群组识别方法、装置和电子设备 | |
| CN110602737B (zh) | 区域性拆迁识别方法、装置、计算机设备及存储介质 | |
| CN116893981A (zh) | 存储器的操作方法、装置、存储介质及电子装置 | |
| CN117078299A (zh) | 商户位置的确定方法、装置、电子设备及存储介质 | |
| CN117171155A (zh) | 数据清理方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |