CN109669773B - 金融数据处理方法、装置、设备和存储介质 - Google Patents
金融数据处理方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN109669773B CN109669773B CN201811342371.2A CN201811342371A CN109669773B CN 109669773 B CN109669773 B CN 109669773B CN 201811342371 A CN201811342371 A CN 201811342371A CN 109669773 B CN109669773 B CN 109669773B
- Authority
- CN
- China
- Prior art keywords
- processing
- financial data
- preset
- processor
- utilization rate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 29
- 238000003860 storage Methods 0.000 title claims abstract description 23
- 238000012545 processing Methods 0.000 claims abstract description 475
- 238000000034 method Methods 0.000 claims description 26
- 238000004806 packaging method and process Methods 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 9
- 238000004364 calculation method Methods 0.000 claims description 7
- 230000000875 corresponding effect Effects 0.000 description 55
- 238000004891 communication Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000002360 explosive Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000005096 rolling process Methods 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
- G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
- G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/50—Indexing scheme relating to G06F9/50
- G06F2209/5011—Pool
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/50—Indexing scheme relating to G06F9/50
- G06F2209/5017—Task decomposition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/50—Indexing scheme relating to G06F9/50
- G06F2209/5018—Thread allocation
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种金融数据处理方法，包括以下步骤：接收金融数据处理请求，获取所述金融数据处理请求对应的处理事项和待处理的金融数据集合；获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率；在所述处理资源利用率小于预设利用率阈值时，将所述处理事项和所述金融数据集合进行划分并组合，生成处理子任务；通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果。本发明还公开了一种金融数据处理装置、设备和存储介质。本发明中根据处理器的状态参数确定处理方式，通过提高处理器的处理资源利用率，来提高金融数据处理效率。
Description
技术领域
本发明涉及数据处理领域，尤其涉及金融数据处理方法、装置、设备和存储介质。
背景技术
随着社会的发展，金融行业日益发展，金融数据爆炸式增长，金融数据的数据处理量也越来越大。
为了加快金融数据处理，当前金融数据处理通常设置多台服务器，采用分布式数据处理方式，即，在接收到客户端请求时，通过一台中间服务器来给客服端分配目标服务器，进行金融数据处理，但是，这样的金融数据处理方法，单个服务器并没有被充分利用，并不可以保证金融数据的处理效率。
发明内容
本发明的主要目的在于提供一种金融数据处理方法、装置、设备和存储介质，旨在通过提高处理器的处理资源利用率，来提高金融数据处理效率。
为实现上述目的，本发明提供金融数据处理方法，所述金融数据处理方法包括以下步骤：
接收金融数据处理请求，获取所述金融数据处理请求对应的处理事项和待处理的金融数据集合；
获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率；
在所述处理资源利用率小于预设利用率阈值时，将所述处理事项和所述金融数据集合进行划分并组合，生成处理子任务；
通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果。
可选地，所述获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率的步骤，包括：
获取预设处理器的当前状态参数，并查询预设状态参数表，获取所述当前状态参数对应的最大状态参数；
将所述当前状态参数与对应的所述最大状态参数进行比值运算，得到所述预设处理器的状态比值；
在所述状态比值的数量为至少两个时，将各所述状态比值进行加权平均，得到所述预设处理器当前的处理资源利用率。
可选地，所述在所述处理资源利用率小于预设利用率阈值时，将所述处理事项和所述金融数据集合进行划分并组合，生成处理子任务的步骤，包括：
在所述处理资源利用率小于预设利用率阈值时，对所述处理事项进行划分形成对应的处理步骤，并将所述金融数据集合中的金融数据进行划分，得到金融数据子集合；
将所述金融数据子集合和对应的所述处理步骤进行封装，形成处理子任务。
可选地，所述通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果的步骤，包括：
获取每一个线程的当前任务，按所述每一个线程的当前任务进行划分各所述处理子任务，使得每一个线程处理的任务均衡；
获取每一个线程处理的处理子结果，将所述处理子结果进行汇总形成处理结果。
可选地，所述接收金融数据处理请求，获取所述金融数据处理请求对应的处理事项和待处理的金融数据集合的步骤之后，包括：
获取所述金融数据集合中金融数据的数据量，将所述数据量与所述预设处理阈值进行比较；
在所述数据量超过所述预设处理阈值时，获取所述处理事项对应的处理时间；
在所述处理时间大于预设处理时间时，执行获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率的步骤。
可选地，所述获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率的步骤之后，包括：
在所述处理资源利用率大于或等于预设利用率阈值时，将所述处理事项和所述金融数据集合封装形成处理任务；
获取每一个线程的当前任务，并按所述当前任务计算对应线程的处理时间；
将所述处理任务划分至处理时间最短的目标线程，并执行所述目标线程得到处理结果。
可选地，所述通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果的步骤之后，包括：
在接收到所述处理结果时，将所述处理结果与预设标准处理结果进行比对；
在所述处理结果与预设标准处理结果匹配时，将所述处理结果与所述金融数据处理请求对应的处理事项和金融数据集合进行关联保存，以供用户查询；
在所述处理结果与预设标准处理结果不匹配时，将进行数据回滚。
此外，为实现上述目的，本发明还提供一种金融数据处理装置，所述金融数据处理装置包括：
请求接收模块，用于接收金融数据处理请求，获取所述金融数据处理请求对应的处理事项和待处理的金融数据集合；
利用率计算模块，用于获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率；
任务划分模块，用于在所述处理资源利用率小于预设利用率阈值时，将所述处理事项和所述金融数据集合进行划分并组合，生成处理子任务；
任务执行模块，用于通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果。
此外，为实现上述目的，本发明还提供一种金融数据处理设备；
所述金融数据处理设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中：
所述计算机程序被所述处理器执行时实现如上所述的金融数据处理方法的步骤。
此外，为实现上述目的，本发明还提供计算机存储介质；
所述计算机存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上述的金融数据处理方法的步骤。
本发明实施例提出的一种金融数据处理方法、装置、设备和存储介质，服务器接收金融数据处理请求，获取所述金融数据处理请求对应的处理事项和待处理的金融数据集合；获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率；在所述处理资源利用率小于预设利用率阈值时，将所述处理事项和所述金融数据集合进行划分并组合，生成处理子任务；通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果。本发明中在接收到金融数据处理请求时，获取金融数据处理请求对应的金融数据集合，然后，服务器获取处理器的状态参数，并根据处理器的状态参数，判断是否对金融数据集合中的金融数据进行划分处理，若需要对金融数据集合中的金融数据进行划分，则将金融数据集合中的金融数据进行划分，生成处理子任务，通过预设处理器执行各所述处理子任务，以充分利用服务器中处理器的处理资源，提高处理器的处理资源利用率，提高金融数据处理效率。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的装置结构示意图；
图2为本发明金融数据处理方法第一实施例的流程示意图；
图3为本发明金融数据处理装置一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，图1是本发明实施例方案涉及的硬件运行环境的服务器(又叫金融数据处理设备，其中，金融数据处理设备可以是由单独的金融数据处理装置构成，也可以是由其他装置与金融数据处理装置组合形成)结构示意图。
本发明实施例服务器指一个管理资源并为用户提供服务的计算机，通常分为文件服务器、数据库服务器和应用程序服务器。运行以上软件的计算机或计算机系统也被称为服务器。相对于普通PC(personal computer)个人计算机来说，服务器在稳定性、安全性、性能等方面都要求较高；如图1所示，该服务器可以包括：处理器1001，例如中央处理器(Central Processing Unit，CPU)，网络接口1004，用户接口1003，存储器1005，通信总线1002、芯片组、磁盘系统、网络等硬件等。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真WIreless-FIdelity，WIFI接口)。存储器1005可以是高速随机存取存储器(random access memory，RAM)，也可以是稳定的存储器(non-volatilememory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地，服务器还可以包括摄像头、RF(Radio Frequency，射频)电路，传感器、音频电路、WiFi模块；输入单元，比显示屏，触摸屏；网络接口可选除无线接口中除WiFi外，蓝牙、探针等。本领域技术人员可以理解，图1中示出的服务器结构并不构成对服务器的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，该计算机软件产品存储在一个存储介质(存储介质：又叫计算机存储介质、计算机介质、可读介质、可读存储介质、计算机可读存储介质或者直接叫介质等，存储介质可以是非易失性可读存储介质，如RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及计算机程序。
在图1所示的服务器中，网络接口1004主要用于连接后台数据库，与后台数据库进行数据通信；用户接口1003主要用于连接客户端(客户端，又叫用户端或终端，本发明实施例终端可以固定终端也可以是移动终端，如，带联网功能的智能空调、智能电灯、智能电源、智能音箱、自动驾驶汽车、PC、智能手机、平板电脑、电子书阅读器、便携计算机等，终端中包含传感器比如光传感器、运动传感器以及其他传感器，在此不再赘述)，与客户端进行数据通信；而处理器1001可以用于调用存储器1005中存储的计算机程序，并执行本发明以下实施例提供的金融数据处理方法中的步骤。
本实施例提出一种金融数据处理方法。
本实施例中的金融数据处理方法，应用于如图1所示的服务器。
参照图2，本发明金融数据处理方法的第一实施例中，所述金融数据处理方法包括：
步骤S10，接收金融数据处理请求，获取所述金融数据处理请求对应的处理事项和待处理的金融数据集合。
服务器接收金融数据处理请求，其中，金融数据处理请求可以通过不同的方式触发，例如，用户在终端屏幕上点击“处理”按键，触发金融数据处理请求；或者用户通过终端发送语音指令，触发金融数据处理请求，终端将金融数据处理请求发送至服务器，服务器接收金融数据处理请求，并获取金融数据处理请求对应的处理事项和待处理的金融数据集合；其中，发明中的处理事项包括处理步骤、处理时间等；金融数据集合中可以包含不同类型的金融数据，例如，信贷数据、金融业务数据；金融数据集合中还可以包含同一类型的一个或者多个金融数据，例如，不同客户的信贷数据。
步骤S20，获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率。
在服务器获取到处理事项和待处理的金融数据集合之后，服务器获取预设处理器的当前状态参数，以根据当前状态参数确定金融数据的处理方式，即，服务器确定用户金融数据处理的预设处理器，本发明中的处理器可以是一个或者多个，为了方便理解，本实施了中以一个处理器为例进行说明，服务器获取处理器的性能参数(性能参数包括内核结构(例如，cpu核心数)，主频，外频，倍频，接口，缓存，多媒体指令集，制造工艺，电压，封装形式，整数单元和浮点单元等)和性能参数对应的当前状态参数(当前状态参数包括：处理器当前工作温度、处理器当时使用效率等)，服务器根据获取的当前状态参数，计算处理器的处理资源利用率(处理资源利用率是指处理器的实际资源使用量与处理器资源总量的比值)。
即，服务器查询预设状态参数表(预设状态参数表中预先设置了性能参数与状态参数对应关系)，服务器获取预设状态参数表中各所述性能参数对应的最大状态参数，然后，服务器将所述最大状态参数与所述当前状态参数进行比值运算，得到所述处理器的处理资源利用率。
需要说明的是，在当前状态参数的数量不止一个时，本实施例中步骤S20,包括：
步骤a1，获取预设处理器的当前状态参数，并查询预设状态参数表，获取所述当前状态参数对应的最大状态参数；
步骤b1，将所述当前状态参数与对应的所述最大状态参数进行比值运算，得到所述预设处理器的状态比值；
步骤c1，在所述状态比值的数量为至少两个时，将各所述状态比值进行加权平均，得到所述预设处理器当前的处理资源利用率。
即，服务器获取预设处理器的当前状态参数，并查询预设状态参数表，服务器获取预设状态参数表中各个当前状态参数对应的最大状态参数；然后，服务器将当前状态参数与各自的最大状态参数进行比值运算，得到预设处理器的状态比值，在所述状态比值的数量为至少两个时，服务器将各所述状态比值进行加权平均，得到所述预设处理器当前的处理资源利用率。
例如，服务器获取的当前状态参数中核心数8核主频1GHZ的cpu使用率60％，cpu温度65摄氏度，服务器查询预设状态参数表，获取到核心数8核主频1GHZ的cpu最大使用率90％，cpu温度最高温度为85摄氏度，服务器将所述当前状态参数与对应的所述最大状态参数进行比值运算，得到预设处理器的状态比值，然后，服务器将各所述状态比值进行加权平均，得到所述预设处理器当前的处理资源利用率，例如，预设处理器的处理资源利用率＝(权重70％×使用率60％/cpu使用率90％+权重30％温度65摄氏度/cpu温度85摄氏度。其中，本实施例的中各个状态比值对应权重可以根据具体场景灵活设置。
步骤S30，在所述处理资源利用率小于预设利用率阈值时，将所述处理事项和所述金融数据集合进行划分并组合，生成处理子任务。
在得到处理资源利用率之后，服务器将处理资源利用率与预设利用率阈值进行比较，其中，预设利用率阈值是指预先设置的处理器最佳状态下的处理资源利用率，如，将预利用率阈值可以设置为80％；在所述处理资源利用率小于预设利用率阈值时，即，服务器确定当前处理器的资源利用率还可以进行提高，服务器可以对金融数据集合中的金融数据进行划分，以进行多线程并行处理，具体地：
步骤a2，在所述处理资源利用率小于预设利用率阈值时，对所述处理事项进行划分形成对应的处理步骤，并将所述金融数据集合中的金融数据进行划分，得到金融数据子集合；
步骤b2，将所述金融数据子集合和对应的所述处理步骤进行封装，形成处理子任务。
即，在所述处理器的处理资源利用率大于或等于预设利用率阈值，服务器判定处理器的处理资源利用率偏高，服务器不对处理事项和金融数据集合进行任务划分，直接对金融数据集合中的金融数据进行整体处理。
在所述处理器的处理资源利用率小于预设利用率阈值时，即，服务器判定处理器的处理资源利用率偏低，服务器可以通过增加处理器的资源处理率，来提高处理效率，具体地，服务器主动增加处理器的线程数量，使处理器的上运行较大数量的线程，以增加处理器的资源处理率。
即，服务器将处理事项进行划分形成对应的处理步骤，并将所述金融数据集合中的金融数据进行划分，得到金融数据子集合，然后，服务器将金融数据子集合和对应的所述处理步骤进行封装，形成处理子任务，并将处理子任务划分为多个线程，并行地对处理子任务进行处理。
需要补充说明的是，本实施例中服务器划分处理事项和将金融数据集合时，还涉及到划分的合理性问题，即，本实施例中将处理事项和所述金融数据集合进行划分并组合，得到处理子任务，服务器根据处理子任务的任务处理时间来判断划分是否合理，即，服务器则将处理子任务对应的任务处理时间与标准处理时间进行比较；若处理子任务对应的任务处理时间小于等于标准处理时间，即，服务器确定处理子任务划分合理，则不对处理子任务进行继续的任务划分，直接创建线程处理处理子任务。若处理子任务对应的任务处理时间大于标准处理时间，则服务器确定处理子任务划分不合理，服务器还可以将该处理子任务进行继续的划分，以充分利用处理器的线程。
步骤S40，通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果。
通过预设处理器执行各所述处理子任务，即，服务器根据处理子任务的数量，对处理器多线程执行过程中的线程池大小进行配置；并根据配置的线程池大小来创建线程池，其中，在线程池中创建处理线程并且对新线程上下文环境进行初始化；以利用多个线程并行地处理，各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果。
需要补充说明的是，服务器还设置有对处理子任务进行任务调度和多线程管理组合的主线程，以多实现线程处理更加灵活，具体地：
步骤a3，获取每一个线程的当前任务，按所述每一个线程的当前任务进行划分各所述处理子任务，使得每一个线程处理的任务均衡；
步骤b3，获取每一个线程处理的处理子结果，将所述处理子结果进行汇总形成处理结果。
即，预设处理器的主线程获取每一个线程的当前任务，按所述每一个线程的当前任务进行划分各所述处理子任务，例如，当前的线程数量为4个，其中一个为主线程，另外3个为执行处理子结果的子线程，3个子线程对应的第一线程队列中包含4个任务、第二线程队列中包含10个任务和第三线程队列中包含6个任务，当前处理子任务的数量为25个，主线程为第一线程队列划分11个处理子任务，主线程为第二线程队列划分5个处理子任务；主线程为第三线程队列划分9个处理子任务，使得每一个线程处理的任务均衡；最后，服务器获取每一个线程处理的处理子结果，将所述处理子结果进行汇总形成处理结果。
在本实施例中在接收到金融数据处理请求时，获取金融数据处理请求对应的金融数据集合，然后，服务器获取处理器的状态参数，并根据处理器的状态参数，判断是否对金融数据集合中的金融数据进行划分处理，若需要对金融数据集合中的金融数据进行划分，则将金融数据集合中的金融数据进行划分，生成处理子任务，通过预设处理器执行各所述处理子任务，以充分利用服务器中处理器的处理资源，提高处理器的处理资源利用率，提高金融数据处理效率。
进一步地，在本发明第一实施例的基础上，提出了本发明金融数据处理方法的第二实施例。
本实施例是第一实施例中步骤S10之后的步骤，所述金融数据处理方法包括：
步骤S50，获取所述金融数据集合中金融数据的数据量，将所述数据量与所述预设处理阈值进行比较。
服务器获取所述金融数据集合中包含的金融数据的数据量，然后，服务器将数据量与预设处理阈值进行比较，其中，预设处理阈值是指预先设置的金融数据的数据量临界值。
在金融数据的数据量不超过所述预设处理阈值时，即，金融数据较少，则不对金融数据集合中的金融数据进行划分，而将金融数据集合中的金融数据作为一个整体进行金融数据处理。
步骤S60，在所述数据量超过所述预设处理阈值时，获取所述处理事项对应的处理时间。
在所述数据量超过所述预设处理阈值时，即，服务器确定待处理的金融数据的数据量较大，然后，服务器获取所述处理事项对应的处理时间，服务器将处理时间与预设处理时间(预设处理时间是指预先设置的出处理时间最大值)进行比较。
步骤S70，在所述处理时间大于预设处理时间时，执行获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率的步骤。
在所述处理时间大于预设处理时间时，即，服务器确定金融数据处理请求对应的处理时间较长，服务器执行第一实施例中步骤S20：获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率。
在本实施例中服务器获取金融数据处理请求对应的金融数据集合，及金融数据集合中金融数据的数据量，根据金融数据的数据量，判断是否对金融数据集合中的金融数据划分，在金融数据的数据量较大时，服务去需要对金融数据集合中的金融数据进行划分处理，使得金融数据处理更加智能。
进一步地，在上述实施例的基础上，提出了本发明金融数据处理方法的第三实施例。
本实施例是第一实施例中步骤S20之后的步骤，即，在处理器的处理资源利用率大于或等于预设利用率阈值时，所述金融数据处理方法，包括：
步骤S80，在所述处理资源利用率大于或等于预设利用率阈值时，将所述处理事项和所述金融数据集合封装形成处理任务。
在所述处理资源利用率大于或等于预设利用率阈值时，即，处理器当前的处理资源利用率较高，不对金融数据进行划分，而直接将所述处理事项和所述金融数据集合封装形成处理任务。
步骤S90，获取每一个线程的当前任务，并按所述当前任务计算对应线程的处理时间。
服务器获取每一个线程的当前任务，即，本实施例中的处理器存在多个线程，但是处理器当前的处理资源利用率较高，服务器不进行任务划分，服务器按所述当前任务计算对应线程的处理时间，以将处理任务划分至处理时间最短的目标线程进行处理。
步骤S100，将所述处理任务划分至处理时间最短的目标线程，并执行所述目标线程得到处理结果。
在本实施例中在不进行任务划分时，服务器将所述处理任务划分至处理时间最短的目标线程，并执行所述目标线程得到处理结果，以防止金融数据处理滞后的问题。
进一步地，在上述实施例的基础上，本发明金融数据处理方法的第四实施例，本实施例可以以上述实施例中的一个或者多个结合，在本实施例中所述金融数据处理方法包括：
步骤S110，在接收到所述处理结果时，将所述处理结果与预设标准处理结果进行比对；
在金融数据处理请求执行完成后，得到金融数据处理请求对应的处理结果，服务器接收到所述处理结果，服务器将所述处理结果与预设标准处理结果进行比对，以判断金融数据处理请求是否正确，其中，预设标准处理结果是指预先设置的金融数据标准处理结果。
步骤S120，在所述处理结果与预设标准处理结果匹配时，将所述处理结果与所述金融数据处理请求对应的处理事项和金融数据集合进行关联保存，以供用户查询；
在所述处理结果与预设标准处理结果匹配时，即，金融数据处理正确，服务器将所述处理结果与所述金融数据处理请求对应的处理事项和金融数据集合进行关联保存，以供用户查询。
步骤S130，在所述处理结果与预设标准处理结果不匹配时，将进行数据回滚。
在所述处理结果与预设标准处理结果不匹配时，服务器可以控制数据回滚，在本实施例中将处理结果进行关联保存，可以方便查询，此外，若出现数据处理异常时，还可以进行数据回滚，保证数据的安全性。
此外，参照图3，本发明实施例还提出一种金融数据处理装置，所述金融数据处理装置包括：
请求接收模块10，用于接收金融数据处理请求，获取所述金融数据处理请求对应的处理事项和待处理的金融数据集合；
利用率计算模块20，用于获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率；
任务划分模块30，用于在所述处理资源利用率小于预设利用率阈值时，将所述处理事项和所述金融数据集合进行划分并组合，生成处理子任务；
任务执行模块40，用于通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果。
可选地，所述利用率计算模块20，包括：
获取单元，用于获取预设处理器的当前状态参数，并查询预设状态参数表，获取所述当前状态参数对应的最大状态参数；
比值计算单元，用于将所述当前状态参数与对应的所述最大状态参数进行比值运算，得到所述预设处理器的状态比值；
加权计算单元，用于在所述状态比值的数量为至少两个时，将各所述状态比值进行加权平均，得到所述预设处理器当前的处理资源利用率。
可选地，任务划分模块30，包括：
划分单元，用于在所述处理资源利用率小于预设利用率阈值时，对所述处理事项进行划分形成对应的处理步骤，并将所述金融数据集合中的金融数据进行划分，得到金融数据子集合；
任务形成单元，用于将所述金融数据子集合和对应的所述处理步骤进行封装，形成处理子任务。
可选地，所述任务执行模块40，包括：
获取单元，用于获取每一个线程的当前任务，按所述每一个线程的当前任务进行划分各所述处理子任务，使得每一个线程处理的任务均衡；
结果生成单元，用于获取每一个线程处理的处理子结果，将所述处理子结果进行汇总形成处理结果。
可选地，所述金融数据处理装置，包括：
数据量统计模块，用于获取所述金融数据集合中金融数据的数据量，将所述数据量与所述预设处理阈值进行比较；
时间获取模块，用于在所述数据量超过所述预设处理阈值时，获取所述处理事项对应的处理时间；
在所述处理时间大于预设处理时间时，执行利用率计算模块20中获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率的步骤。
可选地，所述金融数据处理装置，包括：
任务封装模块，用于在所述处理资源利用率大于或等于预设利用率阈值时，将所述处理事项和所述金融数据集合封装形成处理任务；
时间计算模块，用于获取每一个线程的当前任务，并按所述当前任务计算对应线程的处理时间；
任务处理模块，用于将所述处理任务划分至处理时间最短的目标线程，并执行所述目标线程得到处理结果。
可选地，所述金融数据处理装置，包括：
结果比对模块，用于在接收到所述处理结果时，将所述处理结果与预设标准处理结果进行比对；
关联保存模块，用于在所述处理结果与预设标准处理结果匹配时，将所述处理结果与所述金融数据处理请求对应的处理事项和金融数据集合进行关联保存，以供用户查询；
数据回归模块，用于在所述处理结果与预设标准处理结果不匹配时，将进行数据回滚。
其中，金融数据处理装置的各个功能模块实现的步骤可参照本发明金融数据处理方法的各个实施例，此处不再赘述。
此外，本发明实施例还提出一种计算机存储介质。
所述计算机存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述实施例提供的金融数据处理方法中的操作。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体/操作/对象与另一个实体/操作/对象区分开来，而不一定要求或者暗示这些实体/操作/对象之间存在任何这种实际的关系或者顺序；术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
对于装置实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中作为分离部件说明的单元可以是或者也可以不是物理上分开的。可以根据实际的需要选择中的部分或者全部模块来实现本发明方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (9)
1.一种金融数据处理方法，其特征在于，所述金融数据处理方法包括以下步骤：
接收金融数据处理请求，获取所述金融数据处理请求对应的处理事项和待处理的金融数据集合；
获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率；
在所述处理资源利用率小于预设利用率阈值时，将所述处理事项和所述金融数据集合进行划分并组合，生成处理子任务；
通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果；
所述通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果的步骤，包括：
根据所述处理子任务的数量，对预设处理器多线程执行过程中的线程池大小进行配置；
基于配置后的所述线程池大小创建线程池；
在所述线程池中创建处理线程并对所述处理线程上下文环境进行初始化；
根据初始化后的多个所述处理线程对各所述处理子任务进行并行处理，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果；
所述获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率的步骤，包括：
获取预设处理器的当前状态参数，并查询预设状态参数表，获取所述当前状态参数对应的最大状态参数；
将所述当前状态参数与对应的所述最大状态参数进行比值运算，得到所述预设处理器的状态比值；
在所述状态比值的数量为至少两个时，将各所述状态比值进行加权平均，得到所述预设处理器当前的处理资源利用率。
2.如权利要求1所述的金融数据处理方法，其特征在于，所述在所述处理资源利用率小于预设利用率阈值时，将所述处理事项和所述金融数据集合进行划分并组合，生成处理子任务的步骤，包括：
在所述处理资源利用率小于预设利用率阈值时，对所述处理事项进行划分形成对应的处理步骤，并将所述金融数据集合中的金融数据进行划分，得到金融数据子集合；
将所述金融数据子集合和对应的所述处理步骤进行封装，形成处理子任务。
3.如权利要求1所述的金融数据处理方法，其特征在于，所述通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果的步骤，包括：
获取每一个线程的当前任务，按所述每一个线程的当前任务进行划分各所述处理子任务，使得每一个线程处理的任务均衡；
获取每一个线程处理的处理子结果，将所述处理子结果进行汇总形成处理结果。
4.如权利要求1所述的金融数据处理方法，其特征在于，所述接收金融数据处理请求，获取所述金融数据处理请求对应的处理事项和待处理的金融数据集合的步骤之后，包括：
获取所述金融数据集合中金融数据的数据量，将所述数据量与预设处理阈值进行比较；
在所述数据量超过所述预设处理阈值时，获取所述处理事项对应的处理时间；
在所述处理时间大于预设处理时间时，执行获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率的步骤。
5.如权利要求1所述的金融数据处理方法，其特征在于，所述获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率的步骤之后，包括：
在所述处理资源利用率大于或等于预设利用率阈值时，将所述处理事项和所述金融数据集合封装形成处理任务；
获取每一个线程的当前任务，并按所述当前任务计算对应线程的处理时间；
将所述处理任务划分至处理时间最短的目标线程，并执行所述目标线程得到处理结果。
6.如权利要求1所述的金融数据处理方法，其特征在于，所述通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果的步骤之后，包括：
在接收到所述处理结果时，将所述处理结果与预设标准处理结果进行比对；
在所述处理结果与预设标准处理结果匹配时，将所述处理结果与所述金融数据处理请求对应的处理事项和金融数据集合进行关联保存，以供用户查询；
在所述处理结果与预设标准处理结果不匹配时，将进行数据回滚。
7.一种金融数据处理装置，其特征在于，所述金融数据处理装置包括：
请求接收模块，用于接收金融数据处理请求，获取所述金融数据处理请求对应的处理事项和待处理的金融数据集合；
利用率计算模块，用于获取预设处理器的当前状态参数，并根据所述当前状态参数计算所述预设处理器当前的处理资源利用率；
任务划分模块，用于在所述处理资源利用率小于预设利用率阈值时，将所述处理事项和所述金融数据集合进行划分并组合，生成处理子任务；
任务执行模块，用于通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果；
所述通过所述预设处理器执行各所述处理子任务，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果的操作，包括：
根据所述处理子任务的数量，对预设处理器多线程执行过程中的线程池大小进行配置；基于配置后的所述线程池大小创建线程池；在所述线程池中创建处理线程并对所述处理线程上下文环境进行初始化；根据初始化后的多个所述处理线程对各所述处理子任务进行多并行处理，得到各所述处理子任务对应的处理子结果，将所述处理子结果进行汇总形成处理结果；
所述利用率计算模块，还用于获取预设处理器的当前状态参数，并查询预设状态参数表，获取所述当前状态参数对应的最大状态参数；将所述当前状态参数与对应的所述最大状态参数进行比值运算，得到所述预设处理器的状态比值；在所述状态比值的数量为至少两个时，将各所述状态比值进行加权平均，得到所述预设处理器当前的处理资源利用率。
8.一种金融数据处理设备，其特征在于，所述金融数据处理设备包括：
存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中：
所述计算机程序被所述处理器执行时实现如权利要求1至6中任一项所述的金融数据处理方法的步骤。
9.一种计算机存储介质，其特征在于，所述计算机存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的金融数据处理方法的步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811342371.2A CN109669773B (zh) | 2018-11-12 | 2018-11-12 | 金融数据处理方法、装置、设备和存储介质 |
| PCT/CN2018/122835 WO2020098075A1 (zh) | 2018-11-12 | 2018-12-21 | 金融数据处理方法、装置、设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811342371.2A CN109669773B (zh) | 2018-11-12 | 2018-11-12 | 金融数据处理方法、装置、设备和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109669773A CN109669773A (zh) | 2019-04-23 |
| CN109669773B true CN109669773B (zh) | 2024-03-08 |
Family
ID=66142088
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811342371.2A Active CN109669773B (zh) | 2018-11-12 | 2018-11-12 | 金融数据处理方法、装置、设备和存储介质 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN109669773B (zh) |
| WO (1) | WO2020098075A1 (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110489242B (zh) * | 2019-09-24 | 2024-01-26 | 深圳前海微众银行股份有限公司 | 分布式数据计算方法、装置、终端设备及存储介质 |
| CN110766540A (zh) * | 2019-10-25 | 2020-02-07 | 上海德启信息科技有限公司 | 一种账单核销方法、装置及电子设备 |
| CN111176851A (zh) * | 2020-01-09 | 2020-05-19 | 国网福建省电力有限公司 | 一种售电侧的用户数据分析方法及系统 |
| CN112035258B (zh) * | 2020-08-31 | 2022-06-17 | 中国平安财产保险股份有限公司 | 数据处理方法、装置、电子设备及介质 |
| CN114301783B (zh) * | 2021-12-31 | 2024-05-28 | 中企云链（北京）金融信息服务有限公司 | 用于微服务的优化方法以及装置、存储介质、电子装置 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103067468A (zh) * | 2012-12-22 | 2013-04-24 | 深圳先进技术研究院 | 云调度方法及其系统 |
| CN107688496A (zh) * | 2017-07-24 | 2018-02-13 | 上海壹账通金融科技有限公司 | 任务分布式处理方法、装置、存储介质和服务器 |
| CN107797853A (zh) * | 2016-09-07 | 2018-03-13 | 深圳市中兴微电子技术有限公司 | 一种任务调度方法、装置及多核处理器 |
| CN107992329A (zh) * | 2017-07-20 | 2018-05-04 | 上海寒武纪信息科技有限公司 | 一种计算方法及相关产品 |
| CN108446176A (zh) * | 2018-02-07 | 2018-08-24 | 平安普惠企业管理有限公司 | 一种任务分配方法、计算机可读存储介质及终端设备 |
| CN108566408A (zh) * | 2018-01-18 | 2018-09-21 | 咪咕文化科技有限公司 | 一种业务处理方法、装置及存储介质 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102427478A (zh) * | 2011-12-28 | 2012-04-25 | 广州杰赛科技股份有限公司 | 构建可叠加服务器的方法以及服务器系统 |
| JP2013186745A (ja) * | 2012-03-08 | 2013-09-19 | Fuji Xerox Co Ltd | 処理システム及びプログラム |
| CN108243348B (zh) * | 2016-12-23 | 2019-03-15 | 中科星图股份有限公司 | 一种流处理请求分配服务器 |
| CN106802828A (zh) * | 2016-12-30 | 2017-06-06 | 广东欧珀移动通信有限公司 | 一种应用数据处理方法及设备 |
-
2018
- 2018-11-12 CN CN201811342371.2A patent/CN109669773B/zh active Active
- 2018-12-21 WO PCT/CN2018/122835 patent/WO2020098075A1/zh active Application Filing
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103067468A (zh) * | 2012-12-22 | 2013-04-24 | 深圳先进技术研究院 | 云调度方法及其系统 |
| CN107797853A (zh) * | 2016-09-07 | 2018-03-13 | 深圳市中兴微电子技术有限公司 | 一种任务调度方法、装置及多核处理器 |
| CN107992329A (zh) * | 2017-07-20 | 2018-05-04 | 上海寒武纪信息科技有限公司 | 一种计算方法及相关产品 |
| CN107688496A (zh) * | 2017-07-24 | 2018-02-13 | 上海壹账通金融科技有限公司 | 任务分布式处理方法、装置、存储介质和服务器 |
| CN108566408A (zh) * | 2018-01-18 | 2018-09-21 | 咪咕文化科技有限公司 | 一种业务处理方法、装置及存储介质 |
| CN108446176A (zh) * | 2018-02-07 | 2018-08-24 | 平安普惠企业管理有限公司 | 一种任务分配方法、计算机可读存储介质及终端设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109669773A (zh) | 2019-04-23 |
| WO2020098075A1 (zh) | 2020-05-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109669773B (zh) | 金融数据处理方法、装置、设备和存储介质 | |
| US20200137151A1 (en) | Load balancing engine, client, distributed computing system, and load balancing method | |
| Choudhary et al. | A dynamic optimization algorithm for task scheduling in cloud environment | |
| US20170207958A1 (en) | Performance of Multi-Processor Computer Systems | |
| CN1952898A (zh) | 采用进程线程的自适应分区的进程调度程序 | |
| CN109800204B (zh) | 数据分配方法及相关产品 | |
| CN109725991B (zh) | 任务处理方法、装置、设备及可读存储介质 | |
| CN112114950A (zh) | 任务调度方法和装置、以及集群管理系统 | |
| CN107797863B (zh) | 一种云计算平台中细粒度资源匹配方法 | |
| US11307898B2 (en) | Server resource balancing using a dynamic-sharing strategy | |
| CN108960955A (zh) | 一种基于网络购物销售方的虚拟库存自动补货方法及装置 | |
| CN108446171A (zh) | 电子装置、分布式系统执行任务分配方法及存储介质 | |
| CN109885384B (zh) | 任务并行度优化方法、装置、计算机设备及存储介质 | |
| CN112463370A (zh) | 任务执行方法、设备及可读存储介质 | |
| CN109656988B (zh) | 基于云计算的业务运维方法、装置、设备及可读存储介质 | |
| CN111177984A (zh) | 电子设计自动化中异构计算单元的资源利用 | |
| JP2010224754A (ja) | リソース割当装置、リソース割当方法、及びプログラム | |
| US20240176657A1 (en) | Task processing method and apparatus, electronic device, storage medium and program product | |
| CN116880994B (zh) | 基于动态dag的多处理器任务调度方法、装置及设备 | |
| CN115640113A (zh) | 多平面弹性调度方法 | |
| CN113282403A (zh) | 一种智能服务动态适配演化方法 | |
| CN112434056A (zh) | 一种详情数据的查询方法及装置 | |
| CN109670932B (zh) | 信贷数据核算方法、装置、系统和计算机存储介质 | |
| CN111008146A (zh) | 对云主机安全进行测试的方法及系统 | |
| CN116661964A (zh) | 任务处理方法、装置及电子设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |