WO2013097751A1 - 一种分析数据记录集合的系统和方法 - Google Patents

一种分析数据记录集合的系统和方法 Download PDF

Info

Publication number
WO2013097751A1
WO2013097751A1 PCT/CN2012/087722 CN2012087722W WO2013097751A1 WO 2013097751 A1 WO2013097751 A1 WO 2013097751A1 CN 2012087722 W CN2012087722 W CN 2012087722W WO 2013097751 A1 WO2013097751 A1 WO 2013097751A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
data block
unit
analysis
data record
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/CN2012/087722
Other languages
English (en)
French (fr)
Inventor
刘健
陆堃彪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Unionpay Co Ltd
Original Assignee
China Unionpay Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Unionpay Co Ltd filed Critical China Unionpay Co Ltd
Publication of WO2013097751A1 publication Critical patent/WO2013097751A1/zh
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/505—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load

Definitions

  • the present invention relates to computer system distributed load balancing techniques, and more particularly to systems and methods for analyzing data record sets.
  • a large number of data records can be distributedly analyzed by a plurality of analysis units, but in some specific analysis cases, the attribution body of each data record is required to be analyzed by the same analysis unit.
  • the attribution body of each data record is required to be analyzed by the same analysis unit.
  • transactions requiring the same bank card must be analyzed in sequence in the same analysis unit in order to analyze the transaction behavior of the bank card.
  • the transaction time of each bank card is random, and the attribution subject of each data record is required to be analyzed by the same analysis unit, it becomes difficult to realize load balancing of multiple analysis units.
  • the object of the present invention is to improve the internal performance of a computer system, and execute a system internal performance improvement program to control an internal object of a computer system, thereby enabling flexible allocation of a data record set to be processed, thereby achieving an ideal load balancing state. , thereby improving the processing performance of the computer system.
  • the present invention provides a system for analyzing a data record set, the system comprising: a data receiving module configured to receive a data record set; and a static configuration module configured to record the data
  • the set is divided into a plurality of data blocks, wherein each data block includes one or more data records; the dynamic decision module is configured to allocate data records in the same data block to the same analysis unit according to the load condition of the processing module;
  • a plurality of analysis units are included, the plurality of analysis units being configured to receive and analyze data records from the dynamic decision module assignments.
  • the static configuration module includes: an attribute setting unit configured to be a data record One or more attributes are set, wherein the one or more attributes are set according to one or more fields in the data record.
  • a granularity configuration unit configured to select one or more specific attributes from one or more attributes set by the attribute setting unit, wherein the one or more specific attributes are used as a granularity of data partitioning, and the data dividing unit is configured to A data record having attribute values of the same specific attribute is divided into the same data block such that the records in the data record set are divided into a plurality of data blocks.
  • the dynamic decision module includes: an identification unit configured to identify a data block to which the data record to be analyzed belongs, and a matching unit configured to record the identified data record to be analyzed The data block is matched with one of the plurality of analysis units, and the allocation unit is configured to allocate the data record to be analyzed to an analysis unit that matches the data block to which it belongs.
  • the matching unit includes a matching relationship storage unit configured to store a matching relationship between the data block and the analyzing unit, where the matching unit is further configured to determine, according to the matching relationship, the data record to be analyzed belongs to Whether the data block has been matched with one of the plurality of analysis units, the allocation unit being further configured to allocate the data record to be analyzed according to a matching relationship.
  • the matching unit is further configured to: when it is determined that the data block to which the current data record to be analyzed belongs does not match one of the plurality of analysis units, the data block is One of the plurality of analysis units matches and stores the matching relationship.
  • the matching unit is configured to evenly match the data block with the analysis unit.
  • the matching unit is configured to, when the data block to which the current data record to be analyzed belongs does not match one of the plurality of analysis units, sequentially select the One of a plurality of analysis units, and matching the selected analysis unit to the data block.
  • the data dividing unit sets a data block identifier for each data block, wherein the data block identifier is recorded as an added field in a corresponding data record, and the determining The unit determines the data block to which the data record to be analyzed belongs according to the data block identifier.
  • the processing module further includes a feedback unit, configured to feed back status information of the analysis unit to the dynamic decision module, where the status information includes the number of analysis units.
  • the dynamic decision module further includes a state storage unit configured to store the number of analysis units, the matching unit matching the unmatched data block with the plurality of analysis units according to the number of analysis units
  • the state storage unit is further configured to: the analyzing unit sequentially stores a corresponding natural number identifier, wherein the data block identifier is a natural number allocated in order, and the matching unit is based on the data Block identifier
  • the corresponding natural number is divided by the natural number identifier of the analysis unit corresponding to the remainder of the number of analysis units to match the data block to which the current data record to be analyzed that does not match the analysis unit belongs to the corresponding analysis unit.
  • the matching unit when the number of analysis units fed back by the feedback unit changes, the matching unit is configured to re-match the data block and the analysis unit.
  • a method for analyzing a data record set comprising: a data receiving process, receiving a data record set in the process; a static configuration process, in the process Dividing the data record set into a plurality of data blocks, wherein each data block includes one or more data records; a dynamic decision process in which data records in the same data block are allocated according to load conditions of the processing process
  • the same analysis process includes a process of analyzing by using a plurality of analysis units, and the analysis unit receives and analyzes the data records allocated in the dynamic decision process.
  • the static configuration process includes: an attribute setting process in which one or more attributes are set for a data record, wherein the one or more attributes are recorded according to data One or more fields in the field are set. a granularity configuration process in which one or more specific attributes are selected from one or more attributes set by the attribute setting process, wherein the one or more specific attributes are used as granularity of data partitioning, a data partitioning process, The data records of the attribute values having the same specific attribute are divided into the same data block in the process, so that the records in the data record set are divided into a plurality of data blocks.
  • the dynamic decision process includes: a recognition process, in which a data block to which the data record to be analyzed belongs is identified, a matching process, and the identified to be analyzed in the process The data block to which the data record belongs is matched with one of the plurality of analysis units, and an allocation process is performed in which the data record to be analyzed is assigned to an analysis unit that matches the data block to which it belongs.
  • the matching process includes a matching relationship storing process for storing a matching relationship between the data block and the analyzing unit, and the matching process further includes determining, according to the matching relationship, the data to which the data record to be analyzed belongs. Whether the block has been matched with one of the plurality of analysis units, the allocating process further comprising allocating the data record to be analyzed according to a matching relationship.
  • the matching process further includes: when it is determined that the data block to which the current data record to be analyzed belongs does not match one of the plurality of analysis units, the data block is One of the plurality of analysis units is matched, and the matching relationship is stored.
  • the data block is uniformly matched with the analysis unit in a matching process.
  • the data dividing process sets a data block identifier for each data block, wherein the data block identifier is recorded as an added field in a corresponding data record, and the determining The process determines, based on the data block identifier, the data block to which the data record to be analyzed belongs.
  • the processing procedure further includes a feedback process for feeding back state information of the analysis unit to the dynamic decision process, the state information including the number of analysis units.
  • the dynamic decision process further includes a state storage process in which the state storage process stores the number of analysis units, and the matching process matches the unmatched data blocks with the plurality of analysis units according to the number of analysis units.
  • the state storing process further includes, in the process, the analyzing unit sequentially stores a corresponding natural number identifier, wherein the data block identifier is a natural number allocated in order, and the matching
  • the process blocks the data block to which the current data record to be analyzed that does not match the analysis unit belongs by using the natural number identifier of the analysis unit corresponding to the remainder obtained by dividing the natural number corresponding to the data block identifier by the number of the analysis unit
  • the corresponding analysis unit matches.
  • the matching process when the number of analysis units fed back by the feedback process changes, the matching process re-matches the data block and the analysis unit in the process.
  • the object of the present invention is to improve the internal performance of a computer system, execute a system internal performance improvement program by a computer to control an internal object of the computer system, complete a series of settings or adjustments implemented on various components of the computer system, thereby obtaining a computer system.
  • the effect of internal performance improvement is to improve the internal performance of a computer system, execute a system internal performance improvement program by a computer to control an internal object of the computer system, complete a series of settings or adjustments implemented on various components of the computer system, thereby obtaining a computer system.
  • FIG. 1 is a schematic diagram showing the composition of a system for analyzing a data record set according to an embodiment of the present invention.
  • FIG. 2 is a flow chart showing the steps of a method of analyzing a data record set according to an embodiment of the present invention.
  • the system for analyzing a data record set includes a data receiving module, a static configuration module, a dynamic decision module, and a processing module.
  • the data receiving module is configured to receive a data record set, the data record set including one or more data records.
  • the data receiving module transmits the received data record set to the static configuration module.
  • the static configuration module is configured to pre-process the set of data records by dividing the set of data records into a plurality of data blocks, wherein each data block includes one or more data records.
  • the dynamic decision module receives the chunked data records from the static configuration module and is configured to allocate data records in the same data block to the same analysis unit in the processing module based on the load condition of the processing module.
  • the processing module includes a plurality of analysis units for receiving and analyzing data records from the dynamic decision module assignments. Since the data recording set can be subjected to block processing by using the static configuration module, even when the distribution of the data record changes, the block mode of the data record set can be flexibly changed by the static configuration module, so that the new block is made. The pattern is able to adapt to changes in the distribution of data records, thereby enabling load balancing of the analysis units of each database.
  • the dynamic decision module of the present invention can dynamically adjust the analysis tasks assigned to the analysis unit according to the load condition of the processing module, so that even when the number of analysis units changes, the computer system can adapt to the load changes generated by the respective analysis units.
  • the static configuration module optionally includes an attribute setting unit, a granularity configuration unit, and a data division unit, as shown in FIG. 1.
  • the attribute setting unit is configured to set one or more attributes of the data record, wherein the one or more attributes are set according to one or more fields in the data record.
  • the bank card number, the issuing bank, the bank card property, and the last digit of the bank card number in the transaction data record may be used as attributes of the data record.
  • the granularity configuration unit is configured to select one or more specific attributes from one or more attributes set by the attribute setting unit, wherein the one or more specific attributes are used as the granularity of the data partitioning.
  • the last two digits of the issuing bank, the bank card property, and the bank card number can be selected as specific attributes.
  • a data dividing unit configured to divide data records having attribute values of the same specific attribute into the same data block such that the records in the data record set are divided into a plurality of data blocks. For the above example, for example, if the card issuing behavior is 200 banks, the bank card type is 3, and the bank card number is 10, the records in the data record set can be divided into 600 (200 X 3 X 10) data. Piece. It will be understood by those skilled in the art that the attributes and specific attributes of the data record can be defined by variations in the distribution of the root data records.
  • the dynamic decision module optionally includes an identification unit, a matching unit, and an allocation unit, as shown in FIG.
  • the identification unit is configured to identify a data block to which the data record to be analyzed belongs.
  • the matching unit is configured to match the identified data block to which the identified data record to be analyzed belongs to one of the plurality of analysis units.
  • the data records in the data block after matching will be assigned to the corresponding analysis unit.
  • the allocation unit is configured to assign the data record to be analyzed to an analysis unit that matches the data block to which it belongs.
  • the matching unit may further include a matching relationship storage unit, where the matching relationship storage unit is configured to store a matching relationship between the data block and the analyzing unit.
  • the data block and the analysis unit are one-to-one correspondence. Department.
  • this matching relationship may be changed according to the state information of the analysis unit in the processing module, that is, re-matching.
  • the matching unit is further configured to determine, according to the matching relationship, whether the data block to which the data record to be analyzed belongs has been matched with one of the plurality of analysis units.
  • the allocation unit is further configured to allocate the data record to be analyzed according to a matching relationship.
  • the matching unit is further configured to: when determining that the data block to which the current data record to be analyzed belongs does not match one of the plurality of analysis units, the data block and the plurality of data blocks Analyze a match in the cell and store the match.
  • the matching unit is configured to evenly match the data block with the analysis unit.
  • the matching unit is configured to, when the data block to which the current data record to be analyzed belongs does not match one of the plurality of analysis units, sequentially select the plurality of analysis units One of the, and the selected analysis unit is matched with the data block.
  • the data record set is divided into N data blocks in a static configuration, in which case the matching unit can block the data block to which the first data record read belongs to The analysis unit is matched, so that the first data record is sent by the distribution unit to the first analysis unit for analysis, and when the second data record is read by the matching unit, if the second data record is related to the first A data record belongs to the same data block, and the allocation unit will still hand the second data record to the first analysis unit for analysis, otherwise the matching unit will block the data block to which the second data record belongs and the next analysis unit. Matching, such a loop, data records can be evenly distributed to all P analysis processes.
  • the matching unit may treat the multiple analysis units as a circular queue, when it is determined that the data block to which the current data record to be analyzed belongs has been matched with the plurality of analysis units, The matching unit does not move the pointer to the analysis unit circular queue. When it is determined that the data block to which the current data record to be analyzed belongs does not match the one of the plurality of analysis units, the matching unit points the pointer to the The next analysis unit of the analysis unit loop queue.
  • the data dividing unit sets a data block identifier for each data block, wherein the data block identifier is recorded as an added field in a corresponding data record, and the determining unit is based on the data block identifier. Determine the data block to which the data record to be analyzed belongs.
  • the processing module further includes a feedback unit
  • the dynamic decision module further includes a state storage unit, as shown in FIG. 1.
  • the feedback unit is configured to feed back status information of the analysis unit to the dynamic decision module, where the status information includes the number of analysis units.
  • the state storage unit is configured to store the number of analysis units.
  • the matching unit matches the unmatched data block with the plurality of analysis units according to the number of analysis units.
  • the state storage unit is further configured to sequentially store the corresponding natural number identifiers to the analysis unit, and the data block identifiers are natural numbers that are sequentially allocated.
  • the matching unit can The data block to which the current data record to be analyzed that does not match the analysis unit belongs is associated with the natural number identifier of the analysis unit corresponding to the remainder obtained by dividing the natural number corresponding to the data block identifier by the number of the analysis unit The corresponding analysis unit matches. For example, for example, when there are P analysis units, the data record set is divided into N data blocks in the static configuration, then the nth data block will be matched with the (N%P)th analysis unit.
  • the matching unit when the number of analysis units fed back by the feedback unit changes, the matching unit is configured to re-match the data block and the analysis unit.
  • the process of rematching can be performed using the method disclosed in the above embodiments.
  • the method includes: a data receiving process in which a data record set is received; a static configuration process, in the process Dividing the data record set into a plurality of data blocks, wherein each data block includes one or more data records; a dynamic decision process in which data records in the same data block are allocated according to load conditions of the processing process
  • the same analysis process includes a process of analyzing by using a plurality of analysis units, and the analysis unit receives and analyzes the data records allocated in the dynamic decision process.
  • the static configuration process includes: an attribute setting process, in which one or more attributes are set for the data record, wherein the one or more attributes are based on the data record One or more fields are set.
  • a granularity configuration process in which one or more specific attributes are selected from one or more attributes set by the attribute setting process, wherein the one or more specific attributes are used as granularity of data partitioning, a data partitioning process, The data records of the attribute values having the same specific attribute are divided into the same data block in the process, so that the records in the data record set are divided into a plurality of data blocks.
  • the dynamic decision process includes: a recognition process, in which a data block to which the data record to be analyzed belongs is identified, a matching process, and the identified data to be analyzed is performed in the process
  • the data block to which the record belongs matches one of the plurality of analysis units
  • the allocation process in which the data record to be analyzed is assigned to the analysis unit that matches the data block to which it belongs.
  • the matching process includes a matching relationship storing process for storing a matching relationship between the data block and the analyzing unit, and the matching process further includes determining, according to the matching relationship, whether the data block to which the data record to be analyzed belongs is Already matching one of the plurality of analysis units, the allocating process further includes allocating the data record to be analyzed according to a matching relationship.
  • the matching process further includes: when it is determined that the data block to which the current data record to be analyzed belongs does not match one of the plurality of analysis units, the data block and the multiple One of the analysis units matches, and the matching relationship is stored. [0048] In the above embodiment, the data block is uniformly matched with the analysis unit in the matching process.
  • the data dividing process sets a data block identifier for each data block, wherein the data block identifier is recorded as an added field in a corresponding data record, and the determining process is based on The data block identifier determines the data block to which the data record to be analyzed belongs.
  • the processing process further includes a feedback process, configured to feed back status information of the analysis unit to the dynamic decision process, where the status information includes the number of analysis units.
  • the dynamic decision process further includes a state storage process in which the state storage process stores the number of analysis units, and the matching process matches the unmatched data blocks with the plurality of analysis units according to the number of analysis units.
  • the state storing process further includes, in the process, the analyzing unit sequentially stores a corresponding natural number identifier, where the data block identifier is a natural number allocated in order, and the matching process passes And corresponding to the data block to which the current data record to be analyzed that does not match the analysis unit belongs, based on the natural number identifier of the analysis unit corresponding to the remainder obtained by dividing the natural number corresponding to the data block identifier by the number of the analysis unit The analysis unit matches.
  • the matching process when the number of analysis units fed back by the feedback process changes, the matching process re-matches the data block and the analysis unit in the process.

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开分析数据记录集合的系统和方法，该系统包括数据接收模块，配置成接收数据记录集合；静态配置模块，配置成将所述数据记录集合分成多个数据块，其中每个数据块包括一条或多条数据记录；动态决策模块，配置成根据处理模块的负载情况，将同一数据块中的数据记录分配给同一分析单元；处理模块，包括多个分析单元，该多个分析单元用于接收并分析来自动态决策模块分配的数据记录。

Description

一种分析数据记录集合的系统和方法 技术领域
[0001] 本发明涉及计算机系统分布式负载均衡技术， 并且尤其涉及的分析数据记录集合的 系统和方法。
背景技术
[0002] 在对数据记录集合的分析过程中， 例如， 关于银行卡的交易的数据记录， 由于不同 银行卡的交易的数据记录数量之间的差异， 往往会造成计算机系统分布式负载均衡困难， 导 致计算机系统整体性能下降。
[0003] 通常， 数量巨大的数据记录可以通过多个分析单元进行分布式的分析， 但是在一些 特定的分析情况下， 要求每条数据记录的归属主体由同一分析单元进行分析。 例如， 在银行 卡交易分析中要求同一张银行卡的交易必须在同一个分析单元中进行按序连续分析， 才能分 析出该银行卡的交易行为轨迹。 在这种情况下， 由于每张银行卡的交易发生的时间是随机 的， 要求每条数据记录的归属主体由同一分析单元进行分析的前提下， 实现多个分析单元的 负载均衡成为难点。
[0004] 又如， 当分析单元的数量固定而待分析的数据记录的分布情况发生变化时或者当分 析单元的数量发生变化时， 计算机系统往往难以适应各个分析单元所产生的负载变化， 使得 难以关联计算机系统的资源， 从而导致计算机系统整体性能下降。 同时， 为适应数据记录分 布情况或者分析单元的数量发生变化， 通常需要人工调整每个分析单元的分析范围才能重新 达到负载均衡。
[0005] 本发明的目的在于改善计算机系统的内部性能， 通过计算机执行一种系统内部性能 改进程序控制计算机系统内部对象， 使得能够灵活地分配待处理的数据记录集合， 进而达到 理想的负载均衡状态， 从而提高计算机系统的处理性能。
发明内容
[0006] 为解决上述问题， 本发明提供一种分析数据记录集合的系统， 其特征在于， 该系统 包括： 数据接收模块， 配置成接收数据记录集合； 静态配置模块， 配置成将所述数据记录集 合分成多个数据块， 其中每个数据块包括一条或多条数据记录； 动态决策模块， 配置成根据 处理模块的负载情况， 将同一数据块中的数据记录分配给同一分析单元； 处理模块， 包括多 个分析单元， 该多个分析单元用于接收并分析来自动态决策模块分配的数据记录。
[0007] 在所述公开的方案中， 所述静态配置模块包括： 属性设定单元， 配置成为数据记录 设定一个或多个属性， 其中， 所述一个或多个属性根据数据记录中的一个或多个字段被设 定。 粒度配置单元， 配置成从属性设定单元设定的一个或多个属性选择一个或多个特定属 性， 其中， 所述一个或多个特定属性用作数据划分的粒度， 数据划分单元， 配置成将具有相 同的特定属性的属性值的数据记录划分到同一数据块， 使得所述数据记录集合中的记录被划 分到多个数据块。
[0008] 在所述公开的方案中， 所述动态决策模块包括： 识别单元， 配置成识别待分析的数 据记录所属的数据块， 匹配单元， 配置成将所述识别的待分析的数据记录所属的数据块与所 述多个分析单元中的一个匹配， 分配单元， 配置成将所述待分析的数据记录分配给与其所属 的数据块匹配的分析单元。
[0009] 在所述公开的方案中， 所述匹配单元包括匹配关系存储单元用于存储数据块与分析 单元的匹配关系， 所述匹配单元进一步配置成根据匹配关系判断待分析的数据记录所属的数 据块是否已经与所述多个分析单元中的一个匹配， 所述分配单元进一步配置成根据匹配关系 分配所述待分析的数据记录。
[0010] 在所述公开的方案中， 所述匹配单元进一步配置成， 当判断当前待分析的数据记录 所属的数据块未与所述多个分析单元中的一个匹配时， 将该数据块与所述多个分析单元中的 一个匹配， 并存储该匹配关系。
[0011] 在所述公开的方案中， 所述匹配单元配置成将所述数据块与所述分析单元均匀地进行 匹配。
[0012] 在所述公开的方案中， 所述匹配单元配置成， 当该当前待分析的数据记录所属的数 据块未与所述多个分析单元中的一个匹配时， 按序循环选择所述多个分析单元中的一个， 并 将该选择的分析单元与该数据块匹配。
[0013] 在所述公开的方案中， 所述数据划分单元为每一个数据块设定数据块标识符， 其中 所述数据块标识符作为添加字段被记录到相应的数据记录中， 所述判断单元根据数据块标识 符判断待分析的数据记录所属的数据块。
[0014] 在所述公开的方案中， 所述处理模块还包括反馈单元， 用于向所述动态决策模块反 馈分析单元的状态信息， 所述状态信息包括分析单元的数量。 所述动态决策模块还包括状态 存储单元， 状态存储单元配置成存储分析单元数量， 所述匹配单元根据分析单元的数量将未 进行匹配的数据块与所述多个分析单元进行匹配
在所述公开的方案中， 所述状态存储单元进一步配置成所述分析单元按序存储对应的自然数 标识符， 所述数据块标识符是按顺序分配的自然数， 所述匹配单元通过基于将数据块标识符 对应的自然数除以所述分析单元的数量得到的余数所对应的分析单元的自然数标识符来将未 与分析单元匹配的当前待分析的数据记录所属的数据块与该对应的分析单元匹配。
[0015] 在所述公开的方案中， 当所述反馈单元反馈的分析单元的数量发生变化时， 所述匹 配单元配置成对所述数据块和所述分析单元进行重新匹配。
[0016] 根据本发明的另一个目的， 提供一种分析数据记录集合的方法， 其特征在于， 该方 法包括： 数据接收过程， 在该过程中接收数据记录集合； 静态配置过程， 在该过程中将所述 数据记录集合分成多个数据块， 其中每个数据块包括一条或多条数据记录； 动态决策过程， 在该过程中根据处理过程的负载情况， 将同一数据块中的数据记录分配给同一分析过程； 处 理过程， 包括利用多个分析单元进行分析的过程， 分析单元中接收并分析在动态决策过程中 分配的数据记录。
[0017] 在所述公开的方案中， 所述静态配置过程包括： 属性设定过程， 在该过程中为数据 记录设定一个或多个属性， 其中， 所述一个或多个属性根据数据记录中的一个或多个字段被 设定。 粒度配置过程， 在该过程中从属性设定过程设定的一个或多个属性选择一个或多个特 定属性， 其中， 所述一个或多个特定属性用作数据划分的粒度， 数据划分过程， 在该过程中 将具有相同的特定属性的属性值的数据记录划分到同一数据块， 使得所述数据记录集合中的 记录被划分到多个数据块。
[0018] 在所述公开的方案中， 所述动态决策过程包括： 识别过程， 在该过程中识别待分析 的数据记录所属的数据块， 匹配过程， 在该过程中将所述识别的待分析的数据记录所属的数 据块与所述多个分析单元中的一个匹配， 分配过程， 在该过程中将所述待分析的数据记录分 配给与其所属的数据块匹配的分析单元。
[0019] 在所述公开的方案中， 所述匹配过程包括匹配关系存储过程用于存储数据块与分析 单元的匹配关系， 所述匹配过程进一步包括根据匹配关系判断待分析的数据记录所属的数据 块是否已经与所述多个分析单元中的一个匹配， 所述分配过程进一步包括根据匹配关系分配 所述待分析的数据记录。
[0020] 在所述公开的方案中， 所述匹配过程进一步包括， 当判断当前待分析的数据记录所 属的数据块未与所述多个分析单元中的一个匹配时， 将该数据块与所述多个分析单元中的一 个匹配， 并存储该匹配关系。
[0021] 在所述公开的方案中， 所述在匹配过程中将所述数据块与所述分析单元均匀地进行 匹配。
[0022] 在所述公开的方案中， 在所述匹配过程中， 当该当前待分析的数据记录所属的数据 块未与所述多个分析单元中的一个匹配时， 按序循环选择所述多个分析单元中的一个， 并将 该选择的分析单元与该数据块匹配。
[0023] 在所述公开的方案中， 所述数据划分过程为每一个数据块设定数据块标识符， 其中 所述数据块标识符作为添加字段被记录到相应的数据记录中， 所述判断过程根据数据块标识 符判断待分析的数据记录所属的数据块。
[0024] 在所述公开的方案中， 所述处理过程还包括反馈过程， 用于向所述动态决策过程反 馈分析单元的状态信息， 所述状态信息包括分析单元的数量。 所述动态决策过程还包括状态 存储过程， 状态存储过程在该过程中存储分析单元数量， 所述匹配过程根据分析单元的数量 将未进行匹配的数据块与所述多个分析单元进行匹配。
[0025] 在所述公开的方案中， 所述状态存储过程进一步在该过程中所述分析单元按序存储 对应的自然数标识符， 所述数据块标识符是按顺序分配的自然数， 所述匹配过程通过基于将 数据块标识符对应的自然数除以所述分析单元的数量得到的余数所对应的分析单元的自然数 标识符来将未与分析单元匹配的当前待分析的数据记录所属的数据块与该对应的分析单元匹 配。
[0026] 在所述公开的方案中， 当所述反馈过程反馈的分析单元的数量发生变化时， 所述匹 配过程在该过程中对所述数据块和所述分析单元进行重新匹配。
[0027] 本发明的目的在于改善计算机系统内部性能， 通过计算机执行一种系统内部性能改 进程序控制计算机系统内部对象， 完成对该计算机系统各个组成部分实施的一系列设置或者 调整， 从而获得计算机系统内部性能改进的效果。
附图说明
[0028] 在参照附图阅读了本发明的具体实施方式以后， 本领域技术人员将会更清楚地了解 本发明的各个方面。 本领域技术人员应当理解的是， 这些附图仅仅用于配合具体实施方式说 明本发明的技术方案， 而并非意在对本发明的保护范围构成限制。
[0029] 图 1是根据本发明一个实施例的分析数据记录集合的系统的组成示意图。
[0030] 图 2是根据本发明实施例的分析数据记录集合的方法的步骤流程图。
具体实施方式
[0031] 下面参照附图， 对本发明的具体实施方式作进一步的详细描述。
[0032] 图 1 是根据本发明实施例的分析数据记录集合的系统的组成示意图。 如图 1 所示， 分析数据记录集合的系统包括数据接收模块、 静态配置模块、 动态决策模块、 处理模块。 其 中， 数据接收模块被配置成接收数据记录集合， 该数据记录集合包括一条或多条数据记录。 数据接收模块将接收的数据记录集合传送到静态配置模块。 静态配置模块被配置成对所述数 据记录集合进行预处理， 即将所述数据记录集合分成多个数据块， 其中每个数据块包括一条 或多条数据记录。 动态决策模块从静态配置模块接收被分块的数据记录， 并且被配置成根据 处理模块的负载情况， 将同一数据块中的数据记录分配给处理模块中的同一分析单元。 处理 模块包括多个分析单元， 该多个分析单元用于接收并分析来自动态决策模块分配的数据记 录。 由于能够利用静态配置模块对数据记录集合进行分块处理， 因此， 即使当数据记录的分 布情况发生变化时， 也能够通过静态配置模块灵活地改变数据记录集合的分块模式， 使得新 的分块模式能够适应数据记录的分布情况的变化， 从而使得处理每一个数据库的分析单元的 负载均衡。 本发明的动态决策模块能够根据处理模块的负载情况动态地调整分配给分析单元 的分析任务， 因此即使当分析单元的数量发生变化， 计算机系统也能适应各个分析单元所产 生的负载变化。
[0033] 在上述实施例中， 静态配置模块可选地包括属性设定单元、 粒度配置单元、 数据划 分单元， 如图 1 所示。 其中， 属性设定单元被配置成为数据记录设定一个或多个属性， 其 中， 所述一个或多个属性根据数据记录中的一个或多个字段被设定。 示例性地， 对于银行卡 交易分析的情况， 可以将交易数据记录中的银行卡号、 发卡行、 银行卡性质、 银行卡卡号的 末位作为数据记录的属性。 粒度配置单元被配置成从属性设定单元设定的一个或多个属性选 择一个或多个特定属性， 其中， 所述一个或多个特定属性用作数据划分的粒度。 对于上述示 例， 例如， 可以将发卡行、 银行卡性质、 银行卡卡号的末两位选择作为特定属性。 数据划分 单元， 配置成将具有相同的特定属性的属性值的数据记录划分到同一数据块， 使得所述数据 记录集合中的记录被划分到多个数据块。 对于上述示例， 例如， 发卡行为 200家银行、 银行 卡性质为 3种、 银行卡卡号的末位为 10种， 那么数据记录集合中的记录可以被划分成 600 (200 X 3 X 10) 个数据块。 本领域的技术人员可以理解的是， 可以根数据记录的分布情况变 化来定义数据记录的属性和特定属性。
[0034] 在上述实施例中， 动态决策模块可选地包括识别单元、 匹配单元、 分配单元， 如图 1 所示。 其中， 识别单元被配置成识别待分析的数据记录所属的数据块。 匹配单元被配置成将 所述识别的待分析的数据记录所属的数据块与所述多个分析单元中的一个匹配。 这里， 匹配 之后数据块中的数据记录将被分配到相应的分析单元。 在匹配完成之后， 分配单元被配置成 将所述待分析的数据记录分配给与其所属的数据块匹配的分析单元。
[0035] 在上述实施例中， 匹配单元还可以包括匹配关系存储单元， 匹配关系存储单元用于 存储数据块与分析单元的匹配关系。 可以理解的是， 数据块与分析单元是一对一的对应关 系。 后文将描述， 这种匹配关系可以根据处理模块中的分析单元的状态信息发生改变， 即重 新匹配。 匹配单元进一步配置成根据匹配关系判断待分析的数据记录所属的数据块是否已经 与所述多个分析单元中的一个匹配。 分配单元进一步配置成根据匹配关系分配所述待分析的 数据记录。
[0036] 在上述实施例中， 匹配单元进一步配置成， 当判断当前待分析的数据记录所属的数 据块未与所述多个分析单元中的一个匹配时， 将该数据块与所述多个分析单元中的一个匹 配， 并存储该匹配关系。
[0037] 在上述实施例中， 匹配单元配置成将所述数据块与所述分析单元均匀地进行匹配。
[0038] 在上述实施例中， 匹配单元配置成， 当该当前待分析的数据记录所属的数据块未与 所述多个分析单元中的一个匹配时， 按序循环选择所述多个分析单元中的一个， 并将该选择 的分析单元与该数据块匹配。 举例来说， 当有 P个分析单元时， 数据记录集合在静态配置中 被划分成 N个数据块， 在该情况下匹配单元可以将读取的第一条数据记录所属的数据块与 第一个分析单元匹配， 从而由分配单元将该第一条数据记录交给该第一个分析单元进行分 析， 当匹配单元读取的第二条数据记录时， 如果该第二条数据记录与该第一条数据记录属于 相同的数据块， 分配单元将仍将该第二条数据记录交给该第一个分析单元进行分析， 否则匹 配单元将第二条数据记录所属的数据块与下个分析单元匹配， 如此循环， 数据记录可以被均 匀地分配给所有 P个分析进程。 更具体地， 举例来说， 匹配单元可以将所述多个分析单元视 为循环队列， 当判断当前待分析的数据记录所属的数据块与所述多个分析单元中的已经匹配 时， 所述匹配单元不移动指向所述分析单元循环队列的指针， 当判断当前待分析的数据记录 所属的数据块未与所述多个分析单元中的已经匹配时， 所述匹配单元将所述指针指向所述分 析单元循环队列的下一个分析单元。
[0039] 在上述实施例中， 数据划分单元为每一个数据块设定数据块标识符， 其中所述数据 块标识符作为添加字段被记录到相应的数据记录中， 判断单元根据数据块标识符判断待分析 的数据记录所属的数据块。
[0040] 在上述实施例中， 所述处理模块还可选地包括反馈单元， 所述动态决策模块还可选 地包括状态存储单元， 如图 1所示。 其中， 反馈单元用于向所述动态决策模块反馈分析单元 的状态信息， 所述状态信息包括分析单元的数量。 状态存储单元配置成存储分析单元数量。 所述匹配单元根据分析单元的数量将未进行匹配的数据块与所述多个分析单元进行匹配。
[0041] 在上述实施例中， 所述状态存储单元进一步配置成对所述分析单元按序存储对应的 自然数标识符， 以及所述数据块标识符是按顺序分配的自然数。 在这种情况下， 匹配单元可 以通过基于将数据块标识符对应的自然数除以所述分析单元的数量得到的余数所对应的分析 单元的自然数标识符来将未与分析单元匹配的当前待分析的数据记录所属的数据块与该对应 的分析单元匹配。 举例来说， 例如当有 P个分析单元时， 数据记录集合在静态配置中被划分 成 N个数据块， 那么第 n个数据块将与第 （N%P) 个分析单元匹配。
[0042] 在上述实施例中， 当所述反馈单元反馈的分析单元的数量发生变化时， 所述匹配单 元配置成对所述数据块和所述分析单元进行重新匹配。 可以利用上述实施例中公开的方法来 进行重新匹配的过程。
[0043] 图 2 是根据本发明实施例的分析数据记录集合的方法的步骤流程图。 根据本发明的 另一个目的， 还提出了一种分析数据记录集合的方法， 如图 2所示该方法包括： 数据接收过 程， 在该过程中接收数据记录集合； 静态配置过程， 在该过程中将所述数据记录集合分成多 个数据块， 其中每个数据块包括一条或多条数据记录； 动态决策过程， 在该过程中根据处理 过程的负载情况， 将同一数据块中的数据记录分配给同一分析过程； 处理过程， 包括利用多 个分析单元进行分析的过程， 分析单元中接收并分析在动态决策过程中分配的数据记录。
[0044] 在上述实施例中， 所述静态配置过程包括： 属性设定过程， 在该过程中为数据记录 设定一个或多个属性， 其中， 所述一个或多个属性根据数据记录中的一个或多个字段被设 定。 粒度配置过程， 在该过程中从属性设定过程设定的一个或多个属性选择一个或多个特定 属性， 其中， 所述一个或多个特定属性用作数据划分的粒度， 数据划分过程， 在该过程中将 具有相同的特定属性的属性值的数据记录划分到同一数据块， 使得所述数据记录集合中的记 录被划分到多个数据块。
[0045] 在上述实施例中， 所述动态决策过程包括： 识别过程， 在该过程中识别待分析的数 据记录所属的数据块， 匹配过程， 在该过程中将所述识别的待分析的数据记录所属的数据块 与所述多个分析单元中的一个匹配， 分配过程， 在该过程中将所述待分析的数据记录分配给 与其所属的数据块匹配的分析单元。
[0046] 在上述实施例中， 所述匹配过程包括匹配关系存储过程用于存储数据块与分析单元 的匹配关系， 所述匹配过程进一步包括根据匹配关系判断待分析的数据记录所属的数据块是 否已经与所述多个分析单元中的一个匹配， 所述分配过程进一步包括根据匹配关系分配所述 待分析的数据记录。
[0047] 在上述实施例中， 所述匹配过程进一步包括， 当判断当前待分析的数据记录所属的 数据块未与所述多个分析单元中的一个匹配时， 将该数据块与所述多个分析单元中的一个匹 配， 并存储该匹配关系。 [0048] 在上述实施例中， 所述在匹配过程中将所述数据块与所述分析单元均匀地进行匹 配。
[0049] 在上述实施例中， 在所述匹配过程中， 当该当前待分析的数据记录所属的数据块未 与所述多个分析单元中的一个匹配时， 按序循环选择所述多个分析单元中的一个， 并将该选 择的分析单元与该数据块匹配。
[0050] 在上述实施例中， 所述数据划分过程为每一个数据块设定数据块标识符， 其中所述 数据块标识符作为添加字段被记录到相应的数据记录中， 所述判断过程根据数据块标识符判 断待分析的数据记录所属的数据块。
[0051] 在上述实施例中， 所述处理过程还包括反馈过程， 用于向所述动态决策过程反馈分 析单元的状态信息， 所述状态信息包括分析单元的数量。 所述动态决策过程还包括状态存储 过程， 状态存储过程在该过程中存储分析单元数量， 所述匹配过程根据分析单元的数量将未 进行匹配的数据块与所述多个分析单元进行匹配。
[0052] 在上述实施例中， 所述状态存储过程进一步在该过程中所述分析单元按序存储对应 的自然数标识符， 所述数据块标识符是按顺序分配的自然数， 所述匹配过程通过基于将数据 块标识符对应的自然数除以所述分析单元的数量得到的余数所对应的分析单元的自然数标识 符来将未与分析单元匹配的当前待分析的数据记录所属的数据块与该对应的分析单元匹配。
[0053] 在上述实施例中， 当所述反馈过程反馈的分析单元的数量发生变化时， 所述匹配过 程在该过程中对所述数据块和所述分析单元进行重新匹配。
[0054] 通过以上实施方式的描述， 本领域的技术人员可以清楚地了解到本发明可借助软件 和 /或硬件的方式来实现。 本领域中的普通技术人员能够理解， 在不偏离本发明的精神和范 围的情况下， 还可以对本发明的具体实施方式作各种变更和替换。 这些变更和替换都落在本 发明权利要求书所限定的范围内。

Claims

权利要求
1. 一种分析数据记录集合的系统， 其特征在于， 该系统包括：
数据接收模块， 配置成接收数据记录集合；
静态配置模块， 配置成将所述数据记录集合分成多个数据块， 其中每个数据块包括一条或多 条数据记录；
动态决策模块， 配置成根据处理模块的负载情况， 将同一数据块中的数据记录分配给同一分 析单元；
处理模块， 包括多个分析单元， 该多个分析单元用于接收并分析来自动态决策模块分配的数 据记录。
2. 如权利要求 1所述的系统， 其特征在于， 所述静态配置模块包括：
属性设定单元， 配置成为数据记录设定一个或多个属性， 其中， 所述一个或多个属性根据数 据记录中的一个或多个字段被设定，
粒度配置单元， 配置成从属性设定单元设定的一个或多个属性选择一个或多个特定属性， 其 中， 所述一个或多个特定属性用作数据划分的粒度，
数据划分单元， 配置成将具有相同的特定属性的属性值的数据记录划分到同一数据块， 使得 所述数据记录集合中的记录被划分到多个数据块。
3. 如权利要求 2所述的系统， 其特征在于， 所述动态决策模块包括：
识别单元， 配置成识别待分析的数据记录所属的数据块，
匹配单元， 配置成将所述识别的待分析的数据记录所属的数据块与所述多个分析单元中的一 个匹配，
分配单元， 配置成将所述待分析的数据记录分配给与其所属的数据块匹配的分析单元。
4. 如权利要求 3所述的系统， 其特征在于，
所述匹配单元包括匹配关系存储单元用于存储数据块与分析单元的匹配关系，
所述匹配单元进一步配置成根据匹配关系判断待分析的数据记录所属的数据块是否已经与所 述多个分析单元中的一个匹配，
所述分配单元进一步配置成根据匹配关系分配所述待分析的数据记录。
5. 如权利要求 4 所述的系统， 其特征在于， 所述匹配单元进一步配置成， 当判断当前待分 析的数据记录所属的数据块未与所述多个分析单元中的一个匹配时， 将该数据块与所述多个 分析单元中的一个匹配， 并存储该匹配关系。
6. 如权利要求 5 所述的系统， 其特征在于， 所述匹配单元配置成将所述数据块与所述分析 单元均匀地进行匹配。
7. 如权利要求 6 所述的系统， 其特征在于， 所述匹配单元配置成， 当该当前待分析的数据 记录所属的数据块未与所述多个分析单元中的一个匹配时， 按序循环选择所述多个分析单元 中的一个， 并将该选择的分析单元与该数据块匹配。
8. 如权利要求 7所述的系统， 其特征在于，
所述数据划分单元为每一个数据块设定数据块标识符， 其中所述数据块标识符作为添加字段 被记录到相应的数据记录中，
所述判断单元根据数据块标识符判断待分析的数据记录所属的数据块。
9. 如权利要求 8所述的系统， 其特征在于，
所述处理模块还包括反馈单元， 用于向所述动态决策模块反馈分析单元的状态信息， 所述状 态信息包括分析单元的数量，
所述动态决策模块还包括状态存储单元，
状态存储单元配置成存储分析单元数量，
所述匹配单元根据分析单元的数量将未进行匹配的数据块与所述多个分析单元进行匹配。
10. 如权利要求 9所述的系统， 其特征在于，
所述状态存储单元进一步配置成所述分析单元按序存储对应的自然数标识符，
所述数据块标识符是按顺序分配的自然数，
所述匹配单元通过基于将数据块标识符对应的自然数除以所述分析单元的数量得到的余数所 对应的分析单元的自然数标识符来将未与分析单元匹配的当前待分析的数据记录所属的数据 块与该对应的分析单元匹配。
11. 如权利要求 10 所述的系统， 其特征在于， 当所述反馈单元反馈的分析单元的数量发生 变化时， 所述匹配单元配置成对所述数据块和所述分析单元进行重新匹配。
12. —种分析数据记录集合的方法， 其特征在于， 该方法包括：
数据接收过程， 在该过程中接收数据记录集合；
静态配置过程， 在该过程中将所述数据记录集合分成多个数据块， 其中每个数据块包括一条 或多条数据记录；
动态决策过程， 在该过程中根据处理过程的负载情况， 将同一数据块中的数据记录分配给同 一分析过程；
处理过程， 包括利用多个分析单元进行分析的过程， 分析单元中接收并分析在动态决策过程 中分配的数据记录。
13. 如权利要求 12所述的方法， 其特征在于， 所述静态配置过程包括：
属性设定过程， 在该过程中为数据记录设定一个或多个属性， 其中， 所述一个或多个属性根 据数据记录中的一个或多个字段被设定，
粒度配置过程， 在该过程中从属性设定过程设定的一个或多个属性选择一个或多个特定属 性， 其中， 所述一个或多个特定属性用作数据划分的粒度，
数据划分过程， 在该过程中将具有相同的特定属性的属性值的数据记录划分到同一数据块， 使得所述数据记录集合中的记录被划分到多个数据块。
14. 如权利要求 13所述的方法， 其特征在于， 所述动态决策过程包括：
识别过程， 在该过程中识别待分析的数据记录所属的数据块，
匹配过程， 在该过程中将所述识别的待分析的数据记录所属的数据块与所述多个分析单元中 的一个匹配，
分配过程， 在该过程中将所述待分析的数据记录分配给与其所属的数据块匹配的分析单元。
15. 如权利要求 14所述的方法， 其特征在于，
所述匹配过程包括匹配关系存储过程用于存储数据块与分析单元的匹配关系，
所述匹配过程进一步包括根据匹配关系判断待分析的数据记录所属的数据块是否已经与所述 多个分析单元中的一个匹配，
所述分配过程进一步包括根据匹配关系分配所述待分析的数据记录。
16. 如权利要求 15 所述的方法， 其特征在于， 所述匹配过程进一步包括， 当判断当前待分 析的数据记录所属的数据块未与所述多个分析单元中的一个匹配时， 将该数据块与所述多个 分析单元中的一个匹配， 并存储该匹配关系。
17. 如权利要求 16 所述的方法， 其特征在于， 所述在匹配过程中将所述数据块与所述分析 单元均匀地进行匹配。
18. 如权利要求 17 所述的方法， 其特征在于， 在所述匹配过程中， 当该当前待分析的数据 记录所属的数据块未与所述多个分析单元中的一个匹配时， 按序循环选择所述多个分析单元 中的一个， 并将该选择的分析单元与该数据块匹配。
19. 如权利要求 18所述的方法， 其特征在于，
所述数据划分过程为每一个数据块设定数据块标识符， 其中所述数据块标识符作为添加字段 被记录到相应的数据记录中，
所述判断过程根据数据块标识符判断待分析的数据记录所属的数据块。
20. 如权利要求 19所述的方法， 其特征在于，
所述处理过程还包括反馈过程， 用于向所述动态决策过程反馈分析单元的状态信息， 所述状 态信息包括分析单元的数量，
所述动态决策过程还包括状态存储过程，
状态存储过程在该过程中存储分析单元数量，
所述匹配过程根据分析单元的数量将未进行匹配的数据块与所述多个分析单元进行匹配。
21. 如权利要求 20所述的方法， 其特征在于，
所述状态存储过程进一步在该过程中所述分析单元按序存储对应的自然数标识符， 所述数据块标识符是按顺序分配的自然数，
所述匹配过程通过基于将数据块标识符对应的自然数除以所述分析单元的数量得到的余数所 对应的分析单元的自然数标识符来将未与分析单元匹配的当前待分析的数据记录所属的数据 块与该对应的分析单元匹配。
22. 如权利要求 21 所述的方法， 其特征在于， 当所述反馈过程反馈的分析单元的数量发生 变化时， 所述匹配过程在该过程中对所述数据块和所述分析单元进行重新匹配。
PCT/CN2012/087722 2011-12-31 2012-12-27 一种分析数据记录集合的系统和方法 Ceased WO2013097751A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201110457130.4 2011-12-31
CN201110457130.4A CN103186427B (zh) 2011-12-31 2011-12-31 一种分析数据记录集合的系统和方法

Publications (1)

Publication Number Publication Date
WO2013097751A1 true WO2013097751A1 (zh) 2013-07-04

Family

ID=48677605

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2012/087722 Ceased WO2013097751A1 (zh) 2011-12-31 2012-12-27 一种分析数据记录集合的系统和方法

Country Status (2)

Country Link
CN (1) CN103186427B (zh)
WO (1) WO2013097751A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103473371B (zh) * 2013-09-29 2017-12-15 北大医疗信息技术有限公司 数据压栈系统和取数据压栈方法
CN103530334B (zh) * 2013-09-29 2018-01-23 北大医疗信息技术有限公司 基于比较模板的数据匹配系统和方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1573754A (zh) * 2003-06-24 2005-02-02 微软公司 使用维属性和每维多个分层进行联机分析处理的系统和方法
CN101197876A (zh) * 2006-12-06 2008-06-11 中兴通讯股份有限公司 一种对消息类业务数据进行多维分析的方法和系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11461785B2 (en) * 2008-07-10 2022-10-04 Ron M. Redlich System and method to identify, classify and monetize information as an intangible asset and a production model based thereon

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1573754A (zh) * 2003-06-24 2005-02-02 微软公司 使用维属性和每维多个分层进行联机分析处理的系统和方法
CN101197876A (zh) * 2006-12-06 2008-06-11 中兴通讯股份有限公司 一种对消息类业务数据进行多维分析的方法和系统

Also Published As

Publication number Publication date
CN103186427B (zh) 2016-09-07
CN103186427A (zh) 2013-07-03

Similar Documents

Publication Publication Date Title
CN109726983B (zh) 审批任务分配方法、装置、计算机设备和存储介质
JP6083290B2 (ja) 分散処理システム
CN108304554B (zh) 文件拆分方法、装置、计算机设备和存储介质
US10108458B2 (en) System and method for scheduling jobs in distributed datacenters
WO2019075842A1 (zh) 任务分配方法、装置、存储介质和计算机设备
US10002019B2 (en) System and method for assigning a transaction to a serialized execution group based on an execution group limit for parallel processing with other execution groups
CN111858055B (zh) 任务处理方法、服务器及存储介质
CN111708812A (zh) 一种分布式数据处理方法
WO2019024508A1 (zh) 资源分配方法、主装置、从装置和分布式计算系统
JP6129290B1 (ja) 分散計算におけるアプリケーションパラメータ設定およびシステム仕様設定を推奨する方法およびシステム
US20070106669A1 (en) Ensuring Timely Servicing of Desired Transactions in a Database Server
US20140047454A1 (en) Load balancing in an sap system
CN109285015B (zh) 一种虚拟资源的分配方法及系统
WO2013097751A1 (zh) 一种分析数据记录集合的系统和方法
JP2018525728A (ja) コンピュータ環境からのストリーミングデータセットを分析するための分散型機械学習分析フレームワーク
CN111796934B (zh) 任务下发方法、装置、存储介质和电子设备
CN114238328A (zh) 数据分页查询方法、装置、设备及存储介质
EP4550167A1 (en) Data acquisition method and apparatus, and device
CN116702225B (zh) 基于哈希并行计算快速验证电子档案文件的方法、系统、设备及介质
CN115580583A (zh) 微服务架构下的服务分流方法及装置
CN115913550A (zh) 一种密码资源分配方法、装置及设备
CN107526648A (zh) 一种处理节点设备宕机的方法及装置
CN112433838A (zh) 批量调度方法、装置、设备及计算机存储介质
CN104636347B (zh) 数据处理系统中均衡负载的方法及系统
CN115185677B (zh) 业务数据合并总账方法、装置、计算机设备及介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12863444

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205 DATED 14/11/2014)

122 Ep: pct application non-entry in european phase

Ref document number: 12863444

Country of ref document: EP

Kind code of ref document: A1