CN113220335B - 一种避免多线程并发写快照数据乱序的方法 - Google Patents

一种避免多线程并发写快照数据乱序的方法 Download PDF

Info

Publication number
CN113220335B
CN113220335B CN202110578388.3A CN202110578388A CN113220335B CN 113220335 B CN113220335 B CN 113220335B CN 202110578388 A CN202110578388 A CN 202110578388A CN 113220335 B CN113220335 B CN 113220335B
Authority
CN
China
Prior art keywords
data
snapshot
writing
tag
hash table
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110578388.3A
Other languages
English (en)
Other versions
CN113220335A (zh
Inventor
马瑞瑞
何清
王毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Thermal Power Research Institute Co Ltd
Original Assignee
Xian Thermal Power Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Thermal Power Research Institute Co Ltd filed Critical Xian Thermal Power Research Institute Co Ltd
Priority to CN202110578388.3A priority Critical patent/CN113220335B/zh
Publication of CN113220335A publication Critical patent/CN113220335A/zh
Application granted granted Critical
Publication of CN113220335B publication Critical patent/CN113220335B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/70—Software maintenance or management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F5/00—Methods or arrangements for data conversion without changing the order or content of the data handled
    • G06F5/06—Methods or arrangements for data conversion without changing the order or content of the data handled for changing the speed of data flow, i.e. speed regularising or timing, e.g. delay lines, FIFO buffers; over- or underrun control therefor
    • G06F5/065—Partitioned buffers, e.g. allowing multiple independent queues, bidirectional FIFO's
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本发明公开了一种避免多线程并发写快照数据乱序的方法，该方法包括：一个写快照伺服线程从FIFO(先进先出)快照队列缓存中获取快照数据包；初始化参数、哈希表和信号事件；获取写快照伺服线程中所有出列快照数据，将数据标签ID写入哈希表Key值列；校验哈希表数据标签是否存在写入冲突；如果不存在数据标签写入冲突，则写快照伺服线程开始向实时数据库写入快照数据，待写快照结束，转至开始；如果存在数据标签写入冲突，则最后一个获取数据的写快照伺服线程开始等待，直至数据标签不存在写入冲突，转至上一步。本发明实现了向实时数据库多线程并发写入快照数据时，避免因出列快照乱序造成快照数据丢失的风险。

Description

一种避免多线程并发写快照数据乱序的方法
技术领域
本发明属于数据处理技术领域，特别是涉及一种避免多线程并发写快照数据乱序的方法。
背景技术
无论是德国工业4.0、美国工业互联网还是《中国制造2025》，各国制造业创新战略的实施基础都是工业大数据的搜集和特征分析，及以此为未来制造系统搭建的无忧环境。数据采集是生产中最实际最高频的需求，也是工业4.0的先决条件。
发电企业需要从DCS、辅控等工控系统采集海量生产实时数据，其数据测点规模通常是几十万甚至百万级别，数据采集频率在毫秒级别，采集到的时序数据需要及时写入实时数据库中，数据写入速度通常在40万点/秒左右，数据写入质量要求非常高。
为了提高向实时数据库写快照的性能，通常由多个伺服线程并发写快照。在这种情况下，如果出现两个伺服线程从快照队列缓存中分别获取到同一个标签的两个时间点的快照数据时，由于网络原因或目标数据库性能原因，会出现时间值大的快照先写入实时数据库，这样写时间值小的快照时实时数据库会报告写快照失败，从而造成快照数据丢失。
发明内容
为了克服上述现有技术存在的问题，本发明的目的在于提供一种避免多线程并发写快照数据乱序的方法，解决了向实时数据库多线程并发写入快照数据时，因出列快照乱序造成快照数据丢失的问题。
为了达到上述目的，本发明采用如下技术方案：
一种避免多线程并发写快照数据乱序的方法，包括以下步骤：
步骤S1：一个写快照伺服线程从先进先出FIFO快照队列缓存中获取快照数据包；
步骤S2：初始化参数、哈希表和信号事件；
步骤S3：获取步骤S1和其他写快照伺服线程中所有出列快照数据，将数据标签ID写入哈希表Key值列，得到哈希表Key值列数据标签；
步骤S4：校验哈希表Key值列数据标签是否存在写入冲突；
步骤S5：如果不存在数据标签写入冲突，则步骤S1中所述写快照伺服线程开始向实时数据库写入快照数据，待写快照结束，清空哈希表转至步骤S1，直至所述快照队列缓存中所有数据全部写入实时数据库；
步骤S6：如果存在数据标签写入冲突，则步骤S1中所述写快照伺服线程开始等待，直至数据标签不存在写入冲突，转至步骤S5。
步骤S2中所述对快照数据包初始化参数、哈希表和信号事件具体如下：
所述初始化参数包括：初始化标签计数器值为0，初始化标签冲突计数器为0；所述标签计数器用于统计标签在不同写快照伺服线程中出现的次数，同一标签在同一写快照伺服线程中仅算1次；所述标签冲突计数器用于记录写快照伺服线程中标签计数器大于1的标签个数；
所述哈希表由两列组成，第一列为Key值，对应于数据标签ID；第二列为标签计数器列，为整形数；
使用CreateEvent函数初始化信号事件，设置信号事件对象为有信号状态；所述信号事件用于标识写快照伺服线程是否能够开始向实时数据库写快照，若信号事件为无信号状态，写快照伺服线程需要等待，若信号事件为有信号状态，写快照伺服线程向实时数据库写数。
步骤S3中所述获取步骤S1和其他写快照伺服线程中所有出列快照数据，将数据标签ID写入哈希表Key值列，重复的数据标签ID在哈希表中只记录一个ID，不重复记录。
步骤S4中所述校验哈希表数据标签是否存在写入冲突，具体包括以下步骤：
步骤S41：遍历哈希表中所有数据标签ID；
步骤S42：针对每个数据标签ID遍历所有写快照伺服线程的数据包，统计哈希表中所述数据标签ID的标签计数器值：如果写快照伺服线程数据包中存在所述数据标签ID，不论存在几个，哈希表中所述数据标签ID对应的标签计数器值自增1；
步骤S43：如果当前遍历的数据标签ID对应的标签计数器值大于1,则标签冲突计数器值自增1，转到步骤S41；
如果所述标签冲突计数器>0,则说明所述哈希表数据标签存在写入冲突；如果所述标签冲突计数器值＝0,则说明所述哈希表数据标签不存在写入冲突。
步骤S5中所述如果不存在数据标签写入冲突，则步骤S1中所述写快照伺服线程开始向实时数据库写入快照数据，待写快照结束，转至步骤S1的步骤S5，具体包括：
步骤S51：如果信号事件状态为有信号状态，获取实时数据库连接；
步骤S52：步骤S1中所述写快照伺服线程向实时数据库写入快照数据；
步骤S53：清空哈希表，转到步骤S1。
步骤S5中所述如果存在数据标签写入冲突，则步骤S1中所述写快照伺服线程开始等待，直至数据标签不存在写入冲突，转至步骤S5，具体包括：
步骤S61：如果存在数据标签写入冲突，则重置信号事件为无信号状态；
步骤S62：步骤S1中所述写快照伺服线程进入等待状态；
步骤S63：其他写数据伺服线程写快照继续向实时数据库写快照；
步骤S64：写数据伺服线程写快照结束后，遍历哈希表数据标签ID，如果哈希表数据标签ID在所述写数据伺服线程中存在，不论存在几个，则哈希表中该数据标签ID对应的标签计数器值自减1；
步骤S65：如果哈希表中该数据标签ID对应的标签计数器值等于1，则标签冲突计数器值自减1；
步骤S66：如果标签冲突计数器值等于0，设置信号事件为有信号状态，转至步骤S5。
所述写快照伺服线程采用串行模式从快照队列缓存中获取数据包，采用多线程并发模式向实时数据库写入数据。
本发明的优点在于：
本发明提供的方法，通过设置标签冲突计数器，辅助判断刚获取到数据包的写快照伺服线程与正在执行快照写入的写快照伺服线程之间是否存在数据标签写入冲突，无冲突则执行写数操作，否则等待存在冲突的线程完成写入操作，冲突消失为止。有效避免了因出列快照乱序造成快照数据丢失的风险；
同时，本发明提供的方法采用串行模式从快照队列缓存中获取数据包，多线程并发模式向实时数据库写入数据，在避免写快照乱序的同时，极大地提高了向实时数据库写快照的性能。
附图说明
图1为本发明的方法步骤图；
图2为本发明的方法流程图；
图3为本发明写快照伺服线程取数、写数流程示意图。
具体实施方式
下面结合附图和实施例,对本发明的具体实施方式作进一步详细描述。以下实施例用于说明本发明，但不用来限制本发明的范围。
如图1和图2所示，本发明一种避免多线程并发写快照数据乱序的方法，包括以下步骤：
步骤S1：一个写快照伺服线程从FIFO(先进先出)快照队列缓存中获取快照数据包。
步骤S2：初始化参数、哈希表和信号事件。
所述初始化参数包括：初始化标签计数器值为0，初始化标签冲突计数器为0；
所述标签计数器用于统计标签在不同写快照伺服线程中出现的次数，同一标签在同一写快照伺服线程中仅算1次；所述标签冲突计数器用于记录写快照伺服线程中标签计数器大于1的标签个数；
所述哈希表由两列组成，第一列为Key值，对应于数据标签ID；第二列为标签计数器列，为整形数；
使用CreateEvent(NULL,TRUE,TRUE,NULL)函数初始化信号事件，设置信号事件对象为有信号状态。所述信号事件用于标识写快照伺服线程是否可以开始向实时数据库写快照，若信号事件为无信号状态，写快照伺服线程需要等待，若信号事件为有信号状态，写快照伺服线程可以向实时数据库写数。
步骤S3：获取步骤S1和其他写快照伺服线程中所有出列快照数据，将数据标签ID写入哈希表Key值列，得到哈希表Key值列数据标签。重复的数据标签ID在哈希表中只记录一个ID，不重复记录。
步骤S4：校验哈希表Key值列数据标签是否存在写入冲突，具体包括以下步骤：
步骤S41：遍历哈希表中所有数据标签ID；
步骤S42：针对每个数据标签ID遍历所有写快照伺服线程的数据包，统计哈希表中所述数据标签ID的标签计数器值：如果写快照伺服线程数据包中存在所述数据标签ID(不论存在几个)，哈希表中所述数据标签ID对应的标签计数器值自增1；
例如，如果某个标签在一个写快照伺服线程的数据包中出现一次或多次，则在本次遍历中，该数据标签ID的标签计数器值自增1，如果在遍历另一个写快照伺服线程的过程中，该数据标签ID再次出现一次或多次，则该数据标签ID的标签计数器值再自增1，直至所有写快照伺服线程遍历完毕，得到该数据标签ID对应的标签计数器值。
步骤S43：如果当前遍历的数据标签ID对应的标签计数器值大于1,则标签冲突计数器值自增1，转到步骤S41。
如果所述标签冲突计数器>0,则说明所述哈希表数据标签存在写入冲突，即步骤S1中所述写快照伺服线程中的所述数据标签ID，在所有出列数据中存在多个快照时间点不同的快照，与正在执行写数据库操作的写快照伺服线程存在写入标签冲突；如果所述标签冲突计数器值＝0,则说明所述哈希表数据标签不存在写入冲突，即步骤S1中所述写快照伺服线程中的所述数据标签ID，在所有出列数据中仅有一个快照数据，与正在执行写数据库操作的写快照伺服线程不存在写入标签冲突。
步骤S5：如果不存在数据标签写入冲突，则步骤S1中所述写快照伺服线程开始向实时数据库写入快照数据，待写快照结束，清空哈希表转至步骤S1，，直至所述快照队列缓存中所有数据全部写入实时数据库；具体包括：
步骤S51：如果信号事件状态为有信号状态，获取实时数据库连接；
步骤S52：步骤S1中所述写快照伺服线程向实时数据库写入快照数据；
步骤S53：清空哈希表，转到步骤S1。
步骤S6：如果存在数据标签写入冲突，则步骤S1中所述写快照伺服线程开始等待，直至数据标签不存在写入冲突，转至步骤S5。具体包括：
步骤S61：如果存在数据标签写入冲突，则重置信号事件为无信号状态；
步骤S62：步骤S1中所述写快照伺服线程进入等待状态；
步骤S63：其他写数据伺服线程写快照继续向实时数据库写快照；
步骤S64：写数据伺服线程写快照结束后，遍历哈希表数据标签ID，如果哈希表数据标签ID在所述写数据伺服线程中存在(不论存在几个)，则哈希表中该数据标签ID对应的标签计数器值自减1；
步骤S65：如果哈希表中该数据标签ID对应的标签计数器值等于1，则标签冲突计数器值自减1；
步骤S66：如果标签冲突计数器值等于0，设置信号事件为有信号状态，转至步骤S5。
如图3所示，写快照伺服线程采用串行模式从快照队列缓存中获取数据包，采用多线程并发模式向实时数据库写入数据。只有写快照伺服线程N开始向实时数据库写快照后，后续写快照伺服线程才可以继续从快照队列缓存中获取数据包。向实时数据库写快照采用多线程并发模式，以提高快照数据写入性能。
本发明的方法仅为较佳的实施方案，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (6)

1.一种避免多线程并发写快照数据乱序的方法，其特征在于，包括以下步骤：
步骤S1：一个写快照伺服线程从先进先出FIFO快照队列缓存中获取快照数据包；
步骤S2：初始化参数、哈希表和信号事件；
步骤S3：获取步骤S1和其他写快照伺服线程中所有出列快照数据，将数据标签ID写入哈希表Key值列，得到哈希表Key值列数据标签；
步骤S4：校验哈希表Key值列数据标签是否存在写入冲突；
步骤S5：如果不存在数据标签写入冲突，则步骤S1中所述写快照伺服线程开始向实时数据库写入快照数据，待写快照结束，清空哈希表转至步骤S1，直至所述快照队列缓存中所有数据全部写入实时数据库；
步骤S6：如果存在数据标签写入冲突，则步骤S1中所述写快照伺服线程开始等待，直至数据标签不存在写入冲突，转至步骤S5；
步骤S2中所述初始化参数、哈希表和信号事件具体如下：
所述初始化参数包括：初始化标签计数器值为0，初始化标签冲突计数器为0；所述标签计数器用于统计标签在不同写快照伺服线程中出现的次数，同一标签在同一写快照伺服线程中仅算1次；所述标签冲突计数器用于记录写快照伺服线程中标签计数器大于1的标签个数；
所述哈希表由两列组成，第一列为Key值，对应于数据标签ID；第二列为标签计数器列，为整形数；
使用CreateEvent函数初始化信号事件，设置信号事件对象为有信号状态；所述信号事件用于标识写快照伺服线程是否能够开始向实时数据库写快照，若信号事件为无信号状态，写快照伺服线程需要等待，若信号事件为有信号状态，写快照伺服线程向实时数据库写数。
2.根据权利要求1所述的一种避免多线程并发写快照数据乱序的方法，其特征在于：步骤S3中所述获取步骤S1和其他写快照伺服线程中所有出列快照数据，将数据标签ID写入哈希表Key值列，重复的数据标签ID在哈希表中只记录一个ID，不重复记录。
3.根据权利要求1所述的一种避免多线程并发写快照数据乱序的方法，其特征在于：步骤S4中所述校验哈希表Key值列数据标签是否存在写入冲突，具体包括以下步骤：
步骤S41：遍历哈希表中所有数据标签ID；
步骤S42：针对每个数据标签ID遍历所有写快照伺服线程的数据包，统计哈希表中所述数据标签ID的标签计数器值：如果写快照伺服线程数据包中存在所述数据标签ID，不论存在几个，哈希表中所述数据标签ID对应的标签计数器值自增1；
步骤S43：如果当前遍历的数据标签ID对应的标签计数器值大于1,则标签冲突计数器值自增1，转到步骤S41；
如果所述标签冲突计数器>0,则说明所述哈希表数据标签存在写入冲突；如果所述标签冲突计数器值＝0,则说明所述哈希表数据标签不存在写入冲突。
4.根据权利要求1所述的一种避免多线程并发写快照数据乱序的方法，其特征在于：步骤S5中所述如果不存在数据标签写入冲突，则步骤S1中所述写快照伺服线程开始向实时数据库写入快照数据，待写快照结束，转至步骤S1的步骤S5，具体包括：
步骤S51：如果信号事件状态为有信号状态，获取实时数据库连接；
步骤S52：步骤S1中所述写快照伺服线程向实时数据库写入快照数据；
步骤S53：清空哈希表，转到步骤S1。
5.根据权利要求1所述的一种避免多线程并发写快照数据乱序的方法，其特征在于：步骤S5中所述如果存在数据标签写入冲突，则步骤S1中所述写快照伺服线程开始等待，直至数据标签不存在写入冲突，转至步骤S5，具体包括：
步骤S61：如果存在数据标签写入冲突，则重置信号事件为无信号状态；
步骤S62：步骤S1中所述写快照伺服线程进入等待状态；
步骤S63：其他写数据伺服线程写快照继续向实时数据库写快照；
步骤S64：写数据伺服线程写快照结束后，遍历哈希表数据标签ID，如果哈希表数据标签ID在所述写数据伺服线程中存在，不论存在几个，则哈希表中该数据标签ID对应的标签计数器值自减1；
步骤S65：如果哈希表中该数据标签ID对应的标签计数器值等于1，则标签冲突计数器值自减1；
步骤S66：如果标签冲突计数器值等于0，设置信号事件为有信号状态，转至步骤S5。
6.根据权利要求1所述的一种避免多线程并发写快照数据乱序的方法，其特征在于，所述写快照伺服线程采用串行模式从快照队列缓存中获取数据包，采用多线程并发模式向实时数据库写入数据。
CN202110578388.3A 2021-05-26 2021-05-26 一种避免多线程并发写快照数据乱序的方法 Active CN113220335B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110578388.3A CN113220335B (zh) 2021-05-26 2021-05-26 一种避免多线程并发写快照数据乱序的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110578388.3A CN113220335B (zh) 2021-05-26 2021-05-26 一种避免多线程并发写快照数据乱序的方法

Publications (2)

Publication Number Publication Date
CN113220335A CN113220335A (zh) 2021-08-06
CN113220335B true CN113220335B (zh) 2023-03-14

Family

ID=77098677

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110578388.3A Active CN113220335B (zh) 2021-05-26 2021-05-26 一种避免多线程并发写快照数据乱序的方法

Country Status (1)

Country Link
CN (1) CN113220335B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103078811A (zh) * 2013-01-31 2013-05-01 北京金和软件股份有限公司 一种基于多线程环境网络数据包乱序控制方法
CN103645942A (zh) * 2013-12-12 2014-03-19 北京奇虎科技有限公司 基于消息队列的共享内存写入及读取方法和系统
CN104461876A (zh) * 2014-11-26 2015-03-25 北京航空航天大学 一种基于运行快照序列的并行程序重现调试方法
CN104750720A (zh) * 2013-12-30 2015-07-01 中国银联股份有限公司 多线程并发访问环境下高性能数据处理的实现
US9128750B1 (en) * 2008-03-03 2015-09-08 Parakinetics Inc. System and method for supporting multi-threaded transactions
CN105868123A (zh) * 2016-04-07 2016-08-17 武汉数字派特科技有限公司 一种并发数据的缓存结构及方法
WO2020119050A1 (en) * 2018-12-11 2020-06-18 Huawei Technologies Co., Ltd. Write-write conflict detection for multi-master shared storage database
CN111858626A (zh) * 2020-06-04 2020-10-30 武汉达梦数据库有限公司 一种基于并行执行的数据同步的方法和装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003001405A1 (en) * 2001-06-25 2003-01-03 Nokia Corporation Method and system for performing concurrency control in a relational database
US8468508B2 (en) * 2009-10-09 2013-06-18 International Business Machines Corporation Parallelization of irregular reductions via parallel building and exploitation of conflict-free units of work at runtime
US11321299B2 (en) * 2016-02-01 2022-05-03 Verizon Patent And Licensing Inc. Scalable conflict detection in transaction management

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9128750B1 (en) * 2008-03-03 2015-09-08 Parakinetics Inc. System and method for supporting multi-threaded transactions
CN103078811A (zh) * 2013-01-31 2013-05-01 北京金和软件股份有限公司 一种基于多线程环境网络数据包乱序控制方法
CN103645942A (zh) * 2013-12-12 2014-03-19 北京奇虎科技有限公司 基于消息队列的共享内存写入及读取方法和系统
CN104750720A (zh) * 2013-12-30 2015-07-01 中国银联股份有限公司 多线程并发访问环境下高性能数据处理的实现
CN104461876A (zh) * 2014-11-26 2015-03-25 北京航空航天大学 一种基于运行快照序列的并行程序重现调试方法
CN105868123A (zh) * 2016-04-07 2016-08-17 武汉数字派特科技有限公司 一种并发数据的缓存结构及方法
WO2020119050A1 (en) * 2018-12-11 2020-06-18 Huawei Technologies Co., Ltd. Write-write conflict detection for multi-master shared storage database
CN111858626A (zh) * 2020-06-04 2020-10-30 武汉达梦数据库有限公司 一种基于并行执行的数据同步的方法和装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
一种基于AC-Bloom技术的多线程处理器数据存取队列机制设计;田金等;《微电子学与计算机》;20150605(第06期);全文 *
基于多核PC的事务内存重复探测Hash冲突检测算法;张婷等;《现代计算机》;20130415(第11期);全文 *
多进程共享的高效哈希表;张伟等;《计算机工程与设计》;20170516(第05期);全文 *

Also Published As

Publication number Publication date
CN113220335A (zh) 2021-08-06

Similar Documents

Publication Publication Date Title
US11550618B2 (en) Transaction commit operations with thread decoupling
US7039773B2 (en) Method and mechanism for efficient implementation of ordered records
US7302684B2 (en) Systems and methods for managing a run queue
US10599630B2 (en) Elimination of log file synchronization delay at transaction commit time
US8250111B2 (en) Automatic detection and correction of hot pages in a database system
US20050262170A1 (en) Real-time apply mechanism in standby database environments
US20020194250A1 (en) Sleep queue management
CN110347440B (zh) 基于多进程并发和插件向数据库快速加载数据方法和系统
CN109558452B (zh) 一种查询建表操作的同步方法
CN104750720A (zh) 多线程并发访问环境下高性能数据处理的实现
CN108255621A (zh) 一种基于binlog的MySQL增量消息解析方法
CN113220335B (zh) 一种避免多线程并发写快照数据乱序的方法
CN114116665B (zh) 数据库中并行写入事务日志以提升处理效率的方法
US7882337B2 (en) Method and system for efficient tentative tracing of software in multiprocessors
US20100191508A1 (en) Detecting and Recording Performance Events in a Data Processing System
CN112749106A (zh) 一种基于fpga的中断管理方法
US11847487B2 (en) Task completion system allowing tasks to be completed out of order while reporting completion in the original ordering my
CN114756287A (zh) 一种重排序缓冲区的数据处理方法、装置及存储介质
CN112965805A (zh) 基于内存映射文件的跨进程异步任务处理方法及系统
CN111198659B (zh) 基于多滑动窗口实现的并发i/o流模型识别方法及系统
KR102381776B1 (ko) 인공지능 기능 처리 및 데이터 수집을 동시 수행하는 데이터 처리장치 및 그 방법
CN104145244A (zh) 用于视频分析和编码的智能msi-x中断
US8856147B1 (en) Method of sorting data on a limited resource computer
US11972361B2 (en) Performance optimization of object grouping schema in a network key-value storage device using adaptive regression
US20210232946A1 (en) Performance optimization of object grouping schema in a network key-value storage device using adaptive regression

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant