CN112434092A - 一种数据处理方法、装置、电子设备和可读存储介质 - Google Patents
一种数据处理方法、装置、电子设备和可读存储介质 Download PDFInfo
- Publication number
- CN112434092A CN112434092A CN202011267616.7A CN202011267616A CN112434092A CN 112434092 A CN112434092 A CN 112434092A CN 202011267616 A CN202011267616 A CN 202011267616A CN 112434092 A CN112434092 A CN 112434092A
- Authority
- CN
- China
- Prior art keywords
- thread
- database
- data processing
- data
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 26
- 238000000034 method Methods 0.000 claims abstract description 43
- 238000012545 processing Methods 0.000 claims abstract description 40
- 230000008569 process Effects 0.000 claims abstract description 21
- 238000004590 computer program Methods 0.000 claims description 4
- 230000004048 modification Effects 0.000 claims description 4
- 238000012986 modification Methods 0.000 claims description 4
- 239000000126 substance Substances 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 3
- 238000011144 upstream manufacturing Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 3
- 238000011143 downstream manufacturing Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000002829 reductive effect Effects 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 238000005034 decoration Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 235000019800 disodium phosphate Nutrition 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000011022 operating instruction Methods 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/252—Integrating or interfacing systems involving database management systems between a Database Management System and a front-end application
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
- G06F9/44521—Dynamic linking or loading; Link editing at or after load time, e.g. Java class loading
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/544—Buffers; Shared memory; Pipes
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请涉及计算机数据处理技术领域，尤其涉及一种数据处理方法、装置、电子设备和可读存储介质，所述方法包括读取系统文件中的目标数据；执行第一线程将所述目标数据加载于第一数据库；执行第二线程对所述第一数据库中的目标数据进行处理；其中所述第一线程和第二线程为独立的并行线程。本申请公开的数据处理方案实现了数据加载和数据处理并行的效果，节省了文件加载的时间，提高了数据批量处理速度和效率。
Description
技术领域
本申请涉及计算机数据处理技术领域，尤其涉及一种数据处理方法、装置、电子设备和可读存储介质。
背景技术
随着计算机数据存储于运行能力的不断提升，计算机中的数据越来越多，对各应用数据同时高效运行的需求也越来越高，对各独立应用中的数据进行批处理是满足上述需求的关键。目前应用系统数据批处理方法基本流程为：首先读取文件并将文件内的格式化数据加载到数据库，然后基于数据库的数据进行批量处理。但是这一过程中一方面需要额外的数据库空间进行数据的暂存，另一方面文件加载需要较长时间，并且在文件加载的过程中也无法进行文件的处理，使得应用系统数据批处理流程时间耗费久。
发明内容
本申请的目的旨在至少能解决上述的技术缺陷之一。本申请所采用的技术方案如下：
第一方面，本申请实施例提供一种数据处理方法，所述方法包括：
读取系统文件中的目标数据；
执行第一线程将所述目标数据加载于第一数据库；
执行第二线程对所述第一数据库中的目标数据进行处理；
其中所述第一线程和第二线程为独立的并行线程。
可选地，在执行第一线程将所述目标数据加载于所述第一数据库之前，所述方法还包括：
判断所述第一线程的执行速度大于所述第二线程的执行速度。
可选地，执行第一线程将所述目标数据加载于第一数据库包括：
读取所述第一数据库的当前剩余容量；
当所述第一数据库的当前剩余容量小于预设阈值时，暂停执行所述第一线程。
可选地，当所述第一数据库的当前剩余容量大于或等于预设阈值时，重新启动执行所述第一线程。
可选地，所述方法还包括：
基于响应式编程框架执行所述数据处理方法。
可选地，所述第一数据库的存储总容量可接受用户的自定义修改。
第二方面，本申请实施例提供了一种数据处理装置，所述装置包括：读取模块、执行模块和存储模块；其中，
所述读取模块，用于读取系统文件中的目标数据；
所述执行模块，用于执行第一线程将所述目标数据加载于第一数据库；
所述执行模块，还用于执行第二线程对所述第一数据库中的目标数据进行处理；其中所述第一线程和第二线程为独立的并行线程；
所述存储模块，用于存储所述第一数据库。
可选地，所述装置还包括判断模块，其中，
所述读取模块还用于读取所述第一数据库的当前剩余容量；
所述判断模块，用于判断所述第一数据库的当前剩余容量小于预设阈值；
第三方面，本发明实施例提供了一种电子设备，包括处理器和存储器；
所述存储器，用于存储操作指令；
所述处理器，用于通过调用所述操作指令，执行上述数据处理方法。
第四方面，一种计算机可读存储介质，所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述数据处理方法。
本申请实施例公开的数据处理方案，所述方案包括：读取系统文件中的目标数据；执行第一线程将所述目标数据加载于第一数据库；执行第二线程对所述第一数据库中的目标数据进行处理；其中所述第一线程和第二线程为独立的并行线程。本申请实施例所提供的数据处理方案带来的有益效果是通过设置将数据处理过程拆分在上下游不同线程中进行独立并行运行，解决了目前现有技术中文件加载过程中无法进行数据处理的问题，达到数据加载和数据处理并行的效果，节省了文件加载的时间；并且通过设置特定的第一数据库，即缓冲区也使得数据批量处理所需的存储空间减少，无需数据库落地数据，从而使整个批量任务所需时间缩短。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍。
图1为本申请实施例提供的一种数据处理方法的流程示意图；
图2为本申请实施例提供的一种数据处理装置的结构示意图；
图3为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本发明的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
如前所述目前的数据批量处理流程存在局限性，基于此本申请公开了一种数据处理方案，以至少解决上述技术问题之一。
下面将结合附图以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
为使本申请的目的、技术方案和优点更加清楚，图1公开了本申请实施例提供的一种数据处理方法的流程图，所述方法应用于编目管理装置，如图1所示，所述方法包括：
S101、读取系统文件中的目标数据；即读取系统文件内的格式化数据。
S102、执行第一线程将所述目标数据加载于第一数据库；在本申请实施例中，所述第一数据库与前述背景技术中介绍的数据处理流程中的数据库不同，所述第一数据库是单独设置的缓冲数据库，也可称之为缓冲区。
S103、执行第二线程对所述第一数据库中的目标数据进行处理；其中所述第一线程和第二线程为独立的并行线程。
在本申请可选实施例中，可以设置只有在所述第一线程的执行速度大于所述第二线程的执行速度时，才启动所述S102和后续的S103步骤。具体的流程可以为：
步骤1、读取系统文件中的格式化数据(目标数据)；
步骤2、执行第一线程将所述读取的格式化数据加载于数据库中；
步骤3、执行第二线程将所述数据库中目标数据进行处理；
当所述步骤2加载于数据库中的数据量大于步骤3处理的数据量时，即步骤2上游读取的速度快于步骤3下游处理的速度时，可以将上游步骤1读取的数据存储于预先设置的第一数据库中，即缓冲区中，并控制所述第二线程从所述缓冲区中读取目标数据并处理。也即步骤2上游读取的速度快于步骤3下游处理的速度时，在步骤1后按照以下流程执行数据处理方法：
步骤2S、执行第一线程将所述读取的格式化数据加载于预设的缓冲区；
步骤3S、执行第二线程读取所述缓冲区中的目标数据进行处理。
在本申请可选实施例中，执行第一线程将所述目标数据加载于第一数据库包括：
读取所述第一数据库的当前剩余容量；
当所述第一数据库的当前剩余容量小于预设阈值时，暂停执行所述第一线程；例如，当所述缓冲区的当前剩余容量小于总容量的3/4时，则暂停步骤2S，而继续进行步骤3S对缓冲区的数据进行读取处理。实时监控所述缓冲区的剩余容量，当所述缓冲区的当前剩余容量大于或等于预设阈值时，例如大于或等于3/4总容量时，重新启动执行所述第一线程将步骤1中读取的文件数据加载于所述缓冲区。
举例来说，如果文件中共有1000万条数据，每条数据加载用时为x，每条数据处理用时为y，则按照传统方法，总的处理时间为1000万*(x+y)，而使用本申请所提供的数据处理方法，则处理时间可以近似于1000万*max(x，y)，且占用空间也非常少，时间和空间复杂度同时得到优化，并且实现简单，不需要对线程、缓冲区进行额外的关注。
基于本申请实施例所述数据处理方法，保证数据处理程序只占用缓冲区大小的内存，但却同时可以保证上游、下游两个线程同步处理，减少了串行处理的等待时间。
在本申请可选实施例中，所述第一数据库的存储总容量可接受用户的自定义修改，以方便用户根据业务需求实现线程的控制。
在本申请可选实施例中，所述方法包括基于响应式编程框架实现所述数据处理方法。响应式编程，简称RP(Reactive Programming)，是一种面向数据流和变化传播的编程范式。这意味着可以在编程语言中很方便地表达静态或动态的数据流，而相关的计算模型会自动将变化的值通过数据流进行传播，例如，在命令式编程环境中，a:＝b+c表示将表达式的结果赋给a，而之后改变b或c的值不会影响a。但在响应式编程中，a的值会随着b或c的更新而更新。
电子表格程序就是响应式编程的一个例子。单元格可以包含字面值或类似"＝B1+C1"的公式，而包含公式的单元格的值会依据其他单元格的值的变化而变化。
响应式编程最初是为了简化交互式用户界面的创建和实时系统动画的绘制而提出来的一种方法，但它本质上是一种通用的编程范式。主流的响应式编程框架(如Rxjava和Reactor)都支持背压机制，此机制允许上游和下游处理运行在不同的线程中。因此可以利用上述响应式编程的背压式机制，实施本申请所述的处理处理方法，并对该背压机制中的上下游运行线程进行一定的适应性设置，即设置缓冲区，具体实现过程为如果上游线程对数据的处理速度快于下游线程，则上游线程会将结果进行暂存，而暂存的结果的数量通过设置的缓冲区的大小来决定。当缓冲区中数据已满，则上游可暂时停止进行数据处理，当缓冲区数据已经被下游取用3/4，存在3/4空余时，上游则继续进行处理。这样既保证了不会占用过大的缓冲区进行数据的缓存，又保证了在上游处理的同时下游也可以进行处理，从而有效节约处理时间。
基于图1所示的实施例提供的数据处理方法，图2示出了本申请实施例提供的一种数据处理装置，如图2所示，该装置主要可以包括：201读取模块、202执行模块和203存储模块；其中，
所述201读取模块，用于读取系统文件中的目标数据；
所述202执行模块，用于执行第一线程将所述目标数据加载于第一数据库；
所述202执行模块，还用于执行第二线程对所述第一数据库中的目标数据进行处理；其中所述第一线程和第二线程为独立的并行线程；
所述203存储模块，用于存储所述第一数据库。
可选地，所述装置还包括204判断模块，其中，
所述201读取模块还用于读取所述第一数据库的当前剩余容量；
所述204判断模块，用于判断所述第一数据库的当前剩余容量是否小于预设阈值；
所述202执行模块，用于根据判断结果暂停或重启执行所述第一线程。
可以理解的是，本实施例中的数据处理装置的上述各模块具有实现图1中所示的实施例中的方法相应步骤的功能。该功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。上述模块可以是软件和/或硬件，上述各模块可以单独实现，也可以多个模块集成实现。对于上述各模块的功能描述具体可以参见图1中所示实施例中的方法的对应描述，在此不再赘述。
本申请实施例提供了一种电子设备，包括处理器和存储器；
存储器，用于存储操作指令；
处理器，用于通过调用操作指令，执行本申请任一实施方式中所提供的数据处理方法。
作为一个示例，图3示出了本申请实施例所适用的一种电子设备的结构示意图，如图3所示，该电子设备2000包括：处理器2001和存储器2003。其中，处理器2001和存储器2003相连，如通过总线2002相连。可选的，电子设备2000还可以包括收发器2004。需要说明的是，实际应用中收发器2004不限于一个，该电子设备2000的结构并不构成对本申请实施例的限定。
其中，处理器2001应用于本申请实施例中，用于实现上述方法实施例所示的方法。收发器2004可以包括接收机和发射机，收发器2004应用于本申请实施例中，用于执行时实现本申请实施例的电子设备与其他设备通信的功能。
处理器2001可以是CPU(Central Processing Unit，中央处理器)，通用处理器，DSP(Digital Signal Processor，数据信号处理器)，ASIC(Application SpecificIntegrated Circuit，专用集成电路)，FPGA(Field Programmable Gate Array，现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器2001也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。
总线2002可包括一通路，在上述组件之间传送信息。总线2002可以是PCI(Peripheral Component Interconnect，外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture，扩展工业标准结构)总线等。总线2002可以分为地址总线、数据总线、控制总线等。为便于表示，图3中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
存储器2003可以是ROM(Read Only Memory，只读存储器)或可存储静态信息和指令的其他类型的静态存储设备，RAM(Random Access Memory，随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM(Electrically ErasableProgrammable Read Only Memory，电可擦可编程只读存储器)、CD-ROM(Compact DiscRead Only Memory，只读光盘)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。
可选的，存储器2003用于存储执行本申请方案的应用程序代码，并由处理器2001来控制执行。处理器2001用于执行存储器2003中存储的应用程序代码，以实现本申请任一实施方式中所提供的数据处理方法。
本申请实施例提供的电子设备，适用于上述方法任一实施例，在此不再赘述。
本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该程序被处理器执行时实现上述方法实施例所示的数据处理方法。
本申请实施例提供的计算机可读存储介质，适用于上述方法任一实施例，在此不再赘述。
本申请实施例公开的数据处理方案，通过设置将数据处理过程拆分在上下游不同线程中进行独立并行运行，解决了目前现有技术中文件加载过程中无法进行数据处理的问题，达到数据加载和数据处理并行的效果，节省了文件加载的时间；并且通过设置特定的第一数据库，即缓冲区也使得数据批量处理所需的存储空间减少，无需数据库落地数据，从而使整个批量任务所需时间缩短。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上仅是本发明的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种数据处理方法，其特征在于，所述方法包括：
读取系统文件中的目标数据；
执行第一线程将所述目标数据加载于第一数据库；
执行第二线程对所述第一数据库中的目标数据进行处理；
其中所述第一线程和第二线程为独立的并行线程。
2.根据权利要求1所述的数据处理方法，其特征在于，在执行第一线程将所述目标数据加载于所述第一数据库之前，所述方法还包括：
判断所述第一线程的执行速度大于所述第二线程的执行速度。
3.根据权利要求2所述的数据处理方法，其特征在于，执行第一线程将所述目标数据加载于第一数据库包括：
读取所述第一数据库的当前剩余容量；
当所述第一数据库的当前剩余容量小于预设阈值时，暂停执行所述第一线程。
4.根据权利要求3所述的数据处理方法，其特征在于，当所述第一数据库的当前剩余容量大于或等于预设阈值时，重新启动执行所述第一线程。
5.根据权利要求4所述的数据处理方法，其特征在于，所述方法还包括：
基于响应式编程框架执行所述数据处理方法。
6.根据权利要求1或5所述的数据处理方法，其特征在于，所述第一数据库的存储容量可接受用户的自定义修改。
7.一种数据处理装置，其特征在于，所述装置包括：读取模块、执行模块和存储模块；其中，
所述读取模块，用于读取系统文件中的目标数据；
所述执行模块，用于执行第一线程将所述目标数据加载于第一数据库；
所述执行模块，还用于执行第二线程对所述第一数据库中的目标数据进行处理；其中所述第一线程和第二线程为独立的并行线程；
所述存储模块，用于存储所述第一数据库。
8.根据权利要求7所述的数据处理装置，其特征在于，所述装置还包括判断模块，其中，
所述读取模块还用于读取所述第一数据库的当前剩余容量；
所述判断模块，用于判断所述第一数据库的当前剩余容量小于预设阈值；
所述执行模块，用于暂停执行所述第一线程。
9.一种电子设备，其特征在于，包括处理器和存储器；
所述存储器，用于存储操作指令；
所述处理器，用于通过调用所述操作指令，执行权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-7中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011267616.7A CN112434092A (zh) | 2020-11-13 | 2020-11-13 | 一种数据处理方法、装置、电子设备和可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011267616.7A CN112434092A (zh) | 2020-11-13 | 2020-11-13 | 一种数据处理方法、装置、电子设备和可读存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112434092A true CN112434092A (zh) | 2021-03-02 |
Family
ID=74699496
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011267616.7A Pending CN112434092A (zh) | 2020-11-13 | 2020-11-13 | 一种数据处理方法、装置、电子设备和可读存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112434092A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116501789A (zh) * | 2023-06-28 | 2023-07-28 | 本原数据(北京)信息技术有限公司 | 数据库数据写入方法和装置、电子设备及存储介质 |
| CN116541102A (zh) * | 2023-06-27 | 2023-08-04 | 荣耀终端有限公司 | 文件预加载方法、装置、电子设备及可读存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110008262A (zh) * | 2019-02-02 | 2019-07-12 | 阿里巴巴集团控股有限公司 | 一种数据导出方法及装置 |
| CN110413428A (zh) * | 2019-08-06 | 2019-11-05 | 中国联合网络通信集团有限公司 | 对账数据的处理方法、电子设备及存储介质 |
| CN110851246A (zh) * | 2019-09-30 | 2020-02-28 | 天阳宏业科技股份有限公司 | 一种批量任务处理方法、装置、系统及存储介质 |
-
2020
- 2020-11-13 CN CN202011267616.7A patent/CN112434092A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110008262A (zh) * | 2019-02-02 | 2019-07-12 | 阿里巴巴集团控股有限公司 | 一种数据导出方法及装置 |
| CN110413428A (zh) * | 2019-08-06 | 2019-11-05 | 中国联合网络通信集团有限公司 | 对账数据的处理方法、电子设备及存储介质 |
| CN110851246A (zh) * | 2019-09-30 | 2020-02-28 | 天阳宏业科技股份有限公司 | 一种批量任务处理方法、装置、系统及存储介质 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116541102A (zh) * | 2023-06-27 | 2023-08-04 | 荣耀终端有限公司 | 文件预加载方法、装置、电子设备及可读存储介质 |
| CN116501789A (zh) * | 2023-06-28 | 2023-07-28 | 本原数据(北京)信息技术有限公司 | 数据库数据写入方法和装置、电子设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9990412B2 (en) | Data driven parallel sorting system and method | |
| CN113918101B (zh) | 一种写数据高速缓存的方法、系统、设备和存储介质 | |
| CN110908697B (zh) | 一种资源打包方法、装置、服务器及存储介质 | |
| US11687242B1 (en) | FPGA board memory data reading method and apparatus, and medium | |
| CN112434092A (zh) | 一种数据处理方法、装置、电子设备和可读存储介质 | |
| KR101857510B1 (ko) | 소팅 | |
| CN110908707B (zh) | 一种资源打包方法、装置、服务器及存储介质 | |
| CN103218263A (zh) | MapReduce参数的动态确定方法及装置 | |
| CN110427258B (zh) | 基于云平台的资源调度控制方法及装置 | |
| CN107291720B (zh) | 一种实现批量数据处理的方法、系统和计算机集群 | |
| JP2012530976A (ja) | 仮想化超並列プログラマブルハードウェアによる正規表現の検索 | |
| US8769233B2 (en) | Adjusting the amount of memory allocated to a call stack | |
| EP1760580A1 (en) | Processing operation information transfer control system and method | |
| US11023277B2 (en) | Scheduling of tasks in a multiprocessor device | |
| WO2021061514A1 (en) | Processor and interrupt controller therein | |
| CN107958414B (zh) | 一种清除cics系统长交易的方法及系统 | |
| US12020076B2 (en) | Techniques for balancing workloads when parallelizing multiply-accumulate computations | |
| CN115081607A (zh) | 基于嵌入算子的反向计算方法、装置、设备以及存储介质 | |
| CN114817212A (zh) | 一种数据库的优化方法及优化装置 | |
| CN107003855B (zh) | 带进位的原子加法指令 | |
| CN111090627B (zh) | 基于池化的日志存储方法、装置、计算机设备及存储介质 | |
| CN117827284B (zh) | 向量处理器访存指令处理方法、系统、设备及存储介质 | |
| CN113126968B (zh) | 任务执行方法、装置、电子设备和存储介质 | |
| CN113110879B (zh) | 指令处理方法及装置 | |
| CN118296084A (zh) | 数据处理设备、指令同步方法、电子设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |