CN107391508A - 数据加载方法和系统 - Google Patents

数据加载方法和系统 Download PDF

Info

Publication number
CN107391508A
CN107391508A CN201610323245.7A CN201610323245A CN107391508A CN 107391508 A CN107391508 A CN 107391508A CN 201610323245 A CN201610323245 A CN 201610323245A CN 107391508 A CN107391508 A CN 107391508A
Authority
CN
China
Prior art keywords
data
burst
node
information table
loaded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610323245.7A
Other languages
English (en)
Other versions
CN107391508B (zh
Inventor
江峰
李杨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Fengchi Shunxing Information Technology Co Ltd
Original Assignee
SF Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SF Technology Co Ltd filed Critical SF Technology Co Ltd
Priority to CN201610323245.7A priority Critical patent/CN107391508B/zh
Publication of CN107391508A publication Critical patent/CN107391508A/zh
Application granted granted Critical
Publication of CN107391508B publication Critical patent/CN107391508B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/254Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种数据加载方法和系统,所述方法包括按预设规则生成对应于待加载数据的分片信息表。其中,分片信息表包括待加载数据中每组数据的数据表主键和对应的分片索引。在各节点的配置文件中分别配置本节点所要处理的分片索引和任务数。各节点的任务分配单元分别读取本节点的配置文件,配置本节点加载数据的任务执行单元数量。各任务执行单元根据分配的分片索引加载对应的数据,删除分片信息表中对应的数据表主键。本发明通过对待加载数据进行分片,生成分片信息表,通过分片索引对各节点分配加载任务,并在加载数据时删除对应的数据主键,实现了避免重复加载数据,且支持分布式并发加载数据,且无需在数据库中标记加载状态,提高了加载速度。

Description

数据加载方法和系统
技术领域
本申请涉及数据加载技术领域,进一步涉及关系型数据库的数据快速加载,具体涉及一种数据加载方法和系统。
背景技术
随着社会信息化的发展,近年来全球最大数据库的容量呈指数增长趋势,如何对海量数据进行存储、及时加载和高效查询成为数据库应用研究领域的热点之一。
目前常用的数据加载方式为,根据数据的主键,分批查询得到数据,进行计算,再根据数据主键删除数据,或更新数据状态为已加载。
普通的多线程数据加载方式可能会重复加载单条(组)数据,而标记数据状态为已加载的过程耗时较长。因此上述数据加载方式用时较长,难以满足高速加载数据的需求,同时对并发读取的支持不够,难以满足大数据计算对时效的要求。
发明内容
鉴于现有技术中的上述缺陷或不足,期望提供一种避免重复加载数据且支持分布式并发加载数据的数据加载方法和系统。
第一方面,本发明提供一种数据加载方法,所述方法包括:
按预设规则生成对应于待加载数据的分片信息表。其中,所述分片信息表包括所述待加载数据中每组数据的数据表主键和对应的分片索引。
在各节点的配置文件中分别配置本节点所要处理的分片索引和任务数。
各节点的任务分配单元分别读取本节点的配置文件,配置本节点中加载所述待加载数据的任务执行单元的数量。
各任务执行单元根据本节点的任务分配单元分配的分片索引加载对应的数据,删除所加载数据在所述分片信息表中的数据表主键。
第二方面,本发明还提供一种数据加载系统,所述系统包括若干节点,其中至少一个节点包括:
分片信息配置单元,用于按预设规则生成对应于待加载数据的分片信息表,在各所述节点的配置文件中分别配置本节点所要处理的分片索引和任务数。其中,所述分片信息表包括所述待加载数据中每组数据的数据表主键和对应的分片索引。
各所述节点分别包括:
任务分配单元,用于读取本节点的配置文件,配置本节点中加载所述待加载数据的任务执行单元的数量。
若干任务执行单元,用于根据本节点的任务分配单元分配的分片索引加载对应的数据,删除所加载数据在所述分片信息表中的数据表主键。
本发明诸多实施例提供的数据加载方法和系统通过对待加载数据进行分片,生成包括分片索引和数据主键的分片信息表,通过分片索引对各节点分配加载任务,并在加载数据时删除分片信息表中对应的数据主键,实现了避免重复加载数据的同时支持分布式并发加载数据,并且无需在数据库中标记加载状态,提高了加载速度;
本发明一些实施例提供的数据加载方法和系统进一步通过对待加载数据中每组数据的预定字段进行哈希运算和求余运算,得到对应的分片索引,从而生成分片信息表,实现对待加载数据的均匀分片,从而提高了加载效率;
本发明一些实施例提供的数据加载方法和系统进一步通过根据系统内的节点数量和每个节点的工作状态确定分片数量,实现对各节点分配适量的加载任务,从而提高了加载效率;
本发明一些实施例提供的数据加载方法和系统进一步通过各节点的各任务执行单元在加载数据时执行预设的运算任务,提高了系统内计算资源的利用率。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1为本发明一实施例中数据加载方法的流程图。
图2为本发明一实施例中数据加载系统中一节点的结构示意图。
图3为图1所示数据加载方法中步骤S10的流程图。
图4为图3所示步骤S10的一种优选实施方式的流程图。
图5为图1所示数据加载方法中步骤S70的流程图。
图6为图5所示步骤S70的一种优选实施方式的流程图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
图1为本发明一实施例中数据加载方法的流程图。
如图1所示,在本实施例中,本发明提供的数据加载方法包括:
S10:按预设规则生成对应于待加载数据的分片信息表。其中,所述分片信息表包括所述待加载数据中每组数据的数据表主键和对应的分片索引。
S30:在各节点的配置文件中分别配置本节点所要处理的分片索引和任务数。
S50:各节点的任务分配单元分别读取本节点的配置文件,配置本节点中加载所述待加载数据的任务执行单元的数量。
S70:各任务执行单元根据本节点的任务分配单元分配的分片索引加载对应的数据,删除所加载数据在所述分片信息表中的数据表主键。
图2为本发明一实施例中数据加载系统中一节点的结构示意图。所述系统包括若干节点,图1所示的数据加载方法可以应用在所述系统中。
如图2所示,所述若干节点中的至少一个节点10包括分片信息配置单元101。分片信息配置单元101用于按预设规则生成对应于待加载数据的分片信息表,在各所述节点的存储单元102所存储的配置文件中分别配置本节点所要处理的分片索引和任务数。其中,所述分片信息表包括所述待加载数据中每组数据的数据表主键和对应的分片索引。
各所述节点还包括一个任务分配单元103和若干个任务执行单元105。
任务分配单元103用于读取本节点的配置文件,配置本节点中加载所述待加载数据的任务执行单元105的数量。
任务执行单元105用于根据本节点的任务分配单元103分配的分片索引加载对应的数据,删除所加载数据在所述分片信息表中的数据表主键。
具体地,在本实施例中,所述待加载数据采用分布式的存储方式存储在各所述节点中,所述系统中的所有节点均配置有分片信息配置单元101。在更多的实施例中,可以根据实际需求选择将所述待加载数据存储在一个或若干个节点中,同时可以根据实际需求选择在一个或若干个节点中配置分片信息配置单元101,只要系统中有一个节点的分片信息配置单元101能按预设规则生成对应于待加载数据的分片信息表,即可实现相同的技术效果。
上述实施例通过对待加载数据进行分片,生成包括分片索引和数据主键的分片信息表,通过分片索引对各节点分配加载任务,并在加载数据时删除分片信息表中对应的数据主键,实现了避免重复加载数据的同时支持分布式并发加载数据,并且无需在数据库中标记加载状态,提高了加载速度。
此外,在加载海量数据时,由于上述方法中的步骤是持续进行的,因此上述方法的步骤可以同时进行,在步骤S10中,分片信息配置单元101持续向分片信息表写入每组数据的数据表主键和对应的分片索引的同时,步骤S70中,任务执行单元105同时在分片信息表中不断删除已加载数据的数据表主键,从而使分片信息表中的数据保持较少的体量,而不会无限增长,从而保障了在加载海量数据时,数据加载的效率不受影响。
图3为图1所示数据加载方法中步骤S10的流程图。
如图3所示,在一优选实施例中,步骤S10包括:
S103:根据分片数量生成分片索引。
S105:对所述待加载数据中每组数据的预定字段进行哈希运算和求余运算,得到对应的分片索引,在分片信息表中存储本组数据的数据表主键和对应的分片索引。
在与上述数据加载方法对应的数据加载系统中,分片信息配置单元101还用于根据分片数量生成所述分片索引。所述按预设规则生成对应于待加载数据的分片信息表包括对所述待加载数据中每组数据的预定字段进行哈希运算和求余运算,得到对应的分片索引,在分片信息表中存储本组数据的数据表主键和对应的分片索引。
具体地,在本实施例中,所述每组数据为每组运单信息,所述预定字段为运单号。
在步骤S103中,例如分片数量为n,则分片索引为0、1…n-1。
在步骤S105中,对于每一组运单信息的运单号mx进行哈希运算和求余运算,对mx的哈希值取除以n的余数,其中x为该组运单信息的数据表主键,得到对应的分片索引i:
i=hash(mx)mod n;
并在所述分片信息表中存储本组数据的数据表主键和对应的分片索引(i,x)。
上述实施例进一步通过对待加载数据中每组数据的预定字段进行哈希运算和求余运算,得到对应的分片索引,从而生成分片信息表,实现对待加载数据的均匀分片,从而提高了加载效率。
图4为图3所示步骤S10的一种优选实施方式的流程图。
如图4所示,在一优选实施例中,步骤S103之前还包括:
S101:根据系统内的节点数量和每个节点的工作状态确定分片数量。
相对应地,分片信息配置单元101还用于根据系统内的节点数量和每个节点的工作状态确定分片数量。
上述实施例进一步通过根据系统内的节点数量和每个节点的工作状态确定分片数量,实现对各节点分配适量的加载任务,从而提高了加载效率。
图5为图1所示数据加载方法中步骤S70的流程图。
如图5所示,在一优选实施例中,步骤S70包括:
S701:各任务执行单元分别获取本节点的任务分配单元分配的分片索引。
S703:各任务执行单元在所述分片信息表中读取与所获取分片索引对应的各数据表主键,根据所读取的各数据表主键加载对应的各组数据。
S705:在所述分片信息表中删除所加载各组数据对应的各数据表主键。
S707:向本节点的任务分配单元归还加载完数据的分片索引,循环上述步骤直至任务分配单元分配完配置文件中的分片索引。
相对应地,任务执行单元105用于获取本节点的任务分配单元103分配的分片索引;在所述分片信息表中读取与所获取分片索引对应的各数据表主键,根据所读取的各数据表主键加载对应的各组数据;在所述分片信息表中删除所加载各组数据对应的各数据表主键;向本节点的任务分配单元归还加载完数据的分片索引。
图6为图5所示步骤S70的一种优选实施方式的流程图。
如图6所示,在一优选实施例中,步骤S705之前还包括:
S704:根据所加载的数据执行预设的运算任务。
相对应地,任务执行单元105还用于根据所加载的数据执行预设的运算任务。
上述实施例进一步通过各节点的各任务执行单元在加载数据时执行预设的运算任务,提高了系统内计算资源的利用率。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,所述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这根据所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以通过执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以通过专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元或模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元或模块也可以设置在处理器中,例如,分片信息配置单元101可以是设置在计算机或移动智能设备中的软件程序,也可以是单独进行分片信息配置的硬件。其中,这些单元或模块的名称在某种情况下并不构成对该单元或模块本身的限定,例如,任务执行单元105还可以被描述为“用于加载数据的数据加载单元”。
作为另一方面,本申请还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中所述装置中所包含的计算机可读存储介质;也可以是单独存在,未装配入设备中的计算机可读存储介质。计算机可读存储介质存储有一个或者一个以上程序,所述程序被一个或者一个以上的处理器用来执行描述于本申请的公式输入方法。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离所述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (12)

1.一种数据加载方法,其特征在于,所述方法包括:
按预设规则生成对应于待加载数据的分片信息表;其中,所述分片信息表包括所述待加载数据中每组数据的数据表主键和对应的分片索引;
在各节点的配置文件中分别配置本节点所要处理的分片索引和任务数;
各节点的任务分配单元分别读取本节点的配置文件,配置本节点中加载所述待加载数据的任务执行单元的数量;
各任务执行单元根据本节点的任务分配单元分配的分片索引加载对应的数据,删除所加载数据在所述分片信息表中的数据表主键。
2.根据权利要求1所述的数据加载方法,其特征在于,所述按预设规则生成对应于待加载数据的分片信息表包括:
根据分片数量生成分片索引;
对所述待加载数据中每组数据的预定字段进行哈希运算和求余运算,得到对应的分片索引,在分片信息表中存储本组数据的数据表主键和对应的分片索引。
3.根据权利要求2所述的数据加载方法,其特征在于,所述每组数据为每组运单信息,所述预定字段为运单号。
4.根据权利要求2所述的数据加载方法,其特征在于,所述根据分片数量确定分片索引之前还包括:
根据系统内的节点数量和每个节点的工作状态确定分片数量。
5.根据权利要求1-4任一项所述的数据加载方法,其特征在于,所述各任务执行单元根据本节点的任务分配单元分配的分片索引加载对应的数据,删除所加载数据在所述分片信息表中的数据表主键包括:
各任务执行单元分别获取本节点的任务分配单元分配的分片索引;
各任务执行单元在所述分片信息表中读取与所获取分片索引对应的各数据表主键,根据所读取的各数据表主键加载对应的各组数据;
在所述分片信息表中删除所加载各组数据对应的各数据表主键;
向本节点的任务分配单元归还加载完数据的分片索引,循环上述步骤直至任务分配单元分配完配置文件中的分片索引。
6.根据权利要求5所述的数据加载方法,其特征在于,所述在所述分片信息表中删除所加载各组数据对应的各数据表主键之前还包括:
根据所加载的数据执行预设的运算任务。
7.一种数据加载系统,其特征在于,所述系统包括若干节点,其中至少一个节点包括:
分片信息配置单元,用于按预设规则生成对应于待加载数据的分片信息表,在各所述节点的配置文件中分别配置本节点所要处理的分片索引和任务数;其中,所述分片信息表包括所述待加载数据中每组数据的数据表主键和对应的分片索引;
各所述节点分别包括:
任务分配单元,用于读取本节点的配置文件,配置本节点中加载所述待加载数据的任务执行单元的数量;
若干任务执行单元,用于根据本节点的任务分配单元分配的分片索引加载对应的数据,删除所加载数据在所述分片信息表中的数据表主键。
8.根据权利要求7所述的数据加载系统,其特征在于,所述分片信息配置单元还用于根据分片数量生成所述分片索引;
所述按预设规则生成对应于待加载数据的分片信息表包括对所述待加载数据中每组数据的预定字段进行哈希运算和求余运算,得到对应的分片索引,在分片信息表中存储本组数据的数据表主键和对应的分片索引。
9.根据权利要求8所述的数据加载系统,其特征在于,所述每组数据为每组运单信息,所述预定字段为运单号。
10.根据权利要求8所述的数据加载系统,其特征在于,所述分片信息配置单元还用于根据系统内的节点数量和每个节点的工作状态确定分片数量。
11.根据权利要求7-10任一项所述的数据加载系统,其特征在于,所述根据本节点的任务分配单元分配的分片索引加载对应的数据,删除所加载数据在所述分片信息表中的数据表主键包括:
获取本节点的任务分配单元分配的分片索引;在所述分片信息表中读取与所获取分片索引对应的各数据表主键,根据所读取的各数据表主键加载对应的各组数据;在所述分片信息表中删除所加载各组数据对应的各数据表主键;向本节点的任务分配单元归还加载完数据的分片索引。
12.根据权利要求11所述的数据加载系统,其特征在于,所述任务执行单元还用于根据所加载的数据执行预设的运算任务。
CN201610323245.7A 2016-05-16 2016-05-16 数据加载方法和系统 Active CN107391508B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610323245.7A CN107391508B (zh) 2016-05-16 2016-05-16 数据加载方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610323245.7A CN107391508B (zh) 2016-05-16 2016-05-16 数据加载方法和系统

Publications (2)

Publication Number Publication Date
CN107391508A true CN107391508A (zh) 2017-11-24
CN107391508B CN107391508B (zh) 2020-07-17

Family

ID=60338249

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610323245.7A Active CN107391508B (zh) 2016-05-16 2016-05-16 数据加载方法和系统

Country Status (1)

Country Link
CN (1) CN107391508B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108763403A (zh) * 2018-05-22 2018-11-06 中国建设银行股份有限公司 一种数据卸载方法和装置
CN108897858A (zh) * 2018-06-29 2018-11-27 北京奇虎科技有限公司 分布式集群索引分片的评估方法及装置、电子设备
CN109032796A (zh) * 2018-07-18 2018-12-18 北京京东金融科技控股有限公司 一种数据处理方法和装置
CN110928941A (zh) * 2019-11-28 2020-03-27 杭州数梦工场科技有限公司 一种数据分片抽取方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101405728A (zh) * 2006-05-31 2009-04-08 国际商业机器公司 具有动态加载能力的关系数据库架构
CN102938001A (zh) * 2012-12-10 2013-02-20 曙光信息产业(北京)有限公司 数据加载装置和数据加载方法
US20150088924A1 (en) * 2013-09-23 2015-03-26 Daniel ABADI Schema-less access to stored data
US20150106796A1 (en) * 2013-10-15 2015-04-16 Fujitsu Technology Solutions Intellectual Property Gmbh Class loading device for a java runtime environment, cluster system and method of executing a function
CN104765748A (zh) * 2014-01-07 2015-07-08 中国移动通信集团江西有限公司 一种将复制表转换为分片表的方法及装置
CN105095384A (zh) * 2015-07-01 2015-11-25 北京京东尚科信息技术有限公司 数据结转的方法和装置
CN105260485A (zh) * 2015-11-20 2016-01-20 杭州数梦工场科技有限公司 一种数据加载的方法和装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101405728A (zh) * 2006-05-31 2009-04-08 国际商业机器公司 具有动态加载能力的关系数据库架构
CN102938001A (zh) * 2012-12-10 2013-02-20 曙光信息产业(北京)有限公司 数据加载装置和数据加载方法
US20150088924A1 (en) * 2013-09-23 2015-03-26 Daniel ABADI Schema-less access to stored data
US20150106796A1 (en) * 2013-10-15 2015-04-16 Fujitsu Technology Solutions Intellectual Property Gmbh Class loading device for a java runtime environment, cluster system and method of executing a function
CN104765748A (zh) * 2014-01-07 2015-07-08 中国移动通信集团江西有限公司 一种将复制表转换为分片表的方法及装置
CN105095384A (zh) * 2015-07-01 2015-11-25 北京京东尚科信息技术有限公司 数据结转的方法和装置
CN105260485A (zh) * 2015-11-20 2016-01-20 杭州数梦工场科技有限公司 一种数据加载的方法和装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108763403A (zh) * 2018-05-22 2018-11-06 中国建设银行股份有限公司 一种数据卸载方法和装置
CN108897858A (zh) * 2018-06-29 2018-11-27 北京奇虎科技有限公司 分布式集群索引分片的评估方法及装置、电子设备
CN108897858B (zh) * 2018-06-29 2021-06-22 北京奇虎科技有限公司 分布式集群索引分片的评估方法及装置、电子设备
CN109032796A (zh) * 2018-07-18 2018-12-18 北京京东金融科技控股有限公司 一种数据处理方法和装置
CN109032796B (zh) * 2018-07-18 2020-12-22 北京京东金融科技控股有限公司 一种数据处理方法和装置
CN110928941A (zh) * 2019-11-28 2020-03-27 杭州数梦工场科技有限公司 一种数据分片抽取方法及装置
CN110928941B (zh) * 2019-11-28 2023-10-27 杭州数梦工场科技有限公司 一种数据分片抽取方法及装置

Also Published As

Publication number Publication date
CN107391508B (zh) 2020-07-17

Similar Documents

Publication Publication Date Title
Chen Scheduling of nonresumable jobs and flexible maintenance activities on a single machine to minimize makespan
Sels et al. A comparison of priority rules for the job shop scheduling problem under different flow time-and tardiness-related objective functions
Wang et al. A branch-and-bound algorithm for two-stage no-wait hybrid flow-shop scheduling
Subramanian et al. An iterated local search heuristic for the single machine total weighted tardiness scheduling problem with sequence-dependent setup times
Lei et al. A shuffled frog-leaping algorithm for hybrid flow shop scheduling with two agents
CN107391508A (zh) 数据加载方法和系统
Ronconi et al. Mixed-integer programming models for flowshop scheduling problems minimizing the total earliness and tardiness
CN106649401A (zh) 分布式文件系统中的数据写入方法和装置
CN112801448B (zh) 物料需求分配方法、装置、系统及存储介质
Pooranian et al. New hybrid algorithm for task scheduling in grid computing to decrease missed task
Hasani et al. Block models for scheduling jobs on two parallel machines with a single server
Abdulkader et al. Scheduling and sequencing in four machines robotic cell: Application of genetic algorithm and enumeration techniques
CN110019353A (zh) 一种数据处理方法及装置
CN106250110A (zh) 建立模型的方法及装置
CN102034162A (zh) 一种mrp运算方法以及装置
Huang et al. Batch scheduling in differentiation flow shops for makespan minimisation
JP5779537B2 (ja) 生産シミュレーション装置、生産シミュレーション方法及び、生産シミュレーションプログラム
Lee et al. Coordination mechanisms with hybrid local policies
Pitakaso et al. Combining population-based and exact methods for multi-level capacitated lot-sizing problems
CN106156049A (zh) 一种数据读取的方法和系统
CN112884248B (zh) 一种大规模云服务流程的优化方法
Frohner et al. Parallel beam search for combinatorial optimization
CN112328575A (zh) 数据资产血缘生成方法、装置、电子设备
Germs et al. Admission policies for the customized stochastic lot scheduling problem with strict due-dates
CN104598567B (zh) 一种基于Hadoop MapReduce编程框架的数据统计排重的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210427

Address after: 518061 B1202, building 1, software industry base, No. 81, 83 and 85, Gaoxin South 10th Road, Binhai community, Yuehai street, Nanshan District, Shenzhen City, Guangdong Province

Patentee after: Shenzhen Fengchi Shunxing Information Technology Co.,Ltd.

Address before: 518061 Guangdong city of Shenzhen province Nanshan District Xuefu Road (South) and Whitehead Road (East) at the junction of Shenzhen software industry base building 1 floor 6-13 building B

Patentee before: SF TECHNOLOGY Co.,Ltd.