CN112131206B - 一种多模型数据库OrientDB参数配置自动调优方法 - Google Patents
一种多模型数据库OrientDB参数配置自动调优方法 Download PDFInfo
- Publication number
- CN112131206B CN112131206B CN202011029986.7A CN202011029986A CN112131206B CN 112131206 B CN112131206 B CN 112131206B CN 202011029986 A CN202011029986 A CN 202011029986A CN 112131206 B CN112131206 B CN 112131206B
- Authority
- CN
- China
- Prior art keywords
- orientdb
- tuning
- parameter configuration
- model
- performance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/217—Database tuning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3452—Performance evaluation by statistical analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/80—Database-specific techniques
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Health & Medical Sciences (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Probability & Statistics with Applications (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明涉及一种多模型数据库OrientDB参数配置自动调优方法,包括:在默认参数配置下使用MMBench对OrientDB进行基准测试,使用OSMonitor得到OrientDB的初始运行状态s,使用OPIndicator得到OrientDB的性能p;在状态s,调优模型输出参数配置a;将OrientDB参数配置调整为a后,使用MMBench对OrientDB进行基准测试,OSMonitor对OrientDB的运行状态进行实时监控和处理得到状态指标s′,OPIndicator统计OrientDB的性能变化,根据奖励函数计算得到奖励r;将训练数据四元组(s,a,r,s′)存入调优经验池;从调优经验池中随机采样数量为m的小批量样本用以训练调优模型;如果调优模型收敛或达到人为设置的终止条件则结束训练得到预训练调优模型;在实际工作负载下使用预训练调优模型输出推荐的参数配置。
Description
技术领域
本发明属于数据库技术领域,更具体地,涉及一种基于深度强化学习的多模型数据库OrientDB参数配置自动调优方法。
背景技术
多模型数据库是近年来数据库领域里一个新的研究方向。OrientDB作为一种新兴的多模型数据库,存在参数配置优化的问题,一方面,默认的参数配置并不能使其达到最佳性能,需要针对实际应用负载对其参数配置进行调优;另一方面,现有的单模型数据库上的参数配置调优经验无法直接迁移到OrientDB上。为了降低参数配置调优难度,提高OrientDB性能,充分发挥其潜能,亟需研究OrientDB参数配置自动调优技术。
文献“Automatic Database Management System Tuning Through Large-scaleMachine Learning(SIGMOD2017)”提出了OtterTune,将机器学习技术运用到数据库参数配置自动调优中。OtterTune将工作负载特征化,利用历史调优经验数据训练机器学习模型,它首先使用Lasso算法选择出对系统性能影响最大的参数配置,然后将待处理的工作负载与已有的进行匹配,最后使用高斯过程回归算法对选择出来参数配置进行调优。
然而,上述数据库参数配置调优方法存在着不可忽略的问题:OtterTune在训练调优模型时,需要大量高质量的数据库管理员(Database Administrator,DBA)调优历史经验数据作为训练样本,但这些高质量的训练样本通常是很难获得的。
发明内容
本发明的目的在于提供一种多模型数据库OrientDB参数配置自动调优方法,用于解决现有基于机器学习的数据库参数配置调优方法无法在缺乏DBA调优历史经验数据的情况下正常工作的问题。
本发明一种多模型数据库OrientDB参数配置自动调优方法,其中,包括:在默认参数配置下使用MMBench对OrientDB进行基准测试,使用OSMonitor得到OrientDB的初始运行状态s,使用OPIndicator得到OrientDB的性能p;在状态s,调优模型输出参数配置a;将OrientDB参数配置调整为a后,使用MMBench对OrientDB进行基准测试,OSMonitor对OrientDB的运行状态进行实时监控和处理得到状态指标s′,OPIndicator统计OrientDB的性能变化,根据奖励函数计算得到奖励r;将训练数据四元组(s,a,r,s′)存入调优经验池;从调优经验池中随机采样数量为m的小批量样本用以训练调优模型;如果调优模型收敛或达到人为设置的终止条件则结束训练得到预训练调优模型,否则,令s←s′,反回在状态s,调优模型输出参数配置a的步骤;在实际工作负载下使用预训练调优模型输出推荐的参数配置,调优系统与用户的OrientDB交互k次,在这k次交互的过程中调优系统对预训练调优模型的网络参数进行微调,以适应实际工作负载,取这k次中OrientDB性能最优时对应的参数配置作为调优模型推荐的参数配置。根据本发明所述的多模型数据库OrientDB参数配置自动调优方法的一实施例,其中,基于DDPG算法构建调优模型,DDPG算法包含行动者和评论家两个部分,行动者部分采用当前行动者网络和目标行动者网络,评论家部分采用当前评论家网络和目标评论家网络,在调优模型中,随机初始化当前行动者网络的参数θμ和当前评论家网络的参数θQ,初始化目标行动者网络的参数θμ′和目标评论家网络的参数θQ′,其中θμ′=θμ,θQ′=θQ,初始化调优经验池,容量为M。
根据本发明所述的多模型数据库OrientDB参数配置自动调优方法的一实施例,基于DDPG算法构建调优模型,DDPG算法包含行动者和评论家两个部分,行动者部分采用当前行动者网络和目标行动者网络,评论家部分采用当前评论家网络和目标评论家网络,在调优模型中,随机初始化当前行动者网络的参数θμ和当前评论家网络的参数θQ,初始化目标行动者网络的参数θμ′和目标评论家网络的参数θQ′,其中θμ′=θμ,θQ′=θQ,初始化调优经验池,容量为M。
根据本发明所述的多模型数据库OrientDB参数配置自动调优方法的一实施例,其中,用(si,ai,ri,s'i)表示单个样本,计算当前评论家网络的梯度;采用评论家网络优化器更新当前评论家网络的参数;计算当前行动者网络的策略梯度;采用行动者网络优化器更新当前行动者网络的参数;更新目标行动者网络和目标评论家网络的参数。
根据本发明所述的多模型数据库OrientDB参数配置自动调优方法的一实施例,其中,根据奖励函数计算得到奖励r:
其中,ΔPt→0表示相对于默认参数配置下OrientDB性能的提升率,表示相对于OrientDB历史最优性能的提升率;ΔPt→0>0表示当前性能相对于默认参数配置下OrientDB性能有所提升,ΔPt→0<0表示当前性能相对于默认参数配置下OrientDB性能有所下降,表示当前性能相对于OrientDB历史最优性能有所提升,表示当前性能相对于OrientDB历史最优性能有所下降。根据本发明所述的多模型数据库OrientDB参数配置自动调优方法的一实施例,其中,a=μ(s|θμ)。
根据本发明所述的多模型数据库OrientDB参数配置自动调优方法的一实施例,其中,a=μ(s|θμ),μ是利用当前行动者网络逼近的策略函数。
根据本发明所述的多模型数据库OrientDB参数配置自动调优方法的一实施例,计算当前评论家网络的梯度:
其中yi为目标Q值,由目标评论家网络计算得到:
yi=ri+γQ′(si′,μ′(si′|θμ′)|θQ′);
采用评论家网络优化器更新当前评论家网络的参数θQ;
计算行动者网络的策略梯度:
采用行动者网络优化器更新当前行动者网络的参数θμ;
更新目标行动者网络和目标评论家网络的参数:
其中,τ为软更新系数。
根据本发明所述的多模型数据库OrientDB参数配置自动调优方法的一实施例,其中,在实际工作负载下使用预训练调优模型输出推荐的参数配置,包括:
S21、使用基准测试工具MMBench重放当前实际工作负载,对OrientDB进行性能测试;在MMBench对OrientDB进行性能测试期间,使用OSMonitor得到OrientDB的初始运行状态,使用OPIndicator得到OrientDB在默认参数配置下的性能;S22、使用预训练调优模型为OrientDB输出推荐的参数配置,在在与用户的OrientDB进行交互的过程中对预训练调优模型的网络参数进行微调,以适应实际工作负载;S23、重复n次步骤S22,取这n次中OrientDB性能最优时对应的参数配置作为调优模型推荐的最终参数配置,将OrientDB参数配置调整为
本发明的一种基于深度强化学习的多模型数据库OrientDB参数配置自动调优方法,基于深度强化学习算法构建OrientDB参数配置调优模型,设计了一个有效的奖励函数用以指导调优模型的训练。调优模型的训练包括预训练过程和在线训练过程。本发明利用基准测试工具MMBench、状态监控工具OSMonitor以及性能统计工具OPIndicator完成训练数据的收集,在没有人类调优历史经验数据的情况下也能完成调优模型的训练。本发明能有效调优多模型数据库OrientDB参数配置,提高OrientDB性能。
附图说明
图1为本发明的调优系统结构图;
图2为本发明调优模型预训练流程图。
具体实施方式
为使本发明的目的、内容、和优点更加清楚,下面结合附图和实施例,对本发明的具体实施方式作进一步详细描述。
图1是本发明的调优系统结构图,图2所示为调优模型预训练流程图,如图1以及图2所示,本发明提供了一种基于深度强化学习的多模型数据库OrientDB参数配置自动调优方法,包括:
在模拟工作负载下得到预训练调优模型,包括以下步骤:
S11、调优模型是基于DDPG算法构建的,DDPG算法包含行动者和评论家两个部分,其中行动者部分采用了两个结构相同的深度神经网络来表示,分别是当前行动者网络和目标行动者网络,当前行动者网络的参数由行动者网络优化器更新,目标行动者网络的参数采用软更新的方式(见步骤6),同样,评论家部分也采用了两个结构相同的深度神经网络来表示,分别是当前评论家网络和目标评论家网络,因此,在调优模型中一共用到了四个深度神经网络。随机初始化当前行动者网络的参数θμ和当前评论家网络的参数θQ,初始化目标行动者网络的参数θμ′和目标评论家网络的参数θQ′,其中θμ′=θμ,θQ′=θQ,初始化调优经验池,容量为M;
S12、在默认参数配置下使用基准测试工具MMBench生成工作负载,对OrientDB进行基准测试。在MMBench对OrientDB进行基准测试期间,使用OSMonitor得到OrientDB的初始运行状态s,使用OPIndicator得到OrientDB在默认参数配置下的性能p。
S13、在状态s,根据当前行动者网络选择一组参数配置a:
a=μ(s|θμ);
将OrientDB参数配置调整为a后,使用MMBench对OrientDB进行基准测试,OSMonitor监测到OrientDB的运行状态变为s',OPIndicator统计OrientDB的性能变化,根据奖励函数计算得到奖励r:
其中,ΔPt→0表示相对于默认参数配置下OrientDB性能的提升率,表示相对于OrientDB历史最优性能的提升率。ΔPt→0>0表示当前性能相对于默认参数配置下OrientDB性能有所提升,ΔPt→0<0表示当前性能相对于默认参数配置下OrientDB性能有所下降,同理,表示当前性能相对于OrientDB历史最优性能有所提升,表示当前性能相对于OrientDB历史最优性能有所下降。
将得到的训练数据四元组(s,a,r,s')存入调优经验池。从调优经验池中随机采样数量为m的小批量样本对调优模型进行训练,用(si,ai,ri,s'i)表示单个样本,计算当前评论家网络的梯度:
γ是折扣率,强化学习中的概念,γ∈[0,1],当γ接近于0时,表示智能体更关心短期回报,反之,当γ接近于1时,表示智能体更在意长期回报,μ′为目标行动者网络逼近的策略函数,yi为目标Q值,由目标评论家网络计算得到:
yi=ri+γQ′(s'i,μ′(s'i|θμ′)|θQ′)
采用评论家网络优化器更新当前评论家网络的参数θQ。
计算行动者网络的策略梯度:
采用行动者网络优化器更新当前行动者网络的参数θμ。
更新目标行动者网络和目标评论家网络的参数:
其中,τ为软更新系数。
S14、令s=s',若没有达到终止条件,则重复步骤S13,否则进入步骤S15,表示此次回合的训练结束。终止条件是:迭代到设置的最大回合数(具体实验中设置为500)就终止。参数θμ和θQ收敛对应的是调优模型收敛,通过损失函数的变化来确定收敛与否,如果损失函数的变化稳定在一定的阈值内,则说明已收敛。
训练终止(即得到预训练调优模型)与单个回合终止,整个训练过程包含多个回合,单个回合终止条件是:迭代到人为设置的最大步数(具体实验中设置为200)或者单个回合累积奖励达到阈值(具体实验中设置为20)或者单步奖励超过阈值(具体实验中设置为2)。
S15、若参数θμ和θQ收敛,则得到预训练调优模型,该过程结束,否则重复步骤S12-S14开始新一回合的训练。
在实际工作负载下使用预训练调优模型输出推荐的参数配置,包括以下步骤:
S21、使用基准测试工具MMBench重放当前实际工作负载,对OrientDB进行性能测试。在MMBench对OrientDB进行性能测试期间,使用OSMonitor得到OrientDB的初始运行状态s,使用OPIndicator得到OrientDB在默认参数配置下的性能p。
S22、使用预训练调优模型为OrientDB输出推荐的参数配置a,在此过程中,调优系统会在与用户的OrientDB进行交互的过程中对预训练调优模型的网络参数进行微调,以适应实际工作负载,具体的方法同步骤S13。
如图1所示,本发明的调优系统由基准测试工具MMBench、状态监控工具OSMonitor、性能统计工具OPIndicator、调优模型和调优经验池这五大模块组成。其中,MMBench支持生成跨数据模型查询的工作负载,用于对OrientDB进行基准测试;OSMonitor在基准测试期间对OrientDB的运行状态进行实时监控和处理;OPIndicator用于对OrientDB的性能进行统计和评估;调优模型用于为当前工作负载输出推荐的参数配置;调优经验池用于存储历史调优经验数据,即训练样本。调优系统在与OrientDB进行交互的过程中收集训练数据,完成调优模型的训练。
本发明提供了一种基于深度强化学习的多模型数据库OrientDB参数配置自动调优方法,其目的在于,基于深度强化学习对OrientDB参数配置自动调优过程进行建模,将OrientDB参数配置调优涉及的各个部分与深度强化学习中的关键要素一一映射,利用深度确定性策略梯度(Deep Deterministic Policy Gradient,DDPG)算法构建调优模型,同时针对OrientDB的应用场景为调优模型设计了一个有效的奖励函数,从而实现了对多模型数据库OrientDB参数配置的自动调优,不仅提高了OrientDB性能,而且减少了调优过程中的人工干预;此外,本发明利用基准测试工具MMBench、状态监控工具OSMonitor以及性能统计工具OPIndicator获得训练数据,在没有DBA调优历史经验数据的情况下也能训练得到调优模型。
本发明所构思的以上技术方案与现有技术相比,能够取得下列有益效果:
(1)本发明利用基准测试工具MMBench、状态监控工具OSMonitor和性能统计工具OPIndicator获得训练数据,在没有DBA调优历史经验数据的情况下完成了调优模型的预训练,解决了现有的基于机器学习的数据库参数配置调优方法无法在缺乏DBA调优历史经验数据的情况下正常工作的问题。
(2)本发明实现了多模型数据库OrientDB参数配置的自动调优过程,提高了OrientDB的性能,同时大大降低了OrientDB参数配置调优难度,减少了调优过程中的人工干预。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明技术原理的前提下,还可以做出若干改进和变形,这些改进和变形也应视为本发明的保护范围。
Claims (5)
1.一种多模型数据库OrientDB参数配置自动调优方法,其特征在于,包括:
在默认参数配置下使用MMBench对OrientDB进行基准测试,使用OSMonitor得到OrientDB的初始运行状态s,使用OPIndicator得到OrientDB的性能p;在状态s,调优模型输出参数配置a;
将OrientDB参数配置调整为a后,使用MMBench对OrientDB进行基准测试,OSMonitor对OrientDB的运行状态进行实时监控和处理得到状态指标s′,OPIndicator统计OrientDB的性能变化,根据奖励函数计算得到奖励r;
将训练数据四元组(s,a,r,s′)存入调优经验池;
从调优经验池中随机采样数量为m的小批量样本用以训练调优模型;
如果调优模型收敛或达到人为设置的终止条件则结束训练得到预训练调优模型,否则,令s←s′,反回在状态s,调优模型输出参数配置a的步骤;
在实际工作负载下使用预训练调优模型输出推荐的参数配置,调优系统与用户的OrientDB交互k次,在这k次交互的过程中调优系统对预训练调优模型的网络参数进行微调,以适应实际工作负载,取这k次中OrientDB性能最优时对应的参数配置作为调优模型推荐的参数配置;
其中,根据奖励函数计算得到奖励r:
2.如权利要求1所述的多模型数据库OrientDB参数配置自动调优方法,其特征在于,
基于DDPG算法构建调优模型,DDPG算法包含行动者和评论家两个部分,行动者部分采用当前行动者网络和目标行动者网络,评论家部分采用当前评论家网络和目标评论家网络,在调优模型中,随机初始化当前行动者网络的参数θμ和当前评论家网络的参数θQ,初始化目标行动者网络的参数θμ′和目标评论家网络的参数θQ′,其中θμ′=θμ,θQ′=θQ,初始化调优经验池,容量为M。
3.如权利要求1所述的多模型数据库OrientDB参数配置自动调优方法,其特征在于,用(si,ai,ri,s′i)表示单个样本的初始运行状态、参数配置、奖励和状态指标,计算当前评论家网络的梯度;采用评论家网络优化器更新当前评论家网络的参数;计算当前行动者网络的策略梯度;采用行动者网络优化器更新当前行动者网络的参数;更新目标行动者网络和目标评论家网络的参数。
4.如权利要求1所述的多模型数据库OrientDB参数配置自动调优方法,其特征在于,a=μ(s|θμ),μ是利用当前行动者网络逼近的策略函数,θμ为当前行动者网络的参数。
5.如权利要求1所述的多模型数据库OrientDB参数配置自动调优方法,其特征在于,在实际工作负载下使用预训练调优模型输出推荐的参数配置,包括:
S21、使用基准测试工具MMBench重放当前实际工作负载,对OrientDB进行性能测试;在MMBench对OrientDB进行性能测试期间,使用OSMonitor得到OrientDB的初始运行状态,使用OPIndicator得到OrientDB在默认参数配置下的性能;
S22、使用预训练调优模型为OrientDB输出推荐的参数配置,在与用户的OrientDB进行交互的过程中对预训练调优模型的网络参数进行微调,以适应实际工作负载;
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011029986.7A CN112131206B (zh) | 2020-09-24 | 2020-09-24 | 一种多模型数据库OrientDB参数配置自动调优方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011029986.7A CN112131206B (zh) | 2020-09-24 | 2020-09-24 | 一种多模型数据库OrientDB参数配置自动调优方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112131206A CN112131206A (zh) | 2020-12-25 |
CN112131206B true CN112131206B (zh) | 2023-01-10 |
Family
ID=73840507
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011029986.7A Active CN112131206B (zh) | 2020-09-24 | 2020-09-24 | 一种多模型数据库OrientDB参数配置自动调优方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112131206B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112948357B (zh) * | 2021-03-15 | 2023-04-25 | 河海大学 | 一种面向多模数据库OrientDB的调优系统及其构建方法 |
CN113608677B (zh) * | 2021-06-28 | 2024-08-27 | 山东海量信息技术研究院 | 一种分布式存储系统的参数调优方法、系统及装置 |
CN116204503A (zh) * | 2021-12-01 | 2023-06-02 | 中兴通讯股份有限公司 | 数据库参数调优方法、网络设备及计算机可读存储介质 |
CN115269555B (zh) * | 2022-08-09 | 2023-08-04 | 苏州大学附属儿童医院 | 一种关系型数据库管理系统 |
CN117454133B (zh) * | 2023-12-22 | 2024-03-26 | 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) | 一种数据库参数配置方法及相关设备 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109934332A (zh) * | 2018-12-31 | 2019-06-25 | 中国科学院软件研究所 | 基于评论家和双经验池的深度确定性策略梯度学习方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10445641B2 (en) * | 2015-02-06 | 2019-10-15 | Deepmind Technologies Limited | Distributed training of reinforcement learning systems |
-
2020
- 2020-09-24 CN CN202011029986.7A patent/CN112131206B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109934332A (zh) * | 2018-12-31 | 2019-06-25 | 中国科学院软件研究所 | 基于评论家和双经验池的深度确定性策略梯度学习方法 |
Non-Patent Citations (2)
Title |
---|
An Analysis on Automatic Performance Optimization in Database Management Systems;Sachini Samson等;《2020 World Conference on Computing and Communication Technologies (WCCCT)》;20200315;全文 * |
基于计算机试验设计的遗传算法参数配置;朱文佳等;《数学的实践与认识》;20200308;第50卷(第5期);112-117页 * |
Also Published As
Publication number | Publication date |
---|---|
CN112131206A (zh) | 2020-12-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112131206B (zh) | 一种多模型数据库OrientDB参数配置自动调优方法 | |
CN110414045B (zh) | 基于vmd-gru的短期风速预测方法 | |
CN109388484B (zh) | 一种基于Deep Q-network算法的多资源云作业调度方法 | |
CN110414725B (zh) | 预测决策一体化的风电场储能系统调度方法及装置 | |
CN116760047A (zh) | 基于安全强化学习算法的配电网电压无功控制方法及系统 | |
CN111553118B (zh) | 基于强化学习的多维连续型优化变量全局优化方法 | |
CN111159063B (zh) | 一种面向多层Sketch网络测量的缓存分配方法 | |
CN112990420A (zh) | 一种用于卷积神经网络模型的剪枝方法 | |
CN113971089A (zh) | 联邦学习系统设备节点选择的方法及装置 | |
CN112261725A (zh) | 一种基于深度强化学习的数据包传输智能决策方法 | |
CN115374853A (zh) | 基于T-Step聚合算法的异步联邦学习方法及系统 | |
CN115293052A (zh) | 电力系统有功潮流在线优化控制方法、存储介质和装置 | |
CN111198550A (zh) | 基于案例推理的云端智能生产优化调度在线决策方法及系统 | |
CN116470511A (zh) | 基于深度强化学习的线路潮流控制方法 | |
CN117933673B (zh) | 线路巡视的规划方法、装置和线路巡视规划系统 | |
CN116307440A (zh) | 一种基于强化学习的多目标权重学习的车间调度方法及其装置和应用 | |
CN115345380A (zh) | 一种基于人工智能的新能源消纳电力调度方法 | |
CN116050540A (zh) | 一种基于联合双维度用户调度的自适应联邦边缘学习方法 | |
CN116321255A (zh) | 一种无线联邦学习中高时效模型压缩和用户调度方法 | |
CN113627533B (zh) | 一种基于强化学习的电力设备检修决策生成方法 | |
CN118171855A (zh) | 一种基于深度强化学习的通用环境任务分配方法 | |
CN113848711A (zh) | 一种基于安全模型强化学习的数据中心制冷控制算法 | |
CN117893043A (zh) | 一种基于ddpg算法和深度学习模型的水电站负荷分配方法 | |
CN117495052A (zh) | 强化学习与遗传算法融合驱动的多农机多任务调度方法 | |
CN116722541A (zh) | 一种基于卷积神经网络的电力系统负荷预测方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |