CN108416478A - 一种综合管廊内部燃气浓度lstm预测方法及系统 - Google Patents

一种综合管廊内部燃气浓度lstm预测方法及系统 Download PDF

Info

Publication number
CN108416478A
CN108416478A CN201810225127.1A CN201810225127A CN108416478A CN 108416478 A CN108416478 A CN 108416478A CN 201810225127 A CN201810225127 A CN 201810225127A CN 108416478 A CN108416478 A CN 108416478A
Authority
CN
China
Prior art keywords
data
pipe gallery
gas concentration
lstm
piping lane
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810225127.1A
Other languages
English (en)
Inventor
邱实
陈雍君
薛博
宁楠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guo Tong Guangda (beijing) Technology Co Ltd
Original Assignee
Guo Tong Guangda (beijing) Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guo Tong Guangda (beijing) Technology Co Ltd filed Critical Guo Tong Guangda (beijing) Technology Co Ltd
Priority to CN201810225127.1A priority Critical patent/CN108416478A/zh
Publication of CN108416478A publication Critical patent/CN108416478A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/04—Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0635—Risk analysis of enterprise or organisation activities

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • Economics (AREA)
  • Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Physics & Mathematics (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Game Theory and Decision Science (AREA)
  • General Business, Economics & Management (AREA)
  • Development Economics (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Medical Informatics (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Educational Administration (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明提供一种综合管廊内部燃气浓度LSTM预测方法及系统，所述方法包括：获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据；对所获取的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据进行预处理并形成燃气浓度特征向量；以ReLu为激励函数训练LSTM模型；将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据。本发明能够通过具有长短期记忆单元的递归神经网络构建模型，适应综合管廊内部燃气浓度数据的动态特性，进而实现对综合管廊内燃气浓度数据长期准确的提前预测；并且所述方法通用性强、成本低、适用性广泛。

Description

一种综合管廊内部燃气浓度LSTM预测方法及系统
技术领域
本发明涉及综合管廊技术领域，尤其涉及一种综合管廊内部燃气浓度LSTM 预测方法及系统。
背景技术
城市地下综合管廊又称“共同沟”，是敷设于地面下的一种构筑物，它可容纳电信、电力、供水、热力等多种公共管线，并拥有完备的排水、照明、通讯、监控等设施。地下综合管廊是为确保道路功能充分发挥，有效利用城市地下空间，改善城市环境，增强城市防震抗灾能力，确保城市安全运转而产生的市政基础设施。截止到目前，全国各地已经建成的地下综合管廊廊体在1000公里以上；在建地下综合管廊廊体超过5000公里。自1958年建设国内第一条地下综合管廊开始，北京已建成并运营的地下综合管廊有7条，总里程超过20公里。2017年，包含王府井大街地下综合管廊、新机场高速地下综合管廊、世园会园区地下综合管廊在内的7个地下综合管廊项目被列入北京市重点工程。预计到 2020年，北京市地下综合管廊建设将初具规模，规划建设区域遍布全市范围。
由于管廊敷设于地下，且各种管线共处于同一密闭环境中，管廊内部环境的各种参数之间存在高度复杂的相互作用，管廊内部环境的各种数据存在不确定性与随机性，因此，采用传统的概率统计法、灰色预测法、马尔科夫链、时间序列法模型无法充分考虑管廊内部环境数据变化的时间序列属性，所以导致综合管廊内燃气浓度预测精度不高，进而出现管廊安全问题。
发明内容
本发明提供的综合管廊内部燃气浓度LSTM预测方法及系统，能够通过具有长短期记忆单元的递归神经网络构建模型，适应综合管廊内部燃气浓度数据的动态特性，进而实现对综合管廊内燃气浓度数据长期准确的提前预测，有效地防止因综合管廊内燃气浓度过低引起安全等问题；并且所述方法通用性强、成本低、适用性广泛、适合广泛的推广应用。
第一方面，本发明提供一种综合管廊内部燃气浓度LSTM预测方法，包括：
获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据；
对所获取的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据进行预处理并形成燃气浓度特征向量；
以ReLu为激励函数训练LSTM模型；
将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据。
可选地，所述对综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据进行预处理包括：
以时间为基准查找综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据中所缺失的数据并补齐；
将完整的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据分别进行标准化处理，并形成四维向量。
可选地，所述以时间为基准查找综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据中所缺失的数据并补齐包括：
分别获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据对应的时间序列，当所述时间序列有缺失则根据时间序列中第t个时间步对应的缺失时刻、和所述缺失时刻对应的观测值生成缺失标签向量；
根据缺失标签向量和缺失时刻确定缺失时长；
通过缺失时刻的最近有效值和时间序列的均值按如下公式进行加权和处理并将所得结果替换为缺失时刻的观测值
其中，
可选地，所述训练LSTM模型包括：
根据ReLu激励函数确定误差函数；
优化LSTM模型参数；
依次建立训练矩阵、初始化LSTM模型、编译LSTM模型、训练LSTM模型和评估LSTM模型。
可选地，在所述将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据之后，所述方法还包括：
将LSTM模型中所训练的第一层次的基础上，增加一层与第一层次结构相同的新层次，其中，新层次中以第一层次LSTM的输出与初始模型中燃气浓度特征向量作为输入；
对增加新层次后的LSTM模型进行训练优化；
在第一层次上逐层增加新的层次并进行训练，直到增加层次使得LSTM模型性能不在提升；
由最终获得的LSTM模型得出综合管廊内部燃气浓度的最终预测值。
第二方面，本发明提供一种综合管廊内部燃气浓度LSTM预测系统，包括：
获取单元，用于获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据；
预处理单元，用于对所获取的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据进行预处理并形成燃气浓度特征向量；
模型训练单元，用于以ReLu为激励函数训练LSTM模型；
第一预测单元，用于将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据。
可选地，所述预处理单元包括：
数据缺失补齐子单元，用于以时间为基准查找综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据中所缺失的数据并补齐；
标准化处理子单元，用于将完整的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据分别进行标准化处理，并形成四维向量。
可选地，所述数据缺失补齐子单元包括：
标签模块，用于分别获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据对应的时间序列，当所述时间序列有缺失则根据时间序列中第t个时间步对应的缺失时刻、和所述缺失时刻对应的观测值生成缺失标签向量；
时长模块，用于根据缺失标签向量和缺失时刻确定缺失时长；
替换模块，用于通过缺失时刻的最近有效值和时间序列的均值按如下公式进行加权和处理并将所得结果替换为缺失时刻的观测值
其中，
可选地，所述模型训练单元包括：
确定子单元，用于根据ReLu激励函数确定误差函数；
优化子单元，用于优化LSTM模型参数；
控制子单元，用于依次建立训练矩阵、初始化LSTM模型、编译LSTM模型、训练LSTM模型和评估LSTM模型。
可选地，所述系统还包括：
增加新层单元，用于将LSTM模型中所训练的第一层次的基础上，增加一层与第一层次结构相同的新层次，其中，新层次中以第一层次LSTM的输出与初始模型中燃气浓度特征向量作为输入；
新层训练优化单元，用于对增加新层次后的LSTM模型进行训练优化；
控制单元，用于在第一层次上逐层增加新的层次并进行训练，直到增加层次使得LSTM模型性能不在提升；
第二预测单元，用于由最终获得的LSTM模型得出综合管廊内部燃气浓度的最终预测值。
本发明实施例提供的综合管廊内部燃气浓度LSTM预测方法及系统，所述方法主要是通过具有长短期记忆单元的递归神经网络构建模型，将综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据转化成综合管廊内部燃气浓度的预测值，其中，综合管廊内部目前燃气浓度、管廊内微生物密度、传感器位置和综合管廊的位置均影响综合管廊内部燃气浓度，例如，当管廊内微生物越多所产生的氨气越多，将增大内部燃气浓度；由于传感器在综合管廊中所设置的位置数据不同导致所测量到的综合管廊内部燃气浓度数据不同；综合管廊设置的南北地域位置的差异导致综合管廊内部燃气浓度。因此，所述方法不仅能够适应综合管廊内部燃气浓度数据的动态特性，进而实现对综合管廊内燃气浓度数据长期准确的提前预测，有效地防止因综合管廊内燃气浓度过低引起安全等问题；并且所述方法通用性强、成本低、适用性广泛、适合广泛的推广应用。
附图说明
图1为本发明一实施例综合管廊内部燃气浓度LSTM预测方法的流程图；
图2为本发明另一实施例综合管廊内部燃气浓度LSTM预测方法的流程图；
图3为本发明一实施例中ReLu激励函数图；
图4为本发明一实施例综合管廊内部燃气浓度LSTM预测系统的结构示意图；
图5为本发明另一实施例综合管廊内部燃气浓度LSTM预测系统的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供一种综合管廊内部燃气浓度LSTM预测方法，如图1所示，所述方法包括：
S11、获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据；
S12、对所获取的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据进行预处理并形成燃气浓度特征向量；
S13、以ReLu为激励函数训练LSTM模型；
S14、将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据。
本发明实施例提供的综合管廊内部燃气浓度LSTM预测方法主要是通过具有长短期记忆单元的递归神经网络构建模型，将综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据转化成综合管廊内部燃气浓度的预测值，其中，综合管廊内部目前燃气浓度、管廊内微生物密度、传感器位置和综合管廊的位置均影响综合管廊内部燃气浓度，例如，当管廊内微生物越多所产生的氨气越多，将增大内部燃气浓度；由于传感器在综合管廊中所设置的位置数据不同导致所测量到的综合管廊内部燃气浓度数据不同；综合管廊设置的南北地域位置的差异导致综合管廊内部燃气浓度。因此，所述方法不仅能够适应综合管廊内部燃气浓度数据的动态特性，进而实现对综合管廊内燃气浓度数据长期准确的提前预测，有效地防止因综合管廊内燃气浓度过低引起安全等问题；并且所述方法通用性强、成本低、适用性广泛、适合广泛的推广应用。
可选地，如图2所示，所述对综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据进行预处理包括：
S121、查找综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据对应时间序列中所缺失的数据并补齐；
S122、将完整的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据分别进行标准化处理，并形成四维向量。
具体的，本实施例所述方法由于综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据的更新间隔不一致、数据未能采集到等因素导致某些数据的缺失将影响综合管廊内部燃气浓度预测的准确性；因此，所述方法将首先数据对应时间序列中的缺失数据进行补齐，然后在进一步地对不同数据的格式进行标准化处理；进一步的保证了所述方法将上述数据转化成综合管廊内部燃气浓度预测值的精确性。
可选地，本实施例所述方法为了能够更加全面精确的预测综合管廊内部燃气浓度，并在所述燃气浓度特征向量还可加入时间数据、综合管廊地域燃气使用波动数据；由于在不同的时间、地域燃气的使用会出现波动、也将会导致综合管廊内燃气浓度出现波动。
可选地，所述以时间为基准查找综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据中所缺失的数据并补齐包括：
S1211、分别获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据对应的时间序列，当所述时间序列有缺失则根据时间序列中第t个时间步对应的缺失时刻、和所述缺失时刻对应的观测值生成缺失标签向量；
S1212、根据缺失标签向量和缺失时刻确定缺失时长；
S1213、通过缺失时刻的最近有效值和时间序列的均值按如下公式进行加权和处理并将所得结果替换为缺失时刻的观测值
其中，
可选地，所述训练LSTM模型包括：
S131、根据ReLu激励函数确定误差函数；
S132、优化LSTM模型参数；
S133、依次建立训练矩阵、初始化LSTM模型、编译LSTM模型、训练LSTM 模型和评估LSTM模型。
具体的，本实施例在所述根据ReLu激励函数确定误差函数之前，所述方法还包括：S130、选定并分配数据训练集及测试集；进而能够通过实验测试对学习器的泛化误差进行评估并进而做出选择，则需使用一个“测试集”来测试学习器对新样本的判别能力，然后以测试集上的“测试误差”作为泛化误差的近似，例如，把数据集分成互不相交且保持数据分布基本一致的两部分，一部分是训练集，一部分是测试集；其中，训练集数据的数量应占2/3到4/5；同时为了保证随机性，将数据集多次随机划分为训练集和测试集，然后在对多次划分结果取平均。
然后所述方法再根据ReLu激励函数确定误差函数，其中，Rectified Linear 函数的定义公式为：
f(x)＝max(0，x)
ReLu函数定义如图3所示，因此，Rectified Linear函数的导数如下公式所示：
并且，ReLu激励函数可以缓解过度拟合的问题，因为一部分输入通过神经元的激励函数ReLu后变成了0，这样就会造成整个神经网络的稀疏性加大，从而减少了参数之间的依赖的关系。
由于在对模型进行训练时，有可能遇到训练数据不够，即训练数据无法对整个数据的分布进行估计的时候，或者在对模型进行过度训练时，常常会导致模型的过拟合。为防止数据训练的过程中出现过拟合现象，先采用Dropout算法对相关数据进行处理。
Dropout以概率p舍弃神经元并让其它神经元以概率q＝1-p保留。每个神经元被关闭的概率是相同的。这意味着：
假设：
h(x)＝xW+b
di维的输入x在dh维输出空间上的线性投影；
a(h)是激活函数
在训练阶段中，将假设的投影作为修改的激活函数：
f(h)＝D⊙a(h)
其中D＝(x1，......，xdh)是dh维的伯努利变量xi，伯努利随机变量具有以下概率质量分布：
其中k是可能的输出。
将Dropout应用在第i个神经元上：
其中P(Xi＝0)＝p
由于在训练阶段神经元保持q概率，在测试阶段必须仿真出在训练阶段使用的网络集的行为。
最后，所述方法设置误差函数为平均绝对误差，平均绝对误差是绝对误差的平均值，平均绝对误差能更好地反映预测值误差的实际情况。
fi表示预测值，yi表示真实值。
可选地，在所述优化LSTM模型参数之后，所述方法还可包括：
参数权重的更迭；
具体的，本实施例所述方法主要采用梯度下降法的优化算法-Adagrad算法，用以在完成一次数据训练后，进行参数权重的更迭，并达到数据拟合最优的结果。
其中，Adagrad是一种基于梯度的优化算法，它能够对每个参数自适应不同的学习速率，对稀疏特征，得到大的学习更新，对非稀疏特征，得到较小的学习更新，因此该优化算法适合处理稀疏特征数据。在每个模型参数θi使用相同的学习速率η，Adagrad在每一个更新步骤中对于每一个模型参数θi使用不同的学习速率ηi，设第t次更新步骤中，目标函数的参数θi梯度为gt，i，即：
那么SGD更新方程为：
θt+1，i＝θt，i-η·gt，i
而Adagrad对每一个参数使用不同的学习速率，其更新方程为：
其中，Gt，ii是一个对角矩阵，其中第i行的对角元素eii为过去到当前第i个参数θi的梯度的平方和，epsilon是一个平滑参数，为了使得分母不为0(通常ε＝1e-8)，另外如果分母不开根号，算法性能变差。
进一步，将所有Gt，ii，gt的元素写成向量Gt，gt，这样便可以使用向量点乘操作：
另外，本实施例所述方法在依次建立训练矩阵、初始化LSTM模型、编译 LSTM模型、训练LSTM模型和评估LSTM模型中主要是采用keras框架；
S1331、采用numpy工具包的zeros函数来建立训练矩阵，记为X，同时建立训练标签矩阵。
S1332、初始化模型，采用keras框架的线性叠加，层与层之间都是全链接的，并且每层都是按照次序叠加起来的。初始化model＝keras.models.Sequential()，增加Embedding层，该层是将正整数转换成固定大小的向量。第二层添加LSTM 层，设置输入维度和输出维度的值和节点数，采用Dropout来防止模型训练过度拟合问题的发生，各层的激励函数分别采用ReLu函数。添加Dense层，作为输出层，输出节点为1个，优化算法采用SGD函数。
S1333、编译模型，主要是给model的compile函数设置优化函数并分别设置为SGD，目标函数loss都采用binary_crossentropy，即交叉熵作为目标函数，又名逻辑回归函数。
S1334、训练模型，将步骤S1331中处理的结果带入model的fit函数里面去训练模型，设置迭代次数和一次迭代大小。
S1335、设置迭代次数，模型保存得是误差最低的时候的模型，利用模型的predict函数去预估测试数据的结果。
S1336、根据预测结果和测试集真实的点击结果，采用skleam工具包的 log-loss计算log-loss值来评估模型。
可选地，本实施例所述方法可在所述将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据之后，所述方法还包括：
S15、将LSTM模型中所训练的第一层次的基础上，增加一层与第一层次结构相同的新层次，其中，新层次中以第一层次LSTM的输出与初始模型中燃气浓度特征向量作为输入；
S16、对增加新层次后的LSTM模型进行训练优化；
S17、在第一层次上逐层增加新的层次并进行训练，直到增加层次使得LSTM 模型性能不在提升；
S18、由最终获得的LSTM模型得出综合管廊内部燃气浓度的最终预测值。
具体的，本实施例所述方法通过不断在初始层次上逐层增加新的层次并进行训练，逐步增加所述LSTM模型预测的精确度，进一步的提高对综合管廊内燃气浓度数据长期准确的提前预测。
或者，本实施例所述方法还可在所述将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据之后，所述方法还包括：
S19、获取综合管廊内部燃气浓度实际值，并将燃气浓度实际值与预测值进行对比分析；
S20、当燃气浓度实际值与预测值之间的差值超过阈值，则报警并提示调整 LSTM模型参数，然后基于调整后的LSTM模型参数再次训练LSTM模型；
S21、当燃气浓度实际值与最终预测值之间的差值未超过阈值，则继续对综合管廊内部燃气浓度进行预测。
具体的，本实施所述方法主要是通过对比分析燃气浓度的预测值与实际值之间的差异来调整LSTM模型参数，进一步对LSTM模型参数进行优化，通过LSTM模型自适应的优化调整，进一步提高所述方法预测结果的精度性。
再或者，本实施例所述方法还可在由最终获得的LSTM模型得出综合管廊内部燃气浓度的最终预测值之后，对燃气浓度的实际值与最终预测值之间进行对比分析。
本发明实施例还提供一种综合管廊内部燃气浓度LSTM预测系统，如图4 所示，所述系统包括：
获取单元11，用于获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据；
预处理单元12，用于对所获取的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据进行预处理并形成燃气浓度特征向量；
模型训练单元13，用于以ReLu为激励函数训练LSTM模型；
第一预测单元14，用于将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据。
本发明实施例提供的综合管廊内部燃气浓度LSTM预测系统主要是通过具有长短期记忆单元的递归神经网络构建模型，将综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据转化成综合管廊内部燃气浓度的预测值，其中，综合管廊内部目前燃气浓度、管廊内微生物密度、传感器位置和综合管廊的位置均影响综合管廊内部燃气浓度，例如，当管廊内微生物越多所产生的氨气越多，将增大内部燃气浓度；由于传感器在综合管廊中所设置的位置数据不同导致所测量到的综合管廊内部燃气浓度数据不同；综合管廊设置的南北地域位置的差异导致综合管廊内部燃气浓度。因此，所述系统不仅能够适应综合管廊内部燃气浓度数据的动态特性，进而实现对综合管廊内燃气浓度数据长期准确的提前预测，有效地防止因综合管廊内燃气浓度过低引起安全等问题；并且所述方法通用性强、成本低、适用性广泛、适合广泛的推广应用。
可选地，如图5所示，所述预处理单元12包括：
数据缺失补齐子单元121，用于以时间为基准查找综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据中所缺失的数据并补齐；
标准化处理子单元122，用于将完整的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据分别进行标准化处理，并形成四维向量。
可选地，所述数据缺失补齐子单元121包括：
标签模块，用于分别获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据对应的时间序列，当所述时间序列有缺失则根据时间序列中第t个时间步对应的缺失时刻、和所述缺失时刻对应的观测值生成缺失标签向量；
时长模块，用于根据缺失标签向量和缺失时刻确定缺失时长；
替换模块，用于通过缺失时刻的最近有效值和时间序列的均值按如下公式进行加权和处理并将所得结果替换为缺失时刻的观测值
其中，
可选地，所述模型训练单元13包括：
确定子单元131，用于根据ReLu激励函数确定误差函数；
优化子单元132，用于优化LSTM模型参数；
控制子单元133，用于依次建立训练矩阵、初始化LSTM模型、编译LSTM 模型、训练LSTM模型和评估LSTM模型。
可选地，所述系统还包括：
增加新层单元，用于将LSTM模型中所训练的第一层次的基础上，增加一层与第一层次结构相同的新层次，其中，新层次中以第一层次LSTM的输出与初始模型中燃气浓度特征向量作为输入；
新层训练优化单元，用于对增加新层次后的LSTM模型进行训练优化；
控制单元，用于在第一层次上逐层增加新的层次并进行训练，直到增加层次使得LSTM模型性能不在提升；
第二预测单元，用于由最终获得的LSTM模型得出综合管廊内部燃气浓度的最终预测值。
可选地，所述系统还包括：
对比文件单元，用于获取综合管廊内部燃气浓度实际值，并将燃气浓度实际值与预测值进行对比分析；
控制单元，用于当燃气浓度实际值与预测值之间的差值超过阈值，则报警并提示调整LSTM模型参数，然后基于调整后的LSTM模型参数再次训练LSTM 模型；或者当燃气浓度实际值与最终预测值之间的差值未超过阈值，则继续对综合管廊内部燃气浓度进行预测。
本实施例的装置，可以用于执行上述方法实施例的技术方案，其实现原理和技术效果类似，此处不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory， ROM)或随机存储记忆体(Random AccessMemory，RAM)等。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应该以权利要求的保护范围为准。

Claims (10)

1.一种综合管廊内部燃气浓度LSTM预测方法，其特征在于，包括：
获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据；
对所获取的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据进行预处理并形成燃气浓度特征向量；
以ReLu为激励函数训练LSTM模型；
将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据。
2.根据权利要求1所述的方法，其特征在于，所述对综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据进行预处理包括：
以时间为基准查找综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据中所缺失的数据并补齐；
将完整的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据分别进行标准化处理，并形成四维向量。
3.根据权利要求2所述的方法，其特征在于，所述以时间为基准查找综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据中所缺失的数据并补齐包括：
分别获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据对应的时间序列，当所述时间序列有缺失则根据时间序列中第t个时间步对应的缺失时刻、和所述缺失时刻对应的观测值生成缺失标签向量；
根据缺失标签向量和缺失时刻确定缺失时长；
通过缺失时刻的最近有效值和时间序列的均值按如下公式进行加权和处理并将所得结果替换为缺失时刻的观测值
其中，
4.根据权利要求1或3所述的方法，其特征在于，所述训练LSTM模型包括：
根据ReLu激励函数确定误差函数；
优化LSTM模型参数；
依次建立训练矩阵、初始化LSTM模型、编译LSTM模型、训练LSTM模型和评估LSTM模型。
5.根据权利要求1-4任一所述的方法，其特征在于，在所述将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据之后，所述方法还包括：
将LSTM模型中所训练的第一层次的基础上，增加一层与第一层次结构相同的新层次，其中，新层次中以第一层次LSTM的输出与初始模型中燃气浓度特征向量作为输入；
对增加新层次后的LSTM模型进行训练优化；
在第一层次上逐层增加新的层次并进行训练，直到增加层次使得LSTM模型性能不在提升；
由最终获得的LSTM模型得出综合管廊内部燃气浓度的最终预测值。
6.一种综合管廊内部燃气浓度LSTM预测系统，其特征在于，包括：
获取单元，用于获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据；
预处理单元，用于对所获取的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊位置数据进行预处理并形成燃气浓度特征向量；
模型训练单元，用于以ReLu为激励函数训练LSTM模型；
第一预测单元，用于将燃气浓度特征向量输入至LSTM模型中并对应输出综合管廊内部燃气浓度的预测数据。
7.根据权利要求6所述的系统，其特征在于，所述预处理单元包括：
数据缺失补齐子单元，用于以时间为基准查找综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据中所缺失的数据并补齐；
标准化处理子单元，用于将完整的综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据分别进行标准化处理，并形成四维向量。
8.根据权利要求7所述的系统，其特征在于，所述数据缺失补齐子单元包括：
标签模块，用于分别获取综合管廊内部燃气浓度数据、管廊内部微生物密度数据、传感器位置数据和综合管廊所在地数据对应的时间序列，当所述时间序列有缺失则根据时间序列中第t个时间步对应的缺失时刻、和所述缺失时刻对应的观测值生成缺失标签向量；
时长模块，用于根据缺失标签向量和缺失时刻确定缺失时长；
替换模块，用于通过缺失时刻的最近有效值和时间序列的均值按如下公式进行加权和处理并将所得结果替换为缺失时刻的观测值
其中，
9.根据权利要求6或8所述的系统，其特征在于，所述模型训练单元包括：
确定子单元，用于根据ReLu激励函数确定误差函数；
优化子单元，用于优化LSTM模型参数；
控制子单元，用于依次建立训练矩阵、初始化LSTM模型、编译LSTM模型、训练LSTM模型和评估LSTM模型。
10.根据权利要求6-9任一所述的系统，其特征在于，所述系统还包括：
增加新层单元，用于将LSTM模型中所训练的第一层次的基础上，增加一层与第一层次结构相同的新层次，其中，新层次中以第一层次LSTM的输出与初始模型中燃气浓度特征向量作为输入；
新层训练优化单元，用于对增加新层次后的LSTM模型进行训练优化；
控制单元，用于在第一层次上逐层增加新的层次并进行训练，直到增加层次使得LSTM模型性能不在提升；
第二预测单元，用于由最终获得的LSTM模型得出综合管廊内部燃气浓度的最终预测值。
CN201810225127.1A 2018-03-19 2018-03-19 一种综合管廊内部燃气浓度lstm预测方法及系统 Pending CN108416478A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810225127.1A CN108416478A (zh) 2018-03-19 2018-03-19 一种综合管廊内部燃气浓度lstm预测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810225127.1A CN108416478A (zh) 2018-03-19 2018-03-19 一种综合管廊内部燃气浓度lstm预测方法及系统

Publications (1)

Publication Number Publication Date
CN108416478A true CN108416478A (zh) 2018-08-17

Family

ID=63132156

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810225127.1A Pending CN108416478A (zh) 2018-03-19 2018-03-19 一种综合管廊内部燃气浓度lstm预测方法及系统

Country Status (1)

Country Link
CN (1) CN108416478A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109359698A (zh) * 2018-10-30 2019-02-19 清华大学 基于长短时记忆神经网络模型的漏损识别方法
CN109781809A (zh) * 2019-02-23 2019-05-21 苏州市智汇易联科技有限公司 一种甲醛浓度人工智能测算方法
CN110107815A (zh) * 2018-11-08 2019-08-09 清华大学合肥公共安全研究院 燃气管道的泄漏检测方法及装置
CN111256043A (zh) * 2020-03-18 2020-06-09 南京工业大学 基于脉冲响应法与传感器阵列的综合管廊燃气泄漏源识别方法
CN112489402A (zh) * 2020-11-27 2021-03-12 罗普特科技集团股份有限公司 一种管廊的预警方法、装置、系统及存储介质
US20210110090A1 (en) * 2019-10-10 2021-04-15 Voda, Inc. System and method for optimizing utility pipe sensors placement using artificial intelligence technology
CN112862147A (zh) * 2020-11-19 2021-05-28 河南汇祥通信设备有限公司 基于bp神经网络的综合管廊运维风险评价模型及方法
CN113190535A (zh) * 2021-01-19 2021-07-30 云南卫士盾科技有限公司 一种基于改进灰色-长短期记忆神经网络组合模型的瓦斯浓度预测方法
CN113919574A (zh) * 2021-10-14 2022-01-11 天津大学 基于Keras的垃圾焚烧厂烟气重金属排放预测方法
CN114399024A (zh) * 2021-12-20 2022-04-26 淮阴工学院 油气浓度大数据智能检测系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106599520A (zh) * 2016-12-31 2017-04-26 中国科学技术大学 一种基于lstm‑rnn模型的空气污染物浓度预报方法
CN106650825A (zh) * 2016-12-31 2017-05-10 中国科学技术大学 一种机动车尾气排放数据融合系统
CN107121679A (zh) * 2017-06-08 2017-09-01 湖南师范大学 用于雷达回波外推的循环神经网络预测法及记忆单元结构
CN107688871A (zh) * 2017-08-18 2018-02-13 中国农业大学 一种水质预测方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106599520A (zh) * 2016-12-31 2017-04-26 中国科学技术大学 一种基于lstm‑rnn模型的空气污染物浓度预报方法
CN106650825A (zh) * 2016-12-31 2017-05-10 中国科学技术大学 一种机动车尾气排放数据融合系统
CN107121679A (zh) * 2017-06-08 2017-09-01 湖南师范大学 用于雷达回波外推的循环神经网络预测法及记忆单元结构
CN107688871A (zh) * 2017-08-18 2018-02-13 中国农业大学 一种水质预测方法和装置

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109359698A (zh) * 2018-10-30 2019-02-19 清华大学 基于长短时记忆神经网络模型的漏损识别方法
CN110107815A (zh) * 2018-11-08 2019-08-09 清华大学合肥公共安全研究院 燃气管道的泄漏检测方法及装置
CN109781809A (zh) * 2019-02-23 2019-05-21 苏州市智汇易联科技有限公司 一种甲醛浓度人工智能测算方法
CN109781809B (zh) * 2019-02-23 2020-11-20 苏州市智汇易联科技有限公司 一种甲醛浓度人工智能测算方法
US20210110090A1 (en) * 2019-10-10 2021-04-15 Voda, Inc. System and method for optimizing utility pipe sensors placement using artificial intelligence technology
US11704458B2 (en) * 2019-10-10 2023-07-18 Voda, Inc. System and method for optimizing utility pipe sensors placement using artificial intelligence technology
CN111256043A (zh) * 2020-03-18 2020-06-09 南京工业大学 基于脉冲响应法与传感器阵列的综合管廊燃气泄漏源识别方法
CN112862147A (zh) * 2020-11-19 2021-05-28 河南汇祥通信设备有限公司 基于bp神经网络的综合管廊运维风险评价模型及方法
CN112489402A (zh) * 2020-11-27 2021-03-12 罗普特科技集团股份有限公司 一种管廊的预警方法、装置、系统及存储介质
CN113190535A (zh) * 2021-01-19 2021-07-30 云南卫士盾科技有限公司 一种基于改进灰色-长短期记忆神经网络组合模型的瓦斯浓度预测方法
CN113190535B (zh) * 2021-01-19 2023-04-18 云南卫士盾科技有限公司 一种基于改进灰色-长短期记忆神经网络组合模型的瓦斯浓度预测方法
CN113919574A (zh) * 2021-10-14 2022-01-11 天津大学 基于Keras的垃圾焚烧厂烟气重金属排放预测方法
CN114399024A (zh) * 2021-12-20 2022-04-26 淮阴工学院 油气浓度大数据智能检测系统
CN114399024B (zh) * 2021-12-20 2023-02-03 淮阴工学院 油气浓度大数据智能检测系统

Similar Documents

Publication Publication Date Title
CN108416478A (zh) 一种综合管廊内部燃气浓度lstm预测方法及系统
CN109492822B (zh) 空气污染物浓度时空域关联预测方法
CN106453293B (zh) 一种基于改进bpnn的网络安全态势预测方法
Lam et al. Decision support system for contractor pre‐qualification—artificial neural network model
Izadyar et al. Appraisal of the support vector machine to forecast residential heating demand for the District Heating System based on the monthly overall natural gas consumption
CN110070144A (zh) 一种湖泊水质预测方法及系统
CN109711617A (zh) 一种基于blstm深度学习的中长期径流预测方法
Supreetha et al. Lion algorithm-optimized long short-term memory network for groundwater level forecasting in Udupi District, India
Okwuashi et al. GIS cellular automata using artificial neural network for land use change simulation of Lagos, Nigeria
CN108460492A (zh) 一种综合管廊内部氧气浓度lstm预测方法及系统
CN114925836A (zh) 基于动态多视图图神经网络的城市交通车流量推理方法
CN108615098A (zh) 基于贝叶斯生存分析的供水管网管道爆管风险预测方法
Wu et al. Local and global Bayesian network based model for flood prediction
CN108446760A (zh) 一种综合管廊内部湿度lstm预测方法及系统
Liang Water pollution prediction based on deep belief network in big data of water environment monitoring
CN113626929A (zh) 多阶段多拓扑的船舶交通复杂度度量方法及系统
Chen et al. Rainfall forecasting in sub-Sahara Africa-Ghana using LSTM deep learning approach
CN117350146A (zh) 一种基于ga-bp神经网络的排水管网健康性评价方法
Huang et al. Dynamic seismic damage assessment of distributed infrastructure systems using graph neural networks and semi-supervised machine learning
CN116976702A (zh) 基于大场景gis轻量化引擎的城市数字孪生平台及方法
Preis et al. Online hydraulic state prediction for water distribution systems
CN105512249A (zh) 一种基于紧凑进化算法的本体匹配方法
CN115829150A (zh) 一种积水预测系统
CN115512717A (zh) 一种基于集成学习的二阶段单传感器管道泄漏定位方法
Huang et al. Using artificial intelligence to retrieve the optimal parameters and structures of adaptive network-based fuzzy inference system for typhoon precipitation forecast modeling

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180817