CN114757601A - 一种基于人工智能的水环境异常排放监测方法及系统 - Google Patents

一种基于人工智能的水环境异常排放监测方法及系统 Download PDF

Info

Publication number
CN114757601A
CN114757601A CN202210677570.9A CN202210677570A CN114757601A CN 114757601 A CN114757601 A CN 114757601A CN 202210677570 A CN202210677570 A CN 202210677570A CN 114757601 A CN114757601 A CN 114757601A
Authority
CN
China
Prior art keywords
area
water quality
water
similarity
time difference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210677570.9A
Other languages
English (en)
Other versions
CN114757601B (zh
Inventor
黄静
薛强
李金伟
何鹏
李丽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Ruili Environmental Protection Engineering Co ltd
Original Assignee
Jiangsu Ruili Environmental Protection Engineering Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Ruili Environmental Protection Engineering Co ltd filed Critical Jiangsu Ruili Environmental Protection Engineering Co ltd
Priority to CN202210677570.9A priority Critical patent/CN114757601B/zh
Publication of CN114757601A publication Critical patent/CN114757601A/zh
Application granted granted Critical
Publication of CN114757601B publication Critical patent/CN114757601B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0639Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06393Score-carding, benchmarking or key performance indicator [KPI] analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/06Energy or water supply
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A20/00Water conservation; Efficient water supply; Efficient water use
    • Y02A20/20Controlling water pollution; Waste water treatment

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • General Physics & Mathematics (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Educational Administration (AREA)
  • Marketing (AREA)
  • Development Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Public Health (AREA)
  • Primary Health Care (AREA)
  • Water Supply & Treatment (AREA)
  • General Health & Medical Sciences (AREA)
  • Game Theory and Decision Science (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及人工智能技术领域,具体涉及一种基于人工智能的水环境异常排放监测方法及系统,该方法包括分别采集第一区域和第二区域中河流的多组水质参数,每组水质参数包括由采集单元采集的水质指标和水体表面图像;分别获取在预设时间段内第一区域和第二区域中每个采集单元采集的所有水体表面图像的第一特征描述子序列和第二特征描述子序列;获取第一特征描述子序列和第二特征描述子序列的第一时间差,根据第一时间差得到第一区域与第二区域中相应采集单元的最佳匹配对;提取最佳匹配对所对应的水体表面图像的特征描述子,计算特征描述子之间的第一相似度,根据第一相似度的大小判断是否存在偷排行为,能够有效识别出私设的暗管的偷排行为。

Description

一种基于人工智能的水环境异常排放监测方法及系统
技术领域
本发明涉及人工智能技术领域,具体涉及一种基于人工智能的水环境异常排放监测方法及系统。
背景技术
由于流域水资源具有跨域性,传统的属地原则治理的方式难以解决跨界流域的污染问题,为了破解跨界流域水污染的难题,目前推出了多种联防联控的机制,但是对于在跨界分界点附近的偷排现象是防不胜防;其中,偷排是指企业或者个人为了逃避监管,通过隐蔽的方式设置排污管道,并不经过法定排污口排放污染物。
对于偷排的识别问题,目前常规的做法是通过检测水污染处理设施中各个环节的运行状态参数,以识别各个环节的真实运行情况,例如水泵是否在运行、排水口是否在排污等,将这些运行状态参数与数据库中预存的标准的运行状态参数进行比较,判断是否存在偷排的现象。
发明人在实践中,发现上述现有技术存在以下缺陷:
上述方法是针对已有的设施进行的状态监控,无法针对企业或个人为了偷排而私设的暗管进行监控,通过监控已有设施状态参数的方法无法判断偷排行为。
发明内容
为了解决上述技术问题,本发明的目的在于提供一种基于人工智能的水环境异常排放监测方法及系统,所采用的技术方案具体如下:
第一方面,本发明一个实施例提供了一种基于人工智能的水环境异常排放监测方法,包括:
同一时刻分别采集第一区域中河流的多组水质参数、第二区域中河流的多组水质参数,所述第一区域和第二区域为河流所流经的两个不同的行政区域;每组所述水质参数包括由采集单元采集的水质指标和水体表面图像;
分别获取在预设时间段内所述第一区域中每个采集单元采集的所有所述水体表面图像的第一特征描述子序列、所述第二区域中每个采集单元采集的所有所述水体表面图像的第二特征描述子序列;
获取所述第一特征描述子序列和所述第二特征描述子序列的第一时间差,根据所述第一时间差得到所述第一区域与第二区域中相应采集单元的最佳匹配对;
提取所述最佳匹配对所对应的水体表面图像的特征描述子,计算特征描述子之间的第一相似度,根据第一相似度的大小判断是否存在偷排行为。
进一步,所述所有所述水体表面图像的第一特征描述子序列的获取方法包括:将每张所述水体表面图像输入孪生网络得到第一特征描述子,所有所述水体表面图像的第一特征描述子组成所述第一特征描述子序列。
进一步,孪生网络在训练数据集的获取步骤包括:获取所述河流的多组样本水质参数,提取每组所述样本水质参数中水体表面的样本图像的横向边缘响应之和以及纵向边缘响应之和,根据所述横向边缘响应之和以及纵向边缘响应之和的比值得到边缘系数;所述样本水质参数中的样本水质指标和所述样本图像的边缘系数为水质向量,对所述第一区域和第二区域的所述水质向量进行分类得到相似向量集和不相似向量集,相似向量集对应相似图像数据集、不相似向量集对应不相似图像数据集;所述相似图像数据集和不相似图像数据集组成所述训练数据集。
进一步,所述对所述第一区域和第二区域的所述水质向量进行分类得到相似向量集和不相似向量集的步骤包括:计算所述第一区域的水质向量与所述第二区域的水质向量之间的向量相似度,将所述向量相似度进行聚类得到所述相似向量集和所述不相似向量集。
进一步,所述获取所述第一特征描述子序列和所述第二特征描述子序列的第一时间差的步骤包括:对于任意两个所述第一特征描述子序列和第二特征描述子序列,选取所述第一特征描述子序列或者第二特征描述子序列为目标时间序列,未被选取的特征描述子序列为匹配时间序列;固定目标窗口在目标时间序列上、利用滑动窗口在所述匹配时间序列上滑动,得到窗口相似度序列;根据所述窗口相似度序列中的最大的窗口相似度与采样频率的比值得到所述第一时间差。
进一步,所述根据所述第一时间差得到所述第一区域与第二区域中相应采集单元的最佳匹配对的步骤包括:根据第一时间差分配第一区域的采集单元和第二区域的采集单元之间的权重;根据所述权重得到最佳匹配对。
进一步,所述根据第一时间差分配第一区域的采集单元和第二区域的采集单元之间的权重的步骤包括:通过权重损失函数得到所述权重,所述权重损失函数为时间损失和权重损失的乘积;其中,所述权重损失函数
Figure DEST_PATH_IMAGE001
为:
Figure DEST_PATH_IMAGE003
其中,时间损失函数
Figure 119724DEST_PATH_IMAGE004
,权重约束函数
Figure DEST_PATH_IMAGE005
Figure 854462DEST_PATH_IMAGE006
为第
Figure DEST_PATH_IMAGE007
个采集单元和第
Figure 666560DEST_PATH_IMAGE008
个采集单元之间的所述第一时间差,
Figure DEST_PATH_IMAGE009
为第
Figure 43315DEST_PATH_IMAGE007
个采集单元和第个采集单元之间的所述权重,
Figure 460521DEST_PATH_IMAGE010
为第二时间差;所述第二时间差为多个最大的窗口相似度所对应的所述第一时间差的均值。
所述根据所述权重得到最佳匹配对的方法为采用KM算法得到最佳匹配对。
进一步,所述水质参数包括化学需氧量、氨氮、氰化物浓度指标。
第二方面,本发明另一个实施例提供了一种基于人工智能的水环境异常排放监测系统,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如上述任意一种方法的步骤。
本发明实施例具有如下有益效果:
本实施例提供了一种基于人工智能的水环境异常排放监测方法,该方法通过分别获取在预设时间段内第一区域中每个采集单元采集的所有水体表面图像的第一特征描述子序列、第二区域中每个采集单元采集的所有水体表面图像的第二特征描述子序列;获取第一特征描述子序列和第二特征描述子序列的第一时间差,根据第一时间差得到第一区域与第二区域中相应采集单元的最佳匹配对;提取最佳匹配对所对应的水体表面图像的特征描述子,计算特征描述子之间的第一相似度,根据第一相似度的大小判断是否存在偷排行为,能够有效识别出私设的暗管的偷排行为。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案和优点,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它附图。
图1为本发明实施例的实施环境图;
图2为本发明实施例提供的一种基于人工智能的水环境异常排放监测方法流程图;
图3为本发明实施例提供的孪生网络在训练的过程中训练集的获取步骤流程图;
图4为本发明实施例提供的最佳匹配对的获取步骤流程图。
具体实施方式
为了更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明提出的一种基于人工智能的水环境异常排放监测方法及系统,其具体实施方式、结构、特征及其功效,详细说明如下。在下述说明中,不同的“一个实施例”或“另一个实施例”指的不一定是同一实施例。此外,一或多个实施例中的特定特征、结构、或特点可由任何合适形式组合。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。
请参阅图1,其示出了本发明实施例的实施环境,对于向河流100中排放废水的工厂来说,河流100位于该工厂的下游河段,河水依次流经第一区域101和第二区域102,第一区域101位于第二区域102的上游位置,第一区域101和第二区域102分别属于两个不同行政区域的管辖范围。由于河流较宽,因此在河流100的宽度方向上设置由多个采集单元组成的第一阵列200对河流的水质参数和水体表面图像进行监测,每个采集单元是由一种传感器和一个相机组合而成。
工厂可以是石油、石油化工、钢铁、焦化、机械加工等工业工厂,该工厂所排放的废水中包括油污或者絮状污染物等,能够在水体表面呈现出一定纹理信息。
每个传感器用于采集水质的至少一个化学参数,例如对于水质评价的主要的指标:化学需氧量、氨氮、氰化物浓度指标等,其量纲统一为mg/L。在本发明实施例中采用多参数水质传感器采集多种不同的水质指标。
相机是采用主动红外光源垂直照射水体表面,主动红外光源能够克服日夜间差异,得到统一的水体纹理信息。相机最终采集的图像为一张单通道灰度图像。
由于在第一区域的河道宽度方向上设置的第一阵列200与第二区域的第二阵列300相同,因此以第一阵列200为例进行说明,第一阵列200包括
Figure DEST_PATH_IMAGE011
个采集单元,每个采集单元是由一种传感器和一个相机组合而成,采用分布式传感器网络。为了解决跨界流域偷排现象难易识别的技术难题,本发明实施例通过对第一阵列200和第二阵列300所采集的水质参数进行处理,得到第一区域101和第二区域102中监测数据的第一相似度,若不存在偷排现象两者的第一相似度较大,若第一相似度较小则说明存在偷排的现象。
在本发明实施例中,
Figure 631739DEST_PATH_IMAGE011
的取值为10,在其他实施例中
Figure 259030DEST_PATH_IMAGE011
可以根据实际需要进行取值。
下面结合附图具体的说明本发明所提供的一种基于人工智能的水环境异常排放监测方法及系统的具体方案。
请参阅图2,其示出了本发明一个实施例提供的一种基于人工智能的水环境异常排放监测方法流程图,该监测方法包括以下步骤:
步骤S001,分别采集第一区域中河流的多组水质参数、第二区域中河流的多组水质参数,第一区域和第二区域为河流所流经的两个不同的行政区域;每组水质参数包括由采集单元采集的水质指标和水体表面图像。
进一步,水质指标包括需氧量、氨氮和氰化物浓度指标,将化学需氧量指标记为
Figure 377158DEST_PATH_IMAGE012
、氨氮浓度指标记为
Figure DEST_PATH_IMAGE013
和氰化物浓度指标记为
Figure 436819DEST_PATH_IMAGE014
,将水体表面图像记为
Figure DEST_PATH_IMAGE015
采集单元包括采集水质指标的水质采集装置和采集水体表面图像的相机。将第一区域中该10个采集单元采集到的第一数据序列记为
Figure 778939DEST_PATH_IMAGE016
,其中
Figure DEST_PATH_IMAGE017
为第一区域中第
Figure 300050DEST_PATH_IMAGE007
组采集单元所采集的数据,该组数据
Figure 221870DEST_PATH_IMAGE017
包括相应传感器所采集的水质指标和相机采集的水体表面图像。同理将第二区域中所预设的10个第二采集单元的第二数据序列记为
Figure 613668DEST_PATH_IMAGE018
,其中
Figure DEST_PATH_IMAGE019
为第二区域中第
Figure 126689DEST_PATH_IMAGE008
组采集单元所采集的数据。
在本发明实施例中,预设的10个采集单元之间均匀间隔分布。在其他实施例中,可以根据实际需要进行布置。
步骤S002,分别获取在预设时间段内第一区域中每个采集单元采集的所有水体表面图像的第一特征描述子序列、第二区域中每个采集单元采集的所有水体表面图像的第二特征描述子序列。
在本发明实施例中预设时间为5分钟,采样频率为0.5Hz,因此在5分钟内每个传感器能够采集到150个数据;由于在每个区域的河道宽度方向上都各自设有10个传感器,因此,在5分钟内每个区域均能够采集到1500个数据。
优选的,将第一区域中的每张水体表面图像输入孪生网络得到第一特征描述子,提取该第一区域中的相应采集单元所采集的所有水体表面图像的特征得到第一特征描述子序列。对于每个采集单元来说,所得到的特征描述子序列为按照时间顺序排列的150个特征描述子的集合,该特征描述子序列为时间序列。在其他实施例中,可以根据实际情况设置预设时间段的长度。
孪生网络的训练过程包括:由样本图像组成训练集,样本图像是由第一区域中采集的水体表面的样本图像和第二区域中所采集的水体表面的样本图像组成,包括相似的样本图像和不相似的样本图像;换句话说,孪生网络的训练集包括由相似的样本图像构成的相似图像数据集和由不相似的样本图像构成的不相似图像数据集;将样本图像输入孪生网络,孪生网络将其映射到高维特征空间,并输出特征描述子。利用相似图像数据集和不相似图像数据集训练孪生网络,孪生网络的损失函数采用对比损失,以缩小类内差距、扩大类间差距,其中,相似数据集为一类、不相似数据集为另一类。由于孪生网络为经典的对比学习策略,不再赘述。
优选的,为了扩增训练样本,本发明实施例采用将训练集中的样本图像做上下镜像或左右镜像,以扩充样本图像。对水体表面的样本图像做上下和左右镜像处理可以扩增水体流动的纹理特征,基于本发明实施例中图像采集的方式,对水体表面的样本图像镜像后仍能代表同一种水体表面的纹理特征,进而实现四倍扩增样本的效果。
需要说明的是,基于足够长时间的数据信息采集和数据处理,以使在该时间内能够采集到正常的排污过程和无排污过程中的数据,基于所采集到的多种状况下的水体表面图像最终完成孪生网络的训练。
请参阅图3,为了达到对水体表面的样本图像自动标注的目的,本发明实施例进一步提供了孪生网络在训练的过程中其相似图像数据集和不相似图像数据集的获取步骤包括:
步骤S210,获取河流的多组样本水质参数,提取每组样本水质参数中水体表面的样本图像的横向边缘响应之和以及纵向边缘响应之和,根据横向边缘响应之和以及纵向边缘响应之和的比值得到边缘系数。
样本水质参数是在训练阶段所采集的水质参数,该样本水质参数可以是历史采集的水质参数,也可以是实时采集的用于训练的水质参数;该样本水质参数同样包括由采集单元采集的样本水质指标和水体表面的样本图像。
由于水体的流动性,在排放污染物时,水体表面会存在较为明显的纹理变化,使用传统的视觉检测方法容易出现较大误差,因此为了得到水体纹理特征,采用联合判断的方式进行处理。
以第一区域中第
Figure 728572DEST_PATH_IMAGE007
个采集单元所采集的水体表面图像为例,对提取样本图像的横向边缘响应之和以及纵向边缘响应之和的方法进行说明:规定在图像坐标系中,以水体流动的主方向为纵轴、垂直于水体流动的方向为横轴,建立图像坐标系;利用Sobel算子对水体表面图像进行卷积处理,提取横向边缘强度,得到横向的边缘强度图像
Figure 454082DEST_PATH_IMAGE020
,并得到边缘响应之和
Figure DEST_PATH_IMAGE021
;同理利用Sobel算子对该水体表面图像进行卷积处理,提取纵向边缘强度,得到纵向的边缘强度图像
Figure 497125DEST_PATH_IMAGE022
,并得到边缘响应之和
Figure DEST_PATH_IMAGE023
边缘系数描述的是水体中的异常物体流经相机所采集的图像区域时的纹理差异强度。由于水体的流向是纵向,而获得的图像在纵向上具有明显相对横向运动更大的模糊效应,因此将纵向的边缘响应之和
Figure 53483DEST_PATH_IMAGE023
作为基准归一化系数,得到边缘系数
Figure 877083DEST_PATH_IMAGE024
。边缘系数越大,越说明在水体中出现顺流而下的异常物体越显著。
步骤S220,样本水质参数中的样本水质指标和样本图像的边缘系数为水质向量,对第一区域和第二区域的水质向量进行分类得到相似向量集和不相似向量集,相似向量集对应相似图像数据集、不相似向量集对应不相似图像数据集,相似图像数据集和不相似图像数据集组成训练数据集。
由于传感器监测的水质参数的大小可能会存在忽高忽低的情况,因此采用边缘系数对相应的水质指标进行约束,以提高水质指标的可信度。
将水质向量记为
Figure DEST_PATH_IMAGE025
,将第一区域的第
Figure 671864DEST_PATH_IMAGE007
个传感器的水质向量记为第一水质向量
Figure 772675DEST_PATH_IMAGE017
,将第二区域的第
Figure 955394DEST_PATH_IMAGE008
个传感器的水质向量记为第二水质向量
Figure 407235DEST_PATH_IMAGE019
。对水质向量进行分类的方法为:计算第一水质向量
Figure 599182DEST_PATH_IMAGE017
与第二水质向量
Figure 554500DEST_PATH_IMAGE019
之间的向量相似度,将向量相似度进行聚类得到相似向量集和不相似向量集。
其中,将第一水质向量
Figure 314646DEST_PATH_IMAGE017
和第二水质向量
Figure 112837DEST_PATH_IMAGE019
之间的相似度记为向量相似度
Figure 718262DEST_PATH_IMAGE026
,则相似度
Figure 652720DEST_PATH_IMAGE026
的计算方法为:
Figure 586697DEST_PATH_IMAGE028
Figure DEST_PATH_IMAGE029
为余弦相似度,其值域为[0,1],
Figure 278709DEST_PATH_IMAGE026
的值越大意味着两个化学指标越相似。对相似度
Figure 687825DEST_PATH_IMAGE026
进行归一化得到归一化之后的相似度
Figure 476789DEST_PATH_IMAGE030
将归一化之后的相似度分为两类,以区分第一水质向量与第二水质向量之间的相似向量和不相似向量。采用K-Means聚类方法,该方法中的K取值为2,对归一化后的相似度进行距离聚类得到两簇数据;将这两簇数据分别标记两个类别,相似类别标记为相似向量集,不相似类别标记为不相似向量集;根据两簇水质向量所分别对应的第一水体表面图像
Figure 578738DEST_PATH_IMAGE015
,得到用于训练孪生网络的两个对应的数据集,相似向量集对应的第一水体表面图像构成相似图像数据集,不相似向量集对应的第一水体表面图像构成不相似图像数据集。
步骤S003,获取第一特征描述子序列和第二特征描述子序列的第一时间差,根据第一时间差得到第一区域与第二区域中相应采集单元的最佳匹配对。
在水体中的漂浮物以及相应的化学物品从上游的第一区域流动到下游的第二区域存在一定的时间差。因此需要基于上下游所采集的数据确定上下游采集单元之间的最佳时间差。
请参阅图4,获取第一特征描述子序列和第二特征描述子序列的第一时间差的步骤包括:
步骤S310,对于任意两个第一特征描述子序列和第二特征描述子序列,选取第一特征描述子序列或者第二特征描述子序列为目标时间序列,未被选取的特征描述子序列为匹配时间序列;固定目标窗口在目标时间序列上、利用滑动窗口在匹配时间序列上滑动,得到窗口相似度序列。
其中,滑动窗口的时间长度为1分钟,由于数据的采样频率为0.5Hz,因此该长度的滑动窗口每次滑动均能够得到由30个特征描述子构成的子序列。在其他实施例中,可根据河流的典型流速划分滑动窗口的大小。
窗口相似度的计算的过程包括:以第二特征描述子序列为目标时间序列、第一特征描述子序列为匹配时间序列为例,在第二特征描述子序列上滑动的滑动窗口称为目标窗口、在第一特征描述子序列上滑动的滑动窗口称为匹配窗口,以下不再声明。基于起始时间为0的时刻,利用滑动窗口得到第一特征描述子序列的匹配子序列、第二特征描述子序列的目标子序列,计算匹配子序列和目标子序列之间的余弦相似度序列。
具体的,将匹配窗口中的匹配子序列记为
Figure DEST_PATH_IMAGE031
、目标窗口中的目标子序列记为
Figure 492467DEST_PATH_IMAGE032
、匹配子序列与目标子序列之间的余弦相似度序列记为
Figure DEST_PATH_IMAGE033
,其中,匹配子序列中的第
Figure 502011DEST_PATH_IMAGE007
个特征描述子
Figure 817586DEST_PATH_IMAGE034
与目标子序列的第
Figure 683911DEST_PATH_IMAGE008
特征描述子
Figure DEST_PATH_IMAGE035
之间的相似度
Figure 350516DEST_PATH_IMAGE036
的计算方法为:
Figure 98504DEST_PATH_IMAGE038
其中,
Figure 3006DEST_PATH_IMAGE036
表示时间窗口中两个元素的第
Figure DEST_PATH_IMAGE039
个相似度,
Figure 446757DEST_PATH_IMAGE040
为余弦相似度。
计算该余弦相似度序列
Figure 194133DEST_PATH_IMAGE033
的平均相似度,该平均相似度为起始时间为0的目标窗口与滑动窗口之间的窗口相似度,将该窗口相似度记为
Figure DEST_PATH_IMAGE041
步骤S320,根据窗口相似度序列中的最大的窗口相似度与采样频率的比值得到第一时间差。
具体的,移动第一区域对应的滑动窗口到第一特征描述子序列的下一个位置,即得到基于起始时间为1的匹配子序列;计算基于起始时间为1的匹配子序列和起始时间为0的目标子序列之间的平均相似度,得到起始时间为0的目标窗口与起始时间为1的匹配窗口之间的窗口相似度
Figure 279901DEST_PATH_IMAGE042
。重复上述操作,固定目标窗口、每次移动第一特征描述子序列的滑动窗口到下一个位置之后,计算一次相应的匹配子序列与起始时间为0的目标子序列之间的窗口相似度
Figure DEST_PATH_IMAGE043
;直至完成对第一区域中150条数据的窗口滑动,也即完成第一特征描述子序列的窗口滑动,得到基于滑动窗口的窗口相似度序列
Figure 570068DEST_PATH_IMAGE044
基于同样的方法,计算任意两个采集单元所对应的第一特征描述子和第二特征描述子之间的窗口相似度序列,得到第一区域和第二区域中所有组合的采集单元对应的窗口相似度序列。计算每个窗口相似度序列中最大的窗口相似度为相应采集单元的单元相似度、最大的窗口相似度所对应的时间差为相应采集单元之间的第一时间差。
其中,任意两个采集单元所对应的第一时间差的计算方法为:获取任意两个采集单元对应的窗口相似度,窗口相似度对应的时间窗口的滑动次数与刷新频率的比值的均值为第一时间差。具体的,记第一区域中第
Figure 919141DEST_PATH_IMAGE007
个采集单元和第二区域中第
Figure 888234DEST_PATH_IMAGE008
个采集单元之间的时间差为第一时间差
Figure 980955DEST_PATH_IMAGE006
、窗口相似度为
Figure 860049DEST_PATH_IMAGE043
、采样频率为
Figure DEST_PATH_IMAGE045
,因此第一时间差
Figure 925830DEST_PATH_IMAGE046
。其中,在本发明实施例中采样频率的取值为0.5 Hz,在其他实施例中可根据实际情况进行设定。
作为一个示例,在窗口相似度序列
Figure 382219DEST_PATH_IMAGE044
中的最大的窗口相似度为
Figure DEST_PATH_IMAGE047
,那么相应的第一时间差为:
Figure 685156DEST_PATH_IMAGE048
选取多个最大的窗口相似度所对应的第一时间差,求均值得到第二时间差。在本发明实施例中选取10个最大的窗口相似度,在其他实施例中可根据需求调节选取的数量。
进一步,为了进一步消除两地对传感器的不信任问题,并在总体上降低系统内部误差,在得到第一时间差之后,基于最优化的方式得到传感器权重。因此在步骤S320之后还包括以下优化步骤:
步骤S330,根据第一时间差分配第一区域的采集单元和第二区域的相似采集单元之间的权重;根据权重得到最佳匹配对。
由于所给定的滑动窗口的大小不是最优的,因此无法确定采集单元之间的权重是最优的。为了得到采集单元之间的最优权重,构建权重损失函数,权重损失函数为时间损失函数
Figure DEST_PATH_IMAGE049
和权重约束函数
Figure 215494DEST_PATH_IMAGE050
的乘积,则权重损失函数
Figure 31004DEST_PATH_IMAGE001
为:
Figure 850055DEST_PATH_IMAGE003
其中,时间损失函数
Figure 143633DEST_PATH_IMAGE004
,权重约束函数
Figure 997320DEST_PATH_IMAGE005
Figure 124676DEST_PATH_IMAGE006
为第
Figure 555657DEST_PATH_IMAGE007
个采集单元和第
Figure 528292DEST_PATH_IMAGE008
个采集单元之间的第一时间差,
Figure 95540DEST_PATH_IMAGE009
为第
Figure 125288DEST_PATH_IMAGE007
个采集单元和第
Figure 184511DEST_PATH_IMAGE008
个采集单元之间的权重,
Figure 819892DEST_PATH_IMAGE010
为第二时间差。
第一时间差的计算方式受到采集单元权重的影响,有
Figure DEST_PATH_IMAGE051
采用权重约束函数的目的是为了防止每个采集单元的权值被调节的过低。
在权重损失函数
Figure 913750DEST_PATH_IMAGE001
收敛时,此时得到第
Figure 117329DEST_PATH_IMAGE007
个采集单元和第
Figure 522903DEST_PATH_IMAGE008
个采集单元之间的优化权重。
进一步,根据优化权重得到最佳匹配对的方法为采用KM算法通过最大匹配得到对应的最佳匹配对,也即得到第一区域和第二区域中采集单元的最佳匹配对,避免由于传感器工况不一而获取的片面数据,造成两地数据不一致的误判问题。
基于最优化方式得到每两个采集单元之间的权重,降低时间差残差。
步骤S004,提取最佳匹配对所对应的水体表面图像的特征描述子,计算特征描述子之间的第一相似度,根据第一相似度的大小判断是否存在偷排行为。
采用与步骤310和步骤320相同的方法得到最佳匹配对所对应的特征描述子序列之间的窗口相似度序列,由步骤S003中得到最佳匹配对之间的权重,将窗口相似度序列与相应的权重加权平均得到最终相似度,根据该最终相似度判断是否存在偷排行为,判断的方法为:
当最终相似度低于预设最低阈值时,在第一区域发现偷排问题,但在第二区域未发现偷排问题,则确定第二区域存在隐瞒行为;
当最终相似度低于预设最低阈值时,在第二区域发现水质参数超标,但在第一区域未发现该问题,则确定第一区域存在偷排行为;
当最终相似度高于预设最高阈值时,确定第一区域和第二区域之间没有隐瞒和偷排的行为。
也即,在两个区域之间的最终相似度高于最高阈值时,则认为两个区域之间不存在偷排和隐瞒的行为;若两者之间的相似度低于最低阈值时,任一地区发现偷排或者隐瞒行为,均能够在另一地区得到验证。
综上所述,本实施例提供了一种基于人工智能的水环境异常排放监测方法,该方法通过分别获取在预设时间段内第一区域中每个采集单元采集的所有水体表面图像的第一特征描述子序列、第二区域中每个采集单元采集的所有水体表面图像的第二特征描述子序列;获取第一特征描述子序列和第二特征描述子序列的第一时间差,根据第一时间差得到第一区域与第二区域中相应采集单元的最佳匹配对;提取最佳匹配对所对应的水体表面图像的特征描述子,计算特征描述子之间的第一相似度,根据第一相似度的大小判断是否存在偷排行为,能够有效解决私设的暗管的偷排行为。
基于同样的发明构思,本发明实施例还提供了一种基于人工智能的水环境异常排放监测系统,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述任意一个实施例所述的一种基于人工智能的水环境异常排放监测方法的步骤。其中,一种基于人工智能的水环境异常排放监测方法在上述实施例中已经详细说明,不再赘述。
需要说明的是:上述本发明实施例先后顺序仅仅为了描述,不代表实施例的优劣。且上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于人工智能的水环境异常排放监测方法,其特征在于,包括:
分别采集第一区域中河流的多组水质参数、第二区域中河流的多组水质参数,所述第一区域和第二区域为河流所流经的两个不同的行政区域;每组所述水质参数包括由采集单元采集的水质指标和水体表面图像;
分别获取在预设时间段内所述第一区域中每个采集单元采集的所有所述水体表面图像的第一特征描述子序列、所述第二区域中每个采集单元采集的所有所述水体表面图像的第二特征描述子序列;
获取所述第一特征描述子序列和所述第二特征描述子序列的第一时间差,根据所述第一时间差得到所述第一区域与第二区域中相应采集单元的最佳匹配对;
提取所述最佳匹配对所对应的水体表面图像的特征描述子,计算特征描述子之间的第一相似度,根据第一相似度的大小判断是否存在偷排行为。
2.根据权利要求1所述的一种基于人工智能的水环境异常排放监测方法,其特征在于,所述所有所述水体表面图像的第一特征描述子序列的获取方法包括:将每张所述水体表面图像输入孪生网络得到第一特征描述子,所有所述水体表面图像的第一特征描述子组成所述第一特征描述子序列。
3.根据权利要求2所述的一种基于人工智能的水环境异常排放监测方法,其特征在于,孪生网络在训练数据集的获取步骤包括:
获取所述河流的多组样本水质参数,提取每组所述样本水质参数中水体表面的样本图像的横向边缘响应之和以及纵向边缘响应之和,根据所述横向边缘响应之和以及纵向边缘响应之和的比值得到边缘系数;
所述样本水质参数中的样本水质指标和所述样本图像的边缘系数为水质向量,对所述第一区域和第二区域的所述水质向量进行分类得到相似向量集和不相似向量集,相似向量集对应相似图像数据集、不相似向量集对应不相似图像数据集;所述相似图像数据集和不相似图像数据集组成所述训练数据集。
4.根据权利要求3所述的一种基于人工智能的水环境异常排放监测方法,其特征在于,所述对所述第一区域和第二区域的所述水质向量进行分类得到相似向量集和不相似向量集的步骤包括:计算所述第一区域的水质向量与所述第二区域的水质向量之间的向量相似度,将所述向量相似度进行聚类得到所述相似向量集和所述不相似向量集。
5.根据权利要求1所述的一种基于人工智能的水环境异常排放监测方法,其特征在于,所述获取所述第一特征描述子序列和所述第二特征描述子序列的第一时间差的步骤包括:
对于任意两个所述第一特征描述子序列和第二特征描述子序列,选取所述第一特征描述子序列或者第二特征描述子序列为目标时间序列,未被选取的特征描述子序列为匹配时间序列;固定目标窗口在目标时间序列上、利用滑动窗口在所述匹配时间序列上滑动,得到窗口相似度序列;
根据所述窗口相似度序列中的最大的窗口相似度与采样频率的比值得到所述第一时间差。
6.根据权利要求5所述的一种基于人工智能的水环境异常排放监测方法,其特征在于,所述根据所述第一时间差得到所述第一区域与第二区域中相应采集单元的最佳匹配对的步骤包括:
根据第一时间差分配第一区域的采集单元和第二区域的采集单元之间的权重;根据所述权重得到最佳匹配对。
7.根据权利要求6所述的一种基于人工智能的水环境异常排放监测方法,其特征在于,所述根据第一时间差分配第一区域的采集单元和第二区域的采集单元之间的权重的步骤包括:
通过权重损失函数得到所述权重,所述权重损失函数为时间损失和权重损失的乘积;
其中,所述权重损失函数
Figure DEST_PATH_IMAGE002
为:
Figure DEST_PATH_IMAGE004
其中,时间损失函数
Figure DEST_PATH_IMAGE006
,权重约束函数
Figure DEST_PATH_IMAGE008
Figure DEST_PATH_IMAGE010
为第
Figure DEST_PATH_IMAGE012
个采集单元和第
Figure DEST_PATH_IMAGE014
个采集单元之间的所述第一时间差,为第
Figure 675152DEST_PATH_IMAGE012
个采集单元和第
Figure 185768DEST_PATH_IMAGE014
个采集单元之间的所述权重,
Figure DEST_PATH_IMAGE016
为第二时间差;
所述第二时间差为多个最大的窗口相似度所对应的所述第一时间差的均值。
8.根据权利要求6所述的一种基于人工智能的水环境异常排放监测方法,其特征在于,所述根据所述权重得到最佳匹配对的方法为采用KM算法得到最佳匹配对。
9.根据权利要求1所述的一种基于人工智能的水环境异常排放监测方法,其特征在于,所述水质参数包括化学需氧量、氨氮、氰化物浓度指标。
10.一种基于人工智能的水环境异常排放监测系统,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-9任意一项所述方法的步骤。
CN202210677570.9A 2022-06-16 2022-06-16 一种基于人工智能的水环境异常排放监测方法及系统 Active CN114757601B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210677570.9A CN114757601B (zh) 2022-06-16 2022-06-16 一种基于人工智能的水环境异常排放监测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210677570.9A CN114757601B (zh) 2022-06-16 2022-06-16 一种基于人工智能的水环境异常排放监测方法及系统

Publications (2)

Publication Number Publication Date
CN114757601A true CN114757601A (zh) 2022-07-15
CN114757601B CN114757601B (zh) 2022-08-26

Family

ID=82336773

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210677570.9A Active CN114757601B (zh) 2022-06-16 2022-06-16 一种基于人工智能的水环境异常排放监测方法及系统

Country Status (1)

Country Link
CN (1) CN114757601B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116090709A (zh) * 2023-04-10 2023-05-09 广东慧航天唯科技有限公司 基于金属加工监控的偷排预警分析方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101302042A (zh) * 2008-04-21 2008-11-12 东南大学 一种工业园区废水排放污染物智能化监控方法
CN112101796A (zh) * 2020-09-16 2020-12-18 清华大学合肥公共安全研究院 一种水环境污染风险综合感知识别系统
CN112723613A (zh) * 2021-04-01 2021-04-30 南京国睿智能装备有限公司 一种污水处理站智能远程监管方法及终端
CN113420070A (zh) * 2021-06-24 2021-09-21 平安国际智慧城市科技股份有限公司 排污监测数据处理方法、装置、电子设备及存储介质
CN113702612A (zh) * 2021-10-28 2021-11-26 江苏瑞立环保工程股份有限公司 基于人工智能的河岸污染检测及考察地点选址方法及系统
CN113778967A (zh) * 2021-09-14 2021-12-10 中国环境科学研究院 长江流域数据采集处理与资源共享系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101302042A (zh) * 2008-04-21 2008-11-12 东南大学 一种工业园区废水排放污染物智能化监控方法
CN112101796A (zh) * 2020-09-16 2020-12-18 清华大学合肥公共安全研究院 一种水环境污染风险综合感知识别系统
CN112723613A (zh) * 2021-04-01 2021-04-30 南京国睿智能装备有限公司 一种污水处理站智能远程监管方法及终端
CN113420070A (zh) * 2021-06-24 2021-09-21 平安国际智慧城市科技股份有限公司 排污监测数据处理方法、装置、电子设备及存储介质
CN113778967A (zh) * 2021-09-14 2021-12-10 中国环境科学研究院 长江流域数据采集处理与资源共享系统
CN113702612A (zh) * 2021-10-28 2021-11-26 江苏瑞立环保工程股份有限公司 基于人工智能的河岸污染检测及考察地点选址方法及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116090709A (zh) * 2023-04-10 2023-05-09 广东慧航天唯科技有限公司 基于金属加工监控的偷排预警分析方法及系统

Also Published As

Publication number Publication date
CN114757601B (zh) 2022-08-26

Similar Documents

Publication Publication Date Title
US11507049B2 (en) Method for detecting abnormity in unsupervised industrial system based on deep transfer learning
CN101403676B (zh) 基于d-s证据理论的绝缘子憎水性等级融合判决方法
CN110287439A (zh) 一种基于lstm的网络行为异常检测方法
Branisavljević et al. Improved real-time data anomaly detection using context classification
CN108665119B (zh) 一种供水管网异常工况预警方法
CN110245880A (zh) 一种污染源在线监控数据作弊识别方法
CN114757601B (zh) 一种基于人工智能的水环境异常排放监测方法及系统
CN112414694B (zh) 基于多元状态估计技术的设备多级异常状态识别方法及装置
KR102435919B1 (ko) 다차원 데이터를 이용한 옥내 누수 탐지 및 유형 구분 장치, 방법 및 프로그램
Ye et al. Diagnosis of sewer pipe defects on image recognition of multi-features and support vector machine in a southern Chinese city
CA2954812A1 (fr) Procede pour detecter des anomalies dans un reseau de distribution, en particulier d'eau potable
CN117556714B (zh) 一种用于铝金属冶炼的预热管路温度数据异常分析方法
KR20230137788A (ko) 셀프 어텐션 메커니즘 기반 다양한 유형의 배관 결함에 대한 검사, 추적 및 계수방법
Li et al. Traffic prediction, data compression, abnormal data detection and missing data imputation: An integrated study based on the decomposition of traffic time series
CN114972194A (zh) 一种从不一致标签中检测缺陷的方法
Benens et al. Evaluation of different shape parameters to distinguish between flocs and filaments in activated sludge images
El Mountassir et al. Feature selection techniques for identifying the most relevant damage indices in SHM using Guided Waves
CN115018790A (zh) 一种基于异常检测的工件表面缺陷检测方法
CN117421616B (zh) 一种矿山竖井井筒检测系统及方法
CN117235661B (zh) 基于ai的直饮水质量监测方法
CN117115637A (zh) 一种基于大数据技术的水质监测预警方法及系统
CN113343123A (zh) 一种生成对抗多关系图网络的训练方法和检测方法
Ihsan et al. Deep Learning Based Anomaly Detection on Natural Gas Pipeline Operational Data
Maru et al. Collective anomaly detection for multivariate data using generative adversarial networks
Javed et al. Analysis of hydrological and suspended sediment events from Mad River watershed using multivariate time series clustering

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant