CN114897242A - 一种自适应分割时段场次降雨径流的方法 - Google Patents
一种自适应分割时段场次降雨径流的方法 Download PDFInfo
- Publication number
- CN114897242A CN114897242A CN202210504031.5A CN202210504031A CN114897242A CN 114897242 A CN114897242 A CN 114897242A CN 202210504031 A CN202210504031 A CN 202210504031A CN 114897242 A CN114897242 A CN 114897242A
- Authority
- CN
- China
- Prior art keywords
- rainfall
- time
- flood
- flow
- peak
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 103
- 238000012216 screening Methods 0.000 claims abstract description 13
- 230000001186 cumulative effect Effects 0.000 claims abstract description 8
- 238000004364 calculation method Methods 0.000 claims description 22
- 238000011156 evaluation Methods 0.000 claims description 11
- 238000009499 grossing Methods 0.000 claims description 10
- 238000005457 optimization Methods 0.000 claims description 10
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims description 7
- 238000007621 cluster analysis Methods 0.000 claims description 6
- 238000003646 Spearman's rank correlation coefficient Methods 0.000 claims description 4
- 238000012545 processing Methods 0.000 claims description 4
- 230000003044 adaptive effect Effects 0.000 claims description 3
- 238000005259 measurement Methods 0.000 claims description 3
- 238000010606 normalization Methods 0.000 claims description 3
- 230000011218 segmentation Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 2
- 238000006424 Flood reaction Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/04—Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A10/00—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE at coastal zones; at river basins
- Y02A10/40—Controlling or monitoring, e.g. of flood or hurricane; Forecasting, e.g. risk assessment or mapping
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Human Resources & Organizations (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Physics & Mathematics (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Game Theory and Decision Science (AREA)
- Development Economics (AREA)
- Data Mining & Analysis (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Testing Or Calibration Of Command Recording Devices (AREA)
Abstract
本发明提供一种自适应分割时段场次降雨径流的方法,包括以下步骤:S1、收集已知区域的连续降雨径流数据;S2、波峰波谷自动计算和识别;S3、降雨场次自动分割,识别降雨开始和结束时间,计算场次累积降雨量;S4、降雨径流场次自动分割,根据降雨开始结束时间识别相应场次洪水开始结束时间;S5、场次洪水洪峰峰数识别,根据单场次洪水中波峰与波谷差值,鉴定洪峰数量;S6、相关系数计算,计算场次降雨径流累积降雨量与流量最大涨幅的相关系数;S7、参数寻优;S8、筛选符合要求的场次降雨径流过程。该方法能够提高分割场次降雨径流准确率,且自适应程度较高,可全部实现自动化,能快速、高效分割场次降雨径流。
Description
技术领域
本发明涉及水文预报领域领域,特别涉及一种自适应分割时段场次降雨径流的方法。
背景技术
一定程度的降雨导致河段断面流量波动,那么降雨不一定都会使流量波动;反之,河段流量波动可能是降雨导致,也可能是上游流量波动或水库开闸或其他原因形成。目前,从连续水文资料中提取场次洪水较容易,而提取完整的场次降雨径流主要为人工靠经验识别,效率较低,或者不能严格提取出场次洪水对应的场次降雨,提取的结果准确性较低。
公开号为CN109785979A的发明专利申请公开了一种场次洪水降雨径流过程界定方法,该方法只给出了洪峰流量的数学识别方法,对于洪水和降雨的起始时间、开始时间、均未给出具体的识别方法,仍需人工判定。公开号为CN112561214A的发明专利申请公开了一种自动识别场次洪水的方法及系统,该发明没有给出阐述具体寻找雨量过程的开始结束位置的方法,且没有关联雨量过程和洪水过程,已致实施案例三中划分结果第三场和第五场洪水持续时间过长。公开号为CN110929956B的发明专利申请公开了一种基于机器学习的洪水预报方案实时优选方法,该发明阐述降雨、洪水场次关联方法为:若降雨事件的质心落入与洪水事件相关的一定时间窗口中,则认为降雨事件与洪水事件为关联事件,然而若降雨事件为凹变形,其质心很难落入时间窗口中,而且该专利没有阐述时间窗口的时间长度如何设定。
场次降雨径流是研究流域产汇流的主要资料,是水文预报的基础资料,因此有必要研发一套能合理、准确提取场次降雨径流的方法,将人工经验凝练提升为科学规律,并能使用计算机语言实现自动、批量进行处理,快速、高效的进行分割场次降雨径流。
发明内容
本发明所要解决的技术问题是提供一种自适应分割时段场次降雨径流的方法,关联洪水与降雨形成一场完整的场次降雨径流,提高分割场次降雨径流准确率,且自适应程度较高,可全部实现自动化,能快速、高效分割场次降雨径流。
为解决上述技术问题,本发明所采用的技术方案是:为解决上述技术问题,本发明所采用的技术方案是:一种自适应分割时段场次降雨径流的方法,包括以下步骤:
S1、收集已知区域的连续降雨径流数据;
S2、波峰波谷自动计算和识别;
S3、降雨场次自动分割,设置雨强阈值和降雨间歇时间阈值,识别降雨开始和结束时间,计算场次累积降雨量;
S4、降雨径流场次自动分割,设置时间窗口阈值,根据降雨开始结束时间识别相应场次洪水开始结束时间;
S5、场次洪水洪峰数量识别,根据单场次洪水中波峰与波谷差值,鉴定洪峰数量;
S6、相关系数计算,计算场次降雨径流累积降雨量pn sum与流量最大涨幅Qn up的相关系数;
S7、参数寻优,寻优评价指标为步骤S6中累积降雨量pn sum与流量最大涨幅Qn up的相关系数最大,且满足随着洪峰数量增多,相关系数降低;
S8、筛选符合要求的场次降雨径流过程。
所述步骤S1包括以下步骤:
S11、收集已知区域包含需被划分且连续不间断的流量数据以及时间序列;
S12、获取S11步骤中对应集水区域的面降雨量以及时间序列,要求时间步长相同,且数据连续不间断,获取S11步骤中对应集水区域的面降雨量以及时间序列,要求时间步长相同,且数据连续不间断,所需划分数据的前后设置缓冲期。
优选的方案中,所述步骤S2包括以下步骤:
S21、锯齿特征明显的流量过程进行平滑处理,光滑的流量过程直接使用;
S22、对流量数据进行波峰波谷标记,并记录波峰流量及波峰时刻,波谷流量及波谷时刻,按照如下公式判断波峰流量及波峰时刻:
q’t-1<q’t且q’t>q’t+1
式中q’为平滑流量,q’t-1,q’t,q’t+1为第t-1,t,t+1时刻平滑流量,t时刻即为波峰时刻,该时刻对应的原流量则为波峰流量;
按照如下公式判断波谷流量及波谷时刻:
q’t-1>q’t且q’t<q’t+1
t时刻即为波谷时刻,该时刻对应的原流量则为波谷流量;
S23、按时间顺序记录并编码波峰时刻及其对应的波峰流量,波谷时刻及其对应的波谷流量。
优选的方案中,所述步骤S21中,平滑处理采用Savitzky-Golay滤波器,计算公式如下:
假设滤波器平滑窗口的宽度为n=2m+1,各个测量数据X=(x1,x2,.....,xn)采用k-1次多项式对窗口内的数据进行拟合,xi可以用多项式进行拟合:
参数m,k的确定评价指标包括可决系数R2或Nash-Sutcliffe效率系数(NSE),R2或NSE越大,参数越优,其中,可决系数R2计算公式如下:
Nash-Sutcliffe效率系数(NSE)计算公式如下:
优选的方案中,所述步骤S3包括以下步骤:
S31、时段降雨数据填充处理,将无降雨时刻填充为0mm降雨量;
S32、场次降雨开始和结束时间识别:设置时段降雨阈值参数Pmin和降雨最大间歇时间阈值参数Tstop,当时段降雨连续Tstop时间小于Pmin值时,则鉴别为两场降雨,连续降雨小于Pmin值时间不足Tstop值时鉴别为一场降雨,计算公式如下:
diff=ti-ti-1
式中t为降雨大于Pmin的时刻,ti和ti-1表示该时刻和上一个相邻时刻,当diff大于Tstop时,则ti-1为上一场降雨的结束时刻,ti为该场降雨的开始时刻;
S33、统计场次累积降雨量,一场次降雨开始时刻直至降雨结束时刻内的降雨求和,包含开始时刻和结束时刻降雨,计算公式如下:
Psum=∑pt
式中pt为同一场次时段降雨。
S34、记录每一场次降雨开始时间、结束时间、累积降雨量,并按时间顺序进行编码Pn,pn strt、pn endt、pn sum分别表示为第n场次降雨及其对应的开始时间、结束时间、累积降雨量。
优选的方案中,所述步骤S4包括以下步骤:
S41、设定时间阈值参数Tpro,对于自然流域,当场次降雨开始时间之后的Tpro时间内存在流量波谷,则取最后一个流量波谷作为该场次降雨对应的洪水开始时间;对于有水利工程流域或有外在影响因素流域,若当部分场次降雨开始时间之后的Tpro时间不存在流量波谷,则取降雨开始时间之前最近的波谷时间作为洪水开始时间;
S42、设定时间阈值参数Tbre,降雨结束时间往后推Tbre时间之后的第一个流量波谷为该场次降雨对应的洪水结束时间,洪水开始时间和结束时间之间的流量过程则认为是该场次降雨对应的流量变化过程,场次降雨和其对应的场次洪水视为一场次降雨径流过程;
S43、计算一场次降雨径流过程中流量最大涨幅,即流量最大值减去洪水开始时间对应的流量值,计算公式输入:
S44、记录每一场次降雨径流过程的降雨开始时间pn strt、降雨结束时间pn endt、累积降雨量pn sum,洪水开始时间Qi strt及其流量Qi str、洪水结束时间Qi endt及其流量Qi end、该时间段内的流量最大值Qn max、流量最大涨幅Qn up及所有的波峰Qn_i peak、波谷Qn_i valley。
优选的方案中,所述步骤S5鉴定洪峰数量步骤包括:
S51、单峰洪水识别:若一场次降雨径流过程中,只有一个波峰,则鉴别为单峰洪水。
S52、双峰及以上洪水识别:若一场次降雨径流过程中,有多个波峰,设定比例阈值参数Qdiff,若有波谷与两侧相邻波峰差值分别占两侧波峰值的比例超过Qdiff时,即为多峰洪峰,否则,仍为单峰洪水,公式如下:
(Qi-1 peak-Qi valley)/Qi-1 peak>=Qdiff且(Qi+1 peak-Qi valley)/Qi+1 peak>=Qdiff
式中,Qi valley为一场次降雨径流的波谷流量,Qi-1 peak和Qi+1 peak分别为两侧相邻的波峰流量,当满足上述关系时,记录为有效波谷,有效波谷个数为1时,为双峰洪水;有效波谷个数为2时,为三峰洪水;有效波谷个数为3时,为四峰洪水,以此类推。优选的方案中,所述步骤S6中计算累积降雨量与流量最大涨幅的相关系数,采用线性相关或非线性相关方法,线性相关计算公式如下:
式中,r(X,Y)为两组相同个数X,Y数据的相关系数,Var[X]为X数据的方差,Var[Y]为Y数据的方差,Cov[X,Y]为X与Y的协方差;
非线性相关方法采用Spearman秩相关,公式如下:
式中,ps为两组相同个数X,Y数据的Spearman秩相关系数,di为两组数据秩次之差,即xi,yi按大小排序的序号之差,n为数据的个数。
优选的方案中,所述步骤S6中计算累积降雨量与流量最大涨幅的相关系数,采用线性相关或非线性相关方法,线性相关计算公式如下:
式中,r(X,Y)为两组相同个数X,Y数据的相关系数,Var[X]为X数据的方差,Var[Y]为Y数据的方差,Cov[X,Y]为X与Y的协方差;
非线性相关方法采用Spearman秩相关,公式如下:
式中,ps为两组相同个数X,Y数据的Spearman秩相关系数,di为两组数据秩次之差,即xi,yi按大小排序的序号之差,n为数据的个数。
优选的方案中,所述步骤S7中,参数寻优方法包括网格搜索调优方法或投影寻踪寻优方法;
所述网格搜索调优方法,通过在参数数组中进行穷举搜索,对每种情况进行训练,找到最优的参数;所述投影寻踪寻优方法,通过把高维数据投影到低维子空间上,寻找出能反映原高维数据的结构或特征的投影,达到研究分析高维数据的目的,包括如下步骤:
(1)样本数据归一化:
(2)线性投影:
从不同的角度去观察数据,寻找最能挖掘数据大的最有投影方向,随机抽取若干初始投影方向a(a1,a2,..,am),计算其投影指标的大小,确定最大指标的投影的解为其最佳投影方向:
样本i在一维空间的投影方向为(a1,a2,..,am)上的投影特征值定义为:
(3)寻找目标函数:
定义目标函数为Q(a),类间距离为s(a),类内密度为d(a),
Q(a)=s(a)d(a)
类间距离用样本序列的投影特征值方差计算:
其中i=1,2..n;
投影特征值间的距离为rik=|zi-zk|(i,k=1,2,..n),于是,
其中的f(t)为以阶跃信号:
R为估计局部三电密度的窗宽参数,按宽度内至少包括一个散点的原则,其值与样本数据结构有关:
max(rik)<R<2m
i,k=1,2,..n
(4)优化投影方向:
将寻找最有投影方向问题转化为下列优化问题:
max Q(a)=s(a)d(a)
(5)综合评价聚类分析:
以zi的差异水平对样本群进行聚类分析,根据最优投影方向,便可计算反应各评价指标综合信息的投影特征值zi的差异水平,求出最优投影系数a=a(a1,a2,..am)。
优选的方案中,所述步骤S8中筛选符合要求的场次降雨径流过程,设置筛选指标和指标阈值,筛选指标选用累积降雨量或最大洪峰流量或洪水持续时间或流量最大涨幅。
本发明提供的本发明提供的一种自适应分割时段场次降雨径流的方法,能准确划分出场次径流过程对应的降雨,提高分割场次降雨径流准确率,且自适应程度较高,可全部实现自动化,能快速、高效分割场次降雨径流。分割结果可广泛用于水文学研究,如用于水文模型参数率定,可大大提高水文模型参数率定的效率和准确率。
附图说明
下面结合附图和实施例对本发明作进一步说明:
图1为本发明的方法流程图;
图2为实施例所选某集水区域流量过程及该流域的面降雨过程;
图3为实施例中表1中序号1和序号2的场次降雨径流过程图;
图4为实施例中表1中序号3和序号4的场次降雨径流过程图;
图5为实施例中表1中序号5和序号6的场次降雨径流过程图;
图6为实施例中表1中序号7和序号8的场次降雨径流过程图;
具体实施方式
以某集水区域为例进行说明,一种自适应分割时段场次降雨径流的方法,如图1所示,包括以下步骤:
S1、收集已知区域的连续降雨径流数据,包括以下步骤:
S11、收集已知某区域包含需被划分且连续不间断的流量数据以及时间序列,该集水区域需被划分的2016年6月2日~7月30日连续小时尺度径流数据,该集水区域内分布有较大的水库。
S12、获取S11步骤中对应集水区域的面降雨量以及时间序列,要求时间步长相同,且数据连续不间断,时间尺度为小时。
所述步骤S11和S12中,为保持划分结果的准确性,所需划分数据的前后设置缓冲期。缓冲期长度为所需划分数据前后1日,故划分降雨径流数据时间为2016年6月1日~7月31日,如图2所示。
S2、波峰波谷自动计算和识别,具体包括以下步骤:
S21、锯齿特征明显的流量过程进行平滑处理,光滑的流量过程直接使用。
在本实施例中,平滑处理采用Savitzky-Golay滤波器,该方法本质为一种基于最小二乘法的多项式平滑滤波,计算公式如下:
假设滤波器平滑窗口的宽度为n=2m+1,各个测量数据X=(x1,x2,.....,xn)采用k-1次多项式对窗口内的数据进行拟合,xi可以用多项式进行拟合:
参数m,k的确定评价指标包括可决系数R2或Nash-Sutcliffe效率系数(NSE),其中,可决系数R2计算公式如下:
Nash-Sutcliffe效率系数(NSE)计算公式如下:
R2或NSE值越高,表示参数m,k的值越可靠。本实施例中参数最终值为45、10,R2和NSE值分别为0.99、0.99。
S22、对流量数据进行波峰波谷标记,并记录波峰流量及波峰时刻,波谷流量及波谷时刻,按照如下公式判断波峰流量及波峰时刻:
q’t-1<q’t且q’t>q’t+1
式中q’为平滑流量,q’t-1,q’t,q’t+1为第t-1,t,t+1时刻平滑流量,t时刻即为波峰时刻,该时刻对应的原流量则为波峰流量;
按照如下公式判断波谷流量及波谷时刻:
q’t-1>q’t且q’t<q’t+1
t时刻即为波谷时刻,该时刻对应的原流量则为波谷流量。
S23、按时间顺序记录并编码波峰时刻及其对应的波峰流量,波谷时刻及其对应的波谷流量。
S3、降雨场次自动分割,设置雨强阈值和降雨间歇时间阈值,识别降雨开始和结束时间,计算场次累积降雨量。步骤S3包括以下步骤:
S31、时段降雨数据填充处理,将无降雨时刻填充为0mm降雨量。
S32、场次降雨开始和结束时间识别:设置时段降雨阈值参数Pmin和降雨最大间歇时间阈值参数Tstop,当时段降雨连续Tstop时间小于Pmin值时,则鉴别为两场降雨,连续降雨小于Pmin值时间不足Tstop值时鉴别为一场降雨,计算公式如下:
diff=ti-ti-1
式中t为降雨大于Pmin的时刻,ti和ti-1表示该时刻和上一个相邻时刻,当diff大于Tstop时,则ti-1为上一场降雨的结束时刻,ti为该场降雨的开始时刻。
S33、统计场次累积降雨量,一场次降雨开始时刻直至降雨结束时刻内的降雨求和,包含开始时刻和结束时刻降雨,计算公式如下:
Psum=∑pt
式中pt为同一场次时段降雨。
S34、记录每一场次降雨开始时间、结束时间、累积降雨量,并按时间顺序进行编码Pn,pn strt、pn endt、pn sum分别表示为第n场次降雨及其对应的开始时间、结束时间、累积降雨量。
S4、降雨径流场次自动分割,设置时间窗口阈值,根据降雨开始结束时间识别相应场次洪水开始结束时间。所述步骤S4包括以下步骤:
S41、设定时间阈值参数Tpro,对于自然流域,当场次降雨开始时间之后的Tpro时间内存在流量波谷,则取最后一个流量波谷作为该场次降雨对应的洪水开始时间;对于有水利工程流域或有外在影响因素流域,若当部分场次降雨开始时间之后的Tpro时间不存在流量波谷,则取降雨开始时间之前最近的波谷时间作为洪水开始时间。
在本实施例中,有水库影响集水区域,当场次降雨开始时间之后的Tpro时间内存在流量波谷,则取最后一个流量波谷作为该场次降雨对应的洪水开始时间,若当部分场次降雨开始时间之后的Tpro时间不存在流量波谷,则取降雨开始时间之前最近的波谷时间作为洪水开始时间。
S42、设定时间阈值参数Tbre,降雨结束时间往后推Tbre时间之后的第一个流量波谷为该场次降雨对应的洪水结束时间,洪水开始时间和结束时间之间的流量过程则认为是该场次降雨对应的流量变化过程,场次降雨和其对应的场次洪水视为一场次降雨径流过程。
S43、计算一场次降雨径流过程中流量最大涨幅,即流量最大值减去洪水开始时间对应的流量值,计算公式输入:
S44、记录每一场次降雨径流过程的降雨开始时间pn strt、降雨结束时间pn endt、累积降雨量pn sum,洪水开始时间Qi strt及其流量Qi str、洪水结束时间Qi endt及其流量Qi end、该时间段内的流量最大值Qn max、流量最大涨幅Qn up及所有的波峰Qn_i peak、波谷Qn_i valley。
S5、场次洪水洪峰数量识别,根据单场次洪水中波峰与波谷差值,鉴定洪峰数量。
单峰洪水识别:若一场次降雨径流过程中,只有一个波峰,则鉴别为单峰洪水。
双峰及以上洪水识别:若一场次降雨径流过程中,有多个波峰,设定比例阈值参数Qdiff,若有波谷与两侧相邻波峰差值分别占两侧波峰值的比例超过Qdiff时,即为多峰洪峰,否则,仍为单峰洪水。公式如下:
(Qi-1 peak-Qi valley)/Qi-1 peak>=Qdiff且(Qi+1 peak-Qi valley)/Qi+1 peak>=Qdiff
式中,Qi valley为一场次降雨径流的波谷流量,Qi-1 peak和Qi+1 peak分别为两侧相邻的波峰流量,当满足上述关系时,记录为有效波谷。有效波谷个数为1时,为双峰洪水;有效波谷个数为2时,为三峰洪水;有效波谷个数为3时,为四峰洪水,以此类推。
S6、相关系数计算,计算累积降雨量pn sum与流量最大涨幅Qn up的相关系数。
优选的方案中,所述步骤S6中计算累积降雨量与流量最大涨幅的相关系数,采用线性相关或非线性相关方法,线性相关计算公式如下:
式中,r(X,Y)为两组相同个数X,Y数据的相关系数,Var[X]为X数据的方差,Var[Y]为Y数据的方差,Cov[X,Y]为X与Y的协方差;
非线性相关方法采用Spearman秩相关,公式如下:
式中,ps为两组相同个数X,Y数据的Spearman秩相关系数,di为两组数据秩次之差,即xi,yi按大小排序的序号之差,n为数据的个数。
S7、参数寻优,寻优指标为步骤S6中计算的累积降雨量pn sum与流量最大涨幅Qn up的相关系数最大,且满足随着洪峰数量增多,相关系数降低。
所述步骤S7中,参数寻优方法包括网格搜索调优方法或投影寻踪寻优方法或其他方法。
所述网格搜索调优方法,通过在参数数组中进行穷举搜索,对每种情况进行训练,找到最优的参数。
在本实施例中,选用投影寻踪寻优方法,通过把高维数据投影到低维子空间上,寻找出能反映原高维数据的结构或特征的投影,达到研究分析高维数据的目的,包括如下步骤:
(1)样本数据归一化:
(2)线性投影:
从不同的角度去观察数据,寻找最能挖掘数据大的最有投影方向,随机抽取若干初始投影方向a(a1,a2,..,am),计算其投影指标的大小,确定最大指标的投影的解为其最佳投影方向:
样本i在一维空间的投影方向为(a1,a2,..,am)上的投影特征值定义为:
(3)寻找目标函数:
定义目标函数为Q(a),类间距离为s(a),类内密度为d(a),
Q(a)=s(a)d(a)
类间距离用样本序列的投影特征值方差计算:
其中i=1,2..n;
投影特征值间的距离为rik=|zi-zk|(i,k=1,2,..n),于是,
其中的f(t)为以阶跃信号:
R为估计局部三电密度的窗宽参数,按宽度内至少包括一个散点的原则,其值与样本数据结构有关:
max(rik)<R<2m
i,k=1,2,..n
(4)优化投影方向:
将寻找最有投影方向问题转化为下列优化问题:
max Q(a)=s(a)d(a)
(5)综合评价聚类分析:
以zi的差异水平对样本群进行聚类分析,根据最优投影方向,便可计算反应各评价指标综合信息的投影特征值zi的差异水平,求出最优投影系数a=a(a1,a2,..am)。最终时段降雨阈值参数Pmin、降雨最大间歇时间阈值参数Tstop、时间阈值参数Tpro和Tbre、比例阈值参数Qdiff确定为0.2mm,15h,14h,10h,1/3。
S8、筛选符合要求的场次降雨径流过程。设置筛选指标和指标阈值,筛选指标选用累积降雨量或最大洪峰流量或洪水持续时间或流量最大涨幅。
在本实施例中,按降雨过程大小筛选符合要求的场次事件,累积降雨量设置最小阈值为5mm,筛选结果为8场次降雨径流过程,如表1所示,筛选结果展示如图3~6所示。
表1场次降雨径流分割结果统计表
Claims (10)
1.一种自适应分割时段场次降雨径流的方法,其特征在于,包括以下步骤:
S1、收集已知区域的连续降雨径流数据;
S2、波峰波谷自动计算和识别;
S3、降雨场次自动分割,设置雨强阈值和降雨间歇时间阈值,识别降雨开始和结束时间,计算场次累积降雨量;
S4、降雨径流场次自动分割,设置时间窗口阈值,根据降雨开始结束时间识别相应场次洪水开始结束时间;
S5、场次洪水洪峰数量识别,根据单场次洪水中波峰与波谷差值,鉴定洪峰数量;
S6、相关系数计算,计算场次降雨径流累积降雨量pn sum与流量最大涨幅Qn up的相关系数;
S7、参数寻优,寻优评价指标为步骤S6中累积降雨量pn sum与流量最大涨幅Qn up的相关系数最大,且满足随着洪峰数量增多,相关系数降低;
S8、筛选符合要求的场次降雨径流过程。
2.根据权利要求1所述的一种自适应分割时段场次降雨径流的方法,其特征在于,所述步骤S1包括以下步骤:
S11、收集已知区域包含需被划分且连续不间断的流量数据以及时间序列;
S12、获取S11步骤中对应集水区域的面降雨量以及时间序列,要求时间步长相同,且数据连续不间断,所需划分数据的前后设置缓冲期。
3.根据权利要求1所述的一种自适应分割时段场次降雨径流的方法,其特征在于,所述步骤S2包括以下步骤:
S21、锯齿特征明显的流量过程进行平滑处理,光滑的流量过程直接使用;
S22、对流量数据进行波峰波谷标记,并记录波峰流量及波峰时刻,波谷流量及波谷时刻,按照如下公式判断波峰流量及波峰时刻:
q’t-1<q’t且q’t>q’t+1
式中q’为平滑流量,q’t-1,q’t,q’t+1为第t-1,t,t+1时刻平滑流量,t时刻即为波峰时刻,该时刻对应的原流量则为波峰流量;
按照如下公式判断波谷流量及波谷时刻:
q’t-1>q’t且q’t<q’t+1
t时刻即为波谷时刻,该时刻对应的原流量则为波谷流量;
S23、按时间顺序记录并编码波峰时刻及其对应的波峰流量,波谷时刻及其对应的波谷流量。
5.根据权利要求1所述的一种自适应分割时段场次降雨径流的方法,其特征在于,所述步骤S3包括以下步骤:
S31、时段降雨数据填充处理,将无降雨时刻填充为0mm降雨量;
S32、场次降雨开始和结束时间识别:设置时段降雨阈值参数Pmin和降雨最大间歇时间阈值参数Tstop,当时段降雨连续Tstop时间小于Pmin值时,则鉴别为两场降雨,连续降雨小于Pmin值时间不足Tstop值时鉴别为一场降雨,计算公式如下:
diff=ti-ti-1
式中t为降雨大于Pmin的时刻,ti和ti-1表示该时刻和上一个相邻时刻,当diff大于Tstop时,则ti-1为上一场降雨的结束时刻,ti为该场降雨的开始时刻;
S33、统计场次累积降雨量,一场次降雨开始时刻直至降雨结束时刻内的降雨求和,包含开始时刻和结束时刻降雨,计算公式如下:
Psum=∑pt
式中pt为同一场次时段降雨;
S34、记录每一场次降雨开始时间、结束时间、累积降雨量,并按时间顺序进行编码Pn,pn strt、pn endt、pn sum分别表示为第n场次降雨及其对应的开始时间、结束时间、累积降雨量。
6.根据权利要求1所述的一种自适应分割时段场次降雨径流的方法,其特征在于,所述步骤S4包括以下步骤:
S41、设定时间阈值参数Tpro,对于自然流域,当场次降雨开始时间之后的Tpro时间内存在流量波谷,则取最后一个流量波谷作为该场次降雨对应的洪水开始时间;对于有水利工程流域或有外在影响因素流域,若当部分场次降雨开始时间之后的Tpro时间不存在流量波谷,则取降雨开始时间之前最近的波谷时间作为洪水开始时间;
S42、设定时间阈值参数Tbre,降雨结束时间往后推Tbre时间之后的第一个流量波谷为该场次降雨对应的洪水结束时间,洪水开始时间和结束时间之间的流量过程则认为是该场次降雨对应的流量变化过程,场次降雨和其对应的场次洪水视为一场次降雨径流过程;
S43、计算一场次降雨径流过程中流量最大涨幅,即流量最大值减去洪水开始时间对应的流量值,计算公式输入:
S44、记录每一场次降雨径流过程的降雨开始时间pn strt、降雨结束时间pn endt、累积降雨量pn sum,洪水开始时间Qi strt及其流量Qi str、洪水结束时间Qi endt及其流量Qi end、该时间段内的流量最大值Qn max、流量最大涨幅Qn up及所有的波峰Qn_i peak、波谷Qn_i valley。
7.根据权利要求1所述的一种自适应分割时段场次降雨径流的方法,其特征在于,所述步骤S5包括以下步骤:
S51、单峰洪水识别:若一场次降雨径流过程中,只有一个波峰,则鉴别为单峰洪水;
S52、双峰及以上洪水识别:若一场次降雨径流过程中,有多个波峰,设定比例阈值参数Qdiff,若有波谷与两侧相邻波峰差值分别占两侧波峰值的比例超过Qdiff时,即为多峰洪峰,否则,仍为单峰洪水,公式如下:
(Qi-1 peak-Qi valley)/Qi-1 peak>=Qdiff且(Qi+1 peak-Qi valley)/Qi+1 peak>=Qdiff
式中,Qi valley为一场次降雨径流的波谷流量,Qi-1 peak和Qi+1 peak分别为两侧相邻的波峰流量,当满足上述关系时,记录为有效波谷,有效波谷个数为1时,为双峰洪水;有效波谷个数为2时,为三峰洪水;有效波谷个数为3时,为四峰洪水,以此类推。
9.根据权利要求1所述的一种自适应分割时段场次降雨径流的方法,其特征在于,所述步骤S7中,参数寻优方法包括网格搜索调优方法或投影寻踪寻优方法;
所述网格搜索调优方法,通过在参数数组中进行穷举搜索,对每种情况进行训练,找到最优的参数;
所述投影寻踪寻优方法,通过把高维数据投影到低维子空间上,寻找出能反映原高维数据的结构或特征的投影,达到研究分析高维数据的目的,包括如下步骤:
(1)样本数据归一化:
(2)线性投影:
从不同的角度去观察数据,寻找最能挖掘数据大的最有投影方向,随机抽取若干初始投影方向a(a1,a2,..,am),计算其投影指标的大小,确定最大指标的投影的解为其最佳投影方向:
样本i在一维空间的投影方向为(a1,a2,..,am)上的投影特征值定义为:
(3)寻找目标函数:
定义目标函数为Q(a),类间距离为s(a),类内密度为d(a),
Q(a)=s(a)d(a)
类间距离用样本序列的投影特征值方差计算:
其中i=1,2..n;
投影特征值间的距离为rik=|zi-zk|(i,k=1,2,..n),于是,
其中的f(t)为以阶跃信号:
R为估计局部三电密度的窗宽参数,按宽度内至少包括一个散点的原则,其值与样本数据结构有关:
max(rik)<R<2m
i,k=1,2,..n
(4)优化投影方向:
将寻找最有投影方向问题转化为下列优化问题:
max Q(a)=s(a)d(a)
(5)综合评价聚类分析:
以zi的差异水平对样本群进行聚类分析,根据最优投影方向,便可计算反应各评价指标综合信息的投影特征值zi的差异水平,求出最优投影系数a=a(a1,a2,..am)。
10.根据权利要求1所述的一种自适应分割时段场次降雨径流的方法,其特征在于,所述步骤S8中筛选符合要求的场次降雨径流过程,设置筛选指标和指标阈值,筛选指标选用累积降雨量或最大洪峰流量或洪水持续时间或流量最大涨幅。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210504031.5A CN114897242B (zh) | 2022-05-10 | 2022-05-10 | 一种自适应分割时段场次降雨径流的方法 |
JP2023066119A JP7366304B1 (ja) | 2022-05-10 | 2023-04-14 | 期間内の降雨流出回数の適応分割方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210504031.5A CN114897242B (zh) | 2022-05-10 | 2022-05-10 | 一种自适应分割时段场次降雨径流的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114897242A true CN114897242A (zh) | 2022-08-12 |
CN114897242B CN114897242B (zh) | 2023-10-27 |
Family
ID=82720993
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210504031.5A Active CN114897242B (zh) | 2022-05-10 | 2022-05-10 | 一种自适应分割时段场次降雨径流的方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7366304B1 (zh) |
CN (1) | CN114897242B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116595345A (zh) * | 2023-03-28 | 2023-08-15 | 中国长江电力股份有限公司 | 一种自动化次洪划分与退水修正方法及系统 |
CN116663223A (zh) * | 2023-02-09 | 2023-08-29 | 北方工业大学 | 一种基于断波原理的溃坝洪水演进预测方法 |
WO2024198387A1 (zh) * | 2023-03-28 | 2024-10-03 | 中国长江电力股份有限公司 | 一种自动化次洪划分与退水修正方法及系统 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117572533B (zh) * | 2023-11-17 | 2024-07-12 | 中国水利水电科学研究院 | 一种村庄上游流域复合面雨量频率的计算方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102009373B1 (ko) * | 2019-05-22 | 2019-08-12 | (주)현이엔씨 | 강우지속기간을 변화시키는 홍수량 산정 방법 |
CN113705931A (zh) * | 2021-09-17 | 2021-11-26 | 中国长江电力股份有限公司 | 一种利用k最邻近法预测径流要素的方法 |
CN114020975A (zh) * | 2021-10-27 | 2022-02-08 | 华能西藏雅鲁藏布江水电开发投资有限公司 | 一种自动筛选洪水场次的方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000276235A (ja) * | 1999-03-26 | 2000-10-06 | Toshiba Corp | 広域雨水排水システム支援装置 |
CN109785979B (zh) * | 2019-01-07 | 2020-06-09 | 三峡大学 | 一种场次洪水降雨径流过程界定方法 |
CN113642794B (zh) * | 2021-08-16 | 2023-11-24 | 浙江大学 | 一种结合降雨和土壤水观测的山洪预报方法 |
CN114219252B (zh) * | 2021-12-06 | 2022-06-10 | 中国水利水电科学研究院 | 一种基于sce-ua算法的流域单位线分析方法 |
-
2022
- 2022-05-10 CN CN202210504031.5A patent/CN114897242B/zh active Active
-
2023
- 2023-04-14 JP JP2023066119A patent/JP7366304B1/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102009373B1 (ko) * | 2019-05-22 | 2019-08-12 | (주)현이엔씨 | 강우지속기간을 변화시키는 홍수량 산정 방법 |
CN113705931A (zh) * | 2021-09-17 | 2021-11-26 | 中国长江电力股份有限公司 | 一种利用k最邻近法预测径流要素的方法 |
CN114020975A (zh) * | 2021-10-27 | 2022-02-08 | 华能西藏雅鲁藏布江水电开发投资有限公司 | 一种自动筛选洪水场次的方法 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116663223A (zh) * | 2023-02-09 | 2023-08-29 | 北方工业大学 | 一种基于断波原理的溃坝洪水演进预测方法 |
CN116663223B (zh) * | 2023-02-09 | 2024-05-03 | 北方工业大学 | 一种基于断波原理的溃坝洪水演进预测方法 |
CN116595345A (zh) * | 2023-03-28 | 2023-08-15 | 中国长江电力股份有限公司 | 一种自动化次洪划分与退水修正方法及系统 |
CN116595345B (zh) * | 2023-03-28 | 2024-05-10 | 中国长江电力股份有限公司 | 一种自动化次洪划分与退水修正方法及系统 |
WO2024198387A1 (zh) * | 2023-03-28 | 2024-10-03 | 中国长江电力股份有限公司 | 一种自动化次洪划分与退水修正方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
JP7366304B1 (ja) | 2023-10-20 |
JP2023166977A (ja) | 2023-11-22 |
CN114897242B (zh) | 2023-10-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114897242B (zh) | 一种自适应分割时段场次降雨径流的方法 | |
CN111027763B (zh) | 一种基于机器学习的流域洪水响应相似性分析方法 | |
CN109272146B (zh) | 一种基于深度学习模型和bp神经网络校正的洪水预测方法 | |
CN104821082B (zh) | 一种基于综合评价的短时交通流预测方法 | |
CN111080107B (zh) | 一种基于时间序列聚类的流域洪水响应相似性分析方法 | |
CN110648014B (zh) | 一种基于时空分位数回归的区域风电预测方法及系统 | |
CN104090974B (zh) | 展延水库后续来水的动态数据挖掘方法及系统 | |
CN108830423B (zh) | 一种基于预报域的年径流预测方法 | |
CN112819299A (zh) | 一种基于中心优化的差分K-means负荷聚类方法 | |
CN108734216A (zh) | 基于负荷曲线形态的电力用户分类方法、装置及存储介质 | |
CN113095597B (zh) | 一种适用于无资料小流域的洪水过程设计方法 | |
CN109636063A (zh) | 一种短期负荷预测的方法 | |
CN116010795B (zh) | 基于图像特征和深度学习的相似场次降雨模式库构建方法 | |
CN117608499B (zh) | 一种基于物联网的智慧交通数据优化存储方法 | |
CN116090678B (zh) | 一种数据处理方法、装置及设备 | |
CN115018308A (zh) | 基于游程理论和联合分布函数的干旱评估方法 | |
CN117290364A (zh) | 一种市场调查数据智能存储方法 | |
CN113779113B (zh) | 基于雨洪时空过程相似性挖掘的洪水动态预估方法及系统 | |
Hannah et al. | A methodology for investigation of the seasonal evolution in proglacial hydrograph form | |
CN115688022B (zh) | 一种基于最邻近算法的流域单位线实时优选方法 | |
Adamowski et al. | Annual maxima and partial duration flood series analysis by parametric and non‐parametric methods | |
CN116955947A (zh) | 一种降雨诱发的输电线路边坡位移非线性预测方法及系统 | |
CN114548578B (zh) | 基于梯度增强多元回归模型的北斗监测滑坡位移量预测方法 | |
CN110457374A (zh) | 一种识别时段典型暴雨过程的方法 | |
CN113506000B (zh) | 一种计算城市汇水区域暴雨溢流风险的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |