CN116796238A - 一种基于四维航迹预测的无人机短时航迹偏离检测方法 - Google Patents
一种基于四维航迹预测的无人机短时航迹偏离检测方法 Download PDFInfo
- Publication number
- CN116796238A CN116796238A CN202310857245.5A CN202310857245A CN116796238A CN 116796238 A CN116796238 A CN 116796238A CN 202310857245 A CN202310857245 A CN 202310857245A CN 116796238 A CN116796238 A CN 116796238A
- Authority
- CN
- China
- Prior art keywords
- track
- unmanned aerial
- aerial vehicle
- time
- short
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 45
- 238000000034 method Methods 0.000 claims abstract description 40
- 238000007781 pre-processing Methods 0.000 claims abstract description 7
- 230000002457 bidirectional effect Effects 0.000 claims abstract description 6
- 230000015654 memory Effects 0.000 claims abstract description 6
- 238000012544 monitoring process Methods 0.000 claims abstract description 5
- 239000013598 vector Substances 0.000 claims description 17
- 230000002159 abnormal effect Effects 0.000 claims description 11
- 230000005856 abnormality Effects 0.000 claims description 6
- 230000007787 long-term memory Effects 0.000 claims description 2
- 238000012545 processing Methods 0.000 claims description 2
- 230000006403 short-term memory Effects 0.000 claims description 2
- 238000011161 development Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 206010000117 Abnormal behaviour Diseases 0.000 description 2
- 230000004913 activation Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000011897 real-time detection Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013144 data compression Methods 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Landscapes
- Traffic Control Systems (AREA)
Abstract
本发明公开了一种基于四维航迹预测的无人机短时航迹偏离检测方法,属于无人机异常识别技术领域,包括以下步骤:划设低空航路网络,获取结构化航路下无人机运行的历史航迹数据;建立航迹数据预处理和重构模型,构筑包含位置、速度、航向等多维属性的航迹数据;以无人机的多维数据特征为输入,采用双向长短时记忆网络算法构建无人机短时航迹预测模型;将航迹偏离检测转化为航迹点密度分类问题,基于历史航迹点和预测航迹点重构航迹点数据集;基于重构航迹点数据集间的多维度局部异常因子,建立无人机航迹偏离检测方法。本发明致力于消除无人机在低空结构化航路网络运行过程中航迹偏离导致的安全隐患,实现短时范围内航迹偏离状态的动态监测。
Description
技术领域
本发明属于无人机异常识别技术领域,尤其是涉及一种基于四维航迹预测的无人机短时航迹偏离检测方法。
背景技术
随着低空空域逐步开放,城市交通和互联网电商的快速发展,旋翼无人机已经成为城市空中交通的重要载运工具,其在物流运输和配送、应急救援、通勤服务等众多领域应用越来越广泛。同时无人机定位技术、通信技术,以及大数据技术的迅速发展,使得无人机在飞行过程中,大量的无人机航迹数据呈指数增长。无人机航迹数据是一种典型的时间序列数据,可视为时间到空间的映射,在客观上记录了无人机活动的位置信息和时间信息。近年来,航迹数据挖掘一直是研究热点,包括航迹聚类、航迹数据压缩,以及航迹预测等。但是随着无人机在日常生活中广泛地被使用,在带来便利的同时也带来许多危险。面对一系列与无人机有关的危险事件,基于无人机航迹数据信息,挖掘航迹数据与无人机运动间的关系是实现无人机异常行为预警的重要手段。本文将无人机的航迹偏离定义为无人机异常行为的一种,对其进行展开研究。现有的航迹偏离检测方法可以分为基于航迹片段相似度检测的方法、基于抽取轨迹全局特征的方法、基于分类器的方法和基于神经网络的方法等。
综上所述,现有的航迹偏离检测大多基于历史航迹数据,未结合无人机未来的航迹数据,此类方法难以实现航迹偏离的实时检测;同时,现阶段对异常航迹的检测通常是基于航迹聚类,通过提取不同类型的航迹相关信息实现航迹偏离检测,但此类难以识别多维度的无人机航迹数据特征。
发明内容
本发明的目的是提供一种基于四维航迹预测的无人机短时航迹偏离检测方法,解决上述技术存在的现有的航迹偏离检测难以实现航迹偏离的实时检测且难以识别多维度的无人机航迹数据特征的问题。
为实现上述目的,本发明提供一种基于四维航迹预测的无人机短时航迹偏离检测方法,包括以下步骤:
步骤1、划设低空航路网络,获取结构化航路下无人机运行的历史航迹数据;
步骤2、建立航迹数据预处理和重构模型构筑包含位置、速度、航向多维属性的航迹数据;
步骤3、以无人机的多维数据特征为输入,采用双向长短时记忆网络算法构建无人机短时航迹预测模型,同时计算航迹预测模型可接受预测精度下的最大时间跨度;
步骤4、基于历史航迹点和预测航迹点重构航迹数据集,将航迹偏离检测转化为航迹密度分类问题;
步骤5、计算重构航迹点数据集间的多维度局部异常因子,建立无人机航迹偏离检测方法,实现短时范围内航迹偏离状态的动态监测。
优选的,所述步骤1具体过程如下:划设低空航路网络,确定无人机飞行区域,收集无人机在结构化航路下运行的历史航迹数据,假设T为所有的无人机历史航迹集,其中包含了N条历史航迹,表示为
T={T1,T2,...,Tk,...,TN}
式中,Tk是T中的第k条航迹;
每条航迹包含了n个航迹点
Tk={Sk1,Sk2,...,Ski,...,Skn}
式中,Ski是Tk中的第i个航迹点;
每个航迹点包含的特征表示为
式中,分别表示无人机航迹点的经度(°),纬度(°),高度(m),vki,dki表示无人机航迹点的速度(m/s)和航向(rad)。
优选的,所述步骤2具体过程如下:
步骤2.1、删除航迹点少的航迹,同时对于缺失航迹点少的航迹,通过贝塞尔曲线三次样条法插值处理,分别将航迹划分为与时间t相关的经度、纬度、高度、速度和航向五个分量,进行插值方法解决;
步骤2.2、航迹数据在输 模型之前采用最大最小标准化方式进行预处理,使模型输入向量中特征值取值范围一致;
步骤2.3、以每一次预测的时候输入窗口只预测未来一个航迹点值,通过单步预测的方式对无人机航迹进行重构。
优选的,所述步骤3具体过程如下:
步骤3.1、基于预处理后的无人机航迹数据,以无人机的多维数据特征为输入,建立单向长短时记忆网络算法模型;
步骤3.2、结合前向网络正向计算隐向量和后向网络反向计算隐向量/>建立双向长短时记忆网络算法航迹预测模型,捕捉两个方向之间的数据特征
步骤3.3、计算航迹预测模型未来一段时间内的衰减值,得到预测精度下的最大时间跨度Tmax。
优选的,所述步骤4具体过程如下:
步骤4.1、利用检测航迹数据中的位置、速度和航向特征,预测T+1时刻的航迹点 与历史T+1时刻的航迹点构成新的数据集/>
步骤4.2、计算数据集中预测T+1时刻的航迹点与历史T+1时刻的航迹点Sk(t+1)之间的欧式距离,其中/>Sk(t+1)的坐标分别为/>和/>
步骤4.3、将数据集输入到步骤5中进行检测,每检测一次后,将时间增加1,而后重构一次新的航迹数据集进行检测,直至Tmax时刻结束。
优选的,所述步骤5具体过程如下:
步骤5.1、确定短期航迹偏离检测模型中多维度局部异常因子算法的近邻数和阈值;
步骤5.2、基于重构数据集中各航迹点间的欧式距离,对重构数据集进行检测,计算各航迹点的多维度局部异常因子值;
步骤5.3、输出每个航迹点异常检测的结果,比较航迹点的多维度局部异常因子值和阈值,超过阈值的航迹点被为异常航迹点,异常点的航迹被判定为偏离航迹。
因此,本发明采用上述一种基于四维航迹预测的无人机短时航迹偏离检测方法,具有以下有益效果:基于航迹点密度进行航迹偏离检测,有效识别航迹中的单个异常点的多维特征,最终满足快速、精准的无人机异常航迹识别需求,为保障无人机飞行、推动无人驾驶航空创新应用与规模发展提供新的思路。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
图1为本发明整体实现流程图;
图2为本发明结构化空域下无人机飞行示意图;
图3为本发明Bi-LSTM神经网络示意图;
图4为LOF算法示意图;
图5为本发明所提方法的流程图。
具体实施方式
实施例
以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1-5,一种基于四维航迹预测的无人机短时航迹偏离检测方法,包括以下步骤:
步骤1:划设低空航路网络,确定无人机飞行区域,收集无人机在结构化航路下运行的历史航迹数据,具体过程如下:
划设低空航路网络,确定无人机飞行区域,收集无人机在结构化航路下运行的历史航迹数据。假设T为所有的无人机历史航迹集,其中包含了N条历史航迹,表示为:
T={T1,T2,...,Tk,...,TN}
式中,Tk是T中的第k条航迹;
每条航迹包含了n个航迹点:
Tk={Sk1,Sk2,...,Ski,...,Skn}
式中,Ski是Tk中的第i个航迹点;
每个航迹点包含的特征表示为:
式中,分别表示无人机航迹点的经度(°),纬度(°),高度(m),vki,dki表示无人机航迹点的速度(m/s)和航向(rad)。
步骤2:建立航迹数据预处理和重构模型构筑包含位置、速度、航向等多维属性的航迹数据,具体过程如下:
步骤2.1、删除航迹点较少的航迹,同时对于缺失航迹点相对较少的航迹,通过B-spline三次样条法插值处理,其中,分别将航迹划分为与时间t相关的经度、纬度、高度、速度和航向五个分量,进行插值方法解决,B-spline曲线定义为:
其中,Pi是特征多边形的顶点,B称为基函数;
步骤2.2、航迹数据在输入模型之前采用max-min标准化方式进行预处理,使模型输入向量中特征值取值范围一致;
其中,ξ为无人机多维航迹参数向量Tkt中的元素,主要包含经度,纬度,高度,速度大小以及航向;ξmin为航迹数据集中的最小值,ξmax为航迹数据集中的最大值;ξ'为标准化后的无人机航迹数据。
同样的,输出预测无人机航迹位置时需要经过反标准化解码:
步骤2.3、以每一次预测的时候输入窗口只预测未来一个航迹点值,即单步预测的方式对无人机航迹进行重构,具体过程如下:
(1)设置每次预测的输入为相邻两个时间戳的无人机轨迹参数向量,预测结果为下一个时间戳的无人机航迹参数向量:
式中,表示无人机四维航迹预测模型,Tt为预测输出的无人机时刻航迹参数向量,Tt-1,Tt-2表示预测模型中输入的两个相邻时间戳无人机航迹参数向量;
(2)基于预测数据采用递归的形式预测未来m个时间戳后无人机的航迹参数:
其中,每调用一次预测模型即为m为预测时间跨度,即预测航迹点与当前位置的时间差,其递归含义为:通过已知的无人机航迹参数向量Tt-1,Tt预测下一个轨迹参数向量Tt+1,随后根据Tt,Tt+1预测Tt+2,以此类推直至Tt+m。
步骤3:以无人机的多维数据特征为输入,采用双向长短时记忆网络算法构建无人机短时航迹预测模型,同时计算航迹预测模型可接受预测精度下的最大时间跨度,具体过程如下:
步骤3.1、基于预处理后的无人机航迹数据,以无人机的多维数据特征为输入,建立单向LSTM模型;
航迹预测的输入数据结构为:
通过遗忘门查看ht和xt来决定单元格状态Ct,决定是否保留该信息:
通过输出门决定单元内部更新的数值与单元格状态:
通过前一层的细胞状态与遗忘向量逐点相乘,得到更新后的细胞状态:
最后由输出门决定输出的结果。
其中,包括了单个实例中单元在每个时间迭代的长期状态、短期状态和输出,xt为当前时刻输入,ht为当前时刻输出,Ct代表单元格状态,tanh为双曲正切激活函数,σ为Sigmoid激活函数。
步骤3.2、结合前向网络正向计算隐向量后向网络反向计算隐向量/>建立Bi-LSTM航迹预测模型,捕捉两个方向之间的数据特征。
航迹预测输出的结果为固定时间段之后的预测位置,包括预测位置点的经度,纬度和高度。因此,航迹预测的输出数据结构为:
步骤3.3、计算航迹预测模型未来一段时间内的loss值,得到可接受预测精度下的最大时间跨度Tmax。
步骤4:基于历史航迹点和预测航迹点重构航迹数据集,将航迹偏离检测转化为航迹密度分类问题,具体过程如下:
步骤4.1、利用检测航迹数据中的位置、速度和航向特征,预测T+1时刻的航迹点 与历史T+1时刻的航迹点构成新的数据集/>
步骤4.2、计算数据集中预测T+1时刻的航迹点与历史T+1时刻的航迹点Sk(t+1)之间的欧式距离,其中/>Sk(t+1)的坐标分别为/>和/>
步骤4.3、将数据集输入到步骤5中进行检测,每检测一次后,将时间增加1,而后重构一次新的航迹数据集进行检测,直至Tmax时刻结束。
步骤5:计算重构航迹点数据集间的多维度局部异常因子,建立无人机航迹偏离检测方法,实现短时范围内航迹偏离状态的动态监测,具体过程如下:
步骤5.1、确定短期航迹偏离检测模型中LOF算法的近邻数k和阈值ε。
步骤5.2、基于重构数据集中各航迹点间的欧式距离,对重构数据集进行检测,计算各航迹点的LOF值。
(1)计算预测航迹点的k值:
其中,为历史航迹数据集中与预测航迹点/>距离第k近的航迹点;
(2)计算预测航迹点的近邻航迹点:
(3)计算预测航迹点到历史航迹点St的可达距离:
(4)计算预测航迹点近邻密度:
其中:代替/>对近邻密度进行平滑,k值越大,平滑效果越明显。
(5)计算预测航迹点的局部异常因子:
式中,航迹点与航迹点St的近邻航迹的近邻密度之比越大,航迹点/>异常程度越大
步骤5.3、输出每个航迹点异常检测的结果,比较航迹点的LOF值和阈值ε,超过ε的航迹点被为异常航迹点,包含异常点的航迹被判定为偏离航迹。
因此,本发明采用上述一种基于四维航迹预测的无人机短时航迹偏离检测方法,基于无人机的四维航迹预测结果,重构无人机历史航迹点与预测航迹点数据集,综合无人机的历史航迹数据信息与未来航迹数据,构建航迹点密度异常检测模型,实现无人机的短期动态监测,消除了无人机在低空结构化航路网络运行过程中航迹偏离导致的安全隐患。
最后应说明的是:以上实施例仅用以说明本发明的技术方案而非对其进行限制,尽管参照较佳实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对本发明的技术方案进行修改或者等同替换,而这些修改或者等同替换亦不能使修改后的技术方案脱离本发明技术方案的精神和范围。
Claims (6)
1.一种基于四维航迹预测的无人机短时航迹偏离检测方法,其特征在于,包括以下步骤:
步骤1、划设低空航路网络,获取结构化航路下无人机运行的历史航迹数据;
步骤2、建立航迹数据预处理和重构模型构筑包含位置、速度、航向多维属性的航迹数据;
步骤3、以无人机的多维数据特征为输入,采用双向长短时记忆网络算法构建无人机短时航迹预测模型,同时计算航迹预测模型可接受预测精度下的最大时间跨度;
步骤4、基于历史航迹点和预测航迹点重构航迹数据集,将航迹偏离检测转化为航迹密度分类问题;
步骤5、计算重构航迹点数据集间的多维度局部异常因子,建立无人机航迹偏离检测方法,实现短时范围内航迹偏离状态的动态监测。
2.根据权利要求1所述的一种基于四维航迹预测的无人机短时航迹偏离检测方法,其特征在于,所述步骤1具体过程如下:划设低空航路网络,确定无人机飞行区域,收集无人机在结构化航路下运行的历史航迹数据,假设T为所有的无人机历史航迹集,其中包含了N条历史航迹,表示为
T={T1,T2,...,Tk,...,TN}
式中,Tk是T中的第k条航迹;
每条航迹包含了n个航迹点
Tk={Sk1,Sk2,...,Ski,...,Skn}
式中,Ski是Tk中的第i个航迹点;
每个航迹点包含的特征表示为
式中,分别表示无人机航迹点的经度(°),纬度(°),高度(m),vki,dki表示无人机航迹点的速度(m/s)和航向(rad)。
3.根据权利要求1所述的一种基于四维航迹预测的无人机短时航迹偏离检测方法,其特征在于,所述步骤2具体过程如下:
步骤2.1、删除航迹点少的航迹,同时对于缺失航迹点少的航迹,通过贝塞尔曲线三次样条法插值处理,分别将航迹划分为与时间t相关的经度、纬度、高度、速度和航向五个分量,进行插值方法解决;
步骤2.2、航迹数据在输入模型之前采用最大最小标准化方式进行预处理,使模型输入向量中特征值取值范围一致;
步骤2.3、以每一次预测的时候输入窗口只预测未来一个航迹点值,通过单步预测的方式对无人机航迹进行重构。
4.根据权利要求1所述的一种基于四维航迹预测的无人机短时航迹偏离检测方法,其特征在于,所述步骤3具体过程如下:
步骤3.1、基于预处理后的无人机航迹数据,以无人机的多维数据特征为输入,建立单向长短时记忆网络算法模型;
步骤3.2、结合前向网络正向计算隐向量和后向网络反向计算隐向量/>建立双向长短时记忆网络算法航迹预测模型,捕捉两个方向之间的数据特征
步骤3.3、计算航迹预测模型未来一段时间内的衰减值,得到预测精度下的最大时间跨度Tmax。
5.根据权利要求1所述的一种基于四维航迹预测的无人机短时航迹偏离检测方法,其特征在于,所述步骤4具体过程如下:
步骤4.1、利用检测航迹数据中的位置、速度和航向特征,预测T+1时刻的航迹点与历史T+1时刻的航迹点构成新的数据集/>
步骤4.2、计算数据集中预测T+1时刻的航迹点与历史T+1时刻的航迹点Sk(t+1)之间的欧式距离,其中/>Sk(t+1)的坐标分别为/>和/>
步骤4.3、将数据集输入到步骤5中进行检测,每检测一次后,将时间增加1,而后重构一次新的航迹数据集进行检测,直至Tmax时刻结束。
6.根据权利要求1所述的一种基于四维航迹预测的无人机短时航迹偏离检测方法,其特征在于,所述步骤5具体过程如下:
步骤5.1、确定短期航迹偏离检测模型中多维度局部异常因子算法的近邻数和阈值;
步骤5.2、基于重构数据集中各航迹点间的欧式距离,对重构数据集进行检测,计算各航迹点的多维度局部异常因子值;
步骤5.3、输出每个航迹点异常检测的结果,比较航迹点的多维度局部异常因子值和阈值,超过阈值的航迹点被为异常航迹点,异常点的航迹被判定为偏离航迹。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310857245.5A CN116796238A (zh) | 2023-07-13 | 2023-07-13 | 一种基于四维航迹预测的无人机短时航迹偏离检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310857245.5A CN116796238A (zh) | 2023-07-13 | 2023-07-13 | 一种基于四维航迹预测的无人机短时航迹偏离检测方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116796238A true CN116796238A (zh) | 2023-09-22 |
Family
ID=88043602
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310857245.5A Pending CN116796238A (zh) | 2023-07-13 | 2023-07-13 | 一种基于四维航迹预测的无人机短时航迹偏离检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116796238A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117421984A (zh) * | 2023-11-02 | 2024-01-19 | 中国人民解放军海军航空大学 | 基于多模态学习的短期航迹预测方法 |
-
2023
- 2023-07-13 CN CN202310857245.5A patent/CN116796238A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117421984A (zh) * | 2023-11-02 | 2024-01-19 | 中国人民解放军海军航空大学 | 基于多模态学习的短期航迹预测方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220114735A1 (en) | Trajectory cluster model for learning trajectory patterns in video data | |
EP3633615A1 (en) | Deep learning network and average drift-based automatic vessel tracking method and system | |
CN112906858A (zh) | 一种船舶运动轨迹实时预测方法 | |
CN110288001B (zh) | 基于目标数据特征训练学习的目标识别方法 | |
Su et al. | Uncertainty quantification of collaborative detection for self-driving | |
CN106897681B (zh) | 一种遥感图像对比分析方法及系统 | |
Choi et al. | Hybrid machine learning and estimation-based flight trajectory prediction in terminal airspace | |
CN116796238A (zh) | 一种基于四维航迹预测的无人机短时航迹偏离检测方法 | |
CN115220133B (zh) | 一种多气象要素降雨预测方法、装置、设备及存储介质 | |
CN115512152B (zh) | 一种cnn和lstm神经网络组合的船舶轨迹分类方法及系统 | |
CN108470460B (zh) | 一种基于智能手机与rnn的周边车辆行为识别方法 | |
CN113033899A (zh) | 无人驾驶邻近车辆轨迹预测方法 | |
CN113128769A (zh) | 基于深度学习的智能航班延误预测方法 | |
CN111242028A (zh) | 基于U-Net的遥感图像地物分割方法 | |
CN117950399A (zh) | 一种基于多模态知识图谱的自动避障决策方法及系统 | |
CN117877318A (zh) | 基于cnn、改进lstm及注意力机制的船舶轨迹预测方法、系统 | |
Wang et al. | Vehicle Position Prediction Using Particle Filtering Based on 3D CNN-LSTM Model | |
CN111175852B (zh) | 一种基于长短时记忆算法的机场大雾预报预警方法 | |
CN117493994A (zh) | 一种基于ais数据的船舶航迹预测方法及系统 | |
CN115879051A (zh) | 一种基于vae的轨迹大数据异常检测方法与系统 | |
US20220406199A1 (en) | Method and device for supervising a traffic control system | |
CN113887356A (zh) | 一种低空小目标的雷达自动识别方法及装置 | |
Zhang et al. | Understanding mobility via deep multi-scale learning | |
CN115577511B (zh) | 基于无人机运动状态的短期航迹预测方法、装置及系统 | |
Zhang et al. | Predicting Vessel Trajectories Using ASTGCN with StemGNN-Derived Correlation Matrix |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |