CN105306892A - 一种证据链形式的船舶视频的生成及显示方法 - Google Patents

一种证据链形式的船舶视频的生成及显示方法 Download PDF

Info

Publication number
CN105306892A
CN105306892A CN201510701027.8A CN201510701027A CN105306892A CN 105306892 A CN105306892 A CN 105306892A CN 201510701027 A CN201510701027 A CN 201510701027A CN 105306892 A CN105306892 A CN 105306892A
Authority
CN
China
Prior art keywords
video
ships
boats
camera
ship target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510701027.8A
Other languages
English (en)
Other versions
CN105306892B (zh
Inventor
杨超
晏谢飞
张由余
钟原
蒋怡亮
孙大庆
王伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CETC 28 Research Institute
Original Assignee
CETC 28 Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CETC 28 Research Institute filed Critical CETC 28 Research Institute
Priority to CN201510701027.8A priority Critical patent/CN105306892B/zh
Publication of CN105306892A publication Critical patent/CN105306892A/zh
Application granted granted Critical
Publication of CN105306892B publication Critical patent/CN105306892B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明提供了一种证据链形式的船舶视频的生成及显示方法,利用监控摄像机的位置、高度及朝向等信息计算出摄像机的监控视场角范围,根据船舶目标船舶的AIS信息推算出船舶目标进入和驶离每一个摄像机监控范围的时间,依据计算出的时间点从每一个摄像机的监控录像中截取视频片段并按时间顺序排列起来形成证据链;在显示证据链视频时,首先检测出视频中的运动船舶目标并获取时间段内进入该摄像机监控范围内的所有船舶的AIS信息,然后将船舶的视频图像信息与AIS信息融合起来,显示船舶影像的同时,展示出每一个船舶的身份、航行状态和航行计划等AIS信息。

Description

一种证据链形式的船舶视频的生成及显示方法
技术领域
本发明属于计算机视觉及信息融合技术领域,具体涉及船舶监控系统中查询及取证任务使用的一种证据链形式的船舶视频的生成及显示方法。
背景技术
船舶视频监控系统通常被集成在船舶交通管理系统(VesselTrafficService,VTS)或电子巡航系统中,用于港区船舶航行的监控管理,以弥补雷达存在盲区、易受电子干扰和无真实图像等不足,其重要性在整个VTS中正逐渐增强。目前,国内外部署的VTS中,视频监控系统的各种应用操作大多采用人工手段,智能化水平较低。
对于船舶监控系统来说,调阅指定船舶的历史视频信息是一项基本的任务。然而,从多个摄像机的长时间视频录像中找出包含指定船舶的所有信息无疑是非常费时费力的,而且很容易出错。另外,找到指定船舶的一段视频后,自动识别出指定船舶目标和其他船舶,对于观察船舶目标并分析船舶行为具有非常重要的意义。
目前关于船舶视频监控系统的文献中,通常将CCTV系统与AIS系统进行互联互通,以实现对船舶的智能监控管理。如文章《AIS,CCTV,VTS整合及功能拓展》(龚瑞卿,中国水运,第10期,2005年,p42-43)介绍了一种CCTV与AIS整合联动的例子,当船舶有碰撞危险或搁浅危险时,除自动报警外还可依据船舶的AIS信息控制CCTV自动调整到对此船舶的最佳观测状态,以便可以更好地发现问题并及时解决;文章《基于AIS数据的智能船舶动态视频监控系统设计》(周剑敏,王捷,上海海事大学学报,第4期,第30卷,2009年,p26-29)介绍了一种利用AIS数据进行智能船舶动态视频监控的方法,根据AIS系统中获取的船舶动态数据,设计自动监控决策控制模块,通过驱动摄像机阵列对待监控船舶队列进行智能排序定位,实现对航行船舶的自动化智能视频跟踪。
发明内容
本发明的目的是:提供一种证据链形式的船舶视频的生成及显示方法,从众多监控摄像机的长时间视频录像中快速提取出包含指定船舶的多个视频片段,并将其按时间顺序排列起来形成证据链。
本发明公开了一种证据链形式的船舶视频的生成及显示方法,包括如下步骤:
步骤1:计算监控摄像机的视场角范围:依据摄像机的成像模型和自身参数,计算出摄像机的视场角范围,用于判断船舶目标能否进入摄像机的监控画面中;
步骤2:推算船舶目标进入和驶离每一个摄像机监控范围的时间:根据船舶目标历史AIS信息中的位置、时间信息以及摄像机的观测范围公式,判断出该船舶目标处于摄像机的观测范围之内的时刻,进而计算出船舶目标进入和驶离监控范围的时间点;
步骤3:截取视频片段并形成证据链:按照计算出来的船舶进入和驶离每一个摄像机监控范围的时间点,从每一个摄像机的监控录像中截取包含该船舶目标的视频片段并按时间顺序排列起来形成证据链;
步骤4:检测视频画面中的运动船舶目标;提取一帧证据链视频图像,采用帧间差法,通过将当前帧图像与上一帧图像相减来检测出图像中发生变化的区域,进而得到船舶目标轮廓,实现船舶目标检测,得到船舶目标检测区域;
步骤5:获取视频画面时刻进入摄像机监控范围内的船舶AIS信息:首先判断视频画面来自哪一台摄像机,然后根据所有船舶的AIS信息序列及摄像机的观测范围公式,查找视频画面时刻进入该摄像机观测范围内的所有船舶的AIS信息;
步骤6:融合船舶图像信息与AIS信息,显示视频。
本发明步骤1中,通过以下摄像机观测范围公式判断船舶目标所处的空间点P(xc,yc,zc)能否进入摄像机的监控画面中:
0 < f x &prime; x c z c + u 0 &le; W 0 < f y &prime; y c z c + v 0 &le; H ,
其中,W表示视频图像的宽度,H表示视频图像的高度,f′x,f′y分别表示水平方向和竖直方向上的像素焦距,u0,v0表示摄像机光轴投影点的像素坐标值,xc,yc,zc分别表示目标点在摄像机坐标系下的坐标值。下标c表明是在摄像机坐标系下的坐标。
本发明步骤2包括:
步骤2-1:获取指定船舶目标在各个时刻的AIS信息,并且按照时间先后顺序排列为一个序列;
步骤2-2:针对每一个摄像机,从AIS信息序列中找出第一个和最后一个满足相机观测范围公式的时刻,最早满足公式的时刻即为船舶进入相机观测范围的时刻,最后满足公式的时刻为船舶驶离观测范围的时刻;判断船舶位置是否处于摄像机观测范围之内的方法为:将AIS信息中的船舶位置转换为摄像机坐标系下的坐标,再将其代入摄像机观测范围公式中进行判断。
本发明步骤3通过推算船舶目标进入和驶离每一个摄像机监控范围的时间来截取视频片段,并按时间顺序排列形成证据链,包括:
步骤3-1:按照计算出来的船舶进入和驶离每一个摄像机监控范围的时间点,从每一个摄像机的监控录像中截取包含该船舶目标的视频片段;
步骤3-2:以船舶进入摄像机观测范围的时刻为依据,将各个视频片段按时间先后顺序排列起来形成证据链视频。
本发明步骤4包括:
步骤4-1:将当前图像与上一帧图像相减,得到帧差图:
Rt(i,j)=|It(i,j)-It-1(i,j)|,
其中,It(i,j)表示t时刻的视频图像,It-1(i,j)表示t-1时刻的视频图像,Rt(i,j)表示t时刻的帧差图;
步骤4-2:使用预设阈值对帧差图进行二值化操作,得到运动区域图:
R t &prime; ( i , j ) = 1 , R t ( i , j ) > t h r e s 0 , R t ( i , j ) &le; t h r e s ,
其中,R′t(i,j)表示运动区域图,thres为二值化阈值;
步骤4-3:对区域图进行开运算,滤除虚假船舶目标;
步骤4-4:对区域图进行闭运算,填补船舶目标区域中的空隙和间隔;
步骤4-5:检测联通区域,得出船舶目标轮廓和外接矩形框,显示在视频画面上,完成检测,得到船舶目标检测区域。
本发明步骤5包括:
步骤5-1:计算当前视频画面所属的摄像机;
步骤5-2:考察一个船舶目标,获取其各个时刻AIS信息所组成的序列;
步骤5-3:从中找出视频画面时刻所对应的AIS信息;
步骤5-4:利用该AIS信息中的船舶位置和摄像机观测范围公式,判断所述船舶目标此刻是否进入摄像机观测范围内,如果在观测范围内,则将该AIS信息作为一项结果保存起来,返回步骤5-2,直至考察完所有船舶。
本发明步骤6包括:
步骤6-1:计算步骤4得到船舶目标检测区域的质心,得到船舶在图像上的位置点集,即检测点集;
步骤6-2:从步骤5获取的船舶AIS信息中提取空间位置信息,形成船舶在空间中的位置点集,即空间点集;
步骤6-3:将船舶的空间位置投影至图像上得到投影点集;
步骤6-4:寻找检测点集与投影点集之间的最佳匹配点对:遍历匹配点对的所有情况,由匹配点对之间的位置关系计算相应的平移变换参数,对所有的投影点进行平移变换;计算所有检测点与最近投影点间距离的平均值作为衡量该平移变换准确与否的指标;选择衡量指标最好的那个平移变换对所有投影点进行位置偏差补偿;
步骤6-5:采用最近邻法完成匹配任务:对于每一个投影点,与其距离最近的检测点为其匹配点;同时设置门限,当最小距离大于一定阈值时认为该投影点为局外野值;当两个以上投影点对应同一个检测点时,判断舰船检测时出现船舶目标粘连现象,则这个检测点为两个以上船舶目标联合区域的中心;
步骤6-6:明确关联关系,得到每一个船舶检测区域所对应的AIS信息;
步骤6-7:显示视频,在船舶检测框内展示出包括船舶的身份、航行状态和航行计划的AIS信息。
本发明综合利用闭路电视监控系统(ClosedCircuitTelevision,CCTV)和船舶自动识别系统(AutomaticIdentificationSystem,AIS),智能地生成并显示指定船舶的视频证据链,提高船舶监控系统中查询与取证的效率。
本发明具有智能化和全自动的优点,能够从众多摄像机的长时间视频录像中快速提取出包含指定船舶的多个视频片段并形成证据链,避免了人工操作,节省了人员的精力和时间。同时,本发明与现有的技术也存在一个重大的区别:现有的CCTV与AIS联动系统中,都是利用AIS数据驱动CCTV自动定位实现智能视频监控,彼此之间只是互相利用的关系,二者没有融合到一起形成更加全面直观的监控信息;而本发明将船舶的CCTV图像信息与AIS信息融合起来,在显示船舶影像的同时,展示出船舶的身份、航行状态和航行计划等AIS信息,为观察船舶目标、分析船舶行为提供了更加全面直观的视频信息。
本发明可应用于智能船舶交通管理系统或电子巡航系统中,通过快速生成指定船舶的视频证据链并智能地显示出来,提高查询与取证的效率,为事后调查提供直观、可靠的依据。
附图说明
下面结合附图和具体实施方式对本发明做更进一步的具体说明,本发明的上述和/或其他方面的优点将会变得更加清楚。
图1是本发明船舶视频证据链智能生成及显示技术的流程图。
图2是摄像机成像模型的示意图。
图3是船舶图像信息与AIS信息融合时点集匹配过程的示意图。
具体实施方式
总体而言本发明利用监控摄像机的位置、高度及朝向等信息计算出摄像机的监控视场角范围,根据船舶目标船舶的AIS信息推算出船舶目标进入和驶离每一个摄像机监控范围的时间,依据计算出的时间点从每一个摄像机的监控录像中截取视频片段并按时间顺序排列起来形成证据链;在显示证据链视频时,首先检测出视频中的运动船舶目标并获取时间段内进入该摄像机监控范围内的所有船舶的AIS信息,然后将船舶的视频图像信息与AIS信息融合起来,显示船舶影像的同时,展示出每一个船舶的身份、航行状态和航行计划等AIS信息。
下面结合附图,说明本发明的一个实施方式,过程参见图1,具体步骤为:
步骤1:计算监控摄像机的视场角范围.
依据摄像机的成像模型和自身参数,计算出摄像机的视场角范围,具体计算方式如下所述:
首先介绍摄像机的成像模型,如图2所示,其中坐标系OcXcYcZc为摄像机坐标系,以摄像机焦点为原点,以摄像机光轴照射方向为Z轴,以摄像机水平方向为X轴,竖直方向为Y轴;坐标系OXY为像平面坐标系,坐标系OeUV为图像坐标系,坐标系OwXwYwZw为世界坐标系。通过将世界坐标系下空间点P(Xw,Yw,Zw)的坐标依次转换至摄像机坐标系、像平面坐标系和图像坐标系,即可计算出空间点在成像画面中的投影坐标。
世界坐标系下坐标转换至摄像机坐标系:
x c y c z c = R x w y w z w + T ,
其中R为3×3的旋转矩阵,T为3×1的平移矩阵。
摄像机坐标系下坐标转换至像平面坐标系:
x = f x c z c y = f y c z c ,
其中f为摄像机的焦距。
像平面坐标系下坐标转换至图像坐标系:
u = x d x + u 0 = f x &prime; x c z c + u 0 v = y d y + v 0 = f y &prime; y c z c + v 0 ,
其中dx,dy表示摄像机传感器单位像素所代表的实际距离,f′x=f/dx,f′y=f/dy分别表示水平方向和竖直方向上的像素焦距,u0,v0表示摄像机光轴投影点的像素坐标值。
当某一空间点P(xc,yc,zc)投影至图像上时,如果其坐标值u(v)小于零或大于图像的宽度(高度),那么这个空间点肯定不在该摄像机的观测范围内。据此可以推算出摄像机观测范围的公式:
0 < u &le; W 0 < V &le; H &DoubleRightArrow; 0 < f x &prime; x c z c + u 0 &le; W 0 < f y &prime; y c z c + v 0 &le; H ,
其中,W表示视频图像的宽度,H表示视频图像的高度。
这样,如果已知摄像机的位置和朝向,即可将接收到的船舶位置转换至摄像机坐标下,再代入上述公式计算,即可判断船舶是否在摄像机的观测范围之内。
步骤2:推算船舶目标进入和驶离每一个摄像机监控范围的时间。
根据船舶目标AIS信息中的时间和位置、信息以及摄像机的观测范围公式,可以判断出该船舶目标在哪些时刻处于摄像机的观测范围之内,进而计算出船舶目标进入和驶离监控范围的时间点。具体步骤如下:
步骤2-1:获取指定船舶目标在各个时刻的AIS信息,并且按照时间先后顺序排列为一个序列。
步骤2-2:针对每一个摄像机,采用二分查找的方式从AIS信息序列中找出第一个和最后一个满足摄像机观测范围公式的时刻,最早满足公式的时刻即为船舶进入摄像机观测范围的时刻,最后满足公式的时刻为船舶驶离观测范围的时刻。判断船舶位置是否处于摄像机观测范围之内的方法为:将AIS信息中的船舶位置转换为摄像机坐标系下的坐标,再将其代入步骤1所计算出来的观测范围公式中进行判断。
步骤3:截取视频片段并形成证据链。
按照计算出来的船舶进入和驶离每一个摄像机监控范围的时间点,从每一个摄像机的监控录像中截取包含该船舶目标的视频片段并按时间顺序排列起来形成证据链。具体步骤如下:
步骤3-1:按照步骤2计算出来的船舶进入和驶离每一个摄像机监控范围的时间点,从每一个摄像机的监控录像中截取包含该船舶目标的视频片段。
步骤3-2:以船舶进入摄像机观测范围的时刻为依据,将各个视频片段按先后顺序排列起来形成证据链视频。
步骤4:检测视频画面中的运动船舶目标。
提取一帧证据链视频图像,采用“帧间差法”,通过将当前帧图像与上一帧图像相减来检测出图像中发生变化的区域,进而得到船舶目标轮廓,实现船舶检测。具体步骤和公式如下:
步骤4-1:将当前图像与上一帧图像相减,得到帧差图:
Rt(i,j)=|It(i,j)-It-1(i,j)|,
其中,It(i,j)表示t时刻的视频图像,It-1(i,j)表示上一时刻的视频图像,Rt(i,j)表示t时刻的帧差图。
步骤4-2:使用预设阈值对帧差图进行二值化操作,得到运动区域图:
R t &prime; ( i , j ) = 1 , R t ( i , j ) > t h r e s 0 , R t ( i , j ) &le; t h r e s ,
其中,R′t(i,j)表示运动区域图,thres为二值化阈值(一般取值为15~30)。
步骤4-3:对区域图进行若干次开运算(例如,采用尺寸为3*3的结构元素对图像进行2次开运算),滤除虚假船舶目标。
步骤4-4:对区域图进行若干次闭运算(例如,采用尺寸为3*3的结构元素对图像进行4次闭运算),填补船舶目标区域中的空隙和间隔。
步骤4-5:检测联通区域,得出船舶目标轮廓和外接矩形框,显示在视频画面上,完成检测任务。
步骤5:获取视频画面时刻进入摄像机监控范围内的船舶AIS信息
首先判断视频画面来自哪一台摄像机,然后根据所有船舶的AIS信息序列及摄像机的观测范围公式,查找视频画面时刻进入该摄像机观测范围内的所有船舶的AIS信息。具体步骤如下:
步骤5-1:计算当前视频画面所属的摄像机。
步骤5-2:针对一个船舶目标,获取其各个时刻AIS信息所组成的序列。
步骤5-3:从中找出视频画面时刻所对应的AIS信息。
步骤5-4:利用该信息中的船舶位置和摄像机观测范围公式,判断考察船舶此刻是否进入摄像机观测范围内。如果在观测范围内,则将该AIS信息作为一项结果保存起来。返回步骤5-2,直至考察完所有船舶。
步骤6:融合船舶图像信息与AIS信息,智能显示视频。
步骤4通过船舶检测可以提取出船舶目标区域,计算区域质心可以得到船舶在图像上的位置信息,形成船舶在图像上的位置点集(称为检测点集);另外,步骤5获取的船舶AIS信息可以提供船舶在空间中的位置信息,形成船舶在空间中的位置点集(称为空间点集)。通过将船舶的空间位置投影至图像上得到投影点集,并对投影点集与检测点集进行匹配操作来实现融合。进而在显示船舶影像的同时,展示出每一个船舶的身份、航行状态和航行计划等AIS信息。
由于船舶检测存在多检、漏检、错检的可能,同时摄像机投影的精度可能不够准确,因此简单采用最近邻法匹配投影点与检测点无法获得十分准确的结果,可能导致误匹配现象的发生。本发明假设投影点集与检测点集之间整体存在一个固定的平移偏差,通过寻找最佳匹配点对并计算平移变换来补偿固定偏差,进而采用最近邻法实现更加准确的点集匹配。图3展示了匹配算法的过程。
具体步骤如下:
步骤6-1:计算船舶检测区域的质心,得到船舶在图像上的位置点集(检测点集)。
步骤6-2:从步骤5获取的船舶AIS信息中提取空间位置信息,形成船舶在空间中的位置点集(空间点集)。
步骤6-3:按照步骤1所介绍的摄像机成像模型,将船舶的空间位置投影至图像上得到投影点集。
步骤6-4:寻找检测点集与投影点集之间的最佳匹配点对:遍历匹配点对的所有情况,由匹配点对之间的位置关系计算相应的平移变换参数,对所有的投影点进行平移变换。进而计算所有检测点与最近投影点间距离的平均值作为衡量该平移变换准确与否的指标(平均距离越小,表明平移变换越准确,衡量指标越好)。选择衡量指标最好的那个平移变换对所有投影点进行位置偏差补偿,即将所有的投影点按照选择的变换参数进行平移变换。
步骤6-5:采用最近邻法完成匹配任务:对于每一个投影点,与其距离最近的检测点为其匹配点;同时设置门限(一般取值为10~20个像素),当最小距离大于一定阈值时认为该投影点为局外野值;当多个投影点对应同一个检测点时,判断舰船检测时出现船舶目标粘连现象,则这个检测点为多个船舶目标联合区域的中心;
步骤6-6:明确关联关系,得到每一个船舶检测区域所对应的AIS信息。
步骤6-7:显示视频,在船舶检测框内展示出船舶的身份、航行状态和航行计划等AIS信息。
本发明提供了一种证据链形式的船舶视频的生成及显示方法,具体实现该技术方案的方法和途径很多,以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。本实施例中未明确的各组成部分均可用现有技术加以实现。

Claims (7)

1.一种证据链形式的船舶视频的生成及显示方法,其特征在于,包括如下步骤:
步骤1:计算监控摄像机的视场角范围:依据摄像机的成像模型和自身参数,计算出摄像机的视场角范围,用于判断船舶目标能否进入摄像机的监控画面中;
步骤2:推算船舶目标进入和驶离每一个摄像机监控范围的时间:根据船舶目标历史AIS信息中的位置、时间信息以及摄像机的观测范围公式,判断出该船舶目标处于摄像机的观测范围之内的时刻,进而计算出船舶目标进入和驶离监控范围的时间点;
步骤3:截取视频片段并形成证据链:按照计算出来的船舶进入和驶离每一个摄像机监控范围的时间点,从每一个摄像机的监控录像中截取包含该船舶目标的视频片段并按时间顺序排列起来形成证据链;
步骤4:检测视频画面中的运动船舶目标;提取一帧证据链视频图像,采用帧间差法,通过将当前帧图像与上一帧图像相减来检测出图像中发生变化的区域,进而得到船舶目标轮廓,实现船舶目标检测,得到船舶目标检测区域;
步骤5:获取视频画面时刻进入摄像机监控范围内的船舶AIS信息:首先判断视频画面来自哪一台摄像机,然后根据所有船舶的AIS信息序列及摄像机的观测范围公式,查找视频画面时刻进入该摄像机观测范围内的所有船舶的AIS信息;
步骤6:融合船舶图像信息与AIS信息,显示视频。
2.根据权利要求1所述的一种证据链形式的船舶视频的生成及显示方法,其特征在于:步骤1中,通过以下摄像机观测范围公式判断船舶目标所处的空间点P(xc,yc,zc)能否进入摄像机的监控画面中:
0 < f x &prime; x c z c + u 0 &le; W 0 < f y &prime; y c z c + v 0 &le; H ,
其中,W表示视频图像的宽度,H表示视频图像的高度,f′x,f′y分别表示水平方向和竖直方向上的像素焦距,u0,v0表示摄像机光轴投影点的像素坐标值,xc,yc,zc分别表示目标点在摄像机坐标系下的坐标值。
3.根据权利要求1所述的一种证据链形式的船舶视频的生成及显示方法,其特征在于:步骤2包括:
步骤2-1:获取指定船舶目标在各个时刻的AIS信息,并且按照时间先后顺序排列为一个序列;
步骤2-2:针对每一个摄像机,从AIS信息序列中找出第一个和最后一个满足相机观测范围公式的时刻,最早满足公式的时刻即为船舶进入相机观测范围的时刻,最后满足公式的时刻为船舶驶离观测范围的时刻;判断船舶位置是否处于摄像机观测范围之内的方法为:将AIS信息中的船舶位置转换为摄像机坐标系下的坐标,再将其代入摄像机观测范围公式中进行判断。
4.根据权利要求1所述的一种证据链形式的船舶视频的生成及显示方法,其特征在于:步骤3通过推算船舶目标进入和驶离每一个摄像机监控范围的时间来截取视频片段,并按时间顺序排列形成证据链,包括:
步骤3-1:按照计算出来的船舶进入和驶离每一个摄像机监控范围的时间点,从每一个摄像机的监控录像中截取包含该船舶目标的视频片段;
步骤3-2:以船舶进入摄像机观测范围的时刻为依据,将各个视频片段按时间先后顺序排列起来形成证据链视频。
5.根据权利要求1所述的一种证据链形式的船舶视频的生成及显示方法,其特征在于:步骤4包括:
步骤4-1:将当前图像与上一帧图像相减,得到帧差图:
Rt(i,j)=|It(i,j)-It-1(i,j)|
其中,It(i,j)表示t时刻的视频图像,It-1(i,j)表示t-1时刻的视频图像,Rt(i,j)表示t时刻的帧差图;
步骤4-2:使用预设阈值对帧差图进行二值化操作,得到运动区域图:
R t &prime; ( i , j ) = 1 , R t ( i , j ) > t h r e s 0 , R t ( i , j ) &le; t h r e s ,
其中,R′t(i,j)表示运动区域图,thres为二值化阈值;
步骤4-3:对区域图进行开运算,滤除虚假船舶目标;
步骤4-4:对区域图进行闭运算,填补船舶目标区域中的空隙和间隔;
步骤4-5:检测联通区域,得出船舶目标轮廓和外接矩形框,显示在视频画面上,完成检测,得到船舶目标检测区域。
6.根据权利要求1所述的一种证据链形式的船舶视频的生成及显示方法,其特征在于:步骤5包括:
步骤5-1:计算当前视频画面所属的摄像机;
步骤5-2:考察一个船舶目标,获取其各个时刻AIS信息所组成的序列;
步骤5-3:从中找出视频画面时刻所对应的AIS信息;
步骤5-4:利用该AIS信息中的船舶位置和摄像机观测范围公式,判断所述船舶目标此刻是否进入摄像机观测范围内,如果在观测范围内,则将该AIS信息作为一项结果保存起来,返回步骤5-2,直至考察完所有船舶。
7.根据权利要求1所述的一种证据链形式的船舶视频的生成及显示方法,其特征在于:步骤6包括:
步骤6-1:计算步骤4得到船舶目标检测区域的质心,得到船舶在图像上的位置点集,即检测点集;
步骤6-2:从步骤5获取的船舶AIS信息中提取空间位置信息,形成船舶在空间中的位置点集,即空间点集;
步骤6-3:将船舶的空间位置投影至图像上得到投影点集;
步骤6-4:寻找检测点集与投影点集之间的最佳匹配点对:遍历匹配点对的所有情况,由匹配点对之间的位置关系计算相应的平移变换参数,对所有的投影点进行平移变换;计算所有检测点与最近投影点间距离的平均值作为衡量该平移变换准确与否的指标;选择衡量指标最好的那个平移变换对所有投影点进行位置偏差补偿;
步骤6-5:采用最近邻法完成匹配任务:对于每一个投影点,与其距离最近的检测点为其匹配点;同时设置门限,当最小距离大于一定阈值时认为该投影点为局外野值;当两个以上投影点对应同一个检测点时,判断舰船检测时出现船舶目标粘连现象,则这个检测点为两个以上船舶目标联合区域的中心;
步骤6-6:明确关联关系,得到每一个船舶检测区域所对应的AIS信息;
步骤6-7:显示视频,在船舶检测框内展示出包括船舶的身份、航行状态和航行计划的AIS信息。
CN201510701027.8A 2015-10-26 2015-10-26 一种证据链形式的船舶视频的生成及显示方法 Active CN105306892B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510701027.8A CN105306892B (zh) 2015-10-26 2015-10-26 一种证据链形式的船舶视频的生成及显示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510701027.8A CN105306892B (zh) 2015-10-26 2015-10-26 一种证据链形式的船舶视频的生成及显示方法

Publications (2)

Publication Number Publication Date
CN105306892A true CN105306892A (zh) 2016-02-03
CN105306892B CN105306892B (zh) 2018-02-13

Family

ID=55203577

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510701027.8A Active CN105306892B (zh) 2015-10-26 2015-10-26 一种证据链形式的船舶视频的生成及显示方法

Country Status (1)

Country Link
CN (1) CN105306892B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107886051A (zh) * 2017-10-19 2018-04-06 中国电子科技集团公司第二十八研究所 基于图像的船舶身份识别方法
CN108712633A (zh) * 2018-05-18 2018-10-26 中船重工鹏力(南京)大气海洋信息系统有限公司 一种多路cctv同时对船舶接力跟踪的监控方法
CN109460740A (zh) * 2018-11-15 2019-03-12 上海埃威航空电子有限公司 基于ais与视频数据融合的船舶身份识别方法
CN110390288A (zh) * 2019-04-26 2019-10-29 上海鹰觉科技有限公司 基于计算机视觉的目标智能搜索、定位和取证系统及方法
CN110996024A (zh) * 2019-11-11 2020-04-10 中标慧安信息技术股份有限公司 一种叠加ais信息的影像数据的显示方法及装置
CN112686106A (zh) * 2020-12-21 2021-04-20 武汉理工大学 一种视频图像转海事雷达图像的方法
CN112702563A (zh) * 2019-10-23 2021-04-23 深圳云天励飞技术有限公司 一种校园场景下的学生行为表现的订阅方法及设备、系统
CN113822217A (zh) * 2021-09-30 2021-12-21 杭州春来科技有限公司 基于ais和视频图像分析的船舶尾气监测方法
CN114339027A (zh) * 2021-11-16 2022-04-12 浙江大华技术股份有限公司 船舶监控方法、电子装置和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101098465A (zh) * 2007-07-20 2008-01-02 哈尔滨工程大学 一种视频监控中运动目标检测与跟踪方法
CN101277429A (zh) * 2007-03-27 2008-10-01 中国科学院自动化研究所 监控中多路视频信息融合处理与显示的方法和系统
US20100208941A1 (en) * 2009-02-13 2010-08-19 Broaddus Christopher P Active coordinated tracking for multi-camera systems
CN103533303A (zh) * 2013-09-30 2014-01-22 中安消技术有限公司 一种运动目标实时跟踪系统和方法
CN104660993A (zh) * 2015-02-09 2015-05-27 武汉理工大学 基于ais和cctv的海事智能监控方法及系统
CN104660994A (zh) * 2015-02-09 2015-05-27 武汉理工大学 海事专用摄像机及海事智能监控方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101277429A (zh) * 2007-03-27 2008-10-01 中国科学院自动化研究所 监控中多路视频信息融合处理与显示的方法和系统
CN101098465A (zh) * 2007-07-20 2008-01-02 哈尔滨工程大学 一种视频监控中运动目标检测与跟踪方法
US20100208941A1 (en) * 2009-02-13 2010-08-19 Broaddus Christopher P Active coordinated tracking for multi-camera systems
CN103533303A (zh) * 2013-09-30 2014-01-22 中安消技术有限公司 一种运动目标实时跟踪系统和方法
CN104660993A (zh) * 2015-02-09 2015-05-27 武汉理工大学 基于ais和cctv的海事智能监控方法及系统
CN104660994A (zh) * 2015-02-09 2015-05-27 武汉理工大学 海事专用摄像机及海事智能监控方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
周剑敏等: "基于AIS数据的智能船舶动态视频监控系统设计", 《上海海事大学学报》 *

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107886051A (zh) * 2017-10-19 2018-04-06 中国电子科技集团公司第二十八研究所 基于图像的船舶身份识别方法
CN108712633A (zh) * 2018-05-18 2018-10-26 中船重工鹏力(南京)大气海洋信息系统有限公司 一种多路cctv同时对船舶接力跟踪的监控方法
CN108712633B (zh) * 2018-05-18 2020-05-05 中船重工鹏力(南京)大气海洋信息系统有限公司 一种多路cctv同时对船舶接力跟踪的监控方法
CN109460740A (zh) * 2018-11-15 2019-03-12 上海埃威航空电子有限公司 基于ais与视频数据融合的船舶身份识别方法
CN110390288A (zh) * 2019-04-26 2019-10-29 上海鹰觉科技有限公司 基于计算机视觉的目标智能搜索、定位和取证系统及方法
CN110390288B (zh) * 2019-04-26 2021-05-25 上海鹰觉科技有限公司 基于计算机视觉的目标智能搜索、定位和跟踪系统及方法
CN112702563B (zh) * 2019-10-23 2023-08-01 深圳云天励飞技术有限公司 一种校园场景下的学生行为表现的订阅方法及设备、系统
CN112702563A (zh) * 2019-10-23 2021-04-23 深圳云天励飞技术有限公司 一种校园场景下的学生行为表现的订阅方法及设备、系统
CN110996024A (zh) * 2019-11-11 2020-04-10 中标慧安信息技术股份有限公司 一种叠加ais信息的影像数据的显示方法及装置
CN112686106A (zh) * 2020-12-21 2021-04-20 武汉理工大学 一种视频图像转海事雷达图像的方法
CN112686106B (zh) * 2020-12-21 2023-12-08 武汉理工大学 一种视频图像转海事雷达图像的方法
CN113822217A (zh) * 2021-09-30 2021-12-21 杭州春来科技有限公司 基于ais和视频图像分析的船舶尾气监测方法
CN114339027A (zh) * 2021-11-16 2022-04-12 浙江大华技术股份有限公司 船舶监控方法、电子装置和存储介质

Also Published As

Publication number Publication date
CN105306892B (zh) 2018-02-13

Similar Documents

Publication Publication Date Title
CN105306892A (zh) 一种证据链形式的船舶视频的生成及显示方法
US11410002B2 (en) Ship identity recognition method based on fusion of AIS data and video data
Chen et al. Video‐Based Detection Infrastructure Enhancement for Automated Ship Recognition and Behavior Analysis
US10878584B2 (en) System for tracking object, and camera assembly therefor
US7889232B2 (en) Method and system for surveillance of vessels
CN105915846B (zh) 一种单双目复用的入侵物监测方法及系统
US9520040B2 (en) System and method for real-time 3-D object tracking and alerting via networked sensors
CN103425967B (zh) 一种基于行人检测和跟踪的人流监控方法
CN102811343B (zh) 一种基于行为识别的智能视频监控系统
CN102081801B (zh) 多特征自适应融合船舶跟踪和航迹检测方法
KR100879266B1 (ko) 유형별 인식에 의한 사물 추적 및 침입감지 시스템
CN102917171B (zh) 基于像素的小目标定位方法
US20110142283A1 (en) Apparatus and method for moving object detection
US20150104064A1 (en) Method and system for detection of foreign objects in maritime environments
CN101214851A (zh) 船舶行驶智能型全天候主动安全预警系统及其预警方法
KR101125233B1 (ko) 융합기술기반 보안방법 및 융합기술기반 보안시스템
CN103065323A (zh) 一种基于单应性变换矩阵的分段空间对准方法
CN105141887A (zh) 一种基于热成像的海缆区域视频告警方法
CN104166137A (zh) 一种基于雷达告警态势图显示的目标综合参数跟踪测量方法
CN106504274A (zh) 一种基于红外摄像头下的视觉跟踪方法及系统
CN115184917B (zh) 一种融合毫米波雷达与相机的区域目标跟踪方法
CN104063863A (zh) 用于河道监控的下俯式双目视觉系统及图像处理方法
CN116740988A (zh) 可见光和热成像相机的全时段桥梁自适应防船撞预警方法
CN102289820B (zh) 智能跟踪球机及其跟踪方法
CN111563428A (zh) 一种机场停机位入侵检测方法及其系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant