CN102480600B - 双路监控视频信息融合方法及系统 - Google Patents

Abstract

本发明公开了一种双路监控视频信息融合方法，包括：利用关键点分别标定第一路及第二路图像数据，形成第一路图像标定区域和第二路图像标定区域；所述第一路及第二路图像数据是不同视角下同一监控区域的图像数据；将所述第一路图像标定区域和第二路图像标定区域分别进行几何归一化；选取几何归一化后的第一路图像标定区域的一部分及第二路图像标定区域的一部分进行拼接，得到全景融合图像；所述第一路图像标定区域的一部分及第二路图像标定区域的一部分互补。相应地，本发明还提供一种双路监控视频信息融合系统，上述方法和系统利用两路视频信息的相关性，将双路图像融合为单路图像，节约存储空间，节省用户的操作时间，提高用户的工作效率。

Description

双路监控视频信息融合方法及系统

技术领域

本发明涉及视频处理领域，尤其涉及一种双路监控视频信息融合方法及系统。

背景技术

ATM机的安全问题一直困扰银行业以及ATM制造商，为了加强安全管理，一般采用摄像头监控的方法，在ATM机取款间安装一个、两个或者多个摄像头，监控整个用户操作过程。

申请号为200710064819.4的中国发明专利申请公开了一种监控中多路视频信息融合处理和显示方法和系统，其中对运动目标进行主动识别，对多路相关视频信息进行融合，显示整体的监控信息，可以应用在ATM机取款间的监视系统中，负责监控、识别用户。

但是ATM机取款间的摄像头既包括监控、识别用户的摄像头，也包括监控ATM机本身和用户操作过程的摄像头。目前，在ATM机取款间安装双路摄像头监控用户操作过程和ATM机是主流的方式，从左上方和右上方两个角度可以完整的观察用户的操作过程。监控用户面部信息的摄像头安装在ATM机上。

现有的双路监控ATM机取款间的摄像头采集的双路视频信息一般直接发送给存储器，没有经过有效的分析或融合处理。简单的记录两路图像而不加分析，一方面没有提取两路信息的相关性，忽视了两路视频之间的联系；另一方面造成冗余信息，浪费存储空间。另外，由于每一路摄像头采集的场景信息往往不能全面反映场景的情况，在回放监控录像的时候，操作人员需要查看两个摄像头记录的全部视频信息，也降低了用户的工作效率。

发明内容

本发明解决的问题是提供一种双路监控视频信息融合方法及系统，利用两路视频信息的相关性，将双路图像融合为单路图像，节约存储空间，节省用户的操作时间，提高工作效率。

为解决上述问题，本发明提供一种双路监控视频信息融合方法，包括：利用关键点分别标定第一路及第二路图像数据，形成第一路图像标定区域和第二路图像标定区域；所述第一路及第二路图像数据是不同视角下同一监控区域的图像数据；将所述第一路图像标定区域和第二路图像标定区域分别进行几何归一化；选取几何归一化后的第一路图像标定区域的一部分及第二路图像标定区域的一部分进行拼接，得到全景融合图像；所述第一路图像标定区域的一部分及第二路图像标定区域的一部分互补。

可选的，所述利用关键点分别标定第一路及第二路图像数据包括：通过所述关键点生成新的关键点，新生成的关键点和原有关键点共同形成第一路图像标定区域和第二路图像标定区域。

可选的，通过所述关键点生成新的关键点利用平行四边形法则完成。

可选的，将所述第一路图像标定区域和第二路图像标定区域分别进行几何归一化包括：分别将第一路图像标定区域和第二路图像标定区域向标准网格做映射，从而得到几何归一化后的结果。

可选的，分别将第一路图像标定区域和第二路图像标定区域向标准网格做映射包括：分别将第一路图像标定区域和第二路图像标定区域划分为多个三角形区域，向标准网格中的三角形区域做映射。

进一步，本发明还提供一种双路监控视频信息融合系统，包括：关键点标定单元，适于接收来自终端设备的针对第一路及第二路图像数据的关键点标定操作指令，获取关键点并形成第一路图像标定区域和第二路图像标定区域；所述第一路及第二路图像数据是不同视角下同一监控区域的图像数据；几何归一化单元，适于将所述第一路图像标定区域和第二路图像标定区域分别进行几何归一化；双路全景融合单元，适于选取几何归一化后的第一路图像标定区域的一部分及第二路图像标定区域的一部分进行拼接，得到全景融合图像；所述第一路图像标定区域的一部分及第二路图像标定区域的一部分互补。

可选的，所述双路监控视频信息融合系统还包括临时存储单元，适于保存第一路和/或第二路图像标定区域的几何归一化结果，供所述双路全景融合单元调用。

可选的，所述关键点标定单元包括标定指令接收单元，关键点生成单元和标定区域形成单元；所述标定指令接收单元适于从标定指令中获取关键点；所述关键点生成单元适于通过获取的关键点生成新的关键点；所述标定区域形成单元适于依次连接所有关键点，形成封闭的标定区域。

可选的，所述几何归一化单元包括三角形分解单元和映射单元；所述三角形分解单元适于通过连接所述关键点生成多个三角形区域；所述映射单元适于将所述多个三角形区域向标准网格中的三角形区域做映射，得到几何归一化的第一路图像标定区域和第二路图像标定区域。

进一步，本发明还提供一种双路监控视频信息融合系统，包括：第一关键点标定单元和第二关键点标定单元，分别适于接收来自终端设备的针对第一路及第二路图像数据的关键点标定操作指令，获取关键点并形成第一路图像标定区域和第二路图像标定区域；所述第一路及第二路图像数据是不同视角下同一监控区域的图像数据；第一几何归一化单元和第二几何归一化单元，分别适于将所述第一路图像标定区域和第二路图像标定区域分别进行几何归一化；双路全景融合单元，适于接收来自所述第一几何归一化单元和第二几何归一化单元的第一路图像标定区域的几何归一化结果和第二路图像标定区域的几何归一化结果，选取所述第一路图像标定区域的一部分及第二路图像标定区域的一部分进行拼接，得到全景融合图像；所述第一路图像标定区域的一部分及第二路图像标定区域的一部分互补。

可选的，所述第一关键点标定单元和第二关键点标定单元还分别包括标定指令接收单元，关键点生成单元和标定区域形成单元；所述标定指令接收单元适于从标定指令中获取关键点；所述关键点生成单元适于通过获取的关键点生成新的关键点；所述标定区域形成单元适于依次连接所有关键点，形成封闭的标定区域。

可选的，所述第一几何归一化单元和第二几何归一化单元还分别包括三角形分解单元和映射单元；所述三角形分解单元适于通过连接所述关键点生成多个三角形区域；所述映射单元适于将所述多个三角形区域向标准网格中的三角形区域做映射，得到几何归一化的第一路图像标定区域和第二路图像标定区域。

与现有技术相比，本发明具有以下优点：(1)利用了双路监控视频信息的互补性，将双路图像数据融合为单路图像数据，节省用户回放视频数据的操作时间；(2)单路图像如果需要保存，将节省50％的存储空间。

附图说明

图1是现有技术中，ATM机双路摄像头中左路摄像头监控场景示意图；

图2是现有技术中，ATM机双路摄像头中右路摄像头监控场景示意图；

图3是本发明一个实施例中，ATM机双路图像融合方法流程图；

图4是本发明一个实施例中，目标区域内6点初始标定示意图；

图5是本发明一个实施例中，利用平行四边形法则，生成全部8个标定点的示意图；

图6是本发明一个实施例中，第一路图像数据的标定图形向标准网格映射示意图；

图7是本发明一个实施例中，第二路图像数据的标定图形向标准网格映射示意图；

图8是本发明一个实施例中，选取第一路图像数据中部分内容示意图；

图9是本发明一个实施例中，图像融合过程及结果示意图；

图10是本发明一个实施例中提供的ATM机双路监控视频信息融合系统示意图；

图11是本发明另一个实施例中提供的ATM机双路监控视频信息融合系统示意图。

具体实施方式

为使本发明的上述目的、特征和优点能够更为明显易懂，下面结合附图对本发明的具体实施方式做详细的说明。

在以下描述中阐述了具体细节以便于充分理解本发明。但是本发明能够以多种不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本发明内涵的情况下做类似推广。因此本发明不受下面公开的具体实施方式的限制。

本发明面向使用双路摄像头的监控场景，提出了如下的技术方案，全面的利用了双路摄像头采集的双路视频(图像)的相关性，有效的实现了双路ATM机工作区场景图像的全景拼接、融合，即全面的反映了场景信息，也避免了信息冗余。

现有ATM机双路摄像头监控的场景一般如图1、2所示，图1中显示了左路摄像头监控的场景信息，图2中显示了右路摄像头监控的场景信息。左路摄像头传输的图像为第一路图像，右路摄像头传输的图像为第二路图像。

为了避免用户阻挡，两路摄像机监控的场景分别为左路摄像头从左上方朝向右下方，右路摄像头从右上方朝向左下方。所以，相应的，两路图像都不完整，分别缺少一些信息，需要另一路图像补充。当用户操作ATM机时，由于用户的阻挡，两路图像中将分别缺少更多的信息，需要另一路图像补充。

参考图1，左路摄像头记录的图像内容包括ATM机100，ATM机的操作窗口110，操作窗口110中包括显示区域111、密码输入区域112、磁卡输入区域113三个部分。其中，显示区域111的显示屏幕被部分遮挡，密码输入区域112的左半部分被部分遮挡，磁卡输入区域113完整的显示。

参考图2，右路摄像头记录的图像内容包括ATM机100，ATM机的操作窗口110，操作窗口110中包括显示区域111、密码输入区域112、磁卡输入区域113三个部分。其中，显示区域111的显示屏幕全部显示，密码输入区域112的右半部分被部分遮挡，磁卡输入区域113被完全遮挡。

从上述的两幅图中可以发现，目标区域，即操作窗口110的显示区域111、密码输入区域112和磁卡输入区域113通过左路摄像头和右路摄像头的图像内容可以完整的显示出来，即左路摄像头和右路摄像头的图像内容具有互补性。

为了利用上述双路图像的关联性，融合生成一路图像，本发明提供了一种双路图像融合方法，包括如下步骤：

S001：关键点标定；

S002：几何归一化；

S003：双路全景融合。

其中，关键点标定的目的是选取进行图像操作的区域；几何归一化是将待融合图像进行格式化处理。最后进行双路全景融合即取两路待融合的归一化图像的各一部分进行拼接，得到完整的一路图像，选择拼接利用了双路图像的互补的特性。

本发明中的关键点即用户标定图像数据的标定点，关键点标定的区域即标定区域。

具体的，在本发明的一个实施例中，提供了一种ATM机双路图像融合方法，如图3所示，包括如下步骤：

S101：关键点标定第一路图像；即在第一路图像的ATM目标区域内标记关键点，得到第一路图像标定区域；

S102：生成第一路图像所有关键点；利用上述手工标记的关键点，系统自动生成新的关键点，从而得到所有的关键点；

在本发明的其他实施例中，也可以直接由用户标定所有的关键点，但是用户的操作时间和难度较大；

S103：第一路图像几何归一化；将第一路图像标定区域向标准网格做映射，得到几何归一化的第一路图像标定区域；

S104：关键点标定第二路图像；即在第二路图像的ATM目标区域内标记关键点，得到第二路图像标定区域；

S105：生成第二路图像所有关键点；利用上述手工标记的关键点，系统自动生成新的关键点，从而得到所有的关键点；

S106：第二路图像几何归一化；将关键点标记的图像区域向标准网格做映射，得到几何归一化的第二路图像标定区域；

S107：双路全景融合；分别选取几何归一化后的第一路图像标定区域的一部分与第二路图像标定区域的一部分进行全景拼接，得到全景融合图像。

在上述步骤S101和步骤S104中，标定点的选取原则是选取待处理区域(目标区域)的各个角点。关键点标定即在图片上设置标定点。

本实施例中，关键点标定第一路图像的过程为对ATM目标区域内除了侧面以外的区域进行6点初始标定，如图4所示，分别为标定点401、402、403、404、405和406。其中，标定点401位于图中操作窗口110可见部分的左上角；标定点402位于操作窗口110右上角，也是磁卡输入区域113的右上角；标定点403位于磁卡输入区域113的右下角；标定点404位于操作窗口110的右下角，也是密码输入区域112的右下角；标定点405位于操作窗口110左下角，也是密码输入区域112的左下角；标定点106位于显示区域111的左下角，也是密码输入区域112的上边界与标定点401、405的连线的交点。

以上述的6个初始标定点为基础，应用系统按照平行四边形法则，自动得出四个新的标定点。

如图5所示，标定点3、6连接得到线段504，标定点4、5连接得到线段507。标定点1即图4中标定点401，以此类推，标定点6即图4中标定点406。

生成新的标定点6′的过程为：标定点1与标定点2、标定点2与标定点103相连的线段作为平行四边形的两条相邻边，成为边501和边502。以标定点1为一个端点作平行于边502的平行线，得到与线段504的交点为新的标定点6′。

生成新的标定点5′的过程为：标定点6′与标定点3、标定点3与标定点4相连的线段分别作为平行四边形的两条相邻边，成为边505和边506，其中边505在线段504上。以标定点6′为一个端点作平行于边506的平行线，得到与线段507的交点为新的标定点5′。

上述操作过程得到了两个平行四边形，平行四边形511和平行四边形512，连接两个平行四边形的对角线得到的平行四边形511的中心点为新的标定点7，得到的平行四边形512的中心点为新的标定点8。

在其他实施例中，上述8个所需的标定点也可以完全由用户手动标定。

得到上述标定点后，分别连接两个平行四边形中心点和顶点，得到如图6所示的8个三角形区域。包括三角形601、602、603、604、605、606、607、608。

第一路图像几何归一化的过程为，将上述8个三角形向标准网格进行线性映射，如图6所示，三角形601映射为标准网格的三角形611，三角形602映射为标准网格的三角形612，三角形603映射为标准网格的三角形613，三角形604映射为标准网格的三角形614，三角形605映射为标准网格的三角形615，三角形606映射为标准网格的三角形616，三角形607映射为标准网格的三角形617，三角形608映射为标准网格的三角形618。

在每一次的映射过程中，假设映射前后的三角形顶点分别为：A、B、C和A′、B′、C′。对于原三角形ABC中任意一点P，P可以表示为原三角形三个顶点的函数，即：p＝λ₁A+λ₂B+λ₃C；P映射为三角形A′B′C′中的点Q，利用上述参数λ₁，λ₂，λ₃，映射公式为：q＝λ₁A′+λ₂B′+λ₃C′。其中，λ₁+λ₂+λ₃＝1，且λ₁，λ₂，λ₃＞0，p为初始坐标，q为结果坐标。

在其他实施例中，也可以使用其它的几何归一化方法，如透视变换法，但它相对比较复杂，通常需要确定8个左右的方程参数，而三角形映射法简单方便，只需确定3个参数即可；另外，以三角形为基本单元进行划分能够确保映射的正确性，因为所有三角形都具有“凸”的优点。

映射完成之后，得到归一化的第一路图像的标定区域。

如图7所示，按照上述的方法，对来自第二个摄像头的第二路图像进行相同的操作，得到的归一化的第二路图像的标定区域。归一化的第一路图像和归一化的第二路图像都准备完成。

在步骤S107中，为了进行双路全景融合，需要在每一路图像中选取所需的部分进行拼接。本实施例中，由于第一路图像和第二路图像的互补性刚好在图像二分之一处，即左半部分图像基本可以从第二路图像中完整得到，右半部分图像基本可以从第一路图像中完整获得，所以可以采用各取一半的方法选取两路图像。

如图8所示，对于左路摄像头传输的第一路图像，标定点4和标定点5的连线的中点为点801，以点801为一端点，作平行于边805的平行线，与边806相交于点802；再以点802为一端点，作平行于边807的平行线，与边808相交于点803。由点801、802和803以及原标定点2、3和4为边界点组成的斜线覆盖的区域804成为第一路图像的待融合区。

第一路图像的待融合区的内容通过点802可以对应到归一化的第一路图像中，点801、802和803依次连接得到的线段对应于归一化的线段811，线段811右边的虚线覆盖区域812为归一化的第一路图像的待融合区。如上所述，第一路图像的待融合区体现的内容为操作窗口110的右半部分。

对于第二路图像进行相似的操作，得到第二路图像的待融合区、以及归一化的第二路图像的待融合区，其中体现的内容是操作窗口110的左半部分。

将上述两部分的内容拼接在一起，得到完成的融合图像，如图9所示。其中，第一路图像的几何归一化结果为图像1111，第二路图像的几何归一化结果为1112。按照上述方法，取图像1111的右半部分1114和图像1112的左半部分1113，拼接成为ATM工作区的双路全景融合图像。

在融合图像中，既包括第一路图像所体现的操作窗口的右半部分，又包括了第二路图像所体现的操作窗口的左半部分信息，并且排除了第一路图像中被遮挡的操作窗口的左半部分，和第二路图像中被遮挡的操作窗口的右半部分。实现了相关信息融合并删除冗余信息的目的，使用监控图像的用户可以只观察一路图像就能达到过去的监控目的，减少了操作时间，提高了工作效率。

进一步的，本发明还提供了一种ATM机双路监控视频信息融合系统。如图10所示，该融合系统900包括关键点标定单元902，几何归一化单元904以及双路全景融合单元906。

其中，关键点标定单元902与ATM机的双路摄像头耦接，即分别与第一路摄像头911、第二路摄像头912耦接，适于接收来自摄像头的图像数据。

每隔一定的时间间隔，关键点标定单元902接收来自摄像头911和912的数据，其中第一路图像为左路摄像头拍摄，第二路图像为右路摄像头拍摄。所述的时间间隔为ATM摄像头采集频率的倒数。

当关键点标定单元902得到第一路图像数据后，接收用户手动标定的关键点数据。

本发明的一个实施例中，关键点标定单元902包括标定指令接收单元和标定区域形成单元；由用户负责标定所有的8个关键点。

在本发明的另一个实施例中，由用户负责标定6个关键点；关键点标定单元902包括标定指令接收单元，关键点生成单元和标定区域形成单元；所述标定指令接收单元适于从标定指令中获取关键点；所述关键点生成单元适于通过获取的关键点生成新的关键点，按照上述融合方法步骤S102的描述，关键点生成单元利用平行四边形法则，在已有的6个关键点的基础上，进一步生成4个关键点，得到所需的8个关键点；所述标定区域形成单元适于依次连接所有关键点，形成封闭的标定区域。

由于ATM监控摄像头的位置和角度一般不改变，所以手动标定操作只进行一次。其标定结果也可以作为之后系统自动标定的模板数据重复使用。在上述的ATM监控摄像头的位置改变之后，标定点的位置需要进行修改。

几何归一化单元904与所述关键点生成单元903耦接，接收来自关键点生成单元903的所有关键点及其形成的图像标定区域，并将所述第一路图像标定区域和第二路图像标定区域分别进行几何归一化。

双路全景融合单元906与几何归一化单元904耦接，接收来自几何归一化904的几何归一化后的第一路图像标定区域和第二路图像标定区域。双路全景融合单元906接收用户的操作，选取几何归一化后的第一路图像标定区域的一部分及第二路图像标定区域的一部分进行拼接，得到全景融合图像。

本发明一个实施例中，所述几何归一化单元包括三角形分解单元和映射单元，所述三角形分解单元适于通过连接所述关键点生成多个三角形区域；所述映射单元适于将所述多个三角形区域向标准网格中的三角形区域做映射，得到几何归一化的第一路图像标定区域和第二路图像标定区域。

本发明一个实施例中，该融合系统900还包括临时存储单元，几何归一化单元904与临时存储单元耦接，将归一化的第一路图像信息保存在临时存储单元中。双路全景融合单元906分别与临时存储单元和几何归一化单元904耦接。当几何归一化单元904得到归一化的第二路图像信息后，向双路全景融合单元906发送归一化的第二路图像信息；双路全景融合单元906从临时存储单元获取归一化的第一路图像信息。按照上述的的融合方法中步骤S107的描述，双路全景融合单元906分别取归一化的第一路图像信息的一半和归一化的第二路图像信息的一半进行拼接，得到全景融合图像数据。上述的临时存储单元在其他实施例中，也可以在几何归一化单元904或者双路全景融合单元906中实现。或者，在最开始的关键点标定单元902中，实现相似的缓存功能，缓存两路图像中的一路。

进一步的，为了提高工作效率，本发明还提供一种ATM机双路监控视频信息融合系统。系统分别为两路摄像头配备了两套关键点标定单元和几何归一化单元，减少了第二路图像操作的等待时间(减少到0)。

如图11所示为本发明一个实施例中的融合系统示意图，所述融合系统900包括与摄像头911连接的关键点标定单元和几何归一化单元，以及与摄像头912连接的关键点标定单元和几何归一化单元。两套相同的设备同时进行工作，融合系统900的各个单元内部也不再需要缓存单元。所述双路全景融合单元分别与两个几何归一化单元耦接，同时接受归一化的第一路图像信息和归一化的第二路图像信息，并进行上述的拼接操作，得到全景融合数据。

用户得到的信息为融合后的全景信息，该信息既保证了信息的完整性，又排除了信息中的冗余部分，如果需要存储，将减少50％的存储量。

本发明提供的双路融合方法和系统可以推广到ATM机多路安全监控中，使用双路乃至多路的目的都是为了使单路不能完全反映场景的这种能力的欠缺得到弥补，从而达到全面反映场景信息、不留监控漏洞的目的，对ATM监控具有安全意义。

本发明虽然已以具体实施例公开如上，但其并不是用来限定本发明，任何本领域技术人员在不脱离本发明的精神和范围内，都可以利用上述揭示的方法和技术内容对本发明技术方案做出可能的变动和修改，因此，凡是未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化及修饰，均属于本发明技术方案的保护范围。

Claims (11)

1.一种双路监控视频信息融合方法，其特征在于，包括：

选取第一路及第二路图像数据中目标区域的各个角点作为关键点，通过所述关键点生成新的关键点，新生成的关键点和原有关键点共同形成第一路图像标定区域和第二路图像标定区域；所述第一路及第二路图像数据是不同视角下同一监控区域的图像数据；

将所述第一路图像标定区域和第二路图像标定区域分别进行几何归一化；

选取几何归一化后的第一路图像标定区域的一部分及第二路图像标定区域的一部分进行拼接，得到全景融合图像；所述第一路图像标定区域的一部分及第二路图像标定区域的一部分互补。

2.如权利要求1所述的双路监控视频信息融合方法，其特征在于，通过所述关键点生成新的关键点利用平行四边形法则完成。

3.如权利要求1所述的双路监控视频信息融合方法，其特征在于，将所述第一路图像标定区域和第二路图像标定区域分别进行几何归一化包括：

分别将第一路图像标定区域和第二路图像标定区域向标准网格做映射，从而得到几何归一化后的结果。

4.如权利要求3所述的双路监控视频信息融合方法，其特征在于，分别将第一路图像标定区域和第二路图像标定区域向标准网格做映射包括：

分别将第一路图像标定区域和第二路图像标定区域划分为多个三角形区域，向标准网格中的三角形区域做映射。

5.一种双路监控视频信息融合系统，其特征在于，包括：

关键点标定单元，适于接收来自终端设备的针对第一路及第二路图像数据的关键点标定操作指令，选取第一路及第二路图像数据中目标区域的各个角点作为关键点，通过所述关键点生成新的关键点，新生成的关键点和原有关键点共同形成第一路图像标定区域和第二路图像标定区域；所述第一路及第二路图像数据是不同视角下同一监控区域的图像数据；

几何归一化单元，适于将所述第一路图像标定区域和第二路图像标定区域分别进行几何归一化；

双路全景融合单元，适于选取几何归一化后的第一路图像标定区域的一部分及第二路图像标定区域的一部分进行拼接，得到全景融合图像；所述第一路图像标定区域的一部分及第二路图像标定区域的一部分互补。

6.如权利要求5所述的双路监控视频信息融合系统，其特征在于，还包括临时存储单元，适于保存第一路和/或第二路图像标定区域的几何归一化结果，供所述双路全景融合单元调用。

7.如权利要求5所述的双路监控视频信息融合系统，其特征在于，所述关键点标定单元包括标定指令接收单元，关键点生成单元和标定区域形成单元；

所述标定指令接收单元适于从标定指令中获取关键点；

所述关键点生成单元适于通过获取的关键点生成新的关键点；

所述标定区域形成单元适于依次连接所有关键点，形成封闭的标定区域。

8.如权利要求5所述的双路监控视频信息融合系统，其特征在于，所述几何归一化单元包括三角形分解单元和映射单元；

所述三角形分解单元适于通过连接所述关键点生成多个三角形区域；

所述映射单元适于将所述多个三角形区域向标准网格中的三角形区域做映射，得到几何归一化的第一路图像标定区域和第二路图像标定区域。

9.一种双路监控视频信息融合系统，其特征在于，包括：

第一关键点标定单元和第二关键点标定单元，分别适于接收来自终端设备的针对第一路及第二路图像数据的关键点标定操作指令，选取第一路及第二路图像数据中目标区域的各个角点作为关键点，通过所述关键点生成新的关键点，新生成的关键点和原有关键点共同形成第一路图像标定区域和第二路图像标定区域；所述第一路及第二路图像数据是不同视角下同一监控区域的图像数据；

第一几何归一化单元和第二几何归一化单元，分别适于将所述第一路图像标定区域和第二路图像标定区域分别进行几何归一化；

双路全景融合单元，适于接收来自所述第一几何归一化单元和第二几何归一化单元的第一路图像标定区域的几何归一化结果和第二路图像标定区域的几何归一化结果，选取所述第一路图像标定区域的一部分及第二路图像标定区域的一部分进行拼接，得到全景融合图像；所述第一路图像标定区域的一部分及第二路图像标定区域的一部分互补。

10.如权利要求9所述的双路监控视频信息融合系统，其特征在于，所述第一关键点标定单元和第二关键点标定单元还分别包括标定指令接收单元，关键点生成单元和标定区域形成单元；

所述标定指令接收单元适于从标定指令中获取关键点；

所述关键点生成单元适于通过获取的关键点生成新的关键点；

所述标定区域形成单元适于依次连接所有关键点，形成封闭的标定区域。

11.如权利要求9所述的双路监控视频信息融合系统，其特征在于，所述第一几何归一化单元和第二几何归一化单元还分别包括三角形分解单元和映射单元；

所述三角形分解单元适于通过连接所述关键点生成多个三角形区域；

所述映射单元适于将所述多个三角形区域向标准网格中的三角形区域做映射，得到几何归一化的第一路图像标定区域和第二路图像标定区域。

Images