CN109104588A - 一种视频监控方法、设备、终端及计算机存储介质 - Google Patents

一种视频监控方法、设备、终端及计算机存储介质 Download PDF

Info

Publication number
CN109104588A
CN109104588A CN201810816449.3A CN201810816449A CN109104588A CN 109104588 A CN109104588 A CN 109104588A CN 201810816449 A CN201810816449 A CN 201810816449A CN 109104588 A CN109104588 A CN 109104588A
Authority
CN
China
Prior art keywords
terminal
images
image
sub
data packet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810816449.3A
Other languages
English (en)
Other versions
CN109104588B (zh
Inventor
房梦琦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201810816449.3A priority Critical patent/CN109104588B/zh
Publication of CN109104588A publication Critical patent/CN109104588A/zh
Application granted granted Critical
Publication of CN109104588B publication Critical patent/CN109104588B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/141—Setup of application sessions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
    • H04L69/162—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields involving adaptations of sockets based mechanisms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明实施例公开了一种视频监控方法、设备、终端及计算机存储介质，所述方法包括：获取两幅待处理图像；对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；通过第三预设算法获取所述重叠区域的割线；根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。从而通过拼接终端拍摄的视频序列，并解决拼接图像中出现的拼接痕迹问题，实现实时视频拼接，还可以控制子终端的接口设备，便于用户之间的沟通。

Description

一种视频监控方法、设备、终端及计算机存储介质
技术领域
本发明涉及计算机视频教学监控领域，尤其涉及一种视频监控方法、设备、终端及计算机存储介质。
背景技术
近些年，随着计算机技术的快速发展与网络技术的普及，出现了很多技术型的教学方式，例如，现在的电子教室、远程教学、多媒体等教学方式。利用计算机技术来实现教学的教学方式逐渐被人们所关注，因此利用计算机技术来完善教育事业是当今时代教育教学发展的必然趋势。但是在现在的教学方式下，学生就一个知识点或疑问不能及时与老师进行沟通，使得老师和同学之间缺乏沟通以及交流，而且在没有老师的监控下，只有少部分同学可以集中注意力在课堂上，大部分同学可能会把老师关注的问题以及知识点忽略。并且，在课堂上，老师总是在上面授课，没有过多的精力了解每一个学生的听课状态，尤其是座位靠后的学生，因此大部分学生基本属于不受控的状态，使得老师不了解学生对知识点的掌握程度，最后班级整体的成绩并不理想。
发明内容
有鉴于此，本发明实施例为解决现有技术中存在的至少一个问题而提供一种视频监控方法、设备、终端及计算机存储介质，能够控制另一终端的接口设备，还可以通过拼接终端拍摄的视频序列，并解决拼接图像中出现的拼接痕迹问题，实现实时视频拼接，便于用户之间的沟通。
为达到上述目的，本发明实施例的技术方案是这样实现的：
第一方面，本发明实施例提供一种视频监控方法，所述方法应用于主终端，所述方法包括：
获取两幅待处理图像；
对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；
通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；
通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；
通过第三预设算法获取所述重叠区域的割线；
根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。
进一步地，所述对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像，包括：
对所述两幅待处理图像分别进行图像平滑，消除所述两幅待处理图像中的随机噪声，获得两幅第一预处理图像；
对所述两幅第一预设图像分别进行图像复原，校正所述两幅第一预设图像中的图像退化，获得两幅第二预处理图像；
对所述两幅第二预设图像分别进行图像增强，增强所述两幅第二预设图像中的图像边缘，获得两幅第三预处理图像。
进一步地，所述通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点，包括：
通过SIFT算法对所述两幅预处理图像分别进行图像特征点提取，获得各预处理图像的图像特征点；
对所述两幅预处理图像的图像特征点进行相似度评估，获得成对的特征匹配点。
进一步地，所述通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域，包括：
通过最邻近算法筛除所述特征匹配点中的错误的特征匹配点，获得所述两幅预处理图像的重叠区域。
进一步地，所述通过第三预设算法获取所述重叠区域的割线，包括：
通过AlphaBeta剪枝算法获取所述重叠区域的割点；
将所述割点按预设连接顺序进行连接，获得所述重叠区域的割线。
进一步地，所述根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像，包括：
根据所述割线，将所述两幅预处理图像拼接为一副拼接图像；
通过第四预设算法融合所述拼接图像上的拼接痕迹，获得融合后的图像。
进一步地，所述通过第四预设算法融合所述拼接图像上的拼接痕迹，获得融合后的图像，包括：
通过缩放式渐进渐出融合算法按照预设的缩放比例，缩放所述拼接图像上的拼接痕迹两侧的图像，融合所述拼接痕迹，获取融合后的图像。
进一步地，所述方法还包括：
初始化所述主终端的网络socket，监听连接请求；
监听到所述子终端发送的连接请求，建立与所述子终端的连接；
接收所述子终端发送的接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
根据所述接管报文，获取所述主终端的接口设备事件；其中，所述接口设备事件包括鼠标事件或键盘事件；
将所述接口设备事件进行打包，生成数据包；
向所述子终端发送所述数据包。
第二方面，本发明实施例提供一种视频监控方法，所述方法应用于子终端，所述方法包括：
初始化所述子终端的网络socket，向主终端发送连接请求；
向所述主终端发送接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
接收所述主终端发送的数据包；
对所述数据包进行解析，获得所述数据包类型；其中，所述数据包类型包括接口设备事件；
根据所述数据包类型，进行与所述数据包类型对应的接口设备操作。
第三方面，本发明实施例提供一种视频监控装置，所述装置包括：
第一获取单元，配置为获取两幅待处理图像；
第一处理单元，配置为对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；
提取单元，配置为通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；
筛除单元，配置为通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；
第二获取单元，配置为通过第三预设算法获取所述重叠区域的割线；
融合单元，配置为根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。
进一步地，所述装置还包括：
监听单元，配置为初始化所述主终端的网络socket，监听连接请求；
连接单元，配置为监听到所述子终端发送的连接请求，建立与所述子终端的连接；
第一接收单元，配置为接收所述子终端发送的接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
第三获取单元，配置为根据所述接管报文，获取所述主终端的接口设备事件；其中，所述接口设备事件包括鼠标事件或键盘事件；
打包单元，配置为将所述接口设备事件进行打包，生成数据包；
第一发送单元，配置为向所述子终端发送所述数据包。
第四方面，本发明实施例提供一种视频监控装置，所述装置包括：
第二发送单元，配置为初始化所述子终端的网络socket，向主终端发送连接请求；
第三发送单元，配置为向所述主终端发送接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
第二接收单元，配置为接收所述主终端发送的数据包；
第四获取单元，配置为对所述数据包进行解析，获得所述数据包类型；其中，所述数据包类型包括接口设备事件
第二处理单元，配置为根据所述数据包类型，进行与所述数据包类型对应的接口设备操作。
第五方面，本发明实施例提供一种终端，所述终端包括第一通信总线、第一存储器和第一处理器；其中，
所述第一网络接口，配置为实现组件之间的连接通信；
所述第一存储器，配置为存储能够在所述处理器上运行的计算机程序；
所述第一处理器，配置为在运行所述计算机程序时，执行第一方面所述视频监控方法的步骤。
第六方面，本发明实施例提供一种终端，所述终端包括第二通信总线、第二存储器和第二处理器；其中，
所述第二网络接口，配置为实现组件之间的连接通信；
所述第二存储器，配置为存储能够在所述处理器上运行的计算机程序；
所述第二处理器，配置为在运行所述计算机程序时，执行第二方面所述视频监控方法的步骤。
第五方面，本发明实施例提供一种计算机存储介质，其特征在于，所述计算机存储介质存储有视频监控程序，当所述视频监控程序被至少一个处理器执行时实现第一方面所述的视频监控方法的步骤或者实现第二方面所述的视频监控方法的步骤。
本发明实施例所提供的一种视频监控方法、设备、终端及计算机存储介质，获取两幅待处理图像；对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；通过第三预设算法获取所述重叠区域的割线；根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。从而通过拼接终端拍摄的视频序列，并解决拼接图像中出现的拼接痕迹问题，实现实时视频拼接，还可以控制子终端的接口设备，便于用户之间的沟通。
附图说明
图1为本发明实施例提供的一种移动终端的硬件结构示意图；
图2为本发明实施例提供的一种视频监控方法的示意图；
图3为本发明实施例提供的一种视频监控方法的示意图；
图4为本发明实施例提供的一种主终端接管子终端的方法示意图；
图5为本发明实施例提供的又一种视频监控方法的示意图；
图6为本发明实施例提供的又一种主终端接管子终端的方法示意图；
图7为本发明实施例提供的再一种视频监控方法的示意图；
图8为本发明实施例提供的两幅大楼图像；
图9为本发明实施例提供的一副大楼融合图像；
图10为本发明实施例提供的一种视频监控装置的结构示意图；
图11为本发明实施例提供的一种视频监控装置的具体硬件结构示意图；
图12为本发明实施例提供的又一种视频监控装置的结构示意图；
图13为本发明实施例提供的又一种视频监控装置的具体硬件结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对发明的具体技术方案做进一步详细描述。以下实施例用于说明本发明，但不用来限制本发明的范围。
图1为本发明实施例提供一种示例性的网络架构示意图，如图1所示，该网络架构包括一个主终端、至少一个子终端，其中，所述主终端可以与所述至少一个子终端通过标准的UDP协议进行连接。所述主终端可以向所述子终端发送报文，所述子终端也可以向所述主终端发送报文。例如，子终端可以向主终端发送接管报文，通知主终端接管子终端，主终端也可以向子终端发送数据包，以接管子终端。本发明实施例中的网络架构还可以应用于其他的监控场景，本发明实施例不作限制。
需要说明的是，摄像头图像拍摄的过程实际上是一个光学成像的过程。相机成像过程涉及到四个坐标系以及这四个坐标系的转换，其中，所述四个坐标系为世界坐标系、相机坐标系、图像坐标系、像素坐标系，所述世界坐标系是客观三维世界的绝对坐标系。其中，小孔成像模型是相机成像采用最多的一种模型。在该模型下，物体的空间坐标和图像坐标之间是线性的关系，可以通过小孔成像模型找到图像像素与物体空间坐标的关系，也就是以统一的世界坐标系为基准，将物体空间坐标按照四个坐标系的转换关系，映射为图像像素。
终端可以以各种形式来实施。例如，本发明中描述的终端可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant，PDA)、便捷式媒体播放器(Portable Media Player，PMP)、导航装置、可穿戴设备、智能手环、计步器等移动终端，以及诸如数字TV、台式计算机等固定终端。
实施例一
本发明实施例提供一种视频监控方法，所述方法应用于主终端，图2为本发明实施例提供的一种视频监控方法的示意图，如图2所示，该方法主要包括以下步骤：
步骤201、获取两幅待处理图像；
步骤202、对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；
步骤203、通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；
步骤204、通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；
步骤205、通过第三预设算法获取所述重叠区域的割线；
步骤206、根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。
通过图2所示的技术方案，当获取到两幅待处理图像后，将两幅待处理图像进行图像预处理，并对预处理后的两幅图像进行特征点的提取，获取成对的特征匹配点，可能所述成对的特征匹配点中有错误的特征匹配点，则通过预设算法筛除特征匹配点中的错误的特征匹配点，获取两幅预处理图像的重叠区域，找出重叠区域的割线，根据所述割线将两幅预处理图像进行融合，使得融合后的图像没有拼接痕迹，实现实时视频拼接。
对于图2所示的技术方案，在一种可能的实现方式中，步骤202所述的对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像，包括：
对所述两幅待处理图像分别进行图像平滑，消除所述两幅待处理图像中的随机噪声，获得两幅第一预处理图像；
对所述两幅第一预设图像分别进行图像复原，校正所述两幅第一预设图像中的图像退化，获得两幅第二预处理图像；
对所述两幅第二预设图像分别进行图像增强，增强所述两幅第二预设图像中的图像边缘，获得两幅第三预处理图像。
需要解释的是，所述图像预处理还可以包括直方图均衡化、中值滤波等图像处理，并不限于本发明实施例中的图像平滑、图像复原、图像增强，而且所述图像预处理顺序并不限于本发明实施例中的处理顺序。所述图像平滑可以消除图像中随机噪声，且在消除噪声的同时不使图像轮廓或线条变得模糊不清；所述图像复原可以校正由光学系统的像差，相机和物体的相对运动等各种原因所造成的图像退化，使重建或估计得到的图像尽可能逼近于理想无退化的像场；所述图像增强可以对图像中的信息有选择地加强和抑制，以改善图像的视觉效果，或将图像转变为更适合于机器处理的形式，以便于数据抽取或识别。
对于图2所示的技术方案，在一种可能的实现方式中，步骤203所述的通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点，包括：
通过SIFT算法对所述两幅预处理图像分别进行图像特征点提取，获得各预处理图像的图像特征点；
对所述两幅预处理图像的图像特征点进行相似度评估，获得成对的特征匹配点。
需要说明的是，所述通过SIFT算法可以实现对预处理图像的特征点提取，并获得成对的特征匹配点。通过SIFT算法处理预处理图像的过程主要分为五个步骤，首先需要建立一个尺度空间，检测预处理图像中的极值点；然后去除极值点中的不稳定点，获取特征点，所述不稳定点为不稳定的边缘点和低对比度的极值点；接着确定特征点的方向，也就是统计特征点领域所有的梯度方向直方图；然后根据特征点的方向，提取特征点描述符；最后匹配特征点描述符，获取成对的特征匹配点，也就是利用两幅图像的特征点描述符之间的欧氏距离评估特征点之间的相似度，从而获得成对的特征匹配点。
对于图2所示的技术方案，在一种可能的实现方式中，步骤204所述的通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域，包括：
通过最邻近算法筛除所述特征匹配点中的错误的特征匹配点，获得所述两幅预处理图像的重叠区域。
需要说明的是，由于通过SIFT算法获取的成对的特征匹配点可能存在一些错误的特征匹配点，需要通过最邻近算法去除特征匹配点中的错误的特征匹配点，从而获得两幅预处理图像的重叠区域。所述最邻近算法是通过计算特征匹配点之间的相似度，若相似度达到预设的阈值，则确定特征匹配点不是错误的特征匹配点，否则确定特征匹配点是错误的特征匹配点，并将错误的特征匹配点去除，从而获得所述两幅预处理图像的重叠区域。
对于图2所示的技术方案，在一种可能的实现方式中，步骤205所述的通过第三预设算法获取所述重叠区域的割线，包括：
通过AlphaBeta剪枝算法获取所述重叠区域的割点；
将所述割点按预设连接顺序进行连接，获得所述重叠区域的割线。
需要说明的是，通过AlphaBeta剪枝算法可以获取所述重叠区域的多个割点，然后按照预设的连接顺序将所有的割点一一连接起来，形成一条割线，所述割线可将所述重叠区域划分成两部分。
对于图2所示的技术方案，在一种可能的实现方式中，步骤206所述的根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像，包括：
根据所述割线，将所述两幅预处理图像拼接为一副拼接图像；
通过第四预设算法融合所述拼接图像上的拼接痕迹，获得融合后的图像。
对于图2所示的技术方案，需要说明的是，将两幅预处理图像拼接为一副拼接图像后，所述拼接图像上可能存在拼接痕迹，需要融合所述拼接痕迹，因此，在一种可能的实现方式中，所述通过第四预设算法融合所述拼接图像上的拼接痕迹，获得融合后的图像，包括：
通过缩放式渐进渐出融合算法按照预设的缩放比例，缩放所述拼接图像上的拼接痕迹两侧的图像，融合所述拼接痕迹，获取融合后的图像。
需要说明的是，通过AlphaBeta剪枝算法获取了所述重叠区域的最优割线后，可根据所述最优割线，将两幅预处理图像分为左右或上下两侧，并将分割后的图像拼接为一副拼接图像，为了消除拼接图像上的拼接痕迹，需要对拼接图像进行融合处理，本发明实施例通过缩放式渐进渐出融合算法来解决拼接痕迹问题。所述缩放式渐进渐出融合算法是按照预设的缩放比例，缩放拼接痕迹左右或上下两侧的图像，从而消除拼接痕迹。
对于图2所示的技术方案，步骤201-206是主终端将两幅图像进行融合，获得一副融合图像的过程，在一种可能的实现方式中，图2所示的技术方案还包括主终端控制子终端接口设备的过程，如图3所示，图3中的技术方案包括：
步骤301、初始化所述主终端的网络socket，监听连接请求；
步骤302、监听到所述子终端发送的连接请求，建立与所述子终端的连接；
步骤303、接收所述子终端发送的接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
步骤304、根据所述接管报文，获取所述主终端的接口设备事件；其中，所述接口设备事件包括鼠标事件或键盘事件；
步骤305、将所述接口设备事件进行打包，生成数据包；
步骤306、向所述子终端发送所述数据包。
通过图3所示的技术方案，当监听到子终端发送的连接请求后，与所述子终端进行连接，并接收子终端发送的接管报文，获取主终端的接口设备事件，将所述接口设备事件打包发送至所述子终端，从而实现对子终端接口设备的控制。
需要说明的是，当主终端接收到子终端的接管报文后，可获取主终端的接口设备事件，所述接口设备事件包括鼠标事件或键盘事件，具体的，包括鼠标移动事件、鼠标左键单击事件、鼠标左键双击事件、鼠标右键事件、鼠标滚轮事件以及键盘键值事件，并将接口设备事件通过固定结构体进行封装打包，通过UDP协议发送给子终端。如图4所示，主终端获取的可以是鼠标事件或者键盘事件，当确定是鼠标事件，则鼠标事件又可以通过确定是否是单指点击，从而确定鼠标事件是鼠标移动事件、鼠标左键单击事件、鼠标左键双击事件、鼠标右键事件或鼠标滚轮事件，当确定是键盘事件，则获取相应的键值，主终端将上述接口事件封装打包，通过UDP协议发送给子终端。
本发明实施例提供了一种视频监控方法，首先获取两幅待处理图像；对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；通过第三预设算法获取所述重叠区域的割线；根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。从而通过拼接终端拍摄的视频序列，并解决拼接图像中出现的拼接痕迹问题，实现实时视频拼接，还可以控制子终端的接口设备，便于用户之间的沟通。
实施例二
本发明实施例提供一种视频监控方法，所述方法应用于子终端，图5为本发明实施例提供的一种视频监控方法的示意图，如图5所示，该方法主要包括以下步骤：
步骤501、初始化所述子终端的网络socket，向主终端发送连接请求；
步骤502、向所述主终端发送接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
步骤503、接收所述主终端发送的数据包；
步骤504、对所述数据包进行解析，获得所述数据包类型；其中，所述数据包类型包括接口设备事件；
步骤505、根据所述数据包类型，进行与所述数据包类型对应的接口设备操作。
通过图5所示的技术方案，当与主终端连接后，向主终端发送接管报文，然后接收主终端发送的数据包，并对数据包进行解析，获得数据包类型，并进行与所述数据包类型对应的接口设备操作，从而实现主终端对子终端接口设备的控制。
需要说明的是，当子终端确定了数据包类型后，就可以根据数据包类型进行相应的接口设备操作，其中，所述数据包类型包括鼠标移动事件、鼠标左键单击事件、鼠标左键双击事件、鼠标右键事件、鼠标滚轮事件以及键盘键值事件。如图6所示，当子终端接收到数据包后，对数据包进行解析，解析后数据包为鼠标移动事件、鼠标左键单击事件、鼠标左键双击事件、鼠标右键事件、鼠标滚轮事件或键盘键值事件，并执行鼠标移动操作、鼠标左键单击操作、鼠标左键双击操作、鼠标右键操作、鼠标滚轮操作或键盘键值操作。例如，当确定数据包是鼠标移动事件后，首先获取主终端的屏幕分辨率，将所述子终端的屏幕分辨率与所述主终端的屏幕分辨率统一，使得所述子终端的屏幕分辨率与所述主终端的屏幕分辨率相同，根据数据包中鼠标的起始坐标以及终点坐标，使得子终端的鼠标坐标位于所述起始坐标，并将起始坐标到终点坐标的位移按照预设的计算规则，将位移分为几个位移段，使得子终端的鼠标按照位移段进行移动，从而实现主终端对子终端鼠标的控制。
本发明实施例提供了一种视频监控方法，首先初始化所述子终端的网络socket，向主终端发送连接请求；向所述主终端发送接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；接收所述主终端发送的数据包；对所述数据包进行解析，获得所述数据包类型；其中，所述数据包类型包括接口设备事件；根据所述数据包类型，进行与所述数据包类型对应的接口设备操作。从而实现主终端对子终端接口设备的控制，便于用户之间的沟通。
实施例三
本发明实施例提供一种视频监控方法，图7为本发明实施例提供的一种视频监控方法的示意图，如图7所示，该方法主要包括以下步骤：
步骤701、主终端初始化主终端的网络socket，监听连接请求。
这里，主终端可以通过初始化本地网络套接字socket，从而实现监听连接请求，主终端初始化本地网络socket是通过创建socket，将socket与主终端的IP和监听端口绑定实现的，从而主终端可以监听其他终端发送的请求。
步骤702、子终端初始化子终端的网络socket，向主终端发送连接请求。
需要说明的是，子终端可以通过初始化本地网络socket，向主终端发送连接请求，子终端初始化本地网络socket是通过创建socket，将socket与子终端的IP和监听端口绑定实现的，并向主终端发送连接请求。
步骤703、主终端监听到子终端发送的连接请求，建立与子终端的连接。
这里，当主终端监听到子终端发送的连接请求后，就可以与子终端建立连接，此外，主终端与子终端还可以通过UDP广播协议发送报文，而且主终端的应用界面也将与子终端的应用界面实现统一。
步骤704、子终端与主终端建立连接后，向主终端发送接管报文；其中，所述接管报文用于指示主终端接管子终端。
需要说明的是，当子终端与主终端建立连接后，子终端可以向主终端发送接管报文，其中，所述接管报文用于指示主终端接管子终端。例如，在课堂上，老师将讲课资料通过网络投射到每位学生的PC机上，在讲解例题过程中，如果学生有疑问，可以点击PC机界面上的“？”按钮，从而学生的PC机就会生成接管报文，并向老师的PC机发送接管报文，用于指示需要老师接管学生的PC机，通过控制学生PC机的鼠标以及键盘，向学生解释疑问。
步骤705、主终端接收到接管报文后，获取主终端的接口设备事件；其中，所述接口设备事件包括鼠标事件或键盘事件。
需要说明的是，由于主终端与子终端的应用界面是相同的，因此，当主终端接收到子终端发送的接管请求后，主终端当前的应用界面也就是子终端当前的应用界面。其中，所述接口设备事件包括鼠标事件或键盘事件，具体的，包括鼠标移动事件、鼠标左键单击事件、鼠标左键双击事件、鼠标右键事件、鼠标滚轮事件以及键盘键值事件，所述鼠标事件包括鼠标的坐标，当接口设备事件为鼠标移动事件时，所述接口设备事件包括鼠标的起始坐标以及终点坐标。例如，当用户移动鼠标，则主终端获取的是鼠标移动事件；当用户单击鼠标左键，则主终端获取的是鼠标左键单击事件；当用户双击鼠标左键事件，则主终端获取的是鼠标左键双击事件；当用户单击鼠标右键，则主终端获取的是鼠标右键单击事件；当用户滑动鼠标滚轮，则主终端获取的是鼠标滚轮事件；当点击键盘上的按键，则主终端获取的是键盘键值事件。
步骤706、主终端将所述接口设备事件进行打包，生成数据包。
相应地，所述接口设备事件可以是鼠标移动事件、鼠标左键单击事件、鼠标左键双击事件、鼠标右键事件、鼠标滚轮事件以及键盘键值事件，将所述接口设备事件通过固定结构体封装打包，生成数据包，例如将鼠标移动事件进行打包，生成数据包，所述数据包中包括鼠标的起始坐标以及终点坐标，根据所述鼠标的起始坐标以及终点坐标可以指示所述数据包包括鼠标移动事件。
步骤707、主终端向子终端发送所述数据包。
这里，主终端可以在局域网内通过Sendto函数广播数据包，只要子终端通过初始化本地网络socket，并与主终端建立了连接，启动报文接收线程receivedThread()，就可以不断通过UDP协议接收数据包，并对数据包进行处理。例如子终端1、子终端2、子终端3初始化本地网络socket，并与主终端建立了连接，则主终端可以在局域网内广播数据包，子终端1、子终端2、子终端3就可以接收到数据包，并对数据包进行处理。
步骤708、子终端接收主终端发送的数据包后，对数据包进行解析，获得数据包类型。
需要说明的是，当子终端接收了主终端发送的数据包后，就可以对数据包进行解析，获得数据包类型，例如当子终端接收到主终端发送的数据包后，可根据数据包中的鼠标起始坐标以及鼠标终点坐标，确定所述数据包是鼠标移动数据包。
步骤709、子终端根据数据包类型，进行与数据包类型对应的接口设备操作。
这里，当子终端确定了数据包类型后，就可以根据数据包类型进行相应的接口设备操作，从而实现主终端对子终端的控制。例如，当子终端确定数据包是鼠标移动数据包后，首先获取主终端的屏幕分辨率，将所述子终端的屏幕分辨率与所述主终端的屏幕分辨率统一，使得所述子终端的屏幕分辨率与所述主终端的屏幕分辨率相同，根据数据包中鼠标的起始坐标以及终点坐标，使得子终端的鼠标坐标位于所述起始坐标，并将起始坐标到终点坐标的位移按照预设的计算规则，将位移分为几个位移段，使得子终端的鼠标按照位移段进行移动，从而实现主终端对子终端鼠标的控制。
需要说明的是，本发明实施例中的步骤701-709是实现主终端对子终端接口设备的控制过程，步骤710-716是实现主终端将两幅图像进行拼接融合的过程，其步骤710-716与步骤701-709并无先后顺序。
步骤710、主终端获取两幅待处理图像。
需要说明的是，主终端可以通过获取子终端摄像头拍摄的视频流，并通过预设规则获取视频流中的图像序列，主终端可以首先获取相邻子终端同一时间点拍摄的两幅图像，并将所述两幅图像进行拼接，融合为一幅图像，再将融合后的图像与下一子终端同一时间点拍摄的图像进行拼接，依次可以将所有子终端在同一时间点拍摄的图像拼接融合成一个全景图，例如，在课堂上，每个子终端都可以拍摄到一个学生，主终端将获取所有子终端拍摄的图像，并将所有图像进行拼接，融合成一个全景图，全景图中包括课堂上的每一个学生，并将全景图通过投影仪投影到老师的监控界面，这样老师就可以对每个学生的状态进行宏观上的掌控。
步骤711、主终端将所述两幅图像进行图像预处理，获取两幅预处理图像。
这里，所述图像预处理可以包括图像平滑、图像复原、图像增强等图像处理，所述图像平滑是为了消除图像中随机噪声，且在消除噪声的同时不使图像轮廓或线条变得模糊不清；所述图像复原是为了校正由光学系统的像差，相机和物体的相对运动等各种原因所造成的图像退化，使重建或估计得到的图像尽可能逼近于理想无退化的像场，基本的图像复原是把获取的退化图像看成是退化函数和理想图像的卷积，根据退化机理确定退化函数后，就可求出理想图像，也就矫正了图像的退化；所述图像增强是为了对图像中的信息有选择地加强和抑制，以改善图像的视觉效果，或将图像转变为更适合于机器处理的形式，以便于数据抽取或识别，例如一个图像增强系统可以通过高通滤波器来突出图像的轮廓线，从而使机器能够测量轮廓线的形状和周长。通过将图像进行预处理后，可以消除图像中无关的信息，恢复有用的真实信息，增强有关信息的可检测性和最大限度地简化数据，以便后续图像特征抽取、图像匹配和图像拼接等图像处理。
步骤712、主终端通过尺度不变特征转换SIFT算法对预处理图像进行图像特征点提取，获得成对的特征匹配点。
需要说明的是，主终端通过SIFT算法可以实现对预处理图像的特征点提取，并获得成对的特征匹配点。通过SIFT算法处理预处理图像的过程分为五个步骤，首先需要建立一个尺度空间，检测预处理图像中的极值点，也就是通过高斯微分函数建立一个尺度空间，并通过高斯差分所述尺度空间，检测出图像局部极值点；然后去除极值点中的不稳定点，获取特征点，所述不稳定点为不稳定的边缘点和低对比度的极值点；接着确定特征点的方向，也就是统计特征点领域所有的梯度方向直方图，以直方图中最大值作为该关键点的主方向，同时为了提高后续匹配的鲁棒性，将直方图中峰值超过主峰80％的方向作为该特征点的辅方向；然后根据特征点的方向，提取特征点描述符；最后匹配特征点描述符，获取成对的特征匹配点，也就是利用两幅图像的特征点描述符之间的欧氏距离评估特征点之间的相似性程度，可以通过一个预设的阈值进行过滤，从而获得成对的特征匹配点，其中，阈值的设置直接影响到特征匹配点的数量和精确性。
步骤713、主终端通过最邻近算法筛除特征匹配点中的错误的特征匹配点，获得两幅预处理图像的重叠区域。
这里，通过SIFT算法获取的成对的特征匹配点可能存在一些错误的特征匹配点，为了使得特征匹配点的精确性更高，需要通过最邻近算法去除特征匹配点中的错误的特征匹配点，从而获得两幅图像的重叠区域。所述最邻近算法是通过计算特征匹配点之间的相似度，若相似度达到预设的阈值，则确定特征匹配点不是错误的特征匹配点，否则确定特征匹配点是错误的特征匹配点，并将错误的特征匹配点去除。其中，通过去除错误的特征匹配点，获取的重叠区域近似于一个平面或者对应的相机光心近乎重叠，使得在进行图像拼接时，不会出现重影或者图像不对齐的现象。
步骤714、主终端通过AlphaBeta剪枝算法获取所述重叠区域的割线。
需要说明的是，AlphaBeta剪枝算法可应用于视频图像的拼接，通过获取重叠区域的割点，将所述割点依次连接起来，从而形成一条割线。
步骤715、主终端根据所述割线，将两幅图像拼接为一副拼接图像；其中，所述拼接图像包括拼接痕迹。
这里，主终端通过AlphaBeta剪枝算法获取了所述重叠区域的最优后，可根据所述割线，将两幅预处理图像分为左右或上下两侧，并将分割后的图像拼接为一副拼接图像。例如，两幅图像A和B的重叠区域的割线是l，利用割线l将图像A分为图像A1和A2，将图像B分为图像B1和B2，则将图像A1和图像B2绘制在一副全局图中，从而完成两幅图像的拼接。
步骤716、主终端利用缩放式渐进渐出融合算法融合拼接图像上的拼接痕迹。
需要说明的是，将两幅图像拼接为一副拼接图像后，拼接图像中可能存在明显的拼接痕迹，为了消除拼接痕迹，需要对拼接图像进行融合处理，本发明实施例通过缩放式渐进渐出融合算法来解决拼接痕迹问题。所述缩放式渐进渐出融合算法是按照预设的缩放比例，缩放拼接痕迹左右两侧的图像，从而消除拼接痕迹。举例说明，主终端获取了两幅大楼图像，如图8所示，图8中左边的大楼和图8右边的大楼是两个终端在同一时间点获取的两幅待处理图像，通过所述步骤711-716所述的方法，将两幅大楼图像进行拼接融合，得到图9所示的一副没有拼接痕迹的大楼融合图像。
本发明实施例提供了一种视频监控方法，首先获取两幅待处理图像；对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；通过第三预设算法获取所述重叠区域的割线；根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。从而通过拼接终端拍摄的视频序列，并解决拼接图像中出现的拼接痕迹问题，实现实时视频拼接，还可以控制子终端的接口设备，便于用户之间的沟通。
实施例四
基于前述实施例相同的发明构思，参见图10，其示出了本发明实施例提供的一种视频监控装置100的组成，包括：第一获取单元1001、第一处理单元1002、提取单元1003、筛除单元1004、第二获取单元1005和融合单元1006；其中，
所述第一获取单元1001，配置为获取两幅待处理图像；
所述第一处理单元1002，配置为对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；
所述提取单元1003，配置为通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；
所述筛除单元1004，配置为通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；
所述第二获取单元1005，配置为通过第三预设算法获取所述重叠区域的割线；
所述融合单元1006，配置为根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。
示例性地，所述第一处理单元1002，配置为：
对所述两幅待处理图像分别进行图像平滑，消除所述两幅待处理图像中的随机噪声，获得两幅第一预处理图像；
对所述两幅第一预设图像分别进行图像复原，校正所述两幅第一预设图像中的图像退化，获得两幅第二预处理图像；
对所述两幅第二预设图像分别进行图像增强，增强所述两幅第二预设图像中的图像边缘，获得两幅第三预处理图像。
相应地，所述提取单元1003，配置为：
通过SIFT算法对所述两幅预处理图像分别进行图像特征点提取，获得各预处理图像的图像特征点；
对所述两幅预处理图像的图像特征点进行相似度评估，获得成对的特征匹配点。
可选地，所述筛除单元1004，配置为：
通过最邻近算法筛除所述特征匹配点中的错误的特征匹配点，获得所述两幅预处理图像的重叠区域。
示例性地，所述第二获取单元1005，配置为：
通过AlphaBeta剪枝算法获取所述重叠区域的割点；
将所述割点按预设连接顺序进行连接，获得所述重叠区域的割线。
相应地，所述融合单元1006，配置为：
根据所述割线，将所述两幅预处理图像拼接为一副拼接图像；
通过第四预设算法融合所述拼接图像上的拼接痕迹，获得融合后的图像。
相应地，所述融合单元1006，配置为：
通过缩放式渐进渐出融合算法按照预设的缩放比例，缩放所述拼接图像上的拼接痕迹两侧的图像，融合所述拼接痕迹，获取融合后的图像。
示例性地，所述装置1000还包括：监听单元1007、连接单元1008、第一接收单元1009、第三获取单元1010、打包单元1011和第一发送单元1012；其中，
所述监听单元1007，配置为初始化所述装置100的网络socket，监听连接请求；
所述连接单元1008，配置为监听到所述子终端发送的连接请求，建立与所述子终端的连接；
所述第一接收单元1009，配置为接收所述子终端发送的接管报文；其中，所述接管报文用于指示所述装置100接管所述子终端；
所述第三获取单元1010，配置为根据所述接管报文，获取所述装置100的接口设备事件；其中，所述接口设备事件包括鼠标事件或键盘事件；
所述打包单元1011，配置为将所述接口设备事件进行打包，生成数据包；
所述第一发送单元1012，配置为向所述子终端发送所述数据包。
在本实施例中的各组成部分可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。
所述集成的单元如果以软件功能模块的形式实现并非作为独立的产品进行销售或使用时，可以存储在一个计算机可读取存储介质中，基于这样的理解，本实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或processor(处理器)执行本实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
因此，本实施例提供了一种计算机存储介质，该计算机存储介质存储有视频监控的程序，所述视频监控的程序被至少一个处理器执行时实现上述实施例一所述的视频监控方法的步骤。
基于上述视频监控装置100以及计算机存储介质，参见图11，其示出了本发明实施例提供的一种视频监控装置100的具体硬件结构，包括：第一网络接口1101、第一存储器1102和第一处理器1103；各个组件通过总线系统1104耦合在一起。可理解，总线系统1104用于实现这些组件之间的连接通信。总线系统1104除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图11中将各种总线都标为总线系统1104。其中，
其中，所述第一网络接口1101，用于在与其他外部网元之间进行收发信息过程中，信号的接收和发送；
第一存储器1102，用于存储能够在第一处理器1103上运行的计算机程序；
第一处理器1103，用于在运行所述计算机程序时，执行：
获取两幅待处理图像；
对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；
通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；
通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；
通过第三预设算法获取所述重叠区域的割线；
根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。
事例性地，所述第一处理器1103，还执行：
初始化所述主终端的网络socket，监听连接请求；
监听到所述子终端发送的连接请求，建立与所述子终端的连接；
接收所述子终端发送的接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
根据所述接管报文，获取所述主终端的接口设备事件；其中，所述接口设备事件包括鼠标事件或键盘事件；
将所述接口设备事件进行打包，生成数据包；
向所述子终端发送所述数据包。
可以理解，本发明实施例中的第一存储器1102可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double DataRate SDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM，SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM，DRRAM)。本文描述的系统和方法的第一存储器1102旨在包括但不限于这些和任意其它适合类型的存储器。
而第一处理器1103可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过第一处理器1103中的硬件的集成逻辑电路或者软件形式的指令完成。上述的第一处理器1103可以是通用处理器、数字信号处理器(Digital SignalProcessor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于第一存储器1102，第一处理器1103读取第一存储器1102中的信息，结合其硬件完成上述方法的步骤。
可以理解的是，本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现，处理单元可以实现在一个或多个专用集成电路(ApplicationSpecific Integrated Circuits，ASIC)、数字信号处理器(Digital Signal Processing，DSP)、数字信号处理设备(DSP Device，DSPD)、可编程逻辑设备(Programmable LogicDevice，PLD)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
对于软件实现，可通过执行本文所述功能的模块(例如过程、函数等)来实现本文所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
具体来说，视频监控装置100中的第一处理器1103还配置为运行计算机程序时，执行前述实施例一中所述的方法步骤，这里不再进行赘述。
实施例五
基于前述实施例相同的发明构思，参见图12，其示出了本发明实施例提供的一种视频监控装置120的组成，包括：第二发送单元1201、第三发送单元1202、第二接收单元1203、第四获取单元1204、第二处理单元1205；其中，
所述第二发送单元1201，配置为初始化所述装置120的网络socket，向主终端发送连接请求；
所述第三发送单元1202，配置为向所述主终端发送接管报文；其中，所述接管报文用于指示所述主终端接管所述装置120；
所述第二接收单元1203，配置为接收所述主终端发送的数据包；
所述第四获取单元1204，配置为对所述数据包进行解析，获得所述数据包类型；其中，所述数据包类型包括接口设备事件
所述第二处理单元1205，配置为根据所述数据包类型，进行与所述数据包类型对应的接口设备操作。
另外，本实施例提供了一种计算机存储介质，该计算机存储介质存储有视频监控的程序，所述视频监控的程序被至少一个处理器执行时实现上述实施例一所述的视频监控方法的步骤。针对计算机存储介质的具体阐述，参见实施例四中的说明，在此不再赘述。
基于上述视频监控装置120以及计算机存储介质，参见图13，其示出了本发明实施例提供的一种视频监控装置120的具体硬件结构，包括：第二网络接口1301、第二存储器1302和第二处理器1303；各个组件通过总线系统1304耦合在一起。可理解，总线系统1304用于实现这些组件之间的连接通信。总线系统1304除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图13中将各种总线都标为总线系统1304。其中，
其中，所述第二网络接口1301，用于在与其他外部网元之间进行收发信息过程中，信号的接收和发送；
第二存储器1302，用于存储能够在第二处理器1303上运行的计算机程序；
第二处理器1303，用于在运行所述计算机程序时，执行：
初始化所述子终端的网络socket，向主终端发送连接请求；
向所述主终端发送接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
接收所述主终端发送的数据包；
对所述数据包进行解析，获得所述数据包类型；其中，所述数据包类型包括接口设备事件；
根据所述数据包类型，进行与所述数据包类型对应的接口设备操作。
可以理解地，本实施例中视频监控装置120的具体硬件结构中的组成部分，与实施例四中的相应部分类似，在此不做赘述。
具体来说，视频监控装置120中的第二处理器1303，还配置为运行所述计算机程序时，执行前述实施例二中所述的方法步骤，这里不再进行赘述。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。
应理解，说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外，这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。应理解，在本发明的各种实施例中，上述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
在本申请所提供的几个实施例中，应该理解到，所揭露的方法和装置，可以通过其它的方式实现。以上所描述的终端实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。

Claims (15)

1.一种视频监控方法，其特征在于，所述方法应用于主终端，所述方法包括：
获取两幅待处理图像；
对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；
通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；
通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；
通过第三预设算法获取所述重叠区域的割线；
根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。
2.根据权利要求1所述的方法，其特征在于，所述对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像，包括：
对所述两幅待处理图像分别进行图像平滑，消除所述两幅待处理图像中的随机噪声，获得两幅第一预处理图像；
对所述两幅第一预设图像分别进行图像复原，校正所述两幅第一预设图像中的图像退化，获得两幅第二预处理图像；
对所述两幅第二预设图像分别进行图像增强，增强所述两幅第二预设图像中的图像边缘，获得两幅第三预处理图像。
3.根据权利要求1或2所述的方法，其特征在于，所述通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点，包括：
通过SIFT算法对所述两幅预处理图像分别进行图像特征点提取，获得各预处理图像的图像特征点；
对所述两幅预处理图像的图像特征点进行相似度评估，获得成对的特征匹配点。
4.根据权利要求1所述的方法，其特征在于，所述通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域，包括：
通过最邻近算法筛除所述特征匹配点中的错误的特征匹配点，获得所述两幅预处理图像的重叠区域。
5.根据权利要求1所述的方法，其特征在于，所述通过第三预设算法获取所述重叠区域的割线，包括：
通过AlphaBeta剪枝算法获取所述重叠区域的割点；
将所述割点按预设连接顺序进行连接，获得所述重叠区域的割线。
6.根据权利要求1所述的方法，其特征在于，所述根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像，包括：
根据所述割线，将所述两幅预处理图像拼接为一副拼接图像；
通过第四预设算法融合所述拼接图像上的拼接痕迹，获得融合后的图像。
7.根据权利要求6所述的方法，其特征在于，所述通过第四预设算法融合所述拼接图像上的拼接痕迹，获得融合后的图像，包括：
通过缩放式渐进渐出融合算法按照预设的缩放比例，缩放所述拼接图像上的拼接痕迹两侧的图像，融合所述拼接痕迹，获取融合后的图像。
8.根据权利要求1-7任一项所述的方法，其特征在于，所述方法还包括：
初始化所述主终端的网络socket，监听连接请求；
监听到所述子终端发送的连接请求，建立与所述子终端的连接；
接收所述子终端发送的接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
根据所述接管报文，获取所述主终端的接口设备事件；其中，所述接口设备事件包括鼠标事件或键盘事件；
将所述接口设备事件进行打包，生成数据包；
向所述子终端发送所述数据包。
9.一种视频监控方法，其特征在于，所述方法应用于子终端，所述方法包括：
初始化所述子终端的网络socket，向主终端发送连接请求；
向所述主终端发送接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
接收所述主终端发送的数据包；
对所述数据包进行解析，获得所述数据包类型；其中，所述数据包类型包括接口设备事件；
根据所述数据包类型，进行与所述数据包类型对应的接口设备操作。
10.一种视频监控装置，其特征在于，所述装置包括：
第一获取单元，配置为获取两幅待处理图像；
第一处理单元，配置为对所述两幅待处理图像分别进行图像预处理，以获取两幅预处理图像；
提取单元，配置为通过第一预设算法对所述两幅预处理图像进行图像特征点提取，获得成对的特征匹配点；
筛除单元，配置为通过第二预设算法筛除所述特征匹配点中错误的特征匹配点，获得所述两幅预处理图像的重叠区域；
第二获取单元，配置为通过第三预设算法获取所述重叠区域的割线；
融合单元，配置为根据所述割线，将所述两幅预处理图像进行融合，获得融合后的图像。
11.根据权利要求10所述的装置，其特征在于，所述装置还包括：
监听单元，配置为初始化所述主终端的网络socket，监听连接请求；
连接单元，配置为监听到所述子终端发送的连接请求，建立与所述子终端的连接；
第一接收单元，配置为接收所述子终端发送的接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
第三获取单元，配置为根据所述接管报文，获取所述主终端的接口设备事件；其中，所述接口设备事件包括鼠标事件或键盘事件；
打包单元，配置为将所述接口设备事件进行打包，生成数据包；
第一发送单元，配置为向所述子终端发送所述数据包。
12.一种视频监控装置，其特征在于，所述装置包括：
第二发送单元，配置为初始化所述子终端的网络socket，向主终端发送连接请求；
第三发送单元，配置为向所述主终端发送接管报文；其中，所述接管报文用于指示所述主终端接管所述子终端；
第二接收单元，配置为接收所述主终端发送的数据包；
第四获取单元，配置为对所述数据包进行解析，获得所述数据包类型；其中，所述数据包类型包括接口设备事件
第二处理单元，配置为根据所述数据包类型，进行与所述数据包类型对应的接口设备操作。
13.一种终端，其特征在于，所述终端包括第一通信总线、第一存储器和第一处理器；其中，
所述第一网络接口，配置为实现组件之间的连接通信；
所述第一存储器，配置为存储能够在所述处理器上运行的计算机程序；
所述第一处理器，配置为在运行所述计算机程序时，执行权利要求1至8任一项所述视频监控方法的步骤。
14.一种终端，其特征在于，所述终端包括第二通信总线、第二存储器和第二处理器；其中，
所述第二网络接口，配置为实现组件之间的连接通信；
所述第二存储器，配置为存储能够在所述处理器上运行的计算机程序；
所述第二处理器，配置为在运行所述计算机程序时，执行权利要求9至12任一项所述视频监控方法的步骤。
15.一种计算机存储介质，其特征在于，所述计算机存储介质存储有视频监控程序，当所述视频监控程序被至少一个处理器执行时实现如权利要求1至8中任一项所述的视频监控方法的步骤或者实现如权利要求9所述的视频监控方法的步骤。
CN201810816449.3A 2018-07-24 2018-07-24 一种视频监控方法、设备、终端及计算机存储介质 Expired - Fee Related CN109104588B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810816449.3A CN109104588B (zh) 2018-07-24 2018-07-24 一种视频监控方法、设备、终端及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810816449.3A CN109104588B (zh) 2018-07-24 2018-07-24 一种视频监控方法、设备、终端及计算机存储介质

Publications (2)

Publication Number Publication Date
CN109104588A true CN109104588A (zh) 2018-12-28
CN109104588B CN109104588B (zh) 2020-01-14

Family

ID=64847178

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810816449.3A Expired - Fee Related CN109104588B (zh) 2018-07-24 2018-07-24 一种视频监控方法、设备、终端及计算机存储介质

Country Status (1)

Country Link
CN (1) CN109104588B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111314655A (zh) * 2018-12-11 2020-06-19 晶睿通讯股份有限公司 图像拼接方法及其监控摄像装置
CN113810665A (zh) * 2021-09-17 2021-12-17 北京百度网讯科技有限公司 视频处理方法、装置、设备、存储介质及产品
CN114520875A (zh) * 2022-01-28 2022-05-20 西安维沃软件技术有限公司 视频处理方法、装置及电子设备
CN115063661A (zh) * 2022-08-15 2022-09-16 广州思涵信息科技有限公司 一种智慧教学空间下的多源图像融合方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104570967A (zh) * 2013-10-17 2015-04-29 北大方正集团有限公司 基于Android系统的远程控制方法及系统
CN104881671A (zh) * 2015-05-21 2015-09-02 电子科技大学 一种基于2D-Gabor的高分遥感影像局部特征提取方法
CN105279735A (zh) * 2015-11-20 2016-01-27 沈阳东软医疗系统有限公司 一种图像拼接的融合方法、装置及设备
CN105959620A (zh) * 2016-04-25 2016-09-21 北京大国慧谷科技股份有限公司 一种全景视频的同步显示方法及设备
CN106034202A (zh) * 2015-03-10 2016-10-19 杭州海康威视数字技术股份有限公司 视频拼接摄像头的调整方法及其装置
CN106067180A (zh) * 2015-04-17 2016-11-02 想象技术有限公司 图像合成
CN106776057A (zh) * 2016-11-22 2017-05-31 北京云知声信息技术有限公司 事件处理方法及装置
CN106924961A (zh) * 2017-04-01 2017-07-07 哈尔滨工业大学 一种智能象棋对弈控制方法及系统
CN106954029A (zh) * 2017-02-24 2017-07-14 中国水利水电科学研究院 一种全景视频拼接方法及系统
CN107580228A (zh) * 2017-09-15 2018-01-12 赵立峰 一种监控视频处理方法、装置及设备

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104570967A (zh) * 2013-10-17 2015-04-29 北大方正集团有限公司 基于Android系统的远程控制方法及系统
CN106034202A (zh) * 2015-03-10 2016-10-19 杭州海康威视数字技术股份有限公司 视频拼接摄像头的调整方法及其装置
CN106067180A (zh) * 2015-04-17 2016-11-02 想象技术有限公司 图像合成
CN104881671A (zh) * 2015-05-21 2015-09-02 电子科技大学 一种基于2D-Gabor的高分遥感影像局部特征提取方法
CN105279735A (zh) * 2015-11-20 2016-01-27 沈阳东软医疗系统有限公司 一种图像拼接的融合方法、装置及设备
CN105959620A (zh) * 2016-04-25 2016-09-21 北京大国慧谷科技股份有限公司 一种全景视频的同步显示方法及设备
CN106776057A (zh) * 2016-11-22 2017-05-31 北京云知声信息技术有限公司 事件处理方法及装置
CN106954029A (zh) * 2017-02-24 2017-07-14 中国水利水电科学研究院 一种全景视频拼接方法及系统
CN106924961A (zh) * 2017-04-01 2017-07-07 哈尔滨工业大学 一种智能象棋对弈控制方法及系统
CN107580228A (zh) * 2017-09-15 2018-01-12 赵立峰 一种监控视频处理方法、装置及设备

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111314655A (zh) * 2018-12-11 2020-06-19 晶睿通讯股份有限公司 图像拼接方法及其监控摄像装置
CN113810665A (zh) * 2021-09-17 2021-12-17 北京百度网讯科技有限公司 视频处理方法、装置、设备、存储介质及产品
CN114520875A (zh) * 2022-01-28 2022-05-20 西安维沃软件技术有限公司 视频处理方法、装置及电子设备
CN114520875B (zh) * 2022-01-28 2024-04-02 西安维沃软件技术有限公司 视频处理方法、装置及电子设备
CN115063661A (zh) * 2022-08-15 2022-09-16 广州思涵信息科技有限公司 一种智慧教学空间下的多源图像融合方法

Also Published As

Publication number Publication date
CN109104588B (zh) 2020-01-14

Similar Documents

Publication Publication Date Title
CN109104588B (zh) 一种视频监控方法、设备、终端及计算机存储介质
Ma et al. Stage-wise salient object detection in 360 omnidirectional image via object-level semantical saliency ranking
US20230132407A1 (en) Method and device of video virtual background image processing and computer apparatus
CN109166156B (zh) 一种摄像头标定图像的生成方法、移动终端及存储介质
CN109257559A (zh) 一种全景视频会议的图像显示方法、装置及视频会议系统
CN112543343B (zh) 基于连麦直播的直播画面处理方法、装置及电子设备
US20210374972A1 (en) Panoramic video data processing method, terminal, and storage medium
CN113807451B (zh) 全景图像特征点匹配模型的训练方法、装置以及服务器
CN109525786B (zh) 视频处理方法、装置、终端设备及存储介质
EP4060980A1 (en) Method and device for generating vehicle panoramic surround view image
WO2019214321A1 (zh) 车辆损伤识别的处理方法、处理设备、客户端及服务器
WO2016045381A1 (zh) 呈现图像的方法、终端设备和服务器
US10987198B2 (en) Image simulation method for orthodontics and image simulation device thereof
CN111383204A (zh) 视频图像融合方法、融合装置、全景监控系统及存储介质
CN109982054A (zh) 一种基于定位追踪的投影方法、装置、投影仪及投影系统
CN112712487A (zh) 一种场景视频融合方法、系统、电子设备及存储介质
CN111325107A (zh) 检测模型训练方法、装置、电子设备和可读存储介质
CN111738769A (zh) 视频处理方法及装置
CN114616586A (zh) 图像标注方法、装置、电子设备及计算机可读存储介质
CN116543014A (zh) 一种融合全景的教师自动跟踪方法及系统
US10282633B2 (en) Cross-asset media analysis and processing
CN107633498B (zh) 图像暗态增强方法、装置及电子设备
CN108574808B (zh) 一种图像拼接方法、装置及图像处理系统
CN106131498A (zh) 全景视频拼接方法及装置
CN115311472A (zh) 一种动作捕捉方法及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200114

Termination date: 20210724