CN101110951A

CN101110951A - 视频监控系统的通信插件的动态加载方法

Info

Publication number: CN101110951A
Application number: CNA2007100256164A
Authority: CN
Inventors: 余海腾; 赵峰; 汪海林; 徐进; 杨富强; 汪敏; 史亮
Original assignee: Nanjing Lianchuang Network Science & Technology Co Ltd
Current assignee: Nanjing Lianchuang Network Science & Technology Co Ltd
Priority date: 2007-08-08
Filing date: 2007-08-08
Publication date: 2008-01-23

Abstract

视频监控系统的通信插件的动态加载方法，在CU端动态加载插件软件，CU通过IE进入视频监控软件系统的管理平台页面，选择某PU后，页面通过鼠标双击或拖曳方式，将相应的请求通过HTML方式提交到后台；后台通过提交的参数来识别出相应的前端设备，通过PuServer来实现与PU的通信，同时将相关的返回信息返回给CU插件，页面通过调用插件的相关方法，来实现视频的基本控制和实时浏览；CU插件软件对各个厂商的解码插件进行兼容。通过CMS平台的过渡来识别各个厂商，通知CU端，实现对各个厂商插件的动态加载；采用PuServer动态加载插件方法，实现统一的接口，完成与编码器的通信和指令的发送。

Description

视频监控系统的通信插件的动态加载方法

一、技术领域

本发明涉及视频监控的方法，尤其是视频监控中通信插件的动态加载方法。

二、背景技术

插件的动态加载方法是指用ActiveX技术将特定的控件程序(ocx、dll)加载到相应的程序或者网页中，并暴露相应的接口或方法，使对应的主程序或者网页能够调用到控件程序的接口或者方法。ActiveX控件是可以作为Web页组成部分的特殊计算机程序。用户查看含有这种控件的WEB页时，他所连接的服务器计算机就自动将该控件送给用户，用户自己的浏览器就可以运行这个控件。这样就使得WEB开发人员能在其WEB页中加入可执行的内容。(ActiveX技术在WEB页上的应用，《计算机与信息技术》2006年11期，解放军炮兵学院)

如今的通讯插件林林总总，使用最多的要算是近几年比较热门的GIS通讯插件了。GIS通讯插件的定义是用C或C++语言编写.4·2·2ActiveX控件法客户端ActiveX型的WebGISPlug-Ins型的WebGIS在技术上基本一样，客户端应用执行期间由ActiveX控件直接与Web服务器通讯。(基于MapX的WebGIS的设计与实现，《矿山测量》，2004年薛华柱，张大永，王宝山)GIS通讯插件虽然给人们带来了好处，但是研发人员在开发时如果采用多控件加载这种方案必然遇到空间数据量大、网络传输慢的瓶颈问题。(互联网时代的WebGIS开发，《GIS论文》2004年9期，林志贤，林宏基)

又如CN1410909互联网关键字的解析方法及系统，提供了一种利用浏览器插件实现互联网关键字的解析方法及系统，适用于IE、Netscape等各种版本的浏览器。其过程为：在该插件运行后建立系统级CBT Hook，进入每个Windows运行进程；截获用户点击输入框的聚焦事件；判断此输入框是否为浏览器的地址栏；如果此输入框是浏览器的地址栏，则为该程序进程建立线程级Keyboard Hook，并将该输入框子类化，监视键盘回车的输入；当用户在此浏览器地址栏输入信息串并回车，通过Keyboard Hook将所述信息串截获；判断该信息串是否为互联网关键字形式；如果是互联网关键字形式，则将该信息串发送给后端的互联网关键字解析服务器；所述解析服务器解析该信息串，得到对应的URL结果，并将该URL结果返回；将URL结果及控制权交还给用户浏览器。

由于网络上流媒体的通讯插件各种各样，流媒体的插件也各种各样，因此这就要求软件厂家必须能够设计出一个统一的播放器，而且必须能够对所有的流媒体进行统一的控制。另外，实时流的稳定性在流媒体插件的设计中也是比较关键的环节。

目前大多数的视频监控系统都是传统的C/S结构模型，而且系统只能支持该平台厂商的前端设备，这就在跨域或跨平台的应用上有很大的难度，同样也给总体的管理带来了很大的难度.针对这种需求。

三、发明内容

本发明目的是：提出一种中间通信过程通过动态加载插件的方法来兼容各个厂商的设备.解决了长期以来传统视频监控的难以解决的问题。

本发明的技术方案是：视频监控系统的通信插件的动态加载方法，在CU端动态加载插件软件，CU通过IE进入本发明的视频监控软件系统(全球眼)的管理平台页面，选择某PU后，页面通过鼠标双击或拖曳方式，将相应的请求通过HTML方式提交到后台.后台通过提交的参数来识别出相应的前端设备，通过PuServer来实现与PU的通信，同时将相关的返回信息返回给CU插件，页面通过调用插件的相关方法，来实现视频的基本控制和实时浏览.CU插件软件技术：对各个厂商的解码插件进行兼容.通过CMS平台的过渡来识别各个厂商，通知CU端，实现对各个厂商插件的动态加载；采用PuServer动态加载插件技术：PuServer为中心管理平台CMS上的一个管理程序，主要实现对各家编码器的插件集合，实现统一的接口，完成与编码器的通信和指令的发送。PuServer动态加载插件方法是：PuServer内部通过一个HashMap来维护对插件的动态加载：使用抽象工厂模式，各个厂商的设备作为提供者，视频控制、云镜控制、告警控制、参数配置作为提供者所提供的产品，，通过统一的接口调用不同厂商的通信插件，而插作也分为实时视频，云台控制，参数设置，告警处理模块；根据数据库中的PUID(厂商设备型号)来识别不同的厂商，并将相应的厂商插件动态载入，实现与PU的通信和控制；实现与各个厂商PU通信的插件.PuServer通过最底层的协议直接与PU通信。

定义：用户管理端CU；中心管理平台CMS；前端编码器PU；管理PU服务程序PuServer。

主要数据结构实现：

1.如何在客户端实现各个厂商的视频的监控显示，

2.如何兼容各个厂商的设备，并实现与前端的通信，

由于视频监控没有统一的标准，所以各个编码器厂商的通信协议各不相同，码流格式也不一样.如何在统一平台上实现对它们的管理.

因为平台采取B/S的结构模型.没有传统视频监控所谓的客户端.视频监控采取Windows自带的IE进行总体的管理和实时查看.那怎样在客户端实现对各个厂商的视频流的监控和解码显示.。

功能描述：

动态载入插件技术在本系统中主要体现在两个方面

CU端插件与页面的相应接口定义

插件的工作流程(见图1)

基本接口定义

开始视频接口

函数原型：void openVideo(LPCTSTR url)

功能：通过页面传入参数，开始实时视频的播放

输入参数：输入字符串格式

net/type/ip/port/channel/wnd_flag；

net:实时流播放标志.目前都为Net，也可以传入file为本地播放标志

type:udp和tcp，数据传输方式，目前支持udp的数据传输

ip:对于udp方式，为接收端的IP，一般为本机的IP，有防火墙的为出口IP

port:接收数据流的端口，有防火墙的为打通得到的端口

channel:播放的通道号

wnd_flag:预留位，对一些厂商可能为播放序号，对一些可能为视频切换的初始序号返回值：此函数无返回值.

停止视频接口

函数原型：short stopVideo(int wnd_flag)

功能：通过页面传入参数，停止实时视频的播放

输入参数：wnd_flag:当前窗口的播放序号.一般从0开始递增

返回值：成功返回0，失败返回-1

视频抓拍接口

函数原型：void snapShot()

功能：页面调用此函数实现视频的抓拍

输入参数：无；返回值：无返回值

本地存储接口

函数原型：void localSave()

功能：视频播放时，调用此函数实现本地存储

输入参数：无；返回值：无；

停止存储接口

函数原型：void stopRec()

功能：本地存储后，调用此函数停止本地存储

输入参数：无；返回值：无。

本地文件回放接口

函数原型：short localFilePlay()

功能：页面调用此函数，实现本地文件的选择回放

输入参数：无；返回值：成功返回0，失败返同-1

停止回放接口

函数原型：short localFilePlayStop()

功能：页面调用此函数，停止本地文件的回放

输入参数：无；返回值：成功返回0，失败返回-1

前端回放播放接口

函数原型：short remoteFilePlay(LPCTSTR puIp，long puPort，LPCTSTR usemame，LPCTSTR passwd，short chid，long filesize，short driver，shortstartDrv，LPCTSTR startTime，LPCTSTR stopTime)

功能：页面调用此函数，开始远程文件文件的回放

输入参数：puIP:PU IP地址，puPort:PU通信端口，usemame:PU登陆用户名，

passwd:PU登陆密码，chid:通道号，filesize:文件大小，driver:通道号(无传入0)，startDrv:起始通道号，startTime:录像起始时间，stopTime:录像结束时间

(以上参数可以通过查询录像得到)；

返回值：成功返回0，失败返回-1。

前端回放停止接口

函数原型：void remoteFileStop()

功能：页面调用此函数，开始回放的停止

输入参数：无；返回值：无

前端回放快放接口

函数原型：void remoteFileFast()

功能：页面调用此函数，开始回放的加速播放

输入参数：无；返回值：无

前端回放慢放接口

函数原型：void remoteFileSlow()

功能：页面调用此函数，开始回放的慢速播放

输入参数：无；返同值：无

前端回放按帧播放接口

函数原型：void remoteFileStep()

功能：页面调用此函数，开始回放的按帧播放

输入参数：无；返同值：无

前端回放暂停接口

函数原型：void remoteFilePause()

功能：页面调用此函数，开始回放的暂停播放

输入参数：无；返回值：无

事件接口

控件选择事件

事件原型：void Click()

功能：页面捕捉该事件，实现视频窗口的控制.

输入参数：无；返同值：无

视频切换事件

事件原型：void changeVideoEvent()

功能：页面捕捉该事件，实现视频播放之间的切换.

输入参数：无；返回值：无

视频轮寻事件

事件原型：void LoopViewEvent()

功能：页面捕捉该事件，实现视频的轮寻.

输入参数：无；返回值：无

移动侦测事件

事件原型：void MoveShowEvent()

功能：页面捕捉该事件，实现对当前播放窗口的某一个区域实现选定，并将相应数据设置到编码器，实现该区域内的移动侦测，触发相应告警联动.

输入参数：无；返回值：无

菜单的设计

控件支持右键菜单，并且已经和接口函数关联，菜单样式如下(见图2)

双击消息的响应

加入对鼠标双击信息的响应，双击状态下，控件可以全屏显示，全屏状态下，返回原始大小.同时在控件内部响应OnSize消息，可以根据外部包容器的大小来动态改变控件的显示大小

PuServer动态加载插件方法

功能描述：PuServer是一个实现与各个厂商PU通信的插件.PuServer通过最底层的协议直接与PU通信.根据数据库中的PUID(厂商设备型号)来识别不同的厂商，并将相应的厂商插件动态载入，实现与PU的通信和控制.包括视频的浏览，控制，告警处理，前端设备的管理.

PuServer内部通过一个HashMap来维护对插件的动态加载：使用抽象工厂模式，各个厂商的设备作为提供者，视频控制、云镜控制、告警控制、参数配置作为提供者所提供的产品，具体关系原型如图5，通过统一的接口调用不同厂商的通信插件，而插件也分为实时视频，云台控制，参数设置，告警处理等模块，具体的业务分析图如图6所示。

视频控制相关接口

启动实时视频

@param map Map参数集合

@throws PuException触发PU异常

public void startVideo(Map map)throws PuException；

关闭实时视频

@param map Map参数集合

@throws PuException触发PU异常

public void closeVideo(Map map)throws PuException；

获取申请视频流的URL

@param map Map存放URL中的IP和Port

@return String返回申请视频流的URL

public String getURL(Map map)；

获取RTSP协议传输视频时的服务IP和Port

@return Map返回RTSP服务的IP和Port集合

public Map getRtspServerInfo()；

进行编码器录像

@param map Map参数集合

@throws PuException触发PU异常

public void saveVideo(Map map)throws PuException；

进行编码器录像文件列表的获得

@param map Map参数集合

@throws PuException触发PU异常

public List getPuVideoFileList(Map map)throws PuException；

进行编码器录像文件的获得

@param map Map参数集合

@throws PuException触发PU异常

public boolean getPuVideoFile(Map map)throws PuException；

有益效果

首先，本发明使用AtiveX控件开发关于流媒体方面的通讯插件。由于申请人研发的插件要求能够播放不同编码器发送过来的不同流媒体协议的实时流，因此这就要求必须能够研发出一种能够兼容各个厂商协议的统一的播放器插件。所以统一的播放器是本插件的一个优势。其次，优越的插件升级功能是本插件的另一个特色。当每个用户登陆到WEB页面时，插件会匹配用户本机的插件版本和远端服务器的插件版本。如果两个版本不一致的话，新的插件将会被自动地加载。再次，本插件被打包成了exe文件，这样能够方便用户的下载、安装和卸载。现在一般的插件在被网页自动加载的过程中往往会被杀毒软件作为恶意控件而卸载，打成安装包后就不会出现这种问题。最后，本插件具有良好的可扩展性和可操作性。本插件可以作为所有网页的控件进行插入，方便外部研发人员的调用。另外，用户在使用插件时，只需要点选右键菜单按钮即可完成某些复杂的操作。

四、附图说明

图1插件的工作流程

图2菜单样式

图3视频流媒体具体关系原型图

图4是本发明对PUServer涉及业务分析后的关系流程图

五、具体实施方式

(一).数据结构

1.视频播放器接口/**

*载入视频播放器接口

*@param url播放路径

*@param transType传输类型

*@param resType厂商类型*/

//获取LoadPlayerAdaptor类的一个引用

var_p＝PlayTypeAdaptor.prototype；

2.实时视频播放器

function RealTimeAdaptor(){

PlayTypeAdaptor.call(this)；

//获取RealTimeAdaptor类的一个引用

var_p＝RealTimeAdaptor.prototype＝new PlayTypeAdaptor；

//载入播放视频器

obj.resType＝this._resType； //记录该窗口对象播放视频的资源类型

obj.transType＝this._transType； //记录该窗口对象播放视频的传输类型

obj.classId＝id； //记录该窗口对象播放视频的传输类型

obj.recordType＝0； //记录该窗口对象录像类型1-远端NRU，2-本地，3-前端0-没有录像 obj.hikFlag＝1；//0-不是海康，1-是海康

//增加事件驱动

//增加呼叫到心跳

3.视频回放播放器

function PlayBackAdaptor(){

PlayTypeAdaptor.call(this)；

//获取RealTimeAdaptor类的一个引用

//载入播放视频器

obj.hikFlag＝1； //0-不是海康，1-是海康

4.插件适配器接口

//获取PlayerAdaptor类的一个引用

//初试化参数

_p.initialize＝function(id，w，h，url){

_throw(0x0001，″抽象类不能够实例化具体数据″)；

//播放视频

_p.play＝function(){

//停止视频

_p.stop＝function(){

5.Media插件

//获取MediaPlayerAdaptor类的一个引用

var_p＝MediaPlayerAdaptor.prototype＝new PlayerAdaptor；

6.博维时代插件

//获取BrovicPlayerAdaptor类的一个引用

var_p＝BrovicPlayerAdaptor.prototype＝new PlayerAdaptor；

7.海康威视插件

function HikPlayerAdaptor(){

PlayerAdaptor.call(this)；

//获取HikPlayerAdaptor类的一个引用

iChannel＝this.channel；//设备通道号

iWndNumber＝0； //播放窗口数(0代表1窗口，1代表4窗口，2代表9窗口，3代表16窗口)

ArrangeWindow()； //确定画面分割

RealPlay()； //播放方法

8.科达插件

function KedaPlayerAdaptor(){

(二).实施过程

1.客户端执行申请视频动作

2.客户端将前端设备信息发送至servlet，由servlet向调度模块申请视频，调度模块调用PuServer模块的startVideo方法

3.PuServer根据设备资源ID，找到对应该设备类型的驱动，调用该驱动的startVideo方法，完成视频申请过程并向客户端发送视频流，

throw new PuException(″系统找不到该型号视频驱动:PU资源ID″+resTypeId，″600″)；

System.out.println(″资源ID[″+resTypeId+″]与驱动:″+driverClass+ ″匹配！″)；

4.客户端完成视频申请的动作后，根据返回的视频流本地接受url，调用相应厂商的播放插件播放视频流

5.调用实时视频播放类RealTimeAdaptor的实例player的draw()方法，载入特定播放器并绘制播放窗口。

6.draw方法内部调用loadPlayerAdaptor()方法，载入特定厂商特定型号的播放器，并调用play()方法：var adaptor＝loadPlayerAdaptor(this._resType，this._transType)；

//loadPlayerAdaptor方法体

//resType:资源类型

//transType:传输类型

注：录像回放流程在插件动态载入技术上与实时视频完全相同，不再赘述

图3是采用抽象工厂模式设计出的系统类图，从图中可以看出，抽象工厂模式涉及到以下的角色。

抽象工厂(AbstractFactory)角色：担任这个角色的是工厂方法模式的核心，它是与应用系统的商业逻辑无关的。通常使用Java接口或抽象Java类实现，而所有的具体工厂类必须实现这个Java接口或继承这个抽象Java类。

具体工厂(ConcreteFactory)角色：这个角色直接在客户端的调用下创建产品的实例。这个角色含有选择合适的产品对象的逻辑，而这个逻辑是与应用系统的商业逻辑紧密相关的。通常使用具体Java类实现这个角色。

抽象产品(AbstractProduct)角色：担任这个角色的类是工厂方法模式所创建对象的父类，或它们共同拥有的接口。通常使用Java接口或抽象Java类实现这一角色。

具体产品(ConcreteProduct)角色：抽象工厂模式所创建的任何产品对象都是某一个具体产品类的实例。这是客户端最终需要的东西，其内部充满了应用系统的商业逻辑。通常使用具体Java类实现这个角色。

图4中Pu、Alarm、Video、Move和Param等接口都是抽象产品类，平台接入的每个厂商的插件包内都有对应的具体产品类来实现这些接口；平台的抽象工厂类为Driver，每个厂商插件包内都有对应的具体工厂类来实现Driver接口。系统根据PUID识别不同厂商，创建该厂商的具体工厂的实例，然后调用工厂对象的工厂方法，就可以得到所需要的产品对象。

Claims

1.视频监控系统的通信插件的动态加载方法，其特征是在CU端动态加载插件软件，CU通过IE进入本发明的视频监控软件系统的管理平台页面，选择某PU后，页面通过鼠标双击或拖曳方式，将相应的请求通过HTML方式提交到后台；后台通过提交的参数来识别出相应的前端设备，通过PuServer来实现与PU的通信，同时将相关的返回信息返回给CU插件，页面通过调用插件的相关方法，来实现视频的基本控制和实时浏览；CU插件软件对各个厂商的解码插件进行兼容，通过CMS平台的过渡来识别各个厂商，通知CU端，实现对各个厂商插件的动态加载；采用PuServer动态加载插件方法：PuServer为中心管理平台CMS上的一个管理程序，主要实现对各家编码器的插件集合，实现统一的接口，完成与编码器的通信和指令的发送。

2.根据权利要求1所述的视频监控系统的通信插件的动态加载方法，其特征是PuServer动态加载插件方法是：PuServer内部通过一个HashMap来维护对插件的动态加载：使用抽象工厂模式，各个厂商的设备作为提供者，视频控制、云镜控制、告警控制、参数配置作为提供者所提供的产品，通过统一的接口调用不同厂商的通信插件，而插件也分为实时视频，云台控制，参数设置，告警处理模块；根据数据库中的厂商设备型号PUID来识别不同的厂商，并将相应的厂商插件动态载入，实现与PU的通信和控制；实现与各个厂商PU通信的插件.PuServer通过最底层的协议直接与PU通信。