CN112468787A - 一种基于视频增强现实技术的桥梁视频监控方法 - Google Patents

一种基于视频增强现实技术的桥梁视频监控方法 Download PDF

Info

Publication number
CN112468787A
CN112468787A CN202011398518.7A CN202011398518A CN112468787A CN 112468787 A CN112468787 A CN 112468787A CN 202011398518 A CN202011398518 A CN 202011398518A CN 112468787 A CN112468787 A CN 112468787A
Authority
CN
China
Prior art keywords
video
label
management
supports
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011398518.7A
Other languages
English (en)
Inventor
黄孙俊
胡晓光
朱辉
吴波
王苏云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JSTI Group Co Ltd
Original Assignee
JSTI Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JSTI Group Co Ltd filed Critical JSTI Group Co Ltd
Priority to CN202011398518.7A priority Critical patent/CN112468787A/zh
Publication of CN112468787A publication Critical patent/CN112468787A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/243Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/296Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/695Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Alarm Systems (AREA)

Abstract

本发明公开了一种基于视频增强现实技术的桥梁视频监控方法,基础功能设计主要包括平台登入、平台锁屏、资源管理、视频管理和标签管理;特色功能设计主要包括静态信息直观展示、动态信息直观展示、实景地图、多点视频联动、危化品车辆全程跟踪录像和收费亭报警视频推送,本发明提出了以AR+AI相融合的技术方案,利用增强现实技术和人工智能分析技术,将高速公路管理者最为关心的各系统数据通过直观、实景化的方式展示,让系统数据与视频数据有效融合,提高高速公路管理科学化、现代化水平,同时利用先进的交通信息化技术,有效提升交通的服务水平和运行效率,实现管理机制与应用模式的创新。

Description

一种基于视频增强现实技术的桥梁视频监控方法
技术领域
本发明涉及视频增强现实技术领域,具体为一种基于视频增强现实技术的桥梁视频监控方法。
背景技术
随着国家经济与基础设施建设的发展,我国公路网逐渐形成,而公路桥梁作为公路工程中的一个重要工程构造物,其安全性的监控,己成为当前所面临解决的问题;
但是传统业务系统在严峻的高速公路形势下暴露出种种弊端,单点监测范围小、监测画面无法兼顾整体与局部,信息孤岛急剧增长,缺乏统一应用、整合和展示的手段,缺乏数据的智能化分析,导致积累的大量数据得不到有效的应用,给高速公路管理部门的业务带来极大的不便。
发明内容
本发明提供一种基于视频增强现实技术的桥梁视频监控方法,可以有效解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种基于视频增强现实技术的桥梁视频监控方法,包括如下实施步骤:
S1、总体方案设计;
S2、基础功能设计;
S3、特色功能设计;
所述S1中,总体方案设计,是将整个系统架构分为五层,分为应用系统层、业务展现层、核心技术层、业务采集层和物理采集层;
所述S2中,基础功能设计主要包括平台登入、平台锁屏、资源管理、视频管理和标签管理;
所述S3中,特色功能设计主要包括静态信息直观展示、动态信息直观展示、实景地图、多点视频联动、危化品车辆全程跟踪录像和收费亭报警视频推送。
基于上述技术方案,所述S1中,应用系统层为基于视频增强现实技术的桥梁综合视频监控系统;
业务展现层包括视频时空数据展现、收费管理应用、服务效率管理、紧急事件报警和重要数据分析;
核心技术层包括AR视频增强现实、视频时空数据、AI人工智能、大数据和数据挖掘机器人;
业务采集层包括监控系统、机电养护系统、资产管理系统、应急管理系统、路政管理系统、保畅工程、工班管理系统、冶超站管理系统、绿通稽查管理系统、隧道视频分析管理系统和建设施工管理系统;
物理采集层包括监控摄像机、人像抓拍机、车辆抓拍机、出入口控制和物联网终端设备。
基于上述技术方案,所述AR视频增强现实是一种实时地计算摄影机影像位置和角度并加上相应的图像技术,这种技术的目标是在屏幕上把虚拟世界叠加到现实世界并进行互动;
所述大数据是指海量摄像机在物理空间多维数据如位置、姿态、可视域等信息的集合以及多个摄像机在物理空间中的关联关系,通过视频空间大数据的研究,计算机系统能够实时、动态的感知摄像机姿态、位置、可视域信息;
所述业务采集层通过高速公路上常用的11个业务系统,系统可以通过数据挖掘机器人,利用兼容现有系统,把这11个业务系统的主要数据接入系统,通过我们的AR增强现实技术,视频时空数据,AI人工智能技术,大数据技术,实现高速公路的路网数据智能化分析,路网运行监测,应急事件处理,从而提高收费管理应用,提升服务效率。
基于上述技术方案,所述平台登入,通过地图为首页展示平台登入窗口,在首页可通过条形化的标签显示系统整体资源情况,包括高点摄像机数量、低点摄像机数量、标签数量、对接系统数、当日报警数和当月报警数,在首页地图上可直观查看高点摄像机的分布,并以动态缩略图的方式显示高点区域的概要,在首页上具备摄像机查询列表,支持以设备树的形式展示监控资源的组织架构;
所述平台锁屏,平台支持在主操作界面进行锁屏,锁屏之后需要输入用户名密码并在权限范围内才能解锁;
所述资源管理包括组织机构的管理、设备资源管理、用户与角色管理、角色权限管理和标签信息管理;
所述组织机构的管理包括添加、删除、修改与查询;
所述设备资源管理包括设备添加、删除、修改与查询;
所述用户与角色管理包括用户添加、修改、删除、查询组织,支持不同用户可以设置所属部门和隶属角色;
所述角色权限管理包括支持根据角色设置功能授权,如视频预览、回放、云台控制、录像下载权限,标签查看权限;
所述标签信息管理包括支持标签的添加、编辑、修改、位置矫正。
基于上述技术方案,所述视频管理包括视频实况、录像回放、视频控制、高点切换、平台抓图和平台抓录;
所述视频实况,通过平台客户端,支持在地图及高点视频中通过点击摄像机图标实现单画面或多画面视频图像实时预览,支持推送重点视频到联动屏实现4、9画面的轮巡播放;
所述录像回放,支持对高点、低点摄像机的录像进行查询,并可以1/4/9画面分割切换方式播放录像,支持录像下载历史图像的检索和回放;
所述视频控制是指平台能够对摄像机视频进行多方位的操作控制,具体包括方向控制、转速控制、缩放控制和3D功能控制;
所述方向控制,使用鼠标点击上下左右等八个按钮控制摄像机云台往相应方向移动;
所述转速控制,使用鼠标拖动尺标控制摄像机云台控制上下左右转动速度的快慢;
所述缩放控制,使用鼠标点击加减按钮控制摄像机缩放图像;
所述3D功能控制,支持在视频画面中可任意选取目标实现居中放大缩小,放大缩小过程中支持瞄准镜特效,支持从左上角到右下角框选,画面根据框选大小情况自动对目标进行放大居中处理,从右下角到左上角框选,画面根据框选大小情况自动对目标进行缩小居中处理;
所述高点切换,系统支持多种高点视频切换方式,可以在高点列表中通过关键字搜索,选择切换高点,支持在登入首页地图窗口通过选取高点动态缩略图的方式实现高点的切换,支持在视频地图中通过选取高点摄像机图标实现高点的切换;
所述平台抓图,支持抓拍系统主操作屏图像,截图中保留标签信息并保存至图片库,支持打开图片库进行截图浏览;
所述平台抓录,支持录制系统主操作屏图像,录像中保留标签信息并保存至视频库,支持回放最近录像,支持在视频库选择录像进行回放。
基于上述技术方案,所述标签管理包括标签添加、定点标签、矢量标签、区域标签、组合型标签、多摄像头标签和标签关联室内平面地图;
所述标签添加,支持在前端视频画面上,比如高点球机、全景、低点枪机上添加标签,标签支持关联摄像机、图片、文档、语音、录像文件等内容,支持以上内容的组合关联;
所述定点标签,支持普通定点标签的添加,标签类型可分为警用标签、天网标签、移动标签、行业标签和社会资源标签,且标签颜色和图标可自定义;
所述矢量标签,支持矢量标签的添加,指明画面中道路或者其他物体的方向,标签类型可分为警用标签、天网标签、移动标签、行业标签和社会资源标签,且标签颜色和图标可自定义;
所述区域标签,支持区域标签的添加,能够对视频画面中出现的区域做图形框定标注,标签类型可分为警用标签、天网标签、移动标签、行业标签和社会资源标签,且标签颜色和图标可自定义;
所述组合型标签,系统支持组合标签添加,能够给背景目标的标签自定义添加相关的摄像机、图片、文档、语音和录像文件等的组合;
所述多摄像头标签,系统支持单个标签关联多个摄像机,点击标签可在当前视频画面中以设备列表及四分屏的方式显示,支持通过双击设备列表中的摄像机,在四分屏中显示对应的视频,并支持将选定视频推送到摄像机联动屏;
所述标签关联室内平面地图,支持标签关联室内平面地图,支持将室内摄像机落点标注在平面地图上,可以点击预览室内摄像机的视频,实现室内视频的管理。
基于上述技术方案,所述静态信息直观展示,通过AR应用,可以将道路信息特征提前注入视频监控系统,在视频中可直接看到道路行驶方向,车辆所处位置精确告知监控人员,车辆所处位置如桩号、上下行;
所述动态信息直观展示,通过AR视频监控系统与提前系统或传感器对接,在视频中的标签中直接展示来自其他系统的数据或来自传感器的数据,如交通气象站数据,断面车流量数据,绿优车数据,特情车数据;
所述实景地图,在桥梁地势相对较高的位置部署一套摄像机或者利用已建设的球机,对桥梁进行大场景监控,通过将视频像素中的像素点对应到视频拍摄的物体在的真实坐标,在大场景监控画面中标注周边建筑信息,高点视频成为实时的地图背景,做到视频与空间地理地图数据的融合。
基于上述技术方案,所述多点视频联动,在视频中增加其他摄像机标签,尤其在高点摄像机中可以俯瞰到桥梁全部的摄像机或其他路侧设备,通过点击摄像机标签,可在高点摄像机视频画面中联动查看低点视频,实现多点视频联动;
所述危化品车辆全程跟踪录像,利用AI智能识别技术进行危化品车辆特征捕获,当视频发现该车辆,摄像机会自动进行跟踪,并通知附近摄像机集体跟踪;
所述收费亭报警视频推送,收费亭发出有效报警信号以后,系统自动调用该报警亭的监控视频画面并推送到大屏。
基于上述技术方案,所述实景地图主要基于视频实景地图技术的应用,视频实景地图技术是指一种通过摄像机采集的实时视频为载体,通过后台增强现实标签标定技术、视频编码技术对城市中的地理GIS信息进行描述并叠加在实时视频画面中显示,借鉴传统GIS地图引擎的概念,利用视频图像像素与地理坐标自动转换技术,能够实现基于视频画面的手动标签添加及自动标签生成,将各类信息进行分类分层显示,信息支持搜索与定位;
所述实景地图在制高点位置部署时,主要基于制高点监控技术的应用,制高点监控技术是指在距离地面30-50米,乃至100米以上的位置布设PTZ摄像机以实现方圆一公里到十几乃至几十公里范围的视频监控,制高点监控利用高新技术,包括水平转角、垂直转角、回转速度、镜头光圈、变焦距离、聚焦距离、白平衡方式、增益强度和3D定位等。
与现有技术相比,本发明的有益效果:
1、本发明区别于传统的、旧式的二维电子地图指挥平台,而将视频与AR增强现实技术进行高度融合,利用高点监控大场景、大视野的视频为载体,通过增强现实技术,将高速公路的地形状况、地理位置、道路部件等信息通过语义标签、图形标签、矢量标签等形式叠加在视频画面中,标签支持交互,支持自定义,支持分层分类显示,支持搜索、定位,整体形成一张视频实景地图。
2、通过收费亭报警视频推送,收费亭发出有效报警信号以后,系统自动调用该报警亭的监控视频画面并推送到大屏,高点摄像机以其大场景、大视野的画面实现360°智能化的巡逻,系统能够融合汇聚各类低点摄像机、卡口等防控资源实现标签实景上图,实现各类资源的高效应用和管理,高点看全局,标签联动低点查看视频、过车图片等细节信息,实现由上到下、由外到内的立体化监控体系;
通过危化品车辆全程跟踪录像,当识别到重点车辆时,速联动低点摄像机聚焦在报警区域进行现场查看,可以非常方便、智能化的对报警事件进行响应,减轻人工监控强度,同时为车辆识别、轨迹还原、应急管理提供科学依据。
3、通过实景地图桥梁高点鸟瞰球机以其大场景、大视野的画面实现广角智能化的巡航检测,能够融合汇聚收费亭摄像机、桥梁路侧摄像机、出入口车道摄像机等低点摄像机等监控资源实现标签实景上图,通过数据建立的标签实景化的展现方式实现各类资源的高效应用和管理,高点看全局,标签联动低点查看视频和图片等细节信息,实现由上到下、由外到内的立体化指挥体系。
结合上述,本发明核心创新之处在于,鉴于高速公路管理的实际情况和管理现状,提出了以AR+AI相融合的技术方案,利用增强现实技术和人工智能分析技术,将高速公路管理者最为关心的各系统数据通过直观、实景化的方式展示,让系统数据与视频数据有效融合,提高高速公路管理科学化、现代化水平,同时利用先进的交通信息化技术,有效提升交通的服务水平和运行效率,实现管理机制与应用模式的创新。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。
在附图中:
图1是本发明监控方法的步骤流程图;
图2是本发明总体方案设计的结构框图;
图3是本发明基础功能设计的结构框图;
图4是本发明特色功能设计的结构框图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
实施例:如图1-4所示,本发明提供一种技术方案,一种基于视频增强现实技术的桥梁视频监控方法,包括如下实施步骤:
S1、总体方案设计;
S2、基础功能设计;
S3、特色功能设计;
S1中,总体方案设计,是将整个系统架构分为五层,分为应用系统层、业务展现层、核心技术层、业务采集层和物理采集层;
S2中,基础功能设计主要包括平台登入、平台锁屏、资源管理、视频管理和标签管理;
S3中,特色功能设计主要包括静态信息直观展示、动态信息直观展示、实景地图、多点视频联动、危化品车辆全程跟踪录像和收费亭报警视频推送。
基于上述技术方案,S1中,应用系统层为基于视频增强现实技术的桥梁综合视频监控系统;
业务展现层包括视频时空数据展现、收费管理应用、服务效率管理、紧急事件报警和重要数据分析;
核心技术层包括AR视频增强现实、视频时空数据、AI人工智能、大数据和数据挖掘机器人;
业务采集层包括监控系统、机电养护系统、资产管理系统、应急管理系统、路政管理系统、保畅工程、工班管理系统、冶超站管理系统、绿通稽查管理系统、隧道视频分析管理系统和建设施工管理系统;
物理采集层包括监控摄像机、人像抓拍机、车辆抓拍机、出入口控制和物联网终端设备。
基于上述技术方案,AR视频增强现实是一种实时地计算摄影机影像位置和角度并加上相应的图像技术,这种技术的目标是在屏幕上把虚拟世界叠加到现实世界并进行互动;
大数据是指海量摄像机在物理空间多维数据如位置、姿态、可视域等信息的集合以及多个摄像机在物理空间中的关联关系,通过视频空间大数据的研究,计算机系统能够实时、动态的感知摄像机姿态、位置、可视域信息;
业务采集层通过高速公路上常用的11个业务系统,系统可以通过数据挖掘机器人,利用兼容现有系统,把这11个业务系统的主要数据接入系统,通过我们的AR增强现实技术,视频时空数据,AI人工智能技术,大数据技术,实现高速公路的路网数据智能化分析,路网运行监测,应急事件处理,从而提高收费管理应用,提升服务效率。
基于上述技术方案,平台登入,通过地图为首页展示平台登入窗口,在首页可通过条形化的标签显示系统整体资源情况,包括高点摄像机数量、低点摄像机数量、标签数量、对接系统数、当日报警数和当月报警数,在首页地图上可直观查看高点摄像机的分布,并以动态缩略图的方式显示高点区域的概要,在首页上具备摄像机查询列表,支持以设备树的形式展示监控资源的组织架构;
平台锁屏,平台支持在主操作界面进行锁屏,锁屏之后需要输入用户名密码并在权限范围内才能解锁;
资源管理包括组织机构的管理、设备资源管理、用户与角色管理、角色权限管理和标签信息管理;
组织机构的管理包括添加、删除、修改与查询;
设备资源管理包括设备添加、删除、修改与查询;
用户与角色管理包括用户添加、修改、删除、查询组织,支持不同用户可以设置所属部门和隶属角色;
角色权限管理包括支持根据角色设置功能授权,如视频预览、回放、云台控制、录像下载权限,标签查看权限;
标签信息管理包括支持标签的添加、编辑、修改、位置矫正。
基于上述技术方案,视频管理包括视频实况、录像回放、视频控制、高点切换、平台抓图和平台抓录;
视频实况,通过平台客户端,支持在地图及高点视频中通过点击摄像机图标实现单画面或多画面视频图像实时预览,支持推送重点视频到联动屏实现4、9画面的轮巡播放;
录像回放,支持对高点、低点摄像机的录像进行查询,并可以1/4/9画面分割切换方式播放录像,支持录像下载历史图像的检索和回放;
视频控制是指平台能够对摄像机视频进行多方位的操作控制,具体包括方向控制、转速控制、缩放控制和3D功能控制;
方向控制,使用鼠标点击上下左右等八个按钮控制摄像机云台往相应方向移动;
转速控制,使用鼠标拖动尺标控制摄像机云台控制上下左右转动速度的快慢;
缩放控制,使用鼠标点击加减按钮控制摄像机缩放图像;
3D功能控制,支持在视频画面中可任意选取目标实现居中放大缩小,放大缩小过程中支持瞄准镜特效,支持从左上角到右下角框选,画面根据框选大小情况自动对目标进行放大居中处理,从右下角到左上角框选,画面根据框选大小情况自动对目标进行缩小居中处理;
高点切换,系统支持多种高点视频切换方式,可以在高点列表中通过关键字搜索,选择切换高点,支持在登入首页地图窗口通过选取高点动态缩略图的方式实现高点的切换,支持在视频地图中通过选取高点摄像机图标实现高点的切换;
平台抓图,支持抓拍系统主操作屏图像,截图中保留标签信息并保存至图片库,支持打开图片库进行截图浏览;
平台抓录,支持录制系统主操作屏图像,录像中保留标签信息并保存至视频库,支持回放最近录像,支持在视频库选择录像进行回放。
基于上述技术方案,标签管理包括标签添加、定点标签、矢量标签、区域标签、组合型标签、多摄像头标签和标签关联室内平面地图;
标签添加,支持在前端视频画面上,比如高点球机、全景、低点枪机上添加标签,标签支持关联摄像机、图片、文档、语音、录像文件等内容,支持以上内容的组合关联;
定点标签,支持普通定点标签的添加,标签类型可分为警用标签、天网标签、移动标签、行业标签和社会资源标签,且标签颜色和图标可自定义;
矢量标签,支持矢量标签的添加,指明画面中道路或者其他物体的方向,标签类型可分为警用标签、天网标签、移动标签、行业标签和社会资源标签,且标签颜色和图标可自定义;
区域标签,支持区域标签的添加,能够对视频画面中出现的区域做图形框定标注,标签类型可分为警用标签、天网标签、移动标签、行业标签和社会资源标签,且标签颜色和图标可自定义;
组合型标签,系统支持组合标签添加,能够给背景目标的标签自定义添加相关的摄像机、图片、文档、语音和录像文件等的组合;
多摄像头标签,系统支持单个标签关联多个摄像机,点击标签可在当前视频画面中以设备列表及四分屏的方式显示,支持通过双击设备列表中的摄像机,在四分屏中显示对应的视频,并支持将选定视频推送到摄像机联动屏;
标签关联室内平面地图,支持标签关联室内平面地图,支持将室内摄像机落点标注在平面地图上,可以点击预览室内摄像机的视频,实现室内视频的管理。
基于上述技术方案,静态信息直观展示,通过AR应用,可以将道路信息特征提前注入视频监控系统,在视频中可直接看到道路行驶方向,车辆所处位置精确告知监控人员,车辆所处位置如桩号、上下行;
动态信息直观展示,通过AR视频监控系统与提前系统或传感器对接,在视频中的标签中直接展示来自其他系统的数据或来自传感器的数据,如交通气象站数据,断面车流量数据,绿优车数据,特情车数据;
实景地图,在桥梁地势相对较高的位置部署一套摄像机或者利用已建设的球机,对桥梁进行大场景监控,通过将视频像素中的像素点对应到视频拍摄的物体在的真实坐标,在大场景监控画面中标注周边建筑信息,高点视频成为实时的地图背景,做到视频与空间地理地图数据的融合。
基于上述技术方案,多点视频联动,在视频中增加其他摄像机标签,尤其在高点摄像机中可以俯瞰到桥梁全部的摄像机或其他路侧设备,通过点击摄像机标签,可在高点摄像机视频画面中联动查看低点视频,实现多点视频联动;
危化品车辆全程跟踪录像,利用AI智能识别技术进行危化品车辆特征捕获,当视频发现该车辆,摄像机会自动进行跟踪,并通知附近摄像机集体跟踪;
收费亭报警视频推送,收费亭发出有效报警信号以后,系统自动调用该报警亭的监控视频画面并推送到大屏。
基于上述技术方案,实景地图主要基于视频实景地图技术的应用,视频实景地图技术是指一种通过摄像机采集的实时视频为载体,通过后台增强现实标签标定技术、视频编码技术对城市中的地理GIS信息进行描述并叠加在实时视频画面中显示,借鉴传统GIS地图引擎的概念,利用视频图像像素与地理坐标自动转换技术,能够实现基于视频画面的手动标签添加及自动标签生成,将各类信息进行分类分层显示,信息支持搜索与定位;
实景地图在制高点位置部署时,主要基于制高点监控技术的应用,制高点监控技术是指在距离地面30-50米,乃至100米以上的位置布设PTZ摄像机以实现方圆一公里到十几乃至几十公里范围的视频监控,制高点监控利用高新技术,包括水平转角、垂直转角、回转速度、镜头光圈、变焦距离、聚焦距离、白平衡方式、增益强度和3D定位等。
最后应说明的是:以上所述仅为本发明的优选实例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (8)

1.一种基于视频增强现实技术的桥梁视频监控方法,其特征在于:包括如下实施步骤:
S1、总体方案设计;
S2、基础功能设计;
S3、特色功能设计;
所述S1中,总体方案设计,是将整个系统架构分为五层,分为应用系统层、业务展现层、核心技术层、业务采集层和物理采集层;
所述S2中,基础功能设计主要包括平台登入、平台锁屏、资源管理、视频管理和标签管理;
所述S3中,特色功能设计主要包括静态信息直观展示、动态信息直观展示、实景地图、多点视频联动、危化品车辆全程跟踪录像和收费亭报警视频推送。
2.根据权利要求1所述的一种基于视频增强现实技术的桥梁视频监控方法,其特征在于:所述S1中,应用系统层为基于视频增强现实技术的桥梁综合视频监控系统;
业务展现层包括视频时空数据展现、收费管理应用、服务效率管理、紧急事件报警和重要数据分析;
核心技术层包括AR视频增强现实、视频时空数据、AI人工智能、大数据和数据挖掘机器人;
业务采集层包括监控系统、机电养护系统、资产管理系统、应急管理系统、路政管理系统、保畅工程、工班管理系统、冶超站管理系统、绿通稽查管理系统、隧道视频分析管理系统和建设施工管理系统;
物理采集层包括监控摄像机、人像抓拍机、车辆抓拍机、出入口控制和物联网终端设备。
3.根据权利要求2所述的一种基于视频增强现实技术的桥梁视频监控方法,其特征在于:所述AR视频增强现实是一种实时地计算摄影机影像位置和角度并加上相应的图像技术,这种技术的目标是在屏幕上把虚拟世界叠加到现实世界并进行互动;
所述大数据是指海量摄像机在物理空间多维数据如位置、姿态、可视域等信息的集合以及多个摄像机在物理空间中的关联关系,通过视频空间大数据的研究,计算机系统能够实时、动态的感知摄像机姿态、位置、可视域信息;
所述业务采集层通过高速公路上常用的11个业务系统,系统可以通过数据挖掘机器人,利用兼容现有系统,把这11个业务系统的主要数据接入系统,通过我们的AR增强现实技术,视频时空数据,AI人工智能技术,大数据技术,实现高速公路的路网数据智能化分析,路网运行监测,应急事件处理,从而提高收费管理应用,提升服务效率。
4.根据权利要求1所述的一种基于视频增强现实技术的桥梁视频监控方法,其特征在于:所述平台登入,通过地图为首页展示平台登入窗口,在首页可通过条形化的标签显示系统整体资源情况,包括高点摄像机数量、低点摄像机数量、标签数量、对接系统数、当日报警数和当月报警数,在首页地图上可直观查看高点摄像机的分布,并以动态缩略图的方式显示高点区域的概要,在首页上具备摄像机查询列表,支持以设备树的形式展示监控资源的组织架构;
所述平台锁屏,平台支持在主操作界面进行锁屏,锁屏之后需要输入用户名密码并在权限范围内才能解锁;
所述资源管理包括组织机构的管理、设备资源管理、用户与角色管理、角色权限管理和标签信息管理;
所述组织机构的管理包括添加、删除、修改与查询;
所述设备资源管理包括设备添加、删除、修改与查询;
所述用户与角色管理包括用户添加、修改、删除、查询组织,支持不同用户可以设置所属部门和隶属角色;
所述角色权限管理包括支持根据角色设置功能授权,如视频预览、回放、云台控制、录像下载权限,标签查看权限;
所述标签信息管理包括支持标签的添加、编辑、修改、位置矫正。
5.根据权利要求1所述的一种基于视频增强现实技术的桥梁视频监控方法,其特征在于:所述视频管理包括视频实况、录像回放、视频控制、高点切换、平台抓图和平台抓录;
所述视频实况,通过平台客户端,支持在地图及高点视频中通过点击摄像机图标实现单画面或多画面视频图像实时预览,支持推送重点视频到联动屏实现4、9画面的轮巡播放;
所述录像回放,支持对高点、低点摄像机的录像进行查询,并可以1/4/9画面分割切换方式播放录像,支持录像下载历史图像的检索和回放;
所述视频控制是指平台能够对摄像机视频进行多方位的操作控制,具体包括方向控制、转速控制、缩放控制和3D功能控制;
所述方向控制,使用鼠标点击上下左右等八个按钮控制摄像机云台往相应方向移动;
所述转速控制,使用鼠标拖动尺标控制摄像机云台控制上下左右转动速度的快慢;
所述缩放控制,使用鼠标点击加减按钮控制摄像机缩放图像;
所述3D功能控制,支持在视频画面中可任意选取目标实现居中放大缩小,放大缩小过程中支持瞄准镜特效,支持从左上角到右下角框选,画面根据框选大小情况自动对目标进行放大居中处理,从右下角到左上角框选,画面根据框选大小情况自动对目标进行缩小居中处理;
所述高点切换,系统支持多种高点视频切换方式,可以在高点列表中通过关键字搜索,选择切换高点,支持在登入首页地图窗口通过选取高点动态缩略图的方式实现高点的切换,支持在视频地图中通过选取高点摄像机图标实现高点的切换;
所述平台抓图,支持抓拍系统主操作屏图像,截图中保留标签信息并保存至图片库,支持打开图片库进行截图浏览;
所述平台抓录,支持录制系统主操作屏图像,录像中保留标签信息并保存至视频库,支持回放最近录像,支持在视频库选择录像进行回放。
6.根据权利要求1所述的一种基于视频增强现实技术的桥梁视频监控方法,其特征在于:所述标签管理包括标签添加、定点标签、矢量标签、区域标签、组合型标签、多摄像头标签和标签关联室内平面地图;
所述标签添加,支持在前端视频画面上,比如高点球机、全景、低点枪机上添加标签,标签支持关联摄像机、图片、文档、语音、录像文件等内容,支持以上内容的组合关联;
所述定点标签,支持普通定点标签的添加,标签类型可分为警用标签、天网标签、移动标签、行业标签和社会资源标签,且标签颜色和图标可自定义;
所述矢量标签,支持矢量标签的添加,指明画面中道路或者其他物体的方向,标签类型可分为警用标签、天网标签、移动标签、行业标签和社会资源标签,且标签颜色和图标可自定义;
所述区域标签,支持区域标签的添加,能够对视频画面中出现的区域做图形框定标注,标签类型可分为警用标签、天网标签、移动标签、行业标签和社会资源标签,且标签颜色和图标可自定义;
所述组合型标签,系统支持组合标签添加,能够给背景目标的标签自定义添加相关的摄像机、图片、文档、语音和录像文件等的组合;
所述多摄像头标签,系统支持单个标签关联多个摄像机,点击标签可在当前视频画面中以设备列表及四分屏的方式显示,支持通过双击设备列表中的摄像机,在四分屏中显示对应的视频,并支持将选定视频推送到摄像机联动屏;
所述标签关联室内平面地图,支持标签关联室内平面地图,支持将室内摄像机落点标注在平面地图上,可以点击预览室内摄像机的视频,实现室内视频的管理。
7.根据权利要求1所述的一种基于视频增强现实技术的桥梁视频监控方法,其特征在于:所述静态信息直观展示,通过AR应用,可以将道路信息特征提前注入视频监控系统,在视频中可直接看到道路行驶方向,车辆所处位置精确告知监控人员,车辆所处位置如桩号、上下行;
所述动态信息直观展示,通过AR视频监控系统与提前系统或传感器对接,在视频中的标签中直接展示来自其他系统的数据或来自传感器的数据,如交通气象站数据,断面车流量数据,绿优车数据,特情车数据;
所述实景地图,在桥梁地势相对较高的位置部署一套摄像机或者利用已建设的球机,对桥梁进行大场景监控,通过将视频像素中的像素点对应到视频拍摄的物体在的真实坐标,在大场景监控画面中标注周边建筑信息,高点视频成为实时的地图背景,做到视频与空间地理地图数据的融合。
8.根据权利要求1所述的一种基于视频增强现实技术的桥梁视频监控方法,其特征在于:所述多点视频联动,在视频中增加其他摄像机标签,尤其在高点摄像机中可以俯瞰到桥梁全部的摄像机或其他路侧设备,通过点击摄像机标签,可在高点摄像机视频画面中联动查看低点视频,实现多点视频联动;
所述危化品车辆全程跟踪录像,利用AI智能识别技术进行危化品车辆特征捕获,当视频发现该车辆,摄像机会自动进行跟踪,并通知附近摄像机集体跟踪;
所述收费亭报警视频推送,收费亭发出有效报警信号以后,系统自动调用该报警亭的监控视频画面并推送到大屏。
CN202011398518.7A 2020-12-04 2020-12-04 一种基于视频增强现实技术的桥梁视频监控方法 Pending CN112468787A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011398518.7A CN112468787A (zh) 2020-12-04 2020-12-04 一种基于视频增强现实技术的桥梁视频监控方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011398518.7A CN112468787A (zh) 2020-12-04 2020-12-04 一种基于视频增强现实技术的桥梁视频监控方法

Publications (1)

Publication Number Publication Date
CN112468787A true CN112468787A (zh) 2021-03-09

Family

ID=74806151

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011398518.7A Pending CN112468787A (zh) 2020-12-04 2020-12-04 一种基于视频增强现实技术的桥梁视频监控方法

Country Status (1)

Country Link
CN (1) CN112468787A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113573024A (zh) * 2021-07-28 2021-10-29 东风悦享科技有限公司 一种适用于Sharing VAN场站的AR实景监控系统
CN113747126A (zh) * 2021-11-03 2021-12-03 深圳市信润富联数字科技有限公司 一种ar城市融合实景告警监控方法及系统
CN113938653A (zh) * 2021-10-12 2022-01-14 钱保军 一种基于ar梯次级联的多视频监控显示方法
CN116320690A (zh) * 2023-04-10 2023-06-23 贺知音 一种ar摄像头结合物联网系统的远程定位方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104159086A (zh) * 2014-08-22 2014-11-19 安徽皖通科技股份有限公司 一种省域路网数字化视频监控平台
CN108897474A (zh) * 2018-05-29 2018-11-27 高新兴科技集团股份有限公司 一种增强现实摄像机的虚拟标签的管理方法及管理系统
CN108922188A (zh) * 2018-07-24 2018-11-30 河北德冠隆电子科技有限公司 雷达跟踪定位的四维实景交通路况感知预警监控管理系统
CN108960566A (zh) * 2018-05-29 2018-12-07 高新兴科技集团股份有限公司 一种交通可视化监控系统
CN111275980A (zh) * 2020-01-21 2020-06-12 上海天齐智能建筑股份有限公司 基于互联网+智能交通视频监控管理系统的大数据应用平台

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104159086A (zh) * 2014-08-22 2014-11-19 安徽皖通科技股份有限公司 一种省域路网数字化视频监控平台
CN108897474A (zh) * 2018-05-29 2018-11-27 高新兴科技集团股份有限公司 一种增强现实摄像机的虚拟标签的管理方法及管理系统
CN108960566A (zh) * 2018-05-29 2018-12-07 高新兴科技集团股份有限公司 一种交通可视化监控系统
CN108922188A (zh) * 2018-07-24 2018-11-30 河北德冠隆电子科技有限公司 雷达跟踪定位的四维实景交通路况感知预警监控管理系统
CN111275980A (zh) * 2020-01-21 2020-06-12 上海天齐智能建筑股份有限公司 基于互联网+智能交通视频监控管理系统的大数据应用平台

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113573024A (zh) * 2021-07-28 2021-10-29 东风悦享科技有限公司 一种适用于Sharing VAN场站的AR实景监控系统
CN113938653A (zh) * 2021-10-12 2022-01-14 钱保军 一种基于ar梯次级联的多视频监控显示方法
CN113747126A (zh) * 2021-11-03 2021-12-03 深圳市信润富联数字科技有限公司 一种ar城市融合实景告警监控方法及系统
CN116320690A (zh) * 2023-04-10 2023-06-23 贺知音 一种ar摄像头结合物联网系统的远程定位方法
CN116320690B (zh) * 2023-04-10 2024-04-05 张家港市金盾保安服务有限公司 一种ar摄像头结合物联网系统的远程定位方法

Similar Documents

Publication Publication Date Title
CN112468787A (zh) 一种基于视频增强现实技术的桥梁视频监控方法
CN108965825B (zh) 基于全息位置地图的视频联动调度方法
US8331611B2 (en) Overlay information over video
Collins et al. A system for video surveillance and monitoring
US9286720B2 (en) Locative video for situation awareness
EP2005748B1 (en) Virtual observer
CN108960566B (zh) 一种交通可视化监控系统
US10191635B1 (en) System and method of generating a view for a point of interest
US20130021475A1 (en) Systems and methods for sensor control
Ciampa Pictometry Digital Video Mapping
CN112449093A (zh) 一种三维全景视频融合监控平台
CN105744227A (zh) 一种开放式1+n枪球联动系统
CN107360394A (zh) 应用于边防视频监控系统的多预置点动态智能监测方法
CN115248880A (zh) 一种智慧城市安防监控系统
CN114419231B (zh) 基于点云数据和ai技术的交通设施矢量识别提取分析系统
CN112256818B (zh) 一种电子沙盘的显示方法及装置、电子设备、存储介质
Busch et al. Lumpi: The leibniz university multi-perspective intersection dataset
Greenhill et al. Virtual observers in a mobile surveillance system
Wang et al. Railroad online: acquiring and visualizing route panoramas of rail scenes
CN112669205A (zh) 一种三维视频融合拼接方法
JP2003219403A (ja) パノラマ画像による道路や河川、鉄道の空間把握システム
GB2594459A (en) A method, apparatus and computer program for generating and displaying a heatmap based on video surveillance data
CN110930507A (zh) 一种基于三维地理信息的大场景跨境头目标追踪方法和系统
Wei Research on Smart City Platform Based on 3D Video Fusion
Hong et al. A metadata-based approach for using CCTV to facilitate emergency response

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210309