CN116389688A - 基于5g通信传输的海关口岸综合监控指挥系统及方法 - Google Patents
基于5g通信传输的海关口岸综合监控指挥系统及方法 Download PDFInfo
- Publication number
- CN116389688A CN116389688A CN202310372866.4A CN202310372866A CN116389688A CN 116389688 A CN116389688 A CN 116389688A CN 202310372866 A CN202310372866 A CN 202310372866A CN 116389688 A CN116389688 A CN 116389688A
- Authority
- CN
- China
- Prior art keywords
- panoramic
- customs
- regional
- video
- view
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 86
- 238000004891 communication Methods 0.000 title claims abstract description 56
- 230000005540 biological transmission Effects 0.000 title claims abstract description 52
- 238000000034 method Methods 0.000 title claims abstract description 30
- 230000002776 aggregation Effects 0.000 claims abstract description 19
- 238000004220 aggregation Methods 0.000 claims abstract description 19
- 230000004438 eyesight Effects 0.000 claims description 23
- 230000000875 corresponding effect Effects 0.000 claims description 14
- 238000001514 detection method Methods 0.000 claims description 7
- 230000011218 segmentation Effects 0.000 claims description 7
- 230000004297 night vision Effects 0.000 claims description 6
- 102100032202 Cornulin Human genes 0.000 claims description 4
- 101000920981 Homo sapiens Cornulin Proteins 0.000 claims description 4
- 230000002596 correlated effect Effects 0.000 claims description 3
- 238000007781 pre-processing Methods 0.000 claims description 3
- 230000001276 controlling effect Effects 0.000 claims description 2
- 230000000694 effects Effects 0.000 abstract description 9
- 230000008901 benefit Effects 0.000 abstract description 4
- 238000005516 engineering process Methods 0.000 description 14
- 230000008520 organization Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000002452 interceptive effect Effects 0.000 description 4
- 238000009826 distribution Methods 0.000 description 3
- 230000008676 import Effects 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012916 structural analysis Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2457—Query processing with adaptation to user needs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/248—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/029—Location-based management or tracking services
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本发明公开了一种基于5G通信传输的海关口岸综合监控指挥系统及方法,包括多位点视频采集模块,用于在海关口岸采集全景视像和区域视像;海关业务数据库模块,用于储存、管理和读取海关业务数据;监控指挥模块,用于接收并显示全景视像和区域视像、构成海关口岸的全景地图、添加视像切换标签、根据操作而显示相应的全景视像或区域视像、显示海关业务数据;以及,智能单兵调度模块,用于向工作人员的终端发送集结指示。本发明具有带宽大、延时低以及速率高的优点,实现了对海关口岸的大范围、立体化监控,并且通过与海关业务数据库模块的联动,使海关机构能够在监控指挥模块上实时查看各项海关业务数据,能够更优质高效地开展行政执法活动。
Description
技术领域
本发明涉及集成化信息系统技术领域,具体为一种基于5G通信传输的海关口岸综合监控指挥系统及方法。
背景技术
海关是依据法律和行政法规行使进出口监督管理职权的国家行政机关,海关对进出口货物和进出境运输工具,既有实施监督管理的权限,也有实施监督管理的职责;国际贸易活动中产生的货物,必须经由海关口岸来入境和出境,因此,海关口岸是海关开展行政执法活动的重要场所。
货柜码头和陆运枢纽等海关口岸,具有面积巨大、货物流动性强、交通工具和人员来往频繁的特点,依靠人工巡查和管理的方式,显然难以适应海关在海关口岸的行政执法活动需求。
第五代移动通信技术(简称“5G技术”)正处于当前时代的风口,对社会生产和人们生活方式产生日益深远影响,5G技术具有三大网络能力: 增强型移动宽带(eMBB,简称大带宽)、海量机器类通信(mMTC,简称大连接)及低时延高可靠通信(uRLLC,简称低时延)。加快5G技术网络、数据中心等新型基础设施建设成为重要的发展项目;随着国家5G技术发展战略的持续推进,以及监管作业场所5G技术网络覆盖的不断优化完善,海关场所对于5G技术应用需求也将快速增长。中国是全球排名第一的贸易大国,产生全球近四分之一贸易,截止到 2018年底,全国港口拥有万吨级及以上泊位 2444 个, 5G技术在我国存在较大的市场应用空间,可以提升港口的工作效率、港口园区管理效率和安全性,提升港口与船舶、货物运输的协同性。
随着信息化程度的提高,视频监控系统在海关的日常活动中发挥了重要作用,海关的业务部门通过视频监控系统,能够对海关口岸中的重点场所、关键环节以及突发事件等节点进行视频联网集中监控;此外,一些海关机构还形成了以二维电子地图为核心的单兵定位、语音呼叫、视频调度等可视化管理系统。
然而,现有技术中的视频监控系统,往往侧重于对局部、细节画面的特写拍摄,缺乏对海关口岸的大范围、立体化监控,而且视频监控系统与海关业务数据之间缺乏联动,无法做到数据互通和实时展示;此外,上述的二维电子地图,对于海关口岸的展示仍不够直观,难以在二维电子地图上实时掌握海关口岸的现场情况。
发明内容
本发明的目的在于提供一种基于5G通信传输的海关口岸综合监控指挥系统及方法,其能够实现对海关口岸的大范围、立体化监控,且能够与海关业务数据库进行联动。
为实现上述目的,本发明提供如下技术方案:一种基于5G通信传输的海关口岸综合监控指挥系统,其包括:
多位点视频采集模块,用于在海关口岸的至少一个全景区域中采集全景视像、在所述海关口岸的至少一个局部区域中采集区域视像,以及,以5G通信传输的方式输出所述全景视像和所述区域视像;
海关业务数据库模块,用于储存、管理和读取经过所述海关口岸的海关业务数据;
监控指挥模块,用于实时接收并显示所述全景视像和所述区域视像、利用所述全景视像和所述区域视像构成所述海关口岸的全景地图、在所述全景地图中添加视像切换标签、根据用户对所述视像切换标签的操作而显示相应的全景视像或区域视像,以及,在所述全景地图上叠加显示所述海关业务数据;
集装箱身份识别模块,用于支持用户在所述监控指挥模块所显示的全景视像或区域视像中选择集装箱、以动态方式追踪及追焦被选择的集装箱、识别被选择的集装箱身份,以及,根据所述集装箱身份,在所述全景视像和/或所述区域视像上叠加显示与所述集装箱关联的海关业务数据;以及,
智能单兵调度模块,用于向海关工作人员的终端发送集结指示、与所述集结指示关联的位置信息以及与所述集结指示关联的事件信息。
上述技术方案中,本发明的基于5G通信传输的海关口岸综合监控指挥系统还包括标签添加及管理模块;所述标签添加及管理模块用于对所述全景视像和所述区域视像中的视频对象添加自定义标签、管理所述自定义标签、将所述自定义标签关联至所述全景地图的坐标、搜索所述自定义标签,以及,根据所述自定义标签在所述全景地图上的坐标,在所述全景视像或所述区域视像上定位所述自定义标签。
上述技术方案中,所述标签添加及管理模块还用于在所述全景视像、所述区域视像、所述全景视像的部分区域以及所述区域视像的部分区域添加区域标签、将所述区域标签结合为区域列表,以及,根据用户对所述区域列表的操作切换至与所述区域标签对应的全景视像或区域视像。
上述技术方案中,将所述自定义标签关联至所述全景地图的坐标,具体方法包括:
S1、确定被添加所述自定义标签的视频对象;
S2、获取所述视频对象在所述全景视像或所述区域视像中的ptz值和视场角;
S3、依据所述视频对象的ptz值和视场角,计算获得所述视频对象在所述全景视像或所述区域视像中的xy值;
S4、将所述视频对象在所述全景视像或所述区域视像中的xy值关联为所述全景地图的坐标。
上述技术方案中,所述自定义标签为文本标签、图片标签、文档标签、语音标签、录像标签以及混合标签中的至少一种。
上述技术方案中,识别被选择的集装箱身份,具体方法包括:
Sa、根据用户所选择的集装箱,获取所述集装箱的图像;
Sb、使用图像语义分割模型,对所述集装箱的图像进行箱面粗定位,以分割出所述图像中的集装箱号,并进行对所述图像进行预处理,得到箱型图像;
Sc、采用CPTN模型对所述箱型图像进行文本检测;
Sd、采用CRNN模型对文本检测的所有结果进行OCR识别;
Se、将识别结果按照集装箱身份格式进行正则化,输出最终的集装箱身份。
上述技术方案中,所述多位点视频采集模块包括:
全景视像采集设备,其布设在所述海关口岸的至少一个全景区域,用于采集该全景区域的全景视像并以5G通信传输的方式实时传送至所述监控指挥模块;
区域视像采集设备,其布设在所述海关口岸的至少一个局部区域,用于采集该局部区域的区域视像并以5G通信传输的方式实时传送至所述监控指挥模块。
上述技术方案中,所述监控指挥模块还用于分别控制所述全景视像采集设备和所述区域视像采集设备进行旋转、变焦以及切换日视/夜视模式,以分别对所述全景视像和所述区域视像进行旋转、缩放以及切换日视/夜视模式。
上述技术方案中,本发明的基于5G通信传输的海关口岸综合监控指挥系统还包括视像采集设备定位模块;所述视像采集设备定位模块用于根据用户输入的全景视像采集设备或区域视像采集设备之名称,在所述全景视像或所述区域视像上定位相应的视像切换标签。
一种基于5G通信传输的海关口岸综合监控指挥方法,其包括:
在海关口岸的至少一个全景区域中采集全景视像、在所述海关口岸的至少一个局部区域中采集区域视像、以5G通信传输的方式输出所述全景视像和所述区域视像;
实时接收并显示所述全景视像和所述区域视像;
利用所述全景视像和所述区域视像构成所述海关口岸的全景地图;
在所述全景地图中添加视像切换标签;
根据用户对所述视像切换标签的操作而显示相应的全景视像或区域视像;
在所述全景地图上叠加显示海关业务数据库中的海关业务数据;
支持用户在所述全景视像或所述区域视像中选择集装箱、以动态方式追踪及追焦被选择的集装箱、识别被选择的集装箱身份,以及,根据所述集装箱身份,在所述全景视像和/或所述区域视像上叠加显示与所述集装箱关联的海关业务数据;以及,
支持用户向海关工作人员的终端发送集结指示、与所述集结指示关联的位置信息以及与所述集结指示关联的事件信息。
与现有技术相比,本发明的有益效果是:本发明的基于5G通信传输的海关口岸综合监控指挥系统及方法,能够通过多位点视频采集模块采集全景视像和区域视像,通过监控指挥模块实现全景视像和区域视像的显示、全景地图的构建、不同的全景视像和区域视像之间的切换、显示海关业务数据、添加和管理自定义标签、集装箱身份识别及海关业务数据读取的功能;采用5G通信传输,使本海关口岸综合监控指挥系统及方法具有带宽大、延时低、信号分布稳定、可靠性高以及速率高的优点,能够满足高清全景视像和区域视像的传输要求,基于5G通信传输网络回传高清全景视像和区域视像,结合AR技术进行结构化解析,展示场所实时全景态势,其实现了对海关口岸的大范围、立体化监控,使海关机构易于实时掌握海关口岸的现场情况,并且通过与海关业务数据库模块的联动,使海关机构能够在监控指挥模块上实时查看各项海关业务数据,进而使海关机构能够更优质高效地开展行政执法活动。
附图说明
图1为本发明实施例一的系统结构示意图。
图2为本发明实施例一的基于5G通信传输的海关口岸综合监控指挥系统与已建成的海关业务管理系统建立连接后的网络拓扑示意图之一。
图3为本发明实施例一的基于5G通信传输的海关口岸综合监控指挥系统与已建成的海关业务管理系统建立连接后的网络拓扑示意图之二。
图4为5G+智慧政务的典型运用案例示意图。
实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一
本实施例提供一种基于5G通信传输的海关口岸综合监控指挥系统,能够应用在例如货柜码头和陆运枢纽等海关口岸中,以辅助海关机构对海关口岸进行实时且全天候的监控和管理。
5G技术具有三大网络能力: 增强型移动宽带(eMBB,简称大带宽)、海量机器类通信(mMTC,简称大连接)及低时延高可靠通信(uRLLC,简称低时延),将5G技术应用到海关口岸综合监控指挥系统中,能够使海关口岸综合监控指挥系统及方法具有带宽大、延时低、信号分布稳定、可靠性高以及速率高的优点,满足高清全景视像和区域视像的传输要求。
请参阅图4,通过5G技术构建的网络,结合超高清视频技术以及VR/AR等技术,能够有效提升智慧政务远程服务水平与用户体验,做到让人民群众少跑腿、易办事;当前,各地均在布局和发展5G+智慧政务,在海关口岸等机构也陆续开展个性化应用试点。
请参阅图1,本实施例的基于5G通信传输的海关口岸综合监控指挥系统,包括:
多位点视频采集模块,用于在海关口岸的至少一个全景区域中采集全景视像、在海关口岸的至少一个局部区域中采集区域视像,以及,以5G通信传输的方式输出全景视像和区域视像;
海关业务数据库模块,用于储存、管理和读取经过海关口岸的海关业务数据;
监控指挥模块,用于实时接收并显示全景视像和区域视像、利用全景视像和区域视像构成海关口岸的全景地图、在全景地图中添加视像切换标签、根据用户对视像切换标签的操作而显示相应的全景视像或区域视像,以及,在全景地图上叠加显示海关业务数据;
集装箱身份识别模块,用于支持用户在监控指挥模块所显示的全景视像或区域视像中选择集装箱、以动态方式追踪及追焦被选择的集装箱、识别被选择的集装箱身份,以及,根据集装箱身份,在全景视像和/或区域视像上叠加显示与集装箱关联的海关业务数据;以及,
智能单兵调度模块,用于向海关工作人员的终端发送集结指示、与集结指示关联的位置信息以及与集结指示关联的事件信息。
其中,全景区域可以为海关口岸中视野良好的位置,例如高位监控点、高楼顶部以及通信基站安装位等,全景视像可以反映海关口岸的全景、整体场景或者大范围场景;局部区域则为分布在海关口岸各处的卡口功能区、地磅功能区、泊位功能区、查验场功能区以及堆场功能区等节点位置,区域视像可以反映上述区域的场景;全景视像和区域视像采用统一的坐标系,与地图坐标关联后,即可构建出由全景视像和区域视像构成的全景地图。
实际上,与集结指示关联的位置信息可以为位置坐标、位置详述或者位置代号等,与集结指示关联的事件信息可以包括文字化的事件信息、相关图片以及风险异常指令等。
具体地,多位点视频采集模块包括:
全景视像采集设备,其布设在海关口岸的至少一个全景区域,用于采集该全景区域的全景视像并以5G通信传输的方式实时传送至监控指挥模块;
区域视像采集设备,其布设在海关口岸的至少一个局部区域,用于采集该局部区域的区域视像并以5G通信传输的方式实时传送至监控指挥模块。
全景视像和区域视像的传输具有两个明显的特点:一是对网络传输质量要求较高,如高带宽、低时延、广连接,需要简化网络架构,更好发挥5G低时延的特性;二是需处理高清视频、地图等大数据量信息,对现有海关系统网络带来较大压力,可能造成新的信息安全风险。
采用5G通信传输,使本海关口岸综合监控指挥系统及方法具有带宽大(流量密度可达≥20Tbps/Km²)、延时低(平均响应时间为0.87秒,端到端时延≤1ms)、信号分布稳定、可靠性高以及速率高(峰值速率≥0.6Gbps)的优点,能够满足高清全景视像和区域视像的传输要求。
实际上,为了在海关口岸中采集全景视像和区域视像,往往需要将全景视像采集设备和区域视像采集设备设置在视野良好的位置,例如房顶、高台、附近的建筑物、通信塔等,这些位置由于各种原因,难以布置信号线或光缆,因此,以5G通信传输的方式实时传送全景视像和区域视像,使全景视像采集设备和区域视像采集设备克服了难以布置信号线或光缆的问题,并且保障了高清视像传输的带宽。
进一步具体地,全景视像采集设备可以为重装云台等能够采集全景视像的摄像设备;区域视像采集设备可以为人脸识别摄像头、高清枪式监控摄像头和高清球式监控摄像头等能够采集区域视像的摄像设备。
具体地,海关业务数据库模块可以部署为单个数据库,也可以部署为多个数据库,还可以部署为分布式数据库,同样地,海关业务数据库模块的数据库服务器可以布局为一台、多台以及异地服务器系统;海关业务数据库模块具体用于储存、管理和读取关港信息数据、海关通关数据、地磅管理数据以及装卸货管理数据等海关业务数据。
具体地,监控指挥模块由相互通信连接的后台服务器和前台终端构成;后台服务器用于处理、转发、管理以及储存来自多位点视频采集模块和海关业务数据库模块的数据,例如全景视像、区域视像以及海关业务数据;前台终端即为人机交互设备,例如个人计算机、多联屏监控指挥系统以及智能手机或平板电脑等便携式终端;实际上,前台终端用于显示全景视像、区域视像和全景地图、叠加显示海关业务数据,以及,支持用户的各种交互操作。
具体地,支持用户在监控指挥模块所显示的全景视像或区域视像中选择集装箱,具体可以为支持用户在全景视像或区域视像中框选某一集装箱;与集装箱关联的海关业务数据具体包括该集装箱的海关通关数据、地磅管理数据以及装卸货管理数据等。
进一步地,监控指挥模块还用于分别控制全景视像采集设备和区域视像采集设备进行旋转、变焦以及切换日视/夜视模式,以分别对全景视像和区域视像进行旋转、缩放以及切换日视/夜视模式;实际上,对全景视像和区域视像进行旋转和缩放,可以以控制罗盘的形式集成在监控指挥模块的交互界面,并叠加显示在全景视像和区域视像上;切换日视/夜视模式,可以以控制按钮的形式集成在监控指挥模块的交互界面,并叠加显示在全景视像和区域视像上,也可以根据当前时间和环境亮度等因素而进行自动切换。
进一步地,本实施例的基于5G通信传输的海关口岸综合监控指挥系统还包括标签添加及管理模块;实际上,该标签添加及管理模块为软件模块,其可以部署于监控指挥模块上的硬件上;标签添加及管理模块用于对全景视像和区域视像中的视频对象添加自定义标签、管理自定义标签、将自定义标签关联至全景地图的坐标、搜索自定义标签,以及,根据自定义标签在全景地图上的坐标,在全景视像或区域视像上定位自定义标签。
具体地,添加自定义标签是指支持用户对全景视像和区域视像中的某一个视频对象(例如货柜、车辆、人员等)添加自定义标签,管理自定义标签是指修改或删除自定义标签,搜索自定义标签是指根据自定义标签的名称来搜相应的自定义标签。
具体地,自定义标签为文本标签、图片标签、文档标签、语音标签、录像标签以及混合标签中的至少一种;文本标签是指具有文字文本的自定义标签,图片标签是指插入了图片的自定义标签,文档标签是指插入了文本文档、表格文档以及演示文档等文档文件的自定义标签,语音标签是指插入了用户录制的语音的自定义标签,录像标签是指插入了用户录制、剪辑或截取的录像的自定义标签,混合标签是指具有上述的文本、图片、文档、语音以及录像元素中的任意组合的自定义标签。
进一步地,标签添加及管理模块还用于在全景视像、区域视像、全景视像的部分区域以及区域视像的部分区域添加区域标签、将区域标签结合为区域列表,以及,根据用户对区域列表的操作切换至与区域标签对应的全景视像或区域视像;实际上,该各个区域标签在全景地图上的坐标均已被预先储存,在全景视像或区域视像上定位相应的视像切换标签时,仅需将全景视像或区域视像的中心对准该视像切换标签所在的坐标即可。
具体地,将自定义标签关联至全景地图的坐标,具体方法包括:
S1、确定被添加自定义标签的视频对象。
本步骤中,该视频对象具体为全景视像或区域视像中的视频对象(例如货柜、车辆、人员等),其通过图像识别技术而获取。
S2、获取视频对象在全景视像或区域视像中的ptz值和视场角。
其中,ptz即Pan/Tilt/Zoom,其代表全景视像采集设备和区域视像采集设备的水平角度、上下角度和变焦倍数。
S3、依据视频对象的ptz值和视场角,计算获得视频对象在全景视像或区域视像中的xy值。
S4、将视频对象在全景视像或区域视像中的xy值关联为全景地图的坐标。
具体地,识别被选择的集装箱身份,具体方法包括:
Sa、根据用户所选择的集装箱,获取集装箱的图像。
本步骤中,可以将用户在全景视像或区域视像中框选的图像,截取一帧后,直接作为集装箱的图像。
Sb、使用图像语义分割模型,对集装箱的图像进行箱面粗定位,以分割出图像中的集装箱号,并进行对图像进行预处理,得到箱型图像。
本步骤中,图像语义分割模型用于实现在像素级别上的分类,可采用TextonForest、基于随机森林分类器或深度学习方法等语义分割方法实现,本实施例是采用基于卷积神经网络的图像语义分割模型。
Sc、采用CPTN模型对箱型图像进行文本检测。
经过训练后的CPTN模型,可以进行不定长序列文本检测,通过该CPTN模型可以检测集装箱箱面上的集装箱号。
Sd、采用CRNN模型对文本检测的所有结果进行OCR识别。
CRNN为端到端文字识别模型,该模型不需要字符分割,且可以识别任意长度的序列。
Se、将识别结果按照集装箱身份格式进行正则化,输出最终的集装箱身份。
本实施例的基于5G通信传输的海关口岸综合监控指挥系统,能够通过多位点视频采集模块采集全景视像和区域视像,通过监控指挥模块实现全景视像和区域视像的显示、全景地图的构建、不同的全景视像和区域视像之间的切换、显示海关业务数据、添加和管理自定义标签、集装箱身份识别及海关业务数据读取的功能;其实现了对海关口岸的大范围、立体化监控,使海关机构易于实时掌握海关口岸的现场情况,并且通过与海关业务数据库模块的联动,使海关机构能够在监控指挥模块上实时查看各项海关业务数据,使海关机构能够更优质高效地开展行政执法活动。
如图2或图3所示,本实施例的基于5G通信传输的海关口岸综合监控指挥系统,由于其监控指挥模块由相互通信连接的后台服务器和前台终端构成,故而,其能够通过海关内部网络,与已建成的海关业务管理系统建立连接,例如已有的视频监控系统、车辆识别系统、单兵管理系统、地磅管理系统、装卸管理系统、运维管理系统以及包含有集装箱感知模块和地磅感知模块的物联感知系统。
实施例二
本实施例提供一种基于5G通信传输的海关口岸综合监控指挥方法,其应用了实施例一中记载的基于5G通信传输的海关口岸综合监控指挥系统。
本实施例的基于5G通信传输的海关口岸综合监控指挥方法,包括:
在海关口岸的至少一个全景区域中采集全景视像、在海关口岸的至少一个局部区域中采集区域视像、以5G通信传输的方式输出全景视像和区域视像;
实时接收并显示全景视像和区域视像;
利用全景视像和区域视像构成海关口岸的全景地图;
在全景地图中添加视像切换标签;
根据用户对视像切换标签的操作而显示相应的全景视像或区域视像;
在全景地图上叠加显示海关业务数据库中的海关业务数据;
支持用户在全景视像或区域视像中选择集装箱、以动态方式追踪及追焦被选择的集装箱、识别被选择的集装箱身份,以及,根据集装箱身份,在全景视像和/或区域视像上叠加显示与集装箱关联的海关业务数据;以及,
支持用户向海关工作人员的终端发送集结指示、与集结指示关联的位置信息以及与集结指示关联的事件信息。
其中,全景区域可以为海关口岸中视野良好的位置,例如高位监控点、高楼顶部以及通信基站安装位等,全景视像可以反映海关口岸的全景、整体场景或者大范围场景;局部区域则为分布在海关口岸各处的卡口功能区、地磅功能区、泊位功能区、查验场功能区以及堆场功能区等节点位置,区域视像可以反映上述区域的场景;全景视像和区域视像采用统一的坐标系,与地图坐标关联后,即可构建出由全景视像和区域视像构成的全景地图。
具体地,海关业务数据可以部署在单个数据库,也可以部署在多个数据库,还可以部署在分布式数据库,同样地,上述数据库的数据库服务器可以布局为一台、多台以及异地服务器系统;海关业务数据具体包括关港信息数据、海关通关数据、地磅管理数据以及装卸货管理数据等海关业务数据。
实时接收并显示全景视像和区域视像、利用全景视像和区域视像构成海关口岸的全景地图、在全景地图中添加视像切换标签、根据用户对视像切换标签的操作而显示相应的全景视像或区域视像,以及,在全景地图上叠加显示海关业务数据库中的海关业务数据,可以由一监控指挥模块来承担,该监控指挥模块由相互通信连接的后台服务器和前台终端构成;后台服务器用于处理、转发、管理以及储存来自多位点视频采集模块和海关业务数据库模块的数据,例如全景视像、区域视像以及海关业务数据;前台终端即为人机交互设备,例如个人计算机、多联屏监控指挥系统以及智能手机或平板电脑等便携式终端;实际上,前台终端用于显示全景视像、区域视像和全景地图、叠加显示海关业务数据,以及,支持用户的各种交互操作。
本实施例的基于5G通信传输的海关口岸综合监控指挥方法,实现了对海关口岸的大范围、立体化监控,使海关机构易于实时掌握海关口岸的现场情况,并且通过与海关业务数据库模块的联动,使海关机构能够在监控指挥模块上实时查看各项海关业务数据,使海关机构能够更优质高效地开展行政执法活动。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。
Claims (10)
1.一种基于5G通信传输的海关口岸综合监控指挥系统,其特征在于,包括:
多位点视频采集模块,用于在海关口岸的至少一个全景区域中采集全景视像、在所述海关口岸的至少一个局部区域中采集区域视像,以及,以5G通信传输的方式输出所述全景视像和所述区域视像;
海关业务数据库模块,用于储存、管理和读取经过所述海关口岸的海关业务数据;
监控指挥模块,用于实时接收并显示所述全景视像和所述区域视像、利用所述全景视像和所述区域视像构成所述海关口岸的全景地图、在所述全景地图中添加视像切换标签、根据用户对所述视像切换标签的操作而显示相应的全景视像或区域视像,以及,在所述全景地图上叠加显示所述海关业务数据;
集装箱身份识别模块,用于支持用户在所述监控指挥模块所显示的全景视像或区域视像中选择集装箱、以动态方式追踪及追焦被选择的集装箱、识别被选择的集装箱身份,以及,根据所述集装箱身份,在所述全景视像和/或所述区域视像上叠加显示与所述集装箱关联的海关业务数据;以及,
智能单兵调度模块,用于向海关工作人员的终端发送集结指示、与所述集结指示关联的位置信息以及与所述集结指示关联的事件信息。
2.根据权利要求1所述的基于5G通信传输的海关口岸综合监控指挥系统,其特征在于:还包括标签添加及管理模块;
所述标签添加及管理模块用于对所述全景视像和所述区域视像中的视频对象添加自定义标签、管理所述自定义标签、将所述自定义标签关联至所述全景地图的坐标、搜索所述自定义标签,以及,根据所述自定义标签在所述全景地图上的坐标,在所述全景视像或所述区域视像上定位所述自定义标签。
3.根据权利要求2所述的基于5G通信传输的海关口岸综合监控指挥系统,其特征在于:所述标签添加及管理模块还用于在所述全景视像、所述区域视像、所述全景视像的部分区域以及所述区域视像的部分区域添加区域标签、将所述区域标签结合为区域列表,以及,根据用户对所述区域列表的操作切换至与所述区域标签对应的全景视像或区域视像。
4.根据权利要求2所述的基于5G通信传输的海关口岸综合监控指挥系统,其特征在于:将所述自定义标签关联至所述全景地图的坐标,具体方法包括:
S1、确定被添加所述自定义标签的视频对象;
S2、获取所述视频对象在所述全景视像或所述区域视像中的ptz值和视场角;
S3、依据所述视频对象的ptz值和视场角,计算获得所述视频对象在所述全景视像或所述区域视像中的xy值;
S4、将所述视频对象在所述全景视像或所述区域视像中的xy值关联为所述全景地图的坐标。
5.根据权利要求2所述的基于5G通信传输的海关口岸综合监控指挥系统,其特征在于:所述自定义标签为文本标签、图片标签、文档标签、语音标签、录像标签以及混合标签中的至少一种。
6.根据权利要求1所述的基于5G通信传输的海关口岸综合监控指挥系统,其特征在于:识别被选择的集装箱身份,具体方法包括:
Sa、根据用户所选择的集装箱,获取所述集装箱的图像;
Sb、使用图像语义分割模型,对所述集装箱的图像进行箱面粗定位,以分割出所述图像中的集装箱号,并进行对所述图像进行预处理,得到箱型图像;
Sc、采用CPTN模型对所述箱型图像进行文本检测;
Sd、采用CRNN模型对文本检测的所有结果进行OCR识别;
Se、将识别结果按照集装箱身份格式进行正则化,输出最终的集装箱身份。
7.根据权利要求1所述的基于5G通信传输的海关口岸综合监控指挥系统,其特征在于:所述多位点视频采集模块包括:
全景视像采集设备,其布设在所述海关口岸的至少一个全景区域,用于采集该全景区域的全景视像并以5G通信传输的方式实时传送至所述监控指挥模块;
区域视像采集设备,其布设在所述海关口岸的至少一个局部区域,用于采集该局部区域的区域视像并以5G通信传输的方式实时传送至所述监控指挥模块。
8.根据权利要求7所述的基于5G通信传输的海关口岸综合监控指挥系统,其特征在于:所述监控指挥模块还用于分别控制所述全景视像采集设备和所述区域视像采集设备进行旋转、变焦以及切换日视/夜视模式,以分别对所述全景视像和所述区域视像进行旋转、缩放以及切换日视/夜视模式。
9.根据权利要求7所述的基于5G通信传输的海关口岸综合监控指挥系统,其特征在于:还包括视像采集设备定位模块;
所述视像采集设备定位模块用于根据用户输入的全景视像采集设备或区域视像采集设备之名称,在所述全景视像或所述区域视像上定位相应的视像切换标签。
10.一种基于5G通信传输的海关口岸综合监控指挥方法,其特征在于,包括:
在海关口岸的至少一个全景区域中采集全景视像、在所述海关口岸的至少一个局部区域中采集区域视像、以5G通信传输的方式输出所述全景视像和所述区域视像;
实时接收并显示所述全景视像和所述区域视像;
利用所述全景视像和所述区域视像构成所述海关口岸的全景地图;
在所述全景地图中添加视像切换标签;
根据用户对所述视像切换标签的操作而显示相应的全景视像或区域视像;
在所述全景地图上叠加显示海关业务数据库中的海关业务数据;
支持用户在所述全景视像或所述区域视像中选择集装箱、以动态方式追踪及追焦被选择的集装箱、识别被选择的集装箱身份,以及,根据所述集装箱身份,在所述全景视像和/或所述区域视像上叠加显示与所述集装箱关联的海关业务数据;以及,
支持用户向海关工作人员的终端发送集结指示、与所述集结指示关联的位置信息以及与所述集结指示关联的事件信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310372866.4A CN116389688A (zh) | 2023-04-10 | 2023-04-10 | 基于5g通信传输的海关口岸综合监控指挥系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310372866.4A CN116389688A (zh) | 2023-04-10 | 2023-04-10 | 基于5g通信传输的海关口岸综合监控指挥系统及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116389688A true CN116389688A (zh) | 2023-07-04 |
Family
ID=86965293
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310372866.4A Pending CN116389688A (zh) | 2023-04-10 | 2023-04-10 | 基于5g通信传输的海关口岸综合监控指挥系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116389688A (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000050238A (ja) * | 1998-07-27 | 2000-02-18 | Matsushita Electric Ind Co Ltd | 監視カメラ装置 |
JP2008092471A (ja) * | 2006-10-04 | 2008-04-17 | Central Res Inst Of Electric Power Ind | 対話型動画像監視方法、対話型動画像監視装置および対話型動画像監視プログラム |
US20080106594A1 (en) * | 2006-11-07 | 2008-05-08 | The Board Of Trustees Of The Leland Stanford Jr. University | System and method for tagging objects in a panoramic video and associating functions and indexing panoramic images with same |
KR20110037404A (ko) * | 2009-10-06 | 2011-04-13 | 한국해양연구원 | 항만 통합 보안 감시 운영 시스템 |
JP2014223964A (ja) * | 2013-05-16 | 2014-12-04 | 三井造船株式会社 | コンテナターミナルにおける海運貨物運送支援システム |
US20150239685A1 (en) * | 2013-03-07 | 2015-08-27 | Qodebox Inc | Computer-implemented container terminal management system and method |
CN108986226A (zh) * | 2017-06-01 | 2018-12-11 | Sk普兰尼特有限公司 | 用于提供递送物品信息的方法及其设备 |
CN111563500A (zh) * | 2020-04-10 | 2020-08-21 | 福建电子口岸股份有限公司 | 一种箱号识别方法和装置 |
CN111768169A (zh) * | 2020-06-19 | 2020-10-13 | 中国舰船研究设计中心 | 一种公务船舶海上编队综合指挥系统 |
CN113642999A (zh) * | 2021-08-18 | 2021-11-12 | 南京市电子口岸有限公司 | 一种新型的海关自助验核方法及系统 |
CN114286062A (zh) * | 2022-03-03 | 2022-04-05 | 天津港第二集装箱码头有限公司 | 基于全景拼接和视频ai的自动化码头数字舱系统 |
-
2023
- 2023-04-10 CN CN202310372866.4A patent/CN116389688A/zh active Pending
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000050238A (ja) * | 1998-07-27 | 2000-02-18 | Matsushita Electric Ind Co Ltd | 監視カメラ装置 |
JP2008092471A (ja) * | 2006-10-04 | 2008-04-17 | Central Res Inst Of Electric Power Ind | 対話型動画像監視方法、対話型動画像監視装置および対話型動画像監視プログラム |
US20080106594A1 (en) * | 2006-11-07 | 2008-05-08 | The Board Of Trustees Of The Leland Stanford Jr. University | System and method for tagging objects in a panoramic video and associating functions and indexing panoramic images with same |
KR20110037404A (ko) * | 2009-10-06 | 2011-04-13 | 한국해양연구원 | 항만 통합 보안 감시 운영 시스템 |
US20150239685A1 (en) * | 2013-03-07 | 2015-08-27 | Qodebox Inc | Computer-implemented container terminal management system and method |
JP2014223964A (ja) * | 2013-05-16 | 2014-12-04 | 三井造船株式会社 | コンテナターミナルにおける海運貨物運送支援システム |
CN108986226A (zh) * | 2017-06-01 | 2018-12-11 | Sk普兰尼特有限公司 | 用于提供递送物品信息的方法及其设备 |
CN111563500A (zh) * | 2020-04-10 | 2020-08-21 | 福建电子口岸股份有限公司 | 一种箱号识别方法和装置 |
CN111768169A (zh) * | 2020-06-19 | 2020-10-13 | 中国舰船研究设计中心 | 一种公务船舶海上编队综合指挥系统 |
CN113642999A (zh) * | 2021-08-18 | 2021-11-12 | 南京市电子口岸有限公司 | 一种新型的海关自助验核方法及系统 |
CN114286062A (zh) * | 2022-03-03 | 2022-04-05 | 天津港第二集装箱码头有限公司 | 基于全景拼接和视频ai的自动化码头数字舱系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109657025B (zh) | 现场勘察信息收集系统及现场勘察管理系统 | |
CN111612933A (zh) | 基于边缘云服务器的增强现实智能巡检系统 | |
CN101577048B (zh) | 景区人员、车辆管理系统 | |
CN106331633A (zh) | 一种多种监控资源显示及快速调阅的方法和系统 | |
US11805202B2 (en) | Real-time crime center solution with dispatch directed digital media payloads | |
CN112185121A (zh) | 一种基于5g的交通精准执法方法及设备 | |
CN103986772A (zh) | 一种基于物联网和云计算的部队管理系统 | |
CN115797125B (zh) | 一种乡村数字化智慧服务平台 | |
EP4329294A1 (en) | Crime center system providing video-based object tracking using an active camera and a 360-degree next-up camera set | |
CN114187541A (zh) | 一种面向自定义业务场景的智能视频分析的方法和存储设备 | |
CN106780827A (zh) | 车辆运输监控系统 | |
CN111951390A (zh) | 一种警情显示方法、系统、装置和存储介质 | |
CN113888126A (zh) | 一种油气管道巡检管理系统 | |
CN106372788A (zh) | 一种信息融合调度的方法及系统 | |
CN116389688A (zh) | 基于5g通信传输的海关口岸综合监控指挥系统及方法 | |
CN114071070A (zh) | 一种基于智慧人脸识别及增强现实的动态监控预警系统 | |
CN103345721A (zh) | 应用于便携式现场应急装备的协同会商系统及方法 | |
CN114255425A (zh) | 一种全域视频联网系统及方法 | |
CN111695065A (zh) | 一种警务信息可视化系统、方法、装置及存储介质 | |
CN111382697A (zh) | 影像数据处理方法及第一电子设备 | |
CN118212576A (zh) | 一种基于阵列计算视觉的高铁站旅客安全监测方法 | |
CN214225705U (zh) | 5g可视化智能ai音视频调度指挥系统 | |
Joshi et al. | A decision support framework to conceptualize the impact of 5G on smart city ecosystem | |
CN114245056A (zh) | 一种基于风勘软件的智能勘测方法及系统 | |
CN116567175A (zh) | 基于多场景融合的轨道交通单兵系统及应急处理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |