CN108334831A - 一种监测图像处理方法、监测终端及系统 - Google Patents

一种监测图像处理方法、监测终端及系统 Download PDF

Info

Publication number
CN108334831A
CN108334831A CN201810077213.2A CN201810077213A CN108334831A CN 108334831 A CN108334831 A CN 108334831A CN 201810077213 A CN201810077213 A CN 201810077213A CN 108334831 A CN108334831 A CN 108334831A
Authority
CN
China
Prior art keywords
roi
compression ratio
image
monitoring
regions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810077213.2A
Other languages
English (en)
Inventor
任炬
郭云镝
张德宇
刘青青
张尧学
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Central South University
Original Assignee
Central South University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Central South University filed Critical Central South University
Priority to CN201810077213.2A priority Critical patent/CN108334831A/zh
Publication of CN108334831A publication Critical patent/CN108334831A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/06Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04Protocols for data compression, e.g. ROHC

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种监测图像处理方法、监测终端及系统,方法包括:S1.获取图像,通过预设的RoI提取模型将所述图像提取为RoI区域和非RoI区域;S2.对所述RoI区域以预设的第一压缩率进行压缩,对所述非RoI区域以预设的第二压缩率进行压缩,所述第一压缩率小于所述第二压缩率;S3.将压缩后的所述RoI区域和非RoI区域发送给外部设备进行图像识别。本发明具有可大大降低数据传输量,网络要求低,极大的降低网络成本,提高图像检测的效率,响应速度快,检测精度高等优点。

Description

一种监测图像处理方法、监测终端及系统
技术领域
本发明涉及图像目标检测领域,尤其涉及一种监测图像处理方法、监测终端及系统,尤其适用于物联网的分布式监控系统的目标检测。
背景技术
智能视频监控技术是在计算机视觉和图像处理技术上,结合其它相关技术和理论发展起来的一个较新的研究领域,旨在利用计算机或智能处理单元的数据分析能力,自动实现视频场景中静态或动态实物的感知、描述以及分析,满足日常生产、生活中智能安防、智能交通以及城市智慧化建设等多领域的需要。
图像目标检测系统从计算模式上区分集中式和分布式两种:
1)集中式图像目标检测系统
集中式目标检测系统都是通过将摄像头或相机记录的高清视频或照片实时地传送到监控中心进行集中式的远程监视和管理。然而,实时的视频和照片传送会持续产生大规模的数据流,有统计数据显示,监控8通道高速公路的车流量状况需要高达40Gb/s的数据传输速度,因此,过去多通过铺设高成本的专用光纤网络来满足监控应用中多媒体数据传输的高吞吐量需求。
随着人工智能的发展,越来越多的智能视频监控应用利用机器学习的知识来增强其功能,例如,目标检测和目标追踪。为了从大量的多媒体数据中获取有用信息,人们往往将数据全部上传到云端去进行庞大而复杂的数据计算。而物联网时代的到来,使得移动设备和物联网服务出现地爆炸式增长,据统计,2020年预计将有超过500亿的联网设备,每年将会产生44ZB的数据。移动终端和无线服务无时无刻产生的海量数据给云端带来了艰巨的挑战,若仍将这么多设备、传感器产生的数据全部传送到云端,会给网络通信带来巨大的负担,同时云端的计算能力同样很难满足海量数据持续增长的需要。而且数据中心离用户距离较远,数据传输颇受带宽等因素的限制。而实时性要求高的计算服务,需要等待远端云数据中心的反馈,通常这样会引起长距离往返延时、网络拥塞、服务质量下降等问题。
2)分布式图像目标检测系统
分布式图像目标检测系统,是多层次的系统,连接拍摄设备,边缘服务器甚至是云端。考虑到大多数监控终端的计算能力有限,监控终端一般进行完整的目标检测,监控终端只进行简单的图像预处理,再将处理后的数据传给边缘服务器,或者监控终端不对图像进行处理直接将原始数据传给边缘服务器。边缘服务器接受终端传送过来的数据,进行目标检测。若出现边缘服务器不能处理的情况,边缘服务器再请求云端进行辅助检测。
分布式图像目标检测系统,利用靠近物或数据源头的一侧边缘服务器,就近提供最近端服务。能产生更快的网络服务响应,满足行业在实时业务、应用智能、安全与隐私保护等方面的基本需求,同时可以极大地缓解云端的压力。
目前使用的智能监控应用大都属于集中式图像目标检测系统,还没有设计成熟的分布式图像目标检测系统。哈佛大学的Surat Teerapittayanon等人2017年在IEEE 37thInternational Conference on Distributed Computing Systems上提出了“DistributedDeep Neural Networks over the Cloud, the Edge and End Devices”利用了分布式的系统构架,但是只能对含有单个物体的图像进行分类,由于目标检测要求对图像中的物体进行分类和定位,所以上述系统不能算作严格意义上的分布式图像目标检测系统。
发明内容
本发明要解决的技术问题就在于:针对现有技术存在的技术问题,本发明提供一种可大大降低数据传输量,网络要求低,极大的降低网络成本,提高图像检测的效率,响应速度快,检测精度高的监测图像处理方法、监测终端及系统。
为解决上述技术问题,本发明提出的技术方案为:一种监测图像处理方法,包括如下步骤:
S1. 获取图像,通过预设的RoI提取模型将所述图像提取为RoI区域和非RoI区域;
S2. 对所述RoI区域以预设的第一压缩率进行压缩,对所述非RoI区域以预设的第二压缩率进行压缩,所述第一压缩率小于所述第二压缩率;
S3. 将压缩后的所述RoI区域和非RoI区域发送给外部设备进行图像识别;
所述RoI提取模型为根据目标驱动的RoI提取模型。
进一步地,还包括压缩率更新步骤S4:接收压缩率更新参数,更新所述第一压缩率和/或第二压缩率,所述压缩率更新参数为根据所述图像识别的结果所确定的参数。
进一步地,还包括RoI提取模型更新步骤S5:接收RoI参数,更新所述RoI提取模型;所述RoI参数为根据所述图像识别的结果所确定的参数。
一种监测终端,包括处理器和存储器,所述存储器上存储上图像处理程序,所述图像处理程序被所述处理器执行时实现如上任一项所述的监测图像处理方法的步骤。
一种监测终端,包括图像获取模块、图像提取模块、图像压缩模块和通信模块;
所述图像获取模块用于获取图像;
所述图像提取模块用于通过预设的RoI提取模型将所述图像提取为RoI区域和非RoI区域,所述RoI提取模型为根据目标驱动的RoI提取模型;
所述图像压缩模块用于对所述RoI区域以预设的第一压缩率进行压缩,对所述非RoI区域以预设的第二压缩率进行压缩,所述第一压缩率小于所述第二压缩率;
所述通信模块用于将压缩后的所述RoI区域和非RoI区域发送给外部设备进行图像识别。
进一步地,还包括修正模块,所述修正模块用于接收压缩率更新参数,更新所述第一压缩率和/或第二压缩率,所述压缩率更新参数为根据所述图像识别的结果所确定的参数。
进一步地,所述修正模块还用于接收RoI参数,更新所述RoI提取模型;所述RoI参数为根据所述图像识别的结果所确定的参数。
一种监测图像处理系统,包括如上任一项所述的监测终端和图像处理服务器;所述图像处理服务器用于对压缩后的RoI区域和非RoI区域进行图像识别;所述监测终端和所述图像处理服务器通过网络连接。
进一步地,所述图像处理服务器根据图像识别结果确定压缩率更新参数,并将所述压缩率更新参数发送至所述监测终端;所述监测终端接收压缩率更新参数,更新所述第一压缩率和/或第二压缩率,所述压缩率更新参数为根据所述图像识别的结果所确定的参数;
所述图像处理服务器根据图像识别结果确定RoI参数,并将所述RoI参数发送至所述监测终端;所述监测终端接收RoI参数,更新所述RoI提取模型;所述RoI参数为根据所述图像识别的结果所确定的参数。
进一步地,所述监测终端为多个,所述图像处理服务器为多个,所述任一监测终端通过网络与一台图像处理服务器连接,所述图像处理服务器之间通过网络连接。
与现有技术相比,本发明的优点在于:
1、本发明将监测图像进行RoI区域提取,对RoI区域和非RoI区域以不同的压缩率进行压缩传送,监测终端根据对监测图像的识别结果调整压缩率,一方面保证了压缩后的图像满足图像识别的要求,另一方面,又大大降低了图像的大小,大大降低了网络的数据传输量,降低了对网络带宽的要求,从而极大的降低了网络建设成本。
2、本发明根据图像识别的结果动态的调整RoI提取模型参数,使得所提取出来的RoI区域既覆盖了目标,又不包含过多的背景,使得在保证满足图像识别要求的基础上RoI区域的面积最小,从而降低监测图像的数据量。
3、本发明根据图像识别的结果动态的调整RoI提取模型参数,更新所述RoI提取模型,使得RoI提取模型具有学习能力,能够准确划分监测图像中新出现的未知目标的RoI区域,进一步提高RoI提取的准确性。
附图说明
图1为本发明具体实施例流程示意图。
图2为本发明具体实施例数据流转示意图。
图3为本发明具体实施例结构示意图。
图4为本发明具体实施例RoI区域示意图。
具体实施方式
以下结合说明书附图和具体优选的实施例对本发明作进一步描述,但并不因此而限制本发明的保护范围。
如图1和图2所示,本实施例的监测图像处理方法,包括如下步骤:S1. 获取图像,通过预设的RoI提取模型将图像提取为RoI区域和非RoI区域;S2. 对RoI区域以预设的第一压缩率进行压缩,对非RoI区域以预设的第二压缩率进行压缩,第一压缩率小于第二压缩率;S3. 将压缩后的RoI区域和非RoI区域发送给外部设备进行图像识别;RoI提取模型为根据目标驱动的RoI提取模型。在本实施例中,图像识别是指对图像中的目标进行检测,识别出每个目标。
在本实施例中,以智能监测的一个具体应用场景为例进行说明,如图3所示,对于每一个监测区域(如小区、车站、收费站等)设置有多个监测终端和一个图像识别服务器,监测终端与图像识别服务器之间通过网络连接,监测终端用于采集获取监测图像,图像识别服务器用于对本监测区域内监测终端所采集的监测图像进行识别。不同监测区域的图像识别服务器通过网络连接。本实施例中,根据目标驱动的RoI提取模型是指根据监测终端的应用场景而进行大量训练得到的RoI提取模型,如针对小区人行通道的监测终端,其RoI提取模型是通过大量人行通道的图像进行训练,对于初始训练好的RoI提取模型,能够很好的将图像中的行人作为RoI区域提取出来,而对于不会出现在人行通道的飞机,则不会作为RoI区域提取出来。本实施例中,RoI提取模型的训练过程为选择大量的人行通道的图像,通过人工等方式将行人作为RoI目标进行标记,再将标记好的图像输入训练模型,从而是训练出针对人行通道的RoI提取模型。同理,对收费端进行监测的RoI提取模型,其RoI目标主要是各种类型的车辆,通过训练后的RoI模型,则可以很好的对车辆进行RoI区域的提取。RoI提取模型的训练不在监测终端上进行,同时, RoI提取模型根其应用场景调度相关,只需要对该场景相关的目标进行RoI提取,所训练好的RoI提取模型可以做实现轻量化,满足可在监测终端上只具有低运行间、低能耗、低运算能力的情况下运行。
监测终端采集获得监测图像,并通过预设在监测终端上的RoI提取模型对监测图像进行RoI区域提取,得到RoI区域和非RoI区域。监测终端将RoI区域以较小压缩率的第一压缩率进行压缩,压缩后的图像仍具有较高的清晰度,图像失真较小,但压缩后的数据量仍然较大。将非RoI区域以较大压缩率的第二压缩率进行压缩,压缩后的图像相对于以第一压缩率压缩的RoI区域,清晰度较低,图像失真较大,但压缩后的图像数据量较小。通过对RoI区域和非RoI区域进行有差别的压缩,一方面既可以保证监测图像的RoI区域的清晰度,保证图像识别具有较高的精度、准确性,另一方面又可以使得监测图像的数据量大大的降低,从而只需要较小的带宽需求,通过较短的时间就可以通过网络将监测终端采集的监测图像发送至图像识别服务器。
在本实施例中,监测终端的RoI提取模型是一任务驱动的RoI提取模型,是通过大量的现有图像进行机器学习、训练后得到的RoI提取模型。因此,对于监测终端采集获取得到的监测图像,通过该RoI提取模型,即可提取出监测图像中的RoI区域和非RoI区域。由于监测终端分别布设在不同的监测区域,监测的目标也各不相同,如布设小区人行通道的监测终端主要是对行人进行监测,因此,进行RoI提取时,监测图像中的人是RoI区域;而布设在车行通道的监测终端,如高速公路收费通道的监测终端,监测图像中的RoI区域不仅包括人的脸部区域,还包括车辆的车牌区域,或者是车辆区域。
在本实施例中,监测终端的RoI提取模型具体可采用多种不同的算法,如基于BING算法改进的RoI提取方法,BinaryNet等。对提取后的RoI区域和非RoI区域以不同的压缩率进行压缩,采用分层编码技术,具体可采用Maxshift,BbBShift,GBbBShft等。
在本实施例中,图像识别服务器上的图像识别模型为一个通过大量图像数据已经训练好的模型,如基于卷积神经网络的模型,具体可以是Faster R-CNN、YOLO、Mask R-CNN等。由于图像识别服务器按照监测区域布置,负责处理本监测区域中各监测终端所采集的监测图像,因此,在初始状态,图像识别服务器的图像识别模型可只针对该监测区域的常见目标类别进行训练,如布设在小区的图像识别服务器,其图像识别模型主要对人脸进行识别,识别出人员个体,而布设在高速公路收费站的图像识别服务器,其图像识别模型不仅用于人脸识别,还用于车辆识别,车牌识别。
在本实施例中,还包括压缩率更新步骤S4:接收压缩率更新参数,更新第一压缩率和/或第二压缩率,压缩率更新参数为根据图像识别的结果所确定的参数。图像识别服务器通过图像识别模型进行图像识别,当监测图像的清晰度不满足图像识别的要求时,如图像识别率低于预设的阈值时,图像识别服务器向监测终端发送压缩率更新参数,使得监测终端根据该压缩率更新参数降低第一压缩率和/或第二压缩率,通过降低压缩率来提高图像的清晰度;当图像识别率高于预设的阈值,但传输的数据量较大时,通过压缩率更新参数,使得监测终端提高第一压缩率和/或第二压缩率,通过提高压缩率来降低数据传输量,提高图像识别的实时性。
在本实施例中,还包括RoI提取模型更新步骤S5:接收RoI参数,更新RoI提取模型;RoI参数为根据图像识别的结果所确定的参数。由于监测图像的RoI区域具有较高的清晰度,RoI区域是图像识别的主要区域,图像识别服务器的识别结果与RoI区域的提取息息相关,因此,需要根据识别的结果动态的对RoI提取模型进行调整。如图4所示,当提取得到的RoI区域过大,图像识别的目标在RoI区域中的占比较小,可通过调整RoI提取模型,缩小RoI区域的范围,调整前对目标1的RoI区域为RoI-1,调整后对目标1的RoI区域为RoI-2。从而一方面可以缩小监测图像传输的数据量,另一方面可以提高图像识别的效率。当提取得到的RoI区域过小,即RoI区域没有完整的目标,此时,需要扩大RoI区域的范围,以保证图像识别的精确性,如图4中,调整前对目标1的RoI区域为RoI-3,调整后对目标1的RoI区域为RoI-2。或者,在非RoI区域中发现有需要识别的目标,此时,也需要更新RoI提取模型,以保证全部目标都在RoI区域中,如图4中,调整前并没有识别出目标2的RoI区域,调整后,对目标2的RoI区域为RoI-4。
在本实施例中,当识别到监测图像中存在未知目标时,将监测图像上传至云端进行识别,并接收云端识别的结果。当监测图像中没有被识别的区域的热力图的总分数大于预设的阈值时,则判断没有被识别的区域中包含有未知目标。图像识别服务器通过图像识别模型对监测图像进行目标识别,对于识别完成后,监测图像中没有被识别的区域,判断该没有被识别的区域的热力图的总分数是否大于预设的阈值,大于时判断该监测图像中仍然存在未识别的未知目标,否则判断该监测图像中不存在未知目标。当图像识别服务器判断监测图像中存在未知目标时,则将该监测图像上传到云端,通过云端的图像识别模型对监测图像进行识别,并接收云端返回的识别结果。由于云端相对于图像识别服务器,其计算能力更强大,可以构建更加强大的图像识别模型,因此,通过云端来识别图像识别服务器无法识别的目标,可以进一步提高识别的准确性和精度,同时,图像识别服务器只将无法识别的监测图像上传至云端,也很好的节约了云端保贵的资源,降低了云端的负荷,很好的达到了性能与效率的优化分配。
在本实施例中,一方面,云端接收各图像服务器无法识别的监测图像,识别出其中的未知目标;另一方面,云端通过收集各图像服务器的图像识别模型及数据,不断丰富自己的数据库,训练大模型。由于各图像识别服务器只负责本监测区域内监测图像的识别,其图像识别模型的训练并不完全一致,如对于卡车这一目标,对于小区的图像识别服务器,就是不能识别的未知目标,而对于高速收费站的图像识别服务器,就是可识别的目标。那么,当小区的图像识别服务器的监测图像中出现卡车时,由于小区的图像识别服务器无法识别出卡车,就需要将该监测图像上传到云端进行识别。在本实施例中,小区的图像识别服务器可从云端接收图像识别模型参数对自身的图像识别模型进行更新、训练。更新图像识别模型后,小区的图像识别服务器即可识别出卡车,无需要再将监测图像上传到云端进行识别,使得图像识别服务器具有新物体的识别能力。
在本实施例中,图像识别服务器可按照时间定时更新图像识别模型参数,也可以在出现未知目标时,或未知目标出现次数大于预设值时,才更新图像识别模型参数。同时,图像识别服务器可以从云端获取图像识别模型参数,也可以从其它图像识别服务器处获取图像识别模型参数。并且,图像识别服务器也可以自身的图像识别模型参数进行共享,分享给云端或其它图像识别服务器。
需要说明的是,在本实施例中,构建了监测终端、图像识别服务器和云端三级结构,当然,在实际工程应用中,也可以只构建监测终端和图像识别服务器两级结构,图像识别服务器通过网络互连,共享图像识别模型参数。本实施例的监测终端,包括处理器和存储器,存储器上存储上图像处理程序,图像处理程序被处理器执行时实现如上任一项的监测图像处理方法的步骤。
本实施例的监测终端,包括图像获取模块、图像提取模块、图像压缩模块和通信模块;图像获取模块用于获取图像;图像提取模块用于通过预设的RoI提取模型将图像提取为RoI区域和非RoI区域,RoI提取模型为根据目标驱动的RoI提取模型;图像压缩模块用于对RoI区域以预设的第一压缩率进行压缩,对非RoI区域以预设的第二压缩率进行压缩,第一压缩率小于第二压缩率;通信模块用于将压缩后的RoI区域和非RoI区域发送给外部设备进行图像识别。
在本实施例中,还包括修正模块,修正模块用于接收压缩率更新参数,更新第一压缩率和/或第二压缩率,压缩率更新参数为根据图像识别的结果所确定的参数。修正模块还用于接收RoI参数,更新RoI提取模型;RoI参数为根据图像识别的结果所确定的参数。
如图3所示,本实施例的监测图像处理系统,包括如上任一项的监测终端和图像处理服务器;图像处理服务器用于对压缩后的RoI区域和非RoI区域进行图像识别;监测终端和图像处理服务器通过网络连接。图像处理服务器根据图像识别结果确定压缩率更新参数,并将压缩率更新参数发送至监测终端;监测终端接收压缩率更新参数,更新第一压缩率和/或第二压缩率,压缩率更新参数为根据图像识别的结果所确定的参数;图像处理服务器根据图像识别结果确定RoI参数,并将RoI参数发送至监测终端;监测终端接收RoI参数,更新RoI提取模型;RoI参数为根据图像识别的结果所确定的参数。监测终端为多个,图像处理服务器为多个,任一监测终端通过网络与一台图像处理服务器连接,图像处理服务器之间通过网络连接。
上述只是本发明的较佳实施例,并非对本发明作任何形式上的限制。虽然本发明已以较佳实施例揭露如上,然而并非用以限定本发明。因此,凡是未脱离本发明技术方案的内容,依据本发明技术实质对以上实施例所做的任何简单修改、等同变化及修饰,均应落在本发明技术方案保护的范围内。

Claims (10)

1.一种监测图像处理方法,其特征在于:
S1. 获取图像,通过预设的RoI提取模型将所述图像提取为RoI区域和非RoI区域;
S2. 对所述RoI区域以预设的第一压缩率进行压缩,对所述非RoI区域以预设的第二压缩率进行压缩,所述第一压缩率小于所述第二压缩率;
S3. 将压缩后的所述RoI区域和非RoI区域发送给外部设备进行图像识别;
所述RoI提取模型为根据目标驱动的RoI提取模型。
2.根据权利要求1所述的监测图像处理方法,其特征在于,还包括压缩率更新步骤S4:接收压缩率更新参数,更新所述第一压缩率和/或第二压缩率,所述压缩率更新参数为根据所述图像识别的结果所确定的参数。
3.根据权利要求2所述的监测图像处理方法,其特征在于:还包括RoI提取模型更新步骤S5:接收RoI参数,更新所述RoI提取模型;所述RoI参数为根据所述图像识别的结果所确定的参数。
4.一种监测终端,其特征在于:包括处理器和存储器,所述存储器上存储上图像处理程序,所述图像处理程序被所述处理器执行时实现如权利要求1至3任一项所述的监测图像处理方法的步骤。
5.一种监测终端,其特征在于:包括图像获取模块、图像提取模块、图像压缩模块和通信模块;
所述图像获取模块用于获取图像;
所述图像提取模块用于通过预设的RoI提取模型将所述图像提取为RoI区域和非RoI区域,所述RoI提取模型为根据目标驱动的RoI提取模型;
所述图像压缩模块用于对所述RoI区域以预设的第一压缩率进行压缩,对所述非RoI区域以预设的第二压缩率进行压缩,所述第一压缩率小于所述第二压缩率;
所述通信模块用于将压缩后的所述RoI区域和非RoI区域发送给外部设备进行图像识别。
6.根据权利要求5所述的监测终端,其特征在于:还包括修正模块,所述修正模块用于接收压缩率更新参数,更新所述第一压缩率和/或第二压缩率,所述压缩率更新参数为根据所述图像识别的结果所确定的参数。
7.根据权利要求6所述的监测终端,其特征在于:所述修正模块还用于接收RoI参数,更新所述RoI提取模型;所述RoI参数为根据所述图像识别的结果所确定的参数。
8.一种监测图像处理系统,其特征在于:包括如权利要求4至7任一项所述的监测终端和图像处理服务器;所述图像处理服务器用于对压缩后的RoI区域和非RoI区域进行图像识别;所述监测终端和所述图像处理服务器通过网络连接。
9.根据权利要求8所述的监测图像处理系统,其特征在于:所述图像处理服务器根据图像识别结果确定压缩率更新参数,并将所述压缩率更新参数发送至所述监测终端;所述监测终端接收压缩率更新参数,更新所述第一压缩率和/或第二压缩率,所述压缩率更新参数为根据所述图像识别的结果所确定的参数;
所述图像处理服务器根据图像识别结果确定RoI参数,并将所述RoI参数发送至所述监测终端;所述监测终端接收RoI参数,更新所述RoI提取模型;所述RoI参数为根据所述图像识别的结果所确定的参数。
10.根据权利要求9所述的监测图像处理系统,其特征在于:所述监测终端为多个,所述图像处理服务器为多个,所述任一监测终端通过网络与一台图像处理服务器连接,所述图像处理服务器之间通过网络连接。
CN201810077213.2A 2018-01-26 2018-01-26 一种监测图像处理方法、监测终端及系统 Pending CN108334831A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810077213.2A CN108334831A (zh) 2018-01-26 2018-01-26 一种监测图像处理方法、监测终端及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810077213.2A CN108334831A (zh) 2018-01-26 2018-01-26 一种监测图像处理方法、监测终端及系统

Publications (1)

Publication Number Publication Date
CN108334831A true CN108334831A (zh) 2018-07-27

Family

ID=62925812

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810077213.2A Pending CN108334831A (zh) 2018-01-26 2018-01-26 一种监测图像处理方法、监测终端及系统

Country Status (1)

Country Link
CN (1) CN108334831A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110022463A (zh) * 2019-04-11 2019-07-16 重庆紫光华山智安科技有限公司 动态场景下实现视频感兴趣区域智能编码方法及系统
CN110617826A (zh) * 2019-09-29 2019-12-27 百度在线网络技术(北京)有限公司 车辆导航中高架桥区识别方法、装置、设备和存储介质
CN111402253A (zh) * 2020-04-03 2020-07-10 华东交通大学 融合边缘计算和深度学习的输变电设备状态在线监测方法
TWI711007B (zh) * 2019-05-02 2020-11-21 緯創資通股份有限公司 調整感興趣區域的方法與其運算裝置
CN113365335A (zh) * 2021-07-01 2021-09-07 苏州经贸职业技术学院 一种图像数据处理方法
US20220147773A1 (en) * 2020-11-06 2022-05-12 Electronics And Telecommunications Research Institute System for local optimization of object detector based on deep neural network and method of creating local database therefor
CN115170840A (zh) * 2022-09-08 2022-10-11 阿里巴巴(中国)有限公司 数据处理系统、方法和电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1804868A (zh) * 2006-01-19 2006-07-19 昆明利普机器视觉工程有限公司 机器自动图像识别方法及装置
CN101263546A (zh) * 2003-12-16 2008-09-10 富可视公司 识别和传输数据到图像显示器的方法、系统和装置
CN102647590A (zh) * 2012-04-17 2012-08-22 华为终端有限公司 图像压缩方法和装置
CN103297754A (zh) * 2013-05-02 2013-09-11 上海交通大学 一种监控视频自适应感兴趣区域编码系统
CN107071344A (zh) * 2017-01-22 2017-08-18 深圳英飞拓科技股份有限公司 一种大规模分布式监控视频数据处理方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101263546A (zh) * 2003-12-16 2008-09-10 富可视公司 识别和传输数据到图像显示器的方法、系统和装置
CN1804868A (zh) * 2006-01-19 2006-07-19 昆明利普机器视觉工程有限公司 机器自动图像识别方法及装置
CN102647590A (zh) * 2012-04-17 2012-08-22 华为终端有限公司 图像压缩方法和装置
CN103297754A (zh) * 2013-05-02 2013-09-11 上海交通大学 一种监控视频自适应感兴趣区域编码系统
CN107071344A (zh) * 2017-01-22 2017-08-18 深圳英飞拓科技股份有限公司 一种大规模分布式监控视频数据处理方法及装置

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110022463A (zh) * 2019-04-11 2019-07-16 重庆紫光华山智安科技有限公司 动态场景下实现视频感兴趣区域智能编码方法及系统
TWI711007B (zh) * 2019-05-02 2020-11-21 緯創資通股份有限公司 調整感興趣區域的方法與其運算裝置
CN110617826A (zh) * 2019-09-29 2019-12-27 百度在线网络技术(北京)有限公司 车辆导航中高架桥区识别方法、装置、设备和存储介质
CN111402253A (zh) * 2020-04-03 2020-07-10 华东交通大学 融合边缘计算和深度学习的输变电设备状态在线监测方法
CN111402253B (zh) * 2020-04-03 2023-04-07 华东交通大学 融合边缘计算和深度学习的输变电设备状态在线监测方法
US20220147773A1 (en) * 2020-11-06 2022-05-12 Electronics And Telecommunications Research Institute System for local optimization of object detector based on deep neural network and method of creating local database therefor
US12026231B2 (en) * 2020-11-06 2024-07-02 Electronics And Telecommunications Research Institute System for local optimization of object detector based on deep neural network and method of creating local database therefor
CN113365335A (zh) * 2021-07-01 2021-09-07 苏州经贸职业技术学院 一种图像数据处理方法
CN115170840A (zh) * 2022-09-08 2022-10-11 阿里巴巴(中国)有限公司 数据处理系统、方法和电子设备
CN115170840B (zh) * 2022-09-08 2022-12-23 阿里巴巴(中国)有限公司 数据处理系统、方法和电子设备

Similar Documents

Publication Publication Date Title
CN108334831A (zh) 一种监测图像处理方法、监测终端及系统
CN108270999A (zh) 一种目标检测方法、图像识别服务器及系统
CN107770263B (zh) 一种基于边缘计算的物联网终端安全接入方法及系统
CN111444848A (zh) 一种基于联邦学习的特定场景模型升级方法和系统
CN109819208A (zh) 一种基于人工智能动态监控的密集人群安防监控管理方法
CN112183471A (zh) 一种现场人员防疫口罩规范佩戴的自动检测方法及系统
CN113408087B (zh) 一种基于云边系统和视频智能分析的变电站巡视方法
CN110197128A (zh) 基于边缘计算与云端统筹的人脸识别架构设计方法
CN110084165A (zh) 基于边缘计算的电力领域开放场景下异常事件的智能识别与预警方法
CN103986910A (zh) 一种基于智能分析摄像机的客流统计方法和系统
CN109711318A (zh) 一种基于视频流的多人脸检测与跟踪方法
CN104820995A (zh) 一种面向大型公共场所的人流密度监测预警方法
CN104933424A (zh) 车辆及行人监测方法及装置
CN104994347A (zh) 一种智能安防视频监控系统及其检测处理方法
CN114998830A (zh) 一种变电站人员安全帽佩戴检测方法及系统
CN111178503A (zh) 面向移动终端的去中心化目标检测模型训练方法及系统
CN114913447B (zh) 基于场景识别的警务智慧指挥室系统及方法
US20230386327A1 (en) Methods and internet of things systems for managing traffic road cleaning in smart city
CN116319437A (zh) 一种网络连通性检测方法及装置
CN108009491A (zh) 一种解决快速背景运动中的目标物识别方法及系统
CN114359578A (zh) 病虫害识别智能终端应用方法及系统
CN110879990A (zh) 一种预计机场安检旅客排队等候时长的方法及其应用
CN111126411A (zh) 一种异常行为识别方法及装置
CN113963373A (zh) 一种基于视频图像动态检测与跟踪算法系统及方法
Cho et al. Object recognition network using continuous roadside cameras

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180727