CN110570614A - 一种视频监控系统及智能相机 - Google Patents

一种视频监控系统及智能相机 Download PDF

Info

Publication number
CN110570614A
CN110570614A CN201810570112.9A CN201810570112A CN110570614A CN 110570614 A CN110570614 A CN 110570614A CN 201810570112 A CN201810570112 A CN 201810570112A CN 110570614 A CN110570614 A CN 110570614A
Authority
CN
China
Prior art keywords
video data
video
camera
stream
intelligent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810570112.9A
Other languages
English (en)
Other versions
CN110570614B (zh
Inventor
李文伟
徐鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201810570112.9A priority Critical patent/CN110570614B/zh
Publication of CN110570614A publication Critical patent/CN110570614A/zh
Application granted granted Critical
Publication of CN110570614B publication Critical patent/CN110570614B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19617Surveillance camera constructional details
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19639Details of the system layout
    • G08B13/19645Multiple cameras, each having view on one of a plurality of scenes, e.g. multiple cameras for multi-room surveillance or for tracking an object by view hand-over
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19654Details concerning communication with a camera
    • G08B13/19656Network used to communicate with a camera, e.g. WAN, LAN, Internet
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665Details related to the storage of video surveillance data

Abstract

本发明实施例提供了一种视频监控系统及智能相机。其中,系统包括:多个网络相机组,所述多个网络相机组中每个网络相机组包括智能相机和非智能相机;在每个网络相机组中,所述非智能相机与所述智能相机通过预设局域网连接;所述非智能相机用于拍摄与所述非智能相机对应的第一监控点位,获取与第一监控点位对应的第一视频数据;并将所述第一视频数据发送至所属网络相机组内的所述智能相机;所述智能相机用于拍摄与所述智能相机对应的第二监控点位,获取与第二监控点位对应的第二视频数据;并对所述第二视频数据和所述第一视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果。该实施例可以有效降低因智能分析带来的带宽压力。

Description

一种视频监控系统及智能相机
技术领域
本发明涉及视频监控技术领域,特别是涉及一种视频监控系统及智能相机。
背景技术
为了实现对多个不同的监控点位进行视频监控,可以分别在这些监控点位部署网络相机,以拍摄这些监控点位的视频画面。在一些应用场景下,可能需要对这些视频画面进一步地进行智能分析,以得到满足用户实际需求的分析结果。
现有技术中,可以是由这些网络相机将拍摄得到的视频画面以视频流的形式发送至智能分析中心,并由智能分析中心对这些视频流进行智能分析。但是当部署了较多的网络相机时,智能分析中心可能会在同一时段接收到来自大量网络相机的视频流,对网络相机到智能分析中心之间的通信带宽造成较大的压力。
发明内容
本发明实施例的目的在于提供一种视频监控系统,以实现去除智能分析中心,降低视频监控系统对带宽的需求。具体技术方案如下:
在本发明实施例的第一方面,提供了一种视频监控系统,所述系统包括:
多个网络相机组,所述多个网络相机组中每个网络相机组包括智能相机和非智能相机;
在每个网络相机组中,所述非智能相机与所述智能相机通过预设局域网连接;
所述非智能相机用于拍摄与所述非智能相机对应的第一监控点位,获取与第一监控点位对应的第一视频数据;并将所述第一视频数据发送至所属网络相机组内的所述智能相机;
所述智能相机用于拍摄与所述智能相机对应的第二监控点位,获取与第二监控点位对应的第二视频数据;并对所述第二视频数据和所述第一视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果。
结合第一方面,在第一种可能的实现方式中,所述非智能相机用于对所述第一视频数据进行编码得到第一视频裸流;并按照所述非智能相机预设的第一数据封装协议,对所述第一视频流进行封装得到第一视频流;并将所述第一视频流发送至所属网络相机组内的所述智能相机,所述智能相机中预先设置有所述第一数据封装协议。
结合第一方面的第一种可能的实现方式,在第二种可能的实现方式中,所述智能相机包括主芯片和智能处理芯片,所述主芯片和所述智能处理芯片通过所述预设局域网、数据线、数据总线中的一种方式连接,所述主芯片接入所述预设局域网;
所述主芯片,用于对所述第二视频数据进行编码,得到第二视频裸流,并按照所述智能相机预设的第二数据封装协议,对所述第二视频裸流进行封装得到第二封装流;对所述第一视频流按照所述第一数据封装协议进行解封装得到所述第一视频裸流,并按照所述第二数据封装协议对所述第一视频裸流进行封装,得到第一封装流;并将所述第一封装流和所述第二封装流发送至所述智能处理芯片;
所述智能处理芯片,用于对所述第一封装流和所述第二封装流按照所述第二数据封装协议进行解封装,得到所述第一视频裸流和所述第二视频裸流;对所述第一视频裸流和所述第二视频裸流进行解码,得到所述第一视频数据和所述第二视频数据;对所述第一视频数据和所述第二视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果。
结合第一方面的第二种可能的实现方式,在第三种可能的实现方式中,所述智能处理芯片具体用于在所述对所述第一视频数据和所述第二视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果之前,调整第一视频数据和/或所述第二视频数据,使得所述第一视频数据的视频参数与所述第二视频数据的视频参数相同,所述视频参数包括:图像分辨率和帧率。
结合第一方面的第三种可能的实现方式,在第四种可能的实现方式中,所述智能处理芯片具体用于在所述对所述第一视频数据和所述第二视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果之前,将所述第一视频数据和所述第二视频数据的图像分辨率同步到最低分辨率,并将所述第一视频数据和所述第二视频数据的帧率同步到最低帧率,所述最低分辨率为所述第一视频数据和所述第二视频数据的图像分辨率的最小值,所述最低帧率为所述第一视频数据和所述第二视频数据的帧率的最小值。
结合第一方面的第一种可能的实现方式,在第五种可能的实现方式中,所述智能处理芯片具体用于将所述第一视频数据中的视频帧和所述第二视频数据中的视频拼接,得到拼接视频数据,所述拼接视频数据的每一个视频帧为所述第一视频数据的一个视频帧和所述第二视频数据的一个视频帧拼接得到的;
对所述拼接视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果。
结合第一方面的第二种可能的实现方式,在第六种可能的实现方式中,所述系统还包括:
终端设备,用于从所述智能相机获取:预览视频流、所述第一视频数据的分析结果、所述第二视频数据的分析结果中的至少一个,所述预览视频流为所所述第一封装流或者所述第二封装流。
结合第一方面的第六种可能的实现方式,在第七种可能的实现方式中,所述智能相机还用于向所述终端设备发送连接状态信息,所述连接状态信息用于表示所述智能相机的可连接相机,所述可连接相机为所述系统中能够接入所述预设局域网并且没有接入所述预设局域网的非智能相机;
所述终端设备还用于根据所述连接状态信息,调整所述智能相机所属的网络相机组所包括的非智能相机。
结合第一方面的第七种可能的实现方式,在第八种可能的实现方式中,所述终端设备具体用于在接收到所述连接状态信息之后,在预设展示界面展示所述连接状态信息,获取输入的相机选择信息,所述选择信息包括至少一个所述可连接相机的IP地址,控制所述IP地址所表示的非智能相机接入所述预设局域网。
结合第一方面的第七种可能的实现方式,在第九种可能的实现方式中,所述智能相机包括网络交换芯片,所述交换芯片通过内网接口与所述主芯片和所述非智能相机连接,以构成所述预设局域网;并通过外网接口与所述终端设备连接,实现所述智能相机与所述终端设备之间的数据交互。
结合第一方面,在第十种可能的实现方式中,所述系统还包括报警处理中心;
所述智能相机还用于基于所述第一视频数据的分析结果和所述第二视频数据的分析结果,按照预设的报警规则,确定是否需要报警;如果确定需要报警,向所述报警处理中心发送报警信息。
在本发明实施例提供的第二方面,提供了一种智能相机,所述智能相机包括:
主芯片、网络交换芯片、智能处理芯片、图像传感器;
所述主芯片与所述网络交换芯片电连接,并且与所述图像传感器电连接;
所述网络交换芯片与所述主芯片电连接,并且与所述智能处理芯片电连接,用于实现所述主芯片与所述智能处理芯片之间的数据交互,并且用于接收非智能相机发送的第一视频流,所述第一视频流为所述非智能相机对采集到的第一视频数据进行编码并按照第一数据封装协议封装得到的;并将所述第一视频流发送至所述主芯片;
所述图像传感器用于拍摄与所述智能相机对应的监控点位,得到第二视频数据;并将所述第二视频数据发送至所述主芯片;
所述主芯片用于对所述第二视频数据进行编码得到第二视频裸流,并按照第二数据封装协议对所述第二视频裸流进行封装得到第二封装流;按照所述第一数据封装协议对所述第一视频流进行解封装得到第一视频裸流,并按照所述第二数据封装协议对所述第一视频裸流进行封装得到第一封装流;将所述第一封装流和所述第二封装流发送至所述智能处理芯片;
所述智能处理芯片用于按照所述第二封装协议对所述第一封装流和所述第二封装流进行解封装得到所述第一视频裸流和所述第二视频裸流,并对所述第一视频裸流和所述第二视频裸流进行解码得到所述第一视频数据和所述第二视频数据;并对所述第一视频数据和所述第二视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果。
本发明实施例提供的一种视频监控系统及智能相机,可以去除智能分析中心,转而由系统中的多个智能相机执行系统中非智能相机产生的智能分析任务,每个智能相机只需要承担系统中部分非智能相机产生的智能分析任务,即每个智能相机最多只需要接受部分非智能相机拍摄得到的第一视频数据,面临的带宽压力相对较小。当然,实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的视频监控系统的一种结构示意图;
图2为本发明实施例提供的多输入智能分析方法的一种流程示意图;
图3为本发明实施例提供的多输入智能分析方法的另一种流程示意图;
图4为本发明实施例提供的多输入智能分析方法的另一种流程示意图;
图5为本发明实施例提供的视频监控系统的另一种结构示意图;
图6为本发明实施例提供的视频监控系统的另一种结构示意图;
图7为本发明实施例提供的智能相机的一种结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,图1所示为本发明实施例提供的视频监控系统的一种结构示意图,可以包括:
多个网络相机组110,其中每个网络相机组110中包括一个智能相机111,以及至少一个非智能相机112。
其中,每个网络相机组中,智能相机为搭载有智能处理芯片的网络相机,非智能相机为未搭载有智能处理芯片的网络相机,智能处理芯片可以是整合多颗CPU核心与多颗GPU核心的芯片,相对于相机中用于运行软件主业务的主芯片,具有更强大图像处理能力,在深度学习和执行智能分析算法方面具有较大优势。对于不同的网络相机组110所包括的非智能相机112的数目可以不同。并且智能相机111通过一个预设局域网与非智能相机112连接,该预设局域网可以通过智能相机111中的网络交换芯片构建的一个内部局域网。
每个非智能相机112,用于拍摄与该非智能相机112对应的第一监控点位,得到第一视频数据,并将第一视频数据发送该非智能相机112所属的网络相机组110内的智能相机111。其中,不同的智能相机112可以对应于相同的第一监控点位。
每个智能相机111,用于拍摄与该智能相机111对应的第二监控点位,得到第二视频数据,并对第二视频数据和第一视频数据进行智能分析,得到第二视频数据和第一视频数据的分析结果。其中,一个智能相机111所处理的第一视频数据,为该智能相机111所属的网络相机组110所包括的所有非智能相机112产生的,智能相机111可以和非智能相机112对应于相同的监控点位,不同的智能相机111也可以对应于相同的第二监控点位,在一种优选的实施例中,不同的智能相机111对应于不同的第二监控点位,可以理解的是智能相机111的成本往往高于非智能相机112的成本,一个智能相机111的处理能力在绝大部分情况下可以完成邻近的非智能相机112产生的智能分析任务,如果在同一个第二监控点位部署复数个智能相机111可能会在该监控点位造成性能冗余,在提高系统成本的同时,对系统的性能提升十分有限,而该实施例可以避免这一技术问题。
智能相机111由于搭载有智能处理芯片,具有能够对第二视频数据和第一视频数据进行智能分析的性能,而非智能相机112受限制于自身主芯片的处理能力,难以甚至无法对第一视频数据进行智能分析,现有技术中虽然可以借助智能分析中心对非智能相机采集到的第一视频数据进行智能分析,但是当大量非智能相机同时向智能中心发送第一视频数据时,可能对智能中心的带宽产生较大的压力,选用本实施例,每个智能相机111只需要对该智能相机111所属的网络相机组110所包括的非智能相机112产生的第一视频数据进行智能分析,因此相对带宽压力较小。示例性的,假设一共有100个非智能相机,传输每个非智能相机产生的视频数据需要占用10M的带宽,则智能分析中心在高峰期可能需要1000M的带宽,而选用本实施例,假设90个非智能相机112均分在10个网络相机组110中,10个网络相机组110共计包括有10个智能相机111,在同样是100个网络相机的情况下,每个智能相机111高峰期最多只需要90M的带宽,相对带宽压力明显下降。
进一步的,在一种可选的实施例中,非智能相机112按照可以按照如图2所示的方法,将第一视频数据发送至智能相机111,可以用于对第一视频数据进行编码得到第一视频裸流;并按照所述非智能相机预设的第一数据封装协议,对所述第一视频流进行封装得到第一视频流;并将所述第一视频流发送至所属网络相机组内的所述智能相机,所述智能相机中预先设置有所述第一数据封装协议。选用该实施例,各个非智能相机可以按照自身预设的第一数据封装协议对第一视频裸流进行封装,而不需要使得非智能相机112去兼容智能相机111的数据封装协议,提高了系统对不同类型的非智能相机的兼容性。
进一步的,在一种可选的实施例中,智能相机111包括智能处理芯片和主芯片,可以按照如图2所示的方法,对第一视频数据和第二视频数据进行智能分析,可以包括:
S201,利用主芯片对第二视频数据进行编码得到第二视频裸流,按照第二数据封装协议对第二视频裸流进行封装得到第二封装流。
进一步的可以是基于H.264协议将第二视频数据编码为H.264裸流,作为第二视频裸流,第二数据封装协议可以是预先安装于智能相机111中的私有智能封装协议,该私有智能封装协议可以被智能处理芯片识别。
S202,利用主芯片对第一视频流按照第一数据封装协议进行解封装得到第一视频裸流,并按照第二数据封装协议对第一视频裸流进行封装,得到第一封装流。
在本实施例中,非智能相机112中的主芯片可以是按照RTP(Real-time TransportProtocol,实时传输协议)或RTSP(Real-time Streaming Protocol,实时流传输协议)对H.264裸流进行封装的。对于不同的非智能相机112,其内部的RTP或RTSP可能存在差异,而本步骤可以通过对第一视频流进行重新封装,消除这些差异。
S203,利用智能处理芯片对第一封装流和第二封装流按照第二数据封装协议进行解封装,得到第一视频裸流和第二视频裸流。
解封装的过程为封装过程的逆过程,因此对第一封装流和第二封装流进行解封装可以得到第一视频裸流和第二视频裸露。
S204,利用智能处理芯片对第一视频裸流和第二视频裸流进行解码,得到第一视频数据和第二视频数据。
S205,利用智能处理芯片对第一视频数据和第二视频数据进行智能分析,得到第二视频数据和第一视频数据的分析结果。
在本实施例中,第二封装流和第一封装流均是按照相同的智能封装协议进行封装的,因此智能相机111的智能处理芯片可以按照相同的处理逻辑对第二封装流和第一封装流进行处理,智能处理芯片内部可以只需要预置一套处理逻辑既可以完成对第一封装流和第二封装流的处理,而如果直接利用智能处理芯片处理第一视频流,可能由于不同非智能相机112的RTP或RTSP不同,导致需要为智能处理芯片预置多套处理逻辑,才能够对不同类型的第一视频流进行处理。
进一步的,在一种可选的实施例中,智能相机111的智能处理芯片可以按照如图3所示的方法,对第一视频数据和第二视频数据进行智能分析,可以包括:
S301,对第一封装流和第二封装流按照第二数据封装协议进行解封装,得到第一视频裸流和第二视频裸流。
S302,对第一视频裸流和第二视频裸流进行解码,得到第一视频数据和第二视频数据。
S303,调整第一视频数据和/或第二视频数据,使得第一视频数据的视频参数与第二视频数据的视频参数相同。
其中,视频参数包括:图像分辨率和帧率。具体的,可以是调整第一视频数据的视频参数,使得第一视频数据的视频参数等于第二视频数据的参数,也可以是调整第二视频数据的视频参数,使得第二视频数据的视频参数等于第一视频数据的参数,还可以是同时调整第一视频数据的视频参数和第二视频数据的视频参数,使得第一视频数据的视频参数和第二视频数据的视频参数同时等于预设的视频参数。示例性的,假设两个第二视频数据的视频参数分别为:1280*720@25fps、1920*1080@12.5fps,一个第一视频数据的视频参数为:1920*1080@25fps,可以是将这三个视频数据的视频参数统一为1280*720@12.5fps。
在一种优选的实现方式中,可以是将第一视频数据和第二视频数据的图像分辨率同步到最低分辨率,并将第一视频数据和第二视频数据的帧率同步到最低帧率,最低分辨率为第一视频数据和第二视频数据的图像分辨率的最小值,最低帧率为第一视频数据和第二视频数据的帧率的最小值。可以理解的是,降低一个视频数据的图像分率率所需要的运算量低于提高一个视频数据的图像分辨率所需要的运算量,降低一个视频数据的帧率所需要的运算量低于提高一个视频数据的帧率所需要的运算量。选用该实施例,可以使用相对较少的运算量实现第一视频数据和第二视频数据的视频参数同步。
S304,对第一视频数据和第二视频数据进行智能分析,得到第二视频数据和第一视频数据的分析结果。
选用本实施例中,可以同步第二视频数据和第一视频数据的视频参数,更加便于后续处理。
进一步的,在一种可选的实施例中,智能相机111的智能处理芯片可以按照如图4所示的方法,对第一视频数据和第二视频数据进行智能分析,可以包括:
S401,对第一封装流和第二封装流按照第二数据封装协议进行解封装,得到第一视频裸流和第二视频裸流。
S402,对第一视频裸流和第二视频裸流进行解码,得到第一视频数据和第二视频数据。
S403,将第一视频数据中的视频帧和第二视频数据中的视频帧拼接,得到拼接视频数据。
其中,拼接视频数据的每一个视频帧为第一视频数据的一个视频帧和第二视频数据的一个视频帧拼接得到的。
S404,对拼接视频数据进行智能分析,得到第二视频数据和第一视频数据的分析结果。
在进行智能分析时,可以是根据拼接视频数据的视频帧中的位置,确定分析结果的归属。假设进行的是人脸识别分析,并且拼接是是将第一视频数据的视频帧拼接于第二视频数据的视频帧的右侧,当识别到右侧存在人脸时,确定该人脸是在第一视频数据的视频帧内识别到的,当识别到左侧存在人脸时,确定该人脸是在第二视频数据的视频帧识别到的。本实施例可以将第二视频数据和第一视频数据拼接为一个拼接视频数据,在进行智能分析时,只需要对一个视频数据进行智能分析,降低了智能相机执行智能分析时的资源开销,提高了智能相机执行智能分析的效率。
在一种可选的实施例中,如图5所示,系统还可以包括:终端设备120。终端设备120可以是移动终端,也可以是远程服务器,本实施例对此不做限制。
终端设备120,用于从智能相机111获取以下三种信息中的至少一种:预览视频流、第二视频数据的分析结果、第一视频数据的分析结果。其中,预览视频流可以是第一封装流,也可以是第二封装流。
终端设备120可以是在访问智能相机111后,通过向智能相机111发送包括有IP地址和待获取信息的种类的控制指令,例如控制指令中包括IP地址192.168.1.51以及待获取信息的种类为分析结果,智能相机在接收到该控制指令后,可以将IP地址为192.168.1.51的非智能相机112(这里假设该IP地址不为智能相机111的本机IP地址)产生的第一视频数据的分析结果发送至终端设备120。终端设备120可以是向用户提供一个可视化的选择界面,并根据用户的选择生成该控制指令。
进一步的,网络相机组110所包括的非智能相机112是可以调整的,在一种可选的实施例中,智能相机可111可以是检测所能够连接的非智能相机112,并根据检测结果并生成连接状态信息,该连接状态信息用于表示能够接入预设局域网但尚未接入预设局域网的非智能相机112,将该连接状态信息发送至终端设备120。终端设备120根据该连接状态信息,调整该智能相机111所属的网络相机组110所包括的非智能相机112。终端设备120可以是在接收到连接状态信息后,在展示页面中展示该连接状态信息,并接收用户基于该连接状态信息输入的调整指令,根据接收到的调整指令,调整该智能相机111所属的网络相机组110所包括的非智能相机112。示例性的,终端设备可以是向用户提供一个展示界面,展示智能相机111能够连接到的非智能相机,用户通过在该展示界面进行勾选,以实现调整该智能相机111所属的网络相机组110所包括的非智能相机112。进一步的,调整的过程可以是终端设备根据用户输入的相机选择信息,该相机选择信息中,包括至少一个可连接相机的IP地址,可连接相机是指能够接入智能相机111所处的局域网但尚未接入该局域网的非智能相机112。
进一步,在一种可选的实施例中,如图6所示,系统还可以包括报警处理中心130。智能相机111在得到第二视频数据的分析结果和第一视频数据的分析结果后,按照预设的报警规则,确定是否需要报警,当确定需要报警时,向报警处理中心发送报警信息,报警处理中心在接收到报警信息后,可以根据预设处理规则对报警信息进行处理,例如通知用户、存储报警信息等。选用该实施例,可以由报警处理中心对报警信息进行统一集中处理,有利于报警信息的管理和及时处理。
参见图7,图7所示为本发明实施例提供的智能相机的一种结构示意图,可以包括:主芯片701、网络交换芯片702、智能处理芯片703、图像传感器704.
其中,主芯片701与网络交换芯片702电连接,并且与图像传感器电连接704;
网络交换芯片703与主芯片701电连接,并且与智能处理芯片703电连接,用于实现主芯片701与智能处理芯片703之间的数据交互,并且用于接收非智能相机发送的第一视频流,第一视频流为非智能相机对采集到的第一视频数据进行编码并按照第一数据封装协议封装得到的;并将第一视频流发送至主芯片701;
图像传感器704用于拍摄与智能相机对应的监控点位,得到第二视频数据;并将第二视频数据发送至主芯片701;
主芯片701用于对第二视频数据进行编码得到第二视频裸流,并按照第二数据封装协议对第二视频裸流进行封装得到第二封装流;按照第一数据封装协议对第一视频流进行解封装得到第一视频裸流,并按照第二数据封装协议对第一视频裸流进行封装得到第一封装流;将第一封装流和第二封装流发送至智能处理芯片703;
智能处理芯片703用于按照第二封装协议对第一封装流和第二封装流进行解封装得到第一视频裸流和第二视频裸流,并对第一视频裸流和第二视频裸流进行解码得到第一视频数据和第二视频数据;并对第一视频数据和第二视频数据进行智能分析,得到第一视频数据和第二视频数据的分析结果。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于智能相机的实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (12)

1.一种视频监控系统,其特征在于,所述系统包括:
多个网络相机组,所述多个网络相机组中每个网络相机组包括智能相机和非智能相机;
在每个网络相机组中,所述非智能相机与所述智能相机通过预设局域网连接;
所述非智能相机用于拍摄与所述非智能相机对应的第一监控点位,获取与第一监控点位对应的第一视频数据;并将所述第一视频数据发送至所属网络相机组内的所述智能相机;
所述智能相机用于拍摄与所述智能相机对应的第二监控点位,获取与第二监控点位对应的第二视频数据;并对所述第二视频数据和所述第一视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果。
2.根据权利要求1所述的系统,其特征在于,所述非智能相机用于对所述第一视频数据进行编码得到第一视频裸流;并按照所述非智能相机预设的第一数据封装协议,对所述第一视频流进行封装得到第一视频流;并将所述第一视频流发送至所属网络相机组内的所述智能相机,所述智能相机中预先设置有所述第一数据封装协议。
3.根据权利要求2所述的系统,其特征在于,所述智能相机包括主芯片和智能处理芯片,所述主芯片和所述智能处理芯片通过所述预设局域网、数据线、数据总线中的一种方式连接,所述主芯片接入所述预设局域网;
所述主芯片,用于对所述第二视频数据进行编码,得到第二视频裸流,并按照所述智能相机预设的第二数据封装协议,对所述第二视频裸流进行封装得到第二封装流;对所述第一视频流按照所述第一数据封装协议进行解封装得到所述第一视频裸流,并按照所述第二数据封装协议对所述第一视频裸流进行封装,得到第一封装流;并将所述第一封装流和所述第二封装流发送至所述智能处理芯片;
所述智能处理芯片,用于对所述第一封装流和所述第二封装流按照所述第二数据封装协议进行解封装,得到所述第一视频裸流和所述第二视频裸流;对所述第一视频裸流和所述第二视频裸流进行解码,得到所述第一视频数据和所述第二视频数据;对所述第一视频数据和所述第二视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果。
4.根据权利要求3所述的系统,其特征在于,所述智能处理芯片具体用于在所述对所述第一视频数据和所述第二视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果之前,调整第一视频数据和/或所述第二视频数据,使得所述第一视频数据的视频参数与所述第二视频数据的视频参数相同,所述视频参数包括:图像分辨率和帧率。
5.根据权利要求4所述的系统,其特征在于,所述智能处理芯片具体用于在所述对所述第一视频数据和所述第二视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果之前,将所述第一视频数据和所述第二视频数据的图像分辨率同步到最低分辨率,并将所述第一视频数据和所述第二视频数据的帧率同步到最低帧率,所述最低分辨率为所述第一视频数据和所述第二视频数据的图像分辨率的最小值,所述最低帧率为所述第一视频数据和所述第二视频数据的帧率的最小值。
6.根据权利要求2所述的系统,其特征在于,所述智能处理芯片具体用于将所述第一视频数据中的视频帧和所述第二视频数据中的视频拼接,得到拼接视频数据,所述拼接视频数据的每一个视频帧为所述第一视频数据的一个视频帧和所述第二视频数据的一个视频帧拼接得到的;
对所述拼接视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果。
7.根据权利要求3所述的系统,其特征在于,所述系统还包括:
终端设备,用于从所述智能相机获取:预览视频流、所述第一视频数据的分析结果、所述第二视频数据的分析结果中的至少一个,所述预览视频流为所所述第一封装流或者所述第二封装流。
8.根据权利要求7所述的系统,其特征在于,所述智能相机还用于向所述终端设备发送连接状态信息,所述连接状态信息用于表示所述智能相机的可连接相机,所述可连接相机为所述系统中能够接入所述预设局域网并且没有接入所述预设局域网的非智能相机;
所述终端设备还用于根据所述连接状态信息,调整所述智能相机所属的网络相机组所包括的非智能相机。
9.根据权利要求8所述的系统,其特征在于,所述终端设备具体用于在接收到所述连接状态信息之后,在预设展示界面展示所述连接状态信息,获取输入的相机选择信息,所述选择信息包括至少一个所述可连接相机的IP地址,控制所述IP地址所表示的非智能相机接入所述预设局域网。
10.根据权利要求8所述的系统,其特征在于,所述智能相机包括网络交换芯片,所述交换芯片通过内网接口与所述主芯片和所述非智能相机连接,以构成所述预设局域网;并通过外网接口与所述终端设备连接,实现所述智能相机与所述终端设备之间的数据交互。
11.根据权利要求1所述的系统,其特征在于,所述系统还包括报警处理中心;
所述智能相机还用于基于所述第一视频数据的分析结果和所述第二视频数据的分析结果,按照预设的报警规则,确定是否需要报警;如果确定需要报警,向所述报警处理中心发送报警信息。
12.一种智能相机,其特征在于,所述智能相机包括:
主芯片、网络交换芯片、智能处理芯片、图像传感器;
所述主芯片与所述网络交换芯片电连接,并且与所述图像传感器电连接;
所述网络交换芯片与所述主芯片电连接,并且与所述智能处理芯片电连接,用于实现所述主芯片与所述智能处理芯片之间的数据交互,并且用于接收非智能相机发送的第一视频流,所述第一视频流为所述非智能相机对采集到的第一视频数据进行编码并按照第一数据封装协议封装得到的;并将所述第一视频流发送至所述主芯片;
所述图像传感器用于拍摄与所述智能相机对应的监控点位,得到第二视频数据;并将所述第二视频数据发送至所述主芯片;
所述主芯片用于对所述第二视频数据进行编码得到第二视频裸流,并按照第二数据封装协议对所述第二视频裸流进行封装得到第二封装流;按照所述第一数据封装协议对所述第一视频流进行解封装得到第一视频裸流,并按照所述第二数据封装协议对所述第一视频裸流进行封装得到第一封装流;将所述第一封装流和所述第二封装流发送至所述智能处理芯片;
所述智能处理芯片用于按照所述第二封装协议对所述第一封装流和所述第二封装流进行解封装得到所述第一视频裸流和所述第二视频裸流,并对所述第一视频裸流和所述第二视频裸流进行解码得到所述第一视频数据和所述第二视频数据;并对所述第一视频数据和所述第二视频数据进行智能分析,得到所述第一视频数据和所述第二视频数据的分析结果。
CN201810570112.9A 2018-06-05 2018-06-05 一种视频监控系统及智能相机 Active CN110570614B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810570112.9A CN110570614B (zh) 2018-06-05 2018-06-05 一种视频监控系统及智能相机

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810570112.9A CN110570614B (zh) 2018-06-05 2018-06-05 一种视频监控系统及智能相机

Publications (2)

Publication Number Publication Date
CN110570614A true CN110570614A (zh) 2019-12-13
CN110570614B CN110570614B (zh) 2022-03-04

Family

ID=68772303

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810570112.9A Active CN110570614B (zh) 2018-06-05 2018-06-05 一种视频监控系统及智能相机

Country Status (1)

Country Link
CN (1) CN110570614B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112437278A (zh) * 2020-11-23 2021-03-02 杭州海康威视数字技术股份有限公司 一种协同监控系统、装置及方法
US20210097259A1 (en) * 2018-07-27 2021-04-01 Huawei Technologies Co., Ltd. Intelligent analysis system, method and device

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1604559A (zh) * 2003-09-29 2005-04-06 王生安 Ip网多媒体会议系统中分布式多点控制单元的部署方法
WO2009045218A1 (en) * 2007-10-04 2009-04-09 Donovan John J A video surveillance, storage, and alerting system having network management, hierarchical data storage, video tip processing, and vehicle plate analysis
CN101895730A (zh) * 2010-07-07 2010-11-24 四川电力试验研究院 变电站视频监控系统
CN102868585A (zh) * 2012-05-22 2013-01-09 浙江宇视科技有限公司 一种ip监控系统中节约带宽的方法及装置
CN106454256A (zh) * 2016-11-03 2017-02-22 贵阳朗玛信息技术股份有限公司 一种多视频实时拼接方法及装置
CN207070236U (zh) * 2017-01-18 2018-03-02 北京小鸟科技股份有限公司 基于ip的音视频控制无损传输和交换系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1604559A (zh) * 2003-09-29 2005-04-06 王生安 Ip网多媒体会议系统中分布式多点控制单元的部署方法
WO2009045218A1 (en) * 2007-10-04 2009-04-09 Donovan John J A video surveillance, storage, and alerting system having network management, hierarchical data storage, video tip processing, and vehicle plate analysis
CN101895730A (zh) * 2010-07-07 2010-11-24 四川电力试验研究院 变电站视频监控系统
CN102868585A (zh) * 2012-05-22 2013-01-09 浙江宇视科技有限公司 一种ip监控系统中节约带宽的方法及装置
CN106454256A (zh) * 2016-11-03 2017-02-22 贵阳朗玛信息技术股份有限公司 一种多视频实时拼接方法及装置
CN207070236U (zh) * 2017-01-18 2018-03-02 北京小鸟科技股份有限公司 基于ip的音视频控制无损传输和交换系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210097259A1 (en) * 2018-07-27 2021-04-01 Huawei Technologies Co., Ltd. Intelligent analysis system, method and device
US11837016B2 (en) * 2018-07-27 2023-12-05 Huawei Technologies Co., Ltd. Intelligent analysis system, method and device
CN112437278A (zh) * 2020-11-23 2021-03-02 杭州海康威视数字技术股份有限公司 一种协同监控系统、装置及方法

Also Published As

Publication number Publication date
CN110570614B (zh) 2022-03-04

Similar Documents

Publication Publication Date Title
US8160129B2 (en) Image pickup apparatus and image distributing method
CN112261353B (zh) 一种视频监控分流方法、系统以及计算机可读存储介质
CN104683863A (zh) 一种多媒体数据传输方法及设备
CN110570614B (zh) 一种视频监控系统及智能相机
CN111629283B (zh) 一种多流媒体网关服务系统及方法
CN109963106B (zh) 一种视频图像处理方法、装置、存储介质及终端
CN106658065B (zh) 音视频同步方法、装置及系统
CN108419041A (zh) 一种视频数据处理的方法和装置
CN109889521A (zh) 存储器、通信通道复用实现方法、装置和设备
CN113572975A (zh) 视频播放方法、装置及系统、计算机存储介质
CN108696720B (zh) 一种适用于卫星通信的视频调度系统和方法
TWI519131B (zh) 影像傳輸系統及其傳輸端裝置與接收端裝置
CN113259729B (zh) 数据切换的方法、服务器、系统及存储介质
CN103581695A (zh) 一种实现移动终端接入全球眼的系统和方法
CN112752074A (zh) 数据传输方法、装置、终端设备和存储介质
CN104038741A (zh) 一种视频数据的投影方法
CN107071356A (zh) 一种多媒体优化服务器及其视频信息处理方法
US20140327781A1 (en) Method for video surveillance, a related system, a related surveillance server, and a related surveillance camera
US11265357B2 (en) AV1 codec for real-time video communication
CN112203050A (zh) 一种视频续传的方法及装置
CN205545372U (zh) 一种基于移动终端的远程监控系统
CN116781973B (zh) 视频编解码方法、装置、存储介质和电子设备
CN210578939U (zh) 视频传输装置
WO2024060719A1 (zh) 一种数据传输的方法、装置、电子设备及存储介质
KR101690163B1 (ko) 전자 장치 및 그의 스트리밍 서비스 제공 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant