CN115065784A - 用于共享摄像装置处理能力的方法、装置和网络 - Google Patents

用于共享摄像装置处理能力的方法、装置和网络 Download PDF

Info

Publication number
CN115065784A
CN115065784A CN202210768523.5A CN202210768523A CN115065784A CN 115065784 A CN115065784 A CN 115065784A CN 202210768523 A CN202210768523 A CN 202210768523A CN 115065784 A CN115065784 A CN 115065784A
Authority
CN
China
Prior art keywords
camera
processing
image pickup
video stream
hoc network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210768523.5A
Other languages
English (en)
Inventor
韩建亭
沈晶歆
孙洪
郭宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianyi Shilian Technology Co ltd
Original Assignee
Tianyi Digital Life Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianyi Digital Life Technology Co Ltd filed Critical Tianyi Digital Life Technology Co Ltd
Priority to CN202210768523.5A priority Critical patent/CN115065784A/zh
Publication of CN115065784A publication Critical patent/CN115065784A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Mobile Radio Communication Systems (AREA)

Abstract

本公开提供了一种基于自组网技术构成的摄像装置网络。该摄像装置网络包括一个或多个第一摄像装置和一个或多第二摄像装置。第一摄像装置在自组网内广播关于第一摄像装置各自的处理能力使用情况的信息。第二摄像装置响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求。响应于接收到第一摄像装置同意该请求的消息,第二摄像装置向第一摄像装置传送待处理视频流。第一摄像装置对接收自第二摄像装置的待处理视频流进行AI视频处理。根据本公开的摄像装置网络能够经由网络共享多个摄像装置的本地处理能力,以在摄像装置网络级实现处理能力最大化。

Description

用于共享摄像装置处理能力的方法、装置和网络
技术领域
本发明一般涉及视联网技术领域,尤其涉及用于在自组网内共享摄像装置处理能力的方法。
背景技术
摄像装置的发展经历了从模拟化到数字化、从数字化到数字化高清、从数字化高清到数字化智能等多个阶段。除了常见的录制存储功能之外,目前的摄像装置还可实现设备联动、移动侦测、人形侦测、语音对讲、云存储等功能。
摄像装置在一天内可能产生20GB或更大量的数据。随着摄像装置的清晰度不断提高,摄像装置产生的数据量可能更大。若全部数据都被传送到云端,则可能会对网络带宽和数据中心资源造成极大占用。目前部分摄像装置被加装有AI芯片,从而实现对摄像装置数据的本地化处理以获取有效信息。仅将包括有效信息的数据传送到云端能够大大降低网络带宽和数据中心资源的压力。
然而,在实际网络部署时,由于部署时间不同,可能存在多种不同类型的摄像装置。例如,同一网络中可能存在不具备本地处理能力的摄像装置和具备本地处理能力的摄像装置。或者,在网络更新换代的过程中,可能出于成本的考虑,仅更换故障摄像装置或者部分不具备本地处理能力的摄像装置。例如,同一网络中可能存在不具备本地处理能力的摄像装置、具备较低本地处理能力的摄像装置、具备较高本地处理能力的摄像装置。一些摄像装置可能能够以其自身的本地处理能力满足本地处理需求,而一些摄像装置可能不具备本地处理能力或者其自身的本地处理能力无法满足本地处理需求。当一些摄像装置无法满足本地处理需求时,网络的整体性能可能由于部分摄像装置无法满足本地处理需求而被降级。
因此,迫切需要一种能够充分利用网络内的摄像装置的资源来提升网络整体性能的方法。
发明内容
以下给出了一个或多个方面的简要概述以提供对此类方面的基本理解。此概述不是所有构想到的方面的详尽综览,并且既非旨在标识出所有方面的关键性或决定性要素亦非试图界定任何或所有方面的范围。其唯一的目的是以简化形式给出一个或多个方面的一些概念以作为稍后给出的更详细描述之序言。
为了解决上述问题中的一个或多个问题,本发明的目的旨在提供用于在网络上内共享摄像装置处理能力的方法
根据本公开的一个方面,提供了一种用于在自组网内共享摄像装置处理能力的方法。该方法可包括:自组网内的第一摄像装置在自组网内广播关于第一摄像装置的处理能力使用情况的信息;第一摄像装置接收来自自组网内的第二摄像装置的借用第一摄像装置的处理能力的请求;第一摄像装置经由自组网接收来自第二摄像装置的待处理视频流;以及对所接收的待处理视频流进行处理。
根据本公开的进一步实施例,处理可包括:对接收的视频流进行结构化处理和关键信息提取。
根据本公开的进一步实施例,该方法可进一步包括:将经处理的视频流发送给云端服务器。
根据本公开的进一步实施例,自组网可以是基于Mesh的自组网。
根据本公开的一个方面,提供了一种用于在自组网内共享摄像装置处理能力的方法。该方法可包括:自组网内的第二摄像装置经由自组网接收自组网内的一个或多个第一摄像装置广播的关于第一摄像装置各自处理能力使用情况的信息;第二摄像装置响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求;以及响应于接收到同意请求的消息,第二摄像装置经由自组网向第一摄像装置传送待处理视频流。
根据本公开的进一步实施例,响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求可进一步包括:从一个或多个第一摄像装置中选择具有与待处理视频流相当的剩余处理能力的第一摄像装置,并向其传送借用剩余处理能力的请求;从一个或多个第一摄像装置中选择能够处理待处理视频流的具有最少剩余处理能力的第一摄像装置,并向其传送借用剩余处理能力的请求;从一个或多个第一摄像装置中选择具有最多剩余处理能力的第一摄像装置,并向其传送借用剩余处理能力的请求;或者基于轮询机制向每一个具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求。
根据本公开的一个方面,提供了一种第一摄像装置。第一摄像装置可包括通信单元和处理单元。通信单元可包括被配置成与自组网内的其他摄像装置通信。处理单元可被配置成:经由通信单元在自组网内广播关于摄像装置的处理能力使用情况的信息;经由通信单元接收来自自组网内的第二摄像装置的借用摄像装置的处理能力的请求;经由通信单元接收来自第二摄像装置的待处理视频流;以及对所接收的待处理视频流进行处理。
根据本公开的进一步实施例,对所接收的待处理视频流进行处理可进一步包括:对视频流进行结构化处理和关键信息提取。
根据本公开的一个方面,提供了一种第二摄像装置。第二摄像装置可包括通信单元和处理单元。通信单元可被配置成与自组网内的其他摄像装置通信。处理单元可被配置成:经由通信单元接收自组网内的一个或多个第一摄像装置广播的关于第一摄像装置各自处理能力使用情况的信息;响应于接收到广播消息而经由通信单元向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求;以及响应于接收到同意请求的消息,经由通信单元向第一摄像装置传送待处理视频流。
根据本公开的一个方面,提供了一种基于自组网技术构成的摄像装置网络。摄像装置网络可包括:一个或多个第一摄像装置,第一摄像装置具备本地AI视频处理能力;以及一个或多个第二摄像装置,第二摄像装置不具备本地AI视频处理能力。第一摄像装置和第二摄像装置被配置成:一个或多个第一摄像装置在自组网内广播关于第一摄像装置各自的处理能力使用情况的信息;一个或多个第一摄像装置响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求;响应于接收到第一摄像装置同意请求的消息,第二摄像装置向第一摄像装置传送待处理视频流;以及第一摄像装置对接收自第二摄像装置的待处理视频流进行AI视频处理。
根据本公开的摄像装置网络能够经由网络共享多个摄像装置的本地处理能力以在摄像装置处完成部分处理操作,以在摄像装置网络级实现处理能力最大化,同时降低了传输负载以及云端服务器的处理负荷。
提供本发明内容是为了以简化的形式来介绍一些概念,这些概念将在下面的具体实施方式中进一步描述。本发明内容不旨在标识所要求保护的主题的关键特征或必要特征,也不旨在用于限制所要求保护的主题的范围。各实施例的其他方面、特征和/或优点将部分地在下面的描述中阐述,并且将部分地从描述中显而易见,或者可以通过本发明的实践来学习。
附图简述
为了能详细理解本公开的以上陈述的特征所用的方式,可参照各方面来对以上简要概述的内容进行更具体的描述,其中一些方面在附图中解说。然而应该注意,附图仅解说了本公开的某些典型方面,故不应被认为限定其范围,因为本描述可允许有其他等同有效的方面。在附图中:
图1解说了根据本公开的各实施例的包括多个摄像装置的摄像装置网络架构100的示意图;
图2解说了根据本公开的各实施例的各摄像装置之间的通信的交互示意图;
图3解说了根据本公开的各实施例的由出借方摄像装置执行的用于在自组网内共享处理能力的方法的流程图;
图4解说了根据本公开的各实施例的由借用方摄像装置执行的用于在自组网内共享处理能力的方法的流程图;以及
图5解说了根据本公开的各实施例的摄像装置的框图。
具体实施方式
为使本公开的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本公开的进一步详细说明。在以下详细描述中,阐述了许多具体细节以提供对所描述的示例性实施例的透彻理解。然而,对于本领域技术人员显而易见的是,可以在没有这些具体细节中的一些或全部的情况下实践所描述的实施例。在其他示例性实施例中,没有详细描述公知的结构或处理步骤,以避免不必要地模糊本公开的概念。
在本说明书中,除非另有说明,否则通过本说明书使用的术语“A或B”指的是“A和B”和“A或B”,而不是指A和B是排他性的。
摄像装置在一天内可能产生20GB或更大量的数据。随着摄像装置的清晰度不断提高,摄像装置产生的数据量可能更大。若全部数据都被传送到云端,则可能会对网络带宽和数据中心资源造成极大占用。目前部分摄像装置被加装有AI芯片,从而实现对摄像装置数据的本地化处理以获取有效信息。仅将包括有效信息的数据传送到云端能够大大降低网络带宽和数据中心资源的压力。
然而,在实际网络部署时,由于部署时间不同,可能存在多种不同类型的摄像装置。例如,同一网络中可能存在不具备本地处理能力的摄像装置和具备本地处理能力的摄像装置。或者,在网络更新换代的过程中,可能出于成本的考虑,仅更换故障摄像装置或者部分不具备本地处理能力的摄像装置。例如,同一网络中可能存在不具备本地处理能力的摄像装置、具备较低本地处理能力的摄像装置、具备较高本地处理能力的摄像装置。一些摄像装置可能能够以其自身的本地处理能力满足本地处理需求,而一些摄像装置可能不具备本地处理能力或者其自身的本地处理能力无法满足本地处理需求。当一些摄像装置无法满足本地处理需求时,网络的整体性能可能由于部分摄像装置无法满足本地处理需求而被降级。
为解决上述问题中的一者或多者,本公开提出了用于在网络内共享处理能力的方法。根据本公开的用于在网络内共享处理能力的方法能够动态地调度网络内的各个摄像装置的本地处理能力,充分利用网络内的摄像装置的资源,以提升网络整体性能。一般地,摄像装置网络可包括各种类型的摄像装置。不具备本地处理能力的摄像装置可被配置成借用其他具备本地处理能力的摄像装置来对所采集的音频/视频流进行本地处理。具备本地处理能力的摄像装置也可被配置成借用其他具备本地处理能力的摄像装置来对所采集的音频/视频流进行本地处理,例如,当摄像装置所具备的本地处理能力不足以应对摄像装置当面需要处理的视频流的处理需求时。具备本地处理能力的摄像装置可被配置成将其本地处理能力出借给不具备本地处理能力的摄像装置或所具备的本地处理能力不足的摄像装置,以在整个摄像装置网络内调度动态地调度各个摄像装置的本地处理能力,以在网络级实现资源有效利用最大化。以下将结合附图来具体阐述。
图1解说了根据本公开的各实施例的摄像装置网络100的架构示意图。如图1所示,摄像装置网络100可包括多个摄像装置。作为示例,摄像装置网络100可包括四个摄像装置105a、115b、105c和105d。值得注意的是,虽然在附图中示出了摄像装置网络100包括四个摄像装置105a、115b、105c和105d,但是根据本公开的摄像装置网络可包括更多或更少数目的摄像装置。
摄像装置105a、115b、105c和105d可经由各种网络技术构成摄像装置网络100。例如,摄像装置105a、115b、105c和105d可经由诸如自组网构成摄像装置网络100。自组网可以是但不限于:Mesh自组网、基于Zigbee的自组网、基于WIFI的自组网、或基于Bluetooth的自组网。经由Mesh自组网构成的摄像装置网络能提供数百米至数千米区域的通信范围。为了便于解说,下文以摄像装置可被配置成经由Mesh自组网与网络内的摄像装置彼此通信作为示例来描述,但是本领域技术人员将领会,本公开并不对网络类型进行限定。
摄像装置网络100可包括各种类型的摄像装置,包括但不限于具备本地处理能力(诸如本地AI视频处理能力)的摄像装置、或不具备本地处理能力的摄像装置。例如,摄像装置网络100可包括具备较高本地处理能力的摄像装置、具备较低本地处理能力的摄像装置、和/或不具备本地处理能力的摄像装置。作为一个示例,四个摄像装置105a、115b、105c和105d中的一者或多者可具备本地处理能力(诸如本地AI视频处理能力),而四个摄像装置105a、115b、105c和105d中的一者或多者可以不具备本地处理能力。作为另一示例,四个摄像装置105a、115b、105c和105d中的一者或多者可具备较高本地处理能力,四个摄像装置105a、115b、105c和105d中的一者或多者可具备较低本地处理能力,而四个摄像装置105a、115b、105c和105d中的一者或多者可以不具备本地处理能力。作为又另一示例,四个摄像装置105a、115b、105c和105d中的一者或多者可具备较高本地处理能力,而四个摄像装置105a、115b、105c和105d中的一者或多者可具备较低本地处理能力。
本文中所描述的本地处理可包括但不限于:结构化处理和关键信息提取。在一些情形中,本文中所描述的本地处理能力可以是AI算力,也被称为AI视频处理能力。结构化处理指的是对视频中的每一帧进行分类,例如,分类为人或猫等。关键信息提取指的是对视频中的关键信息(例如,摔跤等)进行提取。
在一些情形中,摄像装置可首先进行结构化处理,并随后根据关键信息进行告警。在其他情形中,摄像装置可将经结构化处理的视频上传给云端服务器,同时将所提取的关键信息上传给云端服务器。云端服务器随后可在接收到关键信息之际决定是否要告警。在又其他情形中,摄像装置和云端服务器可同时进行告警。例如,摄像装置可进行即时告警,而云端服务器可对所上传的数据进行进一步分析,以确定取消告警或继续告警(例如,告警中包括更具体的信息,例如摔跤画面等)。
在一些实施例中,摄像装置105a可以不具备本地处理能力,摄像装置115b和105c可具备较低本地处理能力,而摄像装置105d可具备较高本地处理能力。
在一些情形中,具备本地处理能力的摄像装置(例如,摄像装置115b、105c和105d中的一者或多者)可基于其自能力和当前使用情况来确定是否要向其他摄像装置出借本地处理能力。例如,摄像装置115b、105c和105d中的一者或多者可基于本地处理能力、其当前本地处理能力使用情况、其存储能力、和/或其待处理的数据量中的一者或多者来确定是否要在网络内广播关于摄像装置具有剩余处理能力的信息。
在一些情形中,具有视频流待处理的摄像装置(例如,摄像装置105a、115b、105c和105d中的一者或多者)可基于其自身能力和当前使用情况来确定是否要借用其他摄像装置的本地处理能力。例如,摄像装置105a、115b和105c中的一者或多者可基于本地处理能力、其当前本地处理能力使用情况、其存储能力、和/或其待处理的数据量中的一者或多者来确定是否要向网络内的其他摄像装置(例如,广播具备剩余处理能力的其他摄像装置)请求借用其剩余处理能力。以下将结合图2来具体阐述摄像装置105a、115b、105c和105d之间的彼此交互通信。
图2解说了根据本公开的各实施例的摄像装置105a、115b、105c和105d之间的通信的交互示意图。作为示例,摄像装置105a、115b、105c和105d之间可经由Mesh自组网彼此通信。
在一个实施例中,假定摄像装置105a和115b可作为借用方,而摄像装置105c和105d可作为出借方,参照图2,解说了摄像装置105a、115b、105c和105d之间的通信的交互示意图。
如图2所示,在202,出借方摄像装置可在Mesh自组网内广播关于摄像装置各自的处理能力使用情况的信息。例如,摄像装置105c和105d可在Mesh自组网内广播关于摄像装置各自的处理能力使用情况的信息。表1示出了根据本公开的一示例的用于广播摄像装置的处理能力使用情况的消息的示例结构。
表1广播消息的示例结构
元素名称 类型 定义
cameraID 整型 摄像装置ID
cameraStatus 整型 摄像装置状态:0-空闲;1-占据
localComputationCapbility 枚举型 处理能力:1-结构化处理;2-关键信息提取
sharedComputationStartTime 字符型 可共享处理能力起始时间YYMMDDMMSS
sharedComputationEndTime 字符型 可共享处理能力结束时间YYMMDDMMSS
响应于接收到出借方摄像装置广播的各自的处理能力使用情况的信息,在204,借用方摄像装置可向具有剩余处理能力的摄像装置传送借用剩余处理能力的请求。表2示出了根据本公开的一示例的借用使用处理能力的请求的示例结构。例如,摄像装置105a和115b向具有剩余处理能力的摄像装置传送借用剩余处理能力的请求。在一任选示例中,例如,摄像装置105a和115b响应于接收到广播消息而向具有剩余处理能力的摄像装置传送借用剩余处理能力的请求。例如,摄像装置105a和115b响应于接收到广播消息而选择借用处理能力的摄像装置,并随后向所选摄像装置传送借用剩余处理能力的请求。
表2借用剩余处理能力的请求的示例结构
元素名称 类型 定义
requestingCameraID 整型 借用方摄像装置ID
requestedCameraID 整型 出借方摄像装置ID
videoAddress 字符型 摄像装置采集视频存储地址
serverAddress 字符型 处理后的结果上传地址
computationType 整型 处理能力要求类型:1-结构化处理;2-关键信息提取
computationStartTime 字符型 处理能力要求起始时间YYMMDDMMSS
computationEndtime 字符型 处理能力要求终止时间YYMMDDMMSS
在一可选实施例中,所广播的关于出借方摄像装置各自的处理能力使用情况的信息可包括出借方摄像装置的剩余处理能力(包括能够处理的格式和数量等)。当有多个出借方摄像装置广播处理能力使用情况的信息时,借用方摄像装置可将出借方摄像装置的剩余处理能力与其自身的待处理视频流进行比较,以选择向哪个(或哪些)出借方摄像装置传送借用剩余处理能力的请求。
假定摄像装置105c除已使用的处理能力之外还能够处理两路视频流,而摄像装置105d除已使用的处理能力之外还能够处理三路视频流,同时假定摄像装置115a和摄像装置115b各采集三路视频流并且摄像装置115b能够在本地处理一路视频流,也就是说,摄像装置115a具有三路视频流待处理并且摄像装置115b具有两路视频流待处理,在一个示例中,当摄像装置105a接收到摄像装置105d广播的剩余处理能力(还能够处理三路视频流),摄像装置105a可选择摄像装置105d作为借用处理能力的摄像装置,并且随后可向摄像装置105d传送借用剩余处理能力的请求。类似地,当摄像装置105b接收到摄像装置105c广播的剩余处理能力(还能够处理两路视频流),摄像装置105a可在204选择摄像装置105c作为借用处理能力的摄像装置,并且随后可在206向摄像装置105c传送借用剩余处理能力的请求。在该示例中,借用方摄像装置可优先向广播与待处理视频流相当的剩余处理能力的摄像装置传送借用剩余处理能力的请求,从而在摄像装置网络内最大化地利用剩余处理能力。在一替换示例中,借用方摄像装置可优先向广播具有能够处理待处理视频的剩余处理能力的摄像装置中具有最少剩余处理能力的装置传送借用剩余处理能力的请求。在一替换示例中,借用方摄像装置可优先向广播具有剩余处理能力的摄像装置中具有最多剩余处理能力的装置传送借用剩余处理能力的请求,无论该摄像装置的剩余处理能力是否足以处理待处理视频。当该摄像装置的剩余处理能力不足以处理待处理视频,借用方摄像装置可同时向两个或更多个摄像装置借用它们的剩余处理能力。借用方摄像装置对出借方摄像装置的选择可基于待处理视频流的优先级。在又一替换示例中,摄像装置105a和115b中的一者可基于轮询机制向具有剩余处理能力的摄像装置105c和105d中的每一者传送借用剩余处理能力的请求。例如,摄像装置105b从摄像装置115d接收到接收不准许使用其剩余处理能力的否定确认(例如,摄像装置115d已经将其剩余处理能力出借给摄像装置115a),则摄像装置105b继续选择摄像装置115c,并向所选摄像装置传送借用剩余处理能力的请求,依此类推。当借用方摄像装置从出借方摄像装置接收到准许使用其剩余处理能力的消息(例如肯定确认),借用方摄像装置可向出借方摄像装置传送待处理视频流以借用出借方摄像装置来处理待处理视频流。
在一替换实施例中,借用方摄像装置可分别向广播处理能力使用情况的出借方摄像装置中的一者或多者传送借用剩余处理能力的请求。出借方摄像装置可从传送请求的借用方摄像装置中选取一个或多个借用方摄像装置并向其传送准许借用剩余处理能力的肯定确认,同时向其他借用方摄像装置传送不准许借用剩余处理能力的否定确认。在一可选示例中,借用其剩余处理能力的请求可包括待处理视频流的相关信息(例如,格式和数量)。当出借方摄像装置从多个借用方摄像装置接收到借用剩余处理能力的请求时,出借方摄像装置可将其剩余处理能力与待处理视频流的相关信息进行比较,以选择向哪个借用方摄像装置传送肯定确认。当出借方摄像装置确定其剩余处理能力无法处理待处视频流(例如,出借方摄像装置的剩余处理通道小于待处理视频流数量或者剩余处理通道无法处理待处理视频流的格式类型)时,出借方摄像装置可向借用方摄像装置传送否定确认。
如上所述,假定摄像装置105c除已使用的处理能力之外还能够处理两路视频流,而摄像装置105d除已使用的处理能力之外还能够处理三路视频流,同时假定摄像装置115a和摄像装置115b各采集三路视频流并且摄像装置115b能够在本地处理一路视频流,也就是说,摄像装置115a具有三路视频流待处理并且摄像装置115b具有两路视频流待处理,在一个示例中,摄像装置105d可将其剩余处理能力与请求中所指示的待处理视频流进行比较,并随后向摄像装置115a传送准许借用的肯定确认。类似地,摄像装置105d可将其剩余处理能力与请求中所指示的待处理视频流进行比较,并随后向摄像装置115a传送准许借用的肯定确认。在该示例中,出借方摄像装置可优先向请求中所包括的待处理视频流与其剩余处理能力与相当的借用方摄像装置传送准许借用剩余处理能力的肯定确认,从而在摄像装置网络内最大化地利用剩余处理能力。在一替换示例中,在出借方摄像装置的剩余处理能力既能够处理一个借用方摄像装置的待处理视频流又能够处理另一个借用方摄像装置的待处理视频流的情况下,出借方摄像装置可优先选择向待处理视频流较大的借用方摄像装置传送肯定确认。替换地,出借方摄像装置可优先选择向待处理视频流较小的借用方摄像装置传送肯定确认。此外,出借方摄像装置还可根据其剩余能力来决定向一个或多个借用方摄像装置传送肯定确认。另外,借用方摄像装置也可从一个或多个出借方摄像装置借用它们的剩余处理能力。
例如,如图2所示,在206,摄像装置105d可在206向摄像装置105a传送肯定确认,摄像装置105a随后可在208向摄像装置105d传送待处理视频流。类似地,摄像装置105c可在206向摄像装置105b传送肯定确认,摄像装置105b随后可在208向摄像装置105c传送待处理视频流。
当出借方摄像装置完成对借用方摄像装置的待处理视频流的相关处理后,出借方摄像装置可将处理后的视频流连同借用方摄像装置的标记传送到云端服务器。替换地,当出借方摄像装置完成对借用方摄像装置的待处理视频流的相关处理后,出借方摄像装置可处理后的视频流传送回借用方摄像装置。借用方摄像装置随后可将处理后的视频流传送到云端服务器。在一可选示例中,当出借方摄像装置在处理借用方摄像装置的待处理视频流期间发现视频流中紧急状态需要告警,出借方摄像装置可直接告警,将告警信息传送回借用方摄像装置并由借用方摄像装置告警,和/或将告警信息连同借用方摄像装置的标记传送到云端服务器并由云端服务器进行告警。
在一任选实施例中,在摄像装置105d被摄像装置105a借用处理能力期间,当摄像装置105d需要处理额外的一路视频流时,摄像装置105d可在完成给摄像装置105a的借用之后处理额外的一路视频流,停止给摄像装置105a的借用并转而处理额外的一路视频流,和/或在给摄像装置105a的借用的过程中从其他摄像装置借用处理能力。在一任选情形中,上述摄像装置105d的操作可基于视频流的优先级来选择。当摄像装置105a停止从摄像装置105d借用处理能力时,摄像装置105a可从广播剩余处理能力的其他摄像装置选择借用处理能力的摄像装置。
虽然出于便于解说的目的在本公开中记载了摄像装置网络200包括两个借用方摄像装置(例如摄像装置105a和105b)和两个出借方摄像装置(例如摄像装置105c和105d),但是本领域技术人员将领会,根据本公开的摄像装置网络可包括更多或更少的借用方摄像装置以及更多或更少的出借方摄像装置。此外,某些摄像装置还可以在借用方和出借方之间切换,这可视摄像装置网络的具体情形来确定。
此外,根据本公开的摄像装置网络能够经由网络共享多个摄像装置的本地处理能力以在摄像装置处完成部分处理操作,以在摄像装置网络级实现处理能力最大化,同时降低了传输负载以及云端服务器的处理负荷。
图3解说了根据本公开的各实施例的由第一摄像装置(例如,出借方摄像装置)执行的用于在自组网内共享处理能力的方法的流程图300。
在302,第一摄像装置可在自组网内广播关于第一摄像装置的处理能力使用情况的信息。
在304,第一摄像装置可接收来自自组网内的第二摄像装置(例如,借用方摄像装置)的借用第一摄像装置的处理能力的请求。
在306,第一摄像装置可经由自组网接收来自第二摄像装置的待处理视频流。
在308,第一摄像装置可对所接收的待处理视频流进行处理(例如,结构化处理和关键信息提取)。
在以上实施例中,第一摄像装置可经由自组网来实现与第二摄像装置的处理能力共享。
图4解说了根据本公开的各实施例的由第二摄像装置(例如,借用方摄像装置)执行的用于在自组网内共享处理能力的方法的流程图400。
在402,第二摄像装置可经由自组网接收自组网内的一个或多个第一摄像装置广播的关于第一摄像装置各自处理能力使用情况的信息。
在404,第二摄像装置可响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求。
响应于接收到同意该请求的消息,在406,第二摄像装置可经由自组网向第一摄像装置传送待处理视频流。
类似地,在以上实施例中,第二摄像装置可经由自组网来实现与第一摄像装置的处理能力共享。
图5解说了根据本公开的各实施例的摄像装置500的结构示意图。如图5所示,摄像装置500可包括通信单元505和处理单元510。在一些情形中,处理单元510可被配置成经由通信单元505在自组网内广播关于第一摄像装置的处理能力使用情况的信息;经由通信单元505接收来自自组网内的第二摄像装置的借用第一摄像装置的处理能力的请求;经由通信单元505接收来自第二摄像装置的待处理视频流;以及对所接收的待处理视频流进行处理。在一些情形中,处理单元510可被配置成经由通信单元505接收自组网内的一个或多个第一摄像装置广播的关于第一摄像装置各自处理能力使用情况的信息;响应于接收到广播消息而经由通信单元505向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求;响应于接收到同意该请求的消息,经由通信单元505向第一摄像装置传送待处理视频流。在一示例情形中,摄像装置500可任选地包括采集单元515。采集单元515可被配置成采集视频流。
本领域技术人员可以从上述实施例中清楚地了解到本公开可以通过具有必要硬件的软件或者通过硬件,固件等来实现。基于这样的理解,本公开的实施例可以部分地以软件形式实现。计算机软件可以存储在可读存储介质中,例如软盘,硬盘,光盘或计算机的闪存。计算机软件包括一系列指令,以使计算机(例如,个人计算机,服务站或网络终端)执行根据本公开的各个实施例的方法或其一部分。
在整个说明书中已经参照“实施例”,意味着特定描述的特征、结构或特性包括在至少一个实施例中。因此,这些短语的使用可以不仅仅指代一个实施例。此外,所描述的特征、结构或特性可以在一个或多个实施例中以任何合适的方式组合。
然而,相关领域的技术人员可以认识到,可以在没有一个或多个具体细节的情况下或者利用其他方法、资源、材料等来实践这些实施例。在其他情况下,众所周知的结构、资源,或者仅仅为了观察实施例的模糊方面而未详细示出或描述操作。
虽然已经说明和描述了实施例和应用,但是应该理解,实施例不限于上述精确配置和资源。在不脱离所要求保护的实施例的范围的情况下,可以在本文公开的方法和系统的布置,操作和细节中进行对本领域技术人员显而易见的各种修改、替换和改进。
本公开的一种实现(1)可以是一种用于在自组网内共享摄像装置处理能力的方法。该方法可包括:自组网内的第一摄像装置在自组网内广播关于第一摄像装置的处理能力使用情况的信息;第一摄像装置接收来自自组网内的第二摄像装置的借用第一摄像装置的处理能力的请求;第一摄像装置经由自组网接收来自第二摄像装置的待处理视频流;以及对所接收的待处理视频流进行处理。
可存在上述方法(1)的一些实现(2),其中处理可包括:对接收的视频流进行结构化处理和关键信息提取。
可存在上述方法(1)的一些实现(3),其中该方法可进一步包括:将经处理的视频流发送给云端服务器。
可存在上述方法(1)的一些实现(4),其中自组网可以是基于Mesh的自组网。
本公开的一种实现(5)可以是一种用于在自组网内共享摄像装置处理能力的方法。该方法可包括:自组网内的第二摄像装置经由自组网接收自组网内的一个或多个第一摄像装置广播的关于第一摄像装置各自处理能力使用情况的信息;第二摄像装置响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求;以及响应于接收到同意请求的消息,第二摄像装置经由自组网向第一摄像装置传送待处理视频流。
可存在上述方法(5)的一些实现(6),其中响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求可进一步包括:从一个或多个第一摄像装置中选择具有与待处理视频流相当的剩余处理能力的第一摄像装置,并向其传送借用剩余处理能力的请求;从一个或多个第一摄像装置中选择能够处理待处理视频流的具有最少剩余处理能力的第一摄像装置,并向其传送借用剩余处理能力的请求;从一个或多个第一摄像装置中选择具有最多剩余处理能力的第一摄像装置,并向其传送借用剩余处理能力的请求;或者基于轮询机制向每一个具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求。
本公开的一种实现(7)可以是一种第一摄像装置。第一摄像装置可包括通信单元和处理单元。通信单元可包括被配置成与自组网内的其他摄像装置通信。处理单元可被配置成:经由通信单元在自组网内广播关于摄像装置的处理能力使用情况的信息;经由通信单元接收来自自组网内的第二摄像装置的借用摄像装置的处理能力的请求;经由通信单元接收来自第二摄像装置的待处理视频流;以及对所接收的待处理视频流进行处理。
可存在上述第一摄像装置(7)的一些实现(8),其中对所接收的待处理视频流进行处理可进一步包括:对视频流进行结构化处理和关键信息提取。
本公开的一种实现(9)可以是一种第二摄像装置。第二摄像装置可包括通信单元和处理单元。通信单元可被配置成与自组网内的其他摄像装置通信。处理单元可被配置成:经由通信单元接收自组网内的一个或多个第一摄像装置广播的关于第一摄像装置各自处理能力使用情况的信息;响应于接收到广播消息而经由通信单元向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求;以及响应于接收到同意请求的消息,经由通信单元向第一摄像装置传送待处理视频流。
本公开的一种实现(10)可以是一种基于自组网技术构成的摄像装置网络。摄像装置网络可包括:一个或多个第一摄像装置,第一摄像装置具备本地AI视频处理能力;以及一个或多个第二摄像装置,第二摄像装置不具备本地AI视频处理能力。第一摄像装置和第二摄像装置被配置成:一个或多个第一摄像装置在自组网内广播关于第一摄像装置各自的处理能力使用情况的信息;一个或多个第一摄像装置响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求;响应于接收到第一摄像装置同意请求的消息,第二摄像装置向第一摄像装置传送待处理视频流;以及第一摄像装置对接收自第二摄像装置的待处理视频流进行AI视频处理。

Claims (10)

1.一种用于在自组网内共享摄像装置处理能力的方法,包括:
所述自组网内的第一摄像装置在所述自组网内广播关于所述第一摄像装置的处理能力使用情况的信息;
所述第一摄像装置接收来自所述自组网内的第二摄像装置的借用所述第一摄像装置的处理能力的请求;
所述第一摄像装置经由所述自组网接收来自所述第二摄像装置的待处理视频流;以及
所述第一摄像装置对所接收的待处理视频流进行处理。
2.如权利要求1所述的方法,其特征在于,处理包括:
对接收的视频流进行结构化处理和关键信息提取。
3.如权利要求1所述的方法,其特征在于,所述方法进一步包括:
将经处理的视频流发送给云端服务器。
4.如权利要求1所述的方法,其特征在于,所述自组网是基于Mesh的自组网。
5.一种用于在自组网内共享摄像装置处理能力的方法,包括:
所述自组网内的第二摄像装置经由所述自组网接收所述自组网内的一个或多个第一摄像装置广播的关于所述第一摄像装置各自处理能力使用情况的信息;
所述第二摄像装置响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求;以及
响应于接收到同意所述请求的消息,所述第二摄像装置经由所述自组网向所述第一摄像装置传送待处理视频流。
6.如权利要求5所述的方法,其特征在于,响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求进一步包括:
从所述一个或多个第一摄像装置中选择具有与待处理视频流相当的剩余处理能力的第一摄像装置,并向其传送借用剩余处理能力的请求;
从所述一个或多个第一摄像装置中选择能够处理待处理视频流的具有最少剩余处理能力的第一摄像装置,并向其传送借用剩余处理能力的请求;
从所述一个或多个第一摄像装置中选择具有最多剩余处理能力的第一摄像装置,并向其传送借用剩余处理能力的请求;或者
基于轮询机制向每一个具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求。
7.一种摄像装置,包括:
通信单元,所述通信单元被配置成与自组网内的其他摄像装置通信;以及
处理单元,所述处理单元被配置成:
经由所述通信单元在所述自组网内广播关于所述摄像装置的处理能力使用情况的信息;
经由所述通信单元接收来自所述自组网内的第二摄像装置的借用所述摄像装置的处理能力的请求;
经由所述通信单元接收来自所述第二摄像装置的待处理视频流;以及
对所接收的待处理视频流进行处理。
8.如权利要求7所述的摄像装置,其特征在于,对所接收的待处理视频流进行处理进一步包括:对视频流进行结构化处理和关键信息提取。
9.一种摄像装置,包括:
通信单元,所述通信单元被配置成与自组网内的其他摄像装置通信;以及
处理单元,所述处理单元被配置成:
经由所述通信单元接收所述自组网内的一个或多个第一摄像装置广播的关于所述第一摄像装置各自处理能力使用情况的信息;
响应于接收到广播消息而经由所述通信单元向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求;以及
响应于接收到同意所述请求的消息,经由所述通信单元向所述第一摄像装置传送待处理视频流。
10.一种基于自组网技术构成的摄像装置网络,所述摄像装置网络包括:
一个或多个第一摄像装置,所述第一摄像装置具备本地AI视频处理能力;以及
一个或多个第二摄像装置,所述第二摄像装置不具备本地AI视频处理能力,
其中所述第一摄像装置和所述第二摄像装置被配置成:
所述一个或多个第一摄像装置在自组网内广播关于所述第一摄像装置各自的处理能力使用情况的信息;
所述一个或多个第二摄像装置响应于接收到广播消息而向具有剩余处理能力的第一摄像装置传送借用剩余处理能力的请求;
响应于接收到第一摄像装置同意所述请求的消息,所述第二摄像装置向所述第一摄像装置传送待处理视频流;以及
所述第一摄像装置对接收自所述第二摄像装置的待处理视频流进行AI视频处理。
CN202210768523.5A 2022-06-30 2022-06-30 用于共享摄像装置处理能力的方法、装置和网络 Pending CN115065784A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210768523.5A CN115065784A (zh) 2022-06-30 2022-06-30 用于共享摄像装置处理能力的方法、装置和网络

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210768523.5A CN115065784A (zh) 2022-06-30 2022-06-30 用于共享摄像装置处理能力的方法、装置和网络

Publications (1)

Publication Number Publication Date
CN115065784A true CN115065784A (zh) 2022-09-16

Family

ID=83204269

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210768523.5A Pending CN115065784A (zh) 2022-06-30 2022-06-30 用于共享摄像装置处理能力的方法、装置和网络

Country Status (1)

Country Link
CN (1) CN115065784A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103634880A (zh) * 2012-08-28 2014-03-12 中兴通讯股份有限公司 业务提供方法及系统、终端
US20180027260A1 (en) * 2009-10-07 2018-01-25 Iwatchlife, Inc. Video analytics with pre-processing at the source end
CN110248156A (zh) * 2019-05-17 2019-09-17 浙江大华技术股份有限公司 视频分析方法、平台设备、智能相机和智能监控系统
CN110798653A (zh) * 2018-08-01 2020-02-14 华为技术有限公司 一种基于多机协作的图像处理方法和视频监控系统
CN113422929A (zh) * 2021-06-10 2021-09-21 浙江大华技术股份有限公司 图像数据的处理方法、装置、存储介质以及电子装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180027260A1 (en) * 2009-10-07 2018-01-25 Iwatchlife, Inc. Video analytics with pre-processing at the source end
CN103634880A (zh) * 2012-08-28 2014-03-12 中兴通讯股份有限公司 业务提供方法及系统、终端
CN110798653A (zh) * 2018-08-01 2020-02-14 华为技术有限公司 一种基于多机协作的图像处理方法和视频监控系统
CN110248156A (zh) * 2019-05-17 2019-09-17 浙江大华技术股份有限公司 视频分析方法、平台设备、智能相机和智能监控系统
CN113422929A (zh) * 2021-06-10 2021-09-21 浙江大华技术股份有限公司 图像数据的处理方法、装置、存储介质以及电子装置

Similar Documents

Publication Publication Date Title
CN109040674B (zh) 一种数据传输方法和装置
CN110177393A (zh) 用于低功耗设备的省电的无线网络连接和注册
JP2023015140A (ja) 監視カメラ、監視システム、監視カメラの制御方法及びプログラム
CN109326123B (zh) 路况信息处理方法和装置
WO2021261917A1 (en) Method and apparatus for handling performance of edge network entities in a mobile communication system
US20120179641A1 (en) Content classification system, content generation classification device, content classification device, classification method, and program
CN110351044B (zh) 一种接入控制信息的传输方法、装置及网络侧设备
CN105306891A (zh) 一种监控预警方法、装置和系统
CN103369537B (zh) 用于利用空白区的方法、设备和系统
US11930399B2 (en) Method, device and system for implementing edge computing
CN110913172A (zh) 一种视频分析设备的管理方法及装置
CN113596706B (zh) 传输设备接入网络的方法、装置、设备及存储介质
CN115065784A (zh) 用于共享摄像装置处理能力的方法、装置和网络
CN114765743A (zh) 蓝牙通信方法、电子设备和存储介质
CN110198522B (zh) 数据传输的方法、装置、电子设备及计算机可读存储介质
CN107181929A (zh) 用于视频监控的方法和装置
US20150358403A1 (en) Method, system, apparatus and computer program product for communication management
US11200409B2 (en) Utilizing an array of cameras including IoT sensors with cameras to search for objects via a wireless communication network
KR102372906B1 (ko) Tvws 대역을 이용하여 재난 상황을 알리는 영상 감시 장치 및 그 동작 방법
CN113485842B (zh) 一种基于设备集群进行数据分析的方法及设备
CN114630346B (zh) 基于无线智能控制平台的数据交互方法、装置
CN110704201A (zh) 多媒体数据共享方法及终端设备
US11637885B2 (en) System and method for sending and rendering an image by a device based on receiver's context
KR20180020033A (ko) 자원 할당 방법 및 이를 위한 장치
US9253652B1 (en) Ad hoc formation of a swarm for information collection and distribution

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20240315

Address after: Unit 1, Building 1, China Telecom Zhejiang Innovation Park, No. 8 Xiqin Street, Wuchang Street, Yuhang District, Hangzhou City, Zhejiang Province, 311100

Applicant after: Tianyi Shilian Technology Co.,Ltd.

Country or region after: China

Address before: Room 1423, No. 1256 and 1258, Wanrong Road, Jing'an District, Shanghai 200072

Applicant before: Tianyi Digital Life Technology Co.,Ltd.

Country or region before: China

TA01 Transfer of patent application right