CN115643491A - 视频流的播放方法和视频监控系统、存储介质及电子装置 - Google Patents

Abstract

本申请公开了一种视频流的播放方法和视频监控系统、存储介质、电子装置，上述方法包括：发送控制请求至第一图像采集装置，以控制第一图像采集装置采集目标对象对应的视频流，其中，控制请求携带有目标对象在第二图像采集装置的全景画面中的第一位置信息；接收第一图像采集装置发送的镜头调整参数和视频流，其中，镜头调整参数包括第一图像采集装置采集视频流的镜头倍数；根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸；通过视频播放框以第一播放尺寸播放视频流，以及通过全景画面播放目标对象对应的全景视频流。

Description

视频流的播放方法和视频监控系统、存储介质及电子装置

技术领域

本申请涉及通信领域，具体而言，涉及一种视频流的播放方法和视频监控系统、存储介质及电子装置。

背景技术

相关技术中，在平安城市监控项目中，在各个重点区域都已经部署了高清视频监控，但由于传统的视频监控在大场景下无法捕捉目标的细节信息，而在专注目标细节时会忽略周围的其他目标，导致安全防范的效果根本无法满足要求。

经过检索发现，现有技术公开了一种多模态协同和融合的目标跟踪方法、装置及系统、介质，通过获取预设区域的广角图像以及目标区域的长焦图像，并将缩放后的长焦图像拼接至便被图像中目标区域对应的位置。

且现有技术中视频播放画面的常规设计如图3所示，可见，图3的设计要点为将特写画面显示固定在某个位置，通过在右下角设置一个固定的视频播放框播放采集到的细节视频流，但设置有视频播放框的位置用户无法看到被视频播放框遮挡住的视频细节，导致部分细节丢失，给用户带来不好的使用体验。

可见，现有技术中仅公开了通过设置固定播放框显示特写画面的技术方案，通过上述方案，在全景画面中显示细节画面时，由于采用了视频融合等方式，会导致部分视频流数据丢失，且对图像进行切割拼接等需要较大计算资源。

针对相关技术中，现有技术无法在不影响全景相机的全景画面录制和播放的情况下，将云台相机录制的细节画面显示在全景相机的全景画面中等问题，尚未提出有效的解决方案。

发明内容

本申请实施例提供了一种视频流的播放方法和视频监控系统、存储介质及电子装置，以至少解决相关技术中，现有技术无法在不影响全景相机的全景画面录制和播放的情况下，将云台相机录制的细节画面显示在全景相机的全景画面中的问题。

根据本申请实施例的一个实施例，提供了一种视频流的播放方法，包括：发送控制请求至第一图像采集装置，以控制所述第一图像采集装置采集目标对象对应的视频流，其中，所述控制请求携带有所述目标对象在第二图像采集装置的全景画面中的第一位置信息；接收所述第一图像采集装置发送的镜头调整参数和所述视频流，其中，所述镜头调整参数包括所述第一图像采集装置采集所述视频流的镜头倍数；根据所述镜头调整参数确定视频播放框在所述全景画面中的第一播放尺寸；通过所述视频播放框以所述第一播放尺寸播放所述视频流，以及通过所述全景画面播放所述目标对象对应的全景视频流。

根据本申请实施例的另一个实施例，还提供了一种视频监控系统，包括：第一图像采集装置，用于接收第二图像采集装置发送的控制请求，并根据所述控制请求采集目标对象对应的视频流，并将采集所述视频流的镜头调整参数和所述视频流发送至所述第二图像采集装置，其中，所述控制请求携带有所述目标对象在第二图像采集装置的全景画面中的第一位置信息；第二图像采集装置，与所述第一图像采集装置连接，用于接收所述第一图像采集装置发送的镜头调整参数和所述视频流，根据所述镜头调整参数确定视频播放框在所述全景画面中的第一播放尺寸；以及通过所述视频播放框以所述第一播放尺寸播放所述视频流，以及通过所述全景画面播放所述目标对象对应的全景视频流，其中，所述镜头调整参数包括所述第一图像采集装置采集所述视频流的镜头倍数。

根据本申请实施例的另一方面，还提供了一种计算机可读的存储介质，该计算机可读的存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述视频流的播放方法。

根据本申请实施例的又一方面，还提供了一种电子装置，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，上述处理器通过计算机程序执行上述的视频流的播放方法。

在本申请实施例中，第二图像采集装置发送携带有目标对象在第二图像采集装置的全景画面中的第一位置信息的控制请求至第一图像采集装置，以控制第一图像采集装置采集目标对象对应的视频流；接收第一图像采集装置发送的视频流和包括第一图像采集装置采集视频流的镜头倍数的镜头调整参数；根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸；并通过视频播放框以第一播放尺寸播放视频流，以及通过全景画面播放目标对象对应的全景视频流；采用上述技术方案，解决了相关技术中，现有技术无法在不影响全景相机的全景画面录制和播放的情况下，将云台相机录制的细节画面显示在全景相机的全景画面中的问题，实现了在全景画面中独立播放细节画面和全景画面的技术效果。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1是本申请实施例的一种可选的视频流的播放方法的摄像设备的硬件结构框图；

图2是本申请实施例的一种可选的视频流的播放方法的流程示意图；

图3是本申请实施例的一种可选的视频监控系统的显示界面示意图；

图4是本申请实施例的一种可选的视频流的采集装置的结构示意图；

图5是本申请实施例的一种可选的视频播放界面的正常画面展示示意图；

图6是本申请实施例的一种可选的视频播放界面的细节展示示意图；

图7是本申请实施例的一种可选的视频流的播放界面示意图；

图8是根据本申请实施例的一种视频监控系统的结构框图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。

需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

本申请实施例所提供的方法可以在摄像设备或者类似的运算系统中执行。以运行在摄像设备上为例，图1是本申请实施例的一种视频流的播放方法的摄像设备的硬件结构框图。如图1所示，计算机终端可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理系统)和用于存储数据的存储器104，在一个示例性实施例中，上述摄像设备还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解，图1所示的结构仅为示意，其并不对上述计算机终端的结构造成限定。例如，摄像设备还可包括比图1中所示更多或者更少的组件，或者具有与图1所示等同功能或比图1所示功能更多的不同的配置。

存储器104可用于存储计算机程序，例如，应用软件的软件程序以及模块，如本申请实施例中的视频流的播放方法对应的计算机程序，处理器102通过运行存储在存储器104内的计算机程序，从而执行各种功能应用以及数据处理，即实现上述的方法。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储系统、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至安全文本。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

传输系统106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括摄像设备的通信供应商提供的无线网络。在一个实例中，传输系统106包括一个网络适配器(Network Interface Controller，简称为NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。

在本实施例中提供了一种视频流的播放方法，应用于上述摄像设备，图2是根据本申请实施例的一种可选的视频流的播放方法的流程图，该流程包括如下步骤：

步骤S202，发送控制请求至第一图像采集装置，以控制第一图像采集装置采集目标对象对应的视频流，其中，控制请求携带有目标对象在第二图像采集装置的全景画面中的第一位置信息；

需要说明的是，第二图像采集装置(例如：全景相机)在采集全景视频流时，会记录该目标(即上述目标对象)在全景画面中的位置(即上述第一位置信息)、目标类型、目标ID、时间等，其中，第一位置信息为该目标以全景画面左上角为坐标原点的坐标值，目标类型可以为人、车、动物等，目标ID用于标识该目标，可以为一串数字，也可以是字符等，本申请对此不作限制。

步骤S204，接收第一图像采集装置发送的镜头调整参数和所述视频流，其中，镜头调整参数包括第一图像采集装置采集所述视频流的镜头倍数；

需要说明的是，上述镜头倍数为第一图像采集装置(例如：云台相机)发送的变倍数，该变倍数由第一图像采集装置对目标进行对焦处理时，达到刚好把目标包含时的相机倍数，随着目标的移动，该变倍数也会随之改变。

步骤S206，根据所述镜头调整参数确定视频播放框在全景画面中的第一播放尺寸；

需要说明的是，上述第一播放尺寸不仅可以通过该镜头调整参数确定，还可以为预设的固定大小值或预设关系值，譬如，固定设置为全景画面的0.2倍等，或设置第一播放尺寸的具体数值等，本申请对此不作限制。

步骤S208,通过视频播放框以第一播放尺寸播放所述视频流，以及通过全景画面播放目标对象对应的全景视频流。

通过上述步骤，第二图像采集装置发送携带有目标对象在第二图像采集装置的全景画面中的第一位置信息的控制请求至第一图像采集装置，以控制第一图像采集装置采集目标对象对应的视频流；接收第一图像采集装置发送的视频流和包括第一图像采集装置采集视频流的镜头倍数的镜头调整参数；根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸；并通过视频播放框以第一播放尺寸播放所述视频流，以及通过全景画面播放目标对象对应的全景视频流；采用上述技术方案，解决了相关技术中，现有技术无法在不影响全景相机的全景画面录制和播放的情况下，将其它相机(例如，云台相机)录制的细节画面显示在全景相机的全景画面中的问题，实现了在全景画面中独立播放细节画面和全景画面的技术效果。

可选的，在执行上述播放步骤S208：通过视频播放框播放视频流，以及通过全景画面播放目标对象对应的全景视频流之前，该方法还包括：在全景画面中检测到目标对象的情况下，获取全景视频流的每一帧的第一索引，其中，第一索引包括：第二位置信息和第一时间信息，第二位置信息用于指示目标对象在全景视频流的每一帧所指示的全景画面中的位置，第一时间信息用于指示第二图像采集装置采集全景视频流的每一帧的时间。

在第二图像采集装置检测到目标对象的情况下，在对目标对象进行全景视频流采集的同时，第二图像采集装置会保存该与目标对象对应的全景视频流的第一索引，第一索引包括用于指示该目标对象在全景视频流的每一帧所指示的全景画面中的位置的第二位置信息，即保存每一帧全景视频流中目标对象的位置坐标；第一索引还包括用于指示该第二图像采集装置采集该全景视频流的每一帧的时间，即记录该全景相机采集到该目标对象对应的全景视频流的每一帧的时间。

需要说明的是，若目标对象在同一位置逗留，即一段时间内该目标对象没有移动位置的情况下，第一索引中的第一时间信息也可以是一个时间跨度，即记录该目标对象在同一位置停止的时间跨度，即第一时间信息可以是单个时间值，也可以是一个时间跨度信息，本申请对此不作限制。

可选的，基于上述获取步骤：获取全景视频流的每一帧的第一索引之后，该方法还包括：接收第一图像采集装置发送的第二索引，其中，第二索引包括：视频流的每一帧的第二时间信息和存储信息，第二时间信息用于指示第一图像采集装置采集视频流的每一帧的时间，存储信息用于指示视频流的每一帧的存储位置；根据第一索引和第二索引建立第二位置信息与存储信息之间的映射关系。

在接收第一图像采集装置发送的视频流的同时，第一图像采集装置还会同步发送第二索引给全景相机，该第二索引包括该视频流的每一帧的第二时间信息和存储信息，第二时间信息用于指示该云台相机采集该视频流的每一帧的时间信息，存储信息用于指示该视频流的每一帧的存储位置，即存储地址；根据第二图像采集装置的第一索引和第一图像采集装置的第二索引建立该第二位置信息和该存储信息之间的映射关系。

可选的，上述步骤：根据第一索引和第二索引建立第二位置信息和存储信息之间的映射关系，可以通过以下步骤来实现，具体包括：获取第一索引中包含的第一时间信息和第二索引中包含的第二时间信息；在第一时间信息和第二时间信息相同的情况下，为与第一时间信息对应的第二位置信息和与第二时间信息对应的存储信息建立映射关系。

通过以下步骤建立该第二位置信息和存储信息之间的映射关系，包括：获取该第一索引中的第一时间信息和第二索引中的第二时间信息，在第一时间信息和第二时间信息相同的情况下，为与该第一时间信息对应的第二位置信息和与该第二时间信息对应的存储信息建立映射关系。即在获取第一索引和第二索引的过程中，由于第一索引和第二索引分别是指示到每一帧全景视频流和每一帧视频流的，因此第一索引的第一时间信息和第二位置信息之间已经存在一一对应的关系，且第二索引的第二时间信息和存储信息之间也已存在一一对应的关系了，故可以将时间相同的第二位置信息和存储信息对应起来，得到它们之间的映射关系。

在一个示例性实施例中，第一索引还包括：目标对象的标识信息，根据第一索引和第二索引建立第二位置信息与存储信息之间的映射关系之后，该方法还包括：获取第一索引中与目标对象的标识信息对应的全部的第二位置信息和与第二位置信息对应的第一时间信息；根据与全部的第二位置信息对应的第一时间信息将全部的第二位置信息依次连接，得到目标对象的三维空间轨迹曲线。

可选的，在获取全景视频流的第一索引的时候，还可以记录目标对象的标识信息，并在该映射关系建立完成之后，获取与该标识信息对应的目标对象的全部第二位置信息，根据第一时间信息将全部的第二位置信息依次连接，得到该目标对象的三维空间轨迹曲线；即根据目标对象的标识信息获取第一索引中记录的所有该目标对象的第二位置信息以及时间信息，按照时间顺序将该第二位置信息依次连接，得到该目标对象的行动轨迹曲线，即该三维空间轨迹曲线。

在一个示例性实施例中，得到目标对象的三维空间轨迹曲线之后，该方法还包括：在全景视频流的第一索引中包含多种标识信息的情况下，确定全景视频流中存在多个目标对象；根据全景视频流的第一索引中的标识信息分别获取与多个目标对象对应的所有第二位置信息，并分别根据与所有的第二位置信息对应的第一时间信息将目标对象对应的所有第二位置信息依次连接，得到与多个目标对象对应的多条三维空间轨迹曲线；通过不同标识显示多条三维空间轨迹曲线。

即第二图像采集装置(例如：全景相机)可能存在同时录制多个目标对象的情况，此时全景视频流中包含多种标识信息，可以通过标识信息区分不同目标对象，并获取与多个目标对象对应的全部第二位置信息，根据时间顺序将多个目标对象对应的全部第二位置信息依次连接，得到该多个对象各自的三维空间轨迹曲线；即通过该多个目标对象的标识信息将第一索引中的第二位置信息分类，并根据各自的第一时间信息将第二位置信息依次连接，得到多个目标对象各自对应的三维空间轨迹曲线；并通过不同标识显示该多条三维空间轨迹曲线。

需要说明的是，上述通过不同标识显示多条三维空间轨迹可以通过不同颜色，也可以通过不同形状，本申请对此不作限制。

可选的，基于上述步骤：得到目标对象的三维空间轨迹曲线之后，上述方法还包括：接收第二对象的选择操作，其中，选择操作用于在三维空间轨迹曲线中选择目标对象的目标位置；根据目标对象的目标位置确定目标对象的目标位置信息，并根据第一索引中包含的位置信息与第二索引中包含的存储信息之间的对应关系确定与目标位置信息对应的目标存储信息；播放与目标存储信息对应的目标视频流。

由于记录了该目标对象的运动轨迹，上述第二对象(例如，用户)可以直观地发现运动目标在某个时间段前后整个全景画面中的活动路径，而不需要观看整个录像，且由于目标对象的第二位置信息和存储信息已建立好映射关系，因此第二对象可以通过直接在第二位置信息形成的三维空间轨迹曲线中选择目标位置，从而调出对应的视频进行观看。

在一个示例性实施例中，上述播放步骤S208：通过视频播放框以第一播放尺寸播放视频流，以及通过全景画面播放目标对象对应的全景视频流，可以通过以下步骤来实现，包括：根据第一索引确定目标对象在连续的不同时刻，在全景画面的第二位置信息；根据不同时刻对应的第二位置信息调整视频播放框在全景画面中的位置；通过调整位置后的视频播放框以第一播放尺寸播放视频流，以及通过全景画面播放目标对象对应的全景视频流。

通过该视频播放框以第一播放尺寸播放该视频流，以及通过该全景画面播放该目标对象对应的全景视频流过程中，还需要根据该第一索引确定该目标对象在连续的不同时刻，在全景画面中的第二位置信息；并根据不同时刻对应的第二位置信息调整该视频播放框在该全景画面中的位置，并通过调整位置后的视频播放框以该第一播放尺寸播放该视频流，以及通过该全景画面播放该目标对象对应的全景视频流；即在播放视频流的过程中，实时获取目标对象在全景画面中的第二位置信息，并根据该第二位置信息调整视频播放框的位置，即令视频播放框的位置与目标对象的位置保持一致。

需要说明的是，通过上述处理，目标对象在全景画面中可以进行细节展示，且视频播放框会随目标移动，用户体验感更好。

可选的，执行上述确定步骤S206：根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸之前，上述方法还包括：在镜头调整参数包括的镜头倍数大于预设阈值的情况下，在全景画面中设置视频播放框；在镜头倍数小于预设阈值的情况下，停止在全景画面中设置视频播放框。

在根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸之前，需要先判断镜头调整参数的镜头倍数是否大于预设阈值，在镜头倍数大于预设阈值的情况下，才在该全景画面中设置该视频播放框，在镜头倍数小于预设阈值的情况下，不在该全景画面中设置该视频播放框。可以理解的是，若镜头倍数过小，则说明云台相机与全景相机采集的视频流几乎相同，因此可以直接播放视频流，自然也无需设置视频播放框了。

可选的，执行上述确定步骤S206：根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸，可以通过以下步骤来实现，包括：获取全景画面的第二播放尺寸以及镜头调整参数与尺寸比例之间的预设对应关系，其中，尺寸比例用于指示第一播放尺寸与第二播放尺寸的比值，第一播放尺寸小于第二播放尺寸；根据预设对应关系确定与镜头调整参数对应的目标尺寸比例；根据第二播放尺寸和目标尺寸比例确定与镜头调整参数对应的视频播放框的第一播放尺寸。

根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸的过程包括：先获取全景画面的第二播放尺寸以及该镜头调整参数与尺寸比例之间的预设对应关系，该尺寸比例用于指示第一播放尺寸和第二播放尺寸之间的比值，且第一播放尺寸小于第二播放尺寸；根据该预设对应关系确定与该镜头调整参数对应的目标尺寸比例；最后根据该第二播放尺寸和目标尺寸比例确定与该镜头调整参数对应的该视频播放框的第一播放尺寸。

举例说明，镜头调整参数与尺寸比例之间存在如下预设对应关系：镜头调整参数为9-10时，尺寸比例为1/7；镜头调整参数为7-8时，尺寸比例为1/6；镜头调整参数为5-6时，尺寸比例为1/5；镜头调整参数为3-4时，尺寸比例为1/4；即若镜头调整参数为5时，对应的尺寸比例为1/5，确定全景画面的第二播放尺寸为50寸，则确定第一播放尺寸为10寸。

需要说明的是，上述镜头调整参数与尺寸比例之间的对应关系仅用作示例，本申请对此不作限制。

在本实施例中提供了可选的一种视频流的采集装置，图4是现有技术中的一种可选的视频流的采集装置的结构示意图，如图4所示：

可见，该采集装置包括一个全景相机和一个云台相机，可以通过该全景相机对目标区域进行图像采集，在识别到目标对象时，通过云台相机对目标对象进行细节采集，但该采集装置仅能够实现全景视频流和细节视频流的分开采集，并未公开如何对视频流进行融合播放。

图5为本申请实施例的一种可选的视频播放界面的正常画面展示示意图，图6为本申请实施例的一种可选的视频播放界面的细节展示示意图，如图5和图6所示：

图5为手机APP或显示器的正常显示界面，用于显示监控画面，可以实时预览监控；但在监控通道较多时则显示多窗格，如1，4，6，9，16等，即一旦有2个画面则会切4个窗格，对于手机屏幕来说，切成4个以上时，画面会变得很小，实况/直播观察效果较差。若有某个目标画面要看细节时，一般需要用户切屏或者手动滑动/操作窗口，且电子放大时，只是放大细节，而全景画面的其他位置则会看不见，如图6所示，图6为放大后的显示画面，虽然用户可以清楚地看见目标区域的细节画面，但此时用户无法看见其他区域。而若要将放大区域放在目标实际位置，进行图像融合，则也会覆盖一部分区域，造成图像丢失，如图7所示，图7为本申请实施例的一种可选的视频流的播放界面示意图。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例的方法。

图8是根据本申请实施例的一种视频监控系统的结构框图；如图8所示，包括：

第一图像采集装置82，用于接收第二图像采集装置发送的控制请求，并根据控制请求采集目标对象对应的视频流，并将采集视频流的镜头调整参数和视频流发送至第二图像采集装置，其中，控制请求携带有目标对象在第二图像采集装置的全景画面中的第一位置信息；

第二图像采集装置84，与第一图像采集装置连接，用于接收第一图像采集装置发送的镜头调整参数和视频流，根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸；以及通过视频播放框以第一播放尺寸播放视频流，以及通过全景画面播放目标对象对应的全景视频流，其中，镜头调整参数包括第一图像采集装置采集视频流的镜头倍数。

通过上述系统，第二图像采集装置发送携带有目标对象在第二图像采集装置的全景画面中的第一位置信息的控制请求至第一图像采集装置，以控制第一图像采集装置采集目标对象对应的视频流；接收第一图像采集装置发送的视频流和包括第一图像采集装置采集所述视频流的镜头倍数的镜头调整参数；根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸；并通过视频播放框以第一播放尺寸播放所述视频流，以及通过全景画面播放目标对象对应的全景视频流；采用上述技术方案，解决了相关技术中，现有技术无法在不影响全景相机的全景画面录制和播放的情况下，将云台相机录制的细节画面显示在全景相机的全景画面中的问题，实现了在全景画面中独立播放细节画面和全景画面的技术效果。

在一个示例性实施例中，第二图像采集装置84，还用于在全景画面中检测到目标对象的情况下，获取全景视频流的每一帧的第一索引，其中，第一索引包括：第二位置信息和第一时间信息，第二位置信息用于指示目标对象在全景视频流的每一帧所指示的全景画面中的位置，第一时间信息用于指示第二图像采集装置采集全景视频流的每一帧的时间。

在第二图像采集装置(例如：全景相机)检测到目标对象的情况下，在对目标对象进行全景视频流采集的同时，第二图像采集装置会保存该与目标对象对应的全景视频流的第一索引，第一索引包括用于指示该目标对象在全景视频流的每一帧所指示的全景画面中的位置的第二位置信息，即保存每一帧全景视频流中目标对象的位置坐标；第一索引还包括用于指示该第二图像采集装置采集该全景视频流的每一帧的时间，即记录该全景相机采集到该目标对象对应的全景视频流的每一帧的时间。

在一个示例性实施例中，第二图像采集装置84，还用于获取全景视频流的每一帧的第一索引之后，接收第一图像采集装置发送的第二索引，其中，第二索引包括：所述视频流的每一帧的第二时间信息和存储信息，第二时间信息用于指示第一图像采集装置采集所述视频流的每一帧的时间，存储信息用于指示所述视频流的每一帧的存储位置；根据第一索引和第二索引建立第二位置信息与存储信息之间的映射关系。

在接收第一图像采集装置(例如：云台相机)发送的视频流的同时，第一图像采集装置还会同步发送第二索引给第二图像采集装置，该第二索引包括该视频流的每一帧的第二时间信息和存储信息，第二时间信息用于指示第一图像采集装置采集该视频流的每一帧的时间信息，存储信息用于指示该视频流的每一帧的存储位置，即存储地址；根据第二图像采集装置的第一索引和第一图像采集装置的第二索引建立该第二位置信息和该存储信息之间的映射关系。

在一个示例性实施例中，第二图像采集装置84，还用于获取第一索引中包含的第一时间信息和第二索引中包含的第二时间信息；在第一时间信息和第二时间信息相同的情况下，为与第一时间信息对应的第二位置信息和与第二时间信息对应的存储信息建立映射关系。

通过以下步骤建立该第二位置信息和存储信息之间的映射关系，包括：获取该第一索引中的第一时间信息和第二索引中的第二时间信息，在第一时间信息和第二时间信息相同的情况下，为与该第一时间信息对应的第二位置信息和与该第二时间信息对应的存储信息建立映射关系。即在获取第一索引和第二索引的过程中，由于第一索引和第二索引分别是指示到每一帧全景视频流和每一帧视频流的，因此第一索引的第一时间信息和第二位置信息之间已经存在一一对应的关系，且第二索引的第二时间信息和存储信息之间也已存在一一对应的关系了，故可以将时间相同的第二位置信息和存储信息对应起来，得到它们之间的映射关系。

在一个示例性实施例中，第一索引还包括：目标对象的标识信息，第二图像采集装置84，还用于根据第一索引和第二索引建立第二位置信息与存储信息之间的映射关系之后，获取第一索引中与目标对象的标识信息对应的全部的第二位置信息和与第二位置信息对应的第一时间信息；根据与全部的第二位置信息对应的第一时间信息将全部的第二位置信息依次连接，得到目标对象的三维空间轨迹曲线。

可选的，在获取全景视频流的第一索引的时候，还可以记录目标对象的标识信息，并在该映射关系建立完成之后，获取与该标识信息对应的目标对象的全部第二位置信息，根据第一时间信息将全部的第二位置信息依次连接，得到该目标对象的三维空间轨迹曲线；即根据目标对象的标识信息获取第一索引中记录的所有该目标对象的第二位置信息以及时间信息，按照时间顺序将该第二位置信息依次连接，得到该目标对象的行动轨迹曲线，即该三维空间轨迹曲线。

在一个示例性实施例中，第二图像采集装置84，还用于得到目标对象的三维空间轨迹曲线之后，在全景视频流的第一索引中包含多种标识信息的情况下，确定全景视频流中存在多个目标对象；根据全景视频流的第一索引中的标识信息分别获取与多个目标对象对应的所有第二位置信息，并分别根据与所有的第二位置信息对应的第一时间信息将目标对象对应的所有第二位置信息依次连接，得到与多个目标对象对应的多条三维空间轨迹曲线；通过不同标识显示多条三维空间轨迹曲线。

即第二图像采集装置可能存在同时录制多个目标对象的情况，此时全景视频流中包含多种标识信息，可以通过标识信息区分不同目标对象，并获取与多个目标对象对应的全部第二位置信息，根据时间顺序将多个目标对象对应的全部第二位置信息依次连接，得到该多个对象各自的三维空间轨迹曲线；即通过该多个目标对象的标识信息将第一索引中的第二位置信息分类，并根据各自的第一时间信息将第二位置信息依次连接，得到多个目标对象各自对应的三维空间轨迹曲线；并通过不同标识显示该多条三维空间轨迹曲线。

在一个示例性实施例中，第二图像采集装置84，还用于得到目标对象的三维空间轨迹曲线之后，接收第二对象的选择操作，其中，选择操作用于在三维空间轨迹曲线中选择目标对象的目标位置；根据目标对象的目标位置确定目标对象的目标位置信息，并根据第一索引中包含的位置信息与第二索引中包含的存储信息之间的对应关系确定与目标位置信息对应的目标存储信息；播放与目标存储信息对应的目标视频流。

由于记录了该目标对象的运动轨迹，上述第二对象(例如：用户)可以直观地发现运动目标在某个时间段前后整个全景画面中的活动路径，而不需要观看整个录像，且由于目标对象的第二位置信息和存储信息已建立好映射关系，因此第二对象可以通过直接在第二位置信息形成的三维空间轨迹曲线中选择目标位置，从而调出对应的视频进行观看。

在一个示例性实施例中，第二图像采集装置84，还用于根据第一索引确定目标对象在连续的不同时刻，在全景画面的第二位置信息；根据不同时刻对应的第二位置信息调整视频播放框在全景画面中的位置；通过调整位置后的视频播放框以第一播放尺寸播放视频流，以及通过全景画面播放目标对象对应的全景视频流。

通过该视频播放框以第一播放尺寸播放该视频流，以及通过该全景画面播放该目标对象对应的全景视频流过程中，还需要根据该第一索引确定该目标对象在连续的不同时刻，在全景画面中的第二位置信息；并根据不同时刻对应的第二位置信息调整该视频播放框在该全景画面中的位置，并通过调整位置后的视频播放框以该第一播放尺寸播放该视频流，以及通过该全景画面播放该目标对象对应的全景视频流；即在播放视频流的过程中，实时获取目标对象在全景画面中的第二位置信息，并根据该第二位置信息调整视频播放框的位置，即令视频播放框的位置与目标对象的位置保持一致。

在一个示例性实施例中，第一图像采集装置82，还用于根据第一位置信息确定目标对象在全景画面中的位置坐标；通过调整镜头调整参数对位置坐标进行对焦，直至第一图像采集装置采集到的目标对象的图像满足预设条件；采集目标对象对应的视频流。

第一图像采集装置(例如：云台相机)在接收到第二图像采集装置发送的控制指令之后，根据控制指令携带的第一位置信息确定该目标对象在全景画面中的位置坐标；并控制第一图像采集装置的镜头对目标对象进行对焦，直至第一图像采集装置的镜头刚好将目标对象包含，完成对焦，采集该目标对象对应的视频流。

在一个示例性实施例中，第一图像采集装置82，还用于将采集视频流的镜头调整参数和视频流发送至第二图像采集装置之后，将第二索引发送至第二图像采集装置，其中，第二索引包括：视频流的每一帧的第二时间信息和存储信息，第二时间信息用于指示第一图像采集装置采集视频流的每一帧的时间，存储信息用于指示视频流的每一帧的存储位置。

第一图像采集装置在将镜头调整参数和视频流发送给第二图像采集装置之后，获取视频流的第二索引并将第二索引发送给第二图像采集装置，其中，第二索引包括该视频流的每一帧的第二时间信息和存储信息，第二时间信息用于指示第一图像采集装置采集视频流的每一帧的时间，存储信息用于指示视频流的每一帧的存储位置。

在一个示例性实施例中，第二图像采集装置84，还用于根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸之前，在镜头调整参数包括的镜头倍数大于预设阈值的情况下，在全景画面中设置视频播放框；在镜头倍数小于预设阈值的情况下，停止在全景画面中设置视频播放框。

在根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸之前，需要先判断镜头调整参数的镜头倍数是否大于预设阈值，在镜头倍数大于预设阈值的情况下，才在该全景画面中设置该视频播放框，在镜头倍数小于预设阈值的情况下，不在该全景画面中设置该视频播放框。可以理解的是，若镜头倍数过小，则说明第一图像采集装置与第二图像采集装置采集的视频流几乎相同，因此可以直接播放视频流，自然也无需设置视频播放框了。

在一个示例性实施例中，第二图像采集装置84，还用于获取全景画面的第二播放尺寸以及镜头调整参数与尺寸比例之间的预设对应关系，其中，尺寸比例用于指示第一播放尺寸与第二播放尺寸的比值，第一播放尺寸小于第二播放尺寸；根据预设对应关系确定与镜头调整参数对应的目标尺寸比例；根据第二播放尺寸和目标尺寸比例确定与镜头调整参数对应的视频播放框的第一播放尺寸。

根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸的过程包括：先获取全景画面的第二播放尺寸以及该镜头调整参数与尺寸比例之间的预设对应关系，该尺寸比例用于指示第一播放尺寸和第二播放尺寸之间的比值，且第一播放尺寸小于第二播放尺寸；根据该预设对应关系确定与该镜头调整参数对应的目标尺寸比例；最后根据该第二播放尺寸和目标尺寸比例确定与该镜头调整参数对应的该视频播放框的第一播放尺寸。

举例说明，镜头调整参数与尺寸比例之间存在如下预设对应关系：镜头调整参数为9-10时，尺寸比例为1/7；镜头调整参数为7-8时，尺寸比例为1/6；镜头调整参数为5-6时，尺寸比例为1/5；镜头调整参数为3-4时，尺寸比例为1/4；即若镜头调整参数为5时，对应的尺寸比例为1/5，确定全景画面的第二播放尺寸为50寸，则确定第一播放尺寸为10寸。

本申请的实施例还提供了一种存储介质，该存储介质包括存储的程序，其中，上述程序运行时执行上述任一项的方法。

可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的程序代码：

S1，发送控制请求至第一图像采集装置，以控制第一图像采集装置采集目标对象对应的视频流，其中，控制请求携带有目标对象在第二图像采集装置的全景画面中的第一位置信息；

S2，接收第一图像采集装置发送的镜头调整参数和视频流，其中，镜头调整参数包括第一图像采集装置采集视频流的镜头倍数；

S3，根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸；

S4，通过视频播放框以第一播放尺寸播放视频流，以及通过全景画面播放目标对象对应的全景视频流。

在一个示例性实施例中，上述计算机可读存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。

本实施例中的具体示例可以参考上述实施例及示例性实施方式中所描述的示例，本实施例在此不再赘述。

本申请的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。

可选地，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：

S1，发送控制请求至第一图像采集装置，以控制第一图像采集装置采集目标对象对应的视频流，其中，控制请求携带有目标对象在第二图像采集装置的全景画面中的第一位置信息；

S2，接收第一图像采集装置发送的镜头调整参数和视频流，其中，镜头调整参数包括第一图像采集装置采集视频流的镜头倍数；

S3，根据镜头调整参数确定视频播放框在全景画面中的第一播放尺寸；

S4，通过视频播放框以第一播放尺寸播放视频流，以及通过全景画面播放目标对象对应的全景视频流。

可选地，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。

可选地，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。

显然，本领域的技术人员应该明白，上述的本申请的各模块或各步骤可以用通用的计算系统来实现，它们可以集中在单个的计算系统上，或者分布在多个计算系统所组成的网络上，可选地，它们可以用计算系统可执行的程序代码来实现，从而，可以将它们存储在存储系统中由计算系统来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本申请不限制于任何特定的硬件和软件结合。

以上所述仅为本申请的优选实施例而已，并不用于限制本申请，对于本领域的技术人员来说，本申请可以有各种更改和变化。凡在本申请的原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (16)

1.一种视频流的播放方法，其特征在于，包括：

发送控制请求至第一图像采集装置，以控制所述第一图像采集装置采集目标对象对应的视频流，其中，所述控制请求携带有所述目标对象在第二图像采集装置的全景画面中的第一位置信息；

接收所述第一图像采集装置发送的镜头调整参数和所述视频流，其中，所述镜头调整参数包括所述第一图像采集装置采集所述视频流的镜头倍数；

根据所述镜头调整参数确定视频播放框在所述全景画面中的第一播放尺寸；

通过所述视频播放框以所述第一播放尺寸播放所述视频流，以及通过所述全景画面播放所述目标对象对应的全景视频流。

2.根据权利要求1所述的视频流的播放方法，其特征在于，通过所述视频播放框播放所述视频流，以及通过所述全景画面播放所述目标对象对应的全景视频流之前，所述方法还包括：

在所述全景画面中检测到所述目标对象的情况下，获取所述全景视频流的每一帧的第一索引，其中，所述第一索引包括：第二位置信息和第一时间信息，所述第二位置信息用于指示所述目标对象在所述全景视频流的每一帧所指示的全景画面中的位置，所述第一时间信息用于指示所述第二图像采集装置采集所述全景视频流的每一帧的时间。

3.根据权利要求2所述的视频流的播放方法，其特征在于，获取所述全景视频流的每一帧的第一索引之后，所述方法还包括：

接收所述第一图像采集装置发送的第二索引，其中，所述第二索引包括：所述视频流的每一帧的第二时间信息和存储信息，所述第二时间信息用于指示所述第一图像采集装置采集所述视频流的每一帧的时间，所述存储信息用于指示所述视频流的每一帧的存储位置；

根据所述第一索引和所述第二索引建立所述第二位置信息与所述存储信息之间的映射关系。

4.根据权利要求3所述的视频流的播放方法，其特征在于，根据所述第一索引和所述第二索引建立所述第二位置信息与所述存储信息之间的映射关系，包括：

获取所述第一索引中包含的第一时间信息和所述第二索引中包含的第二时间信息；

在所述第一时间信息和所述第二时间信息相同的情况下，为与所述第一时间信息对应的第二位置信息和与所述第二时间信息对应的存储信息建立映射关系。

5.根据权利要求2所述的视频流的播放方法，其特征在于，通过所述视频播放框以所述第一播放尺寸播放所述视频流，以及通过所述全景画面播放所述目标对象对应的全景视频流，包括：

根据所述第一索引确定所述目标对象在连续的不同时刻，在所述全景画面的第二位置信息；

根据不同时刻对应的所述第二位置信息调整所述视频播放框在所述全景画面中的位置；

通过调整位置后的视频播放框以所述第一播放尺寸播放所述视频流，以及通过所述全景画面播放所述目标对象对应的全景视频流。

6.根据权利要求1所述的视频流的播放方法，其特征在于，根据所述镜头调整参数确定视频播放框在所述全景画面中的第一播放尺寸之前，所述方法还包括：

在所述镜头调整参数包括的镜头倍数大于预设阈值的情况下，在所述全景画面中设置所述视频播放框；

在所述镜头倍数小于预设阈值的情况下，停止在所述全景画面中设置所述视频播放框。

7.根据权利要求1所述的视频流的播放方法，其特征在于，根据所述镜头调整参数确定视频播放框在所述全景画面中的第一播放尺寸，包括：

获取所述全景画面的第二播放尺寸以及所述镜头调整参数与尺寸比例之间的预设对应关系，其中，所述尺寸比例用于指示第一播放尺寸与第二播放尺寸的比值，所述第一播放尺寸小于所述第二播放尺寸；

根据所述预设对应关系确定与所述镜头调整参数对应的目标尺寸比例；

根据所述第二播放尺寸和所述目标尺寸比例确定与所述镜头调整参数对应的所述视频播放框的第一播放尺寸。

8.一种视频监控系统，其特征在于，包括：

第一图像采集装置，用于接收第二图像采集装置发送的控制请求，并根据所述控制请求采集目标对象对应的视频流，并将采集所述视频流的镜头调整参数和所述视频流发送至所述第二图像采集装置，其中，所述控制请求携带有所述目标对象在第二图像采集装置的全景画面中的第一位置信息；

第二图像采集装置，与所述第一图像采集装置连接，用于接收所述第一图像采集装置发送的镜头调整参数和所述视频流，根据所述镜头调整参数确定视频播放框在所述全景画面中的第一播放尺寸；以及通过所述视频播放框以所述第一播放尺寸播放所述视频流，以及通过所述全景画面播放所述目标对象对应的全景视频流，其中，所述镜头调整参数包括所述第一图像采集装置采集所述视频流的镜头倍数。

9.根据权利要求8所述的视频监控系统，其特征在于，所述第二图像采集装置，还用于在所述全景画面中检测到所述目标对象的情况下，获取所述全景视频流的每一帧的第一索引，其中，所述第一索引包括：第二位置信息和第一时间信息，所述第二位置信息用于指示所述目标对象在所述全景视频流的每一帧所指示的全景画面中的位置，所述第一时间信息用于指示所述第二图像采集装置采集所述全景视频流的每一帧的时间。

10.根据权利要求9所述的视频监控系统，其特征在于，所述第二图像采集装置，还用于获取所述全景视频流的每一帧的第一索引之后，接收所述第一图像采集装置发送的第二索引，其中，所述第二索引包括：所述视频流的每一帧的第二时间信息和存储信息，所述第二时间信息用于指示所述第一图像采集装置采集所述视频流的每一帧的时间，所述存储信息用于指示所述视频流的每一帧的存储位置；根据所述第一索引和所述第二索引建立所述第二位置信息与所述存储信息之间的映射关系。

11.根据权利要求10所述的视频监控系统，其特征在于，所述第二图像采集装置，还用于获取所述第一索引中包含的第一时间信息和所述第二索引中包含的第二时间信息；在所述第一时间信息和所述第二时间信息相同的情况下，为与所述第一时间信息对应的第二位置信息和与所述第二时间信息对应的存储信息建立映射关系。

12.根据权利要求9所述的视频监控系统，其特征在于，所述第二图像采集装置，还用于根据所述第一索引确定所述目标对象在连续的不同时刻，在所述全景画面的第二位置信息；根据不同时刻对应的所述第二位置信息调整所述视频播放框在所述全景画面中的位置；通过调整位置后的视频播放框以所述第一播放尺寸播放所述视频流，以及通过所述全景画面播放所述目标对象对应的全景视频流。

13.根据权利要求8所述的视频监控系统，其特征在于，所述第一图像采集装置，还用于根据所述第一位置信息确定所述目标对象在所述全景画面中的位置坐标；通过调整镜头调整参数对所述位置坐标进行对焦，直至所述第一图像采集装置采集到的所述目标对象的图像满足预设条件；采集所述目标对象对应的视频流。

14.根据权利要求8所述的视频监控系统，其特征在于，所述第一图像采集装置，还用于将采集所述视频流的镜头调整参数和所述视频流发送至所述第二图像采集装置之后，将第二索引发送至所述第二图像采集装置，其中，所述第二索引包括：所述视频流的每一帧的第二时间信息和存储信息，所述第二时间信息用于指示所述第一图像采集装置采集所述视频流的每一帧的时间，所述存储信息用于指示所述视频流的每一帧的存储位置。

15.一种计算机可读的存储介质，其特征在于，所述计算机可读的存储介质包括存储的程序，其中，所述程序运行时执行上述权利要求1至7任一项中所述的方法。

16.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为通过所述计算机程序执行所述权利要求1至7任一项中所述的方法。

Images