CN111757185A - 一种视频播放方法和装置 - Google Patents

Abstract

本发明公开了一种视频播放方法和装置。本发明的视频播放方法，通过获取对目标区域进行拍摄得到的视频，目标区域包括一个或多个目标物。根据视频的拍摄信息对视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系。基于映射关系，在视频的播放过程中结合全景图进行目标物的可视化展示。这样可以更加清楚地了解视频中的目标物在现实中的位置，使目标物更加直观。根据拍摄信息对目标物进行识别，可以使目标物的识别更加准确。同时，通过目标物控制视频播放，更容易进行目标物的播放展示，而不需要通过调整进度条对目标物进行寻找，使视频的播放体验更加好，增加视频播放控制的多元化。

Description

一种视频播放方法和装置

技术领域

本发明涉及视频播放技术领域，具体涉及一种视频播放方法和装置。

背景技术

现有技术在视频播放中，可以通过调节播放的进度条，使视频跳转到相应的时间节点进行播放。这样就会存在一个问题，在不知道想观看片段的时间节点的情况下，需要多次调整进度条，才能确定相应地播放位置，导致查看不方便，影响观看效率。而且，视频播放时只显示视频播放画面，也不利于观看者对整个视频内容的把握。

另一方面，在一些特殊的领域，例如太阳能发电厂中，通过无人机载设备拍摄光伏板，获得光伏板的视频数据。由于各个光伏板结构相同，当视频播放速度过快且整个视频画面中充满光伏板时，观看者容易失去空间感，难以对各个光伏板进行区分，也就是无法将视频中的光伏板与现实中的光伏板建立连接，造成查看不方便且无法快速确定无人设备所拍摄的位置的问题。因此，需要一种更加方便显示视频内容的方法。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的一种视频播放方法和装置。

依据本发明的一个方面，提供了一种视频播放方法，该方法包括：

获取对目标区域进行拍摄得到的视频，所述目标区域包括一个或多个目标物；

根据所述视频的拍摄信息对所述视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系；

基于所述映射关系，在所述视频的播放过程中结合所述全景图进行目标物的可视化展示。

可选地，所述根据所述视频的拍摄信息对所述视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系包括：

根据所述目标区域中各目标物对应的类型选用相应类型的识别算法；

当根据识别算法识别出指定类型的第一目标物时，根据所述拍摄信息确定该目标物的地理位置信息；

根据第一目标物的地理位置信息和所述全景图中各目标物的地理位置信息，确定所述全景图中与所述第一目标物匹配的第二目标物；

建立所述第一目标物与所述第二目标物的映射关系。

可选地，所述基于所述映射关系，在所述视频的播放过程中结合所述全景图进行目标物的可视化展示包括：

在所述视频播放的过程中展示所述全景图，当所述视频中出现目标物时，根据所述映射关系在所述全景图中标记出对应的目标物。

可选地，所述映射关系中保存有识别出的目标物在所述视频中出现的时间点、该时间点对应的拍摄信息以及全景图中对应目标物的地理位置信息。

可选地，该方法还包括：

根据所述拍摄信息构建拍摄轨迹，将所述拍摄轨迹显示在所述全景图中；

所述基于所述映射关系，在所述视频的播放过程中结合所述全景图进行目标物的可视化展示包括：

响应于对拍摄轨迹上的一个轨迹点的选取请求，根据所述映射关系确定相应的时间点，将所述视频跳转至确定的时间点进行播放。

可选地，所述基于所述映射关系，在所述视频的播放过程中结合所述全景图进行目标物的可视化展示包括：

响应于对所述全景图中指定目标物的选取请求，根据所述映射关系确定相应的时间点，将所述视频跳转至确定的时间点进行播放。

可选地，所述视频是通过机载相机拍摄得到的；

所述拍摄信息包括相机拍摄时的姿态信息和/或地理位置信息。

依据本发明的另一个方面，提供了一种视频播放装置，该装置包括：

获取单元，用于获取对目标区域进行拍摄得到的视频，所述目标区域包括一个或多个目标物；

建立单元，用于根据所述视频的拍摄信息对所述视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系；

展示单元，用于基于所述映射关系，在所述视频的播放过程中结合所述全景图进行目标物的可视化展示。

依据本发明的又一方面，提供了一种电子设备，包括：处理器；以及被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行如上述任一所述的方法。

依据本发明的再一方面，提供了一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现如上述任一所述的方法。

由上述可知，本发明的技术方案，通过获取对目标区域进行拍摄得到的视频，目标区域包括一个或多个目标物。根据视频的拍摄信息对视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系。基于映射关系，在视频的播放过程中结合全景图进行目标物的可视化展示。将视频中的目标物与目标区域的目标物进行映射，这样可以更加清楚地了解视频中的目标物在现实中的位置，使目标物更加直观。根据拍摄信息对目标物进行识别，可以使目标物的识别更加准确。同时，通过目标物控制视频播放，更容易进行目标物的播放展示，而不需要通过调整进度条对目标物进行寻找，使视频的播放体验更加好，增加视频播放控制的多元化。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1示出了根据本发明一个实施例的一种视频播放方法的流程示意图；

图2A示出了根据本发明一个实施例的视频播放画面和全景图的展示图；

图2B示出了根据本发明一个实施例的视频播放画面、红外画面和全景图的展示图；

图3示出了根据本发明一个实施例的一种视频播放装置的结构示意图；

图4示出了根据本发明一个实施例的电子设备的结构示意图；

图5示出了根据本发明一个实施例的计算机可读存储介质的结构示意图。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

图1示出了根据本发明一个实施例的一种视频播放方法的流程示意图。如图1所示，该方法包括：

步骤S110，获取对目标区域进行拍摄得到的视频，目标区域包括一个或多个目标物。

目标区域是需要监测的区域，目标区域中的目标物是监测对象，对目标区域拍摄视频，以从视频中了解各个目标物的状况。例如在光伏发电站中，对布置光伏板的区域进行拍摄，以从拍摄的视频中了解光伏板的状况，如是否存在破损等。其中，各个光伏板即是目标物。视频可以采用各种拍摄方式获得，例如通过搭载在无人机上的相机拍摄而得。

步骤S120，根据视频的拍摄信息对视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系。

为了解决视频播放时只能通过调整进度条改变视频的播放位置的问题，本发明提出了通过目标物调整视频的播放位置。这样就需要对视频中的目标物进行识别，建立视频的播放位置与目标物的映射关系，以直接通过目标物确定视频的播放位置。例如，点击目标物以使视频跳转至相应目标物出现的时间点进行播放。

也就是说，对整个视频中的目标物进行识别，记录目标物的信息和目标物出现在视频中的播放位置信息。为了使目标物更加直观，将视频中的目标物与目标区域的目标物进行映射，具体地将其映射至目标区域的全景图中，这样可以更加清楚地了解视频中的目标物在现实中的位置，使目标物更加明确。目标区域的全景图可以通过卫星地图获取，或者航空器对目标区域进行高空拍摄获得，或者无人机对目标区域低空拍摄后进行拼接，或者是人工绘制的虚拟化图纸。

视频的拍摄信息具体是指拍摄视频时的信息，例如视频的拍摄位置、视频的拍摄时间等。根据视频的拍摄信息对视频进行目标物识别，也就是根据视频的拍摄位置或是拍摄时间确定视频中的目标物。在识别目标物时，可以对视频的每一帧进行识别，记录每帧中的目标物与帧信息，直至对视频的所有帧完成识别。

以上述光伏板的视频为例，由于各个光伏板的结构均相同，当各个光伏板上没有设置识别标志时，用户难以确定当前视频画面中的光伏板在现实中的位置。因此对视频每一帧中的光伏板进行识别，并将视频中的光伏板与发电站全景图中对应的光伏板建立映射关系，例如识别出视频中的光伏板为1号光伏板，将其映射至全景图中1号光伏板所在的位置，这样就可以确定视频中的光伏板在现实中的位置，以使视频显示的信息更加清楚直观。

步骤S130，基于映射关系，在视频的播放过程中结合全景图进行目标物的可视化展示。

在视频播放的同时，展示目标区域的全景图，并将当前视频画面中的目标物与全景图中的目标物一一对应。全景图作为辅助展示，其中展示了各个目标物在目标区域中的位置。将视频中的目标物与全景图中对应的目标物进行对应展示，方便用户更加直观地了解目标物。另外，还可以通过在全景图中选中目标物，根据目标物的映射关系，控制视频跳转至相应目标物出现在视频中的位置进行播放。这样，更容易进行目标物的播放展示，不需要通过调整进度条对目标物进行寻找，使视频的播放体验更加好。

另一方面，也可以直接展示目标物的信息，例如视频拍摄了1至10号光伏板，将1至10号光伏板的信息在视频播放的同时进行展示，实现目标物的可视化。同时，若其中一个或多个光伏板被选中，基于相应的映射关系，控制视频跳转至相应的光伏板出现的位置进行播放，增加视频播放控制的多元化。

本发明的技术方案，通过获取对目标区域进行拍摄得到的视频，目标区域包括一个或多个目标物。根据视频的拍摄信息对视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系。基于映射关系，在视频的播放过程中结合全景图进行目标物的可视化展示。将视频中的目标物与目标区域中的目标物进行映射，这样可以更加清楚地了解视频中的目标物在现实中的位置，使目标物更加直观。根据拍摄信息对目标物进行识别，可以使目标物的识别更加准确。同时，通过目标物控制视频播放，更容易进行目标物的播放展示，而不需要通过调整进度条对目标物进行寻找，使视频的播放体验更加好，增加视频播放控制的多元化。

在本发明的一个实施例中，如图1所示的方法中，步骤S120中的根据视频的拍摄信息对视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系包括：根据目标区域中各目标物对应的类型选用相应类型的识别算法；当根据识别算法识别出指定类型的第一目标物时，根据拍摄信息确定该目标物的地理位置信息；根据第一目标物的地理位置信息和全景图中各目标物的地理位置信息，确定全景图中与第一目标物匹配的第二目标物；建立第一目标物与第二目标物的映射关系。

不同的目标区域，其中的目标物也不同，在识别目标物时需要相应的识别算法进行识别。例如光伏板的结构与风力发电机的结构不同，需要选用与之对应的识别算法，以提高识别准确率。

为了进行区分，将视频中的目标物称为第一目标物，全景图中的目标物称为第二目标物。当识别出第一目标物时，通过第一目标物的地理位置信息确定第一目标物与全景图中的第二目标物的映射关系。地理位置信息包括经度、纬度等。由于每个目标物的地理位置信息唯一，可以确保所建立的映射关系的准确性。

全景图中各目标物的地理位置信息可以通过定位系统获得，而视频中的目标物的地理位置信息通过拍摄信息进行确定。例如视频由无人机拍摄获得，无人机中设置有GPS定位系统，在其飞行拍摄过程中，GPS会记录无人机的地理位置信息。根据无人机的地理位置信息，就可以确定视频中的目标物的地理位置信息。

以上述光伏板为例，目标区域中的1至10号光伏板的地理位置信息已经通过定位系统确定。无人机上搭载的相机垂直向下拍摄视频，这样，无人机的地理位置信息就是相应目标物的地理位置信息。具体地，识别视频的第一帧中有一个光伏板的画面，第一帧的拍摄时间为10:00。10:00时，无人机的地理位置信息与1号光伏板的地理位置信息相同，因此确定第一帧视频中的光伏板即是1号光伏板，将视频的第一帧与1号光伏板建立映射关系。以此类推，建立2至10号光伏板的映射关系。

另一方面，当无人机上搭载的相机并非垂直向下拍摄，而是存在一定的拍摄角度时，此时无人机的GPS定位的地理位置信息可能与视频画面中的目标物的地理位置信息不对应。这样，就需要通过更多的拍摄信息确定视频画面中目标物的地理位置信息。具体地，无人机上一般设置有采集无人机姿态数据的姿态传感器，获取无人机当前状态下的角速度、加速度等。例如通过惯性测量传感器或陀螺仪测量无人机的俯仰角、偏航角和滚转角等姿态数据，通过无人机上的雷达测量无人机与目标物的距离等。根据无人机的姿态数据确定视频画面中的目标物所在的方向，再结合雷达测得的距离和GPS定位的地理位置信息确定目标物的地理位置信息。

考虑到视频画面中可能同时存在多个目标物，为了建立更加准确的映射关系，对多个目标物进行区别。例如，视频第一帧画面中存在两个光伏板。拍摄信息中还包括有拍摄视频的相机的参数，如相机的焦距、景深等参数。根据相机的参数确定相机所拍摄的画面的范围，将该范围与地理位置信息结合，确定第一帧画面中两个光伏板。例如，确定相机所拍摄的范围大小为5m×5m，在地理位置信息确定的位置上，5m×5m范围内的光伏板包括1号光伏板和2号光伏板，因此将第一帧画面中的两个光伏板分别与1号光伏板和2号光伏板建立映射关系。

当然还存在相应的地理位置信息下并没有对应的光伏板，但是视频画面中又识别出了光伏板的情况，此时也可以采用上述根据相机拍摄范围确定光伏板的方式确定视频画面中的光伏板的具体信息，此处不再赘述。

在本发明的一个实施例中，如图1所示的方法中，步骤S130中的基于映射关系，在视频的播放过程中结合全景图进行目标物的可视化展示包括：在视频播放的过程中展示全景图，当视频中出现目标物时，根据映射关系在全景图中标记出对应的目标物。

全景图作为辅助展示方式，可以帮助用户更加直观地了解目标物。具体如图2A所示，视频播放画面210和全景图220同时展示，当视频播放画面210中出现目标物时，根据相应的映射关系，在全景图220中标记出对应的目标物，例如以方框框出对应的目标物，以使用户观看的更加清楚。若视频画面中可能同时存在多个目标物，则根据相应的映射关系在全景图中将全部的目标物同时标记出来。另外，结合特定的相机拍摄获得的视频，在展示时同步展示特定相机拍摄的视频画面。例如，图2B中展示了普通相机拍摄的视频播放画面210和全景图220，以及红外相机拍摄的红外画面230，其中红外画面230展示了当前目标物的红外信息。当然还可以通过紫外相机或多光谱相机拍摄目标物。

在本发明的一个实施例中，如图1所示的方法中，映射关系中保存有识别出的目标物在视频中出现的时间点、该时间点对应的拍摄信息以及全景图中对应目标物的地理位置信息。

映射关系中保存有相应的目标物信息，以及其他信息。具体地，映射关系中保存有目标物在视频中出现的时间点、该时间点对应的拍摄信息以及全景图中对应目标物的地理位置信息。根据映射关系中保存的信息，就可以通过目标物控制视频播放。

仍然以上述光伏板为例，1号光伏板的映射关系包括1号光伏板在视频中出现的时间点，如1号光伏板出现在第1帧、第50帧视频中，各帧对应的视频的时间点为00:01、10:06等。同时还有拍摄第1帧时的拍摄信息和拍摄第50帧时的拍摄信息，以及1号光伏板的地理位置信息的经纬度。

根据该映射关系，当全景图中的1号光伏板被选中时，则视频首先跳转至00:01进行播放；当1号光伏板再次被选中，则视频跳转至10:06进行播放。

在本发明的一个实施例中，如图1所示的方法中，该方法还包括：根据拍摄信息构建拍摄轨迹，将拍摄轨迹显示在全景图中。步骤S130中的基于映射关系，在视频的播放过程中结合全景图进行目标物的可视化展示包括：响应于对拍摄轨迹上的一个轨迹点的选取请求，根据映射关系确定相应的时间点，将视频跳转至确定的时间点进行播放。

如上述实施例中提到，视频由搭载在无人机上的相机拍摄获得，拍摄信息中包括无人机飞行时的地理位置信息。如此，就可以根据地理位置信息构建出无人机的飞行轨迹，以获得视频的拍摄轨迹。将拍摄轨迹与全景图结合，使拍摄过程更加直观，而且用户也可以从结合的图中了解到各个目标物在视频中出现的大概时间。同时，用户可以通过选中拍摄轨迹上的一个轨迹点，控制视频跳转至相应的时间点进行播放。

每一个轨迹点对应一个地理位置信息，查找出具有相同地理位置信息的映射关系，根据其中保存的视频的时间点，将视频跳转至该时间点进行播放。这样，就实现了通过拍摄轨迹控制视频播放，而不需要多次调整进度条以找出需要观看的目标物。

考虑到轨迹点的地理位置信息精度较高，可能无法匹配到具有完全相同的地理位置信息的映射关系。此时，则匹配一个具有最接近轨迹点的地理位置信息的映射关系，以解决无法匹配的问题。

在本发明的一个实施例中，上述方法中，步骤S130中的基于映射关系，在视频的播放过程中结合全景图进行目标物的可视化展示包括：响应于对全景图中指定目标物的选取请求，根据映射关系确定相应的时间点，将视频跳转至确定的时间点进行播放。

除了上述实施例中可以通过选取轨迹点控制视频播放，还可以通过响应对目标物的选取请求控制视频播放。例如1号光伏板被选中时，根据1号光伏板的映射关系，确定1号光伏板出现在视频中的时间点，控制视频跳转至相应的时间点进行播放，如视频跳转至00:01进行播放；当1号光伏板再次被选中，则视频跳转至10:06进行播放。

在本发明的一个实施例中，如图1所示的方法中，视频是通过机载相机拍摄得到的；拍摄信息包括相机拍摄时的姿态信息和/或地理位置信息。

机载相机，也就是搭载在无人机上的相机。姿态信息是无人机的姿态数据，如无人机的角速度、加速度、俯仰角、偏航角等数据，通过无人机上相应的传感器检测获得，地理位置信息由无人机上的GPS定位获得。无人机在飞行过程中，机载相机对目标区域中的目标物拍摄视频，传感器检测获得无人机的姿态信息，GPS对无人机进行定位，获得地理位置信息。各个信息中包含有对应的时间信息，通过时间信息，可以将视频以姿态信息、地理位置信息一一对应，以获得准确地映射关系。例如根据拍摄第一帧视频时的时间，获取当时的姿态信息和地理位置信息，由此确定第一帧视频中的目标物与全景图中对应目标物的映射关系。

图3示出了根据本发明一个实施例的一种视频播放装置的结构示意图。如图3所示，该装置300包括：

获取单元310，用于获取对目标区域进行拍摄得到的视频，目标区域包括一个或多个目标物。

目标区域是需要监测的区域，目标区域中的目标物是监测对象，对目标区域拍摄视频，以从视频中了解各个目标物的状况。例如在光伏发电站中，对布置光伏板的区域进行拍摄，以从拍摄的视频中了解光伏板的状况，如是否存在破损等。其中，各个光伏板即是目标物。视频可以采用各种拍摄方式获得，例如通过搭载在无人机上的相机拍摄而得。

建立单元320，用于根据视频的拍摄信息对视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系。

为了解决视频播放时只能通过调整进度条改变视频的播放位置的问题，本发明提出了通过目标物调整视频的播放位置。这样就需要对视频中的目标物进行识别，建立视频的播放位置与目标物的映射关系，以直接通过目标物确定视频的播放位置。例如，点击目标物以使视频跳转至相应目标物出现的时间点进行播放。

也就是说，对整个视频中的目标物进行识别，记录目标物的信息和目标物出现在视频中的播放位置信息。为了使目标物更加直观，将视频中的目标物与目标区域的目标物进行映射，具体地将其映射至目标区域的全景图中，这样可以更加清楚地了解视频中的目标物在现实中的位置，使目标物更加明确。目标区域的全景图可以通过卫星地图获取，或者航空器对目标区域进行高空拍摄获得，或者无人机对目标区域低空拍摄后进行拼接，或者是人工绘制的虚拟化图纸。

视频的拍摄信息具体是指拍摄视频时的信息，例如视频的拍摄位置、视频的拍摄时间等。根据视频的拍摄信息对视频进行目标物识别，也就是根据视频的拍摄位置或是拍摄时间确定视频中的目标物。在识别目标物时，可以对视频的每一帧进行识别，记录每帧中的目标物与帧信息，直至对视频的所有帧完成识别。

以上述光伏板的视频为例，由于各个光伏板的结构均相同，当各个光伏板上没有设置识别标志时，用户难以确定当前视频画面中的光伏板在现实中的位置。因此对视频每一帧中的光伏板进行识别，并将视频中的光伏板与发电站全景图中对应的光伏板建立映射关系，例如识别出视频中的光伏板为1号光伏板，将其映射至全景图中1号光伏板所在的位置，这样就可以确定视频中的光伏板在现实中的位置，以使视频显示的信息更加清楚直观。

展示单元330，用于基于映射关系，在视频的播放过程中结合全景图进行目标物的可视化展示。

在视频播放的同时，展示目标区域的全景图，并将当前视频画面中的目标物与全景图中的目标物一一对应。全景图作为辅助展示，其中展示了各个目标物在目标区域中的位置。将视频中的目标物与全景图中对应的目标物进行对应展示，方便用户更加直观地了解目标物。另外，还可以通过在全景图中选中目标物，根据目标物的映射关系，控制视频跳转至相应目标物出现在视频中的位置进行播放。这样，更容易进行目标物的播放展示，而不需要通过调整进度条对目标物进行寻找，使视频的播放体验更加好。

另一方面，也可以直接展示目标物的信息，例如视频拍摄了1至10号光伏板，将1至10号光伏板的信息在视频播放的同时进行展示，实现目标物的可视化。同时，若其中一个或多个光伏板被选中，基于相应的映射关系，控制视频跳转至相应的光伏板出现的位置进行播放，增加视频播放控制的多元化。

本发明的技术方案，通过获取对目标区域进行拍摄得到的视频，目标区域包括一个或多个目标物。根据视频的拍摄信息对视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系。基于映射关系，在视频的播放过程中结合全景图进行目标物的可视化展示。将视频中的目标物与目标区域中的目标物进行映射，这样可以更加清楚地了解视频中的目标物在现实中的位置，使目标物更加直观。根据拍摄信息对目标物进行识别，可以使目标物的识别更加准确。同时，通过目标物控制视频播放，更容易进行目标物的播放展示，而不需要通过调整进度条对目标物进行寻找，使视频的播放体验更加好，增加视频播放控制的多元化。

在本发明的一个实施例中，如图3所示的装置300中，建立单元320，用于根据目标区域中各目标物对应的类型选用相应类型的识别算法；当根据识别算法识别出指定类型的第一目标物时，根据拍摄信息确定该目标物的地理位置信息；根据第一目标物的地理位置信息和全景图中各目标物的地理位置信息，确定全景图中与第一目标物匹配的第二目标物；建立第一目标物与第二目标物的映射关系。

不同的目标区域，其中的目标物也不同，在识别目标物时需要相应的识别算法进行识别。例如光伏板的结构与风力发电机的结构不同，需要选用与之对应的识别算法，以提高识别准确率。

为了进行区分，将视频中的目标物称为第一目标物，全景图中的目标物称为第二目标物。当识别出第一目标物时，通过第一目标物的地理位置信息确定第一目标物与全景图中的第二目标物的映射关系。地理位置信息包括经度、纬度等。由于每个目标物的地理位置信息唯一，可以确保所建立的映射关系的准确性。

全景图中各目标物的地理位置信息可以通过定位系统获得，而视频中的目标物的地理位置信息通过拍摄信息进行确定。例如视频由无人机拍摄获得，无人机中设置有GPS定位系统，在其飞行拍摄过程中，GPS会记录无人机的地理位置信息。根据无人机的地理位置信息，就可以确定视频中的目标物的地理位置信息。

以上述光伏板为例，目标区域中的1至10号光伏板的地理位置信息已经通过定位系统确定。无人机上搭载的相机垂直向下拍摄视频，这样，无人机的地理位置信息就是相应目标物的地理位置信息。具体地，识别视频的第一帧中有一个光伏板的画面，第一帧的拍摄时间为10:00。10:00时，无人机的地理位置信息与1号光伏板的地理位置信息相同，因此确定第一帧视频中的光伏板即是1号光伏板，将视频的第一帧与1号光伏板建立映射关系。以此类推，建立2至10号光伏板的映射关系。

另一方面，当无人机上搭载的相机并非垂直向下拍摄，而是存在一定的拍摄角度时，此时无人机的GPS定位的地理位置信息可能与视频画面中的目标物的地理位置信息不对应。这样，就需要通过更多的拍摄信息确定视频画面中目标物的地理位置信息。具体地，无人机上一般设置有采集无人机姿态数据的姿态传感器，获取无人机当前状态下的角速度、加速度等。例如通过惯性测量传感器或陀螺仪测量无人机的俯仰角、偏航角和滚转角等姿态数据，通过无人机上的雷达测量无人机与目标物的距离等。根据无人机的姿态数据确定视频画面中的目标物所在的方向，再结合雷达测得的距离和GPS定位的地理位置信息确定目标物的地理位置信息。

考虑到视频画面中可能同时存在多个目标物，为了建立更加准确的映射关系，对多个目标物进行区别。例如，视频第一帧画面中存在两个光伏板。拍摄信息中还包括有拍摄视频的相机的参数，如相机的焦距、景深等参数。根据相机的参数确定相机所拍摄的画面的范围，将该范围与地理位置信息结合，确定第一帧画面中两个光伏板。例如，确定相机所拍摄的范围大小为5m×5m，在地理位置信息确定的位置上，5m×5m范围内的光伏板包括1号光伏板和2号光伏板，因此将第一帧画面中的两个光伏板分别与1号光伏板和2号光伏板建立映射关系。

当然还存在相应的地理位置信息下并没有对应的光伏板，但是视频画面中又识别出了光伏板的情况，此时也可以采用上述根据相机拍摄范围确定光伏板的方式确定视频画面中的光伏板的具体信息，此处不再赘述。

在本发明的一个实施例中，如图3所示的装置300中，展示单元330，用于在视频播放的过程中展示全景图，当视频中出现目标物时，根据映射关系在全景图中标记出对应的目标物。

全景图作为辅助展示方式，可以帮助用户更加直观地了解目标物。具体如图2A所示，视频播放画面210和全景图220同时展示，当视频播放画面210中出现目标物时，根据相应的映射关系，在全景图220中标记出对应的目标物，例如以方框框出对应的目标物，以使用户观看的更加清楚。若视频画面中可能同时存在多个目标物，则根据相应的映射关系在全景图中将全部的目标物同时标记出来。另外，结合特定的相机拍摄获得的视频，在展示时同步展示特定相机拍摄的视频画面。例如，图2B中展示了普通相机拍摄的视频播放画面210和全景图220，以及红外相机拍摄的红外画面230，其中红外画面230展示了当前目标物的红外信息。当然还可以通过紫外相机或多光谱相机拍摄目标物。

在本发明的一个实施例中，如图3所示的装置300中，映射关系中保存有识别出的目标物在视频中出现的时间点、该时间点对应的拍摄信息以及全景图中对应目标物的地理位置信息。

映射关系中保存有相应的目标物信息，以及其他信息。具体地，映射关系中保存有目标物在视频中出现的时间点、该时间点对应的拍摄信息以及全景图中对应目标物的地理位置信息。根据映射关系中保存的信息，就可以通过目标物控制视频播放。

仍然以上述光伏板为例，1号光伏板的映射关系包括1号光伏板在视频中出现的时间点，如1号光伏板出现在第1帧、第50帧视频中，各帧对应的视频的时间点为00:01、10:06等。同时还有拍摄第1帧时的拍摄信息和拍摄第50帧时的拍摄信息，以及1号光伏板的地理位置信息的经纬度。

根据该映射关系，当全景图中的1号光伏板被选中时，则视频首先跳转至00:01进行播放；当1号光伏板再次被选中，则视频跳转至10:06进行播放。

在本发明的一个实施例中，如图3所示的装置300中，该装置还包括：轨迹单元，用于根据拍摄信息构建拍摄轨迹，将拍摄轨迹显示在全景图中。展示单元330，进一步用于响应于对拍摄轨迹上的一个轨迹点的选取请求，根据映射关系确定相应的时间点，将视频跳转至确定的时间点进行播放。

如上述实施例中提到，视频由搭载在无人机上的相机拍摄获得，拍摄信息中包括无人机的飞行时的地理位置信息。如此，就可以根据地理位置信息构建出无人机的飞行轨迹，以获得了视频的拍摄轨迹。将拍摄轨迹与全景图结合，使拍摄过程更加直观，而且用户也可以从结合的图中了解到各个目标物在视频中出现的大概时间。同时，用户可以通过选中拍摄轨迹上的一个轨迹点，控制视频跳转至相应的时间点进行播放。

每一个轨迹点对应一个地理位置信息，查找出具有相同地理位置信息的映射关系，根据其中保存的视频的时间点，将视频跳转至该时间点进行播放。这样，就实现了通过拍摄轨迹控制视频播放，而不需要多次调整进度条以找出需要观看的目标物。

考虑到轨迹点的地理位置信息精度较高，可能无法匹配到具有完全相同的地理位置信息的映射关系。此时，则匹配一个具有最接近轨迹点的地理位置信息的映射关系，以解决无法匹配的问题。

在本发明的一个实施例中，上述装置300中，展示单元330，进一步用于响应于对全景图中指定目标物的选取请求，根据映射关系确定相应的时间点，将视频跳转至确定的时间点进行播放。

除了上述实施例中可以通过选取轨迹点控制视频播放，还可以通过响应对目标物的选取请求控制视频播放。例如1号光伏板被选中时，根据1号光伏板的映射关系，确定1号光伏板出现在视频中的时间点，控制视频跳转至相应的时间点进行播放，如视频跳转至00:01进行播放；当1号光伏板再次被选中，则视频跳转至10:06进行播放。

在本发明的一个实施例中，如图3所示的装置300中，视频是通过机载相机拍摄得到的；拍摄信息包括相机拍摄时的姿态信息和/或地理位置信息。

机载相机，也就是搭载在无人机上的相机。姿态信息是无人机的姿态数据，如无人机的角速度、加速度、俯仰角、偏航角等数据，通过无人机上相应的传感器检测获得，地理位置信息由无人机上的GPS定位获得。无人机在飞行过程中，机载相机对目标区域中的目标物拍摄视频，传感器检测获得无人机的姿态信息，GPS对无人机进行定位，获得地理位置信息。各个信息中包含有对应的时间信息，通过时间信息，可以将视频以姿态信息、地理位置信息一一对应，以获得准确地映射关系。例如根据拍摄第一帧视频时的时间，获取当时的姿态信息和地理位置信息，由此确定第一帧视频中的目标物与全景图中对应目标物的映射关系。

综上所述，本发明的技术方案，通过获取对目标区域进行拍摄得到的视频，目标区域包括一个或多个目标物。根据视频的拍摄信息对视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系。基于映射关系，在视频的播放过程中结合全景图进行目标物的可视化展示。将视频中的目标物与目标区域的目标物进行映射，这样可以更加清楚地了解视频中的目标物在现实中的位置，使目标物更加直观。根据拍摄信息对目标物进行识别，可以使目标物的识别更加准确。同时，通过目标物控制视频播放，更容易进行目标物的播放展示，而不需要通过调整进度条对目标物进行寻找，使视频的播放体验更加好，增加视频播放控制的多元化。

需要说明的是：

在此提供的算法和显示不与任何特定计算机、虚拟装置或者其它设备固有相关。各种通用装置也可以与基于在此的示教一起使用。根据上面的描述，构造这类装置所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。

在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。

此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的一种视频播放装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。

例如，图4示出了根据本发明一个实施例的电子设备的结构示意图。该电子设备包括处理器410和被安排成存储计算机可执行指令(计算机可读程序代码)的存储器420。存储器420可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。存储器420具有存储用于执行上述方法中的任何方法步骤的计算机可读程序代码431的存储空间430。例如，用于存储计算机可读程序代码的存储空间430可以包括分别用于实现上面的方法中的各种步骤的各个计算机可读程序代码431。计算机可读程序代码431可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。这些计算机程序产品包括诸如硬盘，紧致盘(CD)、存储卡或者软盘之类的程序代码载体。这样的计算机程序产品通常为例如图5所述的计算机可读存储介质。图5示出了根据本发明一个实施例的一种计算机可读存储介质的结构示意图。该计算机可读存储介质500存储有用于执行根据本发明的方法步骤的计算机可读程序代码431，可以被电子设备400的处理器410读取，当计算机可读程序代码431由电子设备400运行时，导致该电子设备400执行上面所描述的方法中的各个步骤，具体来说，该计算机可读存储介质存储的计算机可读程序代码431可以执行上述任一实施例中示出的方法。计算机可读程序代码431可以以适当形式进行压缩。

应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。

Claims (10)

1.一种视频播放方法，其特征在于，该方法包括：

获取对目标区域进行拍摄得到的视频，所述目标区域包括一个或多个目标物；

根据所述视频的拍摄信息对所述视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系；

基于所述映射关系，在所述视频的播放过程中结合所述全景图进行目标物的可视化展示。

2.如权利要求1所述的方法，其特征在于，所述根据所述视频的拍摄信息对所述视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系包括：

根据所述目标区域中各目标物对应的类型选用相应类型的识别算法；

当根据识别算法识别出指定类型的第一目标物时，根据所述拍摄信息确定该目标物的地理位置信息；

根据第一目标物的地理位置信息和所述全景图中各目标物的地理位置信息，确定所述全景图中与所述第一目标物匹配的第二目标物；

建立所述第一目标物与所述第二目标物的映射关系。

3.如权利要求1所述的方法，其特征在于，所述基于所述映射关系，在所述视频的播放过程中结合所述全景图进行目标物的可视化展示包括：

在所述视频播放的过程中展示所述全景图，当所述视频中出现目标物时，根据所述映射关系在所述全景图中标记出对应的目标物。

4.如权利要求1所述的方法，其特征在于，所述映射关系中保存有识别出的目标物在所述视频中出现的时间点、该时间点对应的拍摄信息以及全景图中对应目标物的地理位置信息。

5.如权利要求4所述的方法，其特征在于，该方法还包括：

根据所述拍摄信息构建拍摄轨迹，将所述拍摄轨迹显示在所述全景图中；

所述基于所述映射关系，在所述视频的播放过程中结合所述全景图进行目标物的可视化展示包括：

响应于对拍摄轨迹上的一个轨迹点的选取请求，根据所述映射关系确定相应的时间点，将所述视频跳转至确定的时间点进行播放。

6.如权利要求4所述的方法，其特征在于，所述基于所述映射关系，在所述视频的播放过程中结合所述全景图进行目标物的可视化展示包括：

响应于对所述全景图中指定目标物的选取请求，根据所述映射关系确定相应的时间点，将所述视频跳转至确定的时间点进行播放。

7.如权利要求1所述的方法，其特征在于，所述视频是通过机载相机拍摄得到的；

所述拍摄信息包括相机拍摄时的姿态信息和/或地理位置信息。

8.一种视频播放装置，其特征在于，该装置包括：

获取单元，用于获取对目标区域进行拍摄得到的视频，所述目标区域包括一个或多个目标物；

建立单元，用于根据所述视频的拍摄信息对所述视频进行目标物识别，建立识别出的目标物与目标区域的全景图中对应目标物的映射关系；

展示单元，用于基于所述映射关系，在所述视频的播放过程中结合所述全景图进行目标物的可视化展示。

9.一种电子设备，其中，该电子设备包括：处理器；以及被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行如权利要求1-7中任一项所述的方法。

10.一种计算机可读存储介质，其中，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被处理器执行时，实现如权利要求1-7中任一项所述的方法。

Images