CN103607568B - 立体街景视频投影方法及系统 - Google Patents

Abstract

本发明提出一种立体街景视频投影方法，其包括如下步骤：S11、获取街景的全景视频流；S13、将所述全景视频流分解为多帧街景图片，并投影到球形坐标系上；S15、将所述多帧街景图片进行叠加，并在所述多帧街景图片之间建立视频流通道；S17、在所述球形坐标系上，按照所述视频流通道连续播放所述多帧街景图片。本发明另外提供一种立体街景视频投影系统。所述立体街景视频投影方法及系统无需要专门拍摄特定地点的全景照片，利用摄像头即可获得实时景象，无需定期进行测绘即可实时监测更新获取最新数据，以摄像头获取的视频取代全景照片，包含的信息较丰富。

Description

立体街景视频投影方法及系统

技术领域

本发明涉及互联网技术领域，尤其涉及一种基于环绕投影的立体街景视频投影方法及系统。

背景技术

随着互联网技术及视频图像等技术的发展，以及社会发展的需求，街景已成为互联网地图的一种通用技术。一方面，将360度全景图像投影在球形坐标系上，用户通过鼠标旋转、放大缩小等操作即可获取多维视觉信息。另一方面，通过360度全景摄像头进行视频拍摄已成为视频监控的主流，而且多摄像头的全景拼接也已被大量采用。

但是，当前街景是主要将全景照片投影到以其拍摄地点为中心的球形坐标系上（水平360°*垂直180°），随鼠标移动，而对图片进行旋转展示。其存在以下不足：其一、需要专门拍摄特定地点的全景照片；其二、随着城市的发展和环境的变化，需要定期进行测绘，以更新获取最新数据；其三、全景照片所包含的的信息较为有限。

发明内容

针对上述问题，本发明的目的是提供一种可解决上述技术问题的立体街景视频投影方法及系统。

一种立体街景视频投影方法，其包括如下步骤：

S11、获取街景的全景视频流；

S13、将所述全景视频流分解为多帧街景图片，并投影到球形坐标系上；

S15、将所述多帧街景图片进行叠加，并在所述多帧街景图片之间建立视频流通道；

S17、在所述球形坐标系上，按照所述视频流通道连续播放所述多帧街景图片。

本发明一较佳实施方式中，步骤S11中，利用摄像头获取街景的全景视频流。

本发明一较佳实施方式中，所述视频流通道基于鼠标轨迹进行建立。

本发明一较佳实施方式中，步骤S13中，进一步包括：

S131、对所述全景视频流进行解码以及重建一帧全景视频图像；

S133、根据所需观看信息，从所述全景视频图像中截取对应区域，并转换坐标得到观看视角的平面图像；

S135、对所述平面图像进行图像处理；

S137、返回步骤S131。

本发明一较佳实施方式中，步骤S133中，所述所需观看信息包括位置、视角。

本发明一较佳实施方式中，步骤S135中，所述图像处理包括图像增强、图像缩放。

本发明一较佳实施方式中，步骤S135中，所述平面图像通过客户端显示设备进行图像显示。

本发明另外提供一种立体街景视频处理系统，其包括：获取全景视频流的视频单元及和所述视频单元相连接的视频流处理单元，所述视频流处理单元对所述全景视频流进行如下处理：

将所述全景视频流分解为多帧街景图片，并投影到球形坐标系上；

将所述多帧街景图片进行叠加，并在所述多帧街景图片之间建立视频流通道；

在所述球形坐标系上，按照所述视频流通道连续播放所述多帧街景图片。

本发明一较佳实施方式中，所述立体街景视频处理系统进一步包括进行图片显示的显示设备，所述显示设备和所述视频流处理单元相连接。

本发明一较佳实施方式中，所述视频单元包括至少一个摄像头。

相较于现有技术，本发明提供的立体街景视频投影方法及系统具有以下优点：其一、无需要专门拍摄特定地点的全景照片，利用摄像头即可获得实时景象；其二、实时监测即可更新获取最新数据，而无需定期进行测绘；其三、以摄像头获取的视频取代全景照片，包含的的信息较丰富。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举实施例，并配合附图，详细说明如下。

附图说明

图1为本发明第一实施例提供的立体街景视频处理系统的示意图；

图2为本发明第二实施例提供的立体街景视频投影方法的流程图；

图3为利用图2所示立体街景视频投影方法进行处理的图像信息演示图。

具体实施方式

下面结合附图及具体实施例对本发明作进一步详细的说明。

请参阅图1，本发明第一实施例提供一种立体街景视频处理系统100，其包括视频单元10和视频流处理单元20，所述视频单元10用于获取全景视频流，其和所述视频流处理单元20相连接，所述视频流处理单元20和对所述全景视频流进行处理，包括：将所述全景视频流分解为多帧街景图片，并投影到球形坐标系上；将所述多帧街景图片进行叠加，并在所述多帧街景图片之间建立视频流通道；及在所述球形坐标系上，按照所述视频流通道连续播放所述多帧街景图片。

本实施例中，所述视频单元10包括至少一个摄像头。可以理解的是，对于不同地方的街景，通过摄像头即可实时获得对应的全景视频流。

可以理解的是，所述视频单元10和所述视频流处理单元20之间可以通过无线通信模块或有线通信模块实现连接，并不局限于单一的具体连接方式，只要能够实现所述全景视频流的数据传输即可。

进一步地，所述立体街景视频处理系统100包括进行图片显示的显示设备30，所述显示设备30和所述视频流处理单元20相连接。可以理解的是，通过所述显示设备30，即可显示所播放的所述多帧街景图片。

可以理解的是，所述显示设备30还可以直接和所述视频单元10连接，以直接显示所述视频单元10获取的全景视频流。

请参阅图2，本发明第二实施例提供一种立体街景视频投影方法，其包括如下步骤：

S11、获取街景的全景视频流。

本实施例中，利用所述视频单元10实时获取街景的全景视频流，并传送至所述视频流处理单元20。

本实施例中，所述全景视频流为水平360*垂直180的全景视频。

S13、将所述全景视频流分解为多帧街景图片，并投影到球形坐标系上。

本实施例中，将水平360*垂直180的全景视频分解为24帧/秒的街景图片。可以理解的是，分解获得的街景图片投影到球形坐标系，即可实现对单帧图片的鼠标旋转展示。

进一步地，包括如下步骤：

S131、对所述全景视频流进行解码以及重建一帧全景视频图像。

具体地，获得全景视频图像IP(t)，其中t表示时间。

S133、根据所需观看信息，从所述全景视频图像中截取对应区域，并转换坐标得到观看视角的平面图像。

具体地，接收鼠标、键盘等输入设备输入t时刻所需观看全景视频流的位置矢量L(t)、视角矢量θ(t)等信息。

可以理解的是，所述位置矢量L(t)包括X、Y、Z坐标，所述视角矢量θ(t)包括水平视角θH、垂直视角θV。

进一步地，获取所述显示设备30的信息D

根据输入所需观看的位置矢量L(t)、视角视角θ(t)等信息，对360°全景图片截取对应区域Ipart(t)∈IP(t)，并进行坐标转换，得到观看视角的平面图像Iview(t)，可以表示为Iview(t)=f(IP(t),L(t),θ(t),D),其中，f()为坐标变换函数，示例如图3所示。

可以理解的是，上述坐标变换函数f()将根据全景视图采集设备、标定等信息而不同。

S135、对所述平面图像进行图像处理。

具体地，对所述平面图像Iview(t)进行图像增强、缩放等处理，以提高可视图像质量与效果，之后存入客户端显示设备进行显存，用于图像显示或后续处理，如视频分析与识别。

S137、返回步骤S131。

即返回步骤S131处理下一帧全景视图。

S15、将所述多帧街景图片进行叠加，并在所述多帧街景图片之间建立视频流通道。

本实施例中，将所述多帧街景图片叠加，进行连续播放。具体地，鼠标移动选择时，按照其方向、速度，在不同帧的街景图片之间选择其相应范围内容，在所述多帧街景图片之间建立一条基于鼠标轨迹的视频流通道。

S17、在所述球形坐标系上，按照所述视频流通道连续播放所述多帧街景图片。

本实施例中，在球形坐标系上，实时播放上述鼠标轨迹的视频内容。

相较于现有技术，本发明提供的立体街景视频投影方法及系统具有以下优点：其一、无需要专门拍摄特定地点的全景照片，利用摄像头即可获得实时景象；其二、实时监测即可更新获取最新数据，而无需定期进行测绘；其三、以摄像头获取的视频取代全景照片，包含的的信息较丰富。

以上所述，仅是本发明的实施例而已，并非对本发明作任何形式上的限制，虽然本发明已以实施例揭露如上，然而并非用以限定本发明，任何熟悉本专业的技术人员，在不脱离本发明技术方案范围内，当可利用上述揭示的技术内容作出些许更动或修饰为等同变化的等效实施例，但凡是未脱离本发明技术方案内容，依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰，均仍属于本发明技术方案的范围内。

Claims (7)

1.一种立体街景视频投影方法，其特征在于，包括如下步骤：

S11、获取街景的全景视频流；

S13、将所述全景视频流分解为多帧街景图片，并投影到球形坐标系上；步骤S13中，进一步包括：

S131、对所述全景视频流进行解码以及重建一帧全景视频图像；

S133、根据所需观看信息，从所述全景视频图像中截取对应区域，并转换坐标得到观看视角的平面图像；所述观看信息包括：接收输入设备输入t时刻所需观看全景视频流的位置矢量L(t)、视角矢量θ(t)信息；

所述位置矢量L(t)包括X、Y、Z坐标，所述视角矢量θ(t)包括水平视角θH、垂直视角θV；

获取显示设备的信息D；

根据输入所需观看的位置矢量L(t)、视角矢量θ(t)信息，对全景图片截取对应区域Ipart(t)∈IP(t)，并进行坐标转换，得到观看视角的平面图像Iview(t)，表示为Iview(t)＝f(IP(t),L(t),θ(t),D),其中，f()为坐标变换函数；

S135、对所述平面图像进行图像处理；

S137、返回步骤S131；

S15、将所述多帧街景图片进行叠加，并在所述多帧街景图片之间建立视频流通道；所述视频流通道具体为：当鼠标移动选择时，按照其方向、速度，在不同帧的街景图片之间选择其相应范围内容，在所述多帧街景图片之间建立一条基于鼠标轨迹的视频流通道；

S17、在所述球形坐标系上，按照所述视频流通道连续播放所述多帧街景图片。

2.如权利要求1所述的立体街景视频投影方法，其特征在于，步骤S11中，利用摄像头获取街景的全景视频流。

3.如权利要求2所述的立体街景视频投影方法，其特征在于，步骤S135中，所述图像处理包括图像增强、图像缩放。

4.如权利要求3所述的立体街景视频投影方法，其特征在于，步骤S135中，所述平面图像通过客户端显示设备进行图像显示。

5.一种立体街景视频处理系统，其特征在于，包括：获取全景视频流的视频单元及和所述视频单元相连接的视频流处理单元，所述视频流处理单元对所述全景视频流进行如下处理：

将所述全景视频流分解为多帧街景图片，并投影到球形坐标系上；具体包括：对所述全景视频流进行解码以及重建一帧全景视频图像；根据所需观看信息，从所述全景视频图像中截取对应区域，并转换坐标得到观看视角的平面图像；所述观看信息包括：接收输入设备输入t时刻所需观看全景视频流的位置矢量L(t)、视角矢量θ(t)信息；

所述位置矢量L(t)包括X、Y、Z坐标，所述视角矢量θ(t)包括水平视角θH、垂直视角θV；

获取显示设备的信息D；

根据输入所需观看的位置矢量L(t)、视角矢量θ(t)信息，对全景图片截取对应区域Ipart(t)∈IP(t)，并进行坐标转换，得到观看视角的平面图像Iview(t)，表示为Iview(t)＝f(IP(t),L(t),θ(t),D),其中，f()为坐标变换函数；

对所述平面图像进行图像处理；返回解码以及重建步骤处理下一帧全景视图；

将所述多帧街景图片进行叠加，并在所述多帧街景图片之间建立视频流通道；所述视频流通道具体为：当鼠标移动选择时，按照其方向、速度，在不同帧的街景图片之间选择其相应范围内容，在所述多帧街景图片之间建立一条基于鼠标轨迹的视频流通道；

在所述球形坐标系上，按照所述视频流通道连续播放所述多帧街景图片。

6.如权利要求5所述的立体街景视频处理系统，其特征在于，所述立体街景视频处理系统进一步包括进行图片显示的显示设备，所述显示设备和所述视频流处理单元相连接。

7.如权利要求5所述的立体街景视频处理系统，其特征在于，所述视频单元包括至少一个摄像头。