CN111652802B - 全景图制作方法、基于全景图的交互方法及装置 - Google Patents

全景图制作方法、基于全景图的交互方法及装置 Download PDF

Info

Publication number
CN111652802B
CN111652802B CN202010426787.3A CN202010426787A CN111652802B CN 111652802 B CN111652802 B CN 111652802B CN 202010426787 A CN202010426787 A CN 202010426787A CN 111652802 B CN111652802 B CN 111652802B
Authority
CN
China
Prior art keywords
rotatable camera
target
panorama
azimuth
map
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010426787.3A
Other languages
English (en)
Other versions
CN111652802A (zh
Inventor
胡康
马腾飞
宫雪
余佳民
林龙增
陈锋耀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN202010426787.3A priority Critical patent/CN111652802B/zh
Publication of CN111652802A publication Critical patent/CN111652802A/zh
Application granted granted Critical
Publication of CN111652802B publication Critical patent/CN111652802B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/40Scaling the whole image or part thereof
    • G06T3/4038Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images

Abstract

本申请提供一种全景图制作方法、基于全景图的交互方法及装置,所述基于全景图的交互方法包括:获取用户在当前显示的目标全景图中选择的目标位置;依据所述可旋转相机的指定方位确定可旋转相机拍摄所述目标位置时的目标方位;控制所述可旋转相机旋转至所述目标方位,和/或在地图中显示所述可旋转相机在所述目标方位对应的可视区域的图案。应用该方法,可以提升用户交互体验。

Description

全景图制作方法、基于全景图的交互方法及装置
技术领域
本申请涉及全景图技术领域,尤其一种全景图制作方法、基于全景图的交互方法及装置。
背景技术
全景图是一种全新的图像信息组织模式,其用于表达图像采集设备周围的一些环境信息。这里,图像采集设备举例可为可旋转相机等具有图像采集功能的设备。在应用中,可通过对图像采集设备在旋转过程中抓拍的不同角度的图片进行合成得到全景图。
但是,在目前的全景图制作过程中,并不能体现图像采集设备在旋转过程中的可视区域,并且,制作好的全景图只能供用户查看,因此,目前制作全景图和使用全景图时的用户交互体验较差。
发明内容
本申请提供一种全景图制作方法、基于全景图的交互方法及装置,以提升用户交互体验。
根据本申请实施例的第一方面,提供一种全景图制作方法,所述方法包括:
接收全景图制作指令;
依据所述全景图制作指令控制可旋转相机旋转并抓拍图像,在地图上实时显示所述可旋转相机在旋转过程中对应的可视区域的图案;
当确定所述可旋转相机旋转至目标终点方位时,将所述可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图。
在一实施例中,所述依据全景图制作指令控制可旋转相机旋转包括:
依据所述全景图制作指令控制可旋转相机按照设定方向旋转,所述设定方向为:顺时针方向、逆时针方向或者被配置的其它方向。
在一实施例中,所述确定可旋转相机旋转至目标终点方位是指:
当所述可旋转相机旋转指定角度时,确定所述可旋转相机当前所处的方位为所述目标终点方位;或者,
当接收到停止旋转指令时,确定所述可旋转相机当前所处的方位为所述目标终点方位。
在一实施例中,所述在地图上实时显示所述可旋转相机在旋转过程对应的可视区域的图案,包括:
当获取到所述可旋转相机的当前可视区域时,清除地图上已显示的所述可旋转相机之前的可视区域的图案,并在地图上绘制所述当前可视区域的图案。
在一实施例中,所述将可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图包括:
将所述可旋转相机在旋转过程中抓拍的图像按照采集时间顺序排列;
按照设定的图像帧合成算法将排列后的图像帧合成一张目标全景图。
在一实施例中,在依据全景图制作指令控制可旋转相机旋转时进一步包括:记录可旋转相机开始旋转时的起始方位;
所述方法进一步包括:
记录所述可旋转相机从所述起始方位旋转至所述目标终点方位的总旋转角度。
在一实施例中,在所述方法之前进一步包括:
在地图上显示可旋转相机当前可视区域的图案;
接收可视区域调整指令,根据所述可视区域调整指令控制所述可旋转相机旋转目标角度,在地图上显示所述可旋转相机旋转后的可视区域的图案。
根据本申请实施例的第二方面,提供一种基于全景图的交互方法,所述方法包括:
获取用户在当前显示的目标全景图中选择的目标位置;
依据所述可旋转相机的指定方位确定可旋转相机拍摄所述目标位置时的目标方位;
控制所述可旋转相机旋转至所述目标方位,和/或在地图中显示所述可旋转相机在所述目标方位对应的可视区域的图案。
在一实施例中,所述确定可旋转相机拍摄所述目标位置时的目标方位包括:
计算所述目标位置与所述目标全景图的起始边缘之间的距离d;
依据所述距离d与所述全景图的图像长度的比例k、所述指定方位以及已记录的所述目标全景图对应的可旋转相机的总旋转角度,确定所述可旋转相机拍摄所述目标位置时的目标方位。
在一实施例中,所述依据所述距离d与所述全景图的图像长度的比例k、所述指定方位以及已记录的所述目标全景图对应的可旋转相机的总旋转角度,确定所述可旋转相机拍摄所述目标位置时的目标方位,包括:
计算所述比例k与所述已记录的总旋转角度的乘积;
依据所述乘积和所述指定方位确定所述目标方位。
根据本申请实施例的第三方面,提供一种全景图制作装置,所述装置包括:
接收模块,用于接收全景图制作指令;
控制模块,用于依据所述全景图制作指令控制可旋转相机旋转并抓拍图像;
显示模块,用于在地图上实时显示所述可旋转相机在旋转过程中对应的可视区域的图案;
制作模块,用于当确定所述可旋转相机旋转至目标终点方位时,将所述可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图。
在一实施例中,所述控制模块依据所述全景图制作指令控制可旋转相机旋转包括:
依据所述全景图制作指令控制可旋转相机按照设定方向旋转,所述设定方向为:顺时针方向、逆时针方向或者被配置的其它方向。
在一实施例中,所述制作模块确定可旋转相机旋转至目标终点方位是指:
当所述可旋转相机旋转指定角度时,确定所述可旋转相机当前所处的方位为所述目标终点方位;或者,
当接收到停止旋转指令时,确定所述可旋转相机当前所处的方位为所述目标终点方位。
在一实施例中,所述显示模块在地图上实时显示所述可旋转相机在旋转过程对应的可视区域的图案,包括:
当获取到所述可旋转相机的当前可视区域时,清除地图上已显示的所述可旋转相机之前的可视区域的图案,并在地图上绘制所述当前可视区域的图案。
在一实施例中,所述制作模块将可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图包括:
将所述可旋转相机在旋转过程中抓拍的图像按照采集时间顺序排列;
按照设定的图像帧合成算法将排列后的图像帧合成一张目标全景图。
在一实施例中,所述装置进一步包括:
第一记录模块,用于在依据全景图制作指令控制可旋转相机旋转时,记录可旋转相机开始旋转时的起始方位;
所述装置进一步包括:
第二记录模块,用于记录所述可旋转相机从所述起始方位旋转至所述目标终点方位的总旋转角度。
在一实施例中,所述显示模块还用于:在地图上显示可旋转相机当前可视区域的图案;
所述控制模块还用于:接收可视区域调整指令,根据所述可视区域调整指令控制所述可旋转相机旋转目标角度;
所述显示模块还用于:在地图上显示所述可旋转相机旋转后的可视区域的图案。
根据本申请实施例的第四方面,提供一种基于全景图的交互装置,所述装置包括:
获取模块,用于获取用户在当前显示的目标全景图中选择的目标位置;
确定模块,用于依据所述可旋转相机的指定方位确定可旋转相机拍摄所述目标位置时的目标方位;
交互模块,用于控制所述可旋转相机旋转至所述目标方位,和/或在地图中显示所述可旋转相机在所述目标方位对应的可视区域的图案。
在一实施例中,所述确定模块确定可旋转相机拍摄所述目标位置时的目标方位包括:
计算所述目标位置与所述目标全景图的起始边缘之间的距离d;
依据所述距离d与所述全景图的图像长度的比例k、所述指定方位以及已记录的所述目标全景图对应的可旋转相机的总旋转角度,确定所述可旋转相机拍摄所述目标位置时的目标方位。
在一实施例中,所述确定模块依据所述距离d与所述全景图的图像长度的比例k、所述指定方位以及已记录的所述目标全景图对应的可旋转相机的总旋转角度,确定所述可旋转相机拍摄所述目标位置时的目标方位,包括:
计算所述比例k与所述已记录的总旋转角度的乘积;
依据所述乘积和所述指定方位确定所述目标方位。
根据本申请实施例的第五方面,提供一种电子设备,所述设备包括可读存储介质和处理器;
其中,所述可读存储介质,用于存储机器可执行指令;
所述处理器,用于读取所述可读存储介质上的所述机器可执行指令,并执行所述指令以实现本申请实施例提供的全景图制作方法或基于全景图的交互方法的步骤。
根据本申请实施例的第六方面,提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现本申请实施例提供的全景图制作方法或基于全景图的交互方法的步骤。
通过以上技术方案可以看出,应用本申请实施例提供的全景图制作方法,在依据全景图制作指令控制可旋转相机旋转的过程中,还会在地图上实时显示该可旋转相机在旋转过程中对应的可视区域的图案,这实现了在全景图制作过程中在地图上实时显示可旋转相机在旋转过程中对应的可视区域的图案,以使用户通过地图上显示的可视区域的图案直观地了解可旋转相机的方位;
进一步地,应用本申请实施例,通过在确定可旋转相机旋转至目标终点方位时将可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图,可以实现任意角度的全景图制作。
再进一步地,应用本申请实施例提供的基于全景图的交互方法,在已得到的全景图上的某一位置被用户选择时,可控制可旋转相机旋转至拍摄该位置时的目标方位,这则实现了基于全景图进行交互操作,进而提升用户交互体验;
还有,通过在地图中显示可旋转相机在目标方位对应的可视区域的图案,实现了供用户查看目标方位对应的可视区域的图案,以便由用户根据查看的可视区域的图案执行相关操作,这扩大了全景图的应用。
附图说明
图1为本申请一示例性实施例提供的系统架构图;
图2举例示出可视区域中的可视距离和可视夹角;
图3为本申请一示例性实施例提供的一种全景图制作方法的实施例流程图;
图4举例示出在地图上显示可旋转相机在旋转过程中对应的可视区域的图案;
图5为本申请一示例性实施例提供的一种基于全景图的交互方法的实施例流程图;
图6举例示出目标全景图;
图7为步骤502中确定可旋转相机拍摄目标位置时的目标方位的实现流程;
图8为本申请一示例性实施例提供的一种全景图制作装置的实施例框图;
图9为本申请一示例性实施例提供的另一种全景图制作装置的实施例框图;
图10为本申请一示例性实施例提供的一种基于全景图的交互装置的实施例框图;
图11为本申请根据一示例性实施例示出的一种电子设备的硬件结构图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
为使本申请更加容易理解,首先对本申请涉及的系统架构进行示例性说明。
参见图1,为本申请一示例性实施例提供的系统架构图。如图1所示,包括可旋转相机110、电子设备120。可旋转相机110与电子设备120之间具有通信链路,可以包括无线链路、有线链路或者光纤电缆等,本申请对此不做限制。
可旋转相机110可以支持设定角度比如360°旋转。在应用中,可旋转相机110在旋转至不同的角度时可具有不同的可视区域。作为一个实施例,可视区域可以通过方向角、可视距离、可视夹角这三个参数来表示。可选地,方向角通常可指可旋转相机110的镜头朝向与指定方向比如正北方向等的夹角。可视距离是指可视区域沿着水平方向和/或垂直方向的距离(也称可视距离,单位通常为米)。可视夹角是指以可旋转相机的镜头为顶点,以可旋转相机的镜头能观测到的最大范围的两条边缘构成的夹角(也称视场角)。为了便于理解,图2举例示出可视区域中的可视距离和可视夹角,在图2中,L表示可旋转相机110在水平方向上的可视距离,α表示可旋转相机110的可视夹角。
电子设备120可以是支持网络连接从而提供各种网络服务的硬件设备,包括但不限于智能手机、平板电脑、膝上型便携计算机、台式计算机、服务器等。在本申请实施例中,电子设备120可执行本申请实施例提供的如下图3所示的全景图制作方法、以及图5所示的基于全景图的交互方法,具体见下文描述,这里暂不详述。
基于图1所示例的系统架构,下面通过具体的实施例对本申请提供的全景图制作方法和基于全景图的交互方法进行说明:
以下首先通过实施例1对本申请提供的全景图制作方法进行说明:
实施例1:
参见图3,为本申请一示例性实施例提供的一种全景图制作方法的实施例流程图,该流程可应用于上述的电子设备120。如图3所示,该流程可包括以下步骤:
步骤301:接收全景图制作指令。
作为一个实施例,上述电子设备120可向用户展示带有可旋转相机对应的设备图标的电子地图(比如GIS地图,以下简称地图)。应当理解的是,地图中并不局限只包括一个可旋转相机对应的设备图标,其可以包括多个可旋转相机对应的设备图标。当包括多个可旋转相机对应的设备图标时,可选地,该多个设备图标可分布在地图的不同位置。
在制作全景图之前,用户可以根据实际业务需求在地图中选中一个可旋转相机对应的设备图标。可选地,这里的选中设备图标可为用户点击可旋转相机对应的设备图标等,本实施例并不具体限定。
作为一个实施例,当电子设备120检测到地图中一个可旋转相机对应的设备图标被选中时,可意味着电子设备120接收到全景图制作指令。
作为另一个实施例,当电子设备120检测到地图中一个可旋转相机对应的设备图标被选中时,电子设备120还可输出一个用于指示开始制作全景图的操作框,一旦检测到该操作框被触发(比如该操作框中的“开始制作全景图”按钮被点击等),则意味着电子设备120接收到全景图制作指令。
步骤302:依据全景图制作指令控制可旋转相机旋转并抓拍图像,在地图上实时显示可旋转相机在旋转过程中对应的可视区域的图案。
在本申请实施例中,电子设备120在接收到全景图制作指令之后,则可以依据该全景图制作指令控制可旋转相机旋转。这里的可旋转相机是指上述步骤301中用户在地图上选中的设备图标所对应的可旋转相机。
作为一个实施例,本步骤302中,依据全景图制作指令控制可旋转相机旋转可包括:控制可旋转相机从被设置的起始方位开始,按照设定方向进行旋转。这里的设定方向可以为顺时针方向、逆时针方向或者被配置的其它方向。至于是如何设置可旋转相机的起始方位的,在下文中会有描述,这里先不详述。
在本步骤302中,可旋转相机在旋转过程中会抓拍图像。作为一个实施例,电子设备可以控制可旋转相机在旋转的过程中周期性地抓拍图像。作为一个可选的实现方式,可旋转相机在旋转的过程中每隔设定时长,比如2ms则抓拍一幅图像。作为另一个可选的实现方式,可旋转相机在旋转的过程中每转动设定角度,比如5°则抓拍一幅图像。
在本申请实施例中,可旋转相机在旋转过程中其可视区域是实时发生变化的,作为一个实施例,如步骤302描述,则可在地图上实时显示可旋转相机在旋转过程中对应的可视区域的图案,以满足用户在可旋转相机旋转过程中查看可旋转相机的方位。可选地,可视区域的图案是指以可旋转相机的设备图标为顶点,指定长度为半径,指定角度为圆心角的扇形图案。可选的,指定长度是指上述可视距离在地图上对应的长度,指定角度是指上述可视夹角。为便于理解,图4举例示出在地图上显示可旋转相机在旋转过程中对应的可视区域的图案410。
作为一个实施例,上述可视区域可为可旋转相机在旋转过程中周期性地向电子设备120发送的,比如每隔10ms则向电子设备发送当前的可视区域。当然,这里发送当前的可视区域是指发送当前的方向角、可视距离、可视夹角。基于此,电子设备120每当获取到可旋转相机的当前可视区域时,则清除地图上已显示的可旋转相机之前的可视区域的图案,并在地图上绘制当前可视区域的图案,最终在地图上实时显示可旋转相机在旋转过程中对应的可视区域的图案。
可以理解的是,在应用中,若上述周期足够短,即,可旋转相机前后两次向电子设备120发送可视区域的时间间隔足够短的情况下,则可以呈现出地图上可旋转相机的可视区域的图案随着可旋转相机的旋转而旋转的效果。
步骤303:当确定可旋转相机旋转至目标终点方位时,将可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图。
在本申请实施例中,当确定可旋转相机旋转至目标终点方位时,则可将可旋转相机在从起始方位至目标终点方位旋转的过程中(以下简称旋转过程中)抓拍的图像进行拼接,得到全景图(以下称目标全景图)。
作为一个实施例,用户可以根据实际业务需求自定义全景图的角度范围。基于此,在本步骤303中确定可旋转相机旋转至目标终点方位是指:当可旋转相机旋转指定角度时,确定可旋转相机当前所处的方位为目标终点方位。以旋转指定角度为180°为例,则在本步骤303中,当可旋转相机从起始方位开始旋转180°后所处的方位为上述的目标终点方位。
作为一个实施例,用户可以在可旋转相机旋转过程中的任意时刻,根据实际业务需求向电子设备发送停止旋转指令。这里的向电子设备发送停止旋转指令可为:点击地图上可旋转相机对应的设备图标,以使电子设备在检测到地图上的设备图标被再次触发时输出一个用于指示控制可旋转设备停止旋转的操作框,一旦检测到该操作框被触发(比如该操作框中的“停止旋转”按钮被点击等),则意味着电子设备120接收到停止旋转指令。可选地,电子设备120在接收到停止旋转指令时,则确定可旋转相机当前所处的方位为目标终点方位。基于此,在本步骤303中确定可旋转相机旋转至目标终点方位是指:当接收到停止旋转指令时,确定可旋转相机当前所处的方位为目标终点方位。
由上述确定可旋转相机旋转至目标终点方位的实施例描述可见,应用本申请提供的全景图制作方法,可以实现任意角度的全景图制作。
应用于本实施例,可旋转相机可以在旋转过程中,会将抓拍到的图像发送至电子设备120。作为一个实施例,可旋转相机可以在旋转过程中,周期性地将每一个周期内抓拍到图像发送至电子设备120。当电子设备120接收到可旋转相机发送的抓拍图像,则进行存储并在确定可旋转相机旋转至目标终点方位时,将已存储的图像进行拼接得到目标全景图。
应用于本实施例,可旋转相机也可在旋转至目标终点方位时,将已在旋转过程中抓拍到的所有图像一并发送至电子设备120。当电子设备120接收到可旋转相机发送的抓拍图像,则进行存储并在确定可旋转相机旋转至目标终点方位时,将已存储的图像进行拼接得到目标全景图。
可选地,本步骤303中,将可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图可包括:将可旋转相机在旋转过程中抓拍的图像按照采集时间顺序排列,按照设定的图像帧合成算法将排列后的图像帧合成一张目标全景图。
通过图3所示流程,电子设备在接收到全景图制作指令时,控制可旋转相机旋转,并在地图上实时显示可旋转相机在旋转过程中对应的可视区域的图案,可以使得用户通过地图显示的可视区域的图案直观地了解可旋转相机的方位,提升用户交互体验;通过当确定可旋转相机旋转至目标终点方位时,将可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图,可以实现任意角度的全景图制作,实现了全景图制作过程中的用户交互,提升用户交互体验。
此外,作为一个实施例,在上述步骤302中,电子设备120依据全景图制作指令控制可旋转相机旋转时,还可以记录下可旋转相机开始旋转时的起始方位,并在上述步骤303之后,记录下可旋转相机从起始方位旋转至目标终点方位的总旋转角度。通过该种处理,可以为后续基于全景图的交互提供基础,至于是如何实现的,在下文中会有描述,这里先不做详述。
此外,作为一个实施例,在进行全景图制作之前,电子设备120可以接收可视区域调整指令,基于该可视区域调整指令,电子设备120可以设置可旋转相机的起始方位和初始的可视区域。
作为一个可选的实现方式,电子设备120接收可视区域调整指令可为:向用户提供用于设置可旋转相机的可视区域的输入框,当检测到用户在该输入框输入可视区域比如上述方向角、可视距离以及可视夹角并提交后,则意味着电子设备120接收到可视区域调整指令。这里,可视区域调整指令可包括:用户在该输入框输入的可视区域比如上述方向角、可视距离以及可视夹角。之后,电子设备120基于该可视区域调整指令控制可旋转相机旋转对应的角度(记为目标角度),并在地图上显示可旋转相机旋转后的可视区域的图案。
作为另一个可选的实现方式,电子设备120接收可视区域调整指令可为:当检测到用户在地图上所显示的可旋转相机当前可视区域的图案被触发时,则意味着接收到可视区域调整指令。这里的触发是指控制可视区域的图案旋转比如按照顺时针旋转目标角度等。这里,可视区域调整指令可包括:被触发的参数比如可视区域图案的旋转角度、旋转方向等。之后,电子设备120根据可视区域调整指令控制可旋转相机旋转对应的角度(记为目标角度),并在地图上显示可旋转相机旋转后的可视区域的图案。
以上对实施例1进行了描述,下面通过实施例2对本申请提供的基于全景图的交互方法进行说明:
实施例2:
参见图5,为本申请一示例性实施例提供的一种基于全景图的交互方法的实施例流程图,如图5所示,包括以下步骤:
步骤501:获取用户在当前显示的目标全景图中选择的目标位置。
在本申请实施例中,用户可以根据实际业务需求在电子设备当前显示的目标全景图中任意选择一个位置(以下称目标位置)。这里在当前显示的目标全景图中选择的目标位置可为在目标全景图中点击上述目标位置。为了便于理解,图6举例示出了目标全景图。如图6所示,O点表示上述目标位置。
这里的目标全景图可以是指应用上述实施例1所描述的全景图制作方法制作而成的全景图,即,上述步骤303中的目标全景图,还可以是指应用其他方法制作而成,且记录有方位信息和角度信息,比如记录有起始方位(制作全景图时图像采集设备的起始方位,简称起始方位)和总角度(制作全景图时图像采集设备所旋转的总角度,简称总角度)的全景图,本申请对此不做具体限定。
步骤502:依据可旋转相机的指定方位确定可旋转相机拍摄目标位置时的目标方位。
作为一个实施例,参见图7,为本步骤502中确定可旋转相机拍摄目标位置时的目标方位的实现流程。如图7所示,该流程可包括以下步骤:
步骤701:计算目标位置与目标全景图的起始边缘之间的距离d。
如图6所示例的目标全景图,其左侧边缘为起始边缘。可选的,O点至左侧边缘的垂直距离则为上述d。
步骤702:依据距离d与全景图的图像长度的比例k、指定方位以及已记录的目标全景图对应的可旋转相机的总旋转角度,确定可旋转相机拍摄目标位置时的目标方位。
正常情况下,目标全景图的图像长度取决于目标全景图的角度(也即可旋转相机的总旋转角度)。基于此,可选地,计算出目标位置与目标全景图的起始边缘之间的距离d,由于目标全景图的起始边缘是在可旋转相机位于起始方位时拍摄的,因此距离d与全景图的图像长度的比例k则可为可旋转相机从起始方位至拍摄该目标位置时的方位(以下称为目标方位)的旋转角度(以下记为β)占上述总旋转角度的比例。已知总旋转角度和上述β占总旋转角度的比例,则可获得上述β,后续则依据β和可旋转相机的指定方位确定目标方位。基于此,在本步骤602中依据距离d与全景图的图像长度的比例k、指定方位以及已记录的目标全景图对应的可旋转相机的总旋转角度,确定可旋转相机拍摄目标位置时的目标方位包括:计算比例k与已记录的总旋转角度的乘积,依据该乘积和指定方位确定目标方位。
基于上面描述,可选地,在一个例子中,当指定方位为上述起始方位时,上述的k为可旋转相机从指定方位至拍摄该目标位置时的方位(以下称为目标方位)的旋转角度占上述总旋转角度的比例。基于此,上述目标方位可以通过如下公式(一)确定:
D=D0+A*k公式(一)
在另一个例子中,当指定方位为上述目标终点方位时,1减去上述的k为可旋转相机从指定方位至目标方位的旋转角度占上述总旋转角度的比例。基于此,上述目标方位可以通过如下公式(二)确定:
D=D0-A*k公式(二)
在上述公式(一)和(二)中,D0表示指定方位,A表示总旋转角度,D表示目标方位,k如上所述。
步骤503:控制可旋转相机旋转至目标方位,和/或在地图中显示可旋转相机在目标方位对应的可视区域的图案。
在执行完步骤502得到目标方位之后,可以控制可旋转相机旋转至目标方位,这则能实现全景图上的某一位置被用户选择时,可控制可旋转相机旋转至拍摄该位置时的方位,实现基于全景图进行交互操作。
可选地,还可以在地图中显示可旋转相机在目标方位对应的可视区域的图案,这则实现供用户查看目标方位对应的可视区域的图案。
至此,完成实施例2。
通过实施例2,可以实现用户点击全景图上的某一位置时可控制可旋转相机旋转至拍摄该位置时的目标方位,这则实现了基于全景图进行交互操作,进而提升用户交互体验;和/或在地图中显示可旋转相机在目标方位对应的可视区域的图案,以便由用户根据查看的可视区域的图案执行相关操作,这扩大了全景图的应用。
与前述全景图制作方法的实施例相对应,本申请还提供了全景图制作装置的实施例。
参见图8,为本申请一示例性实施例提供的一种全景图制作装置的实施例框图,该装置对应上述图3所示的全景图制作方法流程。如图8所示,该装置可包括:
接收模块81,用于接收全景图制作指令;
控制模块82,用于依据所述全景图制作指令控制可旋转相机旋转并抓拍图像;
显示模块83,用于在地图上实时显示所述可旋转相机在旋转过程中对应的可视区域的图案;
制作模块84,用于当确定所述可旋转相机旋转至目标终点方位时,将所述可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图。
在一实施例中,所述控制模块82依据所述全景图制作指令控制可旋转相机旋转包括:
依据所述全景图制作指令控制可旋转相机按照设定方向旋转,所述设定方向为:顺时针方向、逆时针方向或者被配置的其它方向。
在一实施例中,所述制作模块84确定可旋转相机旋转至目标终点方位是指:
当所述可旋转相机旋转指定角度时,确定所述可旋转相机当前所处的方位为所述目标终点方位;或者,
当接收到停止旋转指令时,确定所述可旋转相机当前所处的方位为所述目标终点方位。
在一实施例中,所述显示模块83在地图上实时显示所述可旋转相机在旋转过程对应的可视区域的图案,包括:
当获取到所述可旋转相机的当前可视区域时,清除地图上已显示的所述可旋转相机之前的可视区域的图案,并在地图上绘制所述当前可视区域的图案。
在一实施例中,所述制作模块84将可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图包括:
将所述可旋转相机在旋转过程中抓拍的图像按照采集时间顺序排列;
按照设定的图像帧合成算法将排列后的图像帧合成一张目标全景图。
参见图9,为本申请一示例性实施例提供的另一种全景图制作装置的实施例框图,该装置在图8的基础上,可选的,该装置进一步包括:
第一记录模块85,用于在依据全景图制作指令控制可旋转相机旋转时,记录可旋转相机开始旋转时的起始方位;
第二记录模块86,用于记录所述可旋转相机从所述起始方位旋转至所述目标终点方位的总旋转角度。
可选的,所述显示模块83还用于:在地图上显示可旋转相机当前可视区域的图案;
所述控制模块82还用于:接收可视区域调整指令,根据所述可视区域调整指令控制所述可旋转相机旋转目标角度;
所述显示模块83还用于:在地图上显示所述可旋转相机旋转后的可视区域的图案。
与前述基于全景图的交互方法的实施例相对应,本申请还提供了基于全景图的交互装置的实施例。
参见图10,为本申请一示例性实施例提供的一种基于全景图的交互装置的实施例框图,该装置对应上述图5所示的基于全景图的交互方法流程。如图10所示,该装置可包括:
获取模块101,用于获取用户在当前显示的目标全景图中选择的目标位置;
确定模块102,用于依据所述可旋转相机的指定方位确定可旋转相机拍摄所述目标位置时的目标方位;
交互模块103,用于控制所述可旋转相机旋转至所述目标方位,和/或在地图中显示所述可旋转相机在所述目标方位对应的可视区域的图案。
在一实施例中,所述确定模块102确定可旋转相机拍摄所述目标位置时的目标方位包括:
计算所述目标位置与所述目标全景图的起始边缘之间的距离d;
依据所述距离d与所述全景图的图像长度的比例k、所述指定方位以及已记录的所述目标全景图对应的可旋转相机的总旋转角度,确定所述可旋转相机拍摄所述目标位置时的目标方位。
在一实施例中,所述确定模块102依据所述距离d与所述全景图的图像长度的比例k、所述指定方位以及已记录的所述目标全景图对应的可旋转相机的总旋转角度,确定所述可旋转相机拍摄所述目标位置时的目标方位,包括:
计算所述比例k与所述已记录的总旋转角度的乘积;
依据所述乘积和所述指定方位确定所述目标方位。
请继续参见图11,本申请还提供一种电子设备,包括处理器1101、通信接口1102、存储器1103,以及通信总线1104。
其中,处理器1101、通信接口1102、存储器1103通过通信总线1104进行相互间的通信;
存储器1103,用于存放计算机程序;
处理器1101,用于执行存储器1103上所存放的计算机程序。
可选地,当所述计算机程序对应本申请实施例提供的全景图制作方法时,处理器1101执行所述计算机程序时实现本申请实施例提供的全景图制作方法;
可选地,当所述计算机程序对应本申请实施例提供的全景图制作方法时,处理器1101执行所述计算机程序时实现本申请实施例提供的基于全景图的交互方法。
本申请还提供一种计算机可读存储介质,其上存储有计算机程序。
可选地,当所述计算机程序对应本申请实施例提供的全景图制作方法时,所述计算机程序被处理器执行时实现本申请实施例提供的全景图制作方法;
可选地,当所述计算机程序对应本申请实施例提供的全景图制作方法时,所述计算机程序被处理器执行时实现本申请实施例提供的基于全景图的交互方法。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。

Claims (12)

1.一种全景图制作方法,其特征在于,所述方法包括:
在地图上显示可旋转相机当前可视区域的图案;可旋转相机在旋转至不同的角度时具有不同的可视区域;
接收可视区域调整指令,包括:检测到在地图上所显示的可旋转相机当前可视区域的图案被触发;根据所述可视区域调整指令控制可旋转相机旋转目标角度,设置可旋转相机的起始方位,在地图上显示所述可旋转相机旋转后的可视区域的图案;
接收全景图制作指令;
依据所述全景图制作指令控制可旋转相机从所述起始方位开始旋转并抓拍图像,在地图上实时显示所述可旋转相机在旋转过程中对应的可视区域的图案;
当确定所述可旋转相机旋转至目标终点方位时,将所述可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图。
2.根据权利要求1所述的方法,其特征在于,所述依据所述全景图制作指令控制可旋转相机旋转包括:
依据所述全景图制作指令控制可旋转相机按照设定方向旋转,所述设定方向为:顺时针方向、逆时针方向或者被配置的其它方向。
3.根据权利要求1所述的方法,其特征在于,所述确定可旋转相机旋转至目标终点方位是指:
当所述可旋转相机旋转指定角度时,确定所述可旋转相机当前所处的方位为所述目标终点方位;或者,
当接收到停止旋转指令时,确定所述可旋转相机当前所处的方位为所述目标终点方位。
4.根据权利要求1所述的方法,其特征在于,所述在地图上实时显示所述可旋转相机在旋转过程对应的可视区域的图案,包括:
当获取到所述可旋转相机的当前可视区域时,清除地图上已显示的所述可旋转相机之前的可视区域的图案,并在地图上绘制所述当前可视区域的图案。
5.根据权利要求1所述的方法,其特征在于,所述将所述可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图包括:
将所述可旋转相机在旋转过程中抓拍的图像按照采集时间顺序排列;
按照设定的图像帧合成算法将排列后的图像帧合成一张目标全景图。
6.根据权利要求1所述的方法,其特征在于,在依据全景图制作指令控制可旋转相机旋转时进一步包括:记录可旋转相机开始旋转时的起始方位;
所述方法进一步包括:
记录所述可旋转相机从所述起始方位旋转至所述目标终点方位的总旋转角度。
7.一种基于全景图的交互方法,其特征在于,所述方法包括:
获取用户在当前显示的目标全景图中选择的目标位置,所述目标全景图是根据权利要求1至6中任一项所述方法制作的;
依据可旋转相机的指定方位确定可旋转相机拍摄所述目标位置时的目标方位;
控制所述可旋转相机旋转至所述目标方位,和/或在地图中显示所述可旋转相机在所述目标方位对应的可视区域的图案。
8.根据权利要求7所述的方法,其特征在于,所述确定可旋转相机拍摄所述目标位置时的目标方位包括:
计算所述目标位置与所述目标全景图的起始边缘之间的距离d;
依据所述距离d与所述全景图的图像长度的比例k、所述指定方位以及已记录的所述目标全景图对应的可旋转相机的总旋转角度,确定所述可旋转相机拍摄所述目标位置时的目标方位。
9.根据权利要求8所述的方法,其特征在于,所述依据所述距离d与所述全景图的图像长度的比例k、所述指定方位以及已记录的所述目标全景图对应的可旋转相机的总旋转角度,确定所述可旋转相机拍摄所述目标位置时的目标方位,包括:
计算所述比例k与所述已记录的总旋转角度的乘积;
依据所述乘积和所述指定方位确定所述目标方位。
10.一种全景图制作装置,其特征在于,所述装置包括:
接收模块,用于在地图上显示可旋转相机当前可视区域的图案;可旋转相机在旋转至不同的角度时具有不同的可视区域;接收可视区域调整指令,包括:检测到在地图上所显示的可旋转相机当前可视区域的图案被触发;根据所述可视区域调整指令控制可旋转相机旋转目标角度,设置可旋转相机的起始方位,在地图上显示所述可旋转相机旋转后的可视区域的图案;接收全景图制作指令;
控制模块,用于依据所述全景图制作指令控制可旋转相机从所述起始方位开始旋转并抓拍图像;
显示模块,用于在地图上实时显示所述可旋转相机在旋转过程中对应的可视区域的图案;
制作模块,用于当确定所述可旋转相机旋转至目标终点方位时,将所述可旋转相机在旋转过程中抓拍的图像进行拼接得到目标全景图。
11.一种基于全景图的交互装置,其特征在于,所述装置包括:
获取模块,用于获取用户在当前显示的目标全景图中选择的目标位置,所述目标全景图是根据权利要求10所述装置制作的;
确定模块,用于依据可旋转相机的指定方位确定可旋转相机拍摄所述目标位置时的目标方位;
交互模块,用于控制所述可旋转相机旋转至所述目标方位,和/或在地图中显示所述可旋转相机在所述目标方位对应的可视区域的图案。
12.一种电子设备,其特征在于,所述设备包括可读存储介质和处理器;
其中,所述可读存储介质,用于存储机器可执行指令;
所述处理器,用于读取所述可读存储介质上的所述机器可执行指令,并执行所述指令以实现权利要求1-6或7-9中任一所述方法的步骤。
CN202010426787.3A 2020-05-19 2020-05-19 全景图制作方法、基于全景图的交互方法及装置 Active CN111652802B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010426787.3A CN111652802B (zh) 2020-05-19 2020-05-19 全景图制作方法、基于全景图的交互方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010426787.3A CN111652802B (zh) 2020-05-19 2020-05-19 全景图制作方法、基于全景图的交互方法及装置

Publications (2)

Publication Number Publication Date
CN111652802A CN111652802A (zh) 2020-09-11
CN111652802B true CN111652802B (zh) 2024-03-05

Family

ID=72348357

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010426787.3A Active CN111652802B (zh) 2020-05-19 2020-05-19 全景图制作方法、基于全景图的交互方法及装置

Country Status (1)

Country Link
CN (1) CN111652802B (zh)

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001189888A (ja) * 1999-12-28 2001-07-10 Ntt Data Corp 撮影指示装置、撮影指示方法及び記録媒体
JP2002094870A (ja) * 2000-09-12 2002-03-29 Casio Comput Co Ltd カメラ装置、表示装置、撮影範囲表示方法及び撮影範囲記憶方法
CN101082912A (zh) * 2006-06-01 2007-12-05 上海杰图软件技术有限公司 通过具有位置信息的图片集对电子地图进行标注的方法
KR20120139047A (ko) * 2011-06-16 2012-12-27 주식회사 다음커뮤니케이션 영상 데이터를 디스플레이 하는 방법 및 장치
CN103176347A (zh) * 2011-12-22 2013-06-26 百度在线网络技术(北京)有限公司 全景图拍摄方法及拍摄装置和电子设备
CA2866957A1 (en) * 2012-06-11 2013-12-19 Huawei Technologies Co., Ltd. Video obtaining method, device, and system
CN103716595A (zh) * 2014-01-08 2014-04-09 深圳英飞拓科技股份有限公司 全景拼接摄像机和球机联动控制方法及装置
CN104639832A (zh) * 2015-01-23 2015-05-20 广东欧珀移动通信有限公司 一种全景拍照方法及终端
CN104853082A (zh) * 2014-11-25 2015-08-19 广东欧珀移动通信有限公司 一种拍摄全景图片的方法及装置
CN105157711A (zh) * 2015-10-14 2015-12-16 北京乐动卓越科技有限公司 一种全景地图中的导航方法及导航系统
CN105635641A (zh) * 2014-10-27 2016-06-01 鸿富锦精密工业(深圳)有限公司 监控装置及监控方法
AU2018101564A4 (en) * 2018-10-19 2018-12-06 Aunew Management Pty Ltd A unified control system for hybrid surveillance network
WO2019114617A1 (zh) * 2017-12-12 2019-06-20 华为技术有限公司 快速抓拍的方法、装置及系统
CN110660105A (zh) * 2018-06-29 2020-01-07 杭州海康威视数字技术股份有限公司 一种全景环视系统的标定参数优化方法及装置
WO2020030156A1 (zh) * 2018-08-10 2020-02-13 广东虚拟现实科技有限公司 图像处理方法、终端设备及计算机可读介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0781049B1 (en) * 1995-12-19 2004-05-06 Canon Kabushiki Kaisha Apparatus and method for controlling a plurality of remote cameras
US6888565B1 (en) * 1999-08-31 2005-05-03 Canon Kabushiki Kaisha Apparatus and method for remote-controlling image sensing apparatus in image sensing system
US8638371B2 (en) * 2010-02-12 2014-01-28 Honeywell International Inc. Method of manipulating assets shown on a touch-sensitive display

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001189888A (ja) * 1999-12-28 2001-07-10 Ntt Data Corp 撮影指示装置、撮影指示方法及び記録媒体
JP2002094870A (ja) * 2000-09-12 2002-03-29 Casio Comput Co Ltd カメラ装置、表示装置、撮影範囲表示方法及び撮影範囲記憶方法
CN101082912A (zh) * 2006-06-01 2007-12-05 上海杰图软件技术有限公司 通过具有位置信息的图片集对电子地图进行标注的方法
KR20120139047A (ko) * 2011-06-16 2012-12-27 주식회사 다음커뮤니케이션 영상 데이터를 디스플레이 하는 방법 및 장치
CN103176347A (zh) * 2011-12-22 2013-06-26 百度在线网络技术(北京)有限公司 全景图拍摄方法及拍摄装置和电子设备
CA2866957A1 (en) * 2012-06-11 2013-12-19 Huawei Technologies Co., Ltd. Video obtaining method, device, and system
CN103716595A (zh) * 2014-01-08 2014-04-09 深圳英飞拓科技股份有限公司 全景拼接摄像机和球机联动控制方法及装置
CN105635641A (zh) * 2014-10-27 2016-06-01 鸿富锦精密工业(深圳)有限公司 监控装置及监控方法
CN104853082A (zh) * 2014-11-25 2015-08-19 广东欧珀移动通信有限公司 一种拍摄全景图片的方法及装置
CN104639832A (zh) * 2015-01-23 2015-05-20 广东欧珀移动通信有限公司 一种全景拍照方法及终端
CN105157711A (zh) * 2015-10-14 2015-12-16 北京乐动卓越科技有限公司 一种全景地图中的导航方法及导航系统
WO2019114617A1 (zh) * 2017-12-12 2019-06-20 华为技术有限公司 快速抓拍的方法、装置及系统
CN110660105A (zh) * 2018-06-29 2020-01-07 杭州海康威视数字技术股份有限公司 一种全景环视系统的标定参数优化方法及装置
WO2020030156A1 (zh) * 2018-08-10 2020-02-13 广东虚拟现实科技有限公司 图像处理方法、终端设备及计算机可读介质
AU2018101564A4 (en) * 2018-10-19 2018-12-06 Aunew Management Pty Ltd A unified control system for hybrid surveillance network

Also Published As

Publication number Publication date
CN111652802A (zh) 2020-09-11

Similar Documents

Publication Publication Date Title
JP5740884B2 (ja) 繰り返し撮影用arナビゲーション及び差異抽出のシステム、方法及びプログラム
JP5659304B2 (ja) 画像生成装置および画像生成方法
JP5659305B2 (ja) 画像生成装置および画像生成方法
CN108702445B (zh) 一种图像显示方法、电子设备及计算机可读存储介质
JP5769813B2 (ja) 画像生成装置および画像生成方法
JP5865388B2 (ja) 画像生成装置および画像生成方法
CN109525674B (zh) 一种制作房屋全景图的系统和方法
CN110072087B (zh) 基于3d地图的摄像机联动方法、装置、设备及存储介质
JP2013162487A (ja) 画像表示装置及び撮像装置
CN110602383B (zh) 监控摄像头的位姿调节方法、装置、终端及存储介质
JP2006262030A (ja) 画角調整装置、カメラシステムおよび画角調整方法
CN109600543B (zh) 用于移动设备拍摄全景图像的方法以及移动设备
US20180139361A1 (en) Image displaying system, communication system, and method for image displaying
CN111935408B (zh) 全景图像拍摄方法及系统、电子设备及可读存储介质
CN111652802B (zh) 全景图制作方法、基于全景图的交互方法及装置
JP2016194783A (ja) 画像管理システム、通信端末、通信システム、画像管理方法、及びプログラム
JP2016194784A (ja) 画像管理システム、通信端末、通信システム、画像管理方法、及びプログラム
JP7379785B2 (ja) 3dツアーの比較表示システム及び方法
WO2022036512A1 (zh) 数据处理方法、装置、终端和存储介质
JP6586819B2 (ja) 画像管理システム、画像通信システム、画像管理方法、及びプログラム
CN111242107B (zh) 用于设置空间中的虚拟对象的方法和电子设备
WO2022041013A1 (zh) 控制方法、手持云台、系统及计算机可读存储介质
TW201717605A (zh) 拍照輔助方法及電子裝置
JP6450890B2 (ja) 画像提供システム、画像提供方法、およびプログラム
US20240087157A1 (en) Image processing method, recording medium, image processing apparatus, and image processing system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant